Въпрос към админите на phpbb форуми

[yordanp]

Как смятате кои файлове е нужно да се забранят в robots.txt за търсачките, да не се индексират в phpbb форума ни?
Предлагам списък, ако някой може да го допълни или отхвърли някой ред.

User-agent: *
Disallow: /forum/admin/
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/language/
Disallow: /forum/templates/
Disallow: /forum/extension.php
Disallow: /forum/news.php
Disallow: /forum/common.htm
Disallow: /forum/config.htm
Disallow: /forum/faq.htm
Disallow: /forum/friend.htm
Disallow: /forum/groupcp.htm
Disallow: /forum/login.htm
Disallow: /forum/memberlist.htm
Disallow: /forum/modcp.htm
Disallow: /forum/posting.htm
Disallow: /forum/privmsg.htm
Disallow: /forum/profile.htm
Disallow: /forum/search.htm
Disallow: /forum/viewonline.htm
Disallow: /forum/watched.htm

 

[docenta]

Re: Въпрос към админите на phpbb форуми

Относно СЕО препоръчват:

Disallow: /memberlist.php
Disallow: /memberlist.php*
Disallow: /search.php
Disallow: /search.php*
Disallow: /ucp.php
Disallow: /ucp.php*
Disallow: /posting.php
Disallow: /posting.php*
Disallow: /report.php
Disallow: /report.php*
Disallow: /viewonline.php
Disallow: /viewforum.php
Disallow: /viewforum.php*
Disallow: /viewtopic.php
Disallow: /viewtopic.php*
Disallow: /download.php
Disallow: /download.php*
Disallow: /*?sid=*
Disallow: /*&sid=*
Disallow: /*?hilit=*
Disallow: /*&hilit=*

 

[scoobydoo]

Re: Въпрос към админите на phpbb форуми

Че това
Disallow: /viewforum.php
Disallow: /viewforum.php*
Disallow: /viewtopic.php
Disallow: /viewtopic.php*
не ти ли блокира всички категории и всички теми, общо взето всичко 🙂

 

[yordanp]

Re: Въпрос към админите на phpbb форуми

Disallow: /viewforum.php
Disallow: /viewforum.php*
Disallow: /viewtopic.php
Disallow: /viewtopic.php*

Това и аз не разбрах, кой го препоръчва?

 

[diabolic.bg]

Re: Въпрос към админите на phpbb форуми

Това и аз не разбрах, кой го препоръчва?

Тази забрана се прави и не пречи, но само в случай, че с mod_rewrite адресите са пренаписани да излизат като .html. Тогава се забраняват рнр адресите, за да няма дублирано съдържание.
Разбира се, ако няма пренаписване, това би било пълна глупост.

 

[bgkulinar]

Re: Въпрос към админите на phpbb форуми

Слагай тия неща и не се занимавай с роботс, ама изобщо.

Да не говорим, че се прецакваш адсенса с така написан роботс.

 

[yordanp]

Re: Въпрос към админите на phpbb форуми

Използвам Sitemap FX и Ultimate SEO mode.
След индексирането от Google се появиха едни и същи страници по 2 пъти с различни линкове (Първоначалния вид и след пренаписването). Как мога да забраня индексирането на първоначалните url-и да останат само вторите, попаднах на 2 мода No duplicate и Zero duplicate, дали някой от тях ще ми свърши работа?
За какво служи "Canonical URL", какво означава затворен тип форум?