Имам нужда от съвет за robots txt

[wood]

Ситуацията е следната...верифицирах в Уебмастер толс сайтмапа. Но от 1184 изпратени е индексиран само 1.
Изписва ми: 1182 грешки и 3532 предупреждения. и следното....
пише че линковете били забранени с robots txt..а по този начин на други мой сайтове няма проблем.

Задал съм в robots txt следното.

User-Agent: *
Disallow:

Sitemap: http://www.site.com/sitemap.xml

От както качих тази тема Травелпрес все имам проблеми, с favicon, с sitemap...

 

[mgrozdanov]

Re: Имам нужда от съвет за robots txt

Това Disallow: не трябва да е така. След него трябва да изпишеш евентуално папка, която да забраниш

Disallow: /admin/

По този начин написано най-вероятно си забранил целия сайт.

 

[wood]

За: Re: Имам нужда от съвет за robots txt

За: Re: Имам нужда от съвет за robots txt

Това Disallow: не трябва да е така. След него трябва да изпишеш евентуално папка, която да забраниш

Disallow: /admin/

По този начин написано най-вероятно си забранил целия сайт.

ОК,

пробвал съм и така:

User-Agent: *
Disallow:/admin/
Allow:/

Ефекта е същият...

 

[mobilio]

За: Имам нужда от съвет за robots txt

За: Имам нужда от съвет за robots txt

Я метни линк на лични да го видим...

 

[NGsan]

За: Имам нужда от съвет за robots txt

За: Имам нужда от съвет за robots txt

За какво ти това Disallow:?

трябва да ти изглежда така

User-agent: *
Allow: /
Sitemap: урл-то на сайтмапа