robots.txt и блокиране на адрес на кирилица

[cloxy]

Здравейте,

Имам много странен проблем. В един сайт трябва да блокирам българската версия за търсачките. Адресът е нещо от рода на:

http://www.site.com/българия/

Въпростъ ми е във файла robots.txt как да задам адреса:

Disallow: /българия

или

Disallow: /%D0%B1%D1%8A%D0%BB%D0%B3%D0%B0%D1%80%D0%B8%D1%8F

Аз отделно ще си сложа nofollow на връзките. Предварително благодаря

 

[bgkulinar]

Re: robots.txt и блокиране на адрес на кирилица

Защо не пробваш в уебмастер тулс, там веднага можеш да видиш какво се блокира и какво - не.

 

[cloxy]

Re: robots.txt и блокиране на адрес на кирилица

Прав си - ще пробвам. Дано са взели предвид кодировката и наистина е така, както показва.

 

[bgkulinar]

Re: robots.txt и блокиране на адрес на кирилица

Досега каквото съм пробвал, винаги е било ОК. Поне за поведенито на Гугъл бота.

Тук ми хрумва, че можеха да направят допълнителна екстра към този тул, която при определен robots.txt да казва: "These rules apply to these URLs". Нещо подобно на това, когато създаваш филтър в Gmail.

 

[vlnt]

Re: robots.txt и блокиране на адрес на кирилица

Много интересна тема. Последно има ли значение, кое от двете се пише?

 

[cloxy]

Re: robots.txt и блокиране на адрес на кирилица

Последно - за да блокирате адрес на кирилица с robots.txt, трабва да го напишете по втория начин - чрез шестнадесетична кодировка.