Защо бота проследява css-ите

[entwickler]

Защо бота проследява css-ите? и добре ли е да го спра?

 

[nbsp]

Re: Защо бота проследява css-ите

Ако имаш какво да криеш, можеш да му забраниш.

Вероятно проверяват главно за две неща. Едното от тях е скрито.

Другата вероятност е да следят за линеаризацията на линковете и на кой линк и блок съдържание каква тежест да зачислят. До скоро за това се ползваше линеаризацията в html. Но тъй като с CSS тя лесно се променя, вероятно пичовете в Гугъл искат да имат по-добра система за това.

 

[entwickler]

Re: Защо бота проследява css-ите

ами нямам какво да крия, така че да гледат, но да не вземат да индексират, че това ще е тъпо, то няма никакво интересно за потребителите съдържание там

 

[nbsp]

Re: Защо бота проследява css-ите

Поне за момента не се виждат индексирани CSS файлове.
http://www.google.com/search?q=filetype:css

Не и в основния индекс.

Но в Code можеш да намериш:
http://code.google.com/search/#q=position absolute

 

[entwickler]

Re: Защо бота проследява css-ите

ами те моите са ScriptResource.axd?d=kYWrW52EpBjSPrwlhVl75EKoKlNk7FDe9tVo5e9nV1rqwyjiUgpb2RWewlP7jlDQONiEcer4lXydFc5FvnqjffWRhwF5JGnG_WAvjDl7ABaXgkD1j5P1-7ouK0lPw7GN0&t=2ba6caac
така че не знам и гледам, че има доста индексирани такива
http://www.google.com/search?num=100&hl=en&q=inurl:ScriptResource.axd?&btnG=Search

ще му дам да не гледа такива неща на бота и това е

този синтаксис правилен ли е?
User-Agent: *
Allow: /
Disallow: *.axd$

 

[bgkulinar]

Re: Защо бота проследява css-ите

Disallow: *.axd е правилното. $ ще го приеме като част от УРЛ, не като част от регекспа.

 

[entwickler]

Re: Защо бота проследява css-ите

10x за пореден път