Ботове на търсещите машини

[Federal]

Здравейте, моля за конкретна информация.

Кои от ботовете трябва са оставя и кои да блокирам, за да не влизат и обхождат напразно.

Буквално се навъдиха около 10-15, които се сменят периодично. Става въпрос за форум.

Има ли начин да разберя, тегли ли се от RSS feed-a ми?

 

[lipa]

За: Ботове на търсещите машини

За: Ботове на търсещите машини

Здравейте, моля за конкретна информация.

Кои от ботовете трябва са оставя и кои да блокирам, за да не влизат и обхождат напразно.

Буквално се навъдиха около 10-15, които се сменят периодично. Става въпрос за форум.

Има ли начин да разберя, тегли ли се от RSS feed-a ми?

Аз съм ги оставил всичките...

 

[Federal]

За: Ботове на търсещите машини

За: Ботове на търсещите машини

Това, че си оставил всичките, не означава, че всички са хубави и полезни.

 

[theivo]

За: Ботове на търсещите машини

За: Ботове на търсещите машини

на някои сайтове съм опитал да огранича всичко друго, освен на Гугъл бота. В един момент се оказва, че единствената полза от останалите е само да ти изразхождат от месечния трафик.

 

[scoobydoo]

Re: Ботове на търсещите машини

Не бих оставил само Гугъл. Има всякакви онлайн услуги и социални мрежи и т.н., които се ползват от хората за да следят сайта ви и т.н. Тоест ще се сбогувате с ваши редовни посетители ако сте толкова строги.
Иначе може в awstats да се видят IP адресите, които имат най-много посещения и са подозрителни и после в raw access логовете да се намерят по IP и да се види кои страници достъпват и какъв им е user agent-а. Ако достъпват само feed-а значи дърпат нещо от там, но това не означава със сигурност че са лоши.