Какъв е този Majestic-12 [Bot]?

[yordanp]

Забелязвам, че сканира сайта ми, можете ли да ми дадете малко инфо за него?

 

[BornToDrink]

Re: Какъв е този Majestic-12 [Bot]?

http://www.majestic12.co.uk/projects/dsearch/mj12bot.php
Явно и фейк такъв има.

 

[yordanp]

Re: Какъв е този Majestic-12 [Bot]?

Дали няма да е по-добре да го забраня?

 

[diabolic.bg]

Re: Какъв е този Majestic-12 [Bot]?

Това ще е най-разумното. Ако направиш малко справки, зад този адрес се оказва фирма, намираща се в един гараж, а ако можеш, ти и вярвай. А пък ботът е агресивен за трима и много не бръсне забраните с robots.txt

Аз съм го блокирал още преди 2 години и нищо не съм изгубил от това.

RewriteCond %{HTTP_USER_AGENT} ^MJ12bot [NC] 
RewriteRule .* - [F,L]

 

[kodbg]

Re: Какъв е този Majestic-12 [Bot]?

А как установи, че нищо не си загубил след като не знаеш какво би могъл да спечелиш???

 

[diabolic.bg]

Re: Какъв е този Majestic-12 [Bot]?

А как установи, че нищо не си загубил след като не знаеш какво би могъл да спечелиш???

Ами намери някъде информация, която този бот е сканирал в твой сайт и я е пуснал като резултати за търсене. Ако ми покажеш такава, ще се съглася, че съм изгубил, а не е дошъл поредният контент скрепер да ме овършее.
Виж какво са си пуснали на сайта -

Като са толкова отворени и ще сринат Гугъл с булдозера, къде им е търсачката?
Предлагат с наше участие да им направим някаква "разпределена" търсачка, нещо като много РС-та обединени за търсене в тяхна полза. Докато те си тъпчат гушите и сриват Гугъл, ти какво ще спечелиш и кой ще ти плати дето си трошиш РС-то заради тях?