error code: 403 (forbidden request) ?

[borislav123]

колеги

анализирам 1 сайт с Xenu

защо ми дава за някои линкове

error code: 403 (forbidden request), linked from page(s):

например линка е този

google.co.uk/search?q=domestic

 

[bgkulinar]

За: error code: 403 (forbidden request) ?

За: error code: 403 (forbidden request) ?

Вероятно гугъл отчита автоматизирани заявки и блокира бота.

 

[borislav123]

Re: error code: 403 (forbidden request) ?

хм

само че не са автоматизирани, според мен

???

 

[bgkulinar]

За: error code: 403 (forbidden request) ?

За: error code: 403 (forbidden request) ?

Като пуснеш Ксенуто 100% приличат на автоматизирани заявки.

 

[pgechev]

За: error code: 403 (forbidden request) ?

За: error code: 403 (forbidden request) ?

Xenu прави заявки много на често, което е нормално да се приема за автоматизирано.

 

[borislav123]

Re: error code: 403 (forbidden request) ?

Благодаря ви.