spider04.yandex.ru

[Pashka Korchagin]

spider04.yandex.ru третий день перегружает хостинг, что это за бот? Прописал в robots.txt Crawl-delay: 5, не реагирует.

 

[BuxarNET]

Очевидно что бот поисковика яндекса, а вот чкак он умудряется перегружать, нужно разбераться что он там делает