Хостинг. Как реагировать на нагрузку яндекса?

4admin
11 лет
0

Доброго времени суток!
Вопрос больше к поддержке хостинга, но может кто из пользователей подскажет.
В данный момент допустимая нагрузка на ЦПУ 4% (тариф базовый). сайт работает на границе этой нагрузки (+/-) но при посещении роботами яндекса нагрузка возрастает пиково на 28 - 50. Из-за этих "гостей" среднесуточная нагрузка возрастает и я получаю письма о перегрузке :-(
Как правильней поступить так, чтоб не блокировать робота яндекса.

eugen
11 лет
0

Не нужно блокировать робот Яндекса, можно просто попросить его сканировать сайт менее агрессивно. Делается это с помощью директивы Crawl-Delay в robots.txt

Подробное описание этой директивы и как ее использовать: help.yandex.ru/webmaster/?id=996567

4admin
11 лет
0

Спасибо за наводку. Установил параметр на 10 сек. теперь посмотрю на следующем заходе.

Тема закрыта.