Мы используем cookie-файлы
Для оптимизации работы нашего сайта мы используем cookie-файлы. Продолжая использовать сайт, Вы соглашаетесь с использованием cookie-файлов.
Панель управления
  • Русский
  • Українська
  • UAH
  • USD
  • RUB
  • EUR
  • 0-800-307-307  Горячая линия
  • +38(044) 392-74-33  Киев
  • +38(057) 728-39-00  Харьков
  • +38(056) 794-38-31  Днепр
  • +38(032) 229-58-93  Львов
  • +38(048) 738-57-70  Одесса
  • +38(093) 170-15-42  Life
  • +38(067) 400-88-44  Киевстар
  • +1(888)393-24-51  USA, Toll free
  • +44(131)507-01-14  Great Britain
  • +7(499) 348-28-61  Москва

2.39. Ограничение частоты индексации

Индексирующие боты производят частые запросы к страницам сайта для актуализации информации и сохранения её в своих базах для последующей выдачи в поисковых системах. Работа этих ботов полезна, но иногда интервал между запросами или частота сканирования могут быть слишком высоки, в связи с чем будет возникать излишняя бесполезная нагрузка.

Для некоторых индексирующих ботов можно настроить ограничения:

Чтобы настроить интервал сканирования страниц (crawl-delay), выполните следующее:
  1. Авторизуйтесь или зарегистрируйтесь, если у вас ещё нет аккаунта, в Google Search Console.
  2. Добавьте и подтвердите домен в этой системе, если он не был подтверждён.
  3. Перейдите на страницу управления настройками частоты сканирования и выберите нужный ресурс:
  4. Установите переключатель напротив «Ограничить максимальную скорость сканирования Google», задайте нужное значение и нажмите «Сохранить»:
Чтобы настроить интервал сканирования страниц (crawl-delay), выполните следующее:
  1. Авторизуйтесь или зарегистрируйтесь, если у вас ещё нет аккаунта, в Яндекс.Вебмастер.
  2. Добавьте и подтвердите домен в этой системе, если он не был подтверждён.
  3. Выберите нужный сайт и перейдите в раздел «Индексирование → Скорость обхода»:
  4. Установите переключатель напротив «Задать вручную», задайте нужное значение и нажмите «Сохранить»: