Мы используем cookie-файлы
Для оптимизации работы нашего сайта мы используем cookie-файлы. Продолжая использовать сайт, Вы соглашаетесь с использованием cookie-файлов.
Панель управления
  • Русский
  • Українська
  • UAH
  • USD
  • RUB
  • EUR
  • +38(044) 392-74-33  Киев
  • +38(057) 728-39-00  Харьков
  • +38(056) 794-38-31  Днепр
  • +38(032) 229-58-93  Львов
  • +38(048) 738-57-70  Одесса
  • +38(093) 170-15-42  Life
  • +38(067) 400-88-44  Киевстар
  • +38(095) 630-90-82  Vodafone
  • +1(888)393-24-51  USA, Toll free
  • +44(131)507-01-14  Great Britain
  • +7(499) 348-28-61  Москва

2.34. Блокировка ботов

По умолчанию на хостинге блокируются:

  • Боты, создающие бессмысленную нагрузку на сайт или сканирующие его на наличие уязвимостей.
  • Запросы с IP-адресов, которых мы считаем ботами, у которых клиенты не поддерживают JavaScript.

Список User-Agent, которым ограничен доступ к хостингу (в ответ на запросы они получают ответ 403) и которых нельзя разблокировать:

  1. JDatabaseDriverMysqli
  2. 80legs.com
  3. DLE_Spider.exe
  4. xpymep.exe
  5. libwww-perl
  6. BOT for JCE
  7. coccoc
  8. heritrix
  9. Aibot
  10. exabot.com
  11. butterfly
  12. CareerBot
  13. FTRF
  14. www.exb.de
  15. magpie-crawler
  16. SISTRIX
  17. radian6
  18. BLEXBot
  19. JikeSpider
  20. Sosospider
  21. Attentio
  22. filterdb.iss.net
  23. cmscrawler
  24. tkl.iis.u-tokyo.ac.jp
  25. J-BRO
  26. ApacheBench
  27. meanpathbot
  28. MJ12Bot
  29. IndoXploitTools

Некоторые User-Agent, используемые ботами, блокируются по причине создания бессмысленной нагрузки, но их блокировку можно отключить. Такая возможность доступна для ботов:

  1. SemrushBot
  2. MegaIndex
  3. Dotbot
  4. LTX71
  5. Nmap
  6. velen.io
  7. Re-re Studio
  8. netEstate NE Crawler
  9. statdom.ru
  10. SEOkicks
  11. 7Siters
  12. Seekport Crawler
  13. serpstatbot
  14. panscient.com
  15. ZoominfoBot
  16. SearchAtlas
  17. DuckDuckBot
  18. AwarioRssBot
  19. AwarioSmartBot
  20. NetpeakSpiderBot
  21. GetIntent
  22. ia_archiver
  23. AspiegelBot
  24. WPScan
  25. https://gdnplus.com
  26. DuckDuckGo
  27. ApacheBench
  28. python-requests
  29. BorneoBot
  30. Ahrefs

Чтобы отключить блокировку, в настройках сайта напротив «Не блокировать ботов» выберите ботов, которых не нужно блокировать, и сохраните изменения:

Изменения вступают в силу в течение 10-15 минут с момента сохранения.

Любым другим User-Agent можно самостоятельно ограничивать доступ с помощью директив в .htaccess.