Для оптимізації роботи нашого сайту ми використовуємо cookie-файли.
Продовжуючи використовувати сайт, Ви погоджуєтеся з використанням cookie-файлів. Що б дізнатися більше ознайомтеся з розділом
Cookie Policy.
Налаштування сookies
Керування файлами cookie, які використовуються для реклами, таких як персоналізація реклами, ремаркетинг і аналіз ефективності реклами.
Збір та обробка персональних даних користувачів, які можуть бути використані для показу персоналізованих оголошень.
Персоналізація рекламних оголошень на основі активності користувача на сайті.
Керування файлами cookie, які використовуються для аналітики, для збору статистики про відвідування сайту, користувацькі сесії та поведінку.
Керування файлами cookie, які використовуються для персоналізації контенту на сайті, включно з пропозиціями продуктів, рекомендаціями та налаштуванням користувацького інтерфейсу.
Файли cookie, які забезпечують функціональність сайту, наприклад, збереження уподобань користувача (мови, налаштувань тощо) або сесій.
Файли cookie, які використовуються для зберігання даних, повʼязаних із забезпеченням безпеки, наприклад аутентифікацією, запобіганням шахрайству та іншими способами захисту.
Добрый день!
Крайне обидная ситуация, купил доступ Ahrefs для сайта https://stil.com.ua , а робот не может получить доступ и просканить его.
Пишет что не может получить доступ к robots.txt
Техподдержка там жесть
Подскажите пжл что это может быть
karlov 25.06.2020 10:03
2
Попробуйте запустить сканирование, после чего проверьте логи доступа к сайту — https://wiki.ukraine.com.ua/hosting:my-sites:logs#access — и посмотрите, для каких юзер-агентов отдаётся ответ 403.
В разделе «Мои сайты — Настройка сайта» внизу страницы есть опция «Не блокировать ботов» со списком ботов. Если в этом списке есть бот, на запросы которого в момент сканирования возвращался ответ 403, можно будет добавить его в список неблокируемых.
