Форум Хостинг
robots.txt
globaltranslogistic
13.07.2011 17:37
0
У меня стоит в robots.txt
User-agent: *
Crawl-delay: 60

В корне его нет. Я так понимаю он генерится на автомате?
Подскажите пожалуйста, как его изменить?
eugen
13.07.2011 17:48
0
Просто создайте в корне сайта файл с именем robots.txt - и он будет отдаваться вместо файла по умолчанию (User-agent: *, Crawl-delay: 60)
globaltranslogistic
13.07.2011 17:56
0
Файл с именем robots.txt был создан в корне в самом начале - результата 0. Все равно отдает
User-agent: *
Crawl-delay: 60
globaltranslogistic
13.07.2011 18:02
0
Eugen Golubenko - спасибо,проблема решена
Тема закрыта.