Доменні імена. Web редирект и Robots.txt

metel1
13 років
0
Здравствуйте,

я установил ведредирект (прямой редирект) для одного из моих домайнов, но оказывается что на первычный домайн установлен такой robots.txt, что нельзя использовать этот домайн, потому что не будет учитыван от Яндекс и Yahoo.
-----
User-agent: Slurp
Disallow: /

User-agent: Yandex
Disallow: /

User-agent: *
Disallow:
----------
Можно это поведение как-то поменять?
Спасибо!

Виктор
Sender
13 років
0
удалите Robots.txt
Или запретите только не нужные директории.
metel1
13 років
0
Простите, я не говорю о Хостинге. Это только домайн и тот robots.txt, это такой стандартный от ukraine.com.ua и я либо не могу изменить это либо не нахожу настройку (разумеется, что ftp доступа нет). Я только узнал об этом потому что Яндекс.Вебмастер мне говорил, что нельзя индексировать сайт и потом я лично проверил с "curl -I domain/robots.txt" и получил этот robots.txt.
87toqwyegf
13 років
0
У вас в папке сайта лежит файл robots.txt. Перепроверьте
metel1
13 років
0
Опять: либо я что-то не понял либо не правильно объяснил.
У нас базовой пакет (то есть макс. два домайна в хостинге) для хостинга и ещё четыре домайна. Один домайн в хостинге, остальные перенаправляют на разные разделы главного сайта.
По правилам я не имею ftp доступ если у меня только домайны. Если всё-таки есть, тогда скажите пожалуйста как, иначе я не могу зайти в папку!
Sender
13 років
0
Проверьте файл Robots.txt (который на хостинге).
Там Вы и увидите строки которые писали в первом сообщении.

Да, и еслы Вы установили "прямой редирект" (301 Moved Permanently),то ни яндекс ни гугл не будут индексировать этот домен (который перенаправляет) что бы там не находилось...

Если не поможет - дайте ссылки на сайты и домены.
metel1
13 років
0
Владимир!
Сколько раз я должен повторять, что я не имею ftp доступ к этим домайнам! И Яндекс и Yahoo (Google это не касается) отказывают следить ссылками, вот это проблема.
Вот смотрите сами:
http://www.runo-agro.com/robots.txt
Домайн перенаправления без ftp доступа
http://www.сельхозтехника.com.ua/robots.txt или
http://www.xn--80ajahgmdsg1ap7ae6g.com.ua/robots.txt
Sender
13 років
0
>>"сколько раз я должен повторять, что я не имею ftp доступ к этим домайнам!"
Я имел ввиду основной сайт, а не домены. Теперь увидев ссылки вижу что там все нормально.

>>"И Яндекс и Yahoo (Google это не касается) отказывают следить ссылками, вот это проблема."

ПОВТОРЯЮСЬ:
Еслы Вы установили "прямой редирект" (301 Moved Permanently),то ни яндекс ни гугл и никто НЕ БУДЕТ индексировать этот домен (который перенаправляет) что бы там не находилось... Там попросту нечего индексировать. Это пустой лист. Там нет никаких ссылок. Поисковики будут сканировать только тот сайт, на который перенаправляет редирект.

Прочтите что делает редирект 301 Moved Permanently.
Если Вы хотите чтобы поисковики индексировали "дополнительные" домены - укажите их как алиасы в настройках основного сайта.
Тема закрита.