• UAH
  • USD
  • RUB
  • EUR
  • +38(044) 392-74-33  Киев
  • +38(057) 728-39-00  Харьков
  • +38(056) 794-38-31  Днепр
  • +38(032) 229-58-93  Львов
  • +38(048) 738-57-70  Одесса
  • +38(093) 449-04-21  Life
  • +38(067) 400-88-44  Киевстар
  • +38(095) 630-90-82  MTC
  • +1(888)393-24-51  USA, Toll free
  • +44(131)507-01-14  Great Britain
  • +7(499) 348-28-61  Москва

SEO. Как правильнно закрыть сайт от индекса

Форумы SEO Как правильнно закрыть сайт от индекса
Arturjan
09.02.2011
хостинг: нет
домен: есть
Как правильнно закрыть сайт от индекса
Я правильно сделал?

robots.txt for http://rsd.in.ua/

User-agent: *
Disallow: /rsd.in.ua/ # This is a comment
Disallow: /demo/ # This is a comment
Disallow: /blog/ # This is a comment
Disallow: /forum/ # This is a comment
Disallow: /index.php

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/



Просто яндекс что то индексирует,не понятно что!
Sender
09.02.2011
хостинг: есть
домен: есть
Если Вы хотите полностью закрыть ВЕСЬ сайт:

Достаточно (и более правильно):

User-agent: *
Disallow: /


Можно еще в шапке сайта прописать:

<meta name="robots" content="noindex, nofollow">
Arturjan
09.02.2011
хостинг: нет
домен: есть
Благодарочка))
Arturjan
12.02.2011
хостинг: нет
домен: есть
User-agent: *
Disallow: /

А это правильный способ,потомучто яндекс что то досих пор индексирует
kasyan.sergey
12.02.2011
хостинг: есть
домен: есть
User-agent: Yandex
Disallow: /

дополнительно напишите
Sender
12.02.2011
хостинг: есть
домен: есть
User-agent: * - подразумевает сценарий для ВСЕХ поисковиков(в.т.ч. Яндекс).
Disallow: / - запрет индексирования всего содержимого сайта.

"яндекс что то досих пор индексирует"
Вас не выбросит мгновенно из индекса. Необходимо время. Если сайт есть в яндекс-вебмастре, можно запретить индекс оттуда. Подождите немного. Все заисит от того насколько часто яндекс бот индексирует сайт.


!!!
Уберите с шапки сайта: <meta name="robots" content="index, follow" />
Этим Вы разрешаете индексирование.
Уберите либо замените на:
<meta name="robots" content="noindex, nofollow">
kasyan.sergey
13.02.2011
хостинг: есть
домен: есть
как показывает практика, яндекс тугодум
в роботсе всегда стоит прописывать правила отдельно для яндекса, тем более запрет. читайте справку яндекса, там сказано, что у них уникальный бот.

а еще воспльзуйтесь удалением урлов в яндекс.вебмастере
Arturjan
13.02.2011
хостинг: нет
домен: есть
Та я уже удалил url,только он что то тугодумит ))
Sender
13.02.2011
хостинг: есть
домен: есть
Настоятельно рекомендую убрать с сайта:
<meta name="robots" content="index, follow" />
см. исходный код сайта.
Arturjan
13.02.2011
хостинг: нет
домен: есть
А где именно в index.php шаблона?

Так я ссылку удалил если бы это не работало,то Google про индексировал мой сайт и в яндекс шипеться что типо закрыто - не найдено кучу страниц (только это что то очень долго) url не удален.

Пишет что исключено 532 страницы.
Участвовать в общении на этом форуме могут только
зарегистрированные пользователи.

Если вы уже зарегистрированы Вам необходимо войти на форум.

Тема закрыта по истечению срока давности.
Горячая линия
(044)
392 74 33
другие города