Хостинг Украина — хостинг и регистрация доменов

Круглосуточная консультация
(044) 392-74-33  Киев
(057) 728-39-00  Харьков
(056) 794-38-31  Днепропетровск
(062) 210-24-93  Донецк
(032) 229-58-93  Львов
(048) 738-57-70  Одесса
(068) 357-18-70  Beeline
(093) 585-42-13  Life
(067) 883-97-94  Kyivstar
(095) 332-15-19  MTC
ukraine_support  Skype
+7(495) 640-47-42  Москва
→  Хостинг →  Регистрация доменов →  VPS / VDS →  Выделенные сервера →  Техподдержка →  FAQ →  Форум →  Контакты

SEO - Как правильнно закрыть сайт от индекса

Форумы / SEO / Как правильнно закрыть сайт от индекса

Новая тема    Рейтинг    Поиск
1pochta
отправлено: 09.02.2011 20:46
хостинг: нет
домен: есть
Как правильнно закрыть сайт от индекса
Я правильно сделал?

robots.txt for http://rsd.in.ua/

User-agent: *
Disallow: /rsd.in.ua/ # This is a comment
Disallow: /demo/ # This is a comment
Disallow: /blog/ # This is a comment
Disallow: /forum/ # This is a comment
Disallow: /index.php

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/



Просто яндекс что то индексирует,не понятно что!
Sender
отправлено: 09.02.2011 21:01
хостинг: есть
домен: есть
Если Вы хотите полностью закрыть ВЕСЬ сайт:

Достаточно (и более правильно):

User-agent: *
Disallow: /


Можно еще в шапке сайта прописать:

<meta name="robots" content="noindex, nofollow">
1pochta
отправлено: 09.02.2011 21:35
хостинг: нет
домен: есть
Благодарочка))
1pochta
отправлено: 12.02.2011 18:16
хостинг: нет
домен: есть
User-agent: *
Disallow: /

А это правильный способ,потомучто яндекс что то досих пор индексирует
kasyan.sergey
отправлено: 12.02.2011 20:36
хостинг: есть
домен: есть
User-agent: Yandex
Disallow: /

дополнительно напишите
Sender
отправлено: 12.02.2011 23:40
хостинг: есть
домен: есть
User-agent: * - подразумевает сценарий для ВСЕХ поисковиков(в.т.ч. Яндекс).
Disallow: / - запрет индексирования всего содержимого сайта.

"яндекс что то досих пор индексирует"
Вас не выбросит мгновенно из индекса. Необходимо время. Если сайт есть в яндекс-вебмастре, можно запретить индекс оттуда. Подождите немного. Все заисит от того насколько часто яндекс бот индексирует сайт.


!!!
Уберите с шапки сайта: <meta name="robots" content="index, follow" />
Этим Вы разрешаете индексирование.
Уберите либо замените на:
<meta name="robots" content="noindex, nofollow">
kasyan.sergey
отправлено: 13.02.2011 08:38
хостинг: есть
домен: есть
как показывает практика, яндекс тугодум
в роботсе всегда стоит прописывать правила отдельно для яндекса, тем более запрет. читайте справку яндекса, там сказано, что у них уникальный бот.

а еще воспльзуйтесь удалением урлов в яндекс.вебмастере
1pochta
отправлено: 13.02.2011 13:01
хостинг: нет
домен: есть
Та я уже удалил url,только он что то тугодумит ))
Sender
отправлено: 13.02.2011 18:53
хостинг: есть
домен: есть
Настоятельно рекомендую убрать с сайта:
<meta name="robots" content="index, follow" />
см. исходный код сайта.
1pochta
отправлено: 13.02.2011 18:56
хостинг: нет
домен: есть
А где именно в index.php шаблона?

Так я ссылку удалил если бы это не работало,то Google про индексировал мой сайт и в яндекс шипеться что типо закрыто - не найдено кучу страниц (только это что то очень долго) url не удален.

Пишет что исключено 532 страницы.
Участвовать в общении на этом форуме могут только
зарегистрированные пользователи.

Если вы уже зарегистророваны Вам необходимо войти на форум.

Тема закрыта по истечению срока давности.
Горячая линия
(044) 392 74 33 круглосуточно
другие города
Copyright © 2006—2012 ООО "Хостинг «Украина»"

Все материалы данного сайта являются объектами авторского права
Запрещается копирование, распространение или любое иное использование информации и объектов без письменного согласия правообладателя.

www.megastock.ru
Идёт обновление информации, подождите...