[X] Помощник

[autonew Topic Starter]

В общем у меня была такая задача:

составить Robots.txt, в общем главное закрыть для индексации в Гугле и Яндексе остальные страницы, чтоб только главная была в индексе. Доступность домена, чтоб он был доступен только в одном виде с www или без. Мне нужно без

по совету сделал так:

User-agent: *
Disallow: /
Allow: /$

Host: site.ru

Сегодня после Апа, в Я.Вебмастере к этому сайту пишет:

Ваш сайт не был проиндексирован из-за запрета в файле robots.txt.

Внимание! Главная страница сайта исключена из индекса: Документ запрещен в файле robots.txt .

Глюк пенели или роботс не так настроил?

[Sickboy]

http://help.yandex.ru/webmaster/?id=996567 - почитайте хелп Яндекса.
Там даже ваш пример есть.

Если директивы используются совместно, первой нужно писать "Allow".

Перед тем как что-то делать, всегда нужно все досконально изучить, и только потом приступать. Я понимаю, что хелпы никто никогда не читает, мы русские и все такое. Но в случае с Яндексом хелпы желательно почитать все.

[x64]

Disallow: /

означает запрет индексации сайта (:

[Gulenkov]

означает запрет индексации сайта (:

Абсолютно верно. Разрешить и запретить индексацию в одном файле

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.