X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Проблемы с robots.txt, помогите))))
autonew
autonew
Topic Starter сообщение 1.12.2011, 14:02; Ответить: autonew
Сообщение #1


Прогоны двигающие в ТОП
******

Группа: Active User
Сообщений: 1028
Регистрация: 2.10.2010
Из: 15.12.19.87
Поблагодарили: 242 раза
Репутация:   70  


В общем у меня была такая задача:
составить Robots.txt, в общем главное закрыть для индексации в Гугле и Яндексе остальные страницы, чтоб только главная была в индексе. Доступность домена, чтоб он был доступен только в одном виде с www или без. Мне нужно без

по совету сделал так:
User-agent: *
Disallow: /
Allow: /$

Host: site.ru

Сегодня после Апа, в Я.Вебмастере к этому сайту пишет:
Ваш сайт не был проиндексирован из-за запрета в файле robots.txt.

Внимание! Главная страница сайта исключена из индекса: Документ запрещен в файле robots.txt .

Глюк пенели или роботс не так настроил?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Sickboy
Sickboy
сообщение 1.12.2011, 14:48; Ответить: Sickboy
Сообщение #2


Эффективное SEO
*****

Группа: Active User
Сообщений: 900
Регистрация: 18.11.2010
Из: Интернета
Поблагодарили: 624 раза
Репутация:   98  


http://help.yandex.ru/webmaster/?id=996567 - почитайте хелп Яндекса.
Там даже ваш пример есть.

Если директивы используются совместно, первой нужно писать "Allow".

Перед тем как что-то делать, всегда нужно все досконально изучить, и только потом приступать. Я понимаю, что хелпы никто никогда не читает, мы русские и все такое. Но в случае с Яндексом хелпы желательно почитать все.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 1.12.2011, 14:52; Ответить: x64
Сообщение #3


F.A.L.L.O.U.T.
*******

Группа: Super Moderator
Сообщений: 3432
Регистрация: 30.6.2011
Из: Железнодорожный (Балашиха)
Поблагодарили: 2750 раз
Репутация:   289  


(autonew @ 1.12.2011, 14:02) *
Disallow: /

означает запрет индексации сайта (:


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Gulenkov
Gulenkov
сообщение 1.12.2011, 15:53; Ответить: Gulenkov
Сообщение #4


Новичок
*

Группа: User
Сообщений: 16
Регистрация: 26.9.2011
Поблагодарили: 1 раз
Репутация:   0  


(x64 @ 1.12.2011, 13:52) *
означает запрет индексации сайта (:

Абсолютно верно. Разрешить и запретить индексацию в одном файле smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47529 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 514 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) Проблемы с merchant.webmoney.ru
4 deather 582 12.10.2017, 15:46
автор: phoenix_kys
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1194 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty


 



RSS Текстовая версия Сейчас: 18.12.2017, 11:12
Дизайн