X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Яндекс вообще robots.txt учитывает?
MisterAlex
MisterAlex
Topic Starter сообщение 15.7.2013, 17:53; Ответить: MisterAlex
Сообщение #1


Подскажите, раздел сайта закрыт в роботсе

User-agent: Yandex
Disallow: /razdel/

Но страницы site/statyi/razdel/post1 , например, спокойно заходят в индекс. Как так-то?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Hallboy222
Hallboy222
сообщение 15.7.2013, 17:54; Ответить: Hallboy222
Сообщение #2


В апдейт вылетит. Спокойно.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 15.7.2013, 17:57; Ответить: x64
Сообщение #3


туц
По умолчанию к концу каждого правила, описанного в robots.txt, приписывается '*', например:

получается, под адрес site/statyi/razdel/post1 правило /razdel/ не подходит
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
MisterAlex
MisterAlex
Topic Starter сообщение 15.7.2013, 18:00; Ответить: MisterAlex
Сообщение #4


Сидит уже больше месяца страница... И ссылочное с нее учитывается...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
RSmile
RSmile
сообщение 15.7.2013, 18:40; Ответить: RSmile
Сообщение #5


MisterAlex, в комменте выше вам же написали, что надо писать: /razdel/*


--------------------
Безлимитный SSD-Хостинг. Рекомендую! Месяц бесплатно!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Alsally
Alsally
сообщение 15.7.2013, 18:51; Ответить: Alsally
Сообщение #6


У вас не правильный синтаксис
В вашем случае нужно так

User-agent: Yandex
Disallow: *razdel*

А вообще, в яндекс.вебмастере есть проверка работы файла роботс.тхт
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rom_4
rom_4
сообщение 15.7.2013, 21:15; Ответить: rom_4
Сообщение #7


надо убрать слеш в конце, сейчас вы закрываете папку раздел, но не урл. вообще в явебмастере есть инструмент проверки правильности роботса, в реальном времени. сделал правку - посмотрел, понравилось - внес уже на сайте. http://webmaster.yandex.ru/robots.xml


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Esite
Esite
сообщение 17.7.2013, 15:25; Ответить: Esite
Сообщение #8


(MisterAlex @ 15.7.2013, 18:53) *
Disallow: /razdel/

Дак yandex и не будет индексировать эту папку "razdel" но её и не существует. Он понимает, что она находится в корневой директории сайта, а /statyi/razdel/ это другая папка на которую нет запретов вот и хавает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Дэймон
Дэймон
сообщение 17.7.2013, 17:41; Ответить: Дэймон
Сообщение #9


Пропишите правильно правила и если очень срочно нужно удалить какие то страницы - воспользуйтесь формой http://webmaster.yandex.ru/delurl.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Linkfeedsupport
Linkfeedsupport
сообщение 22.7.2013, 14:28; Ответить: Linkfeedsupport
Сообщение #10


User-agent: Yandex
Disallow: *razdel*

Наверное самый оптимальный вариант решения, но тут главное, чтоб не было на сайте нужных урлов, в которых встречается razdel. Если такие есть, то их надо разрешить к индексации.


--------------------
Биржа ссылок linkfeed.ru
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Аналоги Яндекс Директ
3 kuz999 1718 26.3.2024, 14:12
автор: knezevolk
Открытая тема (нет новых ответов) Atlantic 2.0 - для безлимитного решения кликами Recaptcha и кликовой капчи Яндекс
3 waterworld 1617 14.3.2024, 12:29
автор: waterworld
Открытая тема (нет новых ответов) Где дешевле клики в Яндекс.Директ или Таргет ВК?
2 rownong27 1003 18.2.2024, 9:49
автор: rownong27
Открытая тема (нет новых ответов) Как в Яндекс.Директ задать для компании дневное ограничение бюджета?
0 rownong27 1013 16.2.2024, 16:18
автор: rownong27
Открытая тема (нет новых ответов) 0:00 / 19:46 TermiDroidNetwork накрутка ПФ Яндекс/Google в сети обмена визитами
1 waterworld 1176 31.1.2024, 14:25
автор: waterworld


 



RSS Текстовая версия Сейчас: 19.4.2024, 13:52
Дизайн