X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Корректность Robots.txt
Пуховой
Пуховой
Topic Starter сообщение 28.1.2010, 15:59; Ответить: Пуховой
Сообщение #1


Новичок
*******


Группа: Banned
Сообщений: 3674
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


Добре.

Хотелось бы запретить индексацию страниц вида:
http://test.ru/page1.html/comment-page-16 (страницы комментариев)
http://test.ru/page1.html?replytocom=2621 (ответ на комментарий)
http://test.ru/page1.html/feed (лента)

То есть, в индексе должна висеть только страница http://test.ru/page1.html.

Правильным ли будет подобный robots.txt:

User-agent: *
Disallow: /*replytocom*
Disallow: /*comment-page*
Disallow: /*feed


Заранее спасибо за ответы.
-1
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Twin
Twin
сообщение 28.1.2010, 16:03; Ответить: Twin
Сообщение #2


Частый гость
**

Группа: User
Сообщений: 83
Регистрация: 17.1.2010
Из: Россия, Нижневартовск
Поблагодарили: 23 раза
Репутация:   3  


Проверить можно просто через Яндекс.Вебмастер
Ну я проверил, пишет что закрыты от индексации. Значит правильно составили.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47458 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 484 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1189 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 695 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 14.12.2017, 2:50
Дизайн