X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Помогите написать директиву для robots.txt, Нужно исключить выборочно страницы по маске
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:30; Ответить: Vred
Сообщение #1


мошенник
*****

Группа: Banned
Сообщений: 679
Регистрация: 19.6.2012
Из: Украина
Поблагодарили: 314 раз
Репутация:   53  


Добрый день

Нужно исключить в robots.txt выборочно большое количество страниц.
Они не связаны никаким общим каталогом или расширением, значение переменной для регулярки можно разве что встроить в адрес страницы.

То есть на примере:
Исключаем site.tld/zzz-page-title.html
Оставялем site.tld/page-title.html и все остальные, не содержащие в адресе zzz

Вопрос, можно ли это реализовать. Если можно, то каккую строку надо добавить в robots?

Сразу скажу, что разделение индексируемых и нет материалов по категориям - не вариант.
В одной категории будут материалы как под индексацию, так и запрещенные.
Noindex прописывать тоже не хочу - зачем пустые страницы плодить.


--------------------
Забанен за мошенничество
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:32; Ответить: taxi2008
Сообщение #2


Оптимизатор
******

Группа: Active User
Сообщений: 2034
Регистрация: 29.7.2008
Поблагодарили: 470 раз
Репутация:   114  


Disallow: /zzz-*

Если еще конкретнее:
Disallow: /zzz-*.html

Если ссылка на страницу имеет вид site.ru/category/zzz-page-title.html, то нужно приписать еще и категорию:
Disallow: /category/zzz-*

ps: шпаргалка по robots.txt (полезная штука), ваш вопрос расматривывается в 5ом пункте

Сообщение отредактировал taxi2008 - 5.3.2013, 15:40


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:38; Ответить: Vred
Сообщение #3


мошенник
*****

Группа: Banned
Сообщений: 679
Регистрация: 19.6.2012
Из: Украина
Поблагодарили: 314 раз
Репутация:   53  


(taxi2008 @ 5.3.2013, 14:32) *
Disallow: /zzz-*.html


Так просто facepalm.gif
А пробел зачем?

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:43; Ответить: taxi2008
Сообщение #4


Оптимизатор
******

Группа: Active User
Сообщений: 2034
Регистрация: 29.7.2008
Поблагодарили: 470 раз
Репутация:   114  


А пробел зачем?

Да в принципе незачем, это привычка.. как говориться "кому как удобнее" smile.gif

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах

Яндекс об этом тоже позаботился. Пользуемся инструментом проверки robots.txt в панели вебмастера


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Kistochka
Kistochka
сообщение 7.3.2013, 14:05; Ответить: Kistochka
Сообщение #5


клоновод
*

Группа: Banned
Сообщений: 9
Регистрация: 6.3.2013
Поблагодарили: 5 раз
Репутация:   -2  


Vred, Извените что не в личку пишу, пока нет такой возможности. Я бы хотела вот о чём знать. Обоснуйте пожалуйста. Вы мне поставили минус в репутацию, с сообщением "сказочный клоун". Если уж на то пошло, то не сказочный, а сказочная! Не клоун, а клоуниха. Вопрос к вам, и почему это я сказочная клоуниха? Второй вопрос, можно ли из-за сообщения "сказочная клоуниха" портить девушке репутацию? Ответьте пожалуйста, мистер "неблагородность". Это вас в школе учили хамить девушкам?


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Чем сжимать картинки для сайта без потери качества
1st-finstep.ru - Заработок в сети и методы продвижения сайта
3 komarik_vlad 492 Вчера, 23:46
автор: komarik_vlad
Открытая тема (нет новых ответов) Проги для редактирования style.css
13 minutkin 894 Вчера, 20:11
автор: docdie
Открытая тема (нет новых ответов) Ищу платёжный агрегатор для работы с физ. лизами (не ИП)
12 SergeiVL 2220 Вчера, 16:50
автор: BestExchangers
Открытая тема (нет новых ответов) Какой движок форума для таких целей вы бы поставили?
Критерии в теме
0 landis 201 Вчера, 15:30
автор: landis
Открытая тема (нет новых ответов) Как включить автоматическое обновление для плагинов WordPress и самого движка?
0 Telnor 324 Вчера, 13:27
автор: Telnor


 



RSS Текстовая версия Сейчас: 11.12.2017, 5:52
Дизайн