X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Помогите написать директиву для robots.txt, Нужно исключить выборочно страницы по маске
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:30; Ответить: Vred
Сообщение #1


Добрый день

Нужно исключить в robots.txt выборочно большое количество страниц.
Они не связаны никаким общим каталогом или расширением, значение переменной для регулярки можно разве что встроить в адрес страницы.

То есть на примере:
Исключаем site.tld/zzz-page-title.html
Оставялем site.tld/page-title.html и все остальные, не содержащие в адресе zzz

Вопрос, можно ли это реализовать. Если можно, то каккую строку надо добавить в robots?

Сразу скажу, что разделение индексируемых и нет материалов по категориям - не вариант.
В одной категории будут материалы как под индексацию, так и запрещенные.
Noindex прописывать тоже не хочу - зачем пустые страницы плодить.


--------------------
Забанен за мошенничество
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:32; Ответить: taxi2008
Сообщение #2


Disallow: /zzz-*

Если еще конкретнее:
Disallow: /zzz-*.html

Если ссылка на страницу имеет вид site.ru/category/zzz-page-title.html, то нужно приписать еще и категорию:
Disallow: /category/zzz-*

ps: шпаргалка по robots.txt (полезная штука), ваш вопрос расматривывается в 5ом пункте

Сообщение отредактировал taxi2008 - 5.3.2013, 15:40


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:38; Ответить: Vred
Сообщение #3


(taxi2008 @ 5.3.2013, 14:32) *
Disallow: /zzz-*.html


Так просто facepalm.gif
А пробел зачем?

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:43; Ответить: taxi2008
Сообщение #4


А пробел зачем?

Да в принципе незачем, это привычка.. как говориться "кому как удобнее" smile.gif

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах

Яндекс об этом тоже позаботился. Пользуемся инструментом проверки robots.txt в панели вебмастера


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Kistochka
Kistochka
сообщение 7.3.2013, 14:05; Ответить: Kistochka
Сообщение #5


Vred, Извените что не в личку пишу, пока нет такой возможности. Я бы хотела вот о чём знать. Обоснуйте пожалуйста. Вы мне поставили минус в репутацию, с сообщением "сказочный клоун". Если уж на то пошло, то не сказочный, а сказочная! Не клоун, а клоуниха. Вопрос к вам, и почему это я сказочная клоуниха? Второй вопрос, можно ли из-за сообщения "сказочная клоуниха" портить девушке репутацию? Ответьте пожалуйста, мистер "неблагородность". Это вас в школе учили хамить девушкам?

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Обучение Email Рассылкам + Софт Для Автоматизации (100к в сутки с сервера)
10 zennoboss 4621 Сегодня, 5:20
автор: Skyworker
Открытая тема (нет новых ответов) Посоветуйте массажер для спины и шеи
9 Boymaster 874 Вчера, 13:56
автор: Vmir
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
14 Aloof 3376 Вчера, 13:50
автор: Vmir
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыЛюблю творить! Статьи для вас
Копирайтинг- моя жизнь!
312 Zoya83 190686 Вчера, 7:51
автор: DimonX
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыСовременный сервис для быстрого и безопасного обмена валют.
15 CryptoTims 4955 22.4.2024, 22:32
автор: CryptoTims


 



RSS Текстовая версия Сейчас: 24.4.2024, 8:10
Дизайн