X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Помогите написать директиву для robots.txt, Нужно исключить выборочно страницы по маске
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:30; Ответить: Vred
Сообщение #1


Добрый день

Нужно исключить в robots.txt выборочно большое количество страниц.
Они не связаны никаким общим каталогом или расширением, значение переменной для регулярки можно разве что встроить в адрес страницы.

То есть на примере:
Исключаем site.tld/zzz-page-title.html
Оставялем site.tld/page-title.html и все остальные, не содержащие в адресе zzz

Вопрос, можно ли это реализовать. Если можно, то каккую строку надо добавить в robots?

Сразу скажу, что разделение индексируемых и нет материалов по категориям - не вариант.
В одной категории будут материалы как под индексацию, так и запрещенные.
Noindex прописывать тоже не хочу - зачем пустые страницы плодить.


--------------------
Забанен за мошенничество
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:32; Ответить: taxi2008
Сообщение #2


Disallow: /zzz-*

Если еще конкретнее:
Disallow: /zzz-*.html

Если ссылка на страницу имеет вид site.ru/category/zzz-page-title.html, то нужно приписать еще и категорию:
Disallow: /category/zzz-*

ps: шпаргалка по robots.txt (полезная штука), ваш вопрос расматривывается в 5ом пункте

Сообщение отредактировал taxi2008 - 5.3.2013, 15:40


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:38; Ответить: Vred
Сообщение #3


(taxi2008 @ 5.3.2013, 14:32) *
Disallow: /zzz-*.html


Так просто facepalm.gif
А пробел зачем?

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:43; Ответить: taxi2008
Сообщение #4


А пробел зачем?

Да в принципе незачем, это привычка.. как говориться "кому как удобнее" smile.gif

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах

Яндекс об этом тоже позаботился. Пользуемся инструментом проверки robots.txt в панели вебмастера


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Kistochka
Kistochka
сообщение 7.3.2013, 14:05; Ответить: Kistochka
Сообщение #5


Vred, Извените что не в личку пишу, пока нет такой возможности. Я бы хотела вот о чём знать. Обоснуйте пожалуйста. Вы мне поставили минус в репутацию, с сообщением "сказочный клоун". Если уж на то пошло, то не сказочный, а сказочная! Не клоун, а клоуниха. Вопрос к вам, и почему это я сказочная клоуниха? Второй вопрос, можно ли из-за сообщения "сказочная клоуниха" портить девушке репутацию? Ответьте пожалуйста, мистер "неблагородность". Это вас в школе учили хамить девушкам?

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыСовфед предлагает замедлить YouTube для россиян
18 seostock 593 Вчера, 19:10
автор: Freedo
Открытая тема (нет новых ответов) Андроид приставка для телевизора
19 zyzy 719 Вчера, 10:19
автор: EvilGomel
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыGAMBLING.pro - СРА-сеть для профи
70 Gamblingpro 17827 5.5.2021, 12:56
автор: Gamblingpro
Открытая тема (нет новых ответов) Подскажите контекстные сети для монетизации трафика
Не Adsense и не РСЯ
5 Porsche 1077 5.5.2021, 1:16
автор: Ostromir
Горячая тема (нет новых ответов) Socialkit - Программа для продвижения аккаунтов Инстаграм
67 socialkit 11552 4.5.2021, 22:36
автор: socialkit


 



RSS Текстовая версия Сейчас: 7.5.2021, 2:57
Дизайн