X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Помогите написать директиву для robots.txt, Нужно исключить выборочно страницы по маске
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:30; Ответить: Vred
Сообщение #1


Добрый день

Нужно исключить в robots.txt выборочно большое количество страниц.
Они не связаны никаким общим каталогом или расширением, значение переменной для регулярки можно разве что встроить в адрес страницы.

То есть на примере:
Исключаем site.tld/zzz-page-title.html
Оставялем site.tld/page-title.html и все остальные, не содержащие в адресе zzz

Вопрос, можно ли это реализовать. Если можно, то каккую строку надо добавить в robots?

Сразу скажу, что разделение индексируемых и нет материалов по категориям - не вариант.
В одной категории будут материалы как под индексацию, так и запрещенные.
Noindex прописывать тоже не хочу - зачем пустые страницы плодить.


--------------------
Забанен за мошенничество
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:32; Ответить: taxi2008
Сообщение #2


Disallow: /zzz-*

Если еще конкретнее:
Disallow: /zzz-*.html

Если ссылка на страницу имеет вид site.ru/category/zzz-page-title.html, то нужно приписать еще и категорию:
Disallow: /category/zzz-*

ps: шпаргалка по robots.txt (полезная штука), ваш вопрос расматривывается в 5ом пункте

Сообщение отредактировал taxi2008 - 5.3.2013, 15:40


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:38; Ответить: Vred
Сообщение #3


(taxi2008 @ 5.3.2013, 14:32) *
Disallow: /zzz-*.html


Так просто facepalm.gif
А пробел зачем?

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:43; Ответить: taxi2008
Сообщение #4


А пробел зачем?

Да в принципе незачем, это привычка.. как говориться "кому как удобнее" smile.gif

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах

Яндекс об этом тоже позаботился. Пользуемся инструментом проверки robots.txt в панели вебмастера


--------------------
ХОСТИНГ, на котором держу свои сайты
Своим рефералам предоставлю 3 месяца хостинга бесплатно!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Kistochka
Kistochka
сообщение 7.3.2013, 14:05; Ответить: Kistochka
Сообщение #5


Vred, Извените что не в личку пишу, пока нет такой возможности. Я бы хотела вот о чём знать. Обоснуйте пожалуйста. Вы мне поставили минус в репутацию, с сообщением "сказочный клоун". Если уж на то пошло, то не сказочный, а сказочная! Не клоун, а клоуниха. Вопрос к вам, и почему это я сказочная клоуниха? Второй вопрос, можно ли из-за сообщения "сказочная клоуниха" портить девушке репутацию? Ответьте пожалуйста, мистер "неблагородность". Это вас в школе учили хамить девушкам?

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
3 чел. читают эту тему (гостей: 3, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
11 Aloof 2745 Сегодня, 12:48
автор: diviner99
Открытая тема (нет новых ответов) Rebex.io – Ваша инновационная платформа для обмена криптовалюты!
2 Rebex 1162 Вчера, 18:39
автор: Rebex
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
54 arendator 34776 Вчера, 15:16
автор: arendator
Горячая тема (нет новых ответов) ⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами!
83 AdsPower 24381 14.4.2024, 22:52
автор: AdsPower
Горячая тема (нет новых ответов) Настройки лент для wpgrabber
Настрою ленты любой сложности плагина WPGrabber для WordPress
42 zkalinin 30532 11.4.2024, 23:33
автор: zkalinin


 



RSS Текстовая версия Сейчас: 16.4.2024, 16:03
Дизайн