X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Помогите написать директиву для robots.txt, Нужно исключить выборочно страницы по маске
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:30; Ответить: Vred
Сообщение #1


мошенник
*****

Группа: Banned
Сообщений: 679
Регистрация: 19.6.2012
Из: Украина
Поблагодарили: 314 раз
Репутация:   53  


Добрый день

Нужно исключить в robots.txt выборочно большое количество страниц.
Они не связаны никаким общим каталогом или расширением, значение переменной для регулярки можно разве что встроить в адрес страницы.

То есть на примере:
Исключаем site.tld/zzz-page-title.html
Оставялем site.tld/page-title.html и все остальные, не содержащие в адресе zzz

Вопрос, можно ли это реализовать. Если можно, то каккую строку надо добавить в robots?

Сразу скажу, что разделение индексируемых и нет материалов по категориям - не вариант.
В одной категории будут материалы как под индексацию, так и запрещенные.
Noindex прописывать тоже не хочу - зачем пустые страницы плодить.


--------------------
Забанен за мошенничество
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:32; Ответить: taxi2008
Сообщение #2


Старожил
******

Группа: Active User
Сообщений: 2034
Регистрация: 29.7.2008
Из: Нефтекамск
Поблагодарили: 470 раз
Репутация:   114  


Disallow: /zzz-*

Если еще конкретнее:
Disallow: /zzz-*.html

Если ссылка на страницу имеет вид site.ru/category/zzz-page-title.html, то нужно приписать еще и категорию:
Disallow: /category/zzz-*

ps: шпаргалка по robots.txt (полезная штука), ваш вопрос расматривывается в 5ом пункте

Сообщение отредактировал taxi2008 - 5.3.2013, 15:40


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vred
Vred
Topic Starter сообщение 5.3.2013, 15:38; Ответить: Vred
Сообщение #3


мошенник
*****

Группа: Banned
Сообщений: 679
Регистрация: 19.6.2012
Из: Украина
Поблагодарили: 314 раз
Репутация:   53  


(taxi2008 @ 5.3.2013, 14:32) *
Disallow: /zzz-*.html


Так просто facepalm.gif
А пробел зачем?

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
taxi2008
taxi2008
сообщение 5.3.2013, 15:43; Ответить: taxi2008
Сообщение #4


Старожил
******

Группа: Active User
Сообщений: 2034
Регистрация: 29.7.2008
Из: Нефтекамск
Поблагодарили: 470 раз
Репутация:   114  


А пробел зачем?

Да в принципе незачем, это привычка.. как говориться "кому как удобнее" smile.gif

Я вроде поковырялся в статьях по роботсу, где регулярки описаны, но остался не уверен в выводах

Яндекс об этом тоже позаботился. Пользуемся инструментом проверки robots.txt в панели вебмастера


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Kistochka
Kistochka
сообщение 7.3.2013, 14:05; Ответить: Kistochka
Сообщение #5


клоновод
*

Группа: Banned
Сообщений: 9
Регистрация: 6.3.2013
Поблагодарили: 5 раз
Репутация:   -2  


Vred, Извените что не в личку пишу, пока нет такой возможности. Я бы хотела вот о чём знать. Обоснуйте пожалуйста. Вы мне поставили минус в репутацию, с сообщением "сказочный клоун". Если уж на то пошло, то не сказочный, а сказочная! Не клоун, а клоуниха. Вопрос к вам, и почему это я сказочная клоуниха? Второй вопрос, можно ли из-за сообщения "сказочная клоуниха" портить девушке репутацию? Ответьте пожалуйста, мистер "неблагородность". Это вас в школе учили хамить девушкам?

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Конкурс-квест для криптоманов (500 usd)
Отыщи зашифрованные фразы на картинке и выиграй деньги
9 kursexpert 1758 Сегодня, 11:46
автор: kursexpert
Открытая тема (нет новых ответов) В России могут создать "белый VPN" для добросовестных ресурсов
1 seostock 734 Вчера, 23:49
автор: VBin
Открытая тема (нет новых ответов) Копирайтер для постоянной работы (девушкам), 50 руб/1000
тематика - бьюти, уход за телом, косметика, маникюр...
5 genjnat 1274 Вчера, 13:25
автор: genjnat
Горячая тема (нет новых ответов) Помогите, пожалуйста, моей дочери выжить!
благотворительный топик
30 vitvirtual 3723 Вчера, 8:30
автор: vitvirtual
Открытая тема (нет новых ответов) 90 статейных ссылок. Хорошие доноры для вашего сайта.
9 blogprogon 358 18.5.2018, 16:48
автор: 26rus


 



RSS Текстовая версия Сейчас: 20.5.2018, 16:04
Дизайн