X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Указание в Robots.txt
eisventura
eisventura
Topic Starter сообщение 27.4.2010, 23:27; Ответить: eisventura
Сообщение #1


Завсегдатай
*****

Группа: Awaiting Confirmation
Сообщений: 639
Регистрация: 13.12.2008
Поблагодарили: 79 раз
Репутация:   11  


Добрый день. Как правильно оформить запись в robots.txt, чтобы после /url123?asd/ так же не индексировлся.
Писать
Disallow: /url123?abc*
или
Disallow: /*url123?abc


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
werts
werts
сообщение 27.4.2010, 23:35; Ответить: werts
Сообщение #2


Бывалый
****

Группа: User
Сообщений: 349
Регистрация: 29.3.2009
Поблагодарили: 151 раз
Репутация:   21  


Вот что нам пишет яндекс:
Использование спецсимволов "*" и "$".

При указании путей директив Allow-Disallow можно использовать спецсимволы '*' и '$', задавая, таким образом, определенные регулярные выражения. Спецсимвол '*' означает любую (в том числе пустую) последовательность символов. Примеры:
User-agent: Yandex
Disallow: /cgi-bin/*.aspx # запрещает '/cgi-bin/example.aspx'
# и '/cgi-bin/private/test.aspx'
Disallow: /*private # запрещает не только '/private',
# но и '/cgi-bin/private'

Спецсимвол '$'.

По умолчанию к концу каждого правила, описанного в robots.txt, приписывается '*', например:
User-agent: Yandex
Disallow: /cgi-bin* # блокирует доступ к страницам
# начинающимся с '/cgi-bin'
Disallow: /cgi-bin # то же самое

Делаем вывод что правильно будет: Disallow: /url123?abc/*

Сообщение отредактировал werts - 27.4.2010, 23:36


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47533 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 514 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1194 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 696 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 18.12.2017, 15:05
Дизайн