Яндекс постоянно находит другу релевантную страницу, мне уже надоело все их закрывать по одной, как закрыть все сразу, кроме необходимой? Гугл вроде такой фигней не мается, может для каждого робота отдельно указать команды? У меня сейчас так: User-agent: *

Основная ссылка: сайт.ком.юа/моя_ссылка.хтмл
Яша постоянно находит алтернативу типа:

Disallow: /?p=*
Disallow: /index.php?p=*
Disallow: /index.html?p=*
Disallow: /main.php$
Disallow: /main.php?p=5
Disallow: /?from=0&p=5
Disallow: /main.php?from=0&p=5

Они являются дублями основной или частью каталога который имеется на этой странице.

ЗЫ
Можно как-то оптимизировать такой код в роботс.тхт?

Сообщение отредактировал Arlekino - 29.4.2013, 13:11