http://dlepro.com/547-seo-dle.html 5й пункт статьи

Закрыть от чего/кого?

От роботов поисковых систем. Я так понимаю, если я хочу закрыть от индексации страницы внутри какой-то категории, то надо вставить в роботс конструкцию вида
Disallow: /category/

или же надо закрывать каждую страницу?

Disallow: /category/123.html

Сразу подумал, что от пользователей.

Да, в роботсе можно просто написать:
Disallow: /ваша категория/

Также рекомендуется закрыать страницы не содержащие нужной, для ПС, информации:
Disallow: /*print
Disallow: /autobackup.php
Disallow: /имя файла админки.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html

и т.д.

Сообщение отредактировал Сергуня - 29.5.2012, 23:31

Если я сделаю так Disallow: /ваша категория/, будут ли учитываться ссылки в статьях, находящихся в этой категории? Также по настроенному чпу все ссылки сайта выводятся, как site.ru/123.html. Как закрыть конкретные страницы, чтобы вес не отдавался? Заранее спасибо!

А это Вам что?



Сообщение отредактировал ostrov - 30.5.2012, 0:14

Выслушаю ещё варианты. Есть ли плагин, который как в вп, выставляешь, например noindex follow и всё, без лазания в роботс каждый раз?

Роботс может закрывать глобально, а прописывать атирубты noindex и nofollow придется многократно. Хотя вы, конечно, можете набросать ТЗ и заказать скрипт, полностью огибающий ваши нужды.

Значит выход 1, делать так на каждую страницу, которую я хочу полностью закрыть от роботов Disallow: /123.html + Disallow: /category/