lokir, всё индексирует и яндекс. Только не всё выкладывается на всеобщее обозрение в индекс. Если стоит мега-тег noindex, то эта страница в индекс не попадёт. Конспиралогия по поводу глобального сбора инфы, в рамках данной темы, не интересна.
Меня интересуют правила ПС, чтобы их выполнить и не попасть под АГС.

Vamerah, по п.1 - если внимательно посмотрите, то заметите, что в адресе page1 отсутствует имя категории. Значит запрет в роботс на этот адрес не действует.
Я знает nofollow. Об этом была даже спец. новость от яндекса.

По п.3 узнал новую информацию. Оказывается, в мета-теге robots кроме index/noindex есть ещё follow/nofollow.
Теперь п.3 всё стало понятнее. Если стоит <meta name="robots" content="noindex,follow" />, то сама страница категории в индекс не попадёт и дублирования контента не будет. А для ссылок, расположенных на странице категории будет действовать follow, т.е. ходить по ссылкам!

Остался непонятным вопрос по п.2. Если ссылка на категорию везде (в меню и в других местах сайта) закрыта в nofollow и внешних ссылок на неё нет, попадёт ли страница категории и статьи, на которые она ссылается, в индекс Я и Г?

stopo4ek, да, возможно не так выразился.
я имел ввиду что запреты например в файле robots на яндекс действуют, он конечно индексирует материал, но в поиск его не выкладывает, а вот google индексирует и выкладывает даже запрещенное

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.