впервые об этом узнала. Значить дубли - это плохо, их делать не нужно, вопрос как? Это просто не делать таких страниц, или указать яндексу не индексировать эти страницы???

Очень часто встречается такая проблема, но ничуть не реже встречаются дубли и на других ресурсах. Т.е. либо сайт клиента наполняла недобросовестная контора или копирайтер, либо конкуренты и говностроители весь контент скопипастили - это тоже обязательно нужно отсматривать

Практически на всех сайтах на популярном движке DLE такая проблема. + смарт версия сайта. Тоже куча страниц.

выкидывать из индекса и делать так чтобы НЕ существующие страницы отдавали код 404, а не 200


большинство сайтов содержат такую проблему, вне зависимости от движка

и ведь речь только о ЧЕТКИХ дублях, не считая остального


дубли на других сложно контролировать, а вот на своем сайте - обязанность

Смарт версию можно отключить, индексацию принтов запретить, тэги не плодить и уже проще будет.

ТС, всё верно расписал. Практически всё можно в роботсе запретить, и не нужно откладывать это на потом.
Для популярных движков типа DLE есть много примеров того, как правильно составлять роботс, и уже проблем меньше будет.

начать нужно именно с него, а вообще попутно делать и правильный htaccess

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.