Была похожая ситуация. На одном сайте, у которого в Яше 135000 страниц, в Гугле - более 100 000, робот сапы нашел только 100 страниц. Несколько раз отправлял на переиндексацию, но ничего не менялось.

Тогда нашел советы, что для лучшей индексации желательно создать сайтмепы. Создал 10 саймепов по 5000 страниц. Причем не в xml, a html закачал их на сайт, а с главной сделал ссылки на эти файлы.

Еще раз отправил на переиндексацию и в итоге получил более 1700 проиндексированных роботом сапы страниц.

Т.е. Вам нужно подсказать роботу сапы, как найти страницы на вашем сайте. Мой вариант - один из таких способов.

Создай карту сайта, на карту поставь ссылку с главной странички, все что дальше станут ув 3

Все очень просто парни, вот ответы на все ваши вопросы.

1. Считайте уровень вложенности страниц, в сапу берут только страницы не ниже 3 уровня. Как сделать сделать все записи/страницы сайта не ниже 3 уровня? Легко, создаем с помощью плагина карту сайта в одном клике от главной.

2. У меня в индексе 1000 страниц а сапа нашла только 262! Фигасе! Как не хорошо! )))) Этому тоже есть объяснения.
Когда вы создаете запись в WP для каждой записи указываете несколько меток, на каждую метку создается своя отдельная страница. Страница получается далеко не 3 уровня (почти все метки идут уровнем ниже, кроме тех которые через симплтэгс выводятся на главной). Вот поэтому и получается такое разногласие Site Auditor показывает одно, а сапа находит другое.

Считайте общее количество ваших страниц/записей + кол-во меток выведенных на главную+количество рубрик на главной= количество страниц котореы проиндексит сапа. Всег очень легко и просто.

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.

Сообщение отредактировал cmygeHT - 16.2.2009, 14:27