[X] Помощник

[timbrk Topic Starter]

Приветствую!

Итак, ситуация.
Есть site.ru, внутри него еще есть раздел /blog на вордпрессе.
Так вот, сайт индексируется отлично, а записи из блога - понулям в яндексе. В гугле всё ок.
Бегу в Инструменты Яндекса Проверка корректности файла robots.txt, а там:

robots.txt

User-agent: *
Host: site.ru

Disallow: /cgi-bin/
Disallow: /cache/
Disallow: /forum/
Disallow: /includes/
Disallow: /templates_c/
Disallow: /templates/

http://www.site.ru/blog/page/2/ этот URL не принадлежит вашему домену
и всё в таком духе. Я понимаю, что site.ru и www.site.ru не одно и то же, но я же указал host? И мне по большому счёту без разницы будет он с ввв или без, лишь бы все страницы индексировались.

В общем, надо либо привести всё к общему знаменателю, либо научить яндекс индексировать их как один... Но как?

[lousx]

Читаем FAQ

#Пример корректно составленного robots.txt, при обработке
#которого директива Host учитывается
User-Agent: *
Disallow:
Host: www.myhost.ru

#Примеры некорректно составленных robots.txt, при обработке
#которых директива Host может не учитываться
#1.
User-Agent: *
Host: www.myhost.ru

В вашем случает robots.txt составлен не корректно.

Сообщение отредактировал lousx - 5.10.2009, 22:45

[timbrk Topic Starter]

В вашем случает robots.txt составлен не корректно.

Благодарю, исправил.
Но будет ли этого достаточно для решения проблемы?

[lousx]

Обещать не могу, но исходя из полноты описания проблемы этого достаточно.

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.