ИМХО, где то
1) ссылки битые есть или редирект на редирект, нужно проверить этот момент плагином
2) или же вариант что у страницы или поста есть такая куча чилдов(нужно проверить в страницах есть ли такие)

скорее всего бот просто где то ходит по кругу, у вп никогда не встречал страниц с такой вложенностью.

JamesM12, Этот плагин на сайте установлен. Проверяю на "битые" регулярно, собственно он и сам на мыло присылает извещения. В данном случае дело не в "битых" - их на сайте нет. А вот насчет чайлдов- можно подробнее и про "редирект на редирект"?

Сообщение отредактировал titris - 20.2.2015, 19:49

Насчет чайлдов - у страниц или категорий есть чилды(дочерние элементы, сабкатегории и т.д.) ? Это видно в соответствующем разделе страницы или категории

Редирект на редирект - происходит кривой редирект на страницу где происходит опять редирект, и так в цикле.

я совсем не сео оптимизитор, но разве вложенность как то влияет ? вы сравнивали этот параметр с какими-нибудь другими сайтами на вп ?

Сообщение отредактировал JamesM12 - 21.2.2015, 1:11

JamesM12, Уходим от темы, но вот эксперимент Володи Карпеева, который весьма интересно посмотреть. Вывод vovka.su такой, цитата :

"Стоит всегда задумываться и над тем, что трафикогенерирующие статьи размещать так, чтобы они потом никуда и никак не передвигались вообще, то есть были пожизненно закреплены на одном месте. Только состояние покоя и сдуваем пыль. Это позволит как минимум не рисковать достигнутым эффектом и деньгами, вложенными в продвижение."

А вот рекомендации Rookee, там же приведены рекомендации Яндекса и Google. Сейчас прошелся по сайту паучком NetPeak Spider и выявил, что уровень вложенности даже не такой, как в стартпосте, а равен 32!

Странички на таких уровнях выглядят примерно так :first-woman.ru/2012/09/12/page/category/xobbi-i-uvlecheniya/ , или так: first-woman.ru/2012/11/26/
Утешением для себя считаю, что они все закрыты в роботсе от индексации, как Яшей, так и Гошей. Но количество уровней вложенности от этого не меняется. При этом контент (статьи) находится на 2-м уровне вложенности, т.е. все нормально вроде.

Вот я и думаю, а не зря ли я "замутил" эту тему? Просьба к модераторам перенести ее в раздел "Поисковая оптимизация", если дело здесь совсем не в верстке.

Не понял что вы имели ввиду про "уходим от темы" ... я продолжу Как хорошо что вы знаете что у вас есть такие ссылки, это вы в процессе этой беседы нашли, или изначально знали что они есть, по идее их и в правду не должно быть, и тут как раз может быть проблема в верстке, а может быть и плагине каком-то, кто создает такие ссылки ? Нужно найти рефер перехода на эту страницу, другими словами откуда бот на нее попадает. А от туда уже смотреть как она там появилась, верстка, плагин еще что то ...

JamesM12, Спасибо за пояснения. Про ссылки такого вида first-woman.ru/2014/01/15/ я узнал недавно, недельки 2 назад, когда разбирался с плохим ранжированием, а точнее с тем, что в индексе Яши всего 25% страниц. Тут же закрыл эти ссылки в роботсе с помощью Disallow: *2013/ ну и так далее по годам.

Про ссылки вида first-woman.ru/page/116/ знал изначально и они с самого начала закрыты в роботсе также с помощью Disallow: *page/. На сайте установлен плагин Redirection, но 301 редиректы им я делал только со ссылок типа /krasota-i-zdorove/page/category/krasota-i-zdorove/ на first-woman.ru/krasota-i-zdorove/ и типа того.

Как конкретно найти то, о чем Вы пишете :"найти рефер перехода на эту страницу, другими словами откуда бот на нее попадает. А от туда уже смотреть как она там появилась, верстка, плагин еще что то ... " не понимаю, слишком много страниц. К примеру, по ссылке вида first-woman.ru/2014/03/11/ попадаем на анонс статьи first-woman.ru/kak-uhazhivat-za-chuvstvitelnoj-kozhej/.

Как бы сделать, чтобы страницы с url's вида first-woman.ru/2014/03/11/ вообще убрать с сайта? Наверно надо что-то в теме "подкрутить"? Не возьметесь? Или подождать несколько новых выдач Яши, чтобы убедиться, что количество страниц в выдаче после моих Disallow: *2013/ увеличивается и оставить все как есть?

про это понятно речи не идет, не нормально first-woman.ru/2012/09/12/page/category/xobbi-i-uvlecheniya/

вариантов несколько, самый лобовой ... добавить в index.php что нить типа записи сорса и рефа в лог файл, далее позвать бота и посмотреть где и как он будет ходить, возможны так же вариации с логированием апача или нгинкс, но это план Б

лучше подождать, но следующий шаг я вам уже сказал

JamesM12, URL's вида : first-woman.ru/2012/11/26/ создавались банальным календарем, расположенным в сайдбаре. И это создавало массу частичных дублей на сайте. "Снес" на корню, и поскольку теперь эти УРЛы запрещены к индексации, думаю Яндекс постепенно выкинет их из своего кэша и ситуация стабилизируется.

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.