X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Стоит ли метки заносить в Robots.txt, если они облегчают навигацию на сайте?, Сайт попал под АГС, ищу причины
plenum
plenum
Topic Starter сообщение 1.4.2010, 14:10; Ответить: plenum
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 294
Регистрация: 13.4.2009
Поблагодарили: 105 раз
Репутация:   11  


Здравствуйте, уважаемые форумчане.

Один из моих сайтов попал под АГС, контент уникальный, ссылки не продаются. На сайте таксономия реализована следующим образом: каждая запись относится к одному из трех разделов.
То есть все материалы причисляются к типу записи (новости, фото, видео, обзоры и тд), к марке автомобиля (Honda, BMW и тд), а также к месяцу создания. Сайт сделан на WP, то есть все выгладит так:
Категории: новости, фото, видео, обзоры и тд
Метки: Honda, BMW и тд
Архив: Январь, Февраль, Март, Апрель и тд

На сайте контента не так много, около 30 материалов. Я предполагаю, что сайт попал под АГС из-за дублирования контента внутри сайта (robots.txt сейчас пустой). Я решил составить грамотный robots.txt, исключив все ненужные страницы, но по сути дела кроме вот этого не хочется писать в него:
User-agent: YandexBlog
Disallow:

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /page/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/


Но скорее всего основной причиной АГСа стали метки и архив, но эти страницы улучшают навигацию по сайту, в том числе и поисковых роботов, а метки еще и привлекают посетителей. Скажите, что в данном случае лучше сделать? Закрыть от индексации и метки и архив, чтобы сайт ушел из под АГСа? Я так понял, что проблема возникла из-за того, что на сайте мало записей, не возникнет ли проблем после того, как я через месяца 3-4 открою метки в robots.txt, когда на моем сайте увеличится количество контента? Или вообще не стоит открывать теги?

Сообщение отредактировал plenum - 1.4.2010, 14:12
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
leksei
leksei
сообщение 7.4.2010, 13:09; Ответить: leksei
Сообщение #2


Участник
***

Группа: User
Сообщений: 130
Регистрация: 4.3.2010
Поблагодарили: 20 раз
Репутация:   1  


Если сайт сдл с "хорошим" контентом и попал под агс, то пиши платону. Может быть твой сайт не попал под агс, а просто повторяющиеся страницы яндекс выкинул из индекса.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Узнай все, о своем и чужом сайте
Выгрузка: Ahrefs+Semrush+Majestic+Spywords
7 matrixzp 1271 Сегодня, 2:03
автор: matrixzp
Горячая тема (нет новых ответов) Ню фото на сайте фотографа
Раздел или отдельный сайт
29 Valerypantera 1469 Вчера, 17:02
автор: genjnat
Горячая тема (нет новых ответов) Стоит ли раскручивать личную страничку ?
79 MakDonald 11525 19.5.2018, 12:46
автор: Emtec
Открытая тема (нет новых ответов) Первые шаги в ютубе - какие они?
Дайте советы, пожалуйста
22 Zoya83 1317 18.5.2018, 23:28
автор: Emtec
Открытая тема (нет новых ответов) Видео баннер на сайте и его влияние
0 Seoworke 284 17.5.2018, 10:56
автор: Seoworke


 



RSS Текстовая версия Сейчас: 21.5.2018, 19:30
Дизайн