Помощник
 |
|
|
|
|
Сообщение сайта
|
 Помогите разобраться в robots.txt для WP |
Jordanutto
|
Сообщение
#1
|
||||
 Завсегдатай  Группа: Active User Сообщений: 859 Регистрация: 9.7.2011 Из: Крови и плоти Поблагодарили: 433 раза Репутация:  88 
 |
|
||||
 |
|
||||
|
n0rv
|
 25.5.2014, 23:13;
Ответить: n0rv
Сообщение
#2
|
 Бывалый Группа: User Сообщений: 485 Регистрация: 8.1.2011 Из: Калуга Поблагодарили: 163 раза Репутация: 27
|
Это Гугл, ему по большому счету без разницы что прописано в robots, индексирует все подряд.
-------------------- |
|
|
|
|
profican
|
 25.5.2014, 23:35;
Ответить: profican
Сообщение
#3
|
 Старожил Группа: Active User Сообщений: 1242 Регистрация: 30.6.2010 Поблагодарили: 294 раза Репутация: 36
|
Цитата индексе ПС Google Я бы попробовал для Google прописать так же конкретно, как и для Яндекс. User-agent: * может не тот? -------------------- |
|
|
|
|
Jordanutto
|
Сообщение
#4
|
|
Завсегдатай Группа: Active User Сообщений: 859 Регистрация: 9.7.2011 Из: Крови и плоти Поблагодарили: 433 раза Репутация: 88
|
profican, если честно, я абсолютно не разбираюсь в записях для robots, поэтому и прошу помощи.
Сообщение отредактировал Jordanutto - 25.5.2014, 23:38 -------------------- |
|
|
|
|
SATURN25
|
25.5.2014, 23:39;
Ответить: SATURN25
Сообщение
#5
|
|
|
Участник Группа: User Сообщений: 156 Регистрация: 21.10.2013 Из: Россия, Оренбург Поблагодарили: 14 раз Репутация: -11
|
Jordanutto, Пробуй удаляй в вебмастере вручную все левые ссылки. Я уже тут тоже на форуме спрашивал. Я устал бороться с гуглом, но сейчас он потихоньку сам начал удалять эти "хвосты". Наверное какое то время надо чтоб он понял что они не несут никакой ценной инфы для посетителя. Но смотри под такой "некрасивой" ссылкой должно быть написано что индексация запрещена в роботс тексте. И со временем начнут они исчезать. У меня на сайте 59 записей, а в гугле 420 страниц было !!! Сейчас уже 300 стало...Каждый день он выкидывает из супемент индекса по 1-3 страницы. Файл роботс у тебя правильный
Сделай канонические страницы, чтоб не было дублей.. Ниже мой роботс,собирал около месяца, пока не нашёл для себя оптимальный вариант : Код User-agent:Googlebot Disallow: User-agent: * Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /webstat/ Disallow: *?attachment_id= Disallow :/?attachment_id Disallow: */feed$ Disallow: */trackback$ Disallow: */comments$ Disallow: /search/ Disallow: /cgi-bin Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /wp-cron.php Disallow: /goto/ Disallow: *.html/* Disallow: */sphinx/* Disallow: */*.js* Disallow: /daos/ Disallow: /wp-content/themes Disallow: /webstat/ Disallow: */?p* Disallow: */?s* Disallow: /tag/ Disallow: /category/*/* Disallow: /*? Disallow: /*?* Disallow: /wp-content/ Disallow: /navigator Disallow: /navigator/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins Disallow: /search Disallow: / wp-content/ Disallow: /goto/ Disallow: */page/* Disallow: */page/ Disallow: /trackback/ Disallow: /tag/ Disallow: /feed/ Disallow: */*/feed/*/ Disallow: */feed Disallow: */*/feed Disallow: /*?* Disallow: /?feed= Disallow: /?s= Disallow: /20* Sitemap:http://site.com/sitemap.xml Sitemap:http://site.com/sitemap.xml.gz
|
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 1 | Rebex | 650 | Вчера, 11:50 автор: Rebex |
|
Какой % отказов нормален для сайта? | 11 | Aloof | 2797 | 16.4.2024, 12:48 автор: diviner99 |
 |
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 54 | arendator | 34815 | 15.4.2024, 15:16 автор: arendator |
|
⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами! | 83 | AdsPower | 24398 | 14.4.2024, 22:52 автор: AdsPower |
|
Настройки лент для wpgrabber Настрою ленты любой сложности плагина WPGrabber для WordPress |
42 | zkalinin | 30556 | 11.4.2024, 23:33 автор: zkalinin |
|
Текстовая версия | Сейчас: 18.4.2024, 11:48 |
