Помощник
|
Помогите настроить robots.txt для сайта узкой тематики |
skrivelyov
|
Сообщение
#1
|
||
|
|
||
|
|||
n0rv |
5.6.2014, 16:27;
Ответить: n0rv
Сообщение
#2
|
|
оставить все как есть или же все-таки настроить robots.txt? Конечно же настроить. Скрывайте весь шлак, пагинацию, метки, категории (если не оптимизированы под запросы). Можете уже готовый роботс скачать, у вас ЧПУ стандартное, так что можете смело гуглить "правильный robots.txt для wordpress", там и описание найдете к нему. -------------------- |
|
|
skrivelyov
|
Сообщение
#3
|
|
n0rv, Благодарю, сейчас попробую
-------------------- |
|
|
Sergey1983 |
13.6.2014, 7:46;
Ответить: Sergey1983
Сообщение
#4
|
|
Цитата из-за этого возникло много одинаковых страниц по разным запросам для решения этой проблемы нужно использовать в первую очередь другие методы, а не robots.txt поищите, что такое canonical и в каких ситуациях прописывать на страницах META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW" |
|
|
DOleg |
13.6.2014, 11:30;
Ответить: DOleg
Сообщение
#5
|
|
для решения этой проблемы нужно использовать в первую очередь другие методы, а не robots.txt поищите, что такое canonical и в каких ситуациях прописывать на страницах META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW" В первую очередь robots.txt, далее canonical, и далее META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW". Сообщение отредактировал DOleg - 13.6.2014, 11:31 |
|
|
ducurel |
13.6.2014, 15:24;
Ответить: ducurel
Сообщение
#6
|
|
User-Agent: Yandex
Allow: */uploads Disallow: /cgi-bin Disallow: /wp-login.php Disallow: /wp-admin Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /feed/ Disallow: */feed Disallow: */*/feed/*/ Disallow: */*/feed Disallow: *?replytocom Disallow: */trackback Disallow: /cache Disallow: /*? Disallow: /*?* Disallow: /*.php Host: nasha-vselennaya.ru User-agent: * Allow: */uploads Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /feed/ Disallow: */feed Disallow: */*/feed/*/ Disallow: */*/feed Disallow: *?replytocom Disallow: /cache Disallow: /*? Disallow: /*?* Disallow: /?s= Disallow: /*.php Sitemap: http://nasha-vselennaya.ru/sitemap.xml |
|
|
Denis_Semenets |
28.7.2014, 8:48;
Ответить: Denis_Semenets
Сообщение
#7
|
|
Может не совсем в тему, но у меня такая проблема.
Блог на ВП. Какая-то фигня с шаблоном. В functions.php вроде бы все настроено CODE function my_meta_noindex () { if ( is_paged() ) {echo "".'<meta name="robots" content="noindex,nofollow" />'."\n";} А когда просматриваешь результат на странице показывает CODE <meta name="robots" content="index,follow" /> Что за ситуация, не подскажете? Опережая вопросы, это происходит на всех страницах. Дубли там, не дубли. Все в индекс. |
|
|
DOleg |
28.7.2014, 15:11;
Ответить: DOleg
Сообщение
#8
|
|
|
Что за ситуация, не подскажете? Подскажу. is_paged() - Проверяет отображается ли страница пагинации (страница типа /page/2, /page/3) Т.е. на странице 2, 3, ..., должно быть "noindex,nofollow", на первой или единственной "index,follow".
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 55 | arendator | 35095 | Сегодня, 2:12 автор: arendator |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 3 | Rebex | 971 | Вчера, 20:50 автор: Rebex |
|
Посоветуйте массажер для спины и шеи | 10 | Boymaster | 906 | Вчера, 18:02 автор: Boymaster |
|
Обучение Email Рассылкам + Софт Для Автоматизации (100к в сутки с сервера) | 10 | zennoboss | 4664 | Вчера, 5:20 автор: Skyworker |
|
Какой % отказов нормален для сайта? | 14 | Aloof | 3384 | 23.4.2024, 13:50 автор: Vmir |
Текстовая версия | Сейчас: 25.4.2024, 15:58 |