Помощник
|
Как правильно оформить Robots.txt для WP? |
Илюха
|
Сообщение
#1
|
||
|
|
||
|
|||
kasey7 |
3.12.2010, 10:05;
Ответить: kasey7
Сообщение
#2
|
|
роботс у всех совершенно разный. логично... мудрить не надо, Пум Сообщение отредактировал kasey7 - 3.12.2010, 10:08 -------------------- |
|
|
Systproject |
3.12.2010, 10:13;
Ответить: Systproject
Сообщение
#3
|
|
Предложу свой вариант
Развернуть/Свернуть
User-agent: Yandex
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /backlinks Disallow: /backlinks/ Disallow: /author Host: site.ru User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /backlinks Disallow: /backlinks/ Disallow: /author -------------------- |
|
|
guz |
3.12.2010, 10:17;
Ответить: guz
Сообщение
#4
|
|
вот те мой)
User-agent: Yandex Disallow: /cgi-bin/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /wp-includes/ Disallow: /xmlrpc.php Disallow: /wp-admin Disallow: /wp-content/plugins Disallow: /wp-content/themes Disallow: /trackback/ Disallow: /feed/ Disallow: /comments/ Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: /?feed= Disallow: /?s= Disallow: /*?* Disallow: /*? Host: твой домен User-agent: Googlebot Disallow: /*/feed/$ Disallow: /feed/$ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /category/*/$ Disallow: /page/*/$ Disallow: /tag/*/$ Disallow: /stat-pages/*$ Disallow: /index.php?*$ Disallow: /*/wp-*.php$ User-agent: * Disallow: /wp-admin/ Disallow: /wp-content/ Disallow: /wp-includes/ Disallow: /wp-images/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php -------------------- |
|
|
Maxim-KL |
3.12.2010, 10:23;
Ответить: Maxim-KL
Сообщение
#5
|
|
А вот мой
User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: */trackback Disallow: */feed Disallow: */comments User-agent: Yandex Host: master-web.info Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: */trackback Disallow: */feed Disallow: */comments User-agent: Googlebot-Image Disallow: Allow: /* User-agent: Mediapartners-Google* Disallow: Allow: /* User-agent: ia_archiver Disallow: / User-agent: duggmirror Disallow: / Кажется правильный . Но если у кого есть еще какие то добавки с удовольствием хотел бы посмотреть. -------------------- |
|
|
rixter |
3.12.2010, 10:24;
Ответить: rixter
Сообщение
#6
|
|
Предложу свой вариант Развернуть/Свернуть
User-agent: Yandex
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /backlinks Disallow: /backlinks/ Disallow: /author Host: site.ru User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /backlinks Disallow: /backlinks/ Disallow: /author Systproject А зачем для яндекса дублировать, так нельзя? User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /backlinks Disallow: /backlinks/ Disallow: /author User-agent: Yandex Host: site.ru Я бы еще тэги закрыл и карту сайта добавил - Sitemap: http://site.ru/sitemap.xml
Сообщение отредактировал rixter - 3.12.2010, 10:26 |
|
|
StuDay |
3.12.2010, 10:26;
Ответить: StuDay
Сообщение
#7
|
|
User-agent: *
Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/cache Disallow: /wp-content/uploads Disallow: /wp-content/plugins Disallow: /wp-content/themes Disallow: /date Disallow: /comments Disallow: /tag/ Disallow: /author/ Disallow: */comments Disallow: /feed Disallow: */feed Disallow: /trackback Disallow: */trackback Disallow: /*? Disallow: /*?* Disallow: /xmlrpc.php Disallow: /category/ Host: сайт.ру -------------------- - зарегистрироваться здесь, и сказка придет в вашу жизнь! |
|
|
kreont |
3.12.2010, 10:27;
Ответить: kreont
Сообщение
#8
|
|
Я бы еще вставил Disallow: /?s= для закрытия от индексации страниц поиска и служебный файл который яндекс индексирует - Disallow: /xmlrpc.php
В итоге у меня так User-agent: Yandex
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /trackback Disallow: */trackback Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: */comments Disallow: /comments/ Disallow: /xmlrpc.php Disallow: /author Disallow: /?s= Disallow: /feed/ Disallow: */feed/ Disallow: /tag Disallow: /*?* Disallow: /*? Host: сайт.ru User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /trackback Disallow: */trackback Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: */comments Disallow: /comments/ Disallow: /xmlrpc.php Disallow: /author Disallow: /?s= Disallow: /feed/ Disallow: */feed/ Disallow: /tag Disallow: /*?* Disallow: /*? |
|
|
StuDay |
3.12.2010, 10:30;
Ответить: StuDay
Сообщение
#9
|
|
не у кого дублирующие контент теги кроме меня что не закрыты от индекса?
Я всегда думал и думаю, что в индексе должно быть столько же страниц сколько и записей в блоге. Сообщение отредактировал StuDay - 3.12.2010, 10:30 -------------------- - зарегистрироваться здесь, и сказка придет в вашу жизнь! |
|
|
orange |
3.12.2010, 10:33;
Ответить: orange
Сообщение
#10
|
|
еще вариант
User-agent: *
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: /category/*/* Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /*?* Disallow: /*? Allow: /wp-content/uploads Sitemap: http://xxx.ru/sitemap.xml # Google Image User-agent: Googlebot-Image Disallow: Allow: /* # Google AdSense User-agent: Mediapartners-Google* Disallow: Allow: /* |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Арбитражники, как ведете учет расходов и доходов? | 12 | Boymaster | 1920 | Вчера, 21:03 автор: MisterBit |
|
✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐ Сервис для получения SMS на реальные номера USA |
13 | Chekon | 4078 | 18.4.2024, 11:48 автор: Chekon |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 1 | Rebex | 689 | 17.4.2024, 11:50 автор: Rebex |
|
Как вывести деньги в Украине с заблокированного Юмани ? | 29 | freeax | 4814 | 17.4.2024, 1:19 автор: sergio11 |
|
Какой % отказов нормален для сайта? | 11 | Aloof | 2821 | 16.4.2024, 12:48 автор: diviner99 |
Текстовая версия | Сейчас: 20.4.2024, 4:09 |