Помощник
Правильный (проверенный) robots.txt для сателлита на WP, Нужен роботс |
artem_ka
|
Сообщение
#1
|
||
|
|
||
|
|||
knaipa |
1.2.2011, 18:54;
Ответить: knaipa
Сообщение
#2
|
|
тему мусолили уже много раз
User-Agent: *
Crawl-Delay: 10 User-Agent: * sitemap: sitemap.xml sitemap: sitemap.xml.gz User-agent: * Disallow: /cgi-bin # запрещаем индексацию системных папок Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes # запрещаем индексацию страницы входа и регистрации Disallow: /wp-login.php Disallow: /wp-register.php # запрещаем индексацию трекбеков, rss-ленты Disallow: /trackback Disallow: /feed Disallow: /rss Disallow: */trackback Disallow: */feed Disallow: */rss Disallow: /xmlrpc.php # запрещаем индексацию архива автора Disallow: /author* # запрещаем индексацию постраничных комментариев Disallow: */comments Disallow: */comment-page* # запрещаем индексацию результатов поиска и другого возможного "мусора" Disallow: /*?* Disallow: /*? # разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком # Allow: /wp-content/uploads User-agent: Yandex Disallow: /cgi-bin # запрещаем индексацию системных папок Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes # запрещаем индексацию страницы входа и регистрации Disallow: /wp-login.php Disallow: /wp-register.php # запрещаем индексацию трекбеков, rss-ленты Disallow: /trackback Disallow: /feed Disallow: /rss Disallow: */trackback Disallow: */feed Disallow: */rss Disallow: /xmlrpc.php # запрещаем индексацию постраничных комментариев Disallow: */comments Disallow: */comment-page* # запрещаем индексацию результатов поиска и другого возможного "мусора" Disallow: /*?* Disallow: /*? # разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком Allow: /wp-content/uploads User-agent: Googlebot-Image Disallow: Allow: /* # разрешаем индексировать изображения User-agent: YandexBlog Disallow: Allow: /* -------------------- |
|
|
Veterblack |
1.2.2011, 19:11;
Ответить: Veterblack
Сообщение
#3
|
|
Михаил Шакин на своем блоге только вчера писал про роботс для WP
-------------------- |
|
|
Maxsmart |
2.2.2011, 21:56;
Ответить: Maxsmart
Сообщение
#4
|
|
|
Если интересно, вот, гарантрую, найдете ответ.
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 55 | arendator | 35091 | Сегодня, 2:12 автор: arendator |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 3 | Rebex | 971 | Вчера, 20:50 автор: Rebex |
|
Посоветуйте массажер для спины и шеи | 10 | Boymaster | 904 | Вчера, 18:02 автор: Boymaster |
|
Обучение Email Рассылкам + Софт Для Автоматизации (100к в сутки с сервера) | 10 | zennoboss | 4664 | Вчера, 5:20 автор: Skyworker |
|
Какой % отказов нормален для сайта? | 14 | Aloof | 3384 | 23.4.2024, 13:50 автор: Vmir |
Текстовая версия | Сейчас: 25.4.2024, 13:43 |