Помощник
|
Правильный (проверенный) robots.txt для сателлита на WP, Нужен роботс |
artem_ka
|
Сообщение
#1
|
||
|
|
||
|
|||
knaipa |
1.2.2011, 18:54;
Ответить: knaipa
Сообщение
#2
|
|
тему мусолили уже много раз
User-Agent: *
Crawl-Delay: 10 User-Agent: * sitemap: sitemap.xml sitemap: sitemap.xml.gz User-agent: * Disallow: /cgi-bin # запрещаем индексацию системных папок Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes # запрещаем индексацию страницы входа и регистрации Disallow: /wp-login.php Disallow: /wp-register.php # запрещаем индексацию трекбеков, rss-ленты Disallow: /trackback Disallow: /feed Disallow: /rss Disallow: */trackback Disallow: */feed Disallow: */rss Disallow: /xmlrpc.php # запрещаем индексацию архива автора Disallow: /author* # запрещаем индексацию постраничных комментариев Disallow: */comments Disallow: */comment-page* # запрещаем индексацию результатов поиска и другого возможного "мусора" Disallow: /*?* Disallow: /*? # разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком # Allow: /wp-content/uploads User-agent: Yandex Disallow: /cgi-bin # запрещаем индексацию системных папок Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes # запрещаем индексацию страницы входа и регистрации Disallow: /wp-login.php Disallow: /wp-register.php # запрещаем индексацию трекбеков, rss-ленты Disallow: /trackback Disallow: /feed Disallow: /rss Disallow: */trackback Disallow: */feed Disallow: */rss Disallow: /xmlrpc.php # запрещаем индексацию постраничных комментариев Disallow: */comments Disallow: */comment-page* # запрещаем индексацию результатов поиска и другого возможного "мусора" Disallow: /*?* Disallow: /*? # разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком Allow: /wp-content/uploads User-agent: Googlebot-Image Disallow: Allow: /* # разрешаем индексировать изображения User-agent: YandexBlog Disallow: Allow: /* -------------------- |
|
|
Veterblack |
1.2.2011, 19:11;
Ответить: Veterblack
Сообщение
#3
|
|
Михаил Шакин на своем блоге только вчера писал про роботс для WP
-------------------- |
|
|
Maxsmart |
2.2.2011, 21:56;
Ответить: Maxsmart
Сообщение
#4
|
|
|
Если интересно, вот, гарантрую, найдете ответ.
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐ Сервис для получения SMS на реальные номера USA |
13 | Chekon | 4078 | Вчера, 11:48 автор: Chekon |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 1 | Rebex | 678 | 17.4.2024, 11:50 автор: Rebex |
|
Какой % отказов нормален для сайта? | 11 | Aloof | 2813 | 16.4.2024, 12:48 автор: diviner99 |
|
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 54 | arendator | 34836 | 15.4.2024, 15:16 автор: arendator |
|
⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами! | 83 | AdsPower | 24425 | 14.4.2024, 22:52 автор: AdsPower |
Текстовая версия | Сейчас: 19.4.2024, 16:55 |