Помощник
|
robot.txt правильно ли его составление? |
errrol
|
Сообщение
#1
|
||
|
|
||
|
|||
samunris |
4.3.2011, 20:44;
Ответить: samunris
Сообщение
#2
|
|
Юзаю такой роботс:
User-agent: * Disallow: /wp-admin/ Disallow: /wp-content/ Disallow: /wp-includes/ Host: www.site.ru Sitemap: http://www.site.ru/sitemap.xml |
|
|
KipiaSoft |
4.3.2011, 20:45;
Ответить: KipiaSoft
Сообщение
#3
|
|
Много?
Да по моему маловато будет. Если сайт на WP будет, то еще страницы с генерированные тэгами, календарем, и.т.д закрывать нужно. -------------------- |
|
|
Reader |
4.3.2011, 20:51;
Ответить: Reader
Сообщение
#4
|
|
Я бы начал с названия)) robots.txt
По сабжу User-agent: * Disallow: /cgi-bin # запрещаем индексацию системных папок Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes # запрещаем индексацию страницы входа и регистрации Disallow: /wp-login.php Disallow: /wp-register.php # запрещаем индексацию трекбеков и rss-ленты Disallow: /trackback Disallow: /feed Disallow: /rss Disallow: */trackback Disallow: */feed Disallow: */rss Disallow: /xmlrpc.php # запрещаем индексацию архива автора Disallow: /author* # запрещаем индексацию постраничных комментариев Disallow: */comments Disallow: */comment-page* # запрещаем индексацию результатов поиска и других возможных лишних страниц Disallow: /*?* Disallow: /*? # разрешаем индексацию вложений Allow: /wp-content/uploads Host: сайт.ру Sitemap: http:// сайт.ру /sitemap.xml Отсюда, используя гугл. Сообщение отредактировал Reader - 4.3.2011, 20:53 -------------------- |
|
|
errrol
|
Сообщение
#5
|
|
Большое спасибо за подробный ответ. Добавил с свой robots некоторый пункты, и открыл доступ к папке аплод.
-------------------- |
|
|
boricov |
5.3.2011, 14:13;
Ответить: boricov
Сообщение
#6
|
|
Вообще сами разработчики рекомендуют файл robots.txt такой как я описал в своей статье. Не знаю правда это или нет. Файл robots.txt для wordpress
|
|
|
Maxsmart |
5.3.2011, 14:27;
Ответить: Maxsmart
Сообщение
#7
|
|
Если не ошибаюсь, то Reader забыл вписать в роботс запрет о индексации тегов, рубрик, это тоже немаловажно...
|
|
|
Reader |
7.3.2011, 9:36;
Ответить: Reader
Сообщение
#8
|
|
Если не ошибаюсь, то Reader забыл вписать в роботс запрет о индексации тегов, рубрик, это тоже немаловажно... Запрещать к индексации рубрики вообще не вижу смысла. Что касается тегов, то если их делать как удобный элемент навигации, то Яндекс спокойно относится к их наличию. Если их делать для количества страниц, то закрывать от индексации также нет смысла. boricov, а блог с анкором "отсюда" все равно на порядок выше в серпе Сообщение отредактировал Reader - 7.3.2011, 9:37 -------------------- |
|
|
gaishnik007 |
7.3.2011, 9:52;
Ответить: gaishnik007
Сообщение
#9
|
|
Юзаю роботс как у Reader.. Всё гуд! Рубрики открыты
|
|
|
boricov |
7.3.2011, 9:57;
Ответить: boricov
Сообщение
#10
|
|
Reader ты умник?
|
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Ты умеешь лить траф с FB? Мы монетизируем его через Телеграм на ИНДИИ. | 0 | Sirbet | 511 | 14.2.2023, 21:39 автор: Sirbet |
|
Заказать Копирайтинг | Проработка Семантического ядра | Составление ТЗ | 0 | yehCANA | 933 | 19.9.2022, 18:33 автор: yehCANA |
|
Требуется ТЗ-мейкер (составление плана статьи) | 0 | Gusman | 868 | 6.5.2022, 15:08 автор: Gusman |
|
Учимся правильно отвечать | 17 | falken | 21629 | 13.7.2020, 18:13 автор: falken |
|
Составление семантического ядра для сайта. | 1 | Coremix | 7514 | 26.5.2020, 23:02 автор: Kiloan_Frost |
Текстовая версия | Сейчас: 26.4.2024, 2:31 |