X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> вопрос по robots.txt вордпресс, robots.txt
mrjohn
mrjohn
Topic Starter сообщение 17.2.2012, 12:22; Ответить: mrjohn
Сообщение #1


Новичок
*

Группа: User
Сообщений: 27
Регистрация: 14.10.2011
Поблагодарили: 1 раз
Репутация:   0  


Добрый день, подскажите по файлу роботс.тхт для сайта вордпресс.
Подойдет ли такой роботс? что он запрещает, что разрешает и как отнесутся к нему ПС.
Спасибо.

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /

Host: блаблабла.ru
Sitemap: http://блаблабла.ru/sitemap.xml
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:23; Ответить: Jooob
Сообщение #2


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


меня тоже интересует этот вопрос.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kronos
kronos
сообщение 17.2.2012, 12:27; Ответить: kronos
Сообщение #3


Белый веб-мастер
*******


Группа: Active User
Сообщений: 4703
Регистрация: 10.2.2009
Из: Харьков
Поблагодарили: 2629 раз
Репутация:   327  


(mrjohn @ 17.2.2012, 11:22) *
Disallow: /*?*
Disallow: /*?

Это одно и то же
(mrjohn @ 17.2.2012, 11:22) *
# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

Это надо убрать если повесите AdSense
(mrjohn @ 17.2.2012, 11:22) *
Disallow: /category/*/*

Это, видимо, для закрытия Page'эй, но как-то не очень корректно. Вдруг подкатегории закроет еще какие-то.
(mrjohn @ 17.2.2012, 11:22) *
Host: блаблабла.ru

Host более корректно выносить только для yandex


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:55; Ответить: Jooob
Сообщение #4


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


благодарю, подскажите еще каким тегом закрыть метки для индексации
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
0alex1
0alex1
сообщение 17.2.2012, 13:20; Ответить: 0alex1
Сообщение #5


Старожил
******

Группа: Active User
Сообщений: 1249
Регистрация: 8.7.2010
Поблагодарили: 413 раз
Репутация:   60  


Закрытие меток например так
Disallow: /tag/


--------------------
Взять Кредит Webmoney тут
Лучшие биржи ссылок wmr1000 - Хороший хостинг там
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:20; Ответить: Jooob
Сообщение #6


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


Извините за глупый вопрос, но вообще надо ли запрещать индексировать теги? smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Infacto
Infacto
сообщение 17.2.2012, 14:53; Ответить: Infacto
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 937
Регистрация: 19.9.2011
Из: www
Поблагодарили: 369 раз
Репутация:   79  


Советую закрыть теги, а то получаются дубли.
Disallow: /page/* ( закрывает страницы) У себя лично я их закрываю.
Disallow: /tag/ ( закрывает теги)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:55; Ответить: Jooob
Сообщение #8


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


спасибо всем за помощь
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос по seo для интернет магазина
куда девать продвинутые товары, которые уже не выпускают
15 viktormerke 2549 Вчера, 11:53
автор: Caterpillar
Открытая тема (нет новых ответов) Посоветуйте видеогалерею для вордпресс на русском
1 aleggator 559 9.12.2017, 15:39
автор: Nell
Открытая тема (нет новых ответов) Вопрос к знатокам Instagram
20 SEOMR 4172 30.11.2017, 14:25
автор: DiscordPro
Открытая тема (нет новых ответов) Как перенести вордпресс-блог на бесплатный хостинг?
3 ropique 435 30.11.2017, 7:19
автор: Nell
Открытая тема (нет новых ответов) Вопрос про Телеграмм
18 syd2010 1144 28.11.2017, 14:25
автор: PostBrigada


 



RSS Текстовая версия Сейчас: 15.12.2017, 4:52
Дизайн