X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> вопрос по robots.txt вордпресс, robots.txt
mrjohn
mrjohn
Topic Starter сообщение 17.2.2012, 12:22; Ответить: mrjohn
Сообщение #1


Новичок
*

Группа: User
Сообщений: 27
Регистрация: 14.10.2011
Поблагодарили: 1 раз
Репутация:   0  


Добрый день, подскажите по файлу роботс.тхт для сайта вордпресс.
Подойдет ли такой роботс? что он запрещает, что разрешает и как отнесутся к нему ПС.
Спасибо.

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /

Host: блаблабла.ru
Sitemap: http://блаблабла.ru/sitemap.xml
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:23; Ответить: Jooob
Сообщение #2


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


меня тоже интересует этот вопрос.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kronos
kronos
сообщение 17.2.2012, 12:27; Ответить: kronos
Сообщение #3


Белый веб-мастер
*******


Группа: Active User
Сообщений: 4703
Регистрация: 10.2.2009
Из: Харьков
Поблагодарили: 2629 раз
Репутация:   327  


(mrjohn @ 17.2.2012, 11:22) *
Disallow: /*?*
Disallow: /*?

Это одно и то же
(mrjohn @ 17.2.2012, 11:22) *
# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

Это надо убрать если повесите AdSense
(mrjohn @ 17.2.2012, 11:22) *
Disallow: /category/*/*

Это, видимо, для закрытия Page'эй, но как-то не очень корректно. Вдруг подкатегории закроет еще какие-то.
(mrjohn @ 17.2.2012, 11:22) *
Host: блаблабла.ru

Host более корректно выносить только для yandex


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:55; Ответить: Jooob
Сообщение #4


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


благодарю, подскажите еще каким тегом закрыть метки для индексации
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
0alex1
0alex1
сообщение 17.2.2012, 13:20; Ответить: 0alex1
Сообщение #5


Старожил
******

Группа: Active User
Сообщений: 1300
Регистрация: 8.7.2010
Поблагодарили: 423 раза
Репутация:   63  


Закрытие меток например так
Disallow: /tag/


--------------------
Взять Кредит Webmoney тут
Лучшие биржи ссылок wmr1000 - Заработок в соц. сетях там
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:20; Ответить: Jooob
Сообщение #6


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


Извините за глупый вопрос, но вообще надо ли запрещать индексировать теги? smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Infacto
Infacto
сообщение 17.2.2012, 14:53; Ответить: Infacto
Сообщение #7


Старожил
******

Группа: Active User
Сообщений: 1024
Регистрация: 19.9.2011
Из: www
Поблагодарили: 403 раза
Репутация:   87  


Советую закрыть теги, а то получаются дубли.
Disallow: /page/* ( закрывает страницы) У себя лично я их закрываю.
Disallow: /tag/ ( закрывает теги)


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:55; Ответить: Jooob
Сообщение #8


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


спасибо всем за помощь

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) пмомощь по вордпресс
5 Swissi 667 11.10.2018, 16:54
автор: VinogradOFF
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
5 regem 2115 2.10.2018, 11:52
автор: regem
Открытая тема (нет новых ответов) Создание и оптимизация robots.txt: контролируем индексацию сайта
rush-analytics.ru - блог сервиса SEO-аналитики
7 RushAgency 903 27.9.2018, 11:36
автор: DrMax
Открытая тема (нет новых ответов) Вопрос по nginx
редирект 301
3 KM_ 700 10.9.2018, 16:33
автор: mmkulikov
Открытая тема (нет новых ответов) Требуется постер на вордпресс блог (НЕ тупой копипаст)
0 dedok3000 608 4.9.2018, 23:34
автор: dedok3000


 



RSS Текстовая версия Сейчас: 16.10.2018, 18:47
Дизайн