X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> вопрос по robots.txt вордпресс, robots.txt
mrjohn
mrjohn
Topic Starter сообщение 17.2.2012, 12:22; Ответить: mrjohn
Сообщение #1


Новичок
*

Группа: User
Сообщений: 27
Регистрация: 14.10.2011
Поблагодарили: 1 раз
Репутация:   0  


Добрый день, подскажите по файлу роботс.тхт для сайта вордпресс.
Подойдет ли такой роботс? что он запрещает, что разрешает и как отнесутся к нему ПС.
Спасибо.

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /

Host: блаблабла.ru
Sitemap: http://блаблабла.ru/sitemap.xml
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:23; Ответить: Jooob
Сообщение #2


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


меня тоже интересует этот вопрос.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kronos
kronos
сообщение 17.2.2012, 12:27; Ответить: kronos
Сообщение #3


Белый веб-мастер
*******


Группа: Active User
Сообщений: 4703
Регистрация: 10.2.2009
Из: Харьков
Поблагодарили: 2631 раз
Репутация:   327  


(mrjohn @ 17.2.2012, 11:22) *
Disallow: /*?*
Disallow: /*?

Это одно и то же
(mrjohn @ 17.2.2012, 11:22) *
# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

Это надо убрать если повесите AdSense
(mrjohn @ 17.2.2012, 11:22) *
Disallow: /category/*/*

Это, видимо, для закрытия Page'эй, но как-то не очень корректно. Вдруг подкатегории закроет еще какие-то.
(mrjohn @ 17.2.2012, 11:22) *
Host: блаблабла.ru

Host более корректно выносить только для yandex


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 12:55; Ответить: Jooob
Сообщение #4


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


благодарю, подскажите еще каким тегом закрыть метки для индексации
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
0alex1
0alex1
сообщение 17.2.2012, 13:20; Ответить: 0alex1
Сообщение #5


Старожил
******

Группа: Active User
Сообщений: 1305
Регистрация: 8.7.2010
Поблагодарили: 424 раза
Репутация:   63  


Закрытие меток например так
Disallow: /tag/


--------------------
Взять Кредит Webmoney тут
Лучшие биржи ссылок wmr1000 - Заработок в соц. сетях там
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:20; Ответить: Jooob
Сообщение #6


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


Извините за глупый вопрос, но вообще надо ли запрещать индексировать теги? smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Infacto
Infacto
сообщение 17.2.2012, 14:53; Ответить: Infacto
Сообщение #7


Старожил
******

Группа: Active User
Сообщений: 1029
Регистрация: 19.9.2011
Из: www
Поблагодарили: 403 раза
Репутация:   87  


Советую закрыть теги, а то получаются дубли.
Disallow: /page/* ( закрывает страницы) У себя лично я их закрываю.
Disallow: /tag/ ( закрывает теги)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jooob
Jooob
сообщение 17.2.2012, 14:55; Ответить: Jooob
Сообщение #8


Участник
***

Группа: User
Сообщений: 146
Регистрация: 16.2.2012
Поблагодарили: 8 раз
Репутация:   3  


спасибо всем за помощь

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос по скорости интернета
19 MakDonald 1352 8.3.2019, 12:02
автор: dganem777
Открытая тема (нет новых ответов) Путешествия: вопрос - ответ.
Задай вопрос по путешествиям и получи на него развернутый ответ
0 Lifekaifer 218 7.3.2019, 20:34
автор: Lifekaifer
Открытая тема (нет новых ответов) robots.txt Недостаточно качественная
5 antontonton 508 4.3.2019, 20:50
автор: VinogradOFF
Открытая тема (нет новых ответов) Вопрос про сэмплирование данных Google Analytics
0 rownong27 322 25.2.2019, 17:24
автор: rownong27
Открытая тема (нет новых ответов) Вопрос о доходах оптимизатора
7 JlEHb 578 23.2.2019, 4:38
автор: REGNET


 



RSS Текстовая версия Сейчас: 23.3.2019, 17:19
Дизайн