X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Робот для вордперса
zyzy
zyzy
Topic Starter сообщение 8.8.2014, 19:18; Ответить: zyzy
Сообщение #1


Завсегдатай
*****

Группа: Active User
Сообщений: 683
Регистрация: 23.8.2010
Поблагодарили: 76 раз
Репутация:   4  


День добрый. Правильно ли я заполнил robot

Цитата
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag/

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag/
Host: http://.../

Sitemap: http://.../sitemap.xml.gz
Sitemap: http://.../sitemap.xml


--------------------
-4
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
xoopw
xoopw
сообщение 9.8.2014, 19:16; Ответить: xoopw
Сообщение #2


Частый гость
**


Группа: User
Сообщений: 50
Регистрация: 2.8.2014
Поблагодарили: 3 раза
Репутация:   0  


Я заполняю примерно так

Цитата
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot-Image
Allow: /wp-content/uploads/

User-agent: YandexImages
Allow: /wp-content/uploads/


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
lamov
lamov
сообщение 17.8.2014, 0:19; Ответить: lamov
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 270
Регистрация: 6.7.2011
Из: Киев
Поблагодарили: 34 раза
Репутация:   2  


пройдись Netpeak Spider'ом, посмотри на лишние/дубли/ненужные страницы и закрой их в роботс.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) TrustMaster 3 - прогрев smtp серверов для 100% инбокса!
31 zennoboss 5902 Сегодня, 12:19
автор: zennoboss
Открытая тема (нет новых ответов) Подбор трастовых доменов для трафика и ваших тем
6 rasul 1350 Сегодня, 10:50
автор: rasul
Горячая тема (нет новых ответов) MostPartner.com — лучшее решение для беттинг трафика
39 MostPartner 8282 Сегодня, 7:33
автор: Harekin
Открытая тема (нет новых ответов) Конкурс-квест для криптоманов (500 usd)
Отыщи зашифрованные фразы на картинке и выиграй деньги
9 kursexpert 1785 Вчера, 11:46
автор: kursexpert
Открытая тема (нет новых ответов) В России могут создать "белый VPN" для добросовестных ресурсов
1 seostock 758 19.5.2018, 23:49
автор: VBin


 



RSS Текстовая версия Сейчас: 21.5.2018, 13:43
Дизайн