X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Правильный robots.txt для Wordpress
EvilPanda
EvilPanda
Topic Starter сообщение 8.7.2012, 4:01; Ответить: EvilPanda
Сообщение #1


Делал сейчас сайт на вордпрессе не под продажу ссылок и впервые задумался над созданием правильного robots.txt, вот что получилось, может кому-то пригодится:

Развернуть/Свернуть
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /feed
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /search/*/feed
Disallow: /search/*/*
Disallow: /tag/
Allow: /wp-content/uploads/
Host: ВАШДОМЕН.ru
Sitemap: ВАШДОМЕН.ru/sitemap.xml


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: ВАШДОМЕН.ru
Sitemap: ВАШДОМЕН.ru/sitemap.xml


--------------------
Эксперт - это человек, который перестал мыслить, потому что он знает.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
schokk
schokk
сообщение 8.7.2012, 12:22; Ответить: schokk
Сообщение #2


Спасибо. Только хотел написать злобный пост мол зачем придумывать велосипед, ведь в wordpress есть свой правильный robots.txt, а глянул - в 3.4.1 нету. Хотя точно помню, что дистрибутиве старых версий был robots.txt smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
serkaz
serkaz
сообщение 8.7.2012, 13:04; Ответить: serkaz
Сообщение #3


schokk, не видел ещё ни разу, чтобы разработчики пихали в коробку грамотный robots, который не пришлось бы допиливать в будущем.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Красавчег
Красавчег
сообщение 8.7.2012, 18:30; Ответить: Красавчег
Сообщение #4


(EvilPanda @ 8.7.2012, 3:01) *
задумался над созданием правильного robots.txt, вот что получилось, может кому-то пригодится


Почему не сделать проще и короче:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /feed
Disallow: */feed
Disallow: /*?*
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /search/*
Disallow: /tag/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */comments
Host: ВАШДОМЕН.ru
Sitemap: ВАШДОМЕН.ru/sitemap.xml


Сообщение отредактировал Красавчег - 8.7.2012, 18:30


--------------------
Плюшки WordPress • Кнопки Яндекса
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
EvilPanda
EvilPanda
Topic Starter сообщение 8.7.2012, 19:10; Ответить: EvilPanda
Сообщение #5


(Красавчег @ 8.7.2012, 18:30) *
Почему не сделать проще и короче

Оптимизация во всем? smile.gif В этом есть смысл smile.gif


--------------------
Эксперт - это человек, который перестал мыслить, потому что он знает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Upgoing
Upgoing
сообщение 9.7.2012, 11:18; Ответить: Upgoing
Сообщение #6


Делая роботс под вордпрессом еще обратите внимание на свой ЧПУ ибо он может значительно отличаться, в зависимости от того варианта, который был выбран вами в самом начале.

Еще один маленький совет, просто посмотрите роботс у топовых вебмастеров вашей ниши, через анализатор роботс в яндексе - так гораздо проще, чем самому изобретать велосипед smile.gif Так как я ленивый, то именно так и смотрел, а потом уже дописывал что-то у себя.

Ну и еще один момент - плевал Google на ваш роботс smile.gif Он индексирует как его душеньке заблагорассудится.


--------------------
Мой лучший месяц в инвестировании 3303$ c pamm и форекса, повезло :)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
DmitryEf
DmitryEf
сообщение 9.7.2012, 12:48; Ответить: DmitryEf
Сообщение #7


В Яндекс Вебмастере выходит ошибка, если указано более одного раза ссылка на карту сайта, поэтмоу более корректный robors.txt будет считать такой
User-agent: Yandex
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: */trackback
Disallow: */feed
Disallow: /cgi-bin
Disallow: *?s=
Host: site.ru

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: */trackback
Disallow: */feed
Disallow: /cgi-bin
Disallow: *?s=

Sitemap: http://site.ru/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.7.2012, 21:21; Ответить: Zonder
Сообщение #8


DmitryEf, взял на заметку

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал Zonder - 10.7.2012, 21:22
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) ✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐
Сервис для получения SMS на реальные номера USA
13 Chekon 4066 Вчера, 11:48
автор: Chekon
Открытая тема (нет новых ответов) Rebex.io – Ваша инновационная платформа для обмена криптовалюты!
1 Rebex 670 17.4.2024, 11:50
автор: Rebex
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
11 Aloof 2806 16.4.2024, 12:48
автор: diviner99
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
54 arendator 34832 15.4.2024, 15:16
автор: arendator
Горячая тема (нет новых ответов) ⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами!
83 AdsPower 24412 14.4.2024, 22:52
автор: AdsPower


 



RSS Текстовая версия Сейчас: 19.4.2024, 3:56
Дизайн