Помощник
|
Составляем правильный robots.txt для WP, wpmaster.kz - Блог о WordPress для веб-мастеров. |
Андрей_WPM
|
Сообщение
#1
|
||
|
|
||
|
|||
Latinos |
10.7.2019, 23:18;
Ответить: Latinos
Сообщение
#2
|
|
Цитата Как видите, файл robots txt потерял свою актуальность к 2019 году (по крайней мере в мире WordPress). Закрывать практически нечего, поэтому данный файл обречен пустовать и мозолить всем вебмастерам глаз. Но интересно, учитывается ли его наличие как фактор ранжирования в 2019? просто само наличие ) |
|
|
Андрей_WPM
|
Сообщение
#3
|
|
Latinos, очень хороший вопрос. Поисковики требуют его наличие, как не странно. Поэтому пусть будет, даже пустой, адрес карты сайта как-то же узнавать пауку надо.
-------------------- |
|
|
VinogradOFF |
11.7.2019, 21:09;
Ответить: VinogradOFF
Сообщение
#4
|
|
|
|
|
Андрей_WPM
|
Сообщение
#5
|
|
VinogradOFF, ну так вебмастерами не все же пользуются.
-------------------- |
|
|
VinogradOFF |
12.7.2019, 12:50;
Ответить: VinogradOFF
Сообщение
#6
|
|
Андрей_WPM, ну если человек не пользуется вебмастерами, то и составить правильный роботс ему видимо не особо надо )
просто я не понимаю как можно разбираться в одном и не пользоватся тем что дают сами ПС нам в инструментарий ) |
|
|
Андрей_WPM
|
Сообщение
#7
|
|
VinogradOFF, Я полностью понимаю Ваше негодование. Но даже на этом форуме не раз ВМы говорили, что серые сайты не добавляют в вебмастера Гугла и Яндекса. Отсюда и мой ответ. Как раз этот случай предполагает, что все методы сео как раз нужны ВМу, а вот вебмастера поисковиков нет.
-------------------- |
|
|
Mistic |
13.7.2019, 11:09;
Ответить: Mistic
Сообщение
#8
|
|
Но интересно, учитывается ли его наличие как фактор ранжирования в 2019? просто само наличие ) Это 100% не фактор ранжирования, а всего лишь рекомендуемый элемент Сообщение отредактировал Mistic - 13.7.2019, 11:10 |
|
|
zyzy |
13.7.2019, 13:08;
Ответить: zyzy
Сообщение
#9
|
|
Что посоветуете добавить или убрать, плагины для сеоптимизации не использую.
User-agent: * Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /tag User-agent: Yandex Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /tag Host: mysite.com Sitemap: http://mysite.com/sitemap.xml.gz Sitemap: http://mysite.com/sitemap.xml |
|
|
Андрей_WPM
|
Сообщение
#10
|
|
zyzy, Я посоветую удалить всё кроме карты и хоста! И почему я так считаю, описал в статье.
Директории: Disallow: /wp-admin Disallow: /wp-includes Закрывать бессмысленно! До них краулер не доберется. В статье я написал почему. Директории: Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Обычно закрыты от прямого вхождения, поэтому перейдя по такому адресу и вы и краулер увидит белый лист - абсолютно пустую страницу. А раз на ней нет ничего, даже пустого html краулер никогда в жизни не будет такие адреса индексировать. Директории: Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Закрываются (удаляются) штатными средствами ВП в настройках уведомлений. Поэтому такие страницы удаляются физически и навряд-ли на них где-то будет ссылка на сайте. Поэтому закрывать воздух - бессмысленное занятие. Директории: Disallow: */*/feed/*/ Disallow: */feed Либо убиваются одним из плагинов Clearfy, либо не трогают их. Потому-что страницы фидов никогда не попадут в индекс. Они не будут конкурировать с контентом на сайте. Генерированные страницы с гет параметрами Disallow: /*?* очень спорный вопрос. Лично я никогда в жизни их не закрывал и никогда они в индекс у меня не попадали. Главное правильно настроить ЧПУ штатными средствами ВП. На теги Disallow: /tag могут сослаться другие сайты (скажем граббером пройдутся или чем-то подобным) и не смотря на запрет, они будут проиндексированы СМ. ВИДЕО Джон Мюллер в статье. Теги закрываются тегом роботс ноиндекс через Yoast Seo автоматически или выборочно вручную через тот же плагин Yoast Seo. -------------------- |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐ Сервис для получения SMS на реальные номера USA |
13 | Chekon | 4074 | Вчера, 11:48 автор: Chekon |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 1 | Rebex | 677 | 17.4.2024, 11:50 автор: Rebex |
|
Какой % отказов нормален для сайта? | 11 | Aloof | 2811 | 16.4.2024, 12:48 автор: diviner99 |
|
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 54 | arendator | 34836 | 15.4.2024, 15:16 автор: arendator |
|
⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами! | 83 | AdsPower | 24415 | 14.4.2024, 22:52 автор: AdsPower |
Текстовая версия | Сейчас: 19.4.2024, 15:43 |