X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Покритикуйте robots.txt
titris
titris
Topic Starter сообщение 6.9.2014, 11:18; Ответить: titris
Сообщение #1


Просьба к форумчанам вдумчиво покритиковать следующую секцию robots под сайт на WP, относящуюся к Яндексу.

Собственно вопросов у меня 3:

1. Насколько хорошо данная конструкция защищает от дублей страниц?
2. Не запрещено ли что-то нужное, что может быть проиндексировано Яндексом?
3. В связи с вышеизложенным: надо ли что-то добавить\убавить?

User-agent: Yandex

Disallow: */page/

Disallow: /page/

Disallow: /*?*

Disallow: /*?

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /webstat/

Disallow: /feed/

Disallow: /trackback

Disallow: */trackback

Disallow: /*/?replytocom=*

Disallow: */comment-page-*

Disallow: */feed

Disallow: */comments

Disallow: /category/*/*

Disallow: /category/

Disallow: /archive/

Disallow: /tag

Disallow: /wp-content/plugins

Disallow: /wp-content/themes

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /comments

Спасибо.

Сообщение отредактировал titris - 6.9.2014, 11:18


--------------------


Поблагодарили: (1)
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
allvake
allvake
сообщение 6.9.2014, 13:42; Ответить: allvake
Сообщение #2


А зачем закрывать комментарии? Disallow: */comments
комментарии в WP идут #comment- что после решетки и так не индексируется, думаю дубля статьи нет, по крайней мере у меня на сайтах, такого рода проблем не замечал


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
sanika
sanika
сообщение 6.9.2014, 18:39; Ответить: sanika
Сообщение #3


Я бы еще кеш закрыл - Disallow: /wp-content/cache
Во всяком случае у себя так сделано. А так - все прекрасно.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
titris
titris
Topic Starter сообщение 6.9.2014, 18:45; Ответить: titris
Сообщение #4


Цитата(sanika @ 6.9.2014, 17:39) *
Я бы еще кеш закрыл - Disallow: /wp-content/cache

Такой папочки у меня в wp-content нет.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dota
dota
сообщение 6.9.2014, 18:57; Ответить: dota
Сообщение #5


Disallow: */page/
Disallow: /page/

У меня вот так Disallow: *page/

Disallow: /*?*
Disallow: /*?

Вот Disallow: /*?*

Disallow: /category/*/*
Disallow: /category/

Просто Disallow: /category/

Комменты не закрывайте они как якори идут.





--------------------


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
titris
titris
Topic Starter сообщение 6.9.2014, 22:14; Ответить: titris
Сообщение #6


Цитата(dota @ 6.9.2014, 17:57) *
Комменты не закрывайте они как якори идут.

Прошу этот момент пояснить.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
sanika
sanika
сообщение 6.9.2014, 22:47; Ответить: sanika
Сообщение #7


Якорь - это то о чем allvake говорил - #comments - т.е. это не дубль а внутристарничная ссылка - якорь

Цитата(titris @ 6.9.2014, 17:45) *
Такой папочки у меня в wp-content нет.


Значит вы не ставили плагина для кеша. Его часто ставят, а закрыть в robots.txt забывают


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dota
dota
сообщение 6.9.2014, 23:44; Ответить: dota
Сообщение #8


titris, погуглите про якоря. Важная для вас инфа будет.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
titris
titris
Topic Starter сообщение 7.9.2014, 10:17; Ответить: titris
Сообщение #9


Цитата(dota @ 6.9.2014, 22:44) *
titris, погуглите про якоря

Я совсем "ушел" в термины :) "Якорь" ну никак кроме морского и психологического не воспринимаю. Ну конечно анкоры :)


Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 67413 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 6529 28.3.2019, 18:31
автор: regem
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 1573 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 1615 1.3.2017, 3:20
автор: regem
Открытая тема (нет новых ответов) Работы по файлу robots.txt
8 tankoff 2323 19.3.2016, 20:02
автор: tankoff


 



RSS Текстовая версия Сейчас: 16.10.2021, 21:22
Дизайн