X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Идеальный robots.txt для DLE
Lotus7
Lotus7
Topic Starter сообщение 26.12.2012, 6:29; Ответить: Lotus7
Сообщение #1


Новичок
*

Группа: User
Сообщений: 42
Регистрация: 23.10.2012
Поблагодарили: 12 раз
Репутация:   2  


Видел на форуме много вопросов по поводу robots.txt и я решил рассказать как же на самом деле выглядит правильный robots.txt для Datalife Engine.
Вот как выглядит идеальный robots.txt:

User-agent: *
Disallow: /engine/

Host: site.ru
Sitemap: http://site.ru/sitemap.xml


Я думаю вы уже встречались с тем, что гугл может индексировать все, что ему захочется, несмотря на запреты и поэтому закрывать страницы от индексации через robots.txt не круто, а вот через <meta name="robots" content="noindex"> - правильно.

Чтобы это сделать, заходите в engine/engine.php, находите строчку if ($config['allow_rss']) $metatags .= <<<HTML и выше добавляете:

if ($subaction == 'userinfo' OR
$subaction == 'allnews' OR
$subaction == 'newposts' OR
$do == 'feedback' OR
$do == 'lastcomments' OR
$do == 'lostpassword' OR
$do == 'search' OR
$do == 'lastnews' OR
$do == 'alltags' OR
$do == 'tags' OR
$do == 'stats' OR
$do == 'addnews' OR
$do == 'register' OR
$do == 'favorites' OR
$do == 'rules' OR
$do == 'pm' OR
$dle_module == 'date') $metatags .= <<<HTML
\n<meta name="robots" content="noindex,nofollow" />
HTML;


P.S.: Если вы используете DLE версии 9.3 и ниже, тогда уберите в engine/engine.php эту строчку <meta name="robots" content="all" />.

Вы можете сюда добавлять что-нибудь на свое усмотрение, например чтобы закрыть какую-нибудь категорию от индексации добавляете: ($do == 'cat' and $category_id == 'X' and $subaction == '') OR и вместо X вписываете id категории (id категории вы сможете узнать здесь: Админ панель - список всех разделов - категории - список категорий)
P.S.: закрывая от индексации категорию, не закрываете от индексации новости, которые находятся в данной категории.

! Если же вы все таки решили закрывать от индексации какие-нибудь страницы данным методом, тогда обязательно уберите эти страницы из robots.txt.

Сообщение отредактировал Lotus7 - 26.12.2012, 6:33


Поблагодарили: (2)
3
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
brainbay
brainbay
сообщение 27.12.2012, 7:49; Ответить: brainbay
Сообщение #2


Новичок
*

Группа: User
Сообщений: 40
Регистрация: 2.1.2011
Из: Украина
Поблагодарили: 2 раза
Репутация:   1  


Сам с недавних пор использую данный методом, но с более расширенным вариантом.
закрывать страницы от индексации через robots.txt не круто
smile.gif

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал brainbay - 27.12.2012, 7:50
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Где можно купить подписчиков для Viber-канала?
0 GlazunOFF 272 Сегодня, 15:56
автор: GlazunOFF
Открытая тема (нет новых ответов) Сборка WP для сайтов знакомств, объявлений, каталогов и т.д.
6 Seodjo 4183 Вчера, 16:04
автор: Seodjo
Горячая тема (нет новых ответов) Программа для instagram Socialkit
182 socialkit 64298 Вчера, 13:09
автор: socialkit
Открытая тема (нет новых ответов) Верстаю для портфолио
5 paradoks0 714 24.5.2018, 19:34
автор: paradoks0
Открытая тема (нет новых ответов) Русские темы для WordPress. Недорого.
0 SOROKVLAD29 356 24.5.2018, 10:16
автор: SOROKVLAD29


 



RSS Текстовая версия Сейчас: 26.5.2018, 18:15
Дизайн