X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Актуальный Robots на DLE. Подскажите пожалуйста
Seo-optimist
Seo-optimist
Topic Starter сообщение 2.9.2013, 20:51; Ответить: Seo-optimist
Сообщение #1


Старожил
******


Группа: Active User
Сообщений: 2118
Регистрация: 31.1.2009
Из: Ukraine
Поблагодарили: 616 раз
Репутация:   158  


Всем привет. Ребят, подскажите актуальный robots на DLE?
В данный момент такой использую:

Но, думаю, что правильно будет еще закрывать повторяющее страницы как минимум:
page которые.
Вообщем подскажите актуальный роботс.
Спасибо.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Aleksandrometr
Aleksandrometr
сообщение 2.9.2013, 21:18; Ответить: Aleksandrometr
Сообщение #2


I ♥ BassBoosted
*****

Группа: Active User
Сообщений: 544
Регистрация: 23.8.2012
Поблагодарили: 203 раза
Репутация:   77  


Примерно так:
Развернуть/Свернуть
User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /catalog/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /catalog/
Disallow: /user/
Disallow: /program/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts
Disallow: /autobackup.php
Disallow: /20*/*
Disallow: /tags/
Disallow: */page/*
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=addnews
Disallow: /*do=lastnews
Disallow: /*do=lastcomments
Disallow: /*do=lostpassword
Disallow: /*do=register
Disallow: /*do=search
Disallow: /addnews.html
Disallow: /statistics.html
Disallow: /search.html
Disallow: /rules.html

User-agent: Yandex
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /catalog/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /catalog/
Disallow: /user/
Disallow: /program/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts
Disallow: /autobackup.php
Disallow: /20*/*
Disallow: /tags/
Disallow: */page/*
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=addnews
Disallow: /*do=lastnews
Disallow: /*do=lastcomments
Disallow: /*do=lostpassword
Disallow: /*do=register
Disallow: /*do=search
Disallow: /addnews.html
Disallow: /statistics.html
Disallow: /search.html
Disallow: /rules.html
Sitemap: http://site.ru.ru/sitemap.xml
Host: site.ru


Сообщение отредактировал Aleksandrometr - 2.9.2013, 21:19


--------------------


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
seo_talisman
seo_talisman
сообщение 2.9.2013, 23:59; Ответить: seo_talisman
Сообщение #3


Частый гость
**

Группа: User
Сообщений: 99
Регистрация: 1.9.2013
Из: Беларусь
Поблагодарили: 14 раз
Репутация:   1  


Aleksandrometr, я бы еще добавил строки:

Disallow: /cache/
Disallow: /favorites/
Disallow: /cgi-bin/
Disallow: /*rss.xml


--------------------


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Aleksandrometr
Aleksandrometr
сообщение 22.9.2013, 18:16; Ответить: Aleksandrometr
Сообщение #4


I ♥ BassBoosted
*****

Группа: Active User
Сообщений: 544
Регистрация: 23.8.2012
Поблагодарили: 203 раза
Репутация:   77  


seo_talisman, папка /cgi-bin/ на хостинге совершенно бесполезна и безболезненно удаляется, поэтому никогда не пишу эту строку в robots.txt

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Подскажите хостинг в Украине
7 Infacto 1430 Сегодня, 19:41
автор: Infacto
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыОцените первую работу пожалуйста
57 Findes 10996 Сегодня, 15:24
автор: про100та
Открытая тема (нет новых ответов) Подскажите по где купить дёшево домены com info biz net
12 docdie 2927 23.5.2018, 21:31
автор: yacovlefan
Горячая тема (нет новых ответов) Подскажите норм VPN-сервис для смартфона?
35 CyberAngel 6195 23.5.2018, 17:17
автор: Vlad_Sokolov
Горячая тема (нет новых ответов) Регистрация Вашего сайта (профиля,DLE сайты,подписи на форумах,постинг Тиц 10> , ПР 1>)
312 kaartes 112933 22.5.2018, 12:07
автор: avega


 



RSS Текстовая версия Сейчас: 25.5.2018, 21:10
Дизайн