X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Правильный robot.txt для dle 10
znamenski
znamenski
Topic Starter сообщение 10.3.2014, 12:05; Ответить: znamenski
Сообщение #1


Частый гость
**

Группа: User
Сообщений: 60
Регистрация: 6.2.2014
Из: г.Буденновск
Поблагодарили: 7 раз
Репутация:   1  


Добрый день всем!

Какой должен быть правильный робот тхт?

У меня такой:

User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

Мне на данном форуме сделали замечания: - В файле robots.txt не указаны карта сайта (sitemap) и главное зеркало (host). Это обязательно?


--------------------
скайп: znamenskira email: r.znamenski@gmail.com
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Tollun
Tollun
сообщение 10.3.2014, 12:21; Ответить: Tollun
Сообщение #2


Старожил
******

Группа: Active User
Сообщений: 1595
Регистрация: 1.10.2009
Из: Хабаровск
Поблагодарили: 394 раза
Репутация:   66  


Можно и короче
Код
User-agent: *
Disallow: /engine/
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=
Disallow: /*do=


Если карты нет, логично, что она не указана, если есть - дайте знать ПС.
Host желателен, дабы избежать недоразумений


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wturm
wturm
сообщение 10.3.2014, 12:39; Ответить: wturm
Сообщение #3


Бывалый
****


Группа: User
Сообщений: 286
Регистрация: 30.1.2011
Из: Крым
Поблагодарили: 70 раз
Репутация:   13  


Цитата
Мне на данном форуме сделали замечания: - В файле robots.txt не указаны карта сайта (sitemap) и главное зеркало (host). Это обязательно?


По желанию.
Но лишним точно не будет.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Burelom
Burelom
сообщение 10.3.2014, 13:50; Ответить: Burelom
Сообщение #4


Частый гость
**


Группа: User
Сообщений: 56
Регистрация: 20.7.2011
Поблагодарили: 2 раза
Репутация:   0  


User-agent: *
Disallow: /user/
Disallow: /tags/
Disallow: /*/tags/
Disallow: /201*/
Disallow: *thumb
Disallow: /backup/
Disallow: /cache/
Disallow: /catalog/
Disallow: /lastnews/
Disallow: /language/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /statistics.html
Disallow: /rules.html
Disallow: /rss.xml
Disallow: /index.php?action=mobile
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*print
Host: ***.com
Sitemap: http://***.com/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Price
Price
сообщение 10.3.2014, 14:12; Ответить: Price
Сообщение #5


Новичок
*

Группа: User
Сообщений: 39
Регистрация: 30.10.2013
Поблагодарили: 6 раз
Репутация:   0  


Да, очень желательно указать указанные Вами команды чтоб избежать проблем в будущем.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
semiland
semiland
сообщение 15.3.2014, 0:44; Ответить: semiland
Сообщение #6


Участник
***

Группа: User
Сообщений: 109
Регистрация: 18.5.2013
Из: Odessa
Поблагодарили: 13 раз
Репутация:   1  


Вот, что пишет Александр Алаев по данному поводу: http://alaev.info/blog/post/3900

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Partner Earning - идеальная партнерская программа для вебмастеров в RU/EU гемблинге.
158 PartnerEarning 43318 Сегодня, 9:57
автор: bebecka
Открытая тема (нет новых ответов) Недорого напишу тексты для сайтов.
Копирайт и рерайт за небольшую плату.
5 Мангуст 656 Сегодня, 8:26
автор: phant
Открытая тема (нет новых ответов) Как использовать показатель SERP impressions из Яндекс.Вебмастера для анализа изменений в ранжировании
alexeytrudov.com - персональный блог SEO-аналитика
0 Luden 312 Вчера, 21:39
автор: Luden
Открытая тема (нет новых ответов) GoldenGoose - лучший wap-click проект для твоего трафика!
13 Alex_Berger 2907 Вчера, 19:25
автор: Alex_Berger
Открытая тема (нет новых ответов) Нужен крауд-специалист для наращивания трафика и ссылочного
0 Kiloan_Frost 232 Вчера, 15:31
автор: Kiloan_Frost


 



RSS Текстовая версия Сейчас: 23.5.2018, 11:45
Дизайн