X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Правильный robot.txt для dle 10
znamenski
znamenski
Topic Starter сообщение 10.3.2014, 12:05; Ответить: znamenski
Сообщение #1


Добрый день всем!

Какой должен быть правильный робот тхт?

У меня такой:

User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

Мне на данном форуме сделали замечания: - В файле robots.txt не указаны карта сайта (sitemap) и главное зеркало (host). Это обязательно?


--------------------
скайп: znamenskira email: r.znamenski@gmail.com
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Tollun
Tollun
сообщение 10.3.2014, 12:21; Ответить: Tollun
Сообщение #2


Можно и короче
Код
User-agent: *
Disallow: /engine/
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=
Disallow: /*do=


Если карты нет, логично, что она не указана, если есть - дайте знать ПС.
Host желателен, дабы избежать недоразумений
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wturm
wturm
сообщение 10.3.2014, 12:39; Ответить: wturm
Сообщение #3


Цитата
Мне на данном форуме сделали замечания: - В файле robots.txt не указаны карта сайта (sitemap) и главное зеркало (host). Это обязательно?


По желанию.
Но лишним точно не будет.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Burelom
Burelom
сообщение 10.3.2014, 13:50; Ответить: Burelom
Сообщение #4


User-agent: *
Disallow: /user/
Disallow: /tags/
Disallow: /*/tags/
Disallow: /201*/
Disallow: *thumb
Disallow: /backup/
Disallow: /cache/
Disallow: /catalog/
Disallow: /lastnews/
Disallow: /language/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /statistics.html
Disallow: /rules.html
Disallow: /rss.xml
Disallow: /index.php?action=mobile
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*print
Host: ***.com
Sitemap: http://***.com/sitemap.xml


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Price
Price
сообщение 10.3.2014, 14:12; Ответить: Price
Сообщение #5


Да, очень желательно указать указанные Вами команды чтоб избежать проблем в будущем.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
semiland
semiland
сообщение 15.3.2014, 0:44; Ответить: semiland
Сообщение #6


Вот, что пишет Александр Алаев по данному поводу: http://alaev.info/blog/post/3900

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
55 arendator 35023 Сегодня, 2:12
автор: arendator
Открытая тема (нет новых ответов) Rebex.io – Ваша инновационная платформа для обмена криптовалюты!
3 Rebex 950 Вчера, 20:50
автор: Rebex
Открытая тема (нет новых ответов) Посоветуйте массажер для спины и шеи
10 Boymaster 895 Вчера, 18:02
автор: Boymaster
Открытая тема (нет новых ответов) Обучение Email Рассылкам + Софт Для Автоматизации (100к в сутки с сервера)
10 zennoboss 4657 Вчера, 5:20
автор: Skyworker
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
14 Aloof 3382 23.4.2024, 13:50
автор: Vmir


 



RSS Текстовая версия Сейчас: 25.4.2024, 4:48
Дизайн