X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Где отметить sitemap.xml в robots.txt?
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 22:40; Ответить: romerfak
Сообщение #1


Где отметить sitemap.xml в robots.txt? Так как тут? или перед директивой Host?




User-agent: *
Sitemap: http://budmastera.com/sitemap.xml
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 22:41; Ответить: Zonder
Сообщение #2


обычно пишут в самом конце
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 22:43; Ответить: romerfak
Сообщение #3


Zonder,
(Zonder @ 10.12.2012, 21:41) *
обычно пишут в самом конце

То есть, после директивы host?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 22:44; Ответить: Zonder
Сообщение #4


romerfak, угу
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
NeZapomnil
NeZapomnil
сообщение 10.12.2012, 22:57; Ответить: NeZapomnil
Сообщение #5


пример типичного роботс для WP

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: site.ru

Sitemap: http://site.ru/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 23:04; Ответить: romerfak
Сообщение #6


NeZapomnil, то есть между строкой host и sitemap.xml пропустить одну строку? У меня джумла.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 23:37; Ответить: Zonder
Сообщение #7


romerfak,

строка пропускается для удобства, как хотите
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rom_4
rom_4
сообщение 11.12.2012, 0:05; Ответить: rom_4
Сообщение #8


romerfak, строку пропустить НАДО


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
NeZapomnil
NeZapomnil
сообщение 11.12.2012, 0:12; Ответить: NeZapomnil
Сообщение #9


насчет пустой строки читаем у Яндекса в вебмастере
"Кроме того, в соответствии со стандартом перед каждой директивой 'User-agent' рекомендуется вставлять пустой перевод строки."

кто как не разработчик джумлы должен знать как правильно писать robots
идем на http://www.joomla.org/robots.txt
смотрим что там у них :-) понаписано
например они рекомендуют закрыть папки с логами и много чего еще ...
добавляем хост и сайтмап, и роботс готов :-)

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

Сообщение отредактировал NeZapomnil - 11.12.2012, 0:17
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rom_4
rom_4
сообщение 11.12.2012, 0:16; Ответить: rom_4
Сообщение #10


(NeZapomnil @ 11.12.2012, 0:12) *
кто как не разработчик джумлы должен знать как правильно писать robots

вот чесно скажу - такое ощущение что разрабы ложили на этот роботс. и это факт.
поэтому опять же - на джумлафоруме есть целая ветка с уже готовыми роботсами. но - брать надо все с умом и адаптировать под свою сборку джумлы


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Кто где хранит файлы? И какой объем?
просто интересно
19 mark2013 1993 25.3.2024, 6:42
автор: Skyworker
Открытая тема (нет новых ответов) Где больше пробив на кликандер или попандер или попап трафике?
1 Boymaster 615 20.3.2024, 9:50
автор: Skyworker
Открытая тема (нет новых ответов) Нужен сайт с автонаполнением по XML
1 REGNET 1132 7.3.2024, 15:08
автор: REGNET
Открытая тема (нет новых ответов) Где получить виртуальную карту бесплатно?
22 Mixatraider 5428 2.3.2024, 0:08
автор: Alekser
Горячая тема (нет новых ответов) Где лучше зарегистрировать email?
104 MorKer 13528 29.2.2024, 23:45
автор: bestx24


 



RSS Текстовая версия Сейчас: 29.3.2024, 10:43
Дизайн