X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Где отметить sitemap.xml в robots.txt?
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 22:40; Ответить: romerfak
Сообщение #1


Участник
***


Группа: User
Сообщений: 110
Регистрация: 20.5.2011
Из: Украина
Поблагодарили: 3 раза
Репутация:   2  


Где отметить sitemap.xml в robots.txt? Так как тут? или перед директивой Host?




User-agent: *
Sitemap: http://budmastera.com/sitemap.xml
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 22:41; Ответить: Zonder
Сообщение #2


Участник
***

Группа: User
Сообщений: 213
Регистрация: 9.9.2008
Из: Москва
Поблагодарили: 47 раз
Репутация:   7  


обычно пишут в самом конце
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 22:43; Ответить: romerfak
Сообщение #3


Участник
***


Группа: User
Сообщений: 110
Регистрация: 20.5.2011
Из: Украина
Поблагодарили: 3 раза
Репутация:   2  


Zonder,
(Zonder @ 10.12.2012, 21:41) *
обычно пишут в самом конце

То есть, после директивы host?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 22:44; Ответить: Zonder
Сообщение #4


Участник
***

Группа: User
Сообщений: 213
Регистрация: 9.9.2008
Из: Москва
Поблагодарили: 47 раз
Репутация:   7  


romerfak, угу
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
NeZapomnil
NeZapomnil
сообщение 10.12.2012, 22:57; Ответить: NeZapomnil
Сообщение #5


Новичок
*

Группа: User
Сообщений: 17
Регистрация: 22.11.2012
Из: Москва
Поблагодарили: 0 раз
Репутация:   0  


пример типичного роботс для WP

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: site.ru

Sitemap: http://site.ru/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
romerfak
romerfak
Topic Starter сообщение 10.12.2012, 23:04; Ответить: romerfak
Сообщение #6


Участник
***


Группа: User
Сообщений: 110
Регистрация: 20.5.2011
Из: Украина
Поблагодарили: 3 раза
Репутация:   2  


NeZapomnil, то есть между строкой host и sitemap.xml пропустить одну строку? У меня джумла.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zonder
Zonder
сообщение 10.12.2012, 23:37; Ответить: Zonder
Сообщение #7


Участник
***

Группа: User
Сообщений: 213
Регистрация: 9.9.2008
Из: Москва
Поблагодарили: 47 раз
Репутация:   7  


romerfak,

строка пропускается для удобства, как хотите
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rom_4
rom_4
сообщение 11.12.2012, 0:05; Ответить: rom_4
Сообщение #8


трафа много не бывает
******

Группа: Active User
Сообщений: 1451
Регистрация: 9.7.2010
Из: Россия
Поблагодарили: 551 раз
Репутация:   62  


romerfak, строку пропустить НАДО


--------------------
Зарабатываю тут, тут и тут
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
NeZapomnil
NeZapomnil
сообщение 11.12.2012, 0:12; Ответить: NeZapomnil
Сообщение #9


Новичок
*

Группа: User
Сообщений: 17
Регистрация: 22.11.2012
Из: Москва
Поблагодарили: 0 раз
Репутация:   0  


насчет пустой строки читаем у Яндекса в вебмастере
"Кроме того, в соответствии со стандартом перед каждой директивой 'User-agent' рекомендуется вставлять пустой перевод строки."

кто как не разработчик джумлы должен знать как правильно писать robots
идем на http://www.joomla.org/robots.txt
смотрим что там у них :-) понаписано
например они рекомендуют закрыть папки с логами и много чего еще ...
добавляем хост и сайтмап, и роботс готов :-)

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

Сообщение отредактировал NeZapomnil - 11.12.2012, 0:17
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rom_4
rom_4
сообщение 11.12.2012, 0:16; Ответить: rom_4
Сообщение #10


трафа много не бывает
******

Группа: Active User
Сообщений: 1451
Регистрация: 9.7.2010
Из: Россия
Поблагодарили: 551 раз
Репутация:   62  


(NeZapomnil @ 11.12.2012, 0:12) *
кто как не разработчик джумлы должен знать как правильно писать robots

вот чесно скажу - такое ощущение что разрабы ложили на этот роботс. и это факт.
поэтому опять же - на джумлафоруме есть целая ветка с уже готовыми роботсами. но - брать надо все с умом и адаптировать под свою сборку джумлы


--------------------
Зарабатываю тут, тут и тут
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Ripple где можно приобрести ?
3 DimaMyrzich 381 Вчера, 12:24
автор: mr_LasVegas
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыГде взять скрипт круговой индикатор выполнения
3 slavyn 454 14.12.2017, 22:55
автор: Caterpillar
Открытая тема (нет новых ответов) Подскажите по где купить дёшево домены com info biz net
6 docdie 1000 13.12.2017, 18:29
автор: docdie
Открытая тема (нет новых ответов) Как найти группы, где в обсуждениях есть аренда
7 Motorocker 1011 6.12.2017, 13:49
автор: Nickita_Larionoff
Горячая тема (нет новых ответов) В правительстве обсудили, где в России лучше разместить майнинговые фермы
62 MissContent 5524 4.12.2017, 23:12
автор: Mikki


 



RSS Текстовая версия Сейчас: 17.12.2017, 8:40
Дизайн