Помощник
 |
Сообщение сайта
|
 Можно ли в robots.txt указывать несколько sitemap?, правильные директивы |
Genesis
|
Сообщение
#1
|
||
 Бывалый  Группа: User Сообщений: 419 Регистрация: 6.2.2011 Поблагодарили: 0 раз Репутация:  27 
 |
|
||
 |
|
||
| Гость_0_* Гость_0_* |
 26.5.2011, 23:37;
Ответить: Гость_0_*
Сообщение
#2
|
|
|
Genesis, а зачем несколько карт сайта?
Вроде бы правильно всё, закрыты "технические" дирректории. По images не подскажу, что там за страницы на site.ru/images/... ? |
|
|
|
|
Genesis
|
Сообщение
#3
|
|
Бывалый Группа: User Сообщений: 419 Регистрация: 6.2.2011 Поблагодарили: 0 раз Репутация: 27
|
C картами разобрался, вопрос отпал. В /images картинки.
|
|
|
|
|
ZiTosS
|
28.5.2011, 20:57;
Ответить: ZiTosS
Сообщение
#4
|
|
 Ваша совесть Группа: User Сообщений: 5148 Регистрация: 18.2.2008 Из: Нижний Новгород Поблагодарили: 0 раз Репутация: 8
|
Genesis,
1) Не понял зачем: Allow: /index.php?option=com_xmap&sitemap=1&view=xml Разве коим-то правилом вы запрещаете индексировать данный документ? 2) Папки с инсталляцией вообще быть не должно, после установки движков обычно просят её удалять. Смотрите... Напортят вам что-нить в работе ресурса. 3) Несколько карт можно указывать даже для одного робота. 4) С директивой Host вы не правильно разобрались. Вот что пишет Яндекс: Важно: в целях совместимости с роботами, которые не полностью следуют стандарту при обработке robots.txt, директиву 'Host' необходимо добавлять в группе, начинающейся с записи 'User-Agent', непосредственно после директив 'Disallow'('Allow'). Как мне кажется, имеется ввиду, что директиву host надо добавлять сразу же после Disallow(Allow). Хотя по этому поводу есть тоже несколько слов: Тем не менее директива Host является межсекционной, поэтому будет использоваться роботом вне зависимости от места в файле robots.txt, где она указана. Так же: Важно: Директива Host в файле robots.txt может быть только одна. В случае указания нескольких директив, использоваться будет первая. Данная директива корректно воспринимается только Яшей, если я не ошибаюсь. Вот ещё ссылка по этой директиве: http://robotstxt.org.ru/rurobots/yandex#Host 5) Про заглавные буквы в названии файла robots.txt молчу... (следует из заголовка темы)
|
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Через какой браузер и как можно найти в кэшэ браузера видео | 10 | Room | 2286 | 23.3.2024, 7:41 автор: Room |
|
Можно ли в старый SEO текст вместо старого домена поставить новый? | 3 | Tutich | 1209 | 22.3.2024, 14:47 автор: Tutich |
|
Можно жить на доход с партнёрских программ? | 13 | Santey | 2257 | 15.3.2024, 19:43 автор: wanessa |
|
Жители РФ не спешат отказываться от Gmail, хотя на размышления осталось всего несколько месяцев | 20 | Room | 4169 | 11.3.2024, 16:00 автор: Lumex |
|
Нужно ли указывать регион для сайта? | 2 | rownong27 | 1197 | 18.2.2024, 23:20 автор: rownong27 |
|
Текстовая версия | Сейчас: 18.4.2024, 18:08 |
