Помощник
 |
|
|
|
|
Сообщение сайта
|
 Вопрос о robots.txt |
MedLib
|
Сообщение
#1
|
||
 Док  
 Группа: Active User Сообщений: 2382 Регистрация: 9.8.2008 Поблагодарили: 772 раза Репутация:  150 
 |
|
||
 |
|
||
serkaz
|
 12.8.2012, 4:42;
Ответить: serkaz
Сообщение
#2
|
|
Участник Группа: User Сообщений: 203 Регистрация: 15.2.2012 Поблагодарили: 60 раз Репутация: 10
|
Disallow: /authors/ Allow: /authors/stivoter-meggi Проверить можно на аддурилке яндекса Сообщение отредактировал serkaz - 12.8.2012, 4:46 -------------------- |
|
|
|
|
MedLib
|
Сообщение
#3
|
|
Док
Группа: Active User Сообщений: 2382 Регистрация: 9.8.2008 Поблагодарили: 772 раза Репутация: 150
|
serkaz, спасибо, так и сделал, затем проверил через панель ЯВМ. Указанный урл разрешен к индексации. А Директиву Allow лучше в каком порядке (в самом начале, в середине, в конце) указывать в robots.txt или без разницы?
И ещё один вопрос. У сайта есть поддомен. Яндекс понимает его как отдельный сайт и индексирует отдельно от основного домена. Google же считает его одним целым с доменом, поэтому разница проиндексированных страниц у основного домена в гугле и яндексе ну очень большая. Можно через robots как то указать гуглу, что поддомен - это отдельный сайт? Сообщение отредактировал MedLib - 12.8.2012, 4:52 |
|
|
|
|
saraus
|
12.8.2012, 5:41;
Ответить: saraus
Сообщение
#4
|
 Старожил Группа: Active User Сообщений: 1219 Регистрация: 21.6.2011 Поблагодарили: 420 раз Репутация: 67
|
(MedLib @ 12.8.2012, 3:50)  А Директиву Allow лучше в каком порядке Помойму без разницы, но я всегда в начал прописываю (логично размышляя, с начало боту показываешь, что нужно индексировать, потом, что нет) (MedLib @ 12.8.2012, 3:50) Google же считает его одним целым с доменом Как вариант, прописать поддомену отдельный роботс с хостом. |
|
|
|
|
serkaz
|
12.8.2012, 6:25;
Ответить: serkaz
Сообщение
#5
|
|
Участник Группа: User Сообщений: 203 Регистрация: 15.2.2012 Поблагодарили: 60 раз Репутация: 10
|
А Директиву Allow лучше в каком порядке Насколько мне известно, без разницы, но на мой взгляд логичнее более длинное правило указывать после короткого. То есть в данном случае Allow: /authors/stivoter-meggi после Disallow: /authors/. Для удобства можете указать вот так: User-Agent: * Disallow: /authors/ Disallow: /*replytocom= Disallow: /*page= Disallow: /*s= Disallow: /?p= Disallow: /wp-admin/ Allow: /authors/stivoter-meggi Как вариант, прописать поддомену отдельный роботс с хостом. Хост это яндексовская приблуда. Сообщение отредактировал serkaz - 12.8.2012, 6:28 -------------------- |
|
|
|
|
loginmain
|
12.8.2012, 9:10;
Ответить: loginmain
Сообщение
#6
|
|
 Оптимизатор Группа: Super Moderator Сообщений: 4476 Регистрация: 5.10.2008 Поблагодарили: 2210 раз Репутация: 205
|
(MedLib @ 12.8.2012, 3:50) А Директиву Allow лучше в каком порядке (в самом начале, в середине, в конце) указывать в robots.txt или без разницы? яша говорит, что разницы нет, но лучше сортировать по длине Директивы Allow и Disallow из соответствующего User-agent блока сортируются по длине префикса URL (от меньшего к большему) и применяются последовательно. Если для данной страницы сайта подходит несколько директив, то выбирается последняя в порядке появления в сортированном списке. Таким образом порядок следования директив в файле robots.txt не влияет на использование их роботом. (MedLib @ 12.8.2012, 3:50) И ещё один вопрос. У сайта есть поддомен. Яндекс понимает его как отдельный сайт и индексирует отдельно от основного домена. Google же считает его одним целым с доменом, поэтому разница проиндексированных страниц у основного домена в гугле и яндексе ну очень большая. Можно через robots как то указать гуглу, что поддомен - это отдельный сайт? Хм... поддомен помоему всегда является отдельным сайтом.
|
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Вопрос - платное размещение баннеров на сайте | 10 | WGN | 3191 | 14.12.2020, 14:20 автор: Peterson |
|
Вопрос по рекламе в "инстаграме" Только активные аккаунты могут создавать или редактировать рекламу |
8 | Zubkov | 16056 | 17.1.2020, 17:49 автор: Forumacc |
 |
 Вопрос-ответ о работе форума |
307 | dos1k | 43336 | 9.11.2019, 17:59 автор: heks |
|
Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ |
138 | Akira | 79103 | 12.8.2019, 21:28 автор: neonix |
|
Куплю места для размещения TXT+URL Строительная тематика. | 7 | regem | 7643 | 28.3.2019, 18:31 автор: regem |
|
Текстовая версия | Сейчас: 24.4.2024, 23:24 |
