Помощник
|
Robots.txt |
Atipichniy
|
Сообщение
#1
|
||
|
|
||
|
|||
predator-hoi |
23.9.2009, 14:59;
Ответить: predator-hoi
Сообщение
#2
|
|
User-agent: * - для всех поисковиков
User-Agent: Yandex - для яши -------------------- |
|
|
donriga |
23.9.2009, 15:00;
Ответить: donriga
Сообщение
#3
|
|
Сложно сказать зачем так пишут два раза, но лучше писать для Яши тоже отдельно Любит он так
|
|
|
predator-hoi |
23.9.2009, 15:02;
Ответить: predator-hoi
Сообщение
#4
|
|
|
Url в директиве Host
Следует писать без аббревиатуры протокола передачи гипертекста, то есть без http:// и без закрывающего слеша / Неправильно: User-agent: Yandex Disallow: /cgi-bin Host: http://www.site.ru/ Правильно: User-agent: Yandex Disallow: /cgi-bin Host: www.site.ru Директива host Является корректной только для робота Яндекса
-------------------- |
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ |
138 | Akira | 79068 | 12.8.2019, 21:28 автор: neonix |
|
Куплю места для размещения TXT+URL Строительная тематика. | 7 | regem | 7642 | 28.3.2019, 18:31 автор: regem |
|
Срочно требуется специалист по robots.txt Разовая работа |
1 | tankoff | 2206 | 8.3.2017, 1:56 автор: PavelMarty |
|
Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики. | 0 | regem | 8347 | 1.3.2017, 3:20 автор: regem |
|
Работы по файлу robots.txt | 8 | tankoff | 3713 | 19.3.2016, 20:02 автор: tankoff |
Текстовая версия | Сейчас: 23.4.2024, 12:39 |