Помощник
|
robots.txt, как правильно написать |
edder
|
Сообщение
#1
|
|
К сайту прикручено два домена, основной и алиас. Проблема в том , что яндекс воспринял основной домен как зеркало алиаса и вообще его не индексирует.
Как исправить? Полазил по факу и нашёл только такой вариант: User-Agent: yandex Disallow: /forum Disallow: /cgi-bin Host: www.основной домен Вот тут возникает следущий вопрос: Если робот зайдёт на алиас и прочтёт, то всё вроде нормально, но если он зайдёт на основной домен, то тоже прочтёт запреты. Поможет ли такой robot.txt ? И если не поможет , то как написать правильный? |
|
|
n-visible |
25.3.2008, 10:47;
Ответить: n-visible
Сообщение
#2
|
|
Все правильно делаешь. Только зачем запрет на форум ставить?
Вообще можно еще 301 с алиаса на главный поставить. -------------------- |
|
|
edder
|
Сообщение
#3
|
|
|
|
|
n-visible |
25.3.2008, 12:25;
Ответить: n-visible
Сообщение
#4
|
|
Тогда все правильно. Примерно так
User-agent: * Disallow: Все что надо запретить Host: основной домен с ввв или без него 301 имеется в виду редирект. Можно написать в .htaccess, чтоб все что попадает на один домен автоматом перебрасывалось на другой.. -------------------- |
|
|
edder
|
Сообщение
#5
|
|
Запрещаю всё, но зайдя на основной домен робот так же прочитат все запреты.
Комманда host в этом случае поможет или он на оба домена может забить? |
|
|
n-visible |
25.3.2008, 14:55;
Ответить: n-visible
Сообщение
#6
|
|
Тебе вообще ничего не надо запрещать. Робот, когда заходит на сайт-первым делом смотрит хост в роботс.тхт. Если там другой домен-уходит на него.
-------------------- |
|
|
edder
|
Сообщение
#7
|
|
Спасибо за консультацию.
|
|
|
alexa |
7.4.2008, 11:35;
Ответить: alexa
Сообщение
#8
|
|
|
Спасибо за консультацию. Однозначно полезная вещ ...
-------------------- |
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ |
138 | Akira | 79070 | 12.8.2019, 21:28 автор: neonix |
|
Куплю места для размещения TXT+URL Строительная тематика. | 7 | regem | 7642 | 28.3.2019, 18:31 автор: regem |
|
Срочно требуется специалист по robots.txt Разовая работа |
1 | tankoff | 2206 | 8.3.2017, 1:56 автор: PavelMarty |
|
Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики. | 0 | regem | 8347 | 1.3.2017, 3:20 автор: regem |
|
Работы по файлу robots.txt | 8 | tankoff | 3713 | 19.3.2016, 20:02 автор: tankoff |
Текстовая версия | Сейчас: 23.4.2024, 14:22 |