X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> robots.txt, как правильно написать
edder
edder
Topic Starter сообщение 25.3.2008, 10:33; Ответить: edder
Сообщение #1


Участник
***

Группа: User
Сообщений: 145
Регистрация: 25.3.2008
Поблагодарили: 20 раз
Репутация:   5  


К сайту прикручено два домена, основной и алиас. Проблема в том , что яндекс воспринял основной домен как зеркало алиаса и вообще его не индексирует.
Как исправить? Полазил по факу и нашёл только такой вариант:
User-Agent: yandex
Disallow: /forum
Disallow: /cgi-bin
Host: www.основной домен

Вот тут возникает следущий вопрос: Если робот зайдёт на алиас и прочтёт, то всё вроде нормально, но если он зайдёт на основной домен, то тоже прочтёт запреты.
Поможет ли такой robot.txt ? И если не поможет , то как написать правильный?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 10:47; Ответить: n-visible
Сообщение #2


Частый гость
**

Группа: User
Сообщений: 87
Регистрация: 11.12.2007
Из: Санкт-Петербург
Поблагодарили: 1 раз
Репутация:   3  


Все правильно делаешь. Только зачем запрет на форум ставить?
Вообще можно еще 301 с алиаса на главный поставить.


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 10:55; Ответить: edder
Сообщение #3


Участник
***

Группа: User
Сообщений: 145
Регистрация: 25.3.2008
Поблагодарили: 20 раз
Репутация:   5  


(n-visible @ 25.3.2008, 8:47) *
Все правильно делаешь. Только зачем запрет на форум ставить?
Вообще можно еще 301 с алиаса на главный поставить.

Форума нету, значения не имеет.
что значит 301 поставить?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 12:25; Ответить: n-visible
Сообщение #4


Частый гость
**

Группа: User
Сообщений: 87
Регистрация: 11.12.2007
Из: Санкт-Петербург
Поблагодарили: 1 раз
Репутация:   3  


Тогда все правильно. Примерно так
User-agent: *
Disallow: Все что надо запретить
Host: основной домен с ввв или без него

301 имеется в виду редирект. Можно написать в .htaccess, чтоб все что попадает на один домен автоматом перебрасывалось на другой..


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 14:42; Ответить: edder
Сообщение #5


Участник
***

Группа: User
Сообщений: 145
Регистрация: 25.3.2008
Поблагодарили: 20 раз
Репутация:   5  


Запрещаю всё, но зайдя на основной домен робот так же прочитат все запреты.
Комманда host в этом случае поможет или он на оба домена может забить?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 14:55; Ответить: n-visible
Сообщение #6


Частый гость
**

Группа: User
Сообщений: 87
Регистрация: 11.12.2007
Из: Санкт-Петербург
Поблагодарили: 1 раз
Репутация:   3  


Тебе вообще ничего не надо запрещать. Робот, когда заходит на сайт-первым делом смотрит хост в роботс.тхт. Если там другой домен-уходит на него.


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 15:54; Ответить: edder
Сообщение #7


Участник
***

Группа: User
Сообщений: 145
Регистрация: 25.3.2008
Поблагодарили: 20 раз
Репутация:   5  


Спасибо за консультацию.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
alexa
alexa
сообщение 7.4.2008, 11:35; Ответить: alexa
Сообщение #8


Оптимизатор-Программист
******

Группа: Active User
Сообщений: 1507
Регистрация: 6.2.2008
Поблагодарили: 198 раз
Репутация:   54  


(edder @ 25.3.2008, 13:54) *
Спасибо за консультацию.

Однозначно полезная вещ ...


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47468 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 499 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1190 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 696 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 14.12.2017, 17:13
Дизайн