X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> robots.txt, как правильно написать
edder
edder
Topic Starter сообщение 25.3.2008, 10:33; Ответить: edder
Сообщение #1


К сайту прикручено два домена, основной и алиас. Проблема в том , что яндекс воспринял основной домен как зеркало алиаса и вообще его не индексирует.
Как исправить? Полазил по факу и нашёл только такой вариант:
User-Agent: yandex
Disallow: /forum
Disallow: /cgi-bin
Host: www.основной домен

Вот тут возникает следущий вопрос: Если робот зайдёт на алиас и прочтёт, то всё вроде нормально, но если он зайдёт на основной домен, то тоже прочтёт запреты.
Поможет ли такой robot.txt ? И если не поможет , то как написать правильный?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 10:47; Ответить: n-visible
Сообщение #2


Все правильно делаешь. Только зачем запрет на форум ставить?
Вообще можно еще 301 с алиаса на главный поставить.


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 10:55; Ответить: edder
Сообщение #3


(n-visible @ 25.3.2008, 8:47) *
Все правильно делаешь. Только зачем запрет на форум ставить?
Вообще можно еще 301 с алиаса на главный поставить.

Форума нету, значения не имеет.
что значит 301 поставить?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 12:25; Ответить: n-visible
Сообщение #4


Тогда все правильно. Примерно так
User-agent: *
Disallow: Все что надо запретить
Host: основной домен с ввв или без него

301 имеется в виду редирект. Можно написать в .htaccess, чтоб все что попадает на один домен автоматом перебрасывалось на другой..


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 14:42; Ответить: edder
Сообщение #5


Запрещаю всё, но зайдя на основной домен робот так же прочитат все запреты.
Комманда host в этом случае поможет или он на оба домена может забить?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
n-visible
n-visible
сообщение 25.3.2008, 14:55; Ответить: n-visible
Сообщение #6


Тебе вообще ничего не надо запрещать. Робот, когда заходит на сайт-первым делом смотрит хост в роботс.тхт. Если там другой домен-уходит на него.


--------------------
грамотная верстка html ко мне
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
edder
edder
Topic Starter сообщение 25.3.2008, 15:54; Ответить: edder
Сообщение #7


Спасибо за консультацию.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
alexa
alexa
сообщение 7.4.2008, 11:35; Ответить: alexa
Сообщение #8


(edder @ 25.3.2008, 13:54) *
Спасибо за консультацию.

Однозначно полезная вещ ...

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Первичный краулинг ahrefs и robots.txt
503 ошибка
9 anykey13 416 17.6.2021, 9:24
автор: anykey13
Горячая тема (нет новых ответов) Давайте блокировать ботов в robots.txt
50 Cott 6576 15.5.2021, 21:40
автор: DUbiev
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 66108 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 6387 28.3.2019, 18:31
автор: regem
Открытая тема (нет новых ответов) Что закрыть в robots для форума на bbPress?
4 dos1k_rs 703 10.12.2018, 16:43
автор: dos1k_rs


 



RSS Текстовая версия Сейчас: 24.6.2021, 13:26
Дизайн