X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Опять вопрос по robots.txt, дубли страниц
MsC
MsC
Topic Starter сообщение 15.10.2011, 2:49; Ответить: MsC
Сообщение #1


Участник
***

Группа: User
Сообщений: 134
Регистрация: 27.3.2011
Из: Москоу
Поблагодарили: 23 раза
Репутация:   7  


Прочитал несколько тем из поиска, почитал хелп яндекса, но ответ на вопрос так и не нашел, если где то есть ответ-сильно не пинайте.
Вобщем вопрос такой. Запустил генератор карты сайта и он мне выдал(рабочие ссылки-проверял) такие ссылки my-site.ru/my-site и my-site/my-site-gorod ведущие на страницу с материалом главной страницы. Движок джумла, соответственно материал с главной страницы (одна статья) доступен и по еще одной ссылке my-site.ru/my-site. Можно ли в роботс.тхт написать "Disallow: my-site.ru/my-site Disallow: my-site.ru/my-site-gorod"? Проиндексируется ли материал на главной странице?
Надеюсь понятно описал проблему.

Сообщение отредактировал MsC - 15.10.2011, 2:50
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SANR
SANR
сообщение 15.10.2011, 8:33; Ответить: SANR
Сообщение #2


Участник
***

Группа: User
Сообщений: 144
Регистрация: 8.10.2008
Поблагодарили: 46 раз
Репутация:   7  


Да главная будит индексироваться и my-site.ru/my-site, my-site.ru/my-site-gorod тоже будит индексироваться))).
Нужно так
User-agent: *
Disallow: /my-site
Disallow: /my-site-gorod

Вам сюда http://webmaster.yandex.ua/robots.xml
Прописываете
В графе Имя хоста
my-site.ru
В графе Robots.txt ( или подгружаете с сайта )
User-agent: *
Disallow: /my-site
Disallow: /my-site-gorod
В графе Список URL
my-site.ru
my-site.ru/my-site
my-site.ru/my-site-gorod
Нажимаете "Проверить"
И видим что будит индексироваться, а что нет.
Результаты проверки URL
my-site.ru разрешен
my-site.ru/my-site запрещен правилом /my-site
my-site.ru/my-site-gorod запрещен правилом /my-site

ппс как разжевал....

Сообщение отредактировал SANR - 15.10.2011, 8:36


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
MsC
MsC
Topic Starter сообщение 15.10.2011, 11:25; Ответить: MsC
Сообщение #3


Участник
***

Группа: User
Сообщений: 134
Регистрация: 27.3.2011
Из: Москоу
Поблагодарили: 23 раза
Репутация:   7  


(SANR @ 15.10.2011, 8:33) *
Да главная будит индексироваться и my-site.ru/my-site, my-site.ru/my-site-gorod тоже будит индексироваться))).
Нужно так
User-agent: *
Disallow: /my-site
Disallow: /my-site-gorod

Вам сюда http://webmaster.yandex.ua/robots.xml
Прописываете
В графе Имя хоста
my-site.ru
В графе Robots.txt ( или подгружаете с сайта )
User-agent: *
Disallow: /my-site
Disallow: /my-site-gorod
В графе Список URL
my-site.ru
my-site.ru/my-site
my-site.ru/my-site-gorod
Нажимаете "Проверить"
И видим что будит индексироваться, а что нет.
Результаты проверки URL
my-site.ru разрешен
my-site.ru/my-site запрещен правилом /my-site
my-site.ru/my-site-gorod запрещен правилом /my-site

ппс как разжевал....

Ага, проверил, все отличноwink.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос по seo для интернет магазина
куда девать продвинутые товары, которые уже не выпускают
18 viktormerke 2803 15.12.2017, 15:18
автор: Smspva
Открытая тема (нет новых ответов) Вопрос к знатокам Instagram
20 SEOMR 4182 30.11.2017, 14:25
автор: DiscordPro
Открытая тема (нет новых ответов) Вопрос про Телеграмм
18 syd2010 1169 28.11.2017, 14:25
автор: PostBrigada
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47507 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыАrticle manager вопрос
0 Smile3D 441 24.11.2017, 18:27
автор: Smile3D


 



RSS Текстовая версия Сейчас: 17.12.2017, 3:13
Дизайн