X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Вопрос о robots.txt, не индексировать категорию, индексировать материал.
S1xteen
S1xteen
Topic Starter сообщение 7.3.2011, 23:25; Ответить: S1xteen
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 293
Регистрация: 20.9.2010
Поблагодарили: 64 раза
Репутация:   12  


Можно ли в robots.txt запретить индексировать всю категорию (чтобы не было дублей текста короткой новости), но разрешить индексировать сам материал лежащий в данной кат.?
Есть полноценный сайт с категориями и т.п., но хочу что бы кушались главная страница и полная новость.
К примеру url категории такой /komediya/1
Url полной новости /komediya/ljubov_morkov_3.html

Если в роботсе будет так:
Disallow: /komediya/1

то будет ли скушана конечная страница, или я запретил индексировать все новости нах. в данной категории?

-----Добавлено-----
Решил вопрос с помощью Google webmaster, ввёл адрес страницы, которую нужно индексировать - [разрешено], ввёл адрес страницы, которая запрещена в файле - [запрещено].
Причём yandex webmaster в этом плане откровенно обманывает! У него ВСЕ страницы разрешены к индексации, включая те, что указаны в роботсе smile.gif

Теперь я убедился, что правильно составил robots.txt

Сообщение отредактировал S1xteen - 7.3.2011, 23:27
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
tdos
tdos
сообщение 11.3.2011, 15:22; Ответить: tdos
Сообщение #2


Новичок
*


Группа: User
Сообщений: 19
Регистрация: 9.3.2011
Поблагодарили: 5 раз
Репутация:   0  


если яндекс вебмастер сказал что будет индексировать, то он будет. я бы посоветовал составить так -
Disallow: /komediya/1/*

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос по поводу цен на сайте
16 WildWeb8 944 13.5.2018, 17:40
автор: genjnat
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
136 Akira 49826 28.4.2018, 1:36
автор: Akira
Открытая тема (нет новых ответов) Вопрос к тем, кто зарабатывает на недвижимости?
Как заработать на недвижке.?
15 Dross 2756 26.4.2018, 18:26
автор: megachange
Открытая тема (нет новых ответов) Вопрос по сетке сайтов
Стоит ли так делать?
10 asskra 1426 12.4.2018, 22:33
автор: Ancitrus
Открытая тема (нет новых ответов) Вопрос по расингу контента
5 gold15 670 2.4.2018, 19:18
автор: mmkulikov


 



RSS Текстовая версия Сейчас: 25.5.2018, 13:20
Дизайн