X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Вопрос о robots.txt, не индексировать категорию, индексировать материал.
S1xteen
S1xteen
Topic Starter сообщение 7.3.2011, 23:25; Ответить: S1xteen
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 293
Регистрация: 20.9.2010
Поблагодарили: 64 раза
Репутация:   12  


Можно ли в robots.txt запретить индексировать всю категорию (чтобы не было дублей текста короткой новости), но разрешить индексировать сам материал лежащий в данной кат.?
Есть полноценный сайт с категориями и т.п., но хочу что бы кушались главная страница и полная новость.
К примеру url категории такой /komediya/1
Url полной новости /komediya/ljubov_morkov_3.html

Если в роботсе будет так:
Disallow: /komediya/1

то будет ли скушана конечная страница, или я запретил индексировать все новости нах. в данной категории?

-----Добавлено-----
Решил вопрос с помощью Google webmaster, ввёл адрес страницы, которую нужно индексировать - [разрешено], ввёл адрес страницы, которая запрещена в файле - [запрещено].
Причём yandex webmaster в этом плане откровенно обманывает! У него ВСЕ страницы разрешены к индексации, включая те, что указаны в роботсе smile.gif

Теперь я убедился, что правильно составил robots.txt

Сообщение отредактировал S1xteen - 7.3.2011, 23:27
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
tdos
tdos
сообщение 11.3.2011, 15:22; Ответить: tdos
Сообщение #2


Новичок
*


Группа: User
Сообщений: 19
Регистрация: 9.3.2011
Поблагодарили: 5 раз
Репутация:   0  


если яндекс вебмастер сказал что будет индексировать, то он будет. я бы посоветовал составить так -
Disallow: /komediya/1/*
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос к знатокам Instagram
20 SEOMR 4142 30.11.2017, 14:25
автор: DiscordPro
Открытая тема (нет новых ответов) Вопрос про Телеграмм
18 syd2010 1114 28.11.2017, 14:25
автор: PostBrigada
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47430 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Вопрос по seo для интернет магазина
куда девать продвинутые товары, которые уже не выпускают
13 viktormerke 2340 25.11.2017, 20:06
автор: Mikki
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыАrticle manager вопрос
0 Smile3D 438 24.11.2017, 18:27
автор: Smile3D


 



RSS Текстовая версия Сейчас: 12.12.2017, 16:35
Дизайн