X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Настройка robots.txt в интернет-магазине
rabota_esti
rabota_esti
Topic Starter сообщение 9.3.2015, 15:42; Ответить: rabota_esti
Сообщение #1


Всем привет. Банальный вопрос, просто для уточнения. Раньше я никогда не работал с интернет-магазинами, поэтому опыта пока мало. Возник спор с системщиками по поводу настройки роботса. То есть вопрос такой. Я говорю, что в индексе не должно быть страниц товаров. То есть допустим вот этой:

http://kaida-fish.ru/catalog/telescopic_wi...ings/?PAGEN_1=2

При чем она находится в индексе по определенному запросу. Сниппет ужасный из-за этого, и вообще ее просто я считаю в индексе быть не должно. Так ли это? И отличается чем то настройка роботса в интернет-магазине от настройки у обычного сайта? Спасибо.


--------------------
Вы можете купить подпись. Пишите в ЛС ваши предложения.

Аудит и консультации
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Корсар
Корсар
сообщение 9.3.2015, 15:58; Ответить: Корсар
Сообщение #2


rabota_esti, страницы товаров должны быть, а это битриксовская пагинация, ее лучше запретить к индексации.

Цитата(rabota_esti @ 9.3.2015, 14:42) *
И отличается чем то настройка роботса в интернет-магазине от настройки у обычного сайта?

Чаще всего отличается, т.к. у магазинов из-за различных фильтров может генерироваться множество дублей.
Для гугла рекомендую в панели вебмастера настроить Сканирование -> Параметры URL, указав как поступать с конкретными параметрами. Для яндекса обычно хватает запрета в robots.

Сообщение отредактировал Корсар - 9.3.2015, 15:59
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rabota_esti
rabota_esti
Topic Starter сообщение 9.3.2015, 16:03; Ответить: rabota_esti
Сообщение #3


Корсар, То есть указанный мною УРЛ должен быть в индексе? Как же мне тогда сделать так, чтобы по запросу выдавался нужный УРЛ, а не данный.


--------------------
Вы можете купить подпись. Пишите в ЛС ваши предложения.

Аудит и консультации
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Корсар
Корсар
сообщение 9.3.2015, 16:08; Ответить: Корсар
Сообщение #4


rabota_esti, нет, указанный вами урл - страница пагинации:
Цитата(Корсар @ 9.3.2015, 14:58) *
ее лучше запретить к индексации.


Пробегитесь по сайту каким-нибудь парсером наподобие netpeak spider - поищите подозрительные урлы, которые потом закройте с помощью роботса, мета-тегов или настройки параметров.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.3.2015, 18:45; Ответить: Ortero
Сообщение #5


Цитата(rabota_esti @ 9.3.2015, 14:42) *


Я бы оставил в индексе. Только бы для страниц пагинации сделал бы генерацию тайтлов и дескрипшенов.

Цитата
Как же мне тогда сделать так, чтобы по запросу выдавался нужный УРЛ, а не данный


Оптимизировать/пессимизировать целевую/нецелевую страницы.

Ну и не забудьте добавить в robots.txt это:

Код
Disallow: *?action=
Disallow: *?arrFilter=
Disallow: *?sort=




--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Risk
Risk
сообщение 10.3.2015, 14:34; Ответить: Risk
Сообщение #6


я в битриксе такой роботс дефолт использую
Цитата
User-agent: *
Disallow: /*index.php$
Disallow: /bitrix/
Disallow: /auth/
Disallow: /personal/
Disallow: /upload/
Disallow: /search/
Disallow: /*/search/
Disallow: /*/slide_show/
Disallow: /*/gallery/*order=*
Disallow: /*?print=
Disallow: /*&print=
Disallow: /*register=
Disallow: /*forgot_password=
Disallow: /*change_password=
Disallow: /*login=
Disallow: /*logout=
Disallow: /*auth=
Disallow: /*?action=
Disallow: /*action=ADD_TO_COMPARE_LIST
Disallow: /*action=DELETE_FROM_COMPARE_LIST
Disallow: /*action=ADD2BASKET
Disallow: /*action=BUY
Disallow: /*bitrix_*=
Disallow: /*backurl=*
Disallow: /*BACKURL=*
Disallow: /*back_url=*
Disallow: /*BACK_URL=*
Disallow: /*back_url_admin=*
Disallow: /*print_course=Y
Disallow: /*COURSE_ID=
Disallow: /*?COURSE_ID=
Disallow: /*?PAGEN
Disallow: /*PAGEN_1=
Disallow: /*PAGEN_2=
Disallow: /*PAGEN_3=
Disallow: /*PAGEN_4=
Disallow: /*PAGEN_5=
Disallow: /*PAGEN_6=
Disallow: /*PAGEN_7=
Disallow: /*PAGE_NAME=user_post
Disallow: /*PAGE_NAME=detail_slide_show
Disallow: /*PAGE_NAME=search
Disallow: /*PAGE_NAME=user_post
Disallow: /*PAGE_NAME=detail_slide_show
Disallow: /*SHOWALL
Disallow: /*show_all=
Disallow: /*about*
Host: site.ru

Sitemap: http://site/sitemap.xml

И добавляю еще мои не нужные страницы
а вот меня в битрексе беспокоит вывод одинаковых страниц, например
Цитата
site/news/21
site/news/23324fsd
site/news/sada3

и они будут одинаковые, как запретить или настроить радирект я не знаю.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zritex
Zritex
сообщение 9.4.2015, 18:17; Ответить: Zritex
Сообщение #7


rabota_esti, если ещё не поздно!
Ни в коем случае не закрывайте пагинацию к индексации! Может возникнуть проблема с индексацией товаров на последних страницах.
И внутренние веса для последних товаров почти не дойдут!

Используйте директиву rel=canonical, я в битриксе её ставлю для пагинации и результатов фильтрации!

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
54 arendator 34838 15.4.2024, 15:16
автор: arendator
Открытая тема (нет новых ответов) Покупаем рекламу на ваших площадка для 2х интернет сервисов
Покупаем статьи для фотохостинга и мониторинга сайтов.
1 AndrePro 1096 25.3.2024, 13:46
автор: Wilkinson
Горячая тема (нет новых ответов) Какие интернет активы вы знаете?
38 metvekot 6977 29.2.2024, 11:18
автор: Skyworker
Открытая тема (нет новых ответов) Администратор (управляющий) вашими интернет проектами
0 Дмитрий1981 912 10.2.2024, 22:56
автор: Дмитрий1981
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыКомплексное продвижение в соцсетях: аудит, оформление, ведение и настройка рекламных кампаний.
Качественно и по вкусным ценам.
91 WildWeb8 62747 17.1.2024, 13:04
автор: WildWeb8


 



RSS Текстовая версия Сейчас: 20.4.2024, 3:33
Дизайн