X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Настройка robots.txt в интернет-магазине
rabota_esti
rabota_esti
Topic Starter сообщение 9.3.2015, 15:42; Ответить: rabota_esti
Сообщение #1


Всем привет. Банальный вопрос, просто для уточнения. Раньше я никогда не работал с интернет-магазинами, поэтому опыта пока мало. Возник спор с системщиками по поводу настройки роботса. То есть вопрос такой. Я говорю, что в индексе не должно быть страниц товаров. То есть допустим вот этой:

http://kaida-fish.ru/catalog/telescopic_wi...ings/?PAGEN_1=2

При чем она находится в индексе по определенному запросу. Сниппет ужасный из-за этого, и вообще ее просто я считаю в индексе быть не должно. Так ли это? И отличается чем то настройка роботса в интернет-магазине от настройки у обычного сайта? Спасибо.


--------------------
Вы можете купить подпись. Пишите в ЛС ваши предложения.

Аудит и консультации
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Корсар
Корсар
сообщение 9.3.2015, 15:58; Ответить: Корсар
Сообщение #2


rabota_esti, страницы товаров должны быть, а это битриксовская пагинация, ее лучше запретить к индексации.

Цитата(rabota_esti @ 9.3.2015, 14:42) *
И отличается чем то настройка роботса в интернет-магазине от настройки у обычного сайта?

Чаще всего отличается, т.к. у магазинов из-за различных фильтров может генерироваться множество дублей.
Для гугла рекомендую в панели вебмастера настроить Сканирование -> Параметры URL, указав как поступать с конкретными параметрами. Для яндекса обычно хватает запрета в robots.

Сообщение отредактировал Корсар - 9.3.2015, 15:59
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rabota_esti
rabota_esti
Topic Starter сообщение 9.3.2015, 16:03; Ответить: rabota_esti
Сообщение #3


Корсар, То есть указанный мною УРЛ должен быть в индексе? Как же мне тогда сделать так, чтобы по запросу выдавался нужный УРЛ, а не данный.


--------------------
Вы можете купить подпись. Пишите в ЛС ваши предложения.

Аудит и консультации
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Корсар
Корсар
сообщение 9.3.2015, 16:08; Ответить: Корсар
Сообщение #4


rabota_esti, нет, указанный вами урл - страница пагинации:
Цитата(Корсар @ 9.3.2015, 14:58) *
ее лучше запретить к индексации.


Пробегитесь по сайту каким-нибудь парсером наподобие netpeak spider - поищите подозрительные урлы, которые потом закройте с помощью роботса, мета-тегов или настройки параметров.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.3.2015, 18:45; Ответить: Ortero
Сообщение #5


Цитата(rabota_esti @ 9.3.2015, 14:42) *


Я бы оставил в индексе. Только бы для страниц пагинации сделал бы генерацию тайтлов и дескрипшенов.

Цитата
Как же мне тогда сделать так, чтобы по запросу выдавался нужный УРЛ, а не данный


Оптимизировать/пессимизировать целевую/нецелевую страницы.

Ну и не забудьте добавить в robots.txt это:

Код
Disallow: *?action=
Disallow: *?arrFilter=
Disallow: *?sort=




--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Risk
Risk
сообщение 10.3.2015, 14:34; Ответить: Risk
Сообщение #6


я в битриксе такой роботс дефолт использую
Цитата
User-agent: *
Disallow: /*index.php$
Disallow: /bitrix/
Disallow: /auth/
Disallow: /personal/
Disallow: /upload/
Disallow: /search/
Disallow: /*/search/
Disallow: /*/slide_show/
Disallow: /*/gallery/*order=*
Disallow: /*?print=
Disallow: /*&print=
Disallow: /*register=
Disallow: /*forgot_password=
Disallow: /*change_password=
Disallow: /*login=
Disallow: /*logout=
Disallow: /*auth=
Disallow: /*?action=
Disallow: /*action=ADD_TO_COMPARE_LIST
Disallow: /*action=DELETE_FROM_COMPARE_LIST
Disallow: /*action=ADD2BASKET
Disallow: /*action=BUY
Disallow: /*bitrix_*=
Disallow: /*backurl=*
Disallow: /*BACKURL=*
Disallow: /*back_url=*
Disallow: /*BACK_URL=*
Disallow: /*back_url_admin=*
Disallow: /*print_course=Y
Disallow: /*COURSE_ID=
Disallow: /*?COURSE_ID=
Disallow: /*?PAGEN
Disallow: /*PAGEN_1=
Disallow: /*PAGEN_2=
Disallow: /*PAGEN_3=
Disallow: /*PAGEN_4=
Disallow: /*PAGEN_5=
Disallow: /*PAGEN_6=
Disallow: /*PAGEN_7=
Disallow: /*PAGE_NAME=user_post
Disallow: /*PAGE_NAME=detail_slide_show
Disallow: /*PAGE_NAME=search
Disallow: /*PAGE_NAME=user_post
Disallow: /*PAGE_NAME=detail_slide_show
Disallow: /*SHOWALL
Disallow: /*show_all=
Disallow: /*about*
Host: site.ru

Sitemap: http://site/sitemap.xml

И добавляю еще мои не нужные страницы
а вот меня в битрексе беспокоит вывод одинаковых страниц, например
Цитата
site/news/21
site/news/23324fsd
site/news/sada3

и они будут одинаковые, как запретить или настроить радирект я не знаю.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zritex
Zritex
сообщение 9.4.2015, 18:17; Ответить: Zritex
Сообщение #7


rabota_esti, если ещё не поздно!
Ни в коем случае не закрывайте пагинацию к индексации! Может возникнуть проблема с индексацией товаров на последних страницах.
И внутренние веса для последних товаров почти не дойдут!

Используйте директиву rel=canonical, я в битриксе её ставлю для пагинации и результатов фильтрации!

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыНастройка яндекс директ рекламы БЕЗ РАСХОДОВ БЮДЖЕТА
Количество продаж будет ОГРАНИЧЕННО!
22 ITstaf 4404 Вчера, 21:00
автор: 100ftd
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
54 arendator 34886 15.4.2024, 15:16
автор: arendator
Открытая тема (нет новых ответов) Покупаем рекламу на ваших площадка для 2х интернет сервисов
Покупаем статьи для фотохостинга и мониторинга сайтов.
1 AndrePro 1110 25.3.2024, 13:46
автор: Wilkinson
Горячая тема (нет новых ответов) Какие интернет активы вы знаете?
38 metvekot 6988 29.2.2024, 11:18
автор: Skyworker
Открытая тема (нет новых ответов) Администратор (управляющий) вашими интернет проектами
0 Дмитрий1981 914 10.2.2024, 22:56
автор: Дмитрий1981


 



RSS Текстовая версия Сейчас: 24.4.2024, 7:19
Дизайн