X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> немного разобраться в роботсе нужно, подскажите
Gracisko
Gracisko
Topic Starter сообщение 29.11.2012, 19:42; Ответить: Gracisko
Сообщение #1


клоновод
******


Группа: Banned
Сообщений: 1161
Регистрация: 23.3.2011
Поблагодарили: 46 раз
Репутация:   8  


Почитал яндекс про роботс.

Значит, если у меня на сайте страницы выглядят так - sait1.ru/home/page2.html
То закрыть от индексации так:
Disallow: /*/page*.html

верно?

Сообщение отредактировал Gracisko - 29.11.2012, 19:44


--------------------
клоновод
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
KipiaSoft
KipiaSoft
сообщение 29.11.2012, 20:36; Ответить: KipiaSoft
Сообщение #2


Старожил
******

Группа: Active User
Сообщений: 2096
Регистрация: 16.11.2009
Из: Волгоград
Поблагодарили: 632 раза
Репутация:   74  


(Gracisko @ 29.11.2012, 19:42) *
верно?

почти. если после слова поставили значок *, то после него уже можно ничего не дописывать.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rjksdfhe
rjksdfhe
сообщение 29.11.2012, 20:48; Ответить: rjksdfhe
Сообщение #3


Straight arms
*******

Группа: Active User
Сообщений: 2760
Регистрация: 21.4.2009
Из: Мытищи, МО, РФ
Поблагодарили: 1111 раз
Репутация:   163  


То есть прописка в robots.txt строки
Disallow: /*/page*.html

будет эквивалентно прописыванию
Disallow: /

т.е. полный запрет индексации поисковыми ботами

Надо писать конкретно, например
Disallow: /categories/page*


Поблагодарили: (3)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
KipiaSoft
KipiaSoft
сообщение 29.11.2012, 21:02; Ответить: KipiaSoft
Сообщение #4


Старожил
******

Группа: Active User
Сообщений: 2096
Регистрация: 16.11.2009
Из: Волгоград
Поблагодарили: 632 раза
Репутация:   74  


я к тому что в записи
Disallow: /*/page*.html


.html

уже дописывать бесполезно.
Робот поисковика будет стараться не индексировать страницы, в адресе которых присутствует знаки page
Если структура Вашего сайта такова, что page присутствует во всех страницах сайта, то подобная запись запретит индексировать практически все.
Лучше все таки конкретизировать поподробней. Либо делать материал доступным только для определенной группы пользователей (админ или модератор). Такой материал поисковик не проиндексирует.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Gracisko
Gracisko
Topic Starter сообщение 29.11.2012, 23:30; Ответить: Gracisko
Сообщение #5


клоновод
******


Группа: Banned
Сообщений: 1161
Регистрация: 23.3.2011
Поблагодарили: 46 раз
Репутация:   8  


rjksdfhe,
Disallow: /*/page*.html и Disallow: / это разве одно и тоже?

Есть сайт, когда на этом сайте переходишь на другую страницу(не статью, а страницу), то получается адрес следующего типа sait1.ru/home/page2.html

Это был пример перехода на вторую страницу с главной. Если брать категории или теги, то вторые страницы будут выглядеть так - sait1.ru/boom/page2.html

Сами посты имеют следующий тип - sait1.ru/boom/post1.html - всегда видно в урле, что за категория и в данном примере это категория boom.

Вот мне нужно запретить эти страницы не нужные поисковику. Ну вроде бы, как уже подсказывали, запретить можно одной строкой - Disallow: /*/page* такое разве равносильно полного запрета индексации всего сайта?


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
oroom
oroom
сообщение 29.11.2012, 23:39; Ответить: oroom
Сообщение #6


Бывалый
****

Группа: User
Сообщений: 274
Регистрация: 1.4.2011
Из: Минск
Поблагодарили: 71 раз
Репутация:   19  


Если структура именно такая и не будет меняться, то сойдет. Главное не захотеть использовать вхождение '/page' в каких-нибудь полезных url
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Gracisko
Gracisko
Topic Starter сообщение 30.11.2012, 14:59; Ответить: Gracisko
Сообщение #7


клоновод
******


Группа: Banned
Сообщений: 1161
Регистрация: 23.3.2011
Поблагодарили: 46 раз
Репутация:   8  


oroom, так может уточнить максимально так -
Disallow: /*/page*.html$


Одни говорят правильно, а другие говорят не правильно. Что делать? Пойду вешаться!

Сообщение отредактировал Gracisko - 30.11.2012, 0:20


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
spavoda
spavoda
сообщение 30.11.2012, 16:41; Ответить: spavoda
Сообщение #8


Бывалый
****

Группа: User
Сообщений: 386
Регистрация: 11.7.2011
Поблагодарили: 126 раз
Репутация:   33  


Gracisko, что вы хотите закрыть от роботов не понятно. если все страницы которые содержат page
то
Disallow: /page*


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
armpwnz
armpwnz
сообщение 30.11.2012, 18:37; Ответить: armpwnz
Сообщение #9


Новичок
*

Группа: User
Сообщений: 35
Регистрация: 22.6.2012
Поблагодарили: 5 раз
Репутация:   4  


Задам и я свой маленький вопрос, раз такая пьянка. Я тут просверлил до дыр хелпы ПС и все не могу врубиться. Есть сайт, категория отзывов в которой доступна по site.com/reviews. При сортировке в материале модуль дописывает к урлам параметры и урлы принимают вид site.com/reviews?id=1&limit=10 и тд. Как мне оставить в индексе саму страницу отзывов, но при этом скрыть от робота страницы с параметрами?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Biznessman
Biznessman
сообщение 30.11.2012, 18:50; Ответить: Biznessman
Сообщение #10


Завсегдатай
*****

Группа: Active User
Сообщений: 686
Регистрация: 22.7.2009
Из: Україна
Поблагодарили: 187 раз
Репутация:   49  


armpwnz
лично я такое закрываю так:
Disallow: /reviews?id=1&limit=*
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Подскажите по где купить дёшево домены com info biz net
6 docdie 988 13.12.2017, 18:29
автор: docdie
Открытая тема (нет новых ответов) Нужно перенести действующий интернет-магазин на CMS
Возможные CMS: PrestaShop, Битрикс, Magento, OpenCart
2 4aa19 317 8.12.2017, 17:59
автор: 4aa19
Открытая тема (нет новых ответов) Подскажите аналоги хостинга
0 dimaguru 360 8.12.2017, 14:55
автор: dimaguru
Открытая тема (нет новых ответов) Подскажите норм VPN-сервис для смартфона?
28 CyberAngel 4440 28.11.2017, 21:06
автор: bitcoin24_exchange
Открытая тема (нет новых ответов) Подскажите решение для управления рекламой на сетке сайтов WP и DLE
2 Autorealt 644 25.11.2017, 15:37
автор: Autorealt


 



RSS Текстовая версия Сейчас: 15.12.2017, 22:14
Дизайн