X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Дубли страниц
torrent24
torrent24
Topic Starter сообщение 9.4.2014, 11:02; Ответить: torrent24
Сообщение #1


Заметил много разных дублей страниц на своём сайте.. , пришлось закрыть в роботе таким образом:

Disallow: *page*

Другого не придумал , можно ли так сделать? Проверил по вебмастеру , все нежелательные страницы "запрещено" для индекса..

Но , как робота будет брать страницы в поиск например со 2-й страницы сайта.. если я запретил ему переходить по ней?

У многих сайтов я видел запрет на page , интересно , как робот берёт новости с других страниц? Через sitemap или перелинковки?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.4.2014, 11:12; Ответить: Ortero
Сообщение #2


Не зная структуры вашего сайта очень трудно что-либо сказать.
Но вообще, добавив такую директиву, вы закроете все страницы с page. То если вы захотите написать, например, про Джимми Пэйджа, то в адрес страницы вам нельзя будет добавить его фамилию, так как таким образом вы запретите индексацию этой страницы.

Сообщение отредактировал Ortero - 9.4.2014, 11:13


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
torrent24
torrent24
Topic Starter сообщение 9.4.2014, 11:15; Ответить: torrent24
Сообщение #3


Ortero,

Я не собираюсь добавлять его)
сайт вот nowfilms.ru
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
VulkanPartner
VulkanPartner
сообщение 9.4.2014, 11:42; Ответить: VulkanPartner
Сообщение #4


Лучше приведите еще примеры дублей страниц, возможно, там по другим параметрам/маскам можно рациональнее запретить индексацию, а не только по вхождению "page"...


--------------------
Perestroika Affiliates - ведущая гемблинг-партнерка с выплатами до 60% от дохода казино!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
torrent24
torrent24
Topic Starter сообщение 9.4.2014, 11:51; Ответить: torrent24
Сообщение #5


http://nowfilms.ru/page,1,3,20713-pervyy-m...14.html#comment

Вот страница , которую я хотел закрыть.. простым Disallow: /page* - после проверки , она действительно закрыта.. но вот такой вариант ( nowfilms.ru/films/melodrama/page/8/ ) все равно работал и таких очень много дублей..

nowfilms.ru/films/melodrama/page/8/
nowfilms.ru/multfilm/page/9/
и т.д.

И пришлось закрыть так : Disallow: *page*

Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.4.2014, 11:52; Ответить: Ortero
Сообщение #6


torrent24, ну это я для примера.
Я бы так закрыл:
Disallow: */page/
То есть будет закрыт именно раздел, а не все страницы, где упоминается page.

Сообщение отредактировал Ortero - 9.4.2014, 11:54


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
torrent24
torrent24
Topic Starter сообщение 9.4.2014, 11:59; Ответить: torrent24
Сообщение #7


Цитата(Ortero @ 9.4.2014, 11:52) *
Disallow: */page/


Такой вариант все таки не подходит... он разрешает индекс этой странице
http://nowfilms.ru/page,1,3,20713-pervyy-m...14.html#comment


Но вопрос в том , как робот будет находить новости которые на в 2-ой , 3-й странице.. он же туда не попадёт.. а если я добавлю за 1 час 50 новостей и новые новости попадут на 2-ю страницу.. как быть..

Сообщение отредактировал torrent24 - 9.4.2014, 12:01
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.4.2014, 12:15; Ответить: Ortero
Сообщение #8


torrent24, ну тогда переименуйте ее ) А то жуть какая- то.

А вообще можно так:
Disallow: */page

А по индексации - у вас же есть sitemap.xml.


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
torrent24
torrent24
Topic Starter сообщение 9.4.2014, 12:21; Ответить: torrent24
Сообщение #9


Цитата(Ortero @ 9.4.2014, 12:15) *
Disallow: */page


А так нельзя чтоли? Disallow: *page*

Какая разница может быть
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 9.4.2014, 12:31; Ответить: Ortero
Сообщение #10


torrent24, я выше уже объяснил. А вообще это ваш сайт, делайте с ним что хотите.


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыБыстрая индексация страниц сайта и обратных ссылок - 2Index
38 2Index 6621 Вчера, 12:56
автор: 2Index
Открытая тема (нет новых ответов) Услуга по индексации страниц в Google
9 FUTP 3727 12.4.2023, 21:31
автор: Magicclickpartners
Открытая тема (нет новых ответов) Ссылки с Главных страниц (Морд) под Буржнет
Для сайтов технической и околотехнической тематик
0 Reyus 1413 7.4.2022, 14:33
автор: Reyus
Открытая тема (нет новых ответов) Интересуют EN сайты 5-10 страниц.
5 Solomoni 6183 15.9.2021, 13:20
автор: Solomoni
Открытая тема (нет новых ответов) PBN Ссылки под БУРЖ (с главных страниц и статей). Личная сетка | Тематичное соседство
0 PBN_Links_Sale 1481 12.7.2021, 11:20
автор: PBN_Links_Sale


 



RSS Текстовая версия Сейчас: 19.4.2024, 9:25
Дизайн