Помощник
 |
Сообщение сайта
|
 Robots.txt, как убрать дубли в dle |
snoop
|
Сообщение
#1
|
||
 Участник  Группа: User Сообщений: 175 Регистрация: 16.5.2008 Поблагодарили: 7 раз Репутация:  2 
 |
|
||
 |
|
||
Futurman
|
 2.1.2010, 12:20;
Ответить: Futurman
Сообщение
#2
|
 Завсегдатай Группа: Active User Сообщений: 545 Регистрация: 4.9.2009 Поблагодарили: 120 раз Репутация: 12
|
Нужны полные урл-ы данных страниц а не их названия...
up: не увидел что написано dle  В данном случае закрываете год или месяц какой Вам надо. Например Disallow: /2007/ закроет весь год Disallow: /2007/12/ Закроет только месяц. Проблема уже в другом, все зависит от Вашего ЧПУ, т.к. урл может быть вида http://сайт.ру/2008/01/03/чего_то_там.html Тогда закрывая год Вы закрываете и материалы тоже. Тогда уже применяем конструкцию вида. Disallow: /2007/09/page/ что позволит хотябы частично убрать мусор либо Disallow: /2007/*/page/ Сообщение отредактировал Futurman - 2.1.2010, 12:29 -------------------- |
|
|
|
|
DarkZo5m
|
2.1.2010, 12:22;
Ответить: DarkZo5m
Сообщение
#3
|
 Завсегдатай Группа: Active User Сообщений: 628 Регистрация: 18.10.2009 Из: :бу: :шкА Поблагодарили: 185 раз Репутация: 35
|
Все страницы вашего вида начинаются со слеша и года, по крайней мере у меня на моих DLE сайтах.
Впишите в robots.txt: User-agent: * Disallow: /2007/ Disallow: /2008/ Disallow: /2009/ Disallow: /2010/ Disallow: /2011/ Disallow: /2012/ Уберёт страницы вида, которого вы указали с 2007 года до конца света... 
Сообщение отредактировал DarkZo5m - 2.1.2010, 12:23 |
|
|
|
|
snoop
|
Сообщение
#4
|
|
Участник Группа: User Сообщений: 175 Регистрация: 16.5.2008 Поблагодарили: 7 раз Репутация: 2
|
(DarkZo5m @ 2.1.2010, 11:22)  Все страницы вашего вида начинаются со слеша и года, по крайней мере у меня на моих DLE сайтах. Впишите в robots.txt: User-agent: * Disallow: /2007/ Disallow: /2008/ Disallow: /2009/ Disallow: /2010/ Disallow: /2011/ Disallow: /2012/ Уберёт страницы вида, которого вы указали с 2007 года до конца света... а новости вида сайт.ru/категория/новость.html будут индексироваться?
-------------------- |
|
|
|
|
Tollun
|
2.1.2010, 12:52;
Ответить: Tollun
Сообщение
#5
|
 Старожил Группа: Active User Сообщений: 1595 Регистрация: 1.10.2009 Из: Хабаровск Поблагодарили: 394 раза Репутация: 66
|
(snoop @ 2.1.2010, 18:42) а новости вида сайт.ru/категория/новость.html будут индексироваться? это только на архивы будет действовать Решение одной строчкой. Disallow: /20*/* |
|
|
|
|
DarkZo5m
|
2.1.2010, 12:52;
Ответить: DarkZo5m
Сообщение
#6
|
|
Завсегдатай Группа: Active User Сообщений: 628 Регистрация: 18.10.2009 Из: :бу: :шкА Поблагодарили: 185 раз Репутация: 35
|
(snoop @ 2.1.2010, 13:42) а новости вида сайт.ru/категория/новость.html будут индексироваться? Конечно будут! (Tollun @ 2.1.2010, 13:52) это только на архивы будет действовать Да ну! А на календарь вида http://сайт.ру/2010/01/02/, например, не подействует? (Tollun @ 2.1.2010, 13:52) Решение одной строчкой. Disallow: /20*/* Тоже правильно, этот вариант подойдёт, если в конец света вы не верите. 
Сообщение отредактировал DarkZo5m - 2.1.2010, 12:57 |
|
|
|
|
Tollun
|
2.1.2010, 13:04;
Ответить: Tollun
Сообщение
#7
|
|
Старожил Группа: Active User Сообщений: 1595 Регистрация: 1.10.2009 Из: Хабаровск Поблагодарили: 394 раза Репутация: 66
|
(DarkZo5m @ 2.1.2010, 18:52) Да ну! А на календарь вида http://сайт.ру/2010/01/02/, например, не подействует? А календарь уже не архив за определённое число? Сообщение отредактировал Tollun - 2.1.2010, 13:05 |
|
|
|
|
DarkZo5m
|
2.1.2010, 13:16;
Ответить: DarkZo5m
Сообщение
#8
|
|
Завсегдатай Группа: Active User Сообщений: 628 Регистрация: 18.10.2009 Из: :бу: :шкА Поблагодарили: 185 раз Репутация: 35
|
(Tollun @ 2.1.2010, 14:04) А календарь уже не архив за определённое число? Не знаю как вы, но я разделяю календарь и архивы за месяц как два разных понятия, так как они выводятся разными тегами и выглядят по-разному. Архивы за месяц - это например /2007/12/, а вот календарь отдает именно новости за какой-то день, например /2007/12/20/. ТС спросил про эти вещи именно как про 2 разных понятия, поэтому я вам так и ответил. Сообщение отредактировал DarkZo5m - 2.1.2010, 13:17 |
|
|
|
|
Tollun
|
2.1.2010, 13:24;
Ответить: Tollun
Сообщение
#9
|
|
Старожил Группа: Active User Сообщений: 1595 Регистрация: 1.10.2009 Из: Хабаровск Поблагодарили: 394 раза Репутация: 66
|
Вывод записей за год, за месяц, за день - и что-то является архивом а что-то нет...
Логика из ряда "если нагреть нож - этой уже не холодное оружие"
|
|
|
|
|
desoto
|
2.1.2010, 13:24;
Ответить: desoto
Сообщение
#10
|
 Завсегдатай Группа: Active User Сообщений: 568 Регистрация: 10.7.2008 Поблагодарили: 129 раз Репутация: 29
|
Если уж начали от дублей избавляться, то рубите все. Я например ещё и анкеты пользователей закрыл. Мой роботс выглядит так:
User-agent: Yandex Disallow: /2008/ Disallow: /2009/ Disallow: /2010/ Disallow: /user/ User-agent: * Disallow: /*print |
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ |
138 | Akira | 79019 | 12.8.2019, 21:28 автор: neonix |
 |
Куплю места для размещения TXT+URL Строительная тематика. | 7 | regem | 7641 | 28.3.2019, 18:31 автор: regem |
|
Срочно требуется специалист по robots.txt Разовая работа |
1 | tankoff | 2203 | 8.3.2017, 1:56 автор: PavelMarty |
|
Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики. | 0 | regem | 8345 | 1.3.2017, 3:20 автор: regem |
|
Работы по файлу robots.txt | 8 | tankoff | 3703 | 19.3.2016, 20:02 автор: tankoff |
|
Текстовая версия | Сейчас: 16.4.2024, 17:13 |
