Помощник
|
Robots.txt и DLE vs индексация |
kulbit
|
Сообщение
#1
|
||
|
|
||
|
|||
purple |
11.8.2010, 13:51;
Ответить: purple
Сообщение
#2
|
|
через "*" вы будете давать роботу задание "запрет на индексацию по маске".
если на /page/* страницах будут новости, то конечно они не будут индексироваться, если закрыть индексацию для /page/* |
|
|
burusha |
11.8.2010, 14:01;
Ответить: burusha
Сообщение
#3
|
|
User-agent: *
Disallow: /*page/ Disallow: /page/ Disallow: /2009/ Disallow: /2011/ Disallow: /2010/ Sitemap: http://сайт.ру/sitemap.xml User-agent: Yandex Disallow: /*page/ Disallow: /page/ Disallow: /2009/ Disallow: /2011/ Disallow: /2010/ Host: сайт.ру Sitemap: http://сайт.ру/sitemap.xml p.s. Новости индексироваться будут через морду, сайтмап и через тот же page, т.к. если даже запрещено к индексу он переходит по страницам, но не индексирует. p.p.s. Disallow: /*page/ для запрета страниц категорий. p.p.p.s. Затачиваешь сат под продажу ссылок? Сообщение отредактировал burusha - 11.8.2010, 14:03 -------------------- |
|
|
Staurus |
11.8.2010, 14:25;
Ответить: Staurus
Сообщение
#4
|
|
User-agent: *
Disallow: /*print Disallow: /*userinfo Disallow: /2009/ Disallow: /2011/ Disallow: /2010/ Disallow: /index.php?subaction=userinfo Disallow: /autobackup.php Disallow: /admin.php Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /backup/ Disallow: /engine/ Disallow: /user/ Disallow: /favorites/ Disallow: /index.php?do=register Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /index.php?do=rules Disallow: /rules.html Sitemap: http://сайт.ру/sitemap.xml User-agent: Yandex Host: сайт.ру Sitemap: http://сайт.ру/sitemap.xml -------------------- |
|
|
kulbit
|
Сообщение
#5
|
|
Вот допустим я закрыл от индекса архивы таким способом
Disallow: /2009/ Disallow: /2011/ Disallow: /2010/ Будут ли индексироваться страницы с таким адресом http://сайт.ру/2009/page/1 ? Сообщение отредактировал kulbit - 11.8.2010, 19:54 -------------------- |
|
|
Staurus |
11.8.2010, 20:10;
Ответить: Staurus
Сообщение
#6
|
|
ты кадр?
Disallow: /2009/ - означает что закрывает всё, где встречается /2009/. ЕЩЕ РАЗ ПОВОТРЮ ВСЁ закрывает где встречается /2009/ -------------------- |
|
|
kulbit
|
Сообщение
#7
|
|
-------------------- |
|
|
purple |
11.8.2010, 20:14;
Ответить: purple
Сообщение
#8
|
|
вообще маска "*" в некоторых роботах не поддерживается (читал об этом), но вышеуказанные ваши директивы запретят для индексации все содержимое папок, в том числе субдиректории, файлы и тп.
|
|
|
install |
11.8.2010, 20:17;
Ответить: install
Сообщение
#9
|
|
kulbit, так может вообще не стоит делать сайт?
Просто уберите архивы, тэги, календарь, похожие новости и тд сделайте стандартный роботс и не ломайте себе и людям голову -------------------- |
|
|
kulbit
|
Сообщение
#10
|
|
install шагайте мимо батенька. Ничего плохого не вижу, в том чтобы голову поломать.
-------------------- |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Быстрая индексация страниц сайта и обратных ссылок - 2Index | 38 | 2Index | 6642 | 18.4.2024, 12:56 автор: 2Index |
|
Индексация внешних ссылок | 16 | Vmir | 5572 | 25.2.2024, 19:22 автор: MihaylovRA |
|
DLE xProtect | 2 | xoopw | 5979 | 15.1.2024, 21:06 автор: Diana_Wesley |
|
Обновить сайт на CMS DLE | 1 | Sawich | 1662 | 2.9.2023, 10:10 автор: WoWeb |
|
Буржунет. Гест Посты на .EDU .GOV. Топ ссылки TLD, WEB 2.0, профили Microsoft и др. 100% индексация Продажа ссылок с индексацией на мощных площадках |
11 | diezelk | 9898 | 13.5.2023, 11:12 автор: diezelk |
Текстовая версия | Сейчас: 20.4.2024, 4:14 |