Помощник
|
Robots.txt на Dle |
Seo-Control |
22.5.2010, 10:32;
Ответить: Seo-Control
Сообщение
#22
|
|
Глупый конечно вопрос, но всё же задам:
1. Host: site.ru 2. Host: www.site.ru Если первый вариант прописан в robots то значит сайт в поисковой выдаче будет отображаться как site.ru ? у меня так же прописано но в ПС отображается с www Или я не правильно понял никто не знает? |
|
|
Staurus |
22.5.2010, 14:27;
Ответить: Staurus
Сообщение
#23
|
|
Если ваш сайт имеет зеркала, специальный робот зеркальщик определит их и сформирует группу зеркал вашего сайта. В поиске будет участвовать только главное зеркало. Вы можете указать его у всех зеркал при помощи robots.txt, используя директиву 'Host', определив в качестве ее параметра имя главного зеркала. Директива 'Host' не гарантирует выбор указанного главного зеркала, тем не менее, алгоритм при принятии решения учитывает ее с высоким приоритетом. Вопрос исчерпан? -------------------- |
|
|
timur22 |
10.7.2010, 21:01;
Ответить: timur22
Сообщение
#24
|
|
Sitemap: http://11111.info/uploads/sitemap.xml так? или Sitemap: http://11111.info/sitemap.xml
|
|
|
SuperRomario |
10.7.2010, 21:22;
Ответить: SuperRomario
Сообщение
#25
|
|
timur22, правильно
Sitemap: http://11111.info/sitemap.xml хоть файл sitemap.xml формально и находится в папке uploads, в httacces прописан по умолчанию редирект, чтобы карта сайта открывалась с корня сайта. -------------------- |
|
|
timur22 |
11.7.2010, 0:17;
Ответить: timur22
Сообщение
#26
|
|
|
|
|
robot97 |
20.8.2010, 4:52;
Ответить: robot97
Сообщение
#27
|
|
UP, тоже интересует:
Если добавить в robots.txt Disallow: /*page/ То и страницы из категорий тоже будут закрываться от индексации? up Сообщение отредактировал robot97 - 19.8.2010, 12:28 |
|
|
Jepps |
20.8.2010, 4:59;
Ответить: Jepps
Сообщение
#28
|
|
robot97, да, страницы из категорий будут закрываться от индексации.
Сообщение отредактировал Jepps - 20.8.2010, 4:59 -------------------- |
|
|
robot97 |
22.8.2010, 7:26;
Ответить: robot97
Сообщение
#29
|
|
А как закрыть только site.ru/page/*?
Тоесть, не категории, а именно с главной? Если закрыть и в категориях, то робот будет находить урлы новостей? Тоесть новости в категория будут индексироваться, если доступ будит к ним только через page? Ответе пожалуйста кто нибудь Сообщение отредактировал robot97 - 22.8.2010, 7:27 |
|
|
burusha |
22.8.2010, 8:39;
Ответить: burusha
Сообщение
#30
|
|
А как закрыть только site.ru/page/*?
Тоесть, не категории, а именно с главной? User-agent: * Disallow: /page/ Sitemap: http://сайт.ру/sitemap.xml User-agent: Yandex Disallow: /page/ Host: сайт.ру Sitemap: http://сайт.ру/sitemap.xml Если закрыть и в категориях, то робот будет находить урлы новостей? Тоесть новости в категория будут индексироваться, если доступ будит к ним только через page? Есть много путей к страницам: архивы(желательно исключить из индекса), модуль карта сайта, карта сайта(xml). Через них страницы индексируется так же. p.s. Моя карта: User-agent: *
Disallow: /*print Disallow: /*userinfo Disallow: /2009/ Disallow: /2011/ Disallow: /2010/ Disallow: /index.php?subaction=userinfo Disallow: /autobackup.php Disallow: /admin.php Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /backup/ Disallow: /engine/ Disallow: /user/ Disallow: /favorites/ Disallow: /index.php?do=register Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /index.php?do=rules Disallow: /rules.html Sitemap: http://сайт.ру/sitemap.xml User-agent: Yandex Disallow: /*print Disallow: /*userinfo Disallow: /2009/ Disallow: /2010/ Disallow: /2011/ Disallow: /index.php?subaction=userinfo Disallow: /autobackup.php Disallow: /admin.php Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /backup/ Disallow: /engine/ Disallow: /user/ Disallow: /favorites/ Disallow: /index.php?do=register Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /index.php?do=rules Disallow: /rules.html Host: сайт.ру Sitemap: http://сайт.ру/sitemap.xml -------------------- |
|
|
robot97 |
24.8.2010, 22:32;
Ответить: robot97
Сообщение
#31
|
|
Disallow: /page/ Где-то читал, что будут закрываться все совпадения... Тоесть: site.ru/page/* site.ru/category1/page/* site.ru/category2/page/* Это так? |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
DLE xProtect | 2 | xoopw | 5988 | 15.1.2024, 21:06 автор: Diana_Wesley |
|
Обновить сайт на CMS DLE | 1 | Sawich | 1670 | 2.9.2023, 10:10 автор: WoWeb |
|
Изготовление красивых сайтов на DLE под ключ | Доступные цены от 2000 руб. |
1 | Admiral_ukr | 1602 | 20.11.2022, 10:08 автор: Webmaster24 |
|
Ищу спеца по DLE вылечить сайт | 4 | Reactive | 2644 | 22.10.2022, 9:01 автор: Fozik77 |
|
требуется перенос с Dle на wordpres нужен человек для переноса движка |
5 | Юрий82 | 1950 | 30.7.2022, 18:02 автор: Klerik84 |
Текстовая версия | Сейчас: 25.4.2024, 10:37 |