X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

4 страниц V  < 1 2 3 4 >
Открыть тему
Тема закрыта
> Robots.txt на Dle
Seo-Control
Seo-Control
сообщение 22.5.2010, 10:32; Ответить: Seo-Control
Сообщение #22


Глупый конечно вопрос, но всё же задам:
1. Host: site.ru
2. Host: www.site.ru

Если первый вариант прописан в robots то значит сайт в поисковой выдаче будет отображаться как site.ru ? у меня так же прописано но в ПС отображается с www
Или я не правильно понял

никто не знает?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Staurus
Staurus
сообщение 22.5.2010, 14:27; Ответить: Staurus
Сообщение #23


Если ваш сайт имеет зеркала, специальный робот зеркальщик определит их и сформирует группу зеркал вашего сайта. В поиске будет участвовать только главное зеркало. Вы можете указать его у всех зеркал при помощи robots.txt, используя директиву 'Host', определив в качестве ее параметра имя главного зеркала. Директива 'Host' не гарантирует выбор указанного главного зеркала, тем не менее, алгоритм при принятии решения учитывает ее с высоким приоритетом.


Вопрос исчерпан?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
timur22
timur22
сообщение 10.7.2010, 21:01; Ответить: timur22
Сообщение #24


Sitemap: http://11111.info/uploads/sitemap.xml так? или Sitemap: http://11111.info/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SuperRomario
SuperRomario
сообщение 10.7.2010, 21:22; Ответить: SuperRomario
Сообщение #25


timur22, правильно
Sitemap: http://11111.info/sitemap.xml

хоть файл sitemap.xml формально и находится в папке uploads, в httacces прописан по умолчанию редирект, чтобы карта сайта открывалась с корня сайта.


--------------------
(На Ты)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
timur22
timur22
сообщение 11.7.2010, 0:17; Ответить: timur22
Сообщение #26


(SuperRomario @ 10.7.2010, 21:22) *
timur22, правильно
Sitemap: http://11111.info/sitemap.xml

хоть файл sitemap.xml формально и находится в папке uploads, в httacces прописан по умолчанию редирект, чтобы карта сайта открывалась с корня сайта.

Спасибо больше Разъеснили ситуациЮ)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
robot97
robot97
сообщение 20.8.2010, 4:52; Ответить: robot97
Сообщение #27


UP, тоже интересует:
Если добавить в robots.txt
Disallow: /*page/
То и страницы из категорий тоже будут закрываться от индексации? smile.gif


up smile.gif

Сообщение отредактировал robot97 - 19.8.2010, 12:28
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jepps
Jepps
сообщение 20.8.2010, 4:59; Ответить: Jepps
Сообщение #28


robot97, да, страницы из категорий будут закрываться от индексации.

Сообщение отредактировал Jepps - 20.8.2010, 4:59


--------------------
Забанен за игнорирование обязательств по оплате труда (случай #2) и оскорбление администрации.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
robot97
robot97
сообщение 22.8.2010, 7:26; Ответить: robot97
Сообщение #29


А как закрыть только site.ru/page/*?
Тоесть, не категории, а именно с главной?

Если закрыть и в категориях, то робот будет находить урлы новостей? Тоесть новости в категория будут индексироваться, если доступ будит к ним только через page?

Ответе пожалуйста кто нибудь

Сообщение отредактировал robot97 - 22.8.2010, 7:27
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
burusha
burusha
сообщение 22.8.2010, 8:39; Ответить: burusha
Сообщение #30


А как закрыть только site.ru/page/*?
Тоесть, не категории, а именно с главной?


User-agent: *
Disallow: /page/
Sitemap: http://сайт.ру/sitemap.xml

User-agent: Yandex
Disallow: /page/
Host: сайт.ру
Sitemap: http://сайт.ру/sitemap.xml


Если закрыть и в категориях, то робот будет находить урлы новостей? Тоесть новости в категория будут индексироваться, если доступ будит к ним только через page?

Есть много путей к страницам: архивы(желательно исключить из индекса), модуль карта сайта, карта сайта(xml).
Через них страницы индексируется так же.



p.s. Моя карта:
User-agent: *
Disallow: /*print
Disallow: /*userinfo
Disallow: /2009/
Disallow: /2011/
Disallow: /2010/
Disallow: /index.php?subaction=userinfo
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /rules.html
Sitemap: http://сайт.ру/sitemap.xml

User-agent: Yandex
Disallow: /*print
Disallow: /*userinfo
Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /index.php?subaction=userinfo
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /rules.html
Host: сайт.ру
Sitemap: http://сайт.ру/sitemap.xml


--------------------
Забанен за негативное отношение к форуму и его администрации.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
robot97
robot97
сообщение 24.8.2010, 22:32; Ответить: robot97
Сообщение #31


Disallow: /page/


Где-то читал, что будут закрываться все совпадения...

Тоесть:
site.ru/page/*
site.ru/category1/page/*
site.ru/category2/page/*


Это так?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
4 страниц V  < 1 2 3 4 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) DLE xProtect
2 xoopw 5988 15.1.2024, 21:06
автор: Diana_Wesley
Открытая тема (нет новых ответов) Обновить сайт на CMS DLE
1 Sawich 1670 2.9.2023, 10:10
автор: WoWeb
Открытая тема (нет новых ответов) Изготовление красивых сайтов на DLE под ключ | Доступные цены
от 2000 руб.
1 Admiral_ukr 1602 20.11.2022, 10:08
автор: Webmaster24
Открытая тема (нет новых ответов) Ищу спеца по DLE вылечить сайт
4 Reactive 2644 22.10.2022, 9:01
автор: Fozik77
Открытая тема (нет новых ответов) требуется перенос с Dle на wordpres
нужен человек для переноса движка
5 Юрий82 1950 30.7.2022, 18:02
автор: Klerik84


 



RSS Текстовая версия Сейчас: 25.4.2024, 10:37
Дизайн