Помощник
 |
|
|
|
|
Сообщение сайта
|
 Robotx.txt помогите составить :) |
lbarmen
|
Сообщение
#1
|
||
 Бывалый  Группа: User Сообщений: 343 Регистрация: 12.12.2008 Поблагодарили: 65 раз Репутация:  5 
 |
|
||
 |
|
||
MaraFet
|
 8.8.2009, 17:57;
Ответить: MaraFet
Сообщение
#2
|
 Старожил 
 Группа: Active User Сообщений: 1145 Регистрация: 16.7.2009 Из: Белый свет Поблагодарили: 193 раза Репутация: 46
|
User-agent: *
Disallow: Sitemap: http://сайт.нет/карта Сообщение отредактировал MaraFet - 8.8.2009, 17:57 -------------------- |
|
|
|
|
Nunkomm
|
8.8.2009, 17:57;
Ответить: Nunkomm
Сообщение
#3
|
 Старожил Группа: Active User Сообщений: 1911 Регистрация: 11.4.2009 Из: Обратной стороны монитора Поблагодарили: 994 раза Репутация: 113
|
Какой движок?
|
|
|
|
|
lbarmen
|
Сообщение
#4
|
|
Бывалый Группа: User Сообщений: 343 Регистрация: 12.12.2008 Поблагодарили: 65 раз Репутация: 5
|
(MaraFet @ 8.8.2009, 17:57)  User-agent: * Disallow: Sitemap: http://сайт.нет И всё?=) Я вот тут посмотрел дле сайты и на многих вот такой вот робот тхт: User-Agent: * Disallow: /backup/ Disallow: /templates/ Disallow: /engine/ Disallow: /languages/ Disallow: /uploads/ Disallow: /images/ Host: www.сайт.ру User-agent: Yandex Allow: / Sitemap: http://сайт.ру/sitemap.xml User-agent: StackRambler Allow: / Crawl-delay: 7 Или всё что выше не нужно? Двиг DLE и форум DLE Сообщение отредактировал lbarmen - 8.8.2009, 18:00 |
|
|
|
|
lasmaster
|
8.8.2009, 18:00;
Ответить: lasmaster
Сообщение
#5
|
 Бывалый Группа: User Сообщений: 347 Регистрация: 11.12.2008 Из: Иркутская область Поблагодарили: 49 раз Репутация: 5
|
(lbarmen @ 8.8.2009, 21:53) Есть сайт(в основе новости) и форум. Собственно, можете помочь составить или дайте нормальную тему, с нормальным описанием как сделать. З.Ы. рылся в поиске, но нашел кучу хлама... Ну вот мой например: User-agent: * Disallow: /wp-admin/ Disallow: /wp-login.php Disallow: /xmlrpc.php Host: www.bestseomaster.ru * - значит, что инструкции идут для всех ПС без исключения в Disallow вписываете те страницы или разделы, которые НЕ должны индексироваться Host здесь прописываете ваш домен, как он будет с WWW или без них. -------------------- |
|
|
|
|
MaraFet
|
8.8.2009, 18:06;
Ответить: MaraFet
Сообщение
#6
|
|
Старожил
Группа: Active User Сообщений: 1145 Регистрация: 16.7.2009 Из: Белый свет Поблагодарили: 193 раза Репутация: 46
|
Вот самый правильный вариант
 : http://www.microsoft.com/robots.txt
-------------------- |
|
|
|
|
lbarmen
|
Сообщение
#7
|
|
Бывалый Группа: User Сообщений: 343 Регистрация: 12.12.2008 Поблагодарили: 65 раз Репутация: 5
|
(MaraFet @ 8.8.2009, 18:06) Вот самый правильный вариантsmile.gif: http://www.microsoft.com/robots.txt Мощно  А что означает это: Allow: / Crawl-delay: 7 ? Сообщение отредактировал lbarmen - 8.8.2009, 18:13 |
|
|
|
|
MaraFet
|
8.8.2009, 18:22;
Ответить: MaraFet
Сообщение
#8
|
|
Старожил
Группа: Active User Сообщений: 1145 Регистрация: 16.7.2009 Из: Белый свет Поблагодарили: 193 раза Репутация: 46
|
lbarmen,
Сканирование с запаздыванием -------------------- |
|
|
|
|
Nunkomm
|
8.8.2009, 18:30;
Ответить: Nunkomm
Сообщение
#9
|
|
Старожил Группа: Active User Сообщений: 1911 Регистрация: 11.4.2009 Из: Обратной стороны монитора Поблагодарили: 994 раза Репутация: 113
|
Если:
(lbarmen @ 8.8.2009, 16:58) Двиг DLE и форум DLE то: http://talk.maulnet.ru/topic28441s0.html?p...mp;#entry336193 |
|
|
|
|
seo2z
|
8.8.2009, 18:33;
Ответить: seo2z
Сообщение
#10
|
 Поисковая оптимизация Группа: Active User Сообщений: 2373 Регистрация: 9.12.2008 Из: Санкт-Петербург Поблагодарили: 1253 раза Репутация: 173
|
обычно директива "host" прописывается к агенту Яндекса...
то есть так: User-Agent: Yandex
Disallow: Host: www.сайт.ру User-Agent: * Disallow: Sitemap: http://сайт.ру/sitemap.xml -------------------- |
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Как составить уравнение, чтобы назначить цену для товара? | 2 | rownong27 | 759 | 21.3.2024, 12:53 автор: Lumex |
|
Помогите вспомнить рекламного бота Телеграм для обмена рекламой | 0 | Mixatraider | 725 | 21.2.2024, 23:42 автор: Mixatraider |
|
Помогите рещить проблему с монитором. Почему низкое разрешение при подключении монитора через displayport? |
0 | Levels | 1702 | 11.12.2020, 0:48 автор: Levels |
|
Помогите кто нибудь получить партнерку Росбанк! | 7 | heisenberg_mw | 2340 | 7.8.2020, 9:28 автор: heisenberg_mw |
|
Помогите найти тему пожалуйста | 7 | virtas | 12481 | 24.7.2020, 17:02 автор: -JamesSmips- |
|
Текстовая версия | Сейчас: 19.4.2024, 20:46 |
