X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Правильность Robots.txt
mdobyshev
mdobyshev
Topic Starter сообщение 20.7.2009, 13:03; Ответить: mdobyshev
Сообщение #1


Завсегдатай
*****

Группа: Active User
Сообщений: 954
Регистрация: 2.3.2009
Из: Краматорск
Поблагодарили: 139 раз
Репутация:   25  


Форумчане интересует Ваше мнение правильно ли составлен robots.txt

User-Agent: *
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://Здесь сайт/sitemap.xml
Host: Здесь сайт

User-agent: Yandex
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://Здесь сайт/sitemap.xml
Host: Здесь сайт


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 20.7.2009, 13:16; Ответить: it-pomoshnik
Сообщение #2


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


Правильно! Но каждый составляет по своему. Я например так:

User-agent: Yandex
Disallow: /contacts.php
Disallow: /css/
Host: www.site.ru

User-agent: Googlebot
Disallow: /contacts.php
Disallow: /css/
Host: www.site.ru

User-agent: *
Disallow: /contacts.php
Disallow: /css/


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
seo2z
seo2z
сообщение 20.7.2009, 13:18; Ответить: seo2z
Сообщение #3


Поисковая оптимизация
******

Группа: Active User
Сообщений: 2373
Регистрация: 9.12.2008
Из: Санкт-Петербург
Поблагодарили: 1253 раза
Репутация:   173  


нет, верно так:

User-agent: Yandex
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Host: Здесь сайт

User-Agent: *
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts

Sitemap: http://Здесь сайт/sitemap.xml

правила для яши первые, хост только для яши, сайтмап для всех, один

Сообщение отредактировал seo2z - 20.7.2009, 13:20


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 20.7.2009, 13:22; Ответить: it-pomoshnik
Сообщение #4


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


(seo2z @ 20.7.2009, 13:18) *
правила для яши первые, хост только для яши, сайтмап для всех, один


Сколько людей, столько и мнений...


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wep
wep
сообщение 20.7.2009, 14:06; Ответить: wep
Сообщение #5


Старожил
******


Группа: Active User
Сообщений: 1412
Регистрация: 5.5.2008
Поблагодарили: 533 раза
Репутация:   99  


это для какой cms?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
samunris
samunris
сообщение 20.7.2009, 14:09; Ответить: samunris
Сообщение #6


Старожил
******

Группа: Active User
Сообщений: 2478
Регистрация: 2.12.2008
Поблагодарили: 592 раза
Репутация:   41  


wep Скорее всего для WordPress smile.gif


--------------------
Это место опять сдается!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
mdobyshev
mdobyshev
Topic Starter сообщение 20.7.2009, 14:20; Ответить: mdobyshev
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 954
Регистрация: 2.3.2009
Из: Краматорск
Поблагодарили: 139 раз
Репутация:   25  


(wep @ 20.7.2009, 13:06) *
это для какой cms?


Это для ДЛЕ


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Nunkomm
Nunkomm
сообщение 20.7.2009, 14:37; Ответить: Nunkomm
Сообщение #8


Мизантропичный доктор
******

Группа: Active User
Сообщений: 1911
Регистрация: 11.4.2009
Из: Обратной стороны монитора
Поблагодарили: 993 раза
Репутация:   113  


(mdobyshev @ 20.7.2009, 13:20) *
Это для ДЛЕ

http://talk.maulnet.ru/topic28441.html


--------------------
Версия 2.0.101. Ещё злее, ещё мизантропичнее.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47414 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 463 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1181 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 617 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 695 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 11.12.2017, 13:34
Дизайн