X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Правильность Robots.txt
mdobyshev
mdobyshev
Topic Starter сообщение 20.7.2009, 13:03; Ответить: mdobyshev
Сообщение #1


Форумчане интересует Ваше мнение правильно ли составлен robots.txt

User-Agent: *
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://Здесь сайт/sitemap.xml
Host: Здесь сайт

User-agent: Yandex
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://Здесь сайт/sitemap.xml
Host: Здесь сайт


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 20.7.2009, 13:16; Ответить: it-pomoshnik
Сообщение #2


Правильно! Но каждый составляет по своему. Я например так:

User-agent: Yandex
Disallow: /contacts.php
Disallow: /css/
Host: www.site.ru

User-agent: Googlebot
Disallow: /contacts.php
Disallow: /css/
Host: www.site.ru

User-agent: *
Disallow: /contacts.php
Disallow: /css/


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
seo2z
seo2z
сообщение 20.7.2009, 13:18; Ответить: seo2z
Сообщение #3


нет, верно так:

User-agent: Yandex
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Host: Здесь сайт

User-Agent: *
Disallow: /*print
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /images/
Disallow: /forum/
Disallow: /backup/
Disallow: /files/
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts

Sitemap: http://Здесь сайт/sitemap.xml

правила для яши первые, хост только для яши, сайтмап для всех, один

Сообщение отредактировал seo2z - 20.7.2009, 13:20


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 20.7.2009, 13:22; Ответить: it-pomoshnik
Сообщение #4


(seo2z @ 20.7.2009, 13:18) *
правила для яши первые, хост только для яши, сайтмап для всех, один


Сколько людей, столько и мнений...


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wep
wep
сообщение 20.7.2009, 14:06; Ответить: wep
Сообщение #5


это для какой cms?


--------------------
Alexhost.com - your access to the best hosting services VPS.
VPS 1 - 1.5 GB RAM, 10 GB SSD - 11.88 euro/year
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
samunris
samunris
сообщение 20.7.2009, 14:09; Ответить: samunris
Сообщение #6


wep Скорее всего для WordPress smile.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
mdobyshev
mdobyshev
Topic Starter сообщение 20.7.2009, 14:20; Ответить: mdobyshev
Сообщение #7


(wep @ 20.7.2009, 13:06) *
это для какой cms?


Это для ДЛЕ


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Nunkomm
Nunkomm
сообщение 20.7.2009, 14:37; Ответить: Nunkomm
Сообщение #8


(mdobyshev @ 20.7.2009, 13:20) *
Это для ДЛЕ

http://talk.maulnet.ru/topic28441.html

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 78620 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 7587 28.3.2019, 18:31
автор: regem
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 2187 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 8336 1.3.2017, 3:20
автор: regem
Открытая тема (нет новых ответов) Работы по файлу robots.txt
8 tankoff 3682 19.3.2016, 20:02
автор: tankoff


 



RSS Текстовая версия Сейчас: 29.3.2024, 10:34
Дизайн