X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Анализ файла robots.txt
EvaGolyb
EvaGolyb
Topic Starter сообщение 10.12.2013, 12:55; Ответить: EvaGolyb
Сообщение #1


Новичок
*

Группа: User
Сообщений: 33
Регистрация: 4.12.2013
Поблагодарили: 3 раза
Репутация:   0  


Здравствуйте.
Помогите понять что говорит эта информация в файле robots.txt

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

??

Заранее спасибо)
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
arturios
arturios
сообщение 10.12.2013, 12:58; Ответить: arturios
Сообщение #2


Старожил
******

Группа: Super Moderator
Сообщений: 1818
Регистрация: 16.10.2012
Из: Москва
Поблагодарили: 1341 раз
Репутация:   80  


Она говорит читать нужно больше внимательней и чаще

http://help.yandex.ru/webmaster/controllin.../robots-txt.xml


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 10.12.2013, 12:58; Ответить: x64
Сообщение #3


F.A.L.L.O.U.T.
*******

Группа: Super Moderator
Сообщений: 3544
Регистрация: 30.6.2011
Из: Железнодорожный (Балашиха)
Поблагодарили: 2881 раз
Репутация:   294  


запретить всем ботам индексировать информацию из папок, указанных в Disallow.
учитывайте, что это лишь указание; использовать данную информацию или нет, решаете уже не вы wink.gif


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
EvaGolyb
EvaGolyb
Topic Starter сообщение 10.12.2013, 13:10; Ответить: EvaGolyb
Сообщение #4


Новичок
*

Группа: User
Сообщений: 33
Регистрация: 4.12.2013
Поблагодарили: 3 раза
Репутация:   0  


arturios, Спасибо за ссылку.
Но у меня просто долго соображалка работает)) Вот ни как и не могла понять
User-agent: * Это ВСЕ разрешает или запрещает ?
а это:

Она говорит читать нужно больше внимательней и чаще


надеюсь вы не со зла..

Сообщение отредактировал EvaGolyb - 10.12.2013, 13:11
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 10.12.2013, 13:13; Ответить: x64
Сообщение #5


F.A.L.L.O.U.T.
*******

Группа: Super Moderator
Сообщений: 3544
Регистрация: 30.6.2011
Из: Железнодорожный (Балашиха)
Поблагодарили: 2881 раз
Репутация:   294  


(EvaGolyb @ 10.12.2013, 13:10) *
User-agent: *

это указание конкретному боту, либо, как в вашем случае, для всех ботов вообще.
Disallow — запрещение индексации
Allow — разрешение индексации

по умолчанию, всё разрешено, что явно не запрещено


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
EvaGolyb
EvaGolyb
Topic Starter сообщение 10.12.2013, 13:17; Ответить: EvaGolyb
Сообщение #6


Новичок
*

Группа: User
Сообщений: 33
Регистрация: 4.12.2013
Поблагодарили: 3 раза
Репутация:   0  


x64, Спасибо огромное) Теперь понятно)

Только теперь не понятно, зачем администратор сайта закрыл от индексации эти папки?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 10.12.2013, 13:43; Ответить: x64
Сообщение #7


F.A.L.L.O.U.T.
*******

Группа: Super Moderator
Сообщений: 3544
Регистрация: 30.6.2011
Из: Железнодорожный (Балашиха)
Поблагодарили: 2881 раз
Репутация:   294  


некоторые вещи более очевидны, другие — менее. например:
/administrator/ — админке индексироваться не нужно, доступ туда лишь по логину
/cache/ — кеш, используется движком сайта
/plugins/ — плагины, используется движком сайта
/templates/ — шаблоны, используется движком сайта
/tmp/ — временные файлы, используется движком сайта

возможно, владелец решил запретить индексацию всех папок, не участвующих в навигационной системе сайта (хотя на большинство из них ссылок из html быть не должно).
не страшно закрыть для индексации несуществующие пути, страшно закрыть страницы, что успешно сидят в выдаче pardon.gif


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
EvaGolyb
EvaGolyb
Topic Starter сообщение 10.12.2013, 13:48; Ответить: EvaGolyb
Сообщение #8


Новичок
*

Группа: User
Сообщений: 33
Регистрация: 4.12.2013
Поблагодарили: 3 раза
Репутация:   0  


x64, Спасибо за полный ответ.
Теперь все понятно)

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
136 Akira 49743 28.4.2018, 1:36
автор: Akira
Открытая тема (нет новых ответов) Правильный robots.txt для datalife engine какой он?
4 cerrus 821 24.3.2018, 18:17
автор: bobur
Открытая тема (нет новых ответов) Выгрузка из Ahrefs / Анализ доменов по MOZ
1 anchous 1019 17.3.2018, 20:33
автор: Ювелир
Открытая тема (нет новых ответов) Качественный анализ Юзабилити ваших сайтов
Юзабилити
14 rononov 3038 25.9.2017, 10:57
автор: rononov
Открытая тема (нет новых ответов) Подробный анализ сайта с рекомендациями по их исправлению
9 bgtk 1274 22.3.2017, 12:03
автор: GhostV


 



RSS Текстовая версия Сейчас: 20.5.2018, 14:30
Дизайн