X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Длина robots.txt
r0nan
r0nan
Topic Starter сообщение 31.3.2012, 11:19; Ответить: r0nan
Сообщение #1


Новичок
*

Группа: User
Сообщений: 33
Регистрация: 13.3.2012
Поблагодарили: 7 раз
Репутация:   0  


Есть ли ограничение по количеству и длине строк в robots.txt ?
Как реагируют ПС на длинные файлы?
Спасибо.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Infacto
Infacto
сообщение 31.3.2012, 12:55; Ответить: Infacto
Сообщение #2


Завсегдатай
*****

Группа: Active User
Сообщений: 937
Регистрация: 19.9.2011
Из: www
Поблагодарили: 369 раз
Репутация:   79  


Реагируют нормально, ограничений по роботс.тхт нету.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Chomba
Chomba
сообщение 31.3.2012, 13:39; Ответить: Chomba
Сообщение #3


Участник
***

Группа: User
Сообщений: 164
Регистрация: 4.8.2011
Поблагодарили: 161 раз
Репутация:   27  


r0nan, при написании robots.txt необходимо помнить, что у робота есть разумное ограничение на его размер. Слишком большие robots.txt (более 32 Кб) считаются полностью разрешающими, то есть рассматриваются аналогично:

User-agent: Yandex
Disallow:

(с) хелп яндекса


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
arnik
arnik
сообщение 27.6.2012, 11:33; Ответить: arnik
Сообщение #4


Новичок
*


Группа: User
Сообщений: 18
Регистрация: 21.6.2012
Из: Днепропетровск
Поблагодарили: 0 раз
Репутация:   0  


В robots.txt ограничений по размеру нет

В robots.txt ограничений по размеру нет


--------------------
Качественное размещение статей на крупных веб-ресурсах различной тематики навсегда!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Reader
Reader
сообщение 27.6.2012, 12:17; Ответить: Reader
Сообщение #5


манимейкер
*******

Группа: Active User
Сообщений: 2509
Регистрация: 22.4.2009
Из: России
Поблагодарили: 1017 раз
Репутация:   121  


У меня самый большой роботс - 61 строка, включая ссылку на сайтмап. Все это весит 1,75 кб, до 32 кб еще далеко.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
_fargus_
_fargus_
сообщение 3.7.2012, 8:43; Ответить: _fargus_
Сообщение #6


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 1.7.2012
Поблагодарили: 5 раз
Репутация:   0  


ограничений нету, есть приоритеты.
если есть 2 условия, которые друг друга исключают, то в приоритете будет то, которое длиннее
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
topsmiling
topsmiling
сообщение 4.7.2012, 11:15; Ответить: topsmiling
Сообщение #7


ёёёёёёёёё ӭ
******

Группа: Active User
Сообщений: 1298
Регистрация: 6.3.2011
Из: ★звёзд★
Поблагодарили: 359 раз
Репутация:   97  


У моего друга, 317 строчек в роботсе, и весит 0,75 КБ.
Его сайт работает нормально... Вывод: пофигу ПСам...


--------------------
.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
_fargus_
_fargus_
сообщение 5.7.2012, 20:47; Ответить: _fargus_
Сообщение #8


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 1.7.2012
Поблагодарили: 5 раз
Репутация:   0  


(topsmiling @ 4.7.2012, 10:15) *
У моего друга, 317 строчек в роботсе, и весит 0,75 КБ.
Его сайт работает нормально... Вывод: пофигу ПСам...


что же он там напихал? если нужно закрыть дубли, то в урлах страниц определяется одинаковый параметр и прописывается запрет по маске.
урл каждой страницы прописывать в роботсе не нужно.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47488 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 509 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1191 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 696 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 15.12.2017, 9:11
Дизайн