X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Что за # Added by add_robots.sh
Skolzage
Skolzage
Topic Starter сообщение 25.4.2011, 2:10; Ответить: Skolzage
Сообщение #1


Участник
***

Группа: User
Сообщений: 172
Регистрация: 26.2.2011
Поблагодарили: 15 раз
Репутация:   2  


На двух сайтах в роботс появились такие строки
# Added by add_robots.sh
Crawl-delay: 10
Request-rate: 1/10

Единственное что нашел, так это что их прописал хост, чтобы снизить нагрузку на сервер. Так ли это. Как повлияет на индексацию, нужно ли попробовать переделать?. На третьем сайте с другим роботс их нет. Кто сталкивался? Особо волнует плохая индексация.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Пошив одежды - что не так с сайтом ?
25 bridge8 1734 15.12.2017, 22:55
автор: Emtec
Горячая тема (нет новых ответов) Что лучше, фриланс, удаленка, или работа в офисе солидной компании?
97 Levizar 8064 15.12.2017, 13:51
автор: Smspva
Открытая тема (нет новых ответов) [Бесплатный тест] Airsocks. Инновационные мобильные 4G / LTE прокси. Забудь все что было раньше!
27 airsocks11 6307 15.12.2017, 3:22
автор: airsocks11
Открытая тема (нет новых ответов) Что делать если боты и поисковики грузят сервер?
Превышение нагрузки на сервер.
8 nahalturu 2318 13.12.2017, 17:12
автор: vds4you
Открытая тема (нет новых ответов) Adsense: много кликов, мало денег. Что делать?
Очень дешёвые клики по объявлениям
16 zeleboba 2459 13.12.2017, 17:00
автор: vds4you


 



RSS Текстовая версия Сейчас: 17.12.2017, 6:33
Дизайн