X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Обход роботами
GC_
GC_
Topic Starter сообщение 15.12.2011, 3:17; Ответить: GC_
Сообщение #1


Здравствуйте!

Такой вопрос. С какой скоростью поисковые роботы (Яндекс, Гугл) пожирают страницы на сайте? Т.е. с какой периодичностью поступают запросы? Если выставить на сервере ограничение на один-два запроса в секунду с одного ip проблем не будет с роботами?


--------------------
В чем сила, Брат?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
simply_sash
simply_sash
сообщение 15.12.2011, 9:11; Ответить: simply_sash
Сообщение #2


Только не понятно зачем вам это. Вы хотите только для роботов установить ограничение или для всех? Если для всех, то проблемы будут у посетителей сайта, поскольку страница, как правило, состоит не только с одной html-ки, а также из css, js, файлов изображений. Для каждого файла идет отдельный запрос. Поставив ограничение вы увеличите время загрузки страниц.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
redpartizanka
redpartizanka
сообщение 16.12.2011, 0:52; Ответить: redpartizanka
Сообщение #3


Да и для роботов нежелательно такое делать. Могут потом возникнуть проблемы с индексацией
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Sead
Sead
сообщение 17.1.2012, 14:33; Ответить: Sead
Сообщение #4


(redpartizanka @ 15.12.2011, 23:52) *
Да и для роботов нежелательно такое делать. Могут потом возникнуть проблемы с индексацией

А вообще,как узнать когда икакой робот ходил на сайт?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
fobos
fobos
сообщение 17.1.2012, 14:48; Ответить: fobos
Сообщение #5


В панели вебмастеров гоши и яши (недавно появилось) есть графики отображающие сканирование страниц сайта. Гоша показывает скорость, количество и время на загрузку страниц. Яша показывает только количество загруженных страниц.
Так же в панели гоши можно задать скорость сканирования сайта, а для яши нужно прописывать в робот.тхт


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Trotil
Trotil
сообщение 15.2.2012, 16:04; Ответить: Trotil
Сообщение #6


Роботов лучше заманит посредством покупки ссылок с трастовых ресурсов. Когда роботы начнут ходить на сайт, необходимо наполнять сайт новым уникальным материалом. Чем чаще Вы это будете делать тем чаще будут заходить роботы


--------------------
Если ты можешь что то представить, значит ты можешь этого добиться!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
walkworld
walkworld
сообщение 15.2.2012, 18:26; Ответить: walkworld
Сообщение #7


(Sead @ 17.1.2012, 14:33) *
А вообще,как узнать когда икакой робот ходил на сайт?

В панели яндекс вебмастера в общей информации о сате есть такая строчка: Дата последнего посещения сайта роботом
У гугла в панели не знаю где. Можно еще если лента через feedburner посмотреть в информаци о подписчиках. Там тоже часто боты сидят.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Настройка Яндекс директ, Google Ads , обход п.15
0 papic 727 1.2.2021, 8:49
автор: papic
Открытая тема (нет новых ответов) Обход модерации в контекстной рекламе
0 Victor9090 848 1.9.2017, 18:36
автор: Victor9090
Открытая тема (нет новых ответов) Обход !important сайта для стиля Stylish
3 Mancoffee 5905 2.5.2016, 18:40
автор: -Degradator-


 



RSS Текстовая версия Сейчас: 30.11.2021, 10:24
Дизайн