X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Что за бот, spider Bot
Vibos
Vibos
Topic Starter сообщение 6.9.2010, 16:27; Ответить: Vibos
Сообщение #1


Завсегдатай
*****

Группа: Active User
Сообщений: 642
Регистрация: 21.8.2009
Из: Украина
Поблагодарили: 122 раза
Репутация:   29  


Что за бот spider Bot? В последнее время часто появляеться на сайте.
Ходит в основном из айпишников 98.217.240.194, 24.249.204.3, 67.180.27.231, 98.117.104.66, 66.239.205.50. Возможно это прокси.
4
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 6.9.2010, 17:03; Ответить: jack
Сообщение #2


----------------
*******

Группа: Super Moderator
Сообщений: 7898
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10832 раза
Репутация:   595  


Вот он
[attachment=8076:robots_r...roboquad.jpg]

По теме - поисковый робот (Спайдер - Spider или Crawler или Bot или Robot) - скорее всего один из поисковых ботов, которых у каждой ПС десятки


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram


Поблагодарили: (4)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Staurus
Staurus
сообщение 6.9.2010, 17:12; Ответить: Staurus
Сообщение #3


Big Brother
******


Группа: Active User
Сообщений: 2187
Регистрация: 12.6.2009
Из: Симферополь
Поблагодарили: 2393 раза
Репутация:   264  


Не не не, вот он


--------------------


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
afiskon
afiskon
сообщение 6.9.2010, 17:19; Ответить: afiskon
Сообщение #4


Бывалый
****

Группа: User
Сообщений: 253
Регистрация: 8.11.2009
Из: Москва
Поблагодарили: 42 раза
Репутация:   4  


(Vibos @ 6.9.2010, 16:27) *
Что за бот spider Bot? В последнее время часто появляеться на сайте.
Ходит в основном из айпишников 98.217.240.194, 24.249.204.3, 67.180.27.231, 98.117.104.66, 66.239.205.50. Возможно это прокси.

Это явно не Яндекс, не Google и не Bing. На mail.ru тоже не похож. По базе RIPE об этих IP адресах тоже ничего внятного не узнать. Нужна Вам лишняя нагрузка на сервер непонятно с какой целью? Если нет - смело баньте этого бота.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 6.9.2010, 17:22; Ответить: jack
Сообщение #5


----------------
*******

Группа: Super Moderator
Сообщений: 7898
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10832 раза
Репутация:   595  


Staurus, какой то он агрессивный...
Vibos, в robots.txt исключите всех ботов кроме нужных вам меньше вопросов будет


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
siwega
siwega
сообщение 6.9.2010, 21:32; Ответить: siwega
Сообщение #6


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 3.9.2010
Поблагодарили: 6 раз
Репутация:   2  


Vibos, чувствую, множество Вам дали ценных советов. После таких картинок сразу стало понятно что это за боты. f_4866c2c501a2c.gif Вот тут описаны многие боты http://www.botsvsbrowsers.com/ Большинство ботов что что ходят к Вам в гости от сервиса 80ног. Вот ту чуть больше информации о нем http://www.80legs.com/spider.html

Сообщение отредактировал siwega - 6.9.2010, 21:35
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vibos
Vibos
Topic Starter сообщение 6.9.2010, 23:12; Ответить: Vibos
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 642
Регистрация: 21.8.2009
Из: Украина
Поблагодарили: 122 раза
Репутация:   29  


(siwega @ 6.9.2010, 20:32) *
Vibos, чувствую, множество Вам дали ценных советов. После таких картинок сразу стало понятно что это за боты. Вот тут описаны многие боты http://www.botsvsbrowsers.com/ Большинство ботов что что ходят к Вам в гости от сервиса 80ног. Вот ту чуть больше информации о нем http://www.80legs.com/spider.html

В списке этого бота не нашел, и, насколько я понял с того, что написанно на сайте, бот 80ног подписываеться 008.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
siwega
siwega
сообщение 6.9.2010, 23:52; Ответить: siwega
Сообщение #8


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 3.9.2010
Поблагодарили: 6 раз
Репутация:   2  


Vibos, Вот более точная ссылка для этого бота http://www.botsvsbrowsers.com/details/324807/index.html
Вот 3 страницы про IP
http://www.botsvsbrowsers.com/ip/24.249.204.3/index.html
http://www.botsvsbrowsers.com/ip/98.117.104.66/index.html
http://www.botsvsbrowsers.com/ip/66.239.205.50/index.html
если юзерагент один и тот же, то скорее всего и на остальные 2 ip его же.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Redcraft
Redcraft
сообщение 7.9.2010, 13:09; Ответить: Redcraft
Сообщение #9


Новичок
*

Группа: User
Сообщений: 18
Регистрация: 19.12.2009
Поблагодарили: 4 раза
Репутация:   1  


В робот. тхт не в койм случае всех ботов неизвестных запрещать нельзя. Запрещать нужно только тогда, когда робот создает повышенную нагрузку на сайт.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
seohazard
seohazard
сообщение 7.9.2010, 14:20; Ответить: seohazard
Сообщение #10


Старожил
******

Группа: Active User
Сообщений: 1001
Регистрация: 5.12.2008
Поблагодарили: 164 раза
Репутация:   21  


Бот шпион, звучит опасно. Я бы его забанил, нефиг шпионить, но всех ботов банить нельзя.


--------------------
SEO услуги населению.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыЧто вы делаете, когда лень работать?
71 Zoya83 3539 Вчера, 17:53
автор: DVolodin
Горячая тема (нет новых ответов) Что лучше, фриланс, удаленка, или работа в офисе солидной компании?
132 Levizar 14966 Вчера, 17:40
автор: DVolodin
Открытая тема (нет новых ответов) Американку в автосалоне заставили доказать, что она не робот
8 seostock 840 26.5.2018, 16:08
автор: HOSTI7U
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыПошив одежды - что не так с сайтом ?
69 bridge8 7531 24.5.2018, 14:42
автор: про100та
Открытая тема (нет новых ответов) Что за подозрительные обратные ссылки?
появились какие то обрати странные
7 HavingingWorld 1439 13.5.2018, 10:36
автор: genjnat


 



RSS Текстовая версия Сейчас: 28.5.2018, 2:06
Дизайн