X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Что за бот, spider Bot
Vibos
Vibos
Topic Starter сообщение 6.9.2010, 16:27; Ответить: Vibos
Сообщение #1


Завсегдатай
*****

Группа: Active User
Сообщений: 642
Регистрация: 21.8.2009
Из: Украина
Поблагодарили: 122 раза
Репутация:   29  


Что за бот spider Bot? В последнее время часто появляеться на сайте.
Ходит в основном из айпишников 98.217.240.194, 24.249.204.3, 67.180.27.231, 98.117.104.66, 66.239.205.50. Возможно это прокси.
4
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 6.9.2010, 17:03; Ответить: jack
Сообщение #2


----------------
*******

Группа: Super Moderator
Сообщений: 7863
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10733 раза
Репутация:   591  


Вот он
[attachment=8076:robots_r...roboquad.jpg]

По теме - поисковый робот (Спайдер - Spider или Crawler или Bot или Robot) - скорее всего один из поисковых ботов, которых у каждой ПС десятки


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram


Поблагодарили: (4)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Staurus
Staurus
сообщение 6.9.2010, 17:12; Ответить: Staurus
Сообщение #3


Big Brother
******


Группа: Active User
Сообщений: 2179
Регистрация: 12.6.2009
Из: Симферополь
Поблагодарили: 2368 раз
Репутация:   260  


Не не не, вот он


--------------------


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
afiskon
afiskon
сообщение 6.9.2010, 17:19; Ответить: afiskon
Сообщение #4


Бывалый
****

Группа: User
Сообщений: 253
Регистрация: 8.11.2009
Из: Москва
Поблагодарили: 42 раза
Репутация:   4  


(Vibos @ 6.9.2010, 16:27) *
Что за бот spider Bot? В последнее время часто появляеться на сайте.
Ходит в основном из айпишников 98.217.240.194, 24.249.204.3, 67.180.27.231, 98.117.104.66, 66.239.205.50. Возможно это прокси.

Это явно не Яндекс, не Google и не Bing. На mail.ru тоже не похож. По базе RIPE об этих IP адресах тоже ничего внятного не узнать. Нужна Вам лишняя нагрузка на сервер непонятно с какой целью? Если нет - смело баньте этого бота.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 6.9.2010, 17:22; Ответить: jack
Сообщение #5


----------------
*******

Группа: Super Moderator
Сообщений: 7863
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10733 раза
Репутация:   591  


Staurus, какой то он агрессивный...
Vibos, в robots.txt исключите всех ботов кроме нужных вам меньше вопросов будет


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
siwega
siwega
сообщение 6.9.2010, 21:32; Ответить: siwega
Сообщение #6


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 3.9.2010
Поблагодарили: 6 раз
Репутация:   2  


Vibos, чувствую, множество Вам дали ценных советов. После таких картинок сразу стало понятно что это за боты. f_4866c2c501a2c.gif Вот тут описаны многие боты http://www.botsvsbrowsers.com/ Большинство ботов что что ходят к Вам в гости от сервиса 80ног. Вот ту чуть больше информации о нем http://www.80legs.com/spider.html

Сообщение отредактировал siwega - 6.9.2010, 21:35
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vibos
Vibos
Topic Starter сообщение 6.9.2010, 23:12; Ответить: Vibos
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 642
Регистрация: 21.8.2009
Из: Украина
Поблагодарили: 122 раза
Репутация:   29  


(siwega @ 6.9.2010, 20:32) *
Vibos, чувствую, множество Вам дали ценных советов. После таких картинок сразу стало понятно что это за боты. Вот тут описаны многие боты http://www.botsvsbrowsers.com/ Большинство ботов что что ходят к Вам в гости от сервиса 80ног. Вот ту чуть больше информации о нем http://www.80legs.com/spider.html

В списке этого бота не нашел, и, насколько я понял с того, что написанно на сайте, бот 80ног подписываеться 008.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
siwega
siwega
сообщение 6.9.2010, 23:52; Ответить: siwega
Сообщение #8


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 3.9.2010
Поблагодарили: 6 раз
Репутация:   2  


Vibos, Вот более точная ссылка для этого бота http://www.botsvsbrowsers.com/details/324807/index.html
Вот 3 страницы про IP
http://www.botsvsbrowsers.com/ip/24.249.204.3/index.html
http://www.botsvsbrowsers.com/ip/98.117.104.66/index.html
http://www.botsvsbrowsers.com/ip/66.239.205.50/index.html
если юзерагент один и тот же, то скорее всего и на остальные 2 ip его же.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Redcraft
Redcraft
сообщение 7.9.2010, 13:09; Ответить: Redcraft
Сообщение #9


Новичок
*

Группа: User
Сообщений: 18
Регистрация: 19.12.2009
Поблагодарили: 4 раза
Репутация:   1  


В робот. тхт не в койм случае всех ботов неизвестных запрещать нельзя. Запрещать нужно только тогда, когда робот создает повышенную нагрузку на сайт.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
seohazard
seohazard
сообщение 7.9.2010, 14:20; Ответить: seohazard
Сообщение #10


Старожил
******

Группа: Active User
Сообщений: 1001
Регистрация: 5.12.2008
Поблагодарили: 164 раза
Репутация:   21  


Бот шпион, звучит опасно. Я бы его забанил, нефиг шпионить, но всех ботов банить нельзя.


--------------------
SEO услуги населению.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Естественные ссылки в деталях. Что из себя представляют, как добывать
seoandme.ru - SEO-блог Анны Ященко
0 AnnaYa 255 Сегодня, 10:56
автор: AnnaYa
Открытая тема (нет новых ответов) EasyTop - Бесплатный бот для накрутки ВКонтакте
3 DimaMyrzich 811 Сегодня, 4:30
автор: jingo
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыКто и что читает?
Любимые и не только, книги.
251 Levels 31048 Вчера, 16:47
автор: Catherine_Molli
Открытая тема (нет новых ответов) Карим Баратов признался, что имел отношение ко взлому компании Yahoo
4 MissContent 617 Вчера, 16:38
автор: wertu
Горячая тема (нет новых ответов) Что лучше, фриланс, удаленка, или работа в офисе солидной компании?
93 Levizar 7553 Вчера, 16:27
автор: Catherine_Molli


 



RSS Текстовая версия Сейчас: 12.12.2017, 16:17
Дизайн