X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

4 страниц V   1 2 3 4 >
Открыть тему
Тема закрыта
> Бототрафик на российских сайтах
Наличие бототрафика
Есть ли у вас сейчас на сайтах бототрафик?
Да, постоянно присутствует [ 7 ] ** [77,78%]
Есть, но после недавнего обновления яндекс.метрикой алгоритма определения роботов его стало меньше [ 0 ] ** [0,00%]
Периодически бывает [ 1 ] ** [11,11%]
Раньше был, но сейчас его нет [ 1 ] ** [11,11%]
Нет и никогда не было [ 0 ] ** [0,00%]
Всего голосов: 9
  
guruapps
guruapps
Topic Starter сообщение 20.10.2021, 16:19; Ответить: guruapps
Сообщение #1


Наличие трафика от ботов легко определить в вебвизоре метрики. Как правило идут прямые заходы или переходы из соцсетей с таких сетей как Metropolitan branch of OJSC MegaFon, Mobile subscribers pool, Tele2 Russia IP Network(MSK) и т.д. Так же в качестве реферера бывают google и яндекс. Большинство таких визитов являются отказными. Особенно их заметно в ночное время.
Уважаемые вебмастера, просьба поделиться информацией о текущей ситуации на ваших сайтах.

------------------------------------------------------------------------------------------------------

На данный момент я провожу следующий эксперимент:
1. Методом сравнения логов атакованных сайтов получаю список одинаковых ip.
Критерии:
  • Это не поисковые боты
  • Только прямые заходы
  • Только переходы из соцсетей

2. Полученный список отфильтровываю по геопризнаку - РФ.
3. Финальный список кидаю в бан с последующими рецидивами. Например: изначально блокируем на 5 минут. Если повторные посещения, то на 30 мин, затем на 3 часа и т.д.

Сейчас работаю с логами 15 сайтов, но хотелось бы побольше данных конечно. Если есть желающие присоединиться к эксперименту, то пишите в лс, а лучше по контактам в подписи. Главное условие: сайт должен располагаться на vps с установленным nginx. Виртуальный хостинг не рассматривается.



Сообщение отредактировал guruapps - 20.10.2021, 16:33


--------------------
1
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Osipec
Osipec
сообщение 20.10.2021, 17:35; Ответить: Osipec
Сообщение #2


А вы точно уверени, что не попадает под фильтры какой-то процент "нормальных" юзеров?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
guruapps
guruapps
Topic Starter сообщение 20.10.2021, 17:48; Ответить: guruapps
Сообщение #3


Osipec, ни о какой 100% уверенности и гарантии здесь не может быть речи. Но:
  1. Согласитесь, что сложно представить живого человека, который будет делать прямые заходы на сайты абсолютно разной тематики. Мы же здесь не об известных сайтах-гигантах ведем речь.
  2. Для этого и существует система бана с рецидивами с первоначальной блокировкой на незначительное время.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Wachowski
Wachowski
сообщение 20.10.2021, 20:03; Ответить: Wachowski
Сообщение #4


Цитата(guruapps @ 20.10.2021, 17:48) *
живого человека, который будет делать прямые заходы на сайты абсолютно разной тематики


т.е. у вас уже даже по этой выборке из 15ти сайтов есть пересечения одинаковые "слепков"?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
guruapps
guruapps
Topic Starter сообщение 20.10.2021, 20:59; Ответить: guruapps
Сообщение #5


Wachowski, да, пересечения есть. Выглядит так:
Развернуть/Свернуть

Сейчас в список попадают адреса, которые встречаются на двух и более сайтах. Думаю переделать чтобы было минимум 3-5 совпадений. Плюс geoiplookup не всегда может определить страну - нужно либо от него избавляться, либо использовать что-то другое.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
komato3
komato3
сообщение 21.10.2021, 14:41; Ответить: komato3
Сообщение #6


guruapps,
Ну таким образом вы побаните мобильных посетителей т.к. это сети операторов.
В текущий момент метрика работает пока что криво Ее все пилят и пилят после обновления сентября.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
guruapps
guruapps
Topic Starter сообщение 21.10.2021, 15:07; Ответить: guruapps
Сообщение #7


komato3, блокируются не подсети операторов, а конкретные адреса. Если боты меняют свои ip (что вероятнее всего), так и мы не баним их навсегда.

Цитата
В текущий момент метрика работает пока что криво Ее все пилят и пилят после обновления сентября.

Сдается мне, что они обосрались в очередной раз.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Silverspam
Silverspam
сообщение 21.10.2021, 15:39; Ответить: Silverspam
Сообщение #8


Цитата(guruapps @ 21.10.2021, 16:07) *
Если боты меняют свои ip (что вероятнее всего)


Каждые 10-30 минут точно меняют B)
а у кого то даже быстрее (от типа прокси зависит) - раз в 60-120 секунд


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
WGN
WGN
сообщение 21.10.2021, 21:44; Ответить: WGN
Сообщение #9


guruapps,
А что тут удивляться то. Сначала сырой вариант выкладывают а потом год допилиаают.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Coffee
Coffee
сообщение 21.10.2021, 22:48; Ответить: Coffee
Сообщение #10


Цитата(WGN @ 21.10.2021, 21:44) *
Сначала сырой вариант выкладывают а потом год допилиаают.


не на такое количество народу же это делать
никто не мешает потестировать толпой тестировщиков, перед тем как выкатывать
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
4 страниц V   1 2 3 4 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыКрауд ссылки с форумов, блогов, порталов. Жирные ссылки с Ua,Ru, Бурж площадок. Вечные ссылки в статьях на собственных сайтах
Быстро, качественно и ответственно!
138 vetalbon 66445 13.4.2024, 17:53
автор: vetalbon
Открытая тема (нет новых ответов) Размещу вебкам/приворот и прочую нежить ))) на своих сайтах с ИКС 10-40
11 kasey7 2966 6.4.2024, 4:31
автор: kasey7
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыРазмещу Гемблинг на своих сайтах с ИКС
12 kasey7 3519 6.4.2024, 4:31
автор: kasey7
Горячая тема (нет новых ответов) На российских сайтах запретят регистрироваться с иностранной почтой
53 Room 7057 31.1.2024, 3:48
автор: Liudmila
Открытая тема (нет новых ответов) Мобильные прокси российских операторов
2 anchous 1671 10.1.2024, 14:02
автор: anchous


 



RSS Текстовая версия Сейчас: 20.4.2024, 7:32
Дизайн