X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

5 страниц V  < 1 2 3 4 5
Открыть тему
Добавить ответ в эту тему
> Давайте блокировать ботов в robots.txt
Cott
Cott
Topic Starter сообщение 4.4.2021, 22:34; Ответить: Cott
Сообщение #42


Да признаю, роботс дырявый и ненадежный.

Применил этот вариант и все работает ОК - HTTrack и другие блокируются

Ботов развелось, хотя я и сам много раз пользовался HTTrack-ом
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Trumper
Trumper
сообщение 6.4.2021, 18:28; Ответить: Trumper
Сообщение #43


Cott, а Xenu там за что блокнули?
Ей кроме самого вебмастера кто-то постоянно пользуется?
парочку конкурентов просканят - имхо не страшно
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Cott
Cott
Topic Starter сообщение 6.4.2021, 19:41; Ответить: Cott
Сообщение #44


Без разницы, нет желания вникать.
Цель - больше блокировать.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kvsgeek
kvsgeek
сообщение 10.4.2021, 15:03; Ответить: kvsgeek
Сообщение #45


Ostromir,
Обычно хорошие хостинги делают такую опцию, но лучше уточнять у самой поддержки хостинга, делают ли они такое.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Cott
Cott
Topic Starter сообщение 10.4.2021, 17:10; Ответить: Cott
Сообщение #46


Сайт работает в Москве и только по Москве.
Начала долбиться вот эта гадость из Канады.
Из логов: 51.161.119.104 - - [10/Apr/2021:13:07:55 +0300] "GET / HTTP/1.1" 301 173 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36"

Перекрыл доступ: Deny from 51.161.0.0/16



Сообщение отредактировал Cott - 10.4.2021, 17:15
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
5 страниц V  < 1 2 3 4 5
Открыть тему
Добавить ответ в эту тему
Быстрый ответ
3 чел. читают эту тему (гостей: 3, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыВК: Реальные/целевые подписчики. Оплата за вступивших. Без ботов. Гарантия. Скидки! Тест за отзыв.
86 VilD 39015 13.4.2021, 11:33
автор: VilD
Открытая тема (нет новых ответов) Google: трафик сторонних ботов напрямую не влияет на ранжирование сайта
6 VinogradOFF 1257 7.4.2021, 22:10
автор: NikosTM
Открытая тема (нет новых ответов) Разработка ботов под любую рутину. Разгрузи свой график!
1 basmeister 507 19.12.2020, 13:35
автор: basmeister
Открытая тема (нет новых ответов) ZennoPoster-услуги по написанию ботов, автоматизация работы в браузере. Сбор любых баз.
ZennoPoster-услуги по написанию шаблонов
0 Progernaut 330 13.11.2020, 20:20
автор: Progernaut
Открытая тема (нет новых ответов) Порекомендуйте живые тизерки с минимумом ботов
9 Mansurka 659 24.10.2020, 21:40
автор: EvilGomel


 



RSS Текстовая версия Сейчас: 23.4.2021, 5:38
Дизайн