X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Новая система-блокировки от Яндекса?
FlashBlack
FlashBlack
Topic Starter сообщение 19.11.2010, 20:00; Ответить: FlashBlack
Сообщение #1


Доброе всем время!

Пишу с такой целью.
Яндекс начал очень усердно блокировать получение страниц через прокси.
Из запросов 20, только пару имеют не 404 статус.

Прокси элитные, приватные (awmproxy), на других проектах, не связанных с Яндексом, работаю что ошарашенные!

Кто с таким встречался?? Есть ли решение проблемы?


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
asAlbert
asAlbert
сообщение 19.11.2010, 20:06; Ответить: asAlbert
Сообщение #2


Простите меня за мою необразованность, а что значит "получить страницу через прокси"?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
FlashBlack
FlashBlack
Topic Starter сообщение 19.11.2010, 20:12; Ответить: FlashBlack
Сообщение #3


(asAlbert @ 19.11.2010, 18:06) *
Простите меня за мою необразованность, а что значит "получить страницу через прокси"?

"Выполнить HTTP соединение через прокси-сервер", "Открыть любую страницу яндекса через прокси", http://ru.wikipedia.org/wiki/%D0%9F%D1%80%...%B2%D0%B5%D1%80


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
FreeBird
FreeBird
сообщение 20.11.2010, 12:32; Ответить: FreeBird
Сообщение #4


Увеличьте таймаут между запросами.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
FlashBlack
FlashBlack
Topic Starter сообщение 20.11.2010, 13:23; Ответить: FlashBlack
Сообщение #5


(FreeBird @ 20.11.2010, 10:32) *
Увеличьте таймаут между запросами.

Это не вариант, т.к. элитные прокси на каждый запрос дают новый ip адрес.
Да и если внедрить таймаут, то многопоточная система полетит побоку.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
lastop
lastop
сообщение 25.11.2010, 8:08; Ответить: lastop
Сообщение #6


Вы как первый раз с яндексом работаете, смотрите КУКИ, проверьте таймауты, проверьте не дублируются ли IP?
У яндекса всегда самая свежая база элитных аном прокси, поэтому если ктонить такой же как вы веселиться с яндексом он мог IP уже эти побанить.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Anatol
Anatol
сообщение 25.11.2010, 22:40; Ответить: Anatol
Сообщение #7


Попробуйте через аномайзеры


--------------------
Забанен за клоноводство
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Irinachange
Irinachange
сообщение 26.11.2010, 10:04; Ответить: Irinachange
Сообщение #8


ребята не стоят на месте
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
gr3y
gr3y
сообщение 26.11.2010, 10:35; Ответить: gr3y
Сообщение #9


FlashBlack
Прокси элитные, приватные (awmproxy), на других проектах, не связанных с Яндексом, работаю что ошарашенные!

Кто с таким встречался?? Есть ли решение проблемы?

Не могу понять зачем вы используете прокси. Я только что с одного IP замечательно спарсил собственным софтом 20 страниц во многопоточном режиме.
Надо смотреть не в сторону прокси, а в сторону подражания браузеру. Как вам уже сказали - смотрите куки.
Да и если внедрить таймаут, то многопоточная система полетит побоку.

Правда что ли? С чего вдруг?

Сообщение отредактировал gr3y - 26.11.2010, 10:36
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
1807
1807
сообщение 26.11.2010, 10:50; Ответить: 1807
Сообщение #10


(FlashBlack @ 20.11.2010, 12:23) *
элитные прокси на каждый запрос дают новый ip адрес.

в этом и вся проблема, вычислить прокси в данной ситуации проще простого..


--------------------
Куплю подписи, дорого
Помогу с установкой сапы бесплатно ICQ 9886806
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыПродвижение сайтов в ТОП Яндекса за 2 недели. Рост позиций и трафика
Бесплатный тест
19 Konrod 9797 18.3.2024, 10:04
автор: Konrod
Горячая тема (нет новых ответов) Риск блокировки кошельков от частой смены VPN
85 metvekot 14468 8.3.2024, 0:21
автор: Liudmila
Открытая тема (нет новых ответов) Вытащить страницы из кэша Яндекса
2 VostrVL 1915 11.1.2024, 23:07
автор: ЛаврионСергеевич
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыВывод подсказок в топ яндекса + продвижение сайта
6 Mikhail_B 1916 4.9.2022, 19:21
автор: Monah
Горячая тема (нет новых ответов) тИЦ отменили! Новый показатель Яндекса ИКС! Лучшие площадки под размещение. Бесплатное написание статей при любом заказе.
Эксклюзивное предложение. Успей получить написание статей БЕСПЛАТНО
71 VIMstat 78316 21.6.2022, 9:38
автор: VIMstat


 



RSS Текстовая версия Сейчас: 29.3.2024, 17:01
Дизайн