X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Много капчи при парсинге Вордстата Key Collector'ом. Что делать?
Artem76
Artem76
Topic Starter сообщение 1.2.2016, 9:01; Ответить: Artem76
Сообщение #1


Приветствую вас, уважаемые!

Взялся за составление семантического ядра сайта с помощью свежекупленной софтины - Key Collector'ом.
Пересмотрел кучу материала по работе с сей программой, по её настройке. Настроил её исходя из всех рекомендаций. Однако при парсинге Вордстата Яндекса столкнулся с проблемой: после парсинга 150-200 слов по каждому из потоков (3 потока - 3 прокси (покупные, индивидуальные), без своего IP) начинает выскакивать злополучная капча при каждом запросе. Ладно бы, периодически выскакивала. А тут явно что-то неладное, потому как спарсив около 5 000 запросов пришлось распознавать почти 200 капч.

Возможно, кто-то из местных гуру сталкивался с такой проблемой? Буду рад любому совету! :umnik:

P.S. Задержки между запросами устанавливал от 35 000 до 40 000 мс.

Сообщение отредактировал Artem76 - 1.2.2016, 9:01


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
DFX
DFX
сообщение 1.2.2016, 9:30; Ответить: DFX
Сообщение #2


Artem76, а есть парсинг в глубину?

Для совсем больших количеств лучше сервисы использовать.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
mr_LasVegas
mr_LasVegas
сообщение 1.2.2016, 10:05; Ответить: mr_LasVegas
Сообщение #3


Стоит задержка 5000-15000.
Парсю в 5 потоков - 5 прокси, без основного IP.
Капчи вообще не вылазят, у меня только когда выдачу гугла парсишь капчи достают.
У вас точно прокси индивидуальные? Просто то, что прокси покупные еще ничего не значит, есть очень отвратительные покупные прокси.
Если все так как вы сказали и с настройками у вас все нормально, то проблема скорее всего в проксях, сколько у вас 3 прокси эти стоили?


--------------------
Меняю Webmoney на Qiwi - для личных нужд


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SeoKot
SeoKot
сообщение 1.2.2016, 10:46; Ответить: SeoKot
Сообщение #4


Цитата(Artem76)
Буду рад любому совету!

Подключите одну из антикапч.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Artem76
Artem76
Topic Starter сообщение 1.2.2016, 10:54; Ответить: Artem76
Сообщение #5


Цитата(SeoKot @ 1.2.2016, 9:46) *
Цитата(Artem76)Буду рад любому совету!
Подключите одну из антикапч.

Подключена.
Цитата(mr_LasVegas @ 1.2.2016, 9:05) *
Стоит задержка 5000-15000.
Парсю в 5 потоков - 5 прокси, без основного IP.
Капчи вообще не вылазят, у меня только когда выдачу гугла парсишь капчи достают.
У вас точно прокси индивидуальные? Просто то, что прокси покупные еще ничего не значит, есть очень отвратительные покупные прокси.
Если все так как вы сказали и с настройками у вас все нормально, то проблема скорее всего в проксях, сколько у вас 3 прокси эти стоили?

Хм, дело в том, что и со своего IP та же картина. Прокси покупал на тест за 300 р за неделю. Не могли бы вы написать в ЛС мне, где можно хорошие прикупить?

Цитата(DFX @ 1.2.2016, 8:30) *
Artem76, а есть парсинг в глубину?

Для совсем больших количеств лучше сервисы использовать.

Глубина - 0.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Сурок
Сурок
сообщение 5.2.2016, 12:11; Ответить: Сурок
Сообщение #6


Снимаю частотку для десятков тысяч запросов в кейколлекторе через директ, работает очень быстро!
А прямой парсинг тоже выносит мозг, скорость нулевая.


--------------------
Быстропост
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
JOHNY
JOHNY
сообщение 5.2.2016, 12:49; Ответить: JOHNY
Сообщение #7


Увеличьте в настройках интервал между действиями.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Artem76
Artem76
Topic Starter сообщение 5.2.2016, 18:15; Ответить: Artem76
Сообщение #8


JOHNY, интервал для парсинга Яндекс.Вордстата - от 25 000 до 30 000 мс.
Может ли проблема быть в самих аккаунтах Яндекса? Если да, то какие аккаунты нужны?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SeoKot
SeoKot
сообщение 5.2.2016, 18:30; Ответить: SeoKot
Сообщение #9


Цитата(Artem76)
Может ли проблема быть в самих аккаунтах Яндекса?

В хелпе софта написано, что под прогу использовать левую почту именно под софт. Попробуйте создать новый ящик на яндексе (лучше 2), у меня они живут нормально.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Artem76
Artem76
Topic Starter сообщение 5.2.2016, 18:40; Ответить: Artem76
Сообщение #10


SeoKot, создавал новые ящики. Хватает каждого из них на парсинг максимум 1000 ключей. Потом вылазит постоянная капча.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Во что сегодня инвестировать?
Делимся своими приносящими прибыль вариантами
73 traveliver 4856 Вчера, 14:45
автор: spomoni
Открытая тема (нет новых ответов) Боты могут делать пушподписки на моём сайте?
0 Megaspryt 425 17.4.2024, 23:29
автор: Megaspryt
Открытая тема (нет новых ответов) Большие базы Semrush кейвордов по разным тематикам! Много кейвордов с трафиком и без конкуренции! Volume, KD, CPC
22 Krok 6734 12.4.2024, 5:17
автор: Krok
Открытая тема (нет новых ответов) Мегамаркет. Скидка 1000 рублей при покупке от 5000 рублей на все, на первый заказ.
Мегамаркет. Скидка 1000 рублей при покупке от 5000 рублей на все, на п
7 stu999 1753 31.3.2024, 11:19
автор: stu999
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыВо что Вы играете?
399 Vmir 67841 23.3.2024, 12:51
автор: Alexand3r


 



RSS Текстовая версия Сейчас: 19.4.2024, 8:58
Дизайн