Помощник
|
A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров. |
AParser_Support |
26.12.2017, 14:34;
Ответить: AParser_Support
Сообщение
#172
|
|
1.2.50 - улучшение стабильности, поддержка Xevil и множество исправлений в стандартных парсерах
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Команда A-Parser поздравляет всех с Новым годом и Рождеством! Спасибо что вы с нами! Сообщение отредактировал AParser_Support - 26.12.2017, 14:35 -------------------- |
|
|
AParser_Support |
10.1.2018, 11:29;
Ответить: AParser_Support
Сообщение
#173
|
|
Сборник статей #2: цикл статей-уроков по созданию JS парсеров
Как известно, в A-Parser есть возможность создавать свои собственные парсеры, которые могут иметь практически любую логику и в то же время позволяют пользоваться всеми преимуществами А-Парсера. Для написания таких парсеров используется язык JavaScript. В нашей документации подробно описаны все функции и методы, которые можно использовать при написании парсеров. А в сегодняшнем сборнике мы на практических примерах покажем наиболее часто применяемые функции. Поехали!
Для каждой статьи в конце будет продемонстрирован результат работы и дана ссылка на готовый парсер. Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь. Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter. Предыдущие сборники статей -------------------- |
|
|
AParser_Support |
23.1.2018, 18:14;
Ответить: AParser_Support
Сообщение
#174
|
|
1.2.78 - поддержка сессий в JS парсерах, улучшение SE::Google::Modern, правки в интерфейсе
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Сообщение отредактировал AParser_Support - 23.1.2018, 18:17 -------------------- |
|
|
AParser_Support |
2.2.2018, 12:31;
Ответить: AParser_Support
Сообщение
#175
|
|
AParser_Support, Видео урок: Создание JS парсеров. Получение результатов от стандартного парсера
Это видео начинает цикл уроков по созданию JavaScript парсеров. Здесь рассказано о том, как начать писать собственные парсеры, используя функционал JS парсеров в А-Парсере. В уроке рассмотрено:
Полезные ссылки:
Статья и готовый парсер: https://a-parser.com/resources/254/ Оставляйте комментарии и подписывайтесь на наш канал на YouTube! -------------------- |
|
|
AParser_Support |
13.2.2018, 12:08;
Ответить: AParser_Support
Сообщение
#176
|
|
Видео урок: Создание JS парсеров. Парсинг сайта с проходом по страницах
Второе видео в цикле уроков по созданию JavaScript парсеров. Здесь рассказано о том, как написать несложный парсер сайта, который будет "листать" страницы, используя функционал JS парсеров в А-Парсере. В уроке рассмотрено:
Статья и готовый парсер: https://a-parser.com/resources/255/ Оставляйте комментарии и подписывайтесь на наш канал на YouTube! -------------------- |
|
|
AParser_Support |
23.2.2018, 14:01;
Ответить: AParser_Support
Сообщение
#177
|
|
1.2.138 - поддержка Node.js модулей, обработка ReCaptcha2 во всех парсерах Google, парсер AliExpress
В A-Parser 1.2.138 добавлена эмуляция node версии 8.9.x с поддержкой загрузки модулей и частичной реализацией fs и net модулей. Это дает возможность обращаться из JavaScript парсеров напрямую к файловой системе, а также использовать подключение по TCP из модулей к другим сервисам(например mysql, redis, chrome...). Все это позволило загружать и использовать node модули из каталога npm, в котором собраны множество полезных библиотек для обработки данных, коннекторы к базам данных и множество других интересных вещей. На данный момент протестированы следующие модули: md5, async-redis, jsdom, puppeter. Улучшения
Исправления в связи с изменениями в выдаче
Исправления
-------------------- |
|
|
AParser_Support |
5.3.2018, 14:03;
Ответить: AParser_Support
Сообщение
#178
|
|
Использование Xevil совместно A-Parser для разгадывания ReCaptcha2
Как известно, сейчас Google при парсинге очень часто выдает рекаптчу, что значительно усложняет и замедляет сбор данных. В A-Parser есть возможность обходить данную проблему, разгадывая рекаптчу с помощью сторонних сервисов. Поддерживаются различные онлайн сервисы, а также программные решения. Одним из таких решений есть XEvil. Его использование дает хороший прирост в скорости, а также значительно удешевляет парсинг, ведь здесь нету оплаты за количество разгаданных каптч/рекаптч, как в онлайн сервисах. Кроме этого, XEvil умеет разгадывать практически любые обычные каптчи (в виде картинки) и данная возможность также поддерживается в A-Parser. На данный момент использовать разгадывание рекаптчи с помощью XEvil можно в таких парсерах:
В видео показано:
Ознакомиться более детально с возможностями XEvil можно по ссылкам: Оставляйте комментарии и подписывайтесь на наш канал на YouTube! Сообщение отредактировал AParser_Support - 5.3.2018, 14:04 -------------------- |
|
|
Axel |
6.3.2018, 20:20;
Ответить: Axel
Сообщение
#179
|
|
Здравствуйте. Поясните, правильно ли я понял суть парсера яндекс картинок.
Парсер собирает все урл изображений из выдачи по конкретному запросу и записывает их в текстовый документ? Мне нужно по запросу собирать указаное количество картинок в оригинальном разрешении, для загрузки их на сайт. Это может сделать данный парсер? |
|
|
AParser_Support |
15.3.2018, 11:35;
Ответить: AParser_Support
Сообщение
#180
|
|
Axel,
Да такая возможность у парсера есть, можно собирать указанное количество картинок в нужном разрешении. Также доступны другие параметры поиска, доступные в поисковике Сборник рецептов #21: уведомления в Telegram из A-Parser, мультифильтр и парсинг IMDb 21-й сборник рецептов. В нем мы научимся отправлять сообщения в Telegram прямо из A-Parser, изучим работу с модулями Node.js в JS парсерах на примере решения задачи фильтрации по множеству признаков, а также спарсим весь IMDb. Поехали! Уведомления в Telegram из A-Parser Telegram является одним из самых популярных мессенджеров благодаря своей простоте, и в то же время большому функционалу. Среди прочего, в Телеграме можно создавать ботов, с помощью которых можно делать чаты более интерактивными. Взаимодействие с ботом на на стороне сервера происходит через Telegram Bot API. Используя эти возможности, можно легко и буквально за несколько минут настроить уведомления себе в Telegram прямо из парсера. О том, как это сделать, а также несколько реальных примеров - по ссылке выше. Фильтрация по множеству признаков Как известно, для фильтрации в А-Парсере используется встроенный функционал фильтров. Но бывают ситуации, когда список признаков, наличие которых нужно проверять, очень большой и его сложно вписать в строку стандартного фильтра. Начиная с версии 1.2.127 в A-Parser добавлена поддержка модулей Node.js. Благодаря этому появилась возможность читать список признаков из файла и использовать его для проверки страниц. О том, как это сделать, а также готовый парсер с мультифильтром - по ссылке выше. Парсинг рекомендаций фильмов из IMDb Пример решения задачи по сбору данных о фильмах и их рекомендаций на IMDb. Данная статья показывает, как можно решать задачи, которые на первый взгляд требуют много времени и ресурсов, буквально за несколько часов. Узнать о том, как спарсить весь IMDb за 1,5 часа, а также посмотреть пресет и забрать готовую базу можно по ссылке выше. Еще больше различных рецептов в нашем Каталоге! Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы. Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter. Предыдущие сборники рецептов:
Сборники статей: -------------------- |
|
|
AParser_Support |
26.3.2018, 14:02;
Ответить: AParser_Support
Сообщение
#181
|
|
1.2.160 - поддержка SQLite, проверка доменов на клей, Parse all results в SE::Yahoo
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Сообщение отредактировал AParser_Support - 26.3.2018, 14:03 -------------------- |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Базы Youtube кейвордов с данными по конкуренции и Volume | 6 | Krok | 1588 | Вчера, 5:43 автор: Krok |
|
Большие базы Semrush кейвордов по разным тематикам! Много кейвордов с трафиком и без конкуренции! Volume, KD, CPC | 22 | Krok | 6763 | 12.4.2024, 5:17 автор: Krok |
|
Бесплатный парсер бот в Телеграм - [Parser Pro] | 5 | Parser_Pro | 3353 | 27.1.2024, 16:12 автор: Parser_Pro |
|
Дайте бесплатного контента! :) | 2 | Tia2 | 1000 | 22.12.2023, 18:53 автор: zyzy |
|
Занимаюсь добычей качественного контента из Вебархива. Опыт уже более трех лет Предоставляю только качественный, читабельный контент. |
62 | kuz999 | 38117 | 27.7.2023, 13:55 автор: kuz999 |
Текстовая версия | Сейчас: 24.4.2024, 14:44 |