X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Нужн Парсер, Программа или Скрипт, для скачки онлайн галерей, Срочно нужна Помощь, Совет.
Monkey_D_M_Luffy
Monkey_D_M_Luffy
Topic Starter сообщение 2.6.2011, 14:26; Ответить: Monkey_D_M_Luffy
Сообщение #1


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 16.8.2010
Поблагодарили: 1 раз
Репутация:   1  


Всем Привет
У меня возникла такая проблема, мне нужен парсер для скачивания фоток с онлайн сайтов, с кучей страниц.
Вот например сайт http://www.imagefap.com JDownloader может осиливать очищая галерею хоть с сотрей страниц.
А вот других сайтов не берет.
Кто может помочь сказать программы или скрипты или парсер, для скачивания галерей с таких сайтов как:
Самый важный это http://g.e-hentai.org
http://www.skins.be
http://deviantart.com
http://chan.sankakucomplex.com
http://gelbooru.com
http://danbooru.donmai.us
Есть и другие в списке, так сказать пакет.
У кого есть какие та мысли, пожалуйста выражаем, может тот скрипт о котором я говорил выше и работает.
Очень жду ответов на срочный вопрос.

Или сколько работа будет стоить, если такого в природе не существует.
И кто может это сделать.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
knaipa
knaipa
сообщение 2.6.2011, 14:35; Ответить: knaipa
Сообщение #2


мошенник
*****

Группа: Banned
Сообщений: 984
Регистрация: 15.6.2010
Поблагодарили: 280 раз
Репутация:   60  


Content Downloader по идее справится, только вот интересно в каком формате вы хотите получать результат


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Monkey_D_M_Luffy
Monkey_D_M_Luffy
Topic Starter сообщение 2.6.2011, 14:50; Ответить: Monkey_D_M_Luffy
Сообщение #3


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 16.8.2010
Поблагодарили: 1 раз
Репутация:   1  


Желательно чтобы картинка называлась так как на сервере, ведь иногда на однос странице могут быть герои не к одному аниме.
В одной папке на страницу, а на некоторых сайтах, не помешалобы чтобы сохраняло теги, поскольку не в имени картинки содержится смысл, а именно в тегах на странице, а имя там из букв и цифр (

Content Downloader вроде как платная (
А на сайтах стоит хитрая защита, так что тут наверно нужет скрипт или человек который сможет посмотреть и оценить её хитрость, а не прога за столько баксов, которая может и не справиться, особенно без знания её особенностей ((
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
knaipa
knaipa
сообщение 2.6.2011, 15:03; Ответить: knaipa
Сообщение #4


мошенник
*****

Группа: Banned
Сообщений: 984
Регистрация: 15.6.2010
Поблагодарили: 280 раз
Репутация:   60  


$40 это не много, специалист обойдется раза в два дороже.
А софта выполнит свои функции, я в жэтом почти уверен - и не такое вытворял с ней


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Monkey_D_M_Luffy
Monkey_D_M_Luffy
Topic Starter сообщение 2.6.2011, 15:10; Ответить: Monkey_D_M_Luffy
Сообщение #5


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 16.8.2010
Поблагодарили: 1 раз
Репутация:   1  


Нечего, может найдется специалист который за пакетную работу возьмется не слишком дорого smile.gif
Или можем вместе попробовать один сайт, и если не забанят, то тогда конечно стоит подумать об этой проге ^__^
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
knaipa
knaipa
сообщение 2.6.2011, 15:14; Ответить: knaipa
Сообщение #6


мошенник
*****

Группа: Banned
Сообщений: 984
Регистрация: 15.6.2010
Поблагодарили: 280 раз
Репутация:   60  


CD может работать через множество проксей, думаю не забанят, если правильно выставить настройки.
А пробовать меньше $15-20 никто не будет. Ну я то точноwink.gif


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Monkey_D_M_Luffy
Monkey_D_M_Luffy
Topic Starter сообщение 2.6.2011, 15:20; Ответить: Monkey_D_M_Luffy
Сообщение #7


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 16.8.2010
Поблагодарили: 1 раз
Репутация:   1  


Тогда подожду спеца по парсеру ))
Кто вникнет с суть проблемы )
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
plamar
plamar
сообщение 3.6.2011, 20:17; Ответить: plamar
Сообщение #8


Бывалый
****

Группа: User
Сообщений: 264
Регистрация: 4.11.2008
Поблагодарили: 21 раз
Репутация:   8  


Для вашей задачи существует готовое решение. Это универсальный парсер Datacol. Для каждого из нужных вам сайтов в рамках парсера можно быстро создать профиль настроек (благодаря визуализации настроек сбора данных). Кстати сохраненные фотографии можно будет автоматически заливать на FTP. В будущем планируем доделать еще закачку на бесплатные фотохостинги.

p.s. если вдруг функционала программы не хватит, то можно легко доработать плагин.


--------------------
EA-WS.com - API для автоперевода. 0,02$ за 1000 знаков.
Datacol - универсальный парсер контента, 64+ готовых парсера от 459 руб/мес.!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Monkey_D_M_Luffy
Monkey_D_M_Luffy
Topic Starter сообщение 4.6.2011, 14:09; Ответить: Monkey_D_M_Luffy
Сообщение #9


Новичок
*

Группа: User
Сообщений: 44
Регистрация: 16.8.2010
Поблагодарили: 1 раз
Репутация:   1  


Посмотрим что из себя представляет ))
Надеюсь хоть это обойдет банную защиту ^__^

Спасибо за прогу конечно, но пажалуй нет.
Она эти страницы не понимает, или я неправильно что-то указал.
Но факт того что меня засекли, как маленькое нарушение и доступа нет

"Your IP address has been temporarily banned for using automated mirroring/harvesting software and/or failing to heed the overload warning. The ban expires in 57 minutes 49 seconds"

Лучше скажите кто может парсер написать? c подгонкой под сайт, тут нужет знающий человеческий фактор. V__V

Сообщение отредактировал Monkey_D_M_Luffy - 4.6.2011, 14:19
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
plamar
plamar
сообщение 4.6.2011, 18:44; Ответить: plamar
Сообщение #10


Бывалый
****

Группа: User
Сообщений: 264
Регистрация: 4.11.2008
Поблагодарили: 21 раз
Репутация:   8  


(Monkey_D_M_Luffy @ 4.6.2011, 14:09) *
Лучше скажите кто может парсер написать? c подгонкой под сайт, тут нужет знающий человеческий фактор. V__V


ну для Datacol например можно плагин сделать для загрузки страниц с интересующих вас сайтов. То есть плагин, который будет учитывать нужные вам человеческие факторы (скорее всего там просто дело в заголовках, отправляемых браузером или в периодичности запросов). Нужно поэкспериментировать


--------------------
EA-WS.com - API для автоперевода. 0,02$ за 1000 знаков.
Datacol - универсальный парсер контента, 64+ готовых парсера от 459 руб/мес.!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Чем сжимать картинки для сайта без потери качества
1st-finstep.ru - Заработок в сети и методы продвижения сайта
3 komarik_vlad 504 Вчера, 23:46
автор: komarik_vlad
Открытая тема (нет новых ответов) Проги для редактирования style.css
13 minutkin 896 Вчера, 20:11
автор: docdie
Открытая тема (нет новых ответов) Ищу платёжный агрегатор для работы с физ. лизами (не ИП)
12 SergeiVL 2221 Вчера, 16:50
автор: BestExchangers
Горячая тема (нет новых ответов) Что лучше, фриланс, удаленка, или работа в офисе солидной компании?
90 Levizar 7370 Вчера, 16:12
автор: seoprogoni
Открытая тема (нет новых ответов) Какой движок форума для таких целей вы бы поставили?
Критерии в теме
0 landis 208 Вчера, 15:30
автор: landis


 



RSS Текстовая версия Сейчас: 11.12.2017, 8:34
Дизайн