X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Тестирование программы Datathief, грабер контента
verych
verych
Topic Starter сообщение 28.10.2009, 16:42; Ответить: verych
Сообщение #1


Участник
***

Группа: User
Сообщений: 148
Регистрация: 11.12.2007
Поблагодарили: 4 раза
Репутация:   1  


Всем привет,
тестирую программу для сбора данных с любых сайтов.

Это десктопная программа, которая берет данные из чего угодно (с любых сайтов), по заданным правилам, немного чистит и экспортирует в различные форматы, даже может отсылать на email, например, для поста в блог.

Готов собрать инфу с 3-х сайтов за отзывы и пожелания совершенно бесплатно.
Прошу писать в личку урл сайта и своё мыло. По одной заявке на человека.

После тестирования и доработок выложу бесплатную демо версию.

Пара человек уже помогли мне с этим,
Вот их отзывы:

Получил заказанный текст. Tc сделал все четко. Даже больше чем обещал. Прислал не только тект, но даже созданный дамп базы, которую можно сразу превратить в полноценный сайт.
Программа по всей видимости стоящая, с гибкими настройками. Хотелось бы иметь такую в своей обойме((

----
Получил заказанный текст. Аж в 3х форматах. Работой доволен, рекомендую. Жду от автора уведомление, как выйдет окончательный релиз проги.


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SeoNizator
SeoNizator
сообщение 28.10.2009, 18:16; Ответить: SeoNizator
Сообщение #2


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 29.3.2009
Из: Donbass
Поблагодарили: 12 раз
Репутация:   0  


Ну вот уже лучше. А то на прошлом месте можно было долго не прожить wink.gif
Тексты не нужны, а вот если можно потестить - потестил бы.
В первую очередь на сравнение с другими грабберами.

Какие входные данные нужны программе - кеи, урлы или что?
Как формируются правила сбора контента?

И название... ИМХО нужно бы сменить. Софта с таким названием уже хватает.


--------------------
Официальный дилер textKit. Консультирую, помогаю.
Строю мини-сетки буржблогов для заколачивания $$$
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
verych
verych
Topic Starter сообщение 28.10.2009, 18:41; Ответить: verych
Сообщение #3


Участник
***

Группа: User
Сообщений: 148
Регистрация: 11.12.2007
Поблагодарили: 4 раза
Репутация:   1  


(SeoNizator @ 28.10.2009, 17:16) *
Ну вот уже лучше. А то на прошлом месте можно было долго не прожить wink.gif
Тексты не нужны, а вот если можно потестить - потестил бы.
В первую очередь на сравнение с другими грабберами.

Какие входные данные нужны программе - кеи, урлы или что?
Как формируются правила сбора контента?

И название... ИМХО нужно бы сменить. Софта с таким названием уже хватает.


Спасибо за советы)

Дам потестить как только доделаю демку, сейчас много начато, но не отлажено

На вход - дается просто URL
Правила сбора - регулярные выражения

Название можно придумать всей братией)
Принимаю предложения! Автор лучшего названия будет награжден, например, почетным правом погонять програмку первым (ну или вторым wink.gif )


ARTEM27 - заявка принята, еще 2 осталось


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rus3322
rus3322
сообщение 28.10.2009, 18:44; Ответить: rus3322
Сообщение #4


Завсегдатай
*****

Группа: Active User
Сообщений: 873
Регистрация: 10.12.2007
Из: казанда
Поблагодарили: 95 раз
Репутация:   13  


Что нужно для теста?


--------------------
Куплю любые сайты из ЯК
Новый эксперемент по поднятию ТИЦ сапой
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jartalk
jartalk
сообщение 28.10.2009, 18:47; Ответить: jartalk
Сообщение #5


Старожил
******

Группа: Active User
Сообщений: 1028
Регистрация: 20.4.2009
Из: МС
Поблагодарили: 121 раз
Репутация:   23  


Запишусь на тест. Программа может давать данные в формате пригодном для импорта в cms?


--------------------
Мой аккаунт пытались взломать! Кредиты не выдавать!
Уникальное руководство - поднимаем ТИЦ и PR бесплатно! (в ЛС)
Наполню форумы (IPB, PhBB)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
verych
verych
Topic Starter сообщение 28.10.2009, 19:00; Ответить: verych
Сообщение #6


Участник
***

Группа: User
Сообщений: 148
Регистрация: 11.12.2007
Поблагодарили: 4 раза
Репутация:   1  


(jartalk @ 28.10.2009, 17:47) *
Запишусь на тест. Программа может давать данные в формате пригодном для импорта в cms?


jartalk - заявка принята
еще один и всё

Посмотрю на ДЛЕ, сделаю экспорт в нужный формат wink.gif

(rus3322 @ 28.10.2009, 17:44) *
Что нужно для теста?



Прошу писать в личку урл сайта и своё мыло. По одной заявке на человека.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SeoNizator
SeoNizator
сообщение 28.10.2009, 19:32; Ответить: SeoNizator
Сообщение #7


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 29.3.2009
Из: Donbass
Поблагодарили: 12 раз
Репутация:   0  


(verych @ 28.10.2009, 16:41) *
На вход - дается просто URL

по одному или сразу пачками?
Умеет ли гулять дальше по страницам? (есть ли настраиваемые правила урлов)

Правила сбора - регулярные выражения

Это хорошо для программистов, но большинство пользователе боятся даже /n wink.gif
Лучше, если будет возможность вставки хтмл-кодов, между которыми брать нужный текст. (а его очистку уже поручить регуляркам)

Вот я, например, считаю ночного бдуна одной из самых лучших парсилок. (Правда, давно им игрался)
Есть чего не хватает, но как для бесплатной софтины - это на сегодня лучшее. ИМХО.
Поэтому, если делать коммерческий продукт - он должен переплюнуть бдуна на несколько метров wink.gif

Название можно придумать всей братией)

Для этого нужно знать больше, чем просто "граббилка сайтов".
Ну хотя бы более детальное описание функционала и возможностей. Мб пару скринов подогреют фантазию "придумывателей" wink.gif

Автор лучшего названия будет награжден, например, почетным правом погонять програмку первым (ну или вторым wink.gif )

Это правильно wink.gif


--------------------
Официальный дилер textKit. Консультирую, помогаю.
Строю мини-сетки буржблогов для заколачивания $$$
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ARTEM27
ARTEM27
сообщение 28.10.2009, 22:00; Ответить: ARTEM27
Сообщение #8


Частый гость
**

Группа: User
Сообщений: 81
Регистрация: 29.12.2008
Из: Москва
Поблагодарили: 7 раз
Репутация:   4  


verych Спасибо сделал быстро и качествено!
Ну что пока всё нормально сделал быстро и качество понравилось. База в в 3 вариантах !
Ну меня зайнтересовало жду демо версию!
ТС сделайте что бы Grabber делал базы по cms в частности DLE и накладывал водяные знаки на картинки!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
verych
verych
Topic Starter сообщение 28.10.2009, 22:53; Ответить: verych
Сообщение #9


Участник
***

Группа: User
Сообщений: 148
Регистрация: 11.12.2007
Поблагодарили: 4 раза
Репутация:   1  


(SeoNizator @ 28.10.2009, 18:32) *
по одному или сразу пачками?
Умеет ли гулять дальше по страницам? (есть ли настраиваемые правила урлов)


Скармливаешь програмке один урл, а по остальным она гуляет, еще ей можно сказать на сколько кликов от заданного урла она может погрузиться

(SeoNizator @ 28.10.2009, 18:32) *
Это хорошо для программистов, но большинство пользователе боятся даже /n wink.gif
Лучше, если будет возможность вставки хтмл-кодов, между которыми брать нужный текст. (а его очистку уже поручить регуляркам)


В програмке есть возможность сохранения шаблонов, также есть несколько готовых, просто для примера. По сути всё сводится к написанию "вставки хтмл-кодов, между которыми брать нужный текст".

У меня настройка на парсинг одного сайта занимает минут 5-10 с проверками.

(SeoNizator @ 28.10.2009, 18:32) *
Вот я, например, считаю ночного бдуна одной из самых лучших парсилок. (Правда, давно им игрался)
Есть чего не хватает, но как для бесплатной софтины - это на сегодня лучшее. ИМХО.
Поэтому, если делать коммерческий продукт - он должен переплюнуть бдуна на несколько метров wink.gif


Не слышал о таком, можно ссылочку? Постараюсь почерпнуть хорошие идеи.





rus3322, заявка принята
больше не принемаю

(ARTEM27 @ 28.10.2009, 21:00) *
ТС сделайте что бы Grabber делал базы по cms в частности DLE и накладывал водяные знаки на картинки!


Обязательно сделаю экспорт для DLE и в WP по API

А на счет картинок - я их даже не загружаю, я же тырю html. Поэтому, я не могу их обрабатывать.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SeoNizator
SeoNizator
сообщение 29.10.2009, 0:16; Ответить: SeoNizator
Сообщение #10


Новичок
*

Группа: User
Сообщений: 41
Регистрация: 29.3.2009
Из: Donbass
Поблагодарили: 12 раз
Репутация:   0  


(verych @ 28.10.2009, 20:53) *
Скармливаешь програмке один урл, а по остальным она гуляет, еще ей можно сказать на сколько кликов от заданного урла она может погрузиться

О! это дело. НО нужны шаблоны урлов. Иначе напарсит всякого мусора...

Не слышал о таком, можно ссылочку?

Ууу... это класика жанра wink.gif И не только в самой софтине, сколько в том... впрочем начинать знакомство нужно с прочтения поста тов. Ласто. И настоятельно рекомендую осилить комменты - там есть очень полезные.

Рекомендую пост к прочтению всем (да и сам блог гуру). Абстрагируясь от программы многие могут почерпнуть кое-что полезное.

А на счет картинок - я их даже не загружаю, я же тырю html. Поэтому, я не могу их обрабатывать.

А вот картинки нужны. Но опционально..


--------------------
Официальный дилер textKit. Консультирую, помогаю.
Строю мини-сетки буржблогов для заколачивания $$$
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Himba.ru - официальный топик партнерской программы
51 Himba_CPA 9701 11.12.2017, 20:38
автор: Himba_CPA
Открытая тема (нет новых ответов) [РЕКОМЕНДУЮ] >>>Тестирование Вашего сайта, сервера на устойчивость и уязвимость!
17 barbaddos 2333 11.12.2017, 16:57
автор: barbaddos
Открытая тема (нет новых ответов) Качественное тестирование Web сайтов
1 Smile3D 426 3.12.2017, 4:29
автор: moxtima
Открытая тема (нет новых ответов) Программы для выявления конкурентности поисковых запросов
14 Искра 1881 25.11.2017, 11:29
автор: RestrUkt
Открытая тема (нет новых ответов) Программы для создания баннера. Подробный обзор популярного софта
1st-finstep.ru - Заработок в сети и методы продвижения сайта
0 komarik_vlad 681 23.10.2017, 16:56
автор: komarik_vlad


 



RSS Текстовая версия Сейчас: 15.12.2017, 5:08
Дизайн