X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
> QWdleparser - сбор контента и постинг
Пуховой
Пуховой
Topic Starter сообщение 11.8.2010, 5:57; Ответить: Пуховой
Сообщение #1


Топовый постер
*******


Группа: Active User
Сообщений: 3675
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


Прошу не воспринимать серьезно, программа писалась за пару часов под утро "от нечего делать", чтобы мозг поработал немного.

Возможности:
- сбор информации с сайтов на двигателе DLE*
- обработка полученных данных - коррекция текста, ре-верстка, удаление лишних тэгов, ссылок, пробелов, символов и т.п. (функция несовершенна)
- многопоточный постинг полученных данных по xml-rpc протоколу (в wordpress, например)

* имеется возможность добывать контент с абсолютно любых сайтов, требуется только sitemap.xml в общепринятом формате и простой шаблон

Навскидку, за 3 минуты получился сайт foryandexdoorway.wordpress.com

Наглядно - страница на доноре | страница на блоге.

Пример шаблона для сайта: [url=http://www.antidot.ws/sitemap.xml][title=<title>(.*?) &raquo;][bodytext=<div id="news-id-\d{1,8}(.*?)<div class="quote">]. Как видим - все элементарно, программе достаточно одной строчки.

В базе программы пока только 1 сайт.

Скриншот программы



Скачать программу

P.s.: Если есть идеи по поводу создания на текущей неотработанной базе коммерческого продукта - велкам.


Поблагодарили: (5)
11
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
proekt-gaz
proekt-gaz
сообщение 11.8.2010, 6:44; Ответить: proekt-gaz
Сообщение #2


клоновод
******

Группа: Banned
Сообщений: 1294
Регистрация: 23.3.2010
Из: Ростов
Поблагодарили: 313 раз
Репутация:   63  


Интересная программа. Я так понял добавлять в конфиг можно несколько файлов для парсинга? В какой последовательности тогда будет работать программа?


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Пуховой
Пуховой
Topic Starter сообщение 11.8.2010, 6:53; Ответить: Пуховой
Сообщение #3


Топовый постер
*******


Группа: Active User
Сообщений: 3675
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


proekt-gaz, добавлять в файл базы можно несколько строчек-инструкций. При запуске парсинга программа работает по следующему принципу: если карт в базе меньше трех, достаем ссылки из всех, иначе достаем ссылки из трех случайных карт. На деле даже три карты могут дать до 50.000 ссылок на страницы для парсинга контента.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Smertnikcs
Smertnikcs
сообщение 11.8.2010, 7:50; Ответить: Smertnikcs
Сообщение #4


Seo - искусство раскрутки
*****


Группа: Active User
Сообщений: 644
Регистрация: 13.1.2010
Из: Kazakhstan, Almaty
Поблагодарили: 128 раз
Репутация:   23  


Спасибо за программу. Буду пробовать.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Пуховой
Пуховой
Topic Starter сообщение 11.8.2010, 15:53; Ответить: Пуховой
Сообщение #5


Топовый постер
*******


Группа: Active User
Сообщений: 3675
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


Кто-либо уже пробовал? В каку. сторону развивать?

?

?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
proekt-gaz
proekt-gaz
сообщение 11.8.2010, 16:41; Ответить: proekt-gaz
Сообщение #6


клоновод
******

Группа: Banned
Сообщений: 1294
Регистрация: 23.3.2010
Из: Ростов
Поблагодарили: 313 раз
Репутация:   63  


Я бы потестил, но увы, не на чем.


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Пуховой
Пуховой
Topic Starter сообщение 11.8.2010, 16:49; Ответить: Пуховой
Сообщение #7


Топовый постер
*******


Группа: Active User
Сообщений: 3675
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


Можно добавить несколько других CMS. Идей уже набросали, осталось реализовать.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
gangstar90
gangstar90
сообщение 12.8.2010, 17:41; Ответить: gangstar90
Сообщение #8


Doors not dead
******

Группа: Active User
Сообщений: 1080
Регистрация: 2.2.2009
Из: Котелок с 1000 летним стажем
Поблагодарили: 293 раза
Репутация:   44  


кул, час пару трампов на вп сделаю для доров, спасибо Пух


--------------------
Стабильный доход для сайтов ipad тематики!
Писать в лс для рассмотрения Вашего ресурса
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
monia
monia
сообщение 17.8.2010, 10:42; Ответить: monia
Сообщение #9


Новичок
*

Группа: Viewer
Сообщений: 6
Регистрация: 7.4.2010
Поблагодарили: 1 раз
Репутация:   0  


c WP пока не работает?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Пуховой
Пуховой
Topic Starter сообщение 17.8.2010, 10:51; Ответить: Пуховой
Сообщение #10


Топовый постер
*******


Группа: Active User
Сообщений: 3675
Регистрация: 8.10.2007
Поблагодарили: 877 раз
Репутация:   251  


Грабить можно с любых сайтов.

Постить - на любые, поддерживающие протокол xml-rpc (wordpress и десятка два других в том числе).
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Регистрация Вашего сайта (профиля,DLE сайты,подписи на форумах,постинг Тиц 10> , ПР 1>)
312 kaartes 112711 Сегодня, 12:07
автор: avega
Открытая тема (нет новых ответов) Достали копипастеры - воры контента
22 Webranger 3674 Сегодня, 2:33
автор: EconDude
Открытая тема (нет новых ответов) Ищу автора новостей - поиск, рерайт и постинг
2 eduarddis 293 Сегодня, 1:43
автор: eduarddis
Горячая тема (нет новых ответов) Выполню постинг крауд-ссылок на форумах
постинг - цены адекватные
50 Grinii 10671 18.5.2018, 15:20
автор: ksanf
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыA-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров.
184 Forbidden 115272 17.5.2018, 11:59
автор: AParser_Support


 



RSS Текстовая версия Сейчас: 22.5.2018, 14:18
Дизайн