X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Что за сервис как парсить сайты из ЯК?
Fabio1983
Fabio1983
Topic Starter сообщение 19.5.2013, 19:30; Ответить: Fabio1983
Сообщение #1


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


Добрый вечер!

Подскажите, есть сайты в ЯК

http://yaca.yandex.ru/yca/cat/Business/Construction/ 14198шт
http://yaca.yandex.ru/yca/cat/Private_Life/Housing/ 6798шт

Мне нужны все урлы в формате TXT, каждый урл на новой строчке.

Как можно напарсить? Или у кого есть скрипт и мне поможет в этом деле?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 21.5.2013, 13:12; Ответить: Fabio1983
Сообщение #2


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


актуально, нужны все урлы из двух рубрик.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 21.5.2013, 14:13; Ответить: medved112
Сообщение #3


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Яндекс не отдает больше 1к сайтов, на сколько я помню, поэтому придется парсить по подрубрикам.

Можно конечно выгрузить вот отсюда, но как видите не самый свежий вариант(хотя я выгружал для себя, практически все урлы присутствуют в заданной категории, но те, которые добавились с 2011 года отсутствуют конечно)

UPD: О, нашел скрипт, по подрубрикам парсите на здоровье

Сообщение отредактировал medved112 - 21.5.2013, 13:59


--------------------
фыр фыр


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 21.5.2013, 15:58; Ответить: Fabio1983
Сообщение #4


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


medved112,

не работает скриптик
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 21.5.2013, 16:08; Ответить: medved112
Сообщение #5


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Fabio1983, как же не работает.
Вот только что спарсил Business/Construction/Cottages/
Прикрепленный файл  new__2.txt ( 19,27 килобайт ) Кол-во скачиваний: 17


Заняло примерно 2 минуты


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 22.5.2013, 10:45; Ответить: Fabio1983
Сообщение #6


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


medved112,

Я видимо попытался сразу всю каталог категория запарсить))
Подверждаю, всё работает!
Медвед молодед!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Makssss07
Makssss07
сообщение 22.5.2013, 11:47; Ответить: Makssss07
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 863
Регистрация: 17.5.2010
Из: Питер
Поблагодарили: 263 раза
Репутация:   53  


где то в недрах жесткого валяется десктопный скриптик на delphi именно этого назначения, могу поделиться если еще нужен


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.5.2013, 11:56; Ответить: medved112
Сообщение #8


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Makssss07, если рабочий, то чего бы и не поделиться wink.gif

Кстати, вот еще неплохой парсер, может дергать сайты из ЯК(и из выдачи тоже) по нужным ключевым словам.


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hamele0n
hamele0n
сообщение 23.5.2013, 9:56; Ответить: hamele0n
Сообщение #9


Новичок
*

Группа: Viewer
Сообщений: 11
Регистрация: 21.8.2010
Поблагодарили: 2 раза
Репутация:   0  


medved112, спасибо за скрипт, тоже искал, уже думал самому придеться писать скрипт
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
lordonx3
lordonx3
сообщение 24.5.2013, 0:59; Ответить: lordonx3
Сообщение #10


мошенник
******

Группа: Banned
Сообщений: 1073
Регистрация: 3.12.2011
Поблагодарили: 220 раз
Репутация:   58  


Парсер яндекс каталога - Есть еще один готовый вариант

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
мошенник
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Американку в автосалоне заставили доказать, что она не робот
7 seostock 490 Сегодня, 15:24
автор: wertu
Открытая тема (нет новых ответов) Как закачать файлы на фтп прямо из другого фтп?
Сабж
1 stixia007 316 Сегодня, 15:22
автор: wertu
Открытая тема (нет новых ответов) Как защитить свои данные в общественном Wi-Fi?
9 unazekoff 337 Сегодня, 10:22
автор: spomoni
Открытая тема (нет новых ответов) Как получить от своей группы Вконтакте максимум?
6 VilD 1505 Вчера, 15:31
автор: laser
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыПошив одежды - что не так с сайтом ?
69 bridge8 7497 Вчера, 14:42
автор: про100та


 



RSS Текстовая версия Сейчас: 25.5.2018, 19:26
Дизайн