X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Что за сервис как парсить сайты из ЯК?
Fabio1983
Fabio1983
Topic Starter сообщение 19.5.2013, 19:30; Ответить: Fabio1983
Сообщение #1


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


Добрый вечер!

Подскажите, есть сайты в ЯК

http://yaca.yandex.ru/yca/cat/Business/Construction/ 14198шт
http://yaca.yandex.ru/yca/cat/Private_Life/Housing/ 6798шт

Мне нужны все урлы в формате TXT, каждый урл на новой строчке.

Как можно напарсить? Или у кого есть скрипт и мне поможет в этом деле?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 21.5.2013, 13:12; Ответить: Fabio1983
Сообщение #2


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


актуально, нужны все урлы из двух рубрик.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 21.5.2013, 14:13; Ответить: medved112
Сообщение #3


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Яндекс не отдает больше 1к сайтов, на сколько я помню, поэтому придется парсить по подрубрикам.

Можно конечно выгрузить вот отсюда, но как видите не самый свежий вариант(хотя я выгружал для себя, практически все урлы присутствуют в заданной категории, но те, которые добавились с 2011 года отсутствуют конечно)

UPD: О, нашел скрипт, по подрубрикам парсите на здоровье

Сообщение отредактировал medved112 - 21.5.2013, 13:59


--------------------
фыр фыр


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 21.5.2013, 15:58; Ответить: Fabio1983
Сообщение #4


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


medved112,

не работает скриптик
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 21.5.2013, 16:08; Ответить: medved112
Сообщение #5


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Fabio1983, как же не работает.
Вот только что спарсил Business/Construction/Cottages/
Прикрепленный файл  new__2.txt ( 19,27 килобайт ) Кол-во скачиваний: 17


Заняло примерно 2 минуты


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fabio1983
Fabio1983
Topic Starter сообщение 22.5.2013, 10:45; Ответить: Fabio1983
Сообщение #6


Новичок
*

Группа: User
Сообщений: 38
Регистрация: 14.4.2013
Из: Железнодорожный
Поблагодарили: 1 раз
Репутация:   0  


medved112,

Я видимо попытался сразу всю каталог категория запарсить))
Подверждаю, всё работает!
Медвед молодед!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Makssss07
Makssss07
сообщение 22.5.2013, 11:47; Ответить: Makssss07
Сообщение #7


Завсегдатай
*****

Группа: Active User
Сообщений: 863
Регистрация: 17.5.2010
Из: Питер
Поблагодарили: 263 раза
Репутация:   53  


где то в недрах жесткого валяется десктопный скриптик на delphi именно этого назначения, могу поделиться если еще нужен


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.5.2013, 11:56; Ответить: medved112
Сообщение #8


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Makssss07, если рабочий, то чего бы и не поделиться wink.gif

Кстати, вот еще неплохой парсер, может дергать сайты из ЯК(и из выдачи тоже) по нужным ключевым словам.


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hamele0n
hamele0n
сообщение 23.5.2013, 9:56; Ответить: hamele0n
Сообщение #9


Новичок
*

Группа: Viewer
Сообщений: 11
Регистрация: 21.8.2010
Поблагодарили: 2 раза
Репутация:   0  


medved112, спасибо за скрипт, тоже искал, уже думал самому придеться писать скрипт
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
lordonx3
lordonx3
сообщение 24.5.2013, 0:59; Ответить: lordonx3
Сообщение #10


мошенник
******

Группа: Banned
Сообщений: 1073
Регистрация: 3.12.2011
Поблагодарили: 220 раз
Репутация:   58  


Парсер яндекс каталога - Есть еще один готовый вариант


--------------------
мошенник
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Как заработать новичку?
103 Emeralda 17449 Сегодня, 15:25
автор: vsemmoney
Горячая тема (нет новых ответов) Что лучше, фриланс, удаленка, или работа в офисе солидной компании?
92 Levizar 7456 Сегодня, 13:48
автор: Стэнли
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыSE Ranking – новый сервис для проверки позиций сайтов в поисковиках
171 seranking 157754 Сегодня, 13:26
автор: seranking
Горячая тема (нет новых ответов) Черный список обменников и как безопасно обменять валюту
137 Kurses 29485 Вчера, 17:24
автор: jack
Открытая тема (нет новых ответов) Как мошенники зарабатывают на прямых трансляциях в Instagram
Не ждите порно в инстаграм, его нет
1 PostBrigada 364 Вчера, 15:54
автор: Pingunio


 



RSS Текстовая версия Сейчас: 11.12.2017, 15:43
Дизайн