[X] Помощник

[ParavoZ Topic Starter]

<?php
$vip = file_get_contents("http://lenta.ru/news/2010/07/30/"); // 
$n = preg_match_all('!<span class=title><a href=(.*)>.*</a></span></p>!i', $vip, $result);
if($n)
{
for($a=0;$a<$n;$a++)
{
$page = file_get_contents("http://lenta.ru".$result[1][$a]);
$page = preg_replace("!<a.*>!sU", " " , $page);
$page = preg_replace("!</a>!sU", " " , $page);
$regex = preg_match_all('!<H2>(.*)</H2>.*</TABLE>(.*)<P class=links>!isU', $page, $itog);
if($regex)
{

echo $itog[1][0].'<br>';
echo $itog[2][0].'<br>';
};
};

};
?>

с 1 парсинга - примерно 178 килобайт текстовки качественного новостного копипаста, который не парсился особо ранее.


Что нужно менять в скрипте:

$vip = file_get_contents("http://lenta.ru/news/2010/07/30/"); //

меняем урл http://lenta.ru/news/2010/07/30/ на страницы вида

http://lenta.ru/news/2010/07/15/ - парсим все новости 15 числа.

http://lenta.ru/sport/2010/07/28/ - парсим все новости спортивного раздела за 28 июля.

и так далее.




use.

[Lilac]

Отличная работа, спасибо

[REGNET]

Можно сделать что б через textkit разбивать возможно было статьи, для дальнейшей его публикации?!

[Charon]

отличная штуковина для сателитов)

Только на себя домены для сателитов не оформляйте. Вредно для здоровья )

[Bender]

Вы бы хоть задержку сделали или ботом претворились через curl для приличия

Сообщение отредактировал Bender - 21.10.2010, 22:30

[thoth666]

Только на себя домены для сателитов не оформляйте. Вредно для здоровья )

если не присваивать материалы, то все ок:

_http://www.lenta.ru/info/licence.htm

Все материалы, авторские права на которые принадлежат Lenta.Ru, могут быть воспроизведены в любых средствах массовой информации, на серверах сети Интернет или на любых иных носителях без каких-либо ограничений по объему и срокам публикации. Это разрешение в равной степени распространяется на газеты, журналы, радиостанции, телеканалы, сайты и страницы сети Интернет. Единственным условием перепечатки и ретрансляции является ссылка на первоисточник. Никакого предварительного согласия на перепечатку со стороны издателей или авторов Lenta.Ru не требуется.

[ulitka]

для сателлитов самое оно) спасибо!

[donald_666]

вот я как раз это и искал, а то мне както друг написал что то типо грабера с ленты но он уже устарел. спасибо.

[dqpb]

Разметку на ленте поменяют и все к чертям.

[kingboss]

интересно (потестим) !!!

[CaMoPeZzz]

Прикрутил к нему шаблон новостей для Zebrum Lite и всё ваще супер.
Парсю на локалхосте, потом на хостинг, 100 сайтов примерно за час выходит.