Помогите немного доработать скрипт

Сообщение сайта

(Сообщение закроется через 3 секунды)

Здравствуйте, гость (

| Вход | Регистрация )

SEO форум MaulTalk.com > Веб-строительство > Программная часть

Помогите немного доработать скрипт, сбор внутренних ссылок

Опции

Biznessman

Topic Starter сообщение

1.4.2013, 10:53; Ответить: Biznessman

Сообщение #1

Завсегдатай

Группа: Active User
Сообщений: 690
Регистрация: 22.7.2009
Поблагодарили: 188 раз
Репутация:

Здравствуйте!
Моя задача:
собрать все внутренние ссылки со списка URL.
Вот нашел скрипт, который собирает внешние ссылки, но в нем каждую страницу нужно вводить вручную.
Можно его как-то модифицировать, что бы вводить список URL и на выходе мы получали все внутренние ссылки со всего списка.
+ в результатах должны быть только ссылки (без анкоров).
Сам скрипт:

Развернуть/Свернуть

<html>
<head>
<title>links</title>
</head>
<body>
<h2>links</h2>
<?php

function site_copy($url){
$tmp0 = 'temp/site_copy0.php';
$tmp = 'temp/site_copy.php';
$rez = '';
$rez = @file_get_contents($url);
file_put_contents ($tmp0,$rez);
$rz = @file_get_contents($tmp0);
$rz = preg_replace ( "''si", "", $rz );
$rz = preg_replace ( "'<script(.+?)</script>'si", "", $rz );
$rz = preg_replace ( "'<style(.+?)</style>'si", "", $rz );
$rz = preg_replace ( "'<img(.+?)>'si","<img src='images/links.gif'>", $rz);
$rz = eregi_replace ( '"', '', $rz );
$rz = eregi_replace ( "'", "", $rz );
$rz = eregi_replace ( '=//', "=http://", $rz );
$rz = preg_replace ( "'<a(.+?)href'si", "<a href", $rz );
$rz = preg_replace ( "'<a href( +?)='si", "<a href=", $rz );
$rz = preg_replace ( "'<a href=( +?)'si", "<a href=", $rz );
$rz = preg_replace ( "'title(.+?)>'si", ">", $rz );
$rz = preg_replace ( "'target(.+?)>'si", ">", $rz );
file_put_contents ($tmp,$rz);
}

function inlinks($url){
$tmp = 'temp/site_copy.php';
$str=file_get_contents($tmp);
preg_match_all ( "'<a(.+?)>(.*?)</a>'si", $str, $links );
$rez=''; $nn=0;
for ($i=0; $i< count($links[0]); $i++)
{
if (substr_count ($links[1][$i],'//')==0)
{ //str_replace("\n",'',$pr);
$nn++;
$rez=$rez .$nn .' ' .$links[0][$i] ." \n" . substr($links[1][$i],6) . "\n<br>";
}
}
$rez='<br> Найдено ' .$nn .' внутренних ссылок<br><br>' .$rez;
return $rez;
}

?>

<form method="POST" id="form" name="form" action="" accept-charset="utf-8" >
Введите адрес сайта:<br>
<input type="text" name="url" id="url" value="" onclick="this.form.url.value=this.form.url.value.replace('http://', '');">
<input type="submit" name="go" value=" пуск " onclick="this.form.url.value=this.form.url.value.replace('http://', '');">
</form>

<?php
$url = 'http://' .$_REQUEST['url'];
if (($url!='') && isset($url)){
site_copy($url);
echo inlinks($url);
}
?>
<br><br>
</body>
</html>

АПД: Если у кого-то есть другое решение моей задачи - с удовольствием выслушаю.

Ответить с цитированием данного сообщения

kRicha kRicha 1.4.2013, 11:48; Сообщений: 933 Поблагодарили: 222 раза Репутация: 39 Просмотр профиля	1.4.2013, 11:48; Ответить: kRicha Сообщение #2
Завсегдатай Группа: Active User Сообщений: 933 Регистрация: 29.6.2010 Из: Киева Поблагодарили: 222 раза Репутация: 39	Biznessman, помогаю. Заменияете инпут на тексареа, вводите туда список адресов, эксполодом получаете массив адресов и форичем проходишь по всему архиву. Все. -------------------- необычная история украинского программиста Поблагодарили: (1) Biznessman

Max_Q

1.4.2013, 21:31; Ответить: Max_Q

Сообщение #3

Участник

Группа: User
Сообщений: 118
Регистрация: 13.11.2011
Поблагодарили: 46 раз
Репутация:

Biznessman, я так понимаю цель написать обычный скрипт-паук. Если так, то готовых решений уже предостаточно. Поищите в гуглу php crawler. В github'e их полно.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой

или обратитесь к любому из модераторов.

« Предыдущая тема · Программная часть · Следующая тема »

2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)

Пользователей: 0

Похожие темы

Тема	Ответов	Автор	Просмотров	Последний ответ
Продам скрипт rtb exchange suite - система перепродажи трафика dsp/ssp в реальном времени.	5	buypushplatform	4303	23.4.2024, 21:02 автор: 100ftd
Помогите вспомнить рекламного бота Телеграм для обмена рекламой	0	Mixatraider	732	21.2.2024, 23:42 автор: Mixatraider
Скрипт поисковика видео StrongTube	3	3josoft	1576	14.8.2023, 14:45 автор: 3josoft
Скрипт приема платежей p2p с карты на карту card2card Скрипт приема платежей p2p с карты на карту card2card	15	zladey1986	7844	26.3.2023, 8:54 автор: Palundra
Продам скрипт перевода постов и комментариев	4	Tutich	789	19.1.2023, 17:23 автор: Tutich

Режим отображения: Стандартный · Переключить на: Линейный · Переключить на: Древовидный

Подписка на тему · Сообщить другу · Версия для печати · Подписка на этот форум

Текстовая версия

Сейчас: 25.4.2024, 15:12

Дизайн