X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Существует ли такой скрипт?
kesn
kesn
Topic Starter сообщение 14.5.2012, 19:24; Ответить: kesn
Сообщение #1


Топовый постер
*******


Группа: Active User
Сообщений: 5090
Регистрация: 20.9.2008
Из: опринозин
Поблагодарили: 1984 раза
Репутация:   479  


Нужно проверить список урлов на наличие определенного текста

есть файл urls в нем несколько урлов
есть строка или слово
Нужно открыть каждый урл и проверить есть ли в нем строка, а потом сохранить эти урлы в файл успешные.txt?

Существует ли такой скрипт?


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
House
House
сообщение 14.5.2012, 19:55; Ответить: House
Сообщение #2


Завсегдатай
*****


Группа: Banned
Сообщений: 628
Регистрация: 2.11.2011
Из: Саранск
Поблагодарили: 154 раза
Репутация:   19  


Могу написать.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
webpavilion
webpavilion
сообщение 14.5.2012, 19:57; Ответить: webpavilion
Сообщение #3


сеошник на пенсии
*******

Группа: Active User
Сообщений: 2726
Регистрация: 28.4.2009
Из: МО
Поблагодарили: 1659 раз
Репутация:   171  


(kesn @ 14.5.2012, 19:24) *
Существует ли такой скрипт?

готовых не встречал 10 строк в bash wget+grep можно многопоточность прикрутить черех sed если много нужно парсить.


--------------------
Не ведитесь, cамопис это почти всегда плохо!

Делаю сайты на Drupal 7.x
(очень дорого)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kesn
kesn
Topic Starter сообщение 14.5.2012, 19:58; Ответить: kesn
Сообщение #4


Топовый постер
*******


Группа: Active User
Сообщений: 5090
Регистрация: 20.9.2008
Из: опринозин
Поблагодарили: 1984 раза
Репутация:   479  


House а по цене сколько?
webpavilion сколько я новых слов узнал biggrin.gif


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
webpavilion
webpavilion
сообщение 14.5.2012, 20:06; Ответить: webpavilion
Сообщение #5


сеошник на пенсии
*******

Группа: Active User
Сообщений: 2726
Регистрация: 28.4.2009
Из: МО
Поблагодарили: 1659 раз
Репутация:   171  


kesn, это я конечно не подумавши, с форума красноглазиков. если до завтра терпит напишу на 30% дешевле чем House.


--------------------
Не ведитесь, cамопис это почти всегда плохо!

Делаю сайты на Drupal 7.x
(очень дорого)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
House
House
сообщение 14.5.2012, 20:45; Ответить: House
Сообщение #6


Завсегдатай
*****


Группа: Banned
Сообщений: 628
Регистрация: 2.11.2011
Из: Саранск
Поблагодарили: 154 раза
Репутация:   19  


А я могу 300-400 потоков сделать ))
20 баксов, если нужно сделать такое.
файл1 - ссылки
файл2 - то что нужно искать
файл3 - сайты, где найдено то, что было в файл2

Напишу на python. Могу сделать с большим количеством потоков(до 400), но естественно нужен хороший интернет. На IHC.ru скрипт на питоне запускал, максимум получалось 120 потоков, а потом сервер посылал меня на х.

Т.е. webpavilion сделает за 14 баксов(20/100*70). Решать вам.


готовых не встречал 10 строк в bash wget+grep можно многопоточность прикрутить черех sed если много нужно парсить.

Не на тот форум попал smile.gif

wget - консольный загрузчик. Им можно сайты скачивать happy.gif.
bash - линуксовская оболочка чего-то.
grep - если не ошибаюсь, то regex.
sed - а с этим надо в гугл идти.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
webpavilion
webpavilion
сообщение 14.5.2012, 20:54; Ответить: webpavilion
Сообщение #7


сеошник на пенсии
*******

Группа: Active User
Сообщений: 2726
Регистрация: 28.4.2009
Из: МО
Поблагодарили: 1659 раз
Репутация:   171  


(House @ 14.5.2012, 20:45) *
webpavilion сделает за 14 баксов(20/100*70). Решать вам.

House, ничего личного, я не демпингую просто мне такая штука тоже пригодилась бы в хозяйстве - сообственно ей написанием сейчас и занят. оказывается нужен не скрипт а софтинка под win7, мое предложение не аутуально удачи вам в реализации.

Сообщение отредактировал webpavilion - 14.5.2012, 20:55


--------------------
Не ведитесь, cамопис это почти всегда плохо!

Делаю сайты на Drupal 7.x
(очень дорого)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dota
dota
сообщение 14.5.2012, 21:03; Ответить: dota
Сообщение #8


Топовый постер
*******


Группа: Active User
Сообщений: 4529
Регистрация: 1.10.2010
Из: СССР
Поблагодарили: 2575 раз
Репутация:   576  


(House @ 14.5.2012, 19:45) *
grep

Ищет заданное значение, в файле или на приеме по каналу.

(House @ 14.5.2012, 19:45) *
sed

заменяет слово или выражение в файле.

kesn, Прога не сложная, но возиться не охота biggrin.gif давно уже таким ручки не марал.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
simply_sash
simply_sash
сообщение 14.5.2012, 21:04; Ответить: simply_sash
Сообщение #9


Участник
***

Группа: User
Сообщений: 228
Регистрация: 26.8.2011
Поблагодарили: 94 раза
Репутация:   21  


(House @ 14.5.2012, 19:45) *
bash - линуксовская оболочка чего-то.

... которая позволяет выполнять bash-скрипты.
А еще bash-скрипты можно исполнять как cgi.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kesn
kesn
Topic Starter сообщение 15.5.2012, 0:25; Ответить: kesn
Сообщение #10


Топовый постер
*******


Группа: Active User
Сообщений: 5090
Регистрация: 20.9.2008
Из: опринозин
Поблагодарили: 1984 раза
Репутация:   479  


House Спасибо огромное, скрипт работает на ура, ах да еще раз спасибо за то что бесплатно сделали, очень приятно smile.gif


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыГде взять скрипт круговой индикатор выполнения
3 slavyn 454 14.12.2017, 22:55
автор: Caterpillar
Открытая тема (нет новых ответов) Сколько можно просить за такой аккаунт ВК?
28 qazex 5923 12.12.2017, 9:44
автор: Mikki
Открытая тема (нет новых ответов) Ищу скрипт новостного агрегатора
0 Cunningfox 478 27.11.2017, 21:17
автор: Cunningfox
Открытая тема (нет новых ответов) Поиск. Скрипт а-ля pikabu.
1 Упс 767 20.11.2017, 8:19
автор: codename65
Открытая тема (нет новых ответов) Посоветуйте скрипт доски объявлений
4 bbkd 836 11.11.2017, 11:59
автор: bbkd


 



RSS Текстовая версия Сейчас: 17.12.2017, 8:49
Дизайн