X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Массовая проверка ТИЦ и ПР, без прокси и банов в больших обьемах
oxgen
oxgen
Topic Starter сообщение 4.12.2011, 20:02; Ответить: oxgen
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 472
Регистрация: 21.6.2008
Из: Харьков
Поблагодарили: 97 раз
Репутация:   27  


Приветствую.

Была надобность проверить порядка 200,000 доменов на тиц\пр, но так и не нашел подходящего решения под такой обьем, где бы не требовалось платить или использовать прокси. В связи с этим написал для себя софтинку помогающую в этом.
Собственно решил поделиться, думаю кому-то пригодится.



Программа многопоточна (до 50 потоков), проверяет скормленный ей список сайтов (ссылку на главную страницу или просто домен вида site.ru) после чего сохраняется в .txt или .csv файл. Программа не использует сторонние сервисы и прокси.
Есть возможность фильтрации (в файл будут записываться только подходящие по фильтру домены).

У меня скорость на 50 потоках была порядка 800-1000 доменов в минуту, что довольно неплохой показатель.

Ссылка на загрузку: программа для массовой проверки ТИЦ и ПР.

p.s. Программа не претендует на красоту и изящество, исключительно техническое решение.
p.p.s. Для работы нужен FrameWork 4


--------------------
Нет времени на рутинную работу? Нужен скрипт или программа? Закажи автоматизацию!


Поблагодарили: (1)
3
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dota
dota
сообщение 4.12.2011, 20:08; Ответить: dota
Сообщение #2


Топовый постер
*******


Группа: Active User
Сообщений: 4528
Регистрация: 1.10.2010
Из: СССР
Поблагодарили: 2575 раз
Репутация:   576  


Кнопки по моему перепутаны местами.
Нет кнопки обнулить, сбросить добавленные сайты.
Не пойму куда сохраняется результат.
Плюс из 7 проверенных на одном тиц 0 определило, хотя там 40

Сообщение отредактировал dota - 4.12.2011, 20:12


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
oxgen
oxgen
Topic Starter сообщение 4.12.2011, 20:48; Ответить: oxgen
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 472
Регистрация: 21.6.2008
Из: Харьков
Поблагодарили: 97 раз
Репутация:   27  


Результат сохраняется в файл checked.txt либо checked.csv . Обнуление списка сайтов действительно не предусмотрел, добавлю.
Скиньте в личку список где неверно определило ТИц (в том формате что программе кормили).

разобрались, на сервере обновил.


--------------------
Нет времени на рутинную работу? Нужен скрипт или программа? Закажи автоматизацию!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
proekt-gaz
proekt-gaz
сообщение 4.12.2011, 21:10; Ответить: proekt-gaz
Сообщение #4


Бывший
******

Группа: Active User
Сообщений: 1294
Регистрация: 23.3.2010
Из: Ростов
Поблагодарили: 313 раз
Репутация:   63  


Классная программа! Тоже долго искал подобную. Если не секрет, то за счет чего работате без прокси? Бан IP возможен?
PS: Неправильно определяет ТИЦ если в программу загрузить не голый домен, а ссылку вида _http://домен.ru/registration/

Сообщение отредактировал proekt-gaz - 4.12.2011, 21:12


--------------------
Программа раскрутки
Бесплатное увеличение посещаемости
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
oxgen
oxgen
Topic Starter сообщение 4.12.2011, 22:28; Ответить: oxgen
Сообщение #5


Бывалый
****

Группа: User
Сообщений: 472
Регистрация: 21.6.2008
Из: Харьков
Поблагодарили: 97 раз
Репутация:   27  


проверяет скормленный ей список сайтов (ссылку на главную страницу или просто домен вида site.ru)

Я писал об этом в первом посте.


--------------------
Нет времени на рутинную работу? Нужен скрипт или программа? Закажи автоматизацию!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Svictor
Svictor
сообщение 5.12.2011, 8:07; Ответить: Svictor
Сообщение #6


Бывалый
****

Группа: User
Сообщений: 303
Регистрация: 30.1.2009
Из: Оренбург
Поблагодарили: 107 раз
Репутация:   20  


Отчет VirusTotal


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
oxgen
oxgen
Topic Starter сообщение 5.12.2011, 10:29; Ответить: oxgen
Сообщение #7


Бывалый
****

Группа: User
Сообщений: 472
Регистрация: 21.6.2008
Из: Харьков
Поблагодарили: 97 раз
Репутация:   27  


(Svictor @ 5.12.2011, 7:07) *
Отчет VirusTotal


Вы серьезно думаете что я решил всех протроянить?)
В .exe файле код обфусцирован, возможн этот неизвестный мне антивирусник не может его разобрать.


--------------------
Нет времени на рутинную работу? Нужен скрипт или программа? Закажи автоматизацию!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
minutkin
minutkin
сообщение 6.12.2011, 0:42; Ответить: minutkin
Сообщение #8


Участник
***

Группа: User
Сообщений: 151
Регистрация: 27.9.2010
Поблагодарили: 16 раз
Репутация:   8  


oxgen скажите будет обновление где можно будет любую страницу сайта скормить и получить реальный ТИЦ?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
oxgen
oxgen
Topic Starter сообщение 6.12.2011, 1:50; Ответить: oxgen
Сообщение #9


Бывалый
****

Группа: User
Сообщений: 472
Регистрация: 21.6.2008
Из: Харьков
Поблагодарили: 97 раз
Репутация:   27  


(minutkin @ 5.12.2011, 23:42) *
oxgen скажите будет обновление где можно будет любую страницу сайта скормить и получить реальный ТИЦ?


Если я правильно вас понимаю, то нужно что б ссылку вида: http://theprogrammer.ru/category/babah.html переводило в theprogrammer.ru и получало значение тиц\пр, верно?


- - -
Обновил программу.
Изменения:
- появилась кнопка "Очистить домены и статистику", что делает думаю понятно
- программа "кушает" любые ссылки и приводит их к виду site.ru, так что теперь можно смело проверять свой списки профилей\закладок и прочую полезную ссылочную кучу.

Ссылка на загрузку все таже что и в первом посте.


--------------------
Нет времени на рутинную работу? Нужен скрипт или программа? Закажи автоматизацию!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dimalis
dimalis
сообщение 8.12.2011, 12:33; Ответить: dimalis
Сообщение #10


Бывалый
****

Группа: User
Сообщений: 440
Регистрация: 20.3.2011
Поблагодарили: 174 раза
Репутация:   30  


(oxgen @ 6.12.2011, 0:50) *
программа "кушает" любые ссылки и приводит их к виду site.ru

Полезная вещь, но интересней другое. Например, есть сайт, у которого морда имеет PR=1, а PR внутренней страницы равен 3. Я хочу скормить Вашей проге ссылку на внутреннюю страницу и после чеканья увидеть PR=3, а не PR=1. Можно такое реализовать?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлы11 отличных новостных сайтов с ТИЦ до 475
Подходят разные тематики
26 kater1 4331 Сегодня, 11:30
автор: kater1
Горячая тема (нет новых ответов) проверка уникальности
101 galaker 6364 Вчера, 23:35
автор: pomikop
Горячая тема (нет новых ответов) Вечные ссылки недорого 300+ реальных СДЛ тИЦ 10-750
34 Advelink 23499 Вчера, 23:19
автор: Advelink
Открытая тема (нет новых ответов) Загнивающий Запад, загнивающее SEO и поднятие тИЦ в поисковиках
Рассуждения о глобальных тенденциях в SEO
16 kiber_ua 1437 9.12.2017, 23:50
автор: kievsex
Открытая тема (нет новых ответов) Размещу Вашу статью с ссылкой на сайте с Тиц 50 навсегда
11 vyacheslav333 1282 9.12.2017, 22:16
автор: Мамай


 



RSS Текстовая версия Сейчас: 11.12.2017, 15:24
Дизайн