X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Как найти сайт/блог закрытый от инедксации, ...всё о халявном контенте... а вдруг?
Sleepless
Sleepless
Topic Starter сообщение 15.8.2014, 21:51; Ответить: Sleepless
Сообщение #1


Новичок
*

Группа: User
Сообщений: 49
Регистрация: 2.4.2013
Поблагодарили: 3 раза
Репутация:   0  


...всё о халявном контенте... а вдруг?

Много где пишут что можно брать уник. контент из сайтов/блогов/групп социальных закрытых от индексации. Где можно найти такое чудо? как искать?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
arturios
arturios
сообщение 15.8.2014, 22:03; Ответить: arturios
Сообщение #2


JavaSE
******

Группа: Super Moderator
Сообщений: 1803
Регистрация: 16.10.2012
Из: Москва
Поблагодарили: 1296 раз
Репутация:   78  


Ну зачем нам конкуренты то???
Да есть такая тема.. Но делиться с вами, зачем?


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
topsmiling
topsmiling
сообщение 15.8.2014, 22:07; Ответить: topsmiling
Сообщение #3


ёёёёёёёёё ӭ
******

Группа: Active User
Сообщений: 1298
Регистрация: 6.3.2011
Из: ★звёзд★
Поблагодарили: 359 раз
Репутация:   97  


Если вдруг кто окажется таким добрым мне в личку тоже кидайте :D


--------------------
.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Virus_07
Virus_07
сообщение 15.8.2014, 22:10; Ответить: Virus_07
Сообщение #4


Онлайн
******


Группа: Active User
Сообщений: 1364
Регистрация: 26.4.2010
Из: Наночастиц
Поблагодарили: 537 раз
Репутация:   80  


А причм тут этот раздел?! В оффтоп или прочее.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
makedonskiy
makedonskiy
сообщение 15.8.2014, 22:22; Ответить: makedonskiy
Сообщение #5


Частый гость
**

Группа: User
Сообщений: 75
Регистрация: 31.1.2014
Поблагодарили: 23 раза
Репутация:   4  


Берем список доменов (например можно взять RU, SU, РФ, благо в паблике есть базы), а дальше чекаем http://domen.ru/robots.txt на предмет наличия строки
Код
User-agent: *
Disallow: /


Если нужен такой скрипт, а конкретно многопоточный серверный вариант, пишите мне. Контакты указаны в профиле и в теме, которая находится в подписи.

Сообщение отредактировал makedonskiy - 15.8.2014, 22:25
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Как поднять доверие к сайту?
3 fair_exchange 323 Сегодня, 17:12
автор: regem
Открытая тема (нет новых ответов) Попинайте сайт
3 yanat 493 Сегодня, 16:23
автор: yanat
Открытая тема (нет новых ответов) Нужен новостник на сайт
Требуется новостник для сотрудничества
4 opanas 736 Сегодня, 13:40
автор: opanas
Открытая тема (нет новых ответов) Как мошенники зарабатывают на прямых трансляциях в Instagram
Не ждите порно в инстаграм, его нет
10 PostBrigada 1133 Вчера, 22:40
автор: JOHNY
Открытая тема (нет новых ответов) Маленький кейс как сделать много почтовых ящиков в Gmail
Один аккаунт = много ящиков
1 PostBrigada 517 Вчера, 21:34
автор: Pingunio


 



RSS Текстовая версия Сейчас: 16.12.2017, 17:32
Дизайн