X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Как найти сайт/блог закрытый от инедксации, ...всё о халявном контенте... а вдруг?
Sleepless
Sleepless
Topic Starter сообщение 15.8.2014, 21:51; Ответить: Sleepless
Сообщение #1


Новичок
*

Группа: User
Сообщений: 49
Регистрация: 2.4.2013
Поблагодарили: 3 раза
Репутация:   0  


...всё о халявном контенте... а вдруг?

Много где пишут что можно брать уник. контент из сайтов/блогов/групп социальных закрытых от индексации. Где можно найти такое чудо? как искать?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
arturios
arturios
сообщение 15.8.2014, 22:03; Ответить: arturios
Сообщение #2


Старожил
******

Группа: Super Moderator
Сообщений: 1818
Регистрация: 16.10.2012
Из: Москва
Поблагодарили: 1341 раз
Репутация:   80  


Ну зачем нам конкуренты то???
Да есть такая тема.. Но делиться с вами, зачем?


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
topsmiling
topsmiling
сообщение 15.8.2014, 22:07; Ответить: topsmiling
Сообщение #3


ёёёёёёёёё ӭ
******

Группа: Active User
Сообщений: 1298
Регистрация: 6.3.2011
Из: ★звёзд★
Поблагодарили: 359 раз
Репутация:   97  


Если вдруг кто окажется таким добрым мне в личку тоже кидайте :D


--------------------
.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Virus_07
Virus_07
сообщение 15.8.2014, 22:10; Ответить: Virus_07
Сообщение #4


Онлайн
******


Группа: Active User
Сообщений: 1479
Регистрация: 26.4.2010
Из: Наночастиц
Поблагодарили: 571 раз
Репутация:   82  


А причм тут этот раздел?! В оффтоп или прочее.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
makedonskiy
makedonskiy
сообщение 15.8.2014, 22:22; Ответить: makedonskiy
Сообщение #5


Частый гость
**

Группа: User
Сообщений: 75
Регистрация: 31.1.2014
Поблагодарили: 23 раза
Репутация:   4  


Берем список доменов (например можно взять RU, SU, РФ, благо в паблике есть базы), а дальше чекаем http://domen.ru/robots.txt на предмет наличия строки
Код
User-agent: *
Disallow: /


Если нужен такой скрипт, а конкретно многопоточный серверный вариант, пишите мне. Контакты указаны в профиле и в теме, которая находится в подписи.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал makedonskiy - 15.8.2014, 22:25
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыКак носить смартфоны диагональю 5.5 - 6.4 дюйма?
42 Room 5121 Сегодня, 13:36
автор: wertu
Открытая тема (нет новых ответов) Как защитить свои данные в общественном Wi-Fi?
7 unazekoff 291 Сегодня, 13:24
автор: alxpn
Открытая тема (нет новых ответов) Где можно найти хорошего копирайтера?
10 megi 1009 Сегодня, 13:23
автор: Halcy0n
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыПрошу оценить мой сайт
Историческая тематика
22 OmarSK 2735 Сегодня, 13:22
автор: Halcy0n
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыПопинайте сайт
19 yanat 2512 Сегодня, 12:27
автор: nikolay_web


 



RSS Текстовая версия Сейчас: 23.5.2018, 17:02
Дизайн