так а зачем там регистрироваться в таком случае?

leshii
Быстро сделал мониторинг всех,кто обращается к robots.txt .В базу сохраняется айпи,дата,Referer,юзер-агент,результат gethostbyaddr.
Думаю каталоги выдадут себя,их можно будет забанить,на других 2 сайтах такой же мониторинг,они не зареги в каталогах.
Напишу еще крон,который забанит всех кого нет в той базе из 2х сайтов(должны быть поисковики)

goshala,не сильно понял эту систему, но, допустим, это возможно "А можно robots.txt представить как php скрипт ,который в случае user_agent = Googlebot, Yandexbot.... выдаёт запрет,а в случае каталогов-не выдает" (хотя сильно смахивает на клоакинг, который сурово карается). Повторяю вопрос: а зачем? Нужны ли Вам 100500 ссылок непонятно откуда?

Есть 2 вариантау меня
1)Получить фильтр за клоакинг,за то что для гугла вежливо прошу не индексировать кучу ссылок(по юзер агент добавляю DIsallow /links.html)
2)Получить фильтр за ссылкопомойник.
Не пойму что страшнее
-----------------
ИМХО,лучше бан за клоакинг.Ссылкопомойник-для школьниц.Черное сео-путь для мужиков!

Т.е. есть 2 варианта и в обоих случаях светит фильтр... Бросьте монетку...
Кстати, если Вы для разных ПС определяете через robots различную индексацию - это не клоакинг.

if ( strstr($_SERVER['HTTP_USER_AGENT'], 'Yandex') ) { $bot='Yandex';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'Googlebot') ) {$bot='Google';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'Slurp') ) {$bot='Slurp';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'WebCrawler') ) {$bot='WebCrawler';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'ZyBorg') ) {$bot='ZyBorg';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'google') ) {$bot='Google';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'scooter') ) {$bot='AltaVista';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'stack') ) {$bot='Rambler';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'aport') ) {$bot='Aport';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'lycos') ) {$bot='Lycos';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'fast') ) {$bot='Fast Search';}
elseif ( strstr($_SERVER['HTTP_USER_AGENT'], 'rambler') ) {$bot='Rambler';}
То есть если поисковик-robots.txt один,если человек-другой.

Очень смешно:a1:

Если в двух случаях светит бан, не проще ли вообще не заниматься продвижением, а пойти например семечками торговать?

goshala,

Отличный способ! Вот только Вы запоздали лет на несколько.

Распарсил базу ссылок базы гомнокаталогов,где находится 1)имя хоста 2)ip адрес 3)gethostbyaddr-по результатам почти все находятся на общеизвестных хостингах.
608 записей -обращений к робот.txt ,сохранен айпи и те же данные.
315 айпи адресов совпадают с айпи из базы.
Для них буду выводить что они не забанены,для нормальных людей-нормальный robots.txt
По идее в гомно-базе Яндекса и хороших каталогов быть не должно.

---------- Сообщение добавлено 22.03.2012 в 14:36 ---------- Предыдущее сообщение размещено 21.03.2012 в 10:19 ----------

ПОка забаню только такие каталоги,liveinternet и yandeg.ru имеют ТИЦ 20 000 и 70 000 соответственно,требуют обратную ссылку на главной.С таким высоким ТИЦ от Яндекса можно получить санкции даже если нормально вычислить бота,так как он наверняка знает про их требования обр. ссылки.
Никто не знает где можно прогнать сайт после 1ps.ru(доски объявлений,закладки,другое).Какие нибудь нормальные сервисы для этого,которые для людей?
Мне подарили 150руб. купон на пополнение счёта хостинга Джино.Кому нибудь надо?Джино не пользуюсь могу просто так отдать

---------- Сообщение добавлено 23.03.2012 в 18:21 ---------- Предыдущее сообщение размещено 22.03.2012 в 13:36 ----------

ДЖИНО КУПОН 150 р. НАХАЛЯВУ ОТДАМ!!!
Посмотрел -вроде гугл более менее адекватную выдачу даёт по факту прогона сайта в разлиных досках ,соц. закладках.Насколько понял-очень сильный фактор-это конкуренция и тот человек,которому вы сайт делаете.
Если ниша позволяет быть конкурентноспособной-ваши дела в Интернете идут лучше.

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.