Помощник
 |
Сообщение сайта
|
 Запрет индексации сайта в Y/G |
Neusweb
|
Сообщение
#1
|
||
|
Участник  
 Группа: User Сообщений: 118 Регистрация: 30.8.2011 Поблагодарили: 11 раз Репутация:  1 
 |
|
||
 |
|
||
mansursape
|
 5.11.2011, 21:37;
Ответить: mansursape
Сообщение
#2
|
|
Частый гость Группа: User Сообщений: 80 Регистрация: 31.10.2011 Из: MSK-TAS-BRD Поблагодарили: 6 раз Репутация: 0
|
disallow: *
-------------------- |
|
|
|
|
Neusweb
|
Сообщение
#3
|
|
Участник
Группа: User Сообщений: 118 Регистрация: 30.8.2011 Поблагодарили: 11 раз Репутация: 1
|
Спасибо, надеюсь поможет)
А то гугл уже достал, сайт ставишь на поддомене, настраиваешь, а он уже пол контента проиндексирует)) |
|
|
|
|
incentral
|
1.12.2011, 1:54;
Ответить: incentral
Сообщение
#4
|
 Участник Группа: User Сообщений: 154 Регистрация: 29.11.2011 Из: Армения Поблагодарили: 10 раз Репутация: 6
|
(Neusweb @ 5.11.2011, 21:19)  Создете файл под названием robots.txt и в нем пишете User-Agent: * Disallow: / и пвихиваете в корневую ! P.S. User-Agent: * - означает все поисковые системы Disallow: / - означает запретить все подряд -------------------- |
|
|
|
|
WMZ
|
1.12.2011, 3:26;
Ответить: WMZ
Сообщение
#5
|
 Завсегдатай Группа: Active User Сообщений: 711 Регистрация: 11.7.2011 Поблагодарили: 252 раза Репутация: 53
|
(incentral @ 30.11.2011, 23:54) User-Agent: * Disallow: / для Яндекса я бы отдельно прописал -------------------- |
|
|
|
|
panjabi
|
18.12.2011, 0:59;
Ответить: panjabi
Сообщение
#6
|
|
Новичок Группа: Banned Сообщений: 43 Регистрация: 8.12.2011 Поблагодарили: 7 раз Репутация: -2
|
Напишите лучше запрет для каждой ПС, так как оны любят когда к ним по имени обращаються
|
|
|
|
|
yukdima
|
19.12.2011, 23:46;
Ответить: yukdima
Сообщение
#7
|
 клоновод Группа: Banned Сообщений: 149 Регистрация: 24.8.2011 Из: Рублёвка=) Поблагодарили: 14 раз Репутация: 0
|
Отпишите
User-Agent: * Disallow: / для каждой из посковых систем. P.S Тс борется с тем, что его индексируют поисковые системы, а ему это не нужно. А мы наоборот.. имхо 
-------------------- |
|
|
|
|
AdrianNight
|
20.12.2011, 13:41;
Ответить: AdrianNight
Сообщение
#8
|
 Частый гость Группа: User Сообщений: 95 Регистрация: 7.4.2011 Из: Санкт-Петербург Поблагодарили: 8 раз Репутация: 1
|
Хм, без разницы, отдельно для яндекса вы пропишите, или для всех разом. Если закрыли от индексации, то никто не проиндексирует) Так что того что вам написали, будет вполне достаточно, и не надо париться отдельно для каждого писать)
-------------------- |
|
|
|
|
Juror
|
21.12.2011, 0:02;
Ответить: Juror
Сообщение
#9
|
|
Новичок Группа: User Сообщений: 19 Регистрация: 28.8.2010 Поблагодарили: 4 раза Репутация: 1
|
(Neusweb @ 5.11.2011, 20:19) Помогите, что то не могу понять, как закрыть сайты от индексации в Яндексе и гугле. Если отвечать БУКВАЛЬНО на Ваш вопрос и запрет нужен только для Яндекса и Гугла, то роботс.тхт должен содержать следующие строки: #Для бота Yandex User-agent: Yandex Disallow: / # #Для бота Google User-agent: Googlebot Disallow: / # #Для остальных ботов User-agent: * Allow: / Кроме robots.txt запрет индексации можно провести с помощью специального мета-тега, размещенного в HTML коде страницы: - для запрета индексации всеми ботами пропишите <META NAME=“ROBOTS” CONTENT=“NOINDEX, NOFOLLOW”> - если хотите запретить только для Гугла: <META NAME=“GOOGLEBOT” CONTENT=“NOINDEX, NOFOLLOW”> - Можно еще разрешить роботам индексировать страницу, запретив при этом переходить по внешним ссылкам: <META NAME=“ROBOTS” CONTENT=“NOFOLLOW”> NB. Учтите. При использовании мета-тегов запреты индексации будут действовать определенное время. Точно указать не могу (не помню) но из индекса Гугла страницы с таким кодом будут исключены на полгода (180 дней), при этом неважно удалите ли Вы файл robots.txt или метатеги после обработки запроса. Более подробно можете почитать здесь. ЗЫ. Прописывать в роботс.тхт отдельные правила для робота каждой ПС или "не париться" и прописать одно правило для всех - решайте сами. Сторонников и противников обеих методов более чем достаточно. Я - всегда прописываю для Яндекса правила robots.txt отдельно. Сообщение отредактировал Juror - 21.12.2011, 0:09 |
|
|
|
|
mirgorod
|
17.1.2012, 21:24;
Ответить: mirgorod
Сообщение
#10
|
|
Новичок Группа: User Сообщений: 27 Регистрация: 14.1.2012 Поблагодарили: 2 раза Репутация: -2
|
по личному опыту могу сказать, что всё ненужное я заношу в robots.txt и примерно через 1-2 недели ненужное перестаёт индексироваться.
-------------------- |
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
 Быстрая индексация страниц сайта и обратных ссылок - 2Index |
38 | 2Index | 6617 | Вчера, 12:56 автор: 2Index |
 |
Какой % отказов нормален для сайта? | 11 | Aloof | 2811 | 16.4.2024, 12:48 автор: diviner99 |
|
SiteAnalyzer - бесплатная программа для аудита и анализа сайта |
77 | Chaser | 74210 | 9.4.2024, 11:36 автор: Chaser |
|
Нужен кодер, чтобы пофиксить ошибку Wordpress после переноса сайта | 0 | Alex-777 | 842 | 7.4.2024, 18:05 автор: Alex-777 |
|
Продвижение молодого сайта | 30 | maxmer | 6574 | 26.3.2024, 21:49 автор: c4p1t4l15t |
|
Текстовая версия | Сейчас: 19.4.2024, 6:23 |
