X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Запрет индексации сайта в Y/G
Neusweb
Neusweb
Topic Starter сообщение 5.11.2011, 21:19; Ответить: Neusweb
Сообщение #1


Участник
***


Группа: User
Сообщений: 118
Регистрация: 30.8.2011
Поблагодарили: 11 раз
Репутация:   1  


Помогите, что то не могу понять, как закрыть сайты от индексации в Яндексе и гугле.
Сайты на движке - ДЛЕ.
Читал про закрытие папки - но не понял как.
Закрытие - через роботс.тхт
Заранее спасибо!
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
mansursape
mansursape
сообщение 5.11.2011, 21:37; Ответить: mansursape
Сообщение #2


Частый гость
**

Группа: User
Сообщений: 80
Регистрация: 31.10.2011
Из: MSK-TAS-BRD
Поблагодарили: 6 раз
Репутация:   0  


disallow: *


--------------------
Мобильный трафик конвертим здесь - Хостинг
Выслушаю предложения на aviatic.ru
Премиальная дебетовая карта для фрилансера.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Neusweb
Neusweb
Topic Starter сообщение 5.11.2011, 21:41; Ответить: Neusweb
Сообщение #3


Участник
***


Группа: User
Сообщений: 118
Регистрация: 30.8.2011
Поблагодарили: 11 раз
Репутация:   1  


Спасибо, надеюсь поможет)
А то гугл уже достал, сайт ставишь на поддомене, настраиваешь, а он уже пол контента проиндексирует))
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
incentral
incentral
сообщение 1.12.2011, 1:54; Ответить: incentral
Сообщение #4


Участник
***

Группа: User
Сообщений: 142
Регистрация: 29.11.2011
Из: Армения
Поблагодарили: 8 раз
Репутация:   6  


(Neusweb @ 5.11.2011, 21:19) *


Создете файл под названием robots.txt и в нем пишете

User-Agent: *
Disallow: /

и пвихиваете в корневую !

P.S.
User-Agent: * - означает все поисковые системы
Disallow: / - означает запретить все подряд


--------------------
Услуги по Изготовлению сайтов Форум ветка - Incentral Web Studio
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
WMZ
WMZ
сообщение 1.12.2011, 3:26; Ответить: WMZ
Сообщение #5


Завсегдатай
*****

Группа: Active User
Сообщений: 711
Регистрация: 11.7.2011
Поблагодарили: 252 раза
Репутация:   53  


(incentral @ 30.11.2011, 23:54) *
User-Agent: *
Disallow: /

для Яндекса я бы отдельно прописал


--------------------
ТОП Вебмастера зарабатывают ТУТ
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
panjabi
panjabi
сообщение 18.12.2011, 0:59; Ответить: panjabi
Сообщение #6


Новичок
*

Группа: Banned
Сообщений: 43
Регистрация: 8.12.2011
Поблагодарили: 7 раз
Репутация:   -2  


Напишите лучше запрет для каждой ПС, так как оны любят когда к ним по имени обращаються
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
yukdima
yukdima
сообщение 19.12.2011, 23:46; Ответить: yukdima
Сообщение #7


клоновод
***

Группа: Banned
Сообщений: 149
Регистрация: 24.8.2011
Из: Рублёвка=)
Поблагодарили: 14 раз
Репутация:   0  


Отпишите
User-Agent: *
Disallow: /

для каждой из посковых систем.
P.S Тс борется с тем, что его индексируют поисковые системы, а ему это не нужно. А мы наоборот.. имхо biggrin.gif


--------------------
клоновод
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
AdrianNight
AdrianNight
сообщение 20.12.2011, 13:41; Ответить: AdrianNight
Сообщение #8


Частый гость
**

Группа: User
Сообщений: 95
Регистрация: 7.4.2011
Из: Санкт-Петербург
Поблагодарили: 8 раз
Репутация:   1  


Хм, без разницы, отдельно для яндекса вы пропишите, или для всех разом. Если закрыли от индексации, то никто не проиндексирует) Так что того что вам написали, будет вполне достаточно, и не надо париться отдельно для каждого писать)


--------------------
FunDay CLUB - Информационно-новостной портал!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Juror
Juror
сообщение 21.12.2011, 0:02; Ответить: Juror
Сообщение #9


Новичок
*

Группа: User
Сообщений: 19
Регистрация: 28.8.2010
Поблагодарили: 4 раза
Репутация:   1  


(Neusweb @ 5.11.2011, 20:19) *
Помогите, что то не могу понять, как закрыть сайты от индексации в Яндексе и гугле.

Если отвечать БУКВАЛЬНО на Ваш вопрос и запрет нужен только для Яндекса и Гугла, то роботс.тхт должен содержать следующие строки:
#Для бота  Yandex
User-agent: Yandex
Disallow: /

#
#Для бота  Google
User-agent: Googlebot
Disallow: /
#

#Для остальных ботов
User-agent: *
Allow: /

Кроме robots.txt запрет индексации можно провести с помощью специального мета-тега, размещенного в HTML коде страницы:
- для запрета индексации всеми ботами пропишите
<META NAME=“ROBOTS” CONTENT=“NOINDEX, NOFOLLOW”>

- если хотите запретить только для Гугла:
<META NAME=“GOOGLEBOT” CONTENT=“NOINDEX, NOFOLLOW”>

- Можно еще разрешить роботам индексировать страницу, запретив при этом переходить по внешним ссылкам:
<META NAME=“ROBOTS” CONTENT=“NOFOLLOW”>

NB. Учтите. При использовании мета-тегов запреты индексации будут действовать определенное время. Точно указать не могу (не помню) но из индекса Гугла страницы с таким кодом будут исключены на полгода (180 дней), при этом неважно удалите ли Вы файл robots.txt или метатеги после обработки запроса.

Более подробно можете почитать здесь.
ЗЫ. Прописывать в роботс.тхт отдельные правила для робота каждой ПС или "не париться" и прописать одно правило для всех - решайте сами. Сторонников и противников обеих методов более чем достаточно. Я - всегда прописываю для Яндекса правила robots.txt отдельно.

Сообщение отредактировал Juror - 21.12.2011, 0:09
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
mirgorod
mirgorod
сообщение 17.1.2012, 21:24; Ответить: mirgorod
Сообщение #10


Новичок
*

Группа: User
Сообщений: 26
Регистрация: 14.1.2012
Поблагодарили: 2 раза
Репутация:   -2  


по личному опыту могу сказать, что всё ненужное я заношу в robots.txt и примерно через 1-2 недели ненужное перестаёт индексироваться.


--------------------
Кино Портал vk-video.ru
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Чем сжимать картинки для сайта без потери качества
1st-finstep.ru - Заработок в сети и методы продвижения сайта
13 komarik_vlad 1331 Сегодня, 12:29
автор: monson
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыНе повлияет ли на позиции сайта?
Если убрать контент
12 maxg5 1308 Вчера, 21:11
автор: alexandrrr
Горячая тема (нет новых ответов) Качественный копирайт и наполнение Вашего сайта
Подходи, торопись, покупай живо...
307 DroBit 86294 Вчера, 19:03
автор: Fox
Открытая тема (нет новых ответов) Тренд сайта по сравнению с аналогами, новый параметр в Яндекс Вебмастере
7 0alex1 1487 Вчера, 14:03
автор: coremission
Горячая тема (нет новых ответов) Регистрация Вашего сайта (профиля,DLE сайты,подписи на форумах,постинг Тиц 10> , ПР 1>)
278 kaartes 102723 Вчера, 10:55
автор: kukla


 



RSS Текстовая версия Сейчас: 15.12.2017, 18:32
Дизайн