X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Как правильно закрыть страницу в роботс
Jester
Jester
Topic Starter сообщение 23.4.2011, 20:35; Ответить: Jester
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 366
Регистрация: 16.12.2008
Из: Украина
Поблагодарили: 45 раз
Репутация:   8  


Здравствуйте! В гугле нашел нашел дубли хотелось бы их закрыть от индексации. Как правильно сделать

Если сделаю вот так:
Disallow: /soft/1234-soft-dlya-tebya.html

Не закроется ли раздел софт?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kronos
kronos
сообщение 23.4.2011, 21:11; Ответить: kronos
Сообщение #2


Белый веб-мастер
*******


Группа: Active User
Сообщений: 4703
Регистрация: 10.2.2009
Из: Харьков
Поблагодарили: 2629 раз
Репутация:   327  


Не закроется


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Risk
Risk
сообщение 23.4.2011, 21:49; Ответить: Risk
Сообщение #3


Завсегдатай
*****

Группа: Active User
Сообщений: 804
Регистрация: 5.7.2010
Из: Интернета
Поблагодарили: 146 раз
Репутация:   41  


не закроется, закроется только та страница, которую прописал в Disallow:
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rjksdfhe
rjksdfhe
сообщение 23.4.2011, 21:59; Ответить: rjksdfhe
Сообщение #4


Straight arms
*******

Группа: Active User
Сообщений: 2760
Регистрация: 21.4.2009
Из: Мытищи, МО, РФ
Поблагодарили: 1111 раз
Репутация:   163  


http://help.yandex.ru/webmaster/?id=996567

В гугле то же самое

`*` - всё что после, со времён DOS

Если сделать вот так:
Disallow: /soft/*

закроется всё, что в разделе soft

Дальше думайте по ситуации.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
IBakalov
IBakalov
сообщение 26.4.2011, 11:05; Ответить: IBakalov
Сообщение #5


Участник
***

Группа: User
Сообщений: 112
Регистрация: 31.3.2011
Из: Нижний Новгород
Поблагодарили: 134 раза
Репутация:   21  


В последнее время столкнулся с тем, что для гугла в robots.txt лучше явно указывать user-agent:
User-agent: googlebot
Так как зачастую User-agent: * не прокатывает


--------------------
Блог о продвижении сайтов и заработке в интернете.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
azartan
azartan
сообщение 29.4.2011, 22:53; Ответить: azartan
Сообщение #6


Завсегдатай
*****

Группа: Active User
Сообщений: 521
Регистрация: 17.11.2010
Поблагодарили: 123 раза
Репутация:   26  


(IBakalov @ 26.4.2011, 10:05) *
В последнее время столкнулся с тем, что для гугла в robots.txt лучше явно указывать user-agent:
User-agent: googlebot
Так как зачастую User-agent: * не прокатывает


Кто-то еще с этим сталкивался? Интересует действительно ли так на самом деле?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
skype
skype
сообщение 29.4.2011, 22:59; Ответить: skype
Сообщение #7


Новичок
*

Группа: User
Сообщений: 23
Регистрация: 1.3.2011
Поблагодарили: 8 раз
Репутация:   4  


Стоит User-agent: *
Проблем не наблюдал.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rjksdfhe
rjksdfhe
сообщение 29.4.2011, 23:00; Ответить: rjksdfhe
Сообщение #8


Straight arms
*******

Группа: Active User
Сообщений: 2760
Регистрация: 21.4.2009
Из: Мытищи, МО, РФ
Поблагодарили: 1111 раз
Репутация:   163  


Делайте как приянто, и не парьтесь.
Всё и так работает.
Сосредоточьтесь на чём-то ином, более важном.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
volchoc
volchoc
сообщение 30.4.2011, 3:04; Ответить: volchoc
Сообщение #9


Участник
***

Группа: User
Сообщений: 185
Регистрация: 22.1.2009
Поблагодарили: 30 раз
Репутация:   3  


В гугле нашел дубли хотелось бы их закрыть от индексации.

Зачем?
p.s. Прежде чем ответить (а какой будет ответ — и так очевидно) — хорошенько подумайте так ли это.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал volchoc - 30.4.2011, 3:05


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Как организовать индексацию защищенных pdf с ключами и ссылками
И разместить pdf на внешних жирных ресурсах
0 kirch 333 Вчера, 23:37
автор: kirch
Открытая тема (нет новых ответов) [Книга] Налог на глупость: Как я заработал в интернете 5,5 млн рублей.
7 kotovsky 2114 Вчера, 8:30
автор: kolor73
Открытая тема (нет новых ответов) Король социалок 7: Генератор видео и 5 способов как на нём заработать
0 Volgar 391 19.5.2018, 17:09
автор: Volgar
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыКак носить смартфоны диагональю 5.5 - 6.4 дюйма?
41 Room 5072 19.5.2018, 15:28
автор: Chezarius
Открытая тема (нет новых ответов) Как защитить свои данные в общественном Wi-Fi?
0 unazekoff 212 19.5.2018, 14:56
автор: unazekoff


 



RSS Текстовая версия Сейчас: 21.5.2018, 8:01
Дизайн