X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Как правильно закрыть страницу в роботс
Jester
Jester
Topic Starter сообщение 23.4.2011, 20:35; Ответить: Jester
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 366
Регистрация: 16.12.2008
Из: Украина
Поблагодарили: 45 раз
Репутация:   8  


Здравствуйте! В гугле нашел нашел дубли хотелось бы их закрыть от индексации. Как правильно сделать

Если сделаю вот так:
Disallow: /soft/1234-soft-dlya-tebya.html

Не закроется ли раздел софт?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kronos
kronos
сообщение 23.4.2011, 21:11; Ответить: kronos
Сообщение #2


Белый веб-мастер
*******


Группа: Active User
Сообщений: 4703
Регистрация: 10.2.2009
Из: Харьков
Поблагодарили: 2629 раз
Репутация:   327  


Не закроется


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Risk
Risk
сообщение 23.4.2011, 21:49; Ответить: Risk
Сообщение #3


Завсегдатай
*****

Группа: Active User
Сообщений: 802
Регистрация: 5.7.2010
Из: Интернета
Поблагодарили: 146 раз
Репутация:   41  


не закроется, закроется только та страница, которую прописал в Disallow:
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rjksdfhe
rjksdfhe
сообщение 23.4.2011, 21:59; Ответить: rjksdfhe
Сообщение #4


Straight arms
*******

Группа: Active User
Сообщений: 2760
Регистрация: 21.4.2009
Из: Мытищи, МО, РФ
Поблагодарили: 1111 раз
Репутация:   163  


http://help.yandex.ru/webmaster/?id=996567

В гугле то же самое

`*` - всё что после, со времён DOS

Если сделать вот так:
Disallow: /soft/*

закроется всё, что в разделе soft

Дальше думайте по ситуации.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
IBakalov
IBakalov
сообщение 26.4.2011, 11:05; Ответить: IBakalov
Сообщение #5


Участник
***

Группа: User
Сообщений: 112
Регистрация: 31.3.2011
Из: Нижний Новгород
Поблагодарили: 134 раза
Репутация:   21  


В последнее время столкнулся с тем, что для гугла в robots.txt лучше явно указывать user-agent:
User-agent: googlebot
Так как зачастую User-agent: * не прокатывает


--------------------
Блог о продвижении сайтов и заработке в интернете.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
azartan
azartan
сообщение 29.4.2011, 22:53; Ответить: azartan
Сообщение #6


Завсегдатай
*****

Группа: Active User
Сообщений: 521
Регистрация: 17.11.2010
Поблагодарили: 123 раза
Репутация:   26  


(IBakalov @ 26.4.2011, 10:05) *
В последнее время столкнулся с тем, что для гугла в robots.txt лучше явно указывать user-agent:
User-agent: googlebot
Так как зачастую User-agent: * не прокатывает


Кто-то еще с этим сталкивался? Интересует действительно ли так на самом деле?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
skype
skype
сообщение 29.4.2011, 22:59; Ответить: skype
Сообщение #7


Новичок
*

Группа: User
Сообщений: 23
Регистрация: 1.3.2011
Поблагодарили: 8 раз
Репутация:   4  


Стоит User-agent: *
Проблем не наблюдал.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rjksdfhe
rjksdfhe
сообщение 29.4.2011, 23:00; Ответить: rjksdfhe
Сообщение #8


Straight arms
*******

Группа: Active User
Сообщений: 2760
Регистрация: 21.4.2009
Из: Мытищи, МО, РФ
Поблагодарили: 1111 раз
Репутация:   163  


Делайте как приянто, и не парьтесь.
Всё и так работает.
Сосредоточьтесь на чём-то ином, более важном.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
volchoc
volchoc
сообщение 30.4.2011, 3:04; Ответить: volchoc
Сообщение #9


Участник
***

Группа: User
Сообщений: 185
Регистрация: 22.1.2009
Поблагодарили: 30 раз
Репутация:   3  


В гугле нашел дубли хотелось бы их закрыть от индексации.

Зачем?
p.s. Прежде чем ответить (а какой будет ответ — и так очевидно) — хорошенько подумайте так ли это.

Сообщение отредактировал volchoc - 30.4.2011, 3:05


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) как правильно написать альт и тайтл для изображений
0 galaker 270 Вчера, 22:50
автор: galaker
Открытая тема (нет новых ответов) Как установить источник заражения сайтов?
7 kelevra 581 Вчера, 16:40
автор: phoenix_kys
Открытая тема (нет новых ответов) Как действительно успешно внедрять привычки. И менять жизнь
seoandme.ru - SEO-блог Анны Ященко
13 AnnaYa 1242 Вчера, 16:23
автор: Zoya83
Открытая тема (нет новых ответов) Facebook палит прокси. Кто как решает эту проблему?
26 Twickbot 3411 Вчера, 15:02
автор: Mikki
Открытая тема (нет новых ответов) Как мошенники зарабатывают на прямых трансляциях в Instagram
Не ждите порно в инстаграм, его нет
7 PostBrigada 735 12.12.2017, 20:35
автор: galikfor


 



RSS Текстовая версия Сейчас: 14.12.2017, 1:09
Дизайн