Помощник
 |
|
|
|
|
Сообщение сайта
|
 Имеет ли значение кодировка для robots.txt |
Жук
|
Сообщение
#1
|
||
|
Участник  Группа: User Сообщений: 125 Регистрация: 13.8.2010 Поблагодарили: 13 раз Репутация:  5 
 |
|
||
 |
|
||
schved
|
 27.11.2010, 22:06;
Ответить: schved
Сообщение
#2
|
 Бывалый Группа: User Сообщений: 405 Регистрация: 22.5.2009 Из: Россия Поблагодарили: 84 раза Репутация: 12
|
не правильно составляете значит, кодировка не причем.
примерно так надо; User-agent: * Disallow: /ваша страница/ По моему если последнее просто Disallow: то закроется весь сайт от индексации Сообщение отредактировал schved - 27.11.2010, 22:10 -------------------- |
|
|
|
|
E-body
|
27.11.2010, 22:29;
Ответить: E-body
Сообщение
#3
|
|
Новичок Группа: Banned Сообщений: 45 Регистрация: 15.6.2010 Из: LV Поблагодарили: 10 раз Репутация: 1
|
Наверно хотел как лучше но получилось как всегда. Если файл ../robots.txt открывается в броузерах нормально то и поисквикам также будет виден. Содержимое в студию.
|
|
|
|
|
Жук
|
Сообщение
#4
|
|
Участник Группа: User Сообщений: 125 Регистрация: 13.8.2010 Поблагодарили: 13 раз Репутация: 5
|
User-agent: *
Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ Disallow: /go.php User-agent: Yandex Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ Disallow: /go.php Host: мой сайт.com |
|
|
|
|
diktator
|
28.11.2010, 12:46;
Ответить: diktator
Сообщение
#5
|
|
Завсегдатай Группа: Active User Сообщений: 506 Регистрация: 26.4.2008 Поблагодарили: 59 раз Репутация: 8
|
Гугл это может. Почитайте тут - http://www.webpronews.com/topnews/2009/10/...ow-up-in-google
Вкратце - страницы, закрытые в роботсе, в индекс попадают, но по контенту не находятся. Если не хотите, чтобы их урлы светились в индексе, закрывайте метатегом noindex на самой странице или пользуйтесь инструментом в вебмастере гугла. -------------------- |
|
|
|
|
Жук
|
Сообщение
#6
|
|
|
Участник Группа: User Сообщений: 125 Регистрация: 13.8.2010 Поблагодарили: 13 раз Репутация: 5
|
Хм... Полезность данной "фичи" Гугла крайне сомнительна. Спасибо за информацию. А то я уже и не знал, где ковырять.
Сообщение отредактировал Жук - 28.11.2010, 14:35 |
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐ Сервис для получения SMS на реальные номера USA |
13 | Chekon | 4070 | Вчера, 11:48 автор: Chekon |
|
Rebex.io – Ваша инновационная платформа для обмена криптовалюты! | 1 | Rebex | 677 | 17.4.2024, 11:50 автор: Rebex |
|
Какой % отказов нормален для сайта? | 11 | Aloof | 2811 | 16.4.2024, 12:48 автор: diviner99 |
 |
Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат | 54 | arendator | 34834 | 15.4.2024, 15:16 автор: arendator |
|
⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами! | 83 | AdsPower | 24413 | 14.4.2024, 22:52 автор: AdsPower |
|
Текстовая версия | Сейчас: 19.4.2024, 13:42 |
