Помощник
|
Имеет ли значение кодировка для robots.txt |
Жук
|
Сообщение
#1
|
||
|
|
||
|
|||
schved |
27.11.2010, 22:06;
Ответить: schved
Сообщение
#2
|
|
не правильно составляете значит, кодировка не причем.
примерно так надо; User-agent: * Disallow: /ваша страница/ По моему если последнее просто Disallow: то закроется весь сайт от индексации Сообщение отредактировал schved - 27.11.2010, 22:10 -------------------- |
|
|
E-body |
27.11.2010, 22:29;
Ответить: E-body
Сообщение
#3
|
|
Наверно хотел как лучше но получилось как всегда. Если файл ../robots.txt открывается в броузерах нормально то и поисквикам также будет виден. Содержимое в студию.
|
|
|
Жук
|
Сообщение
#4
|
|
User-agent: *
Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ Disallow: /go.php User-agent: Yandex Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ Disallow: /go.php Host: мой сайт.com |
|
|
diktator |
28.11.2010, 12:46;
Ответить: diktator
Сообщение
#5
|
|
Гугл это может. Почитайте тут - http://www.webpronews.com/topnews/2009/10/...ow-up-in-google
Вкратце - страницы, закрытые в роботсе, в индекс попадают, но по контенту не находятся. Если не хотите, чтобы их урлы светились в индексе, закрывайте метатегом noindex на самой странице или пользуйтесь инструментом в вебмастере гугла. -------------------- |
|
|
Жук
|
Сообщение
#6
|
|
|
Хм... Полезность данной "фичи" Гугла крайне сомнительна. Спасибо за информацию. А то я уже и не знал, где ковырять.
Сообщение отредактировал Жук - 28.11.2010, 14:35 |
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Обучение Email Рассылкам + Софт Для Автоматизации (100к в сутки с сервера) | 9 | zennoboss | 4581 | Вчера, 21:03 автор: 100ftd |
|
Посоветуйте массажер для спины и шеи | 9 | Boymaster | 868 | Вчера, 13:56 автор: Vmir |
|
Какой % отказов нормален для сайта? | 14 | Aloof | 3372 | Вчера, 13:50 автор: Vmir |
|
Люблю творить! Статьи для вас Копирайтинг- моя жизнь! |
312 | Zoya83 | 190671 | Вчера, 7:51 автор: DimonX |
|
Современный сервис для быстрого и безопасного обмена валют. | 15 | CryptoTims | 4951 | 22.4.2024, 22:32 автор: CryptoTims |
Текстовая версия | Сейчас: 24.4.2024, 2:35 |