X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> помогите консультацией по robots.txt для google
supreme666
supreme666
Topic Starter сообщение 3.1.2009, 19:51; Ответить: supreme666
Сообщение #1


Приветствую форумчане, есть вопрос важный по robots.txt т.к. сам никогда не создавал и пользовался им.
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm


User-agent: *
Disallow: /admin.php
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=userinfo
Disallow: /index.php?do=rules
Disallow: /user
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
iker
iker
сообщение 3.1.2009, 19:55; Ответить: iker
Сообщение #2


нет не будет)


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
isurfer
isurfer
сообщение 3.1.2009, 20:01; Ответить: isurfer
Сообщение #3


(supreme666 @ 3.1.2009, 18:51) *
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm

Он даже не зайдет туда.


--------------------
"Выполняю работу быстро, качественно, недорого." (выбирайте любые два)


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
vorobjov_sh
vorobjov_sh
сообщение 9.1.2009, 17:38; Ответить: vorobjov_sh
Сообщение #4


Не будет, потому что стоит запрет на индексацию для всех роботов:
Disallow: /index.php?do=pm


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
organic
organic
сообщение 14.1.2009, 0:12; Ответить: organic
Сообщение #5


Он даже не зайдет туда.

Это не совсем так, точнее - совсем не так. Чтбы не ходить далеко за примером, посмотрите на роботс на этом сайте:

User-Agent: *
Disallow: /ipb

Теперь посмотрите сюда: http://www.google.com/search?q=site:talk.m...ru&filter=0

Найдено что-то около восьми тысяч страниц. Можете объяснить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Metrob
Metrob
сообщение 4.8.2009, 12:44; Ответить: Metrob
Сообщение #6


Извините, что вопрос не совсем по теме, поиском не нашел.
При проверке robot.txt в панели вебмастера пишет: www.metrob.ru - Распознается в качестве каталога; у некоторых файлов могут быть другие ограничения.

И сайт раньше был на 3 страничке по ключевому запросу, теперь вобще его не нахожу. Случилось это после подачи sitemap на сканирование.
Чем это может быть вызвано? Чем это грозит сайту? Как это исправить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Konstantin_by
Konstantin_by
сообщение 5.9.2009, 10:23; Ответить: Konstantin_by
Сообщение #7


Для Disallow: /ipb лучше писать:
Disallow: /ipb*
У гугла своя методика понимания robots

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Adlane - рекламная платформа для монетизаци трафика
13 Adlane 1964 Сегодня, 15:51
автор: Adlane
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыСовфед предлагает замедлить YouTube для россиян
20 seostock 863 Сегодня, 15:00
автор: drobilkoku
Открытая тема (нет новых ответов) Требуются тексты для Gogetlinks и Miralinks
нужен еще 1 исполнитель
10 3xWEB 1968 Сегодня, 14:25
автор: 3xWEB
Открытая тема (нет новых ответов) Роскомнадзор потребовал от руководства Google снять ограничения c RT в YouTube
2 VinogradOFF 82 Вчера, 20:43
автор: Starpony
Горячая тема (нет новых ответов) Давайте блокировать ботов в robots.txt
48 Cott 4338 Вчера, 20:38
автор: Starpony


 



RSS Текстовая версия Сейчас: 13.5.2021, 20:41
Дизайн