X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> помогите консультацией по robots.txt для google
supreme666
supreme666
Topic Starter сообщение 3.1.2009, 19:51; Ответить: supreme666
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 251
Регистрация: 20.6.2008
Из: Рязань
Поблагодарили: 29 раз
Репутация:   7  


Приветствую форумчане, есть вопрос важный по robots.txt т.к. сам никогда не создавал и пользовался им.
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm


User-agent: *
Disallow: /admin.php
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=userinfo
Disallow: /index.php?do=rules
Disallow: /user
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
iker
iker
сообщение 3.1.2009, 19:55; Ответить: iker
Сообщение #2


Бывалый
****

Группа: User
Сообщений: 325
Регистрация: 26.11.2008
Поблагодарили: 27 раз
Репутация:   6  


нет не будет)


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
isurfer
isurfer
сообщение 3.1.2009, 20:01; Ответить: isurfer
Сообщение #3


Завсегдатай
*****

Группа: Active User
Сообщений: 525
Регистрация: 13.11.2008
Из: живу на работе
Поблагодарили: 140 раз
Репутация:   22  


(supreme666 @ 3.1.2009, 18:51) *
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm

Он даже не зайдет туда.


--------------------
"Выполняю работу быстро, качественно, недорого." (выбирайте любые два)


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
vorobjov_sh
vorobjov_sh
сообщение 9.1.2009, 17:38; Ответить: vorobjov_sh
Сообщение #4


Частый гость
**

Группа: User
Сообщений: 64
Регистрация: 9.1.2009
Из: г. Шепетовка
Поблагодарили: 9 раз
Репутация:   1  


Не будет, потому что стоит запрет на индексацию для всех роботов:
Disallow: /index.php?do=pm


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
organic
organic
сообщение 14.1.2009, 0:12; Ответить: organic
Сообщение #5


Новичок
*

Группа: Viewer
Сообщений: 4
Регистрация: 30.12.2008
Поблагодарили: 1 раз
Репутация:   0  


Он даже не зайдет туда.

Это не совсем так, точнее - совсем не так. Чтбы не ходить далеко за примером, посмотрите на роботс на этом сайте:

User-Agent: *
Disallow: /ipb

Теперь посмотрите сюда: http://www.google.com/search?q=site:talk.m...ru&filter=0

Найдено что-то около восьми тысяч страниц. Можете объяснить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Metrob
Metrob
сообщение 4.8.2009, 12:44; Ответить: Metrob
Сообщение #6


Новичок
*

Группа: User
Сообщений: 28
Регистрация: 23.5.2009
Поблагодарили: 2 раза
Репутация:   0  


Извините, что вопрос не совсем по теме, поиском не нашел.
При проверке robot.txt в панели вебмастера пишет: www.metrob.ru - Распознается в качестве каталога; у некоторых файлов могут быть другие ограничения.

И сайт раньше был на 3 страничке по ключевому запросу, теперь вобще его не нахожу. Случилось это после подачи sitemap на сканирование.
Чем это может быть вызвано? Чем это грозит сайту? Как это исправить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Konstantin_by
Konstantin_by
сообщение 5.9.2009, 10:23; Ответить: Konstantin_by
Сообщение #7


Участник
***

Группа: User
Сообщений: 169
Регистрация: 1.9.2008
Из: Минск
Поблагодарили: 27 раз
Репутация:   5  


Для Disallow: /ipb лучше писать:
Disallow: /ipb*
У гугла своя методика понимания robots

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) В России могут создать "белый VPN" для добросовестных ресурсов
2 seostock 774 Сегодня, 15:01
автор: wertu
Горячая тема (нет новых ответов) Букварикс - бесплатная программа для быстрого подбора ключевых слов
174 Bukvarix 85861 Сегодня, 13:57
автор: ilya_perevalov
Горячая тема (нет новых ответов) TrustMaster 3 - прогрев smtp серверов для 100% инбокса!
31 zennoboss 5925 Сегодня, 12:19
автор: zennoboss
Открытая тема (нет новых ответов) Подбор трастовых доменов для трафика и ваших тем
6 rasul 1353 Сегодня, 10:50
автор: rasul
Горячая тема (нет новых ответов) MostPartner.com — лучшее решение для беттинг трафика
39 MostPartner 8282 Сегодня, 7:33
автор: Harekin


 



RSS Текстовая версия Сейчас: 21.5.2018, 15:13
Дизайн