X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> помогите консультацией по robots.txt для google
supreme666
supreme666
Topic Starter сообщение 3.1.2009, 19:51; Ответить: supreme666
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 251
Регистрация: 20.6.2008
Из: Рязань
Поблагодарили: 29 раз
Репутация:   7  


Приветствую форумчане, есть вопрос важный по robots.txt т.к. сам никогда не создавал и пользовался им.
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm


User-agent: *
Disallow: /admin.php
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=userinfo
Disallow: /index.php?do=rules
Disallow: /user
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
iker
iker
сообщение 3.1.2009, 19:55; Ответить: iker
Сообщение #2


Бывалый
****

Группа: User
Сообщений: 325
Регистрация: 26.11.2008
Поблагодарили: 27 раз
Репутация:   6  


нет не будет)


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
isurfer
isurfer
сообщение 3.1.2009, 20:01; Ответить: isurfer
Сообщение #3


Завсегдатай
*****

Группа: Active User
Сообщений: 525
Регистрация: 13.11.2008
Из: живу на работе
Поблагодарили: 140 раз
Репутация:   22  


(supreme666 @ 3.1.2009, 18:51) *
Хотел бы уточнить если в файле robots.txt есть нижеуказанный текст, то будет ли google индексировать и передавать PR например вот этой странице - http://www.site.ru/index.php?do=pm

Он даже не зайдет туда.


--------------------
"Выполняю работу быстро, качественно, недорого." (выбирайте любые два)


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
vorobjov_sh
vorobjov_sh
сообщение 9.1.2009, 17:38; Ответить: vorobjov_sh
Сообщение #4


Частый гость
**

Группа: User
Сообщений: 64
Регистрация: 9.1.2009
Из: г. Шепетовка
Поблагодарили: 9 раз
Репутация:   1  


Не будет, потому что стоит запрет на индексацию для всех роботов:
Disallow: /index.php?do=pm


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
organic
organic
сообщение 14.1.2009, 0:12; Ответить: organic
Сообщение #5


Новичок
*

Группа: Viewer
Сообщений: 4
Регистрация: 30.12.2008
Поблагодарили: 1 раз
Репутация:   0  


Он даже не зайдет туда.

Это не совсем так, точнее - совсем не так. Чтбы не ходить далеко за примером, посмотрите на роботс на этом сайте:

User-Agent: *
Disallow: /ipb

Теперь посмотрите сюда: http://www.google.com/search?q=site:talk.m...ru&filter=0

Найдено что-то около восьми тысяч страниц. Можете объяснить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Metrob
Metrob
сообщение 4.8.2009, 12:44; Ответить: Metrob
Сообщение #6


Новичок
*

Группа: User
Сообщений: 28
Регистрация: 23.5.2009
Поблагодарили: 2 раза
Репутация:   0  


Извините, что вопрос не совсем по теме, поиском не нашел.
При проверке robot.txt в панели вебмастера пишет: www.metrob.ru - Распознается в качестве каталога; у некоторых файлов могут быть другие ограничения.

И сайт раньше был на 3 страничке по ключевому запросу, теперь вобще его не нахожу. Случилось это после подачи sitemap на сканирование.
Чем это может быть вызвано? Чем это грозит сайту? Как это исправить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Konstantin_by
Konstantin_by
сообщение 5.9.2009, 10:23; Ответить: Konstantin_by
Сообщение #7


Участник
***

Группа: User
Сообщений: 169
Регистрация: 1.9.2008
Из: Минск
Поблагодарили: 27 раз
Репутация:   5  


Для Disallow: /ipb лучше писать:
Disallow: /ipb*
У гугла своя методика понимания robots
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Чем сжимать картинки для сайта без потери качества
1st-finstep.ru - Заработок в сети и методы продвижения сайта
15 komarik_vlad 1497 Сегодня, 12:05
автор: x64
Горячая тема (нет новых ответов) Сервис услуг в YouTube, Вконтакте, Instagram, Twitter, Facebook, Одноклассники, Google+
53 m1ntoll 16789 Сегодня, 11:45
автор: m1ntoll
Горячая тема (нет новых ответов) ВНИМАНИЕ: Тема имеет прикрепленные файлыПишу тексты для всех и каждого. Цены не кусаются, качество не хромает.
Единственное правило: клиент всегда доволен.
118 Hellnar 50134 Сегодня, 11:31
автор: PostBrigada
Открытая тема (нет новых ответов) Бот для комплексной автоматической рассылки Whatsapp
Бот для комплексной автоматической рассылки Whatsapp
3 danger22 581 Сегодня, 8:30
автор: danger22
Открытая тема (нет новых ответов) Открыть валютной карты для обменника
6 fair_exchange 394 Вчера, 19:38
автор: Mistic


 



RSS Текстовая версия Сейчас: 17.12.2017, 12:26
Дизайн