X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Сайт в индексе, хотя Disallow: /, как?
spilberg1993
spilberg1993
Topic Starter сообщение 7.4.2013, 20:34; Ответить: spilberg1993
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 298
Регистрация: 8.10.2010
Из: Кишинев
Поблагодарили: 30 раз
Репутация:   4  


# See http://www.robotstxt.org/wc/norobots.html for documentation on how to use the robots.txt file
#
# To ban all spiders from the entire site uncomment the next two lines:
# User-Agent: *
# Disallow: /


- это robot.txt сайт

У сайта 4 000 страниц в гугле в индексе основном.

Объясните как, если в роботе сайт запрещен к индексации?


--------------------
Ручное размножение статей. Высокая уникальность и полная читабельность. Тема.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 7.4.2013, 20:48; Ответить: Ortero
Сообщение #2


\m/_ _\m/
******

Группа: Active User
Сообщений: 1890
Регистрация: 23.2.2012
Поблагодарили: 837 раз
Репутация:   99  


Он у вас прям с решеткой?
Вот так?

# User-Agent: *
# Disallow: /


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.


Поблагодарили: (6)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
spilberg1993
spilberg1993
Topic Starter сообщение 7.4.2013, 20:58; Ответить: spilberg1993
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 298
Регистрация: 8.10.2010
Из: Кишинев
Поблагодарили: 30 раз
Репутация:   4  


Ortero,
Да, именно с решеткой, а что она вообще означает?

Сообщение отредактировал spilberg1993 - 7.4.2013, 20:59


--------------------
Ручное размножение статей. Высокая уникальность и полная читабельность. Тема.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ortero
Ortero
сообщение 7.4.2013, 20:59; Ответить: Ortero
Сообщение #4


\m/_ _\m/
******

Группа: Active User
Сообщений: 1890
Регистрация: 23.2.2012
Поблагодарили: 837 раз
Репутация:   99  


Символ '#' предназначен для описания комментариев. Все, что находится после этого символа и до первого перевода строки не учитывается.


--------------------
Бегет - просто хороший хостинг, который еще и ssl-сертификат бесплатно дает.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dynz
dynz
сообщение 7.4.2013, 21:00; Ответить: dynz
Сообщение #5


Завсегдатай
*****

Группа: Active User
Сообщений: 588
Регистрация: 28.8.2010
Из: Мухосранск..
Поблагодарили: 157 раз
Репутация:   51  


spilberg1993, Она означает, что это комментарий. Правильно:
User-Agent: *
Disallow: /


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
metkram
metkram
сообщение 7.4.2013, 21:01; Ответить: metkram
Сообщение #6


Старожил
******

Группа: Active User
Сообщений: 1123
Регистрация: 15.2.2010
Из: Украина
Поблагодарили: 364 раза
Репутация:   38  


spilberg1993, убирай решетку. Это нарушение синтаксиса


--------------------
Купи и эту строчку
Купи и эту строчку
Комплексный прогон сайтов ru и en
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
spilberg1993
spilberg1993
Topic Starter сообщение 7.4.2013, 21:03; Ответить: spilberg1993
Сообщение #7


Бывалый
****

Группа: User
Сообщений: 298
Регистрация: 8.10.2010
Из: Кишинев
Поблагодарили: 30 раз
Репутация:   4  


metkram,
Это сайт моего конкурента. Т.е выходит, все комменты к индексу запрещены? А все страницы на сайте разрешены к индексу?


--------------------
Ручное размножение статей. Высокая уникальность и полная читабельность. Тема.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
falken
falken
сообщение 7.4.2013, 21:09; Ответить: falken
Сообщение #8


online
*******

Группа: Ex-Moderator
Сообщений: 3742
Регистрация: 23.3.2011
Поблагодарили: 3986 раз
Репутация:   361  


(spilberg1993 @ 7.4.2013, 21:03) *
все комменты к индексу запрещены? А все страницы на сайте разрешены к индексу?

Причем здесь индексация "комментов"? smile.gif
Решетка (#) означает, в конкретном случае, что все директивы, указанные в роботс.тхт у вашего конкурента - не активны, т.е. данный текст просто игнорируется поисковыми роботами. Иными словами - сайт без роботса вообще, если верить данным, которые вы привели в топике.


Поблагодарили: (3)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dota
dota
сообщение 7.4.2013, 21:17; Ответить: dota
Сообщение #9


Топовый постер
*******


Группа: Active User
Сообщений: 4529
Регистрация: 1.10.2010
Из: СССР
Поблагодарили: 2575 раз
Репутация:   576  


# (решетка) в программировании или непосредственно в вашем случае означает что после нее, все написанное не исполняется, но только в этой строке.

Сообщение отредактировал dota - 7.4.2013, 21:19


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
spilberg1993
spilberg1993
Topic Starter сообщение 7.4.2013, 21:22; Ответить: spilberg1993
Сообщение #10


Бывалый
****

Группа: User
Сообщений: 298
Регистрация: 8.10.2010
Из: Кишинев
Поблагодарили: 30 раз
Репутация:   4  


А смысл так делать тогда?


--------------------
Ручное размножение статей. Высокая уникальность и полная читабельность. Тема.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Попинайте сайт
3 yanat 507 Сегодня, 16:23
автор: yanat
Открытая тема (нет новых ответов) Нужен новостник на сайт
Требуется новостник для сотрудничества
4 opanas 748 Сегодня, 13:40
автор: opanas
Горячая тема (нет новых ответов) [Услуги] Баннер/Графика/Сайт
56 FillPlay 5268 Вчера, 18:16
автор: FillPlay
Открытая тема (нет новых ответов) Продам сайт под развитие
Под будущий СДЛ, тематика бизнес, возраст 1 год
5 abafons 1233 Вчера, 14:12
автор: xeons
Открытая тема (нет новых ответов) Продам сайт+домен
1 hndrs 626 Вчера, 13:36
автор: xeons


 



RSS Текстовая версия Сейчас: 16.12.2017, 19:29
Дизайн