X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

3 страниц V  < 1 2 3 >
Открыть тему
Тема закрыта
> Robot.txt - объясните чайнику
UndeaD
UndeaD
сообщение 5.2.2007, 17:04; Ответить: UndeaD
Сообщение #12


Цитата(MachoMan)
либо я пишу не правильно.. но робота там больше нет)

Мачо я тебя помню по фотке ты в метро на балалайке играл и сайты за чипсы раскручивал без договоров:rtfm: !!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Dmitry-da7
Dmitry-da7
сообщение 3.6.2007, 20:23; Ответить: Dmitry-da7
Сообщение #13


Особенности работы с robot.txt http://www.da7.ru/otherpage/otp64.shtml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wildlion
wildlion
сообщение 6.6.2007, 15:53; Ответить: wildlion
Сообщение #14


Дмитрий, предупреждение за поднятие старых тем.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
malito
malito
сообщение 29.6.2007, 18:09; Ответить: malito
Сообщение #15


а если он создал бы новое, ты ты бы ему написал! Не создавай новых тем, когда есть точно такие же.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Dody
Dody
сообщение 19.7.2007, 11:58; Ответить: Dody
Сообщение #16


так банят или нет за это, я что-то не въехал...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
igoor
igoor
сообщение 2.8.2007, 20:59; Ответить: igoor
Сообщение #17


Можно прописывать url в директиве Host, но директива host является корректной только для робота Яндекса:
User-agent: Yandex
Disallow: /cgi-bin
Host: www.site.ru
Ошибкой является описание:
Host: http://www.site.ru/
Насчёт банят или нет, этот вопрос стоит задать поисковикам, либо проверить на собственном опыте.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
soyhim
soyhim
сообщение 26.9.2007, 12:48; Ответить: soyhim
Сообщение #18


Если у меня на сайте нет робота, что я теряю?:rtfm:

Добавил Erun: soyhim, в следующий раз за поднятие старой темы получите 2 штрафных.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Diogen
Diogen
сообщение 29.9.2007, 13:21; Ответить: Diogen
Сообщение #19


Цитата(soyhim)
Если у меня на сайте нет робота, что я теряю?

Ничего.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
XeRoMaN
XeRoMaN
сообщение 30.9.2007, 1:06; Ответить: XeRoMaN
Сообщение #20


Цитата(soyhim)
Если у меня на сайте нет робота, что я теряю?:rtfm:
Ровным счетом ничего, просто робот поисковика будет сканить также страницы админки, что в некоторых случаях не есть хорошо...
И всетаки следует создавать и "заполнять" этот файл в соответствии со всеми стандартами (ссылку на описание смотри выше, микаель выкладывал)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kop
kop
сообщение 3.10.2007, 22:42; Ответить: kop
Сообщение #21


Цитата(soyhim)
Если у меня на сайте нет робота, что я теряю?:rtfm:

Добавил Erun: soyhim, в следующий раз за поднятие старой темы получите 2 штрафных.


Во-первых не робота, а robots.txt (т.к. у вас на сайте не может быть никаких роботов кроме поисковых:) ). А теряете вы заветные места в СЕРПе, т.к. поисковая система будет индексировать у вас на сайте также различную служебную информацию, и информацию не имеющую никакой пользы для пользователя. А поисковики, как известно, не любят подобную инфу.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
3 страниц V  < 1 2 3 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Давайте блокировать ботов в robots.txt
14 Cott 254 Сегодня, 21:44
автор: Вентилятор
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 64328 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 6168 28.3.2019, 18:31
автор: regem
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 1388 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 1469 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 3.3.2021, 22:15
Дизайн