X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> robots.txt, помогите создать
hitechobzor
hitechobzor
Topic Starter сообщение 29.12.2008, 2:12; Ответить: hitechobzor
Сообщение #1


Завсегдатай
*****

Группа: Active User
Сообщений: 578
Регистрация: 8.12.2008
Из: Томск
Поблагодарили: 112 раз
Репутация:   24  


помогите составить robots.txt. что нужно там прописать и как правильно. нужно указать две ссылки на sitemap
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Оprioris
Оprioris
сообщение 29.12.2008, 2:16; Ответить: Оprioris
Сообщение #2


Завсегдатай
*****

Группа: Active User
Сообщений: 730
Регистрация: 7.12.2008
Поблагодарили: 224 раза
Репутация:   39  


User-agent: *
Sitemap: http://путь до карты сайта

Сообщение отредактировал Оprioris - 29.12.2008, 2:16


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hitechobzor
hitechobzor
Topic Starter сообщение 29.12.2008, 2:18; Ответить: hitechobzor
Сообщение #3


Завсегдатай
*****

Группа: Active User
Сообщений: 578
Регистрация: 8.12.2008
Из: Томск
Поблагодарили: 112 раз
Репутация:   24  


(Оprioris @ 29.12.2008, 4:16) *
User-agent: *
Sitemap: http://путь до карты сайта


* - это типо для всех роботов??
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 29.12.2008, 2:19; Ответить: it-pomoshnik
Сообщение #4


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


Файл robots.txt

User-agent: Yandex

Disallow: /страница, которую не нужно индексировать1.html
Disallow: /страница, которую не нужно индексировать2.php


User-agent: *

Disallow: /
Disallow: /


Host: www.имя сайта.ru


А файл sitemap тебе как прописать надо?
Ты его в xml выгрузил?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Prepod
Prepod
сообщение 29.12.2008, 2:20; Ответить: Prepod
Сообщение #5


Участник
***


Группа: User
Сообщений: 238
Регистрация: 21.1.2008
Поблагодарили: 22 раза
Репутация:   15  


(hitechobzor @ 29.12.2008, 1:12) *
помогите составить robots.txt. что нужно там прописать и как правильно. нужно указать две ссылки на sitemap



...и для Яндекса не забудьте написать, а то его пока не ткнешь носом в сайт, может игнорировать его.

User-Agent: Yandex
Disallow:
Host: MyDomen.ru

Этот вариант, если никакие страницы не скрываете от индексации.

Сообщение отредактировал Prepod - 29.12.2008, 2:22
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hitechobzor
hitechobzor
Topic Starter сообщение 29.12.2008, 2:20; Ответить: hitechobzor
Сообщение #6


Завсегдатай
*****

Группа: Active User
Сообщений: 578
Регистрация: 8.12.2008
Из: Томск
Поблагодарили: 112 раз
Репутация:   24  


(it-pomoshnik @ 29.12.2008, 4:19) *
Файл robots.txt



А файл sitemap тебе как прописать надо?
Ты его в xml выгрузил?


index.php?do=sitemap и ещё так sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 29.12.2008, 2:21; Ответить: it-pomoshnik
Сообщение #7


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


(hitechobzor @ 29.12.2008, 1:12) *
помогите составить robots.txt. что нужно там прописать и как правильно. нужно указать две ссылки на sitemap



Sitemap: http://путь до карты сайта

А зачем две ссылки?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 29.12.2008, 2:23; Ответить: it-pomoshnik
Сообщение #8


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


(hitechobzor @ 29.12.2008, 1:20) *
index.php?do=sitemap и ещё так sitemap.xml


Так и указываешь:

sitemap: http://имя сайта/index.php?do=sitemap
sitemap: http://имя сайта/sitemap.xml


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hitechobzor
hitechobzor
Topic Starter сообщение 29.12.2008, 2:23; Ответить: hitechobzor
Сообщение #9


Завсегдатай
*****

Группа: Active User
Сообщений: 578
Регистрация: 8.12.2008
Из: Томск
Поблагодарили: 112 раз
Репутация:   24  


(it-pomoshnik @ 29.12.2008, 4:21) *
Sitemap: http://путь до карты сайта

А зачем две ссылки?


на форуме сдесь было написано, что чем больше, тем лучше, вроде censored.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
it-pomoshnik
it-pomoshnik
сообщение 29.12.2008, 2:25; Ответить: it-pomoshnik
Сообщение #10


Старожил
******

Группа: Active User
Сообщений: 1386
Регистрация: 10.11.2008
Из: Москва, Переделкино
Поблагодарили: 666 раз
Репутация:   101  


(hitechobzor @ 29.12.2008, 1:23) *
на форуме сдесь было написано, что чем больше, тем лучше, вроде censored.gif


Достаточно указать в xml


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47455 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 482 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1188 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 695 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 13.12.2017, 21:09
Дизайн