X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> помогите с роботс
Libero
Libero
Topic Starter сообщение 2.8.2011, 15:38; Ответить: Libero
Сообщение #1


Вот сейчас на сайте DLE стандартный роботс идет:

User-agent: *
Disallow: /engine/go.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm


Мне нужно, чтобы сайт индексировался только по домену без www.
и индексировались только нужные страницы, чтобы никаких версий для печати и т.д. и чтобы не только в яше, но и в гугле было так. буду очень благодарен


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
S1xteen
S1xteen
сообщение 2.8.2011, 16:04; Ответить: S1xteen
Сообщение #2


Стоило бы пройтись по поиску форума, подобные вопросы уже были. А также в справке яндекс вебмастер много чего полезного написано про robots

Сообщение отредактировал S1xteen - 2.8.2011, 16:05
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
serezka
serezka
сообщение 2.8.2011, 16:22; Ответить: serezka
Сообщение #3


(Libero @ 2.8.2011, 15:38) *
Мне нужно, чтобы сайт индексировался только по домену без www.

Host: site.ru

кстати, если не ошибаюсь, для яндекса нужно отдельно(ещё раз) прописывать всё в роботс.тхт

Сообщение отредактировал serezka - 2.8.2011, 16:26
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wlad2
wlad2
сообщение 2.8.2011, 16:47; Ответить: wlad2
Сообщение #4


User-agent: *
Disallow: /tags/
Disallow: /user
Disallow: /print #чтобы никаких версий для печати
Disallow: /*/print #чтобы никаких версий для печати
Disallow: /*/page/*/
Disallow: /engine
Disallow: /index
Disallow: /templates/
Disallow: /*.js
Disallow: /*.css
Allow: /uploads/
Disallow: /?
Disallow: /*?
Host: sayt.ru # по домену без www
Sitemap: http://sayt.ru/sitemap.xml

скиньте в личку урл вашего сайта я погляжу.. иногда по разному в зависимости от ЧПУ
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
matrixzp
matrixzp
сообщение 2.8.2011, 18:27; Ответить: matrixzp
Сообщение #5


Пример моего роботса:

User-agent: *
Disallow: /vostanovlenie.html
Disallow: /registracija.html
Disallow: /publikacija.html
Disallow: /soobshenija.html
Disallow: /kontakty.html
Disallow: /pravila.html
Disallow: /index.html
Disallow: /index.php
Disallow: /user/templates/
Disallow: /user/
Disallow: /tags/
Disallow: /favorites/
Disallow: /templates/
Disallow: /languages/
Disallow: /engine/
Disallow: /20*/
Disallow: /*rss.xml
Disallow: /*print
Disallow: /*?do=*
Disallow: /*index.php*
Disallow: /links.html
Sitemap: http://site.ru/sitemap.xml

Host: site.ru
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Rampage
Rampage
сообщение 2.8.2011, 18:34; Ответить: Rampage
Сообщение #6


User-agent: *
Disallow: /backup
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /engine/
Disallow: /engine/redirect.php
Disallow: /favorites/
Disallow: /language/
Disallow: /lastnews/
Disallow: /newposts/
Disallow: /page/$
Disallow: /2010/$
Disallow: /2011/$
Disallow: /tags/$
Disallow: /templates/
Disallow: /uploads/
Disallow: /user/
Disallow: /*print
Disallow: /*do=pm
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=addnews
Disallow: /*do=lastnews
Disallow: /*do=lastcomments
Disallow: /*do=lostpassword
Disallow: /*do=register
Disallow: /*do=search
Disallow: /*do=feedback
Disallow: /*do=stats
Disallow: /addnews.html
Disallow: /statistics.html
Disallow: /search.html
Disallow: /rules.html
Host: site.ws
Sitemap: http://site.ws/sitemap.xml


вот мой пример


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wlad2
wlad2
сообщение 2.8.2011, 19:34; Ответить: wlad2
Сообщение #7


вот мой пример

ваш пример особенно с
Disallow: /*do=addnews
Disallow: /*do=lastnews
Disallow: /*do=lastcomments
Disallow: /*do=lostpassword
Disallow: /*do=register
Disallow: /*do=search
Disallow: /*do=feedback
Disallow: /*do=stats
глуп до безобразия.
правильно так
Disallow: /?
Disallow: /*?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
adai994
adai994
сообщение 2.8.2011, 21:20; Ответить: adai994
Сообщение #8


Кстати есть ли разница между:
Disallow: /page

и
Disallow: /page/

??

Сообщение отредактировал adai994 - 2.8.2011, 21:21


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kostiknc
kostiknc
сообщение 2.8.2011, 21:54; Ответить: kostiknc
Сообщение #9


редирект нужно ставить с www на без www в htaccess

(adai994 @ 2.8.2011, 21:20) *
Кстати есть ли разница между:
Disallow: /page

и
Disallow: /page/

??

по моему во втором случае не будет индексироваться раздел page, а в первом страницы начинающиеся с page

Host актуален только для Яндекса. Так что смысл ставить для всех агентов нет.

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал kostiknc - 2.8.2011, 21:54


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Помогите вспомнить рекламного бота Телеграм для обмена рекламой
0 Mixatraider 729 21.2.2024, 23:42
автор: Mixatraider
Открытая тема (нет новых ответов) Помогите рещить проблему с монитором.
Почему низкое разрешение при подключении монитора через displayport?
0 Levels 1702 11.12.2020, 0:48
автор: Levels
Открытая тема (нет новых ответов) Помогите кто нибудь получить партнерку Росбанк!
7 heisenberg_mw 2342 7.8.2020, 9:28
автор: heisenberg_mw
Открытая тема (нет новых ответов) Помогите найти тему пожалуйста
7 virtas 12517 24.7.2020, 17:02
автор: -JamesSmips-
Открытая тема (нет новых ответов) Помогите с поиском доноров
3 tehno_music 3357 4.11.2019, 17:15
автор: goblin78


 



RSS Текстовая версия Сейчас: 24.4.2024, 8:25
Дизайн