X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Robots.txt для Ipb3
neo-skynet
neo-skynet
Topic Starter сообщение 29.3.2010, 12:50; Ответить: neo-skynet
Сообщение #1


Дядько Admin
*****

Группа: Active User
Сообщений: 877
Регистрация: 5.1.2009
Из: Localhost
Поблагодарили: 123 раза
Репутация:   19  


Кто подскажет правильный Robots.txt для IPB3.


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
neo-skynet
neo-skynet
Topic Starter сообщение 30.3.2010, 13:05; Ответить: neo-skynet
Сообщение #2


Дядько Admin
*****

Группа: Active User
Сообщений: 877
Регистрация: 5.1.2009
Из: Localhost
Поблагодарили: 123 раза
Репутация:   19  


Что ни кто не в курсе?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ChristmasNet
ChristmasNet
сообщение 30.3.2010, 15:12; Ответить: ChristmasNet
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 441
Регистрация: 13.1.2010
Из: Россия, ХМАО
Поблагодарили: 93 раза
Репутация:   16  


Универсальный robots.txt для IP.Board 2.x

Для того, чтобы улучшить эффективность индексации контента форума, закрыть дубли, служебные страницы, страницы с сессиями важно использовать правильный файл robots.txt.
Кроме того, для уменьшения вреда от спам-регистраций важно закрыть от индексации профили пользователей и список участников форума, если вы не хотите запрещать гостям их просмативать.

robots.txt для форума без ЧПУ (подойдет и для форума с ЧПУ, но потребуются дополнения, о которых можно спросить в разделе о SEO оптимизации IPB)
Создайте в корне вашего домена (форум может быть как в корне, так и в папке) файл robots.txt с содержанием:
User-agent: *
Disallow: /*lofiversion
Disallow: /*setlanguage
Disallow: /*?s=
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*s0
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*Print
Disallow: /*print
Disallow: /*CP&CODE
Disallow: /*js
Disallow: /*style_images
Disallow: /*java
Disallow: /*cache
Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?Showuser
Disallow: /*?act=act=attach
Disallow: /*?act=act=Attach
Disallow: /*aboutme&mid
Disallow: /*?act=calendar
Disallow: /*?act=Calendar
Disallow: /*?act=login
Disallow: /*?act=Login
Disallow: /*?act=post
Disallow: /*?act=reg
Disallow: /*?act=Reg
Disallow: /*?act=online
Disallow: /*?act=Online
Disallow: /*?act=members
Disallow: /*?act=Members
Disallow: /*?act=help
Disallow: /*?act=Help
Disallow: /*?act=search
Disallow: /*?act=Search
Disallow: /*?act=forward
Disallow: /*?act=Forward
Disallow: /*?act=mail
Disallow: /*?act=Mail
Disallow: /*?act=report
Disallow: /*?act=chat
Disallow: /*?act=msg
Disallow: /*?act=usercp
Disallow: /*?act=Usercp
Disallow: /*?act=profile
Disallow: /*?act=track
Disallow: /*?act=stats
Disallow: /*?act=Stats
Disallow: /*?act=attach
Disallow: /*?act=legends
Disallow: /*?act=mmod
Disallow: /*?act=warn
Disallow: /*?act=task
Disallow: /*?act=findpost
Disallow: /*?act=paysubs
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*mode=linear
Disallow: /*mode=threaded
Disallow: /*mode=linearplus
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&cal_id
Host: сайт.ru

Вместо сайт.ru пропишите url основного зеркала вашего домена.

Все ненужные адреса запрещаются по маске, поэтому дополнительно дописывать вместо звездочки путь не нужно. Этот robots.txt действительно подойдет всем как основа. Если на форуме работают дополнительные модули и компоненты со своими url, список запретов robots.txt понадобится просто дополнить.

для ЧПУ. Нужны будут только небольшие добавки.

Disallow: /*User
Disallow: /*user

И можно разом отсечь все дубли без ЧПУ

Disallow: /*index.php


Для третьей версии наверно чтото подобное.

Вот вроде для третьей версии

User-agent: *
Disallow: /*?act=module&module=gallery
Disallow: /*?autocom=tags
Disallow: /forum/index.php
Disallow: /forum/index.html
Disallow: /clipart/index.html
Disallow: /*03&id
Disallow: /*lofiversion
Disallow: /*ipbskins.ru
Disallow: /*?s=
Disallow: /*?automodu...
Disallow: /*?act=dscr...
Disallow: /http
Disallow: /banners
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*main.html
Disallow: /*s0.html
Disallow: /*st=
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*Print
Disallow: /*print
Disallow: /forum/user
Disallow: /forum/User
Disallow: /*UserCP&CODE
Disallow: /forum/?
Disallow: /*js
Disallow: /*tags/.html
Disallow: /*style_images
Disallow: /*java
Disallow: /forum/cache
Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?act=dscript
Disallow: /*?Showuser
Disallow: /*?act=act=attach
Disallow: /*?act=act=Attach
Disallow: /*aboutme&mid
Disallow: /*?act=calendar
Disallow: /*?act=Calendar
Disallow: /*?act=login
Disallow: /*?act=Login
Disallow: /*?act=post
Disallow: /*?act=reg
Disallow: /*?act=Reg
Disallow: /*?act=online
Disallow: /*?act=Online
Disallow: /*?act=members
Disallow: /*?act=Members
Disallow: /*?act=help
Disallow: /*?act=Help
Disallow: /*?act=search
Disallow: /*?act=Search
Disallow: /*?act=forward
Disallow: /*?act=Forward
Disallow: /*?act=mail
Disallow: /*?act=Mail
Disallow: /*?act=boardrules
Disallow: /*?act=report
Disallow: /*?act=chat
Disallow: /*?act=msg
Disallow: /*?act=usercp
Disallow: /*?act=Usercp
Disallow: /*?act=profile
Disallow: /*?act=track
Disallow: /*?act=stats
Disallow: /*?act=Stats
Disallow: /*?act=attach
Disallow: /*?act=legends
Disallow: /*?act=mmod
Disallow: /*?act=warn
Disallow: /*?act=task
Disallow: /*?act=findpost
Disallow: /*?act=paysubs
Disallow: /*?&setskin
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*mode=linear
Disallow: /*mode=threaded
Disallow: /*mode=linearplus
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&showtopic
Disallow: /*?showtopic
Disallow: /*&show=nextoldest
Disallow: /*&show=nextnewest
Disallow: /*&show=lastcomment
Disallow: /*&show=newcomment
Disallow: /*&show=comment
Disallow: /*slideshow
Disallow: /*&req=search
Disallow: /*automodule=gallery
Disallow: /*findlink
Disallow: /*reportimage
Disallow: /*postcomment
Disallow: /*req=syndicate
Disallow: /javascript
Disallow: /lofiversion
Host: ipbskins.ru
User-agent: Mediapartners-Google*
Disallow:


Сообщение отредактировал ChristmasNet - 30.3.2010, 15:10


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
hybrid
hybrid
сообщение 28.9.2010, 18:14; Ответить: hybrid
Сообщение #4


Завсегдатай
*****

Группа: Active User
Сообщений: 649
Регистрация: 29.6.2010
Поблагодарили: 127 раз
Репутация:   23  


Если форум находиться в подкаталоге forum, можно ли писать Disallow: /*view=getnewpost$ вот так Disallow: /forum/*view=getnewpost$ ?

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Единый инструмент для аналитики монетизации
0 tehno_music 189 Сегодня, 17:38
автор: tehno_music
Открытая тема (нет новых ответов) В России могут создать "белый VPN" для добросовестных ресурсов
2 seostock 846 Сегодня, 15:01
автор: wertu
Горячая тема (нет новых ответов) Букварикс - бесплатная программа для быстрого подбора ключевых слов
174 Bukvarix 85867 Сегодня, 13:57
автор: ilya_perevalov
Горячая тема (нет новых ответов) TrustMaster 3 - прогрев smtp серверов для 100% инбокса!
31 zennoboss 5928 Сегодня, 12:19
автор: zennoboss
Открытая тема (нет новых ответов) Подбор трастовых доменов для трафика и ваших тем
6 rasul 1354 Сегодня, 10:50
автор: rasul


 



RSS Текстовая версия Сейчас: 21.5.2018, 19:19
Дизайн