X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> вопрос о robots.txt для wordpress
wasd
wasd
Topic Starter сообщение 21.3.2011, 13:40; Ответить: wasd
Сообщение #1


Нужно как можно быстрей составить robots.txt для wordpress, граждане подскажите пожалуйста что нужно закрыть в файле, чтобы не наделать дублей для поиска.

Понимаю что для каждого сайта файл robots.txt нужен индивидуальный, поэтому просьба подсказать что может в wordpress создать дублирующий контент.

Просьба в поиск не посылать, там уже искал нашел, прочел ничего не понял.

П.С. Поиск по форуму у меня не работа!

Сообщение отредактировал wasd - 21.3.2011, 13:42
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
extezy
extezy
сообщение 21.3.2011, 13:48; Ответить: extezy
Сообщение #2


User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /2009/
Disallow: /2010/

Host: сайт.ру
Sitemap: http://сайт.ру/sitemap.xml


Disallow: /2010/ - архивы.

(wasd @ 21.3.2011, 12:40) *
П.С. Поиск по форуму у меня не работа!

Есть поиск по Google.


--------------------
Дизайнер, музыкант, автогонщик, футболист. Люблю Алену, мамин борщ и пиво с шоколадом.
ZOMRO.COM - держу свои проекты на этом хостинге, рекомендую.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
knaipa
knaipa
сообщение 21.3.2011, 13:49; Ответить: knaipa
Сообщение #3


http://tinyurl.com/4k99k2c первые пять в топе то что нужно
конечно нужно подправить через meta-теги "nofollow" и "noindex" с помощью 5ео плагинов
но я не знаю что из фришных это делает, возможно allinseopack


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wasd
wasd
Topic Starter сообщение 21.3.2011, 13:54; Ответить: wasd
Сообщение #4


А вот такой вопрос у меня есть новости которые разделены тегом MORE. То есть как мне убрать пост полный? (что будет не правильно так как он оптимизирован), или не трогать тем самым создавая дубли так как на главной и других страницах выходят анонсы новостей обрезанные тегом MORE.
Подскажите как тут быть а то я не понимаю этого.


Есть поиск по Google.


Просьба в поиск не посылать, там уже искал нашел, прочел ничего не понял.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
samunris
samunris
сообщение 21.3.2011, 13:58; Ответить: samunris
Сообщение #5


Юзаю на своих ВП сайтах такой robots:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Host: www.site.ru
Sitemap: http://www.site.ru/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wasd
wasd
Topic Starter сообщение 21.3.2011, 14:02; Ответить: wasd
Сообщение #6


Как быть с тегом MORE?

Я ведь например на главной обрезал новость по полам и что это получается у меня две верхушки одной новости которые расположены по разным адресам и которые попадут в поиск?

Сообщение отредактировал wasd - 21.3.2011, 14:02
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
htmlkin
htmlkin
сообщение 23.3.2011, 20:29; Ответить: htmlkin
Сообщение #7


(wasd @ 21.3.2011, 13:02) *
Как быть с тегом MORE?

Я ведь например на главной обрезал новость по полам и что это получается у меня две верхушки одной новости которые расположены по разным адресам и которые попадут в поиск?

Вы как-то странно изъясняетесь smile.gif. Если я правильно понял, то Вы интересуетесь будут ли санкции со стороны ПС за нечеткие дубли страниц? Санкций как таковых не наблюдал и не наблюдаю, но дубли стараюсь всегда закрывать через robots.txt Это хорошо по двум причинам:

1) ПС надо определить какая из страниц Вашего сайта наиболее соответствует (релеванта) запросу пользователя и может случиться так, что страница категории или меток может стать таковой вместо нужной Вам.
2) Ваши точки входа (страницы, которые непосредственно оптимизированы для ПС и на которые пользователь попадает из результатов поиска) могут медленнее индексироваться, по причине того, что паук будет обходить намного больше страниц (скажем, страницы категорий, меток и прочее) и у него все никак не будут доходить руки до нужных Вам страниц.

Я прописываю обычно так:
Disallow: /tag/
Disallow: /category/


Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Rebex.io – Ваша инновационная платформа для обмена криптовалюты!
1 Rebex 648 Вчера, 11:50
автор: Rebex
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
11 Aloof 2795 16.4.2024, 12:48
автор: diviner99
Горячая тема (нет новых ответов) Betatransfer.net - прием платежей для HIGH RISK проектов, интернет эквайринг и мерчант онлайн оплат
54 arendator 34815 15.4.2024, 15:16
автор: arendator
Горячая тема (нет новых ответов) ⭕Антидетект браузер AdsPower для эффективной работы с мультиаккаунтами!
83 AdsPower 24398 14.4.2024, 22:52
автор: AdsPower
Горячая тема (нет новых ответов) Настройки лент для wpgrabber
Настрою ленты любой сложности плагина WPGrabber для WordPress
42 zkalinin 30556 11.4.2024, 23:33
автор: zkalinin


 



RSS Текстовая версия Сейчас: 18.4.2024, 11:18
Дизайн