X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

> вопрос о robots.txt для wordpress
wasd
wasd
Topic Starter сообщение 21.3.2011, 13:40; Ответить: wasd
Сообщение #1


Нужно как можно быстрей составить robots.txt для wordpress, граждане подскажите пожалуйста что нужно закрыть в файле, чтобы не наделать дублей для поиска.

Понимаю что для каждого сайта файл robots.txt нужен индивидуальный, поэтому просьба подсказать что может в wordpress создать дублирующий контент.

Просьба в поиск не посылать, там уже искал нашел, прочел ничего не понял.

П.С. Поиск по форуму у меня не работа!

Сообщение отредактировал wasd - 21.3.2011, 13:42
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
 
Открыть тему
Ответов (1 - 6)
extezy
extezy
сообщение 21.3.2011, 13:48; Ответить: extezy
Сообщение #2


User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /2009/
Disallow: /2010/

Host: сайт.ру
Sitemap: http://сайт.ру/sitemap.xml


Disallow: /2010/ - архивы.

(wasd @ 21.3.2011, 12:40) *
П.С. Поиск по форуму у меня не работа!

Есть поиск по Google.


--------------------
Дизайнер, музыкант, автогонщик, футболист. Люблю Алену, мамин борщ и пиво с шоколадом.
ZOMRO.COM - держу свои проекты на этом хостинге, рекомендую.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
knaipa
knaipa
сообщение 21.3.2011, 13:49; Ответить: knaipa
Сообщение #3


http://tinyurl.com/4k99k2c первые пять в топе то что нужно
конечно нужно подправить через meta-теги "nofollow" и "noindex" с помощью 5ео плагинов
но я не знаю что из фришных это делает, возможно allinseopack


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wasd
wasd
Topic Starter сообщение 21.3.2011, 13:54; Ответить: wasd
Сообщение #4


А вот такой вопрос у меня есть новости которые разделены тегом MORE. То есть как мне убрать пост полный? (что будет не правильно так как он оптимизирован), или не трогать тем самым создавая дубли так как на главной и других страницах выходят анонсы новостей обрезанные тегом MORE.
Подскажите как тут быть а то я не понимаю этого.


Есть поиск по Google.


Просьба в поиск не посылать, там уже искал нашел, прочел ничего не понял.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
samunris
samunris
сообщение 21.3.2011, 13:58; Ответить: samunris
Сообщение #5


Юзаю на своих ВП сайтах такой robots:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Host: www.site.ru
Sitemap: http://www.site.ru/sitemap.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wasd
wasd
Topic Starter сообщение 21.3.2011, 14:02; Ответить: wasd
Сообщение #6


Как быть с тегом MORE?

Я ведь например на главной обрезал новость по полам и что это получается у меня две верхушки одной новости которые расположены по разным адресам и которые попадут в поиск?

Сообщение отредактировал wasd - 21.3.2011, 14:02
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
htmlkin
htmlkin
сообщение 23.3.2011, 20:29; Ответить: htmlkin
Сообщение #7


(wasd @ 21.3.2011, 13:02) *
Как быть с тегом MORE?

Я ведь например на главной обрезал новость по полам и что это получается у меня две верхушки одной новости которые расположены по разным адресам и которые попадут в поиск?

Вы как-то странно изъясняетесь smile.gif. Если я правильно понял, то Вы интересуетесь будут ли санкции со стороны ПС за нечеткие дубли страниц? Санкций как таковых не наблюдал и не наблюдаю, но дубли стараюсь всегда закрывать через robots.txt Это хорошо по двум причинам:

1) ПС надо определить какая из страниц Вашего сайта наиболее соответствует (релеванта) запросу пользователя и может случиться так, что страница категории или меток может стать таковой вместо нужной Вам.
2) Ваши точки входа (страницы, которые непосредственно оптимизированы для ПС и на которые пользователь попадает из результатов поиска) могут медленнее индексироваться, по причине того, что паук будет обходить намного больше страниц (скажем, страницы категорий, меток и прочее) и у него все никак не будут доходить руки до нужных Вам страниц.

Я прописываю обычно так:
Disallow: /tag/
Disallow: /category/


Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Посоветуйте массажер для спины и шеи
9 Boymaster 866 Сегодня, 13:56
автор: Vmir
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
14 Aloof 3368 Сегодня, 13:50
автор: Vmir
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыЛюблю творить! Статьи для вас
Копирайтинг- моя жизнь!
312 Zoya83 190658 Сегодня, 7:51
автор: DimonX
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыСовременный сервис для быстрого и безопасного обмена валют.
15 CryptoTims 4948 Вчера, 22:32
автор: CryptoTims
Открытая тема (нет новых ответов) Rebex.io – Ваша инновационная платформа для обмена криптовалюты!
2 Rebex 819 Вчера, 20:04
автор: Rebex


 



RSS Текстовая версия Сейчас: 23.4.2024, 20:59
Дизайн