X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Идеальный robots.txt, Что закрывать от индексации, а что нет?
zippo88
zippo88
Topic Starter сообщение 1.11.2012, 10:16; Ответить: zippo88
Сообщение #1


Бывалый
****

Группа: User
Сообщений: 304
Регистрация: 12.9.2011
Из: Киров
Поблагодарили: 53 раза
Репутация:   8  


Сейчас стоит следующее, подскажите, что еще нужно закрыть? Мне кажется, что у меня достаточно много дублей.

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: */attachment/
Sitemap: http://tvoipolet.ru/sitemap.xml
Host: tvoipolet.ru
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
SoulBreaker
SoulBreaker
сообщение 1.11.2012, 11:02; Ответить: SoulBreaker
Сообщение #2


Участник
***

Группа: User
Сообщений: 248
Регистрация: 17.10.2012
Поблагодарили: 96 раз
Репутация:   20  


Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-admin
Disallow: /navigator
Disallow: /navigator/
Disallow: /wp-includes
Disallow: /xmlrpc.php
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /comments
Disallow: /trackback/
Disallow: /page/*
Disallow: /tag/
Disallow: /feed/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: */*/feed
Disallow: /*?*
Disallow: /?feed=
Disallow: /?s=
Host: сайт.ру
Sitemap: http://сайт.ру/sitemap.xml


Сообщение отредактировал SoulBreaker - 1.11.2012, 11:02
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 1.11.2012, 11:06; Ответить: jack
Сообщение #3


----------------
*******

Группа: Super Moderator
Сообщений: 7863
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10734 раза
Репутация:   591  


zippo88, неужели так сложно поиск поюзать? Тема сто раз уже обсуждалась.
Иногда и в правила полезно заглянуть:
Пользователям, имеющим все права для постинга в тематические разделы, запрещается создавать темы в этом разделе. В противном случае тема будет перенесена в соответствующий тематический раздел, а нарушитель получит предупреждение (+10%). В случае повторного нарушения правил раздела последует недельный запрет на постинг или бан.


Сообщение отредактировал jack - 1.11.2012, 11:06
Причина редактирования: add


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47481 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 508 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) В файле robots.txt сайта задана противоречивая директива Host
5 RMak 1191 26.9.2017, 13:16
автор: kstnews
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 619 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 696 1.3.2017, 3:20
автор: regem


 



RSS Текстовая версия Сейчас: 15.12.2017, 1:14
Дизайн