Помощник
 |
|
|
|
|
Сообщение сайта
|
 robots.txt |
Palundra
|
Сообщение
#1
|
||
 Старожил  Группа: Active User Сообщений: 2146 Регистрация: 21.2.2011 Из: Россия Поблагодарили: 447 раз Репутация:  79 
 |
|
||
 |
|
||
|
jack
|
 6.12.2011, 23:50;
Ответить: jack
Сообщение
#2
|
 ---------------- Группа: Administrator Сообщений: 8177 Регистрация: 22.3.2009 Из: глины Поблагодарили: 11555 раз Репутация: 615
|
Palundra, я ещё и /wp-content/uploads закрываю
Тут смотря какая структура у сайта. -------------------- |
|
|
|
|
bat
|
8.12.2011, 6:19;
Ответить: bat
Сообщение
#3
|
 Участник Группа: User Сообщений: 136 Регистрация: 8.9.2010 Поблагодарили: 16 раз Репутация: 4
|
У меня еще такие записи:
Disallow: /cgi-bin Disallow: /wp-content/cache -------------------- |
|
|
|
|
install
|
8.12.2011, 6:26;
Ответить: install
Сообщение
#4
|
 Яндекс ЛОХ 
 Группа: Active User Сообщений: 3530 Регистрация: 28.5.2009 Из: Нижневартовска Поблагодарили: 1377 раз Репутация: 201
|
(bat @ 8.12.2011, 8:19)  /cgi-bin а для чего эта папка? Всегда ее удаляю, может не надо? -------------------- |
|
|
|
|
bat
|
8.12.2011, 7:00;
Ответить: bat
Сообщение
#5
|
|
Участник Группа: User Сообщений: 136 Регистрация: 8.9.2010 Поблагодарили: 16 раз Репутация: 4
|
(install @ 8.12.2011, 6:26) а для чего эта папка? Всегда ее удаляю, может не надо? Если php работает под apache то она не нужна, а если php в режиме cgi, то она нужна т.к. служит для хранения серверных скриптов. Закрываю от ботов пс потому что основные поисковики индексируют cgi-скрипты и иногда ставят их релевантнее страниц сайта. Сообщение отредактировал bat - 8.12.2011, 7:04 -------------------- |
|
|
|
|
mark3000
|
8.12.2011, 10:39;
Ответить: mark3000
Сообщение
#6
|
 Завсегдатай Группа: User Сообщений: 508 Регистрация: 17.12.2009 Поблагодарили: 56 раз Репутация: 3
|
Может конечно глупо, но я еще и страницы и теги (page, tags) закрываю. То есть остаются только посты и категории + sitemap надо прописать если есть.
-------------------- |
|
|
|
stundr
|
9.12.2011, 15:07;
Ответить: stundr
Сообщение
#7
|
|
Новичок Группа: User Сообщений: 25 Регистрация: 21.11.2011 Поблагодарили: 1 раз Репутация: 0
|
а подскажите как должен выглядеть robots.txt для вордпресс со стандартной схемой ссылок site.ru/?p=5170
я вот думаю, если закрывать, теги, архивы, категории, то что же будет индексировать яндекс? записи же находятся в категориях/архивах. Сообщение отредактировал stundr - 9.12.2011, 15:09 -------------------- |
|
|
|
|
Bagdadn
|
11.12.2011, 12:31;
Ответить: Bagdadn
Сообщение
#8
|
|
|
Новичок Группа: User Сообщений: 23 Регистрация: 6.12.2011 Поблагодарили: 11 раз Репутация: 0
|
Надо из первого примера убрать:Disallow: /*?* и Disallow: /*?
|
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ |
138 | Akira | 79032 | 12.8.2019, 21:28 автор: neonix |
 |
Куплю места для размещения TXT+URL Строительная тематика. | 7 | regem | 7641 | 28.3.2019, 18:31 автор: regem |
|
Срочно требуется специалист по robots.txt Разовая работа |
1 | tankoff | 2203 | 8.3.2017, 1:56 автор: PavelMarty |
|
Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики. | 0 | regem | 8345 | 1.3.2017, 3:20 автор: regem |
|
Работы по файлу robots.txt | 8 | tankoff | 3707 | 19.3.2016, 20:02 автор: tankoff |
|
Текстовая версия | Сейчас: 18.4.2024, 21:19 |
