X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> robots.txt для wordpress
Sexxx
Sexxx
Topic Starter сообщение 17.12.2008, 1:22; Ответить: Sexxx
Сообщение #1


Участник
***

Группа: User
Сообщений: 234
Регистрация: 27.3.2008
Поблагодарили: 8 раз
Репутация:   4  


Кто как составляет файл robots.txt для сайтов на базе движка WP ?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
IPixer
IPixer
сообщение 17.12.2008, 1:29; Ответить: IPixer
Сообщение #2


Новичок
*

Группа: Viewer
Сообщений: 7
Регистрация: 16.12.2008
Из: Россия, Волгоград
Поблагодарили: 4 раза
Репутация:   0  


А нужно ли?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
strel
strel
сообщение 17.12.2008, 1:31; Ответить: strel
Сообщение #3


Динозавр
*****

Группа: Active User
Сообщений: 887
Регистрация: 9.2.2008
Из: Москва
Поблагодарили: 128 раз
Репутация:   34  


(Sexxx @ 17.12.2008, 0:22) *
Кто как составляет файл robots.txt для сайтов на базе движка WP ?


http://news.pooisk.com/robots.txt

(IPixer @ 17.12.2008, 0:29) *
А нужно ли?


Желательно))) вообще любые сайты без роботс существуют отлично! Но с файлом всё же лучше!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
COJIOMOH
COJIOMOH
сообщение 17.12.2008, 4:09; Ответить: COJIOMOH
Сообщение #4


Бывалый
****

Группа: User
Сообщений: 453
Регистрация: 8.11.2008
Поблагодарили: 121 раз
Репутация:   23  


(Sexxx @ 17.12.2008, 0:22) *
Кто как составляет файл robots.txt для сайтов на базе движка WP ?

Насколько я знаю файл robots.txt непривявзан к движку. Он один есть и будет happy.gif только функции несёт разные
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
DarkByte
DarkByte
сообщение 17.12.2008, 8:53; Ответить: DarkByte
Сообщение #5


Бывалый
****

Группа: User
Сообщений: 491
Регистрация: 24.5.2008
Из: Челябинск
Поблагодарили: 63 раза
Репутация:   13  


(COJIOMOH @ 17.12.2008, 4:09) *
Насколько я знаю файл robots.txt непривявзан к движку. Он один есть и будет happy.gif только функции несёт разные

Он не привязан, но его содержимое связано с движком, т.к. для своего движка, свои запреты, вот пример robots.txt для WP:
User-agent: *
Disallow: /wp-admin.php
Disallow: /xmlrpc.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: домен


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
DarkByte
DarkByte
сообщение 17.12.2008, 9:04; Ответить: DarkByte
Сообщение #6


Бывалый
****

Группа: User
Сообщений: 491
Регистрация: 24.5.2008
Из: Челябинск
Поблагодарили: 63 раза
Репутация:   13  


(IPixer @ 17.12.2008, 1:29) *
А нужно ли?

Нужен. Например директива Host поможет защитить сайт от зазеркаливания. А Disallow/Allow укажут поисковому роботу, какие страницы нужно скачивать, а какие нет. Рассмотрю небольшой пример с форумом SMF, в теме, каждое сообщение имеет свою ссылку, например: index.php?topic=156.msg478#msg478 и index.php?topic=156.msg536#msg536, ссылки с виду отличаются и для поисковых ботов они будут считаться разными, но на деле они отобразят одну и туже информацию, а не все поисковики к одинаковым страницам относятся одинаково, яндекс например из них оставит в индексе только одну... Думаю понятно почему это будет плохо. Так же стоит запрещать индексацию тех страниц, которые в выдаче не должны появляться, например формы регистрации, добавления нового сообщения, обратной связи и тд.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
fc-spartac
fc-spartac
сообщение 19.12.2008, 15:12; Ответить: fc-spartac
Сообщение #7


Бывалый
****

Группа: User
Сообщений: 447
Регистрация: 28.11.2008
Из: Астрахань
Поблагодарили: 47 раз
Репутация:   13  


(DarkByte @ 17.12.2008, 7:53) *
вот пример robots.txt для WP:

А есть robots.txt ещё для DLE?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
sergsam1
sergsam1
сообщение 19.12.2008, 15:30; Ответить: sergsam1
Сообщение #8


Бывалый
****

Группа: User
Сообщений: 275
Регистрация: 18.10.2008
Поблагодарили: 20 раз
Репутация:   2  


у меня такой вот:

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Host: site.ru
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /comments/feed/
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
fc-spartac
fc-spartac
сообщение 19.12.2008, 16:41; Ответить: fc-spartac
Сообщение #9


Бывалый
****

Группа: User
Сообщений: 447
Регистрация: 28.11.2008
Из: Астрахань
Поблагодарили: 47 раз
Репутация:   13  


а что означает User-agent: * ??
Вместо * надо что-нибудь вводить?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wildshaman
wildshaman
сообщение 19.12.2008, 16:42; Ответить: wildshaman
Сообщение #10


Завсегдатай
*****

Группа: Active User
Сообщений: 624
Регистрация: 17.3.2008
Из: Мурманск
Поблагодарили: 89 раз
Репутация:   38  


(fc-spartac @ 19.12.2008, 15:41) *
а что означает User-agent: * ??
Вместо * надо что-нибудь вводить?


нет, в этом случае правило действует для всех поисковиков.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Azinomoney.com - гемблинг-партнерка с 65%RS для каждого
Гарантированный заработок на гемблинг-трафике
22 AzinoMoney 5645 Сегодня, 12:31
автор: AzinoMoney
Открытая тема (нет новых ответов) В России могут создать "белый VPN" для добросовестных ресурсов
6 seostock 1376 Сегодня, 12:30
автор: Kenzano
Открытая тема (нет новых ответов) Посоветуйте недорогие хостинги для вп
24 websitedesign 3867 Сегодня, 12:29
автор: scanread
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыGoldenGoose - лучший wap-click проект для твоего трафика!
15 Alex_Berger 3309 Вчера, 19:39
автор: Alex_Berger
Открытая тема (нет новых ответов) Нужен Шаблон Excel для генерации .doc файлов
3 rokot 371 Вчера, 13:34
автор: scanread


 



RSS Текстовая версия Сейчас: 21.6.2018, 12:41
Дизайн