X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> помогите с robots.txt
medved112
medved112
Topic Starter сообщение 8.1.2009, 11:24; Ответить: medved112
Сообщение #1


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


в общем проиндексировался вчера сайт яндексом,вылезло 7 ошибок
6 ошибок об rss "Формат документа не поддерживается"
1 ошибка "Документ запрещен в файле robots.txt" и файл /wp-includes/wlwmanifest.xml ,а такого вообще нет,что это?

Сам роботс:

User-agent: Yandex
Allow: /
Sitemap: http://site.ru/sitemap.xml
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Host: site.ru
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /comments/feed/
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/


делал его из советов на форуме,уже поднималась тема про роботс для ВП,не зря ли запрещаеться /wp-content/ папка? 

Сообщение отредактировал medved112 - 8.1.2009, 11:28


--------------------
фыр фыр
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 18:36; Ответить: medved112
Сообщение #2


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Нужели никто не поможет с проблемой? =/


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
nikito_su
nikito_su
сообщение 8.1.2009, 18:54; Ответить: nikito_su
Сообщение #3


Участник
***

Группа: User
Сообщений: 176
Регистрация: 21.6.2008
Из: Новосибирск
Поблагодарили: 30 раз
Репутация:   6  


В чем сообствено вопрос?

6 ошибок об rss "Формат документа не поддерживается" <= Лично у меня Яндекс всегда ругаеться на rss-ленты, такчто нечего страшного.Чтобы небыло в РОБОТСе запрети на индексацию ленты.
1 ошибка "Документ запрещен в файле robots.txt" и файл /wp-includes/wlwmanifest.xml <= правильно у тебя же в РОБОТС указан запрет на все что в папке wp-includes (Disallow: /wp-includes/)

И внимательно папку посмотри /wp-includes/ у меня лично всегда был wlwmanifest.xml . Но одно немогу понят как у тебя яндекс до него добрался.Посмотри может шаблон карявый или может где ошибки выскакивают.И мне кажеться это както может быть связано с rss-лентами.Во первых у меня со стандартным шаблоном всего 2 ошибки вылазит(т.е 1 ошибка на 1 rss ленту,а их там 2)!Во вторых библиотеки для создание ленты находяться в одно и тойже папки что и wlwmanifest.xml

Сообщение отредактировал nikito_su - 8.1.2009, 19:02


--------------------
Приложения вКонтакте:Плеер+Радио -> Онлайн ТВ -> Гороскоп!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 19:23; Ответить: medved112
Сообщение #4


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


в том то и дело,я тоже удивился почему он дошел до него если Disallow: /wp-includes/ ,все посмотрел,нуту такого файла wlwmanifest.xml,что это вообще и как его тогда можно создать если он нужен. Шаблон то тут причем,это же не content папка,вроде все работает отлично у блога,переключался на дефолтный,все равно файла нет.
и еще раз спрошу нужно ли запрещать к индексации /wp-content/ ?

да и на счет rss?ошибки идут из тойже запрещенной /wp-includes/
/?feed=rss2
/?feed=rss2&p=209
/?feed=rss2&p=221
/?feed=rss2&p=224
/?feed=rss2&p=227
и вот такая тоже не знаю что это
/xmlrpc.php?rsd

Сообщение отредактировал medved112 - 8.1.2009, 19:36


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Lix
Lix
сообщение 8.1.2009, 19:35; Ответить: Lix
Сообщение #5


Dancing king :P
*****

Группа: Active User
Сообщений: 709
Регистрация: 15.4.2008
Поблагодарили: 186 раз
Репутация:   42  


и еще раз спрошу нужно ли запрещать к индексации /wp-content/ ?

Запрещай. Контента в это папке нет, в блогах обычно нет ссылок вида: _http://блог.ру/wp-content/1.html, или я не прав?
Я с WP дружу плохо, но на своих сайтах в ДЛЕ запретил индексацию всех папок движка, кроме "templates", даже папку Сапы запретил smile.gif

Сообщение отредактировал Lix - 8.1.2009, 19:40


--------------------
Большой брат следит за тобой!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
nikito_su
nikito_su
сообщение 8.1.2009, 19:40; Ответить: nikito_su
Сообщение #6


Участник
***

Группа: User
Сообщений: 176
Регистрация: 21.6.2008
Из: Новосибирск
Поблагодарили: 30 раз
Репутация:   6  


Вот тут в блоге написано как приваильно настраивать _http://blogproblog.com/tag/robotstxt/
и в следствие можно но только отдельные папки в wp-content


--------------------
Приложения вКонтакте:Плеер+Радио -> Онлайн ТВ -> Гороскоп!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 20:25; Ответить: medved112
Сообщение #7


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


что то не открываеться сайт =/


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
zalex
zalex
сообщение 8.1.2009, 20:47; Ответить: zalex
Сообщение #8


Бывалый
****

Группа: User
Сообщений: 442
Регистрация: 26.5.2008
Из: nulled.ws
Поблагодарили: 143 раза
Репутация:   26  


Да запрещай все кроме страниц и папок на которых есть контент и все. А запретишь папку соответстенно дальше робот не пойдет. Кстати если в роботсе запретить Яша пишет ошибку если папка запрещена к индексации а на сайте есть ссылки на файл из этой папки например: запрещена папка engine ссылка через лич /engine/go.php?url=aHR0cDovL3d3dy5kaXhpcy5yd и Яша тоже будет выдавать ошибку раз ему туда ходу нет. А в твое случае просто есть где-то ссылка на этот файл и Яша ее схавал отсюда ошибка забей и все smile.gif


--------------------
Зачем иметь подпись если ее могут легко убрать не спросив у вас.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 21:41; Ответить: medved112
Сообщение #9


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Т.е. получаеться главная страница ссылаеться на rss,который запрещен к индексации,яша видит ссылку но не может ее найти и говорит об ошибке?Я так понял,поправте если не то говорю..
Значит не нудо закрывать саму rss?
/wp-rss.php
/wp-rss2.php


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wesol
wesol
сообщение 8.1.2009, 21:57; Ответить: wesol
Сообщение #10


Участник
***

Группа: User
Сообщений: 129
Регистрация: 4.11.2007
Из: Warszawa
Поблагодарили: 27 раз
Репутация:   5  


6 ошибок об rss "Формат документа не поддерживается"

возможно хеадр кривой..

header("content-type: application/xhtml+xml");
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Помогите выбрать программу
Помогите выбрать программу
11 impak 1328 11.12.2017, 13:11
автор: Mikki
Открытая тема (нет новых ответов) Помогите найти плагин на WP
Отзывы с профилей соц сетей
1 SEOMR 430 30.11.2017, 7:18
автор: Nell
Открытая тема (нет новых ответов) Помогите найти проблему
Долгий ответ сервера
6 maxim1249 675 29.11.2017, 17:27
автор: genjnat
Открытая тема (нет новых ответов) Помогите оценить новотник. Плиз
1 Alex-777 514 29.11.2017, 7:18
автор: grumdas
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47441 28.11.2017, 1:05
автор: Akira


 



RSS Текстовая версия Сейчас: 13.12.2017, 2:12
Дизайн