X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> помогите с robots.txt
medved112
medved112
Topic Starter сообщение 8.1.2009, 11:24; Ответить: medved112
Сообщение #1


в общем проиндексировался вчера сайт яндексом,вылезло 7 ошибок
6 ошибок об rss "Формат документа не поддерживается"
1 ошибка "Документ запрещен в файле robots.txt" и файл /wp-includes/wlwmanifest.xml ,а такого вообще нет,что это?

Сам роботс:

User-agent: Yandex
Allow: /
Sitemap: http://site.ru/sitemap.xml
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Host: site.ru
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /comments/feed/
Disallow: /feed/
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/


делал его из советов на форуме,уже поднималась тема про роботс для ВП,не зря ли запрещаеться /wp-content/ папка? 

Сообщение отредактировал medved112 - 8.1.2009, 11:28


--------------------
фыр фыр
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 18:36; Ответить: medved112
Сообщение #2


Нужели никто не поможет с проблемой? =/


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
nikito_su
nikito_su
сообщение 8.1.2009, 18:54; Ответить: nikito_su
Сообщение #3


В чем сообствено вопрос?

6 ошибок об rss "Формат документа не поддерживается" <= Лично у меня Яндекс всегда ругаеться на rss-ленты, такчто нечего страшного.Чтобы небыло в РОБОТСе запрети на индексацию ленты.
1 ошибка "Документ запрещен в файле robots.txt" и файл /wp-includes/wlwmanifest.xml <= правильно у тебя же в РОБОТС указан запрет на все что в папке wp-includes (Disallow: /wp-includes/)

И внимательно папку посмотри /wp-includes/ у меня лично всегда был wlwmanifest.xml . Но одно немогу понят как у тебя яндекс до него добрался.Посмотри может шаблон карявый или может где ошибки выскакивают.И мне кажеться это както может быть связано с rss-лентами.Во первых у меня со стандартным шаблоном всего 2 ошибки вылазит(т.е 1 ошибка на 1 rss ленту,а их там 2)!Во вторых библиотеки для создание ленты находяться в одно и тойже папки что и wlwmanifest.xml

Сообщение отредактировал nikito_su - 8.1.2009, 19:02


--------------------
Приложения вКонтакте:Плеер+Радио -> Онлайн ТВ -> Гороскоп!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 19:23; Ответить: medved112
Сообщение #4


в том то и дело,я тоже удивился почему он дошел до него если Disallow: /wp-includes/ ,все посмотрел,нуту такого файла wlwmanifest.xml,что это вообще и как его тогда можно создать если он нужен. Шаблон то тут причем,это же не content папка,вроде все работает отлично у блога,переключался на дефолтный,все равно файла нет.
и еще раз спрошу нужно ли запрещать к индексации /wp-content/ ?

да и на счет rss?ошибки идут из тойже запрещенной /wp-includes/
/?feed=rss2
/?feed=rss2&p=209
/?feed=rss2&p=221
/?feed=rss2&p=224
/?feed=rss2&p=227
и вот такая тоже не знаю что это
/xmlrpc.php?rsd

Сообщение отредактировал medved112 - 8.1.2009, 19:36


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Lix
Lix
сообщение 8.1.2009, 19:35; Ответить: Lix
Сообщение #5


и еще раз спрошу нужно ли запрещать к индексации /wp-content/ ?

Запрещай. Контента в это папке нет, в блогах обычно нет ссылок вида: _http://блог.ру/wp-content/1.html, или я не прав?
Я с WP дружу плохо, но на своих сайтах в ДЛЕ запретил индексацию всех папок движка, кроме "templates", даже папку Сапы запретил smile.gif

Сообщение отредактировал Lix - 8.1.2009, 19:40


--------------------
Большой брат следит за тобой!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
nikito_su
nikito_su
сообщение 8.1.2009, 19:40; Ответить: nikito_su
Сообщение #6


Вот тут в блоге написано как приваильно настраивать _http://blogproblog.com/tag/robotstxt/
и в следствие можно но только отдельные папки в wp-content


--------------------
Приложения вКонтакте:Плеер+Радио -> Онлайн ТВ -> Гороскоп!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 20:25; Ответить: medved112
Сообщение #7


что то не открываеться сайт =/


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
zalex
zalex
сообщение 8.1.2009, 20:47; Ответить: zalex
Сообщение #8


Да запрещай все кроме страниц и папок на которых есть контент и все. А запретишь папку соответстенно дальше робот не пойдет. Кстати если в роботсе запретить Яша пишет ошибку если папка запрещена к индексации а на сайте есть ссылки на файл из этой папки например: запрещена папка engine ссылка через лич /engine/go.php?url=aHR0cDovL3d3dy5kaXhpcy5yd и Яша тоже будет выдавать ошибку раз ему туда ходу нет. А в твое случае просто есть где-то ссылка на этот файл и Яша ее схавал отсюда ошибка забей и все smile.gif


--------------------
Зачем иметь подпись если ее могут легко убрать не спросив у вас.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
Topic Starter сообщение 8.1.2009, 21:41; Ответить: medved112
Сообщение #9


Т.е. получаеться главная страница ссылаеться на rss,который запрещен к индексации,яша видит ссылку но не может ее найти и говорит об ошибке?Я так понял,поправте если не то говорю..
Значит не нудо закрывать саму rss?
/wp-rss.php
/wp-rss2.php


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wesol
wesol
сообщение 8.1.2009, 21:57; Ответить: wesol
Сообщение #10


6 ошибок об rss "Формат документа не поддерживается"

возможно хеадр кривой..

header("content-type: application/xhtml+xml");
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Помогите вспомнить рекламного бота Телеграм для обмена рекламой
0 Mixatraider 725 21.2.2024, 23:42
автор: Mixatraider
Открытая тема (нет новых ответов) Помогите рещить проблему с монитором.
Почему низкое разрешение при подключении монитора через displayport?
0 Levels 1702 11.12.2020, 0:48
автор: Levels
Открытая тема (нет новых ответов) Помогите кто нибудь получить партнерку Росбанк!
7 heisenberg_mw 2340 7.8.2020, 9:28
автор: heisenberg_mw
Открытая тема (нет новых ответов) Помогите найти тему пожалуйста
7 virtas 12483 24.7.2020, 17:02
автор: -JamesSmips-
Открытая тема (нет новых ответов) Помогите с поиском доноров
3 tehno_music 3354 4.11.2019, 17:15
автор: goblin78


 



RSS Текстовая версия Сейчас: 19.4.2024, 22:11
Дизайн