X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Проблемы с роботс.тхт, Гугл. веб мастер бьет тривогу!
Addy
Addy
Topic Starter сообщение 10.12.2011, 2:24; Ответить: Addy
Сообщение #1


Мошенник
******

Группа: Banned
Сообщений: 1089
Регистрация: 3.1.2011
Поблагодарили: 194 раза
Репутация:   108  


Приветствую!

Собственно проблема такая, у меня почти на всех сайтах выскочила вот такая вот ошибочка - "Обнаружены серьезные ошибки, связанные с состоянием сайта" (В гугл веб мастер)

Пишет следующее:


Блокирует ли файл robots.txt важные страницы? - Некоторые важные страницы блокируются в файле robots.txt.
Смотрю роботс... ошибок вроде бы нет.

Братья по оружию,гляньте пожалуйста, в чем косяк то? или чего то не понимаю?

User-agent: YandexBlog
Disallow:

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /go.php
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: ********.ru

User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /go.php
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=

Sitemap: http://******.ru/sitemap.xml


P.s Какой правильный роботс для Wp? (Не главный вопрос)
Заранее благодарю за "разжованые" комментарии в теме biggrin.gif


--------------------
Мошенник
-1
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
nshop
nshop
сообщение 10.12.2011, 4:15; Ответить: nshop
Сообщение #2


Новичок
*


Группа: User
Сообщений: 20
Регистрация: 26.9.2010
Поблагодарили: 2 раза
Репутация:   0  


Себе ставил так, вроде все работало норм.

User-agent: *
Disallow: /archives/
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-content/cache
Disallow: /category
Disallow: /comments
Disallow: /search/
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /tag/
Disallow: /wp-admin
Host: домен.ком

User-agent: Yandex
Disallow: /archives/
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-content/cache
Disallow: /category
Disallow: /comments
Disallow: /search/
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /tag/
Disallow: /wp-admin
Host: домен.ком

Sitemap: http://домен.ком/sitemap.xml

Сообщение отредактировал nshop - 10.12.2011, 4:20


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Juror
Juror
сообщение 27.12.2011, 22:55; Ответить: Juror
Сообщение #3


Новичок
*

Группа: User
Сообщений: 19
Регистрация: 28.8.2010
Поблагодарили: 4 раза
Репутация:   1  


Мой вариант, вроде тоже все в норме работает.

User-agent: Yandex
Disallow: /wp-*
Disallow: /trackback/
Disallow: /feed/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /img/
Disallow: /tag/
Disallow: /video/
Disallow: /files/
Disallow: /audio/
Disallow: /scripts/
Disallow: /iscookie.php
Disallow: /ok.php
Disallow: /index.*

User-agent: *
Disallow: /wp-*
Disallow: /trackback/
Disallow: /feed/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /img/
Disallow: /tag/
Disallow: /video/
Disallow: /files/
Disallow: /audio/
Disallow: /scripts/
Disallow: /iscookie.php
Disallow: /ok.php
Disallow: /index.*

Host: домен.ком
Sitemap: http://домен.ком/sitemap.xml


Маленькое дополнение. Строчка кода
Disallow: /wp-*

заменит Вам целых 5
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-content/cache
Disallow: /wp-admin
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
TaKTuK
TaKTuK
сообщение 28.12.2011, 14:51; Ответить: TaKTuK
Сообщение #4


Новичок
*


Группа: User
Сообщений: 17
Регистрация: 19.12.2011
Из: Полевской
Поблагодарили: 2 раза
Репутация:   0  


а для чего делать отдельно для Яндекса столбик? Просто * не действует на яшу?...просто в яшу загнать не могу сайт...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Juror
Juror
сообщение 28.12.2011, 23:48; Ответить: Juror
Сообщение #5


Новичок
*

Группа: User
Сообщений: 19
Регистрация: 28.8.2010
Поблагодарили: 4 раза
Репутация:   1  


(TaKTuK @ 28.12.2011, 13:51) *
а для чего делать отдельно для Яндекса столбик? Просто * не действует на яшу?...просто в яшу загнать не могу сайт...

Яша звездочку различает, но советы бывалых гласят что лучше прописать отдельно правила (пусть даже идентичные общим). Ввиду малого опыта дать отзыв о том какой вариант лучше не берусь. На тех немногих сайтах что у меня есть, для Яндекса в роботс.тхт прописаны отдельные правила. Игнор с боку Яши замечен не был (тфу...3 раза). Правда через 2..3 недели после начала работы вручную ставлю до 10 ссылок с трастовых блогов сродной тематики +1...3 твита (с разных акков). Дальше продвигать ссылочным начинаю осторожно после достижения возроста +3 мес.

PS. Забыл уточнить - тематики не комерческие, СЯ состоит из НЧ.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
codename65
codename65
сообщение 17.1.2012, 9:37; Ответить: codename65
Сообщение #6


Завсегдатай
*****

Группа: Active User
Сообщений: 691
Регистрация: 15.9.2010
Из: Урал
Поблагодарили: 165 раз
Репутация:   26  


А в панели же ссылки показаны какие страницы блокируются их и сравнить с роботом у меня такое было когда закрыл страницы из индекса


--------------------
Автоматический сервис по раскрутке в социальных сетях
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Nonsys
Nonsys
сообщение 24.1.2012, 4:40; Ответить: Nonsys
Сообщение #7


Бывалый
****

Группа: User
Сообщений: 437
Регистрация: 18.1.2012
Из: Украина
Поблагодарили: 279 раз
Репутация:   92  


Вполне такого хватает

User-Agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /wp-content/themes/BlogPost/footer.php

Host: мой сайт
Sitemap: мой сайт/sitemap.xml


Сообщение отредактировал Nonsys - 24.1.2012, 4:41
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Проблемы с merchant.webmoney.ru
4 deather 577 12.10.2017, 15:46
автор: phoenix_kys
Открытая тема (нет новых ответов) Проблемы с Kazapa
4 baracuda 1388 29.6.2015, 22:21
автор: baracuda


 



RSS Текстовая версия Сейчас: 15.12.2017, 20:23
Дизайн