X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Разбор полетов с robots.txt объясните пожалуйста, двиг dle
saltov
saltov
Topic Starter сообщение 13.2.2012, 21:54; Ответить: saltov
Сообщение #1


Добрый вечер!Столкнулся с проблемой начал делать новый сайт на dle до этого с данным движком работал как ньюзмейкер.. но новый проект решил делать на нем прописал ключи,добавил новостей и решил добавить в адурилку яше и гуглю... для начала создал файл robots.txt и прописал следующие строки.. но при добавлении в яшу выдавало следующее Сайт не участвует в поиске, так как ранее наш робот получил полный запрет на его индексирование в Вашем файле robots.txt. В настоящий момент запрет отсутствует, сайт уже начал индексироваться и должен появиться в поиске после 1–2 обновлений поисковых баз, после этого сообщение обновится. Что это значит может я что-то не правильно прописал в роботсе ?

Развернуть/Свернуть
User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /favorites/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /uploads/
Disallow: /backup/
Disallow: /images/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://******.ru/sitemap.xml


User-agent: Yandex
Disallow: /*print
Disallow: /user/
Disallow: /favorites/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /uploads/
Disallow: /backup/
Disallow: /images/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=stats
Disallow: /index.php?do=addnews
Disallow: /index.php?subaction=newposts
Sitemap: http://******.ru/sitemap.xml
Host: ******.ru


Сообщение отредактировал WebAction - 13.2.2012, 22:07
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fallup
Fallup
сообщение 13.2.2012, 22:03; Ответить: Fallup
Сообщение #2


А какой robots стоит в DLE по умолчанию, сразу же после установки движка?


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
saltov
saltov
Topic Starter сообщение 13.2.2012, 22:23; Ответить: saltov
Сообщение #3


(Fallup @ 13.2.2012, 21:03) *
А какой robots стоит в DLE по умолчанию, сразу же после установки движка?


Не знаю,я вообще файлик ручками создал...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
install
install
сообщение 13.2.2012, 22:25; Ответить: install
Сообщение #4


(Fallup @ 14.2.2012, 0:03) *
какой robots стоит в DLE по умолчанию

такой
Развернуть/Свернуть
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm


но для каждого параноика все индивидуально составляется, бзыки у всех разные и хотелки тоже.

Сообщение отредактировал install - 13.2.2012, 22:29


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
spavoda
spavoda
сообщение 15.2.2012, 11:24; Ответить: spavoda
Сообщение #5


Проверьте ваш robots на http://webmaster.yandex.ru/robots.xml
я сам нашел таким образом ошибки в своем роботсе, а именно:

заходите на указанную выше страницу, нажимаете "загрузить robots с сайта"
в поле высвечиваются все что у вас там прописано
далее нажимайте кнопочку "проверить"

у меня высветилось сообщеение - такой команды не существуют!!! я в шоке, смотрю на прописанный код - все верно, как и должно быть. жму перепроветить.. тот же результат.
Что было в итоге - когда писал robots в блокноте, он его как то коряво (не в той кодировке) сохранил, поэтому яндекс не мог его прочесть (неправильно читал).
Если у вас таже проблема, пересохраните robots в блокнот++


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
BlooDkh
BlooDkh
сообщение 15.2.2012, 14:22; Ответить: BlooDkh
Сообщение #6


(saltov @ 13.2.2012, 20:54) *
Добрый вечер!Столкнулся с проблемой начал делать новый сайт на dle до этого с данным движком работал как ньюзмейкер.. но новый проект решил делать на нем прописал ключи,добавил новостей и решил добавить в адурилку яше и гуглю... для начала создал файл robots.txt и прописал следующие строки.. но при добавлении в яшу выдавало следующее Сайт не участвует в поиске, так как ранее наш робот получил полный запрет на его индексирование в Вашем файле robots.txt. В настоящий момент запрет отсутствует, сайт уже начал индексироваться и должен появиться в поиске после 1–2 обновлений поисковых баз, после этого сообщение обновится. Что это значит может я что-то не правильно прописал в роботсе ?

Развернуть/Свернуть


Не волнуйся, я сам создал блог месяц назад и получил точно такое же сообщение. Примерно через 2.5 недели оно пропало и мои статьи начали выдаваться в поиске. Я тоже параноил по этому случаю)

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


Сообщение отредактировал BlooDkh - 15.2.2012, 14:23
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) "Извините, что ожидание затянулось, но не думайте, пожалуйста, что мы про вас забыли. Мы заводим задачи по всем обращениям и контролируем работу над ними самым тщательным образом."
Вопрос
0 kuz999 1243 5.2.2024, 14:06
автор: kuz999
Открытая тема (нет новых ответов) Сделаю аудит сайта на максималках. Разбор ошибок и конкурентов. Запишу видео.
Ручной анализ, нахожу ошибки, которые многие не видят
4 bigboy 2211 28.11.2022, 12:10
автор: bigboy
Открытая тема (нет новых ответов) Помогите найти тему пожалуйста
7 virtas 12474 24.7.2020, 17:02
автор: -JamesSmips-
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 79039 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыДайте, пожалуйста, фрагмент кода на джаваскрипте для калькулятора на сайте
3 re-search 1379 7.7.2019, 15:20
автор: web-coder


 



RSS Текстовая версия Сейчас: 19.4.2024, 11:41
Дизайн