X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V  < 1 2
Открыть тему
Добавить ответ в эту тему
> Проблемы при переезде с HTTP на HTTPS (Data Life Engine), robots.txt не найден / отвечает редиректом!
novrek
novrek
Topic Starter сообщение 11.1.2017, 2:51; Ответить: novrek
Сообщение #11


мошенник
**

Группа: Banned
Сообщений: 61
Регистрация: 2.2.2016
Поблагодарили: 7 раз
Репутация:   -2  


MacLeo,

Так, эти ссылки же закомментированы , они не активны. Разве нет?

В настройках системы(в админке) указан адрес https://сайт.ру/

В роботс указано так: (сейчас отредактировал)
Host: сайт.ru
Sitemap: https://сайт.ру/sitemap.xml

В админке DLE раздел Карта сайта для Google и Yandex нажал обновить файл карты сайта / уведомить поисковые системы

Инструмент проверки файла robots.txt в гугле показал:

Код
User-agent: Yandex
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /subaction=userinfo
Disallow: /subaction=newposts
Disallow: /do=lastcomments
Disallow: /do=feedback
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=addnews
Disallow: /do=stats
Disallow: /do=pm
Disallow: /do=search
Host: http://сайт ру
Sitemap: http://сайт ру/sitemap.xml

User-agent: GoogleBot
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /subaction=userinfo
Disallow: /subaction=newposts
Disallow: /do=lastcomments
Disallow: /do=feedback
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=addnews
Disallow: /do=stats
Disallow: /do=pm
Disallow: /do=search

User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /subaction=userinfo
Disallow: /subaction=newposts
Disallow: /do=lastcomments
Disallow: /do=feedback
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=addnews
Disallow: /do=stats
Disallow: /do=pm
Disallow: /do=search


Яндекс веб мастер показывает вот так:


Я сейчас указал адрес сайта через https и содержимое Роботс отобразилось:


Файл .htaccess сейчас такой, это верно?
Код
DirectoryIndex index.php
php_flag magic_quotes_gpc off
RewriteEngine On
RewriteCond %{ENV:HTTPS} !on
RewriteRule (.*) https://%{HTTP_HOST}%{REQUEST_URI} [R=301,L]


### START ќпредел¤ем главное зеркало как site.ru (site.ru заменить на свой домен, например сайт.ru)
RewriteCond %{http_HOST} ^www\.сайт\.ru$ [NC]
RewriteRule ^(.*)$ https://сайт.ru/$1 [R=301,L]
### END ќпредел¤ем главное зеркало


### START ”бираем слеш в конце
RewriteRule ^(.+)/$ $1 [R=301,L]
### END ”бираем слеш в конце

### START –едирект с первой страницы на основную
RewriteBase /
RewriteRule ^(.*)page/1(/|)$ $1 [R=301,L]
### END –едирект с первой страницы на основную

# –едиректы
RewriteRule ^page/([0-9]+)(/?)$ index.php?cstart=$1 [L]

Redirect 301 /https://сайт.ru/engine/ajax/updates.php https://сайт.ru
Redirect 301 /https://сайт.ru/index.php?do=feedback https://сайт.ru
Redirect 301 /https://сайт.ru/manageradminpanelka.php https://сайт.ru
Redirect 301 /https://сайт.ru/?do=static&page=index&seourl=index https://сайт.ru
Redirect 301 /https://сайт.ru/index.html https://сайт.ru
Redirect 301 /https://сайт.ru/index.php https://сайт.ru
Redirect 301 /https://сайт.ru/about/47/?what=%EE+%F0%E5%EA%EB%E0%EC%E5 https://сайт.ru
Redirect 301 /https://сайт.ru/about/47/?what=j+htrkfvt https://сайт.ru
Redirect 301 /https://сайт.ru/about/47/?what=dsd https://сайт.ru
Redirect 301 /https://сайт.ru/%7Bfull-link%7D https://сайт.ru
Redirect 301 /https://сайт.ru/%7Bfull-link%7D https://сайт.ru
Redirect 301 /https://сайт.ru/admin https://сайт.ru
Redirect 301 /https://сайт.ru/%7Blink%7D https://сайт.ru
Redirect 301 /https://сайт.ru/engine/classes/min/index.php?f=engine/data/dbconfig.php https://сайт.ru
Redirect 301 /https://сайт.ru/engine/skins/images https://сайт.ru
Redirect 301 /https://сайт.ru/oreklame/%7Bfull-link%7D https://сайт.ru
Redirect 301 /https://сайт.ru/zakony/%7Bfull-link%7D https://сайт.ru
Redirect 301 /https://сайт.ru/antireklama/%7Bfull-link%7D https://сайт.ru
Redirect 301 /https://сайт.ru/obman-v-reklame/%7Bfull-link%7D https://сайт.ru





# —ам пост
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page,([0-9]+),([0-9]+),(.*).html$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&cstart=$5&news_name=$6&seourl=$6 [L]
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page,([0-9]+),(.*).html$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&news_name=$5&seourl=$5 [L]
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/print:page,([0-9]+),(.*).html$ engine/print.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&news_name=$5&seourl=$5 [L]
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/(.*).html$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_name=$4&seourl=$4 [L]

RewriteRule ^([^.]+)/page,([0-9]+),([0-9]+),([0-9]+)-(.*).html$ index.php?newsid=$4&news_page=$2&cstart=$3&seourl=$5&seocat=$1 [L]
RewriteRule ^([^.]+)/page,([0-9]+),([0-9]+)-(.*).html$ index.php?newsid=$3&news_page=$2&seourl=$4&seocat=$1 [L]
RewriteRule ^([^.]+)/print:page,([0-9]+),([0-9]+)-(.*).html$ engine/print.php?news_page=$2&newsid=$3&seourl=$4&seocat=$1 [L]
RewriteRule ^([^.]+)/([0-9]+)-(.*).html$ index.php?newsid=$2&seourl=$3&seocat=$1 [L]

RewriteRule ^page,([0-9]+),([0-9]+),([0-9]+)-(.*).html$ index.php?newsid=$3&news_page=$1&cstart=$2&seourl=$4 [L]
RewriteRule ^page,([0-9]+),([0-9]+)-(.*).html$ index.php?newsid=$2&news_page=$1&seourl=$3 [L]
RewriteRule ^print:page,([0-9]+),([0-9]+)-(.*).html$ engine/print.php?news_page=$1&newsid=$2&seourl=$3 [L]
RewriteRule ^([0-9]+)-(.*).html$ index.php?newsid=$1&seourl=$2 [L]

# «а день
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})(/?)+$ index.php?year=$1&month=$2&day=$3 [L]
RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page/([0-9]+)(/?)+$ index.php?year=$1&month=$2&day=$3&cstart=$4 [L]
# «а весь мес¤ц
RewriteRule ^([0-9]{4})/([0-9]{2})(/?)+$ index.php?year=$1&month=$2 [L]
RewriteRule ^([0-9]{4})/([0-9]{2})/page/([0-9]+)(/?)+$ index.php?year=$1&month=$2&cstart=$3 [L]
# ¬ывод за весь год
RewriteRule ^([0-9]{4})(/?)+$ index.php?year=$1 [L]
RewriteRule ^([0-9]{4})/page/([0-9]+)(/?)+$ index.php?year=$1&cstart=$2 [L]
# вывод отдельному тегу
RewriteRule ^tags/([^/]*)(/?)+$ index.php?do=tags&tag=$1 [L]
RewriteRule ^tags/([^/]*)/page/([0-9]+)(/?)+$ index.php?do=tags&tag=$1&cstart=$2 [L]
# поиск по доп пол¤м
RewriteRule ^xfsearch/([^/]*)(/?)+$ index.php?do=xfsearch&xf=$1 [L]
RewriteRule ^xfsearch/([^/]*)/page/([0-9]+)(/?)+$ index.php?do=xfsearch&xf=$1&cstart=$2 [L]
# вывод дл¤ отдельного юзера
RewriteRule ^user/([^/]*)/rss.xml$ engine/rss.php?subaction=allnews&user=$1 [L]
RewriteRule ^user/([^/]*)(/?)+$ index.php?subaction=userinfo&user=$1 [L]
RewriteRule ^user/([^/]*)/page/([0-9]+)(/?)+$ index.php?subaction=userinfo&user=$1&cstart=$2 [L]
RewriteRule ^user/([^/]*)/news(/?)+$ index.php?subaction=allnews&user=$1 [L]
RewriteRule ^user/([^/]*)/news/page/([0-9]+)(/?)+$ index.php?subaction=allnews&user=$1&cstart=$2 [L]
RewriteRule ^user/([^/]*)/news/rss.xml(/?)+$ engine/rss.php?subaction=allnews&user=$1 [L]
# вывод всех последних новостей
RewriteRule ^lastnews(/?)+$ index.php?do=lastnews [L]
RewriteRule ^lastnews/page/([0-9]+)(/?)+$ index.php?do=lastnews&cstart=$1 [L]
# вывод в виде каталога
RewriteRule ^catalog/([^/]*)/rss.xml$ engine/rss.php?catalog=$1 [L]
RewriteRule ^catalog/([^/]*)(/?)+$ index.php?catalog=$1 [L]
RewriteRule ^catalog/([^/]*)/page/([0-9]+)(/?)+$ index.php?catalog=$1&cstart=$2 [L]
# вывод непрочитанных статей
RewriteRule ^newposts(/?)+$ index.php?subaction=newposts [L]
RewriteRule ^newposts/page/([0-9]+)(/?)+$ index.php?subaction=newposts&cstart=$1 [L]
# вывод избранных статей
RewriteRule ^favorites(/?)+$ index.php?do=favorites [L]
RewriteRule ^favorites/page/([0-9]+)(/?)+$ index.php?do=favorites&cstart=$1 [L]

RewriteRule ^rules.html$ index.php?do=rules [L]
RewriteRule ^statistics.html$ index.php?do=stats [L]
RewriteRule ^addnews.html$ index.php?do=addnews [L]
RewriteRule ^rss.xml$ engine/rss.php [L]
RewriteRule ^sitemap.xml$ uploads/sitemap.xml [L]

RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^([^.]+)/page/([0-9]+)(/?)+$ index.php?do=cat&category=$1&cstart=$2 [L]
RewriteRule ^([^.]+)/?$ index.php?do=cat&category=$1 [L]

RewriteCond %{REQUEST_FILENAME} !-f
RewriteRule ^([^.]+)/rss.xml$ engine/rss.php?do=cat&category=$1 [L]
RewriteRule ^page,([0-9]+),([^/]+).html$ index.php?do=static&page=$2&news_page=$1&seourl=$2 [L]
RewriteRule ^print:([^/]+).html$ engine/print.php?do=static&page=$1&seourl=$1 [L]

RewriteCond %{REQUEST_FILENAME} !-f
RewriteRule ^([^/]+).html$ index.php?do=static&page=$1&seourl=$1 [L]

### –едиректы с index.php или index.html на сайт
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.(php|html)\ https/
RewriteRule .* / [R=301,L]


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
novrek
novrek
Topic Starter сообщение 13.1.2017, 14:37; Ответить: novrek
Сообщение #12


мошенник
**

Группа: Banned
Сообщений: 61
Регистрация: 2.2.2016
Поблагодарили: 7 раз
Репутация:   -2  


Вопрос актуален.


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
MacLeo
MacLeo
сообщение 13.1.2017, 18:17; Ответить: MacLeo
Сообщение #13


тИЦ`анутый
******

Группа: Active User
Сообщений: 1092
Регистрация: 1.6.2010
Поблагодарили: 302 раза
Репутация:   47  


novrek, я Вам уже показал что файл robots.txt нормально анализируется, Яндекс не показывает никаких проблем. Проблема у вас, попробуйте через другой браузер. Вводите, я надеюсь, https://site.ru/robots.txt? Или хотя бы site.ru/robots?


--------------------
Бесплатный базовый SEO аудит и углубленный SEO аудит всего за 500 рублей.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Belos
Belos
сообщение 13.1.2017, 18:31; Ответить: Belos
Сообщение #14


Старожил
******

Группа: Active User
Сообщений: 2468
Регистрация: 11.11.2008
Из: Украина
Поблагодарили: 695 раз
Репутация:   96  


novrek,

да нормально редиректит ваш сайт с http на https, только что проверил
только в полной новости и при переходе в категорию не отображается "Горячее"

Сообщение отредактировал Belos - 13.1.2017, 18:32


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
novrek
novrek
Topic Starter сообщение 14.1.2017, 18:08; Ответить: novrek
Сообщение #15


мошенник
**

Группа: Banned
Сообщений: 61
Регистрация: 2.2.2016
Поблагодарили: 7 раз
Репутация:   -2  


MacLeo
Belos

Спасибо. Жду переиндексации сайта.
По поводу блока ГОРЯЧЕЕ (это сделано специально под конктекст)


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Doktor11
Doktor11
сообщение 14.1.2017, 20:38; Ответить: Doktor11
Сообщение #16


Участник
***

Группа: User
Сообщений: 134
Регистрация: 25.8.2014
Из: Крым
Поблагодарили: 28 раз
Репутация:   2  


У меня тоже несколько сайтов переехали на новый протокол (движок вордпрес)!!! Считаю что настроил все верно (в плане внутренних ссылок, скриптов и т.д.), а вот конкретно в файл .htaccess не лез...Обратился в техподдержку хостера: сказали что настроили все на уровне сервера ( в файле .htaccess без изменений).
В вебмастере Яндекса у меня тоже самое что и у вас novrek (редирект файла роботс... у меня правда в роботс прописан протокол новый то есть https), поэтому считаю что после склейки уже будет видно точно, правильно либо не правильно был осуществлен переезд!!!!


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
novrek
novrek
Topic Starter сообщение 14.1.2017, 22:18; Ответить: novrek
Сообщение #17


мошенник
**

Группа: Banned
Сообщений: 61
Регистрация: 2.2.2016
Поблагодарили: 7 раз
Репутация:   -2  


Doktor11, сколько по времени ждали склейку?


--------------------
Забанен за мошенничество
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Doktor11
Doktor11
сообщение 14.1.2017, 22:31; Ответить: Doktor11
Сообщение #18


Участник
***

Группа: User
Сообщений: 134
Регистрация: 25.8.2014
Из: Крым
Поблагодарили: 28 раз
Репутация:   2  


novrek,
До сих пор жду
Прикрепленное изображение

Первый переехал 26.12.2016
Второй переехал 03.01.2017
До сих пор полностью не склеились!


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V  < 1 2
Открыть тему
Добавить ответ в эту тему
Быстрый ответ
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыОказываю услуги по CMS Datalife Engine
Большой спектр услуг
267 bobur 89464 23.3.2017, 20:39
автор: Mukis
Открытая тема (нет новых ответов) Тормозит интернет при обновлении винды?
Тогда мы идём к вам
0 TrustMan 256 20.3.2017, 22:25
автор: TrustMan
Открытая тема (нет новых ответов) «Отец интернета» назвал три главных проблемы современной сети
3 MissContent 1228 19.3.2017, 20:34
автор: Room
Горячая тема (нет новых ответов) На что вы обращаете внимание при входе на сайт?
107 Ilyazavo 13158 15.3.2017, 21:04
автор: Clause
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыhttp-https-Яндекс - когда удалять http в Вебмастере?
13 Seasoned 3139 1.3.2017, 12:48
автор: MONOLIT96


 



RSS Текстовая версия Сейчас: 25.3.2017, 13:45
Дизайн