X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Прошу помощи в правильной индексации ПС
Neville
Neville
Topic Starter сообщение 6.9.2016, 17:50; Ответить: Neville
Сообщение #1


Прошу помощи у специалистов разобраться в двух вещах:

1. У меня в поисковике гугла попадают страницы типа wp-includes/js/jquery/jquery.js?ver... и wp-includes/file/ В robots.txt я их запретил, однако они все равно попадают в индекс.

2. Почему-то гугл бот долго не индексирует блог - в выдаче посты появляются если я вручную через Google Webmaster tool отправлю ссылки в индексацию.

Уже много инфы перерыл в инете, но так и не понял, почему у меня попадают мусорные ссылки в выдаче гугла (не пойму каким образом на такие ссылки можно добавить мета тег noindex, ведь это не страницы) и чего такая плохая индексация. Помогите пожалуйста разобраться.

Сайт новый, но домен старый.
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 6.9.2016, 19:41; Ответить: x64
Сообщение #2


Цитата(Neville @ 6.9.2016, 16:50) *
У меня в поисковике гугла попадают страницы типа

Возможно, сервер возвращает content-type:text/html для них.

Цитата(Neville @ 6.9.2016, 16:50) *
В robots.txt я их запретил, однако они все равно попадают в индекс

Точно правильно запретили?

Цитата(Neville @ 6.9.2016, 16:50) *
не пойму каким образом на такие ссылки можно добавить мета тег noindex, ведь это не страницы

Правильно. noindex/norobots для html предназначен.

Лучше сайт покажите. Или хотя бы robots выложите.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Neville
Neville
Topic Starter сообщение 6.9.2016, 20:44; Ответить: Neville
Сообщение #3


Robots:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-includes/js
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: */cgi-bin
Disallow: /file
Disallow: */file
Disallow: */comments
Disallow: */category
Disallow: */author
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /wp-login.php

В выдаче гугла в сниппете показывает:
Описание недоступно из-за ограничений в файле robots.txt.

P.S. Сайт не особо хотелось бы светить.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kulinaris
kulinaris
сообщение 7.9.2016, 20:23; Ответить: kulinaris
Сообщение #4


Neville,
а вы уверены что Disallow: /wp-includes/js это правильно?
До тотальной МОБИЛизации и я так думал. А оказывается не всегда так :pardon:
Проверьте сайт тут https://www.google.ru/webmasters/tools/mobile-friendly/
Я думаю, что вы с удивлением можете обнаружить необходимость примерно такой конструкции:
Allow: /wp-includes/js/
Allow: /wp-content/plugins/
Allow: /wp-content/themes/
Роботсов идеальных не бывает, в каждом отдельным случае надо смотреть конкретно.


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Neville
Neville
Topic Starter сообщение 7.9.2016, 20:38; Ответить: Neville
Сообщение #5


Я ужаснулся как выглядит сайт по приведенной ссылке после анализа, и быстро все исправил благодаря Вашему совету. Спасибо ещё раз, теперь выглядит смотрибельно.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kulinaris
kulinaris
сообщение 7.9.2016, 21:49; Ответить: kulinaris
Сообщение #6


(внимание :offtopchik: )
Neville, ну раз пошла такая пьянка посмотри и тут
https://developers.google.com/speed/pagespeed/insights/
желательно чтобы сайт находился в зеленой зоне


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Neville
Neville
Topic Starter сообщение 7.9.2016, 21:57; Ответить: Neville
Сообщение #7


Проверил, на телефонах в оранжевой зоне: 70/100
основная причина:
Цитата
Удалите код JavaScript и CSS, блокирующий отображение верхней части страницы

Я несколько дней назад пытался улучшить показатель скорости загрузки с помощью плагинов. Но этот код все равно оставался. По рекомендациям гугла, мне, как новичку не понятно где его удалить и какой именно, и как понять, что именно блокируется (в общем куда копать).
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
semarg
semarg
сообщение 8.9.2016, 3:27; Ответить: semarg
Сообщение #8


Neville, Гоша не сильно реагирует на Robots. Он больше обращает внимание на htaccess.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
x64
x64
сообщение 8.9.2016, 7:38; Ответить: x64
Сообщение #9


Цитата(semarg @ 8.9.2016, 2:27) *
Он больше обращает внимание на htaccess

Каким образом? Взламывает сервер?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
kulinaris
kulinaris
сообщение 8.9.2016, 9:16; Ответить: kulinaris
Сообщение #10


Цитата
Гоша не сильно реагирует на Robots. Он больше обращает внимание на htaccess.
:facepalm:
Изучаем матчасть
https://ru.wikipedia.org/wiki/Стандарт_искл...ний_для_роботов
https://ru.wikipedia.org/wiki/.htaccess


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) По какому принципу работают ускорители индексации сайта?
5 Lifelove 1642 29.1.2024, 9:50
автор: Skyworker
Открытая тема (нет новых ответов) Сервис индексации- ферма голодных гуглоботов сожрет ваши ссылки
Удобный сервис индексации ссылок в телеграм боте
12 FastIndex 2495 5.1.2024, 16:36
автор: malamut
Открытая тема (нет новых ответов) Услуга по индексации страниц в Google
9 FUTP 3732 12.4.2023, 21:31
автор: Magicclickpartners
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыНудаюсь в помощи
WP ускорить по PageSpeed
13 MihalychAIP 2695 20.4.2022, 2:10
автор: sergogogo
Открытая тема (нет новых ответов) Ускорение индексации
3 wep 6708 24.9.2021, 19:04
автор: Wachowski


 



RSS Текстовая версия Сейчас: 24.4.2024, 17:23
Дизайн