X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Добавить ответ в эту тему
> Google развеял SEO-мифы о краулинговом бюджете
VinogradOFF
VinogradOFF
Topic Starter сообщение 16.7.2020, 23:15; Ответить: VinogradOFF
Сообщение #1


Топовый постер
*******


Группа: Active User
Сообщений: 4423
Регистрация: 7.8.2018
Из: Казань
Поблагодарили: 601 раз
Репутация:   46  


Google выпустил новое видео SEO Mythbusting, в котором старший аккаунт-менеджер Merkle Алексис Сандерс смогла задать вопросы сотруднику поисковика Мартину Сплитту, касающиеся краулингового бюджета.



Ключевые моменты

Google вынужден разумно распоряжаться ресурсами при сканировании контента. Веб – огромен, поэтому приходится выбирать, что поисковик будет сканировать.
Контент новостных сайтов меняется часто и быстро, поэтому поисковик сканирует их чаще, чем сайты, которые обновляются редко.
Google пытается выяснить, нужно ли определенный сайт сканировать чаще или достаточно проверять его время от времени. Поисковик сохраняет фингерпринт контента, чтобы посмотреть, когда было последнее обновление.
Для отслеживания изменений сайта Google учитывает структурированные данные и элементы даты.
Etag, заголовки Last-Modified также могут быть полезны для понимания, как часто обновляется сайт, но Google их учитывает только как подсказки и может игнорировать. Изменение только даты на странице без обновления контента не приведет к тому, что сайт будет сканироваться чаще.
Беспокоиться о краулинговом бюджете следует только большим сайтам с миллионом URL. Например, с этим могут столкнуться сайты электронной коммерции или издатели.
Нередко владельцы сайтов говорят о краулинговом бюджете, если их ресурс не индексируется. Часто проблема бывает не в сканировании, а в плохом качестве контента, поэтому Google и игнорирует сайт.
Важно следить, чтобы серверы работали без сбоев и не выдавали коды ошибок, а редиректы были настроены корректно.
Если URL нет в Sitemap, Google может не сразу найти страницу. Для начала поисковику придется просканировать другую страницу и найти ссылку на этот URL.
Важные изменения на сайте нужно внедрять постепенно. Не стоит сразу переезжать на другой сервер, менять контент, URL, домен. Это «слишком много для одного проекта».
Google не кеширует POST-запросы, так как это быстро исчерпывает краулинговый бюджет. Следует использовать запросы GET.
Владельцы сайтов должны блокировать страницы, которые не нужно сканировать: внутреннюю аналитику, внутренние инструменты и т. п. Для этого следует использовать robots.txt.
Невозможно сделать так, чтобы Google сканировал сайт чаще. Если система обнаружит, что на странице много хорошего контента, а Sitemap будет содержать много URL, Google просканирует столько, сколько сможет, и будет продолжать это делать. В конечном итоге краулинговый бюджет может увеличиться до того параметра, который хочет видеть владелец сайта.

источник
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
DUbiev
DUbiev
сообщение 17.7.2020, 1:52; Ответить: DUbiev
Сообщение #2


Участник
***

Группа: User
Сообщений: 120
Регистрация: 21.1.2020
Поблагодарили: 12 раз
Репутация:   0  


Цитата(VinogradOFF @ 16.7.2020, 23:15) *
Владельцы сайтов должны блокировать страницы, которые не нужно сканировать: внутреннюю аналитику, внутренние инструменты и т. п. Для этого следует использовать robots.txt.


а что за внутренняя аналитика? типа скрипты посещаемости или что?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Добавить ответ в эту тему
Быстрый ответ
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Machine Learning для SEO - прогноз позиций сайта
pro100blogger.com - подробно о Google
0 vvovvo 19 Сегодня, 18:08
автор: vvovvo
Горячая тема (нет новых ответов) Крупные новостные (СМИ) площадки, Яндекс Новости, Google News, анонсы, хорошая посещаемость.
73 NastyaLanPR 31140 Сегодня, 10:15
автор: NastyaLanPR
Открытая тема (нет новых ответов) Продам аккаунт google adsense | 7 лет | выплаты 9 935,54 $
0 _fan_ 161 10.8.2020, 15:35
автор: _fan_
Открытая тема (нет новых ответов) Google рассказал, как асессоры влияют на внедрение изменений в поиск
4 VinogradOFF 341 10.8.2020, 3:34
автор: onemoment
Открытая тема (нет новых ответов) Google отдает приоритет YouTube при ранжировании
4 VinogradOFF 409 9.8.2020, 16:20
автор: Freedo


 



RSS Текстовая версия Сейчас: 12.8.2020, 19:07
Дизайн