X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
> Googlebot теперь работает на базе последней версии Chromium
VinogradOFF
VinogradOFF
Topic Starter сообщение 8.5.2019, 23:51; Ответить: VinogradOFF
Сообщение #1


Google запускает новую версию Googlebot. Веб-краулер теперь всегда будет работать на базе последней версии Chromium (браузер с открытым исходным кодом, на базе которого создан Chrome).

Сейчас Googlebot использует Chromium версии 74 вместо устаревшей 41-й. Обновленный краулер поддерживает более 1000 новых функций, благодаря чему Google сможет обрабатывать больше контента сайтов. Это значит, что их владельцам, скорее всего, не придется создавать специальные решения и использовать функции вроде «транспайлинга» (transpiling) или полифиллы.

Однако стоит отметить, что Googlebot по-прежнему может видеть не все.

источник
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Chaser
Chaser
сообщение 5.7.2019, 10:21; Ответить: Chaser
Сообщение #2


Небольшое наблюдение по новому принципу сканирования страниц сайта Гуглботом и как это может повлиять на статистику просмотров https://site-analyzer.ru/articles/googlebot...page-rendering/


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
OS_ZP_UA
OS_ZP_UA
сообщение 5.7.2019, 11:38; Ответить: OS_ZP_UA
Сообщение #3


Цитата(Chaser @ 5.7.2019, 8:21) *
Небольшое наблюдение по новому принципу сканирования страниц сайта Гуглботом и как это может повлиять на статистику просмотров https://site-analyzer.ru/articles/googlebot...page-rendering/

Ну так у вас сервер не настроен. Он при повторной загрузке отдает страницу с кодом 200 ОК, а должен 304 Not Modified. Настройте сервер, и не будет у вас никаких неправильных влияний на статистику...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Кадиков
Кадиков
сообщение 7.7.2019, 18:19; Ответить: Кадиков
Сообщение #4


Цитата(VinogradOFF @ 8.5.2019, 23:51) *
Chromium версии 74 вместо устаревшей 41-й.

Не прошло и 100 лет как они это сделали. Теперь ждем какие баги принесло это обновление
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ruby
Ruby
сообщение 7.7.2019, 19:47; Ответить: Ruby
Сообщение #5


Цитата(OS_ZP_UA @ 5.7.2019, 11:38) *
Он при повторной загрузке отдает страницу с кодом 200 ОК, а должен 304 Not Modified.


А что это дает для бота?
Почему именно такой ответ сделать нужно?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
OS_ZP_UA
OS_ZP_UA
сообщение 7.7.2019, 23:52; Ответить: OS_ZP_UA
Сообщение #6


Относительно бота. Бот видит, что страница не изменялась, не загружает ее повторно, и не анализирует ее повторно, это очень существенно краулинговый бюджет экономит, и ускоряет индексацию нового и изменяющегося контента, за счет того что бот не занят лишним сканированием и пересканированием того что не изменилось.
И да, это не значит что бот посетит страницу один раз, и после этого всегда будет получать на ней 304, и больше никогда не обойдет по новой. Бот, также как и браузер, хранит историю определенное время, и через две недели, или месяц, при повторном обходе страниц, он не будет ее помнить, и запросит ее как новую.
Ну и...304 ответ это ведь не только для ботов...для пользователей это скорость, а скорость это ПФ. Для сервера это процессорное время и трафик.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
VinogradOFF
VinogradOFF
Topic Starter сообщение 8.7.2019, 20:26; Ответить: VinogradOFF
Сообщение #7


Цитата(OS_ZP_UA @ 7.7.2019, 23:52) *
Ну и...304 ответ это ведь не только для ботов...для пользователей это скорость, а скорость это ПФ. Для сервера это процессорное время и трафик.


Бот яндекса аналогично предпочитает 304 ответы?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
OS_ZP_UA
OS_ZP_UA
сообщение 8.7.2019, 23:54; Ответить: OS_ZP_UA
Сообщение #8


Цитата(VinogradOFF @ 8.7.2019, 18:26) *
Бот яндекса аналогично предпочитает 304 ответы?

Должен также предпочитать.
По моим наблюдениям, у бота Яндекса есть одно отличие, он хранит историю посещений за намного более короткий промежуток времени, и соответственно эффект от 304 ответа для Яндекса будет намного меньше. Если посмотреть на логи сервера, у меня бот Яндекса получает страницу с ответом 304 раз в 10 реже чем бот Гугла.


Поблагодарили: (2)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Osipec
Osipec
сообщение 10.7.2019, 2:28; Ответить: Osipec
Сообщение #9


Цитата(OS_ZP_UA @ 5.7.2019, 11:38) *
Ну так у вас сервер не настроен. Он при повторной загрузке отдает страницу с кодом 200 ОК, а должен 304 Not Modified. Настройте сервер, и не будет у вас никаких неправильных влияний на статистику...


а подскажите годную статью по настройке ответа такого
как и где это сделать?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
OS_ZP_UA
OS_ZP_UA
сообщение 10.7.2019, 10:44; Ответить: OS_ZP_UA
Сообщение #10


Цитата(Osipec @ 10.7.2019, 0:28) *
а подскажите годную статью по настройке ответа такого
как и где это сделать?

А так слабо https://www.google.com/search?client=firefo...%B5%D1%80%D0%B0
там первая же статья вполне нормально объясняет http://site-on.net/optimization/7-last-modified
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыБезанкорный прогон по базе 1600 000 сайтов из DMOZ
44 aleggator 13741 10.3.2024, 18:29
автор: kuprum
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыСтатейное продвижение ваших сайтов по качественной базе с тИЦ
тИЦ 10+
236 Intersect 257847 6.3.2024, 14:40
автор: ArchiDOM
Открытая тема (нет новых ответов) Нужна рассылка по емаил базе сео-студий
0 kasey7 681 2.3.2024, 23:13
автор: kasey7
Открытая тема (нет новых ответов) Крауд-маркетинг который работает | Эффективные Ру-ссылки
1 Azyuka 1044 13.2.2024, 19:36
автор: tascha56
Открытая тема (нет новых ответов) Отсутствие мобильной версии сайта и влияние на выдачу
16 Lifelove 3582 29.1.2024, 23:09
автор: Liudmila


 



RSS Текстовая версия Сейчас: 18.4.2024, 6:39
Дизайн