Помощник
|
User agent ботов, Яндекса и Гугла |
Mukis
|
Сообщение
#1
|
||
|
|
||
|
|||
rokot |
22.10.2013, 0:08;
Ответить: rokot
Сообщение
#2
|
|
User-agent: Yandex
User-agent: * Вы про это что ли? -------------------- SEO-продвижение сайтов – увеличиваем прибыль, а не проблемы |
|
|
startup |
22.10.2013, 0:59;
Ответить: startup
Сообщение
#3
|
|
Развернуть/Свернуть
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) — основной индексирующий робот;
Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots) — индексатор Яндекс.Картинок; Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots) — индексатор Яндекс.Видео; Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots) — робот, индексирующий мультимедийные данные; Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots) — робот поиска по блогам, индексирующий комментарии постов; Mozilla/5.0 (compatible; YandexFavicons/1.0; +http://yandex.com/bots)— робот, индексирующий пиктограммы сайтов (favicons); Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots)— робот сервиса Яндекс.Вебмастер; Mozilla/5.0 (compatible; YandexPagechecker/1.0; +http://yandex.com/bots)— робот, обращающийся к странице при валидации микроразметки через форму Валидатор микроразметки; Mozilla/5.0 (compatible; YandexImageResizer/2.0; +http://yandex.com/bots) — робот мобильных сервисов; Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots) — робот Яндекс.Директа, особым образом интерпретирует robots.txt; Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel; +http://yandex.com/bots) — «простукивалка» Яндекс.Директа, проверяет корректность ссылок из объявлений перед модерацией; Mozilla/5.0 (compatible; YandexSitelinks; Dyatel; +http://yandex.com/bots) — «простукивалка» быстрых ссылок, используется для проверки доступности страниц, определившихся в качестве быстрых ссылок; Mozilla/5.0 (compatible; YandexAdNet/1.0; +http://yandex.com/bots) — робот Рекламной сети Яндекса; Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots) — робот Яндекс.Метрики; Mozilla/5.0 (compatible; YandexNews/3.0; +http://yandex.com/bots) — робот Яндекс.Новостей; Mozilla/5.0 (compatible; YandexNewslinks; +http://yandex.com/bots) — «простукивалка» Яндекс.Новостей, используется для проверки ссылок из новостных материалов; Mozilla/5.0 (compatible; YandexCatalog/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Каталога, используется для временного снятия с публикации недоступных сайтов в Каталоге; Mozilla/5.0 (compatible; YandexAntivirus/2.0; +http://yandex.com/bots) — антивирусный робот, который проверяет страницы на наличие опасного кода; Mozilla/5.0 (compatible; YandexZakladki/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Закладок, используется для проверки доступности страниц, добавленных в закладки; Mozilla/5.0 (compatible; YandexMarket/1.0; +http://yandex.com/bots) — робот Яндекс.Маркета; Mozilla/5.0 (compatible; YandexVertis/3.0; +http://yandex.com/bots) — робот поисковых вертикалей; Mozilla/5.0 (compatible; YandexCalendar/1.0; +http://yandex.com/bots) — робот Яндекс.Календаря, используется для синхронизации с другими календарями, особым образом интерпретирует robots.txt. http://help.yandex.ru/webmaster/robot-work...ndex-robots.xml -------------------- |
|
|
medved112 |
22.10.2013, 1:05;
Ответить: medved112
Сообщение
#4
|
|
Mukis, если в решили узнать юзерагент, чтобы с помощью него делать подмену, то вы опоздали на десяток лет. Если ПС заявляют, что ходят под данными юзерагентами на сайты, то это не значит, что они не ходят под другими. Все палится и очень быстро.
-------------------- |
|
|
startup |
22.10.2013, 1:07;
Ответить: startup
Сообщение
#5
|
|
Для полноты ответа
https://support.google.com/webmasters/answer/1061943 Естественно, это не весь список ботов, есть масса тех, которые выявляют "нарушения" на сайтах. -------------------- |
|
|
Mukis
|
Сообщение
#6
|
|
medved112, Что имеется ввиду? Подмену чего? Юзер агента? А зачем это делать? Я подменять ничего не собираюсь)
Под другими, это какими?) Я неверное немного не правильно поставил вопрос. Хочется знать какие боты у яндекса и гугла заходят, чтобы проиндексировать ссылки на сайте. С официальными списками я знаком. Может есть наблюдения? Сообщение отредактировал Mukis - 22.10.2013, 13:22 |
|
|
medved112 |
22.10.2013, 19:17;
Ответить: medved112
Сообщение
#7
|
|
Mukis, подмену контента например, разный контент для разных ЮА. Или к примеру редирект, т.е. весь трафик пускать через редирект, а ЮА поисковиков отправлять на сайт. Раньше много было выдумок.
С официальными списками я знаком. Может есть наблюдения? Да тут вам никто не скажет, они могут сидеть под видом обычного юзера, не всегда понять можно кто на самом деле это. А для индексации скорее всего официальные и должны забрести. Сообщение отредактировал medved112 - 22.10.2013, 19:17 -------------------- |
|
|
Mukis
|
Сообщение
#8
|
|
medved112, Ого. Ничего себе. Я и не знал. То есть можно сделать, к примеру, для пользователей ссылки не видны, а для поисковиков видны. Только теперь это ПС быстро палят? И какие их действия? Накладывают санкции?
|
|
|
jack |
22.10.2013, 22:15;
Ответить: jack
Сообщение
#9
|
|
Ого. Ничего себе. Я и не знал. Это называется клоакинг Быстро палится и жестко наказывается. -------------------- |
|
|
Mukis
|
Сообщение
#10
|
|
jack, Насколько быстро? Сразу (даже в индекс не пускает), через неделю? Месяц?
Санкции - пессимизация? |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
<Braga/> Создание Telegram-ботов, web-приложений, крипто-бирж, сайтов. | 2 | newbraga | 1795 | 10.3.2024, 22:04 автор: newbraga |
|
В каких тизерных сетях меньше ботов? | 37 | Boymaster | 8485 | 24.1.2024, 22:13 автор: Boymaster |
|
ВК: Реальные/целевые подписчики. Оплата за вступивших. Без ботов. Гарантия. Скидки! Тест за отзыв. | 96 | VilD | 68656 | 17.3.2022, 2:37 автор: Hydra |
|
Разработка ботов под любую рутину. Разгрузи свой график! | 1 | basmeister | 1279 | 19.12.2020, 13:35 автор: basmeister |
|
ZennoPoster-услуги по написанию ботов, автоматизация работы в браузере. Сбор любых баз. ZennoPoster-услуги по написанию шаблонов |
0 | Progernaut | 1203 | 13.11.2020, 20:20 автор: Progernaut |
Текстовая версия | Сейчас: 25.4.2024, 5:59 |