X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> User agent ботов, Яндекса и Гугла
Mukis
Mukis
Topic Starter сообщение 21.10.2013, 23:22; Ответить: Mukis
Сообщение #1


Кто-нибудь подскажет какой юзер агент у ботов поисковых систем?
Спасибо)
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rokot
rokot
сообщение 22.10.2013, 0:08; Ответить: rokot
Сообщение #2


User-agent: Yandex
User-agent: *
Вы про это что ли?


--------------------


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 0:59; Ответить: startup
Сообщение #3


Развернуть/Свернуть
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) — основной индексирующий робот;
Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots) — индексатор Яндекс.Картинок;
Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots) — индексатор Яндекс.Видео;
Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots) — робот, индексирующий мультимедийные данные;
Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots) — робот поиска по блогам, индексирующий комментарии постов;
Mozilla/5.0 (compatible; YandexFavicons/1.0; +http://yandex.com/bots)— робот, индексирующий пиктограммы сайтов (favicons);
Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots)— робот сервиса Яндекс.Вебмастер;
Mozilla/5.0 (compatible; YandexPagechecker/1.0; +http://yandex.com/bots)— робот, обращающийся к странице при валидации микроразметки через форму Валидатор микроразметки;
Mozilla/5.0 (compatible; YandexImageResizer/2.0; +http://yandex.com/bots) — робот мобильных сервисов;
Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots) — робот Яндекс.Директа, особым образом интерпретирует robots.txt;
Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel; +http://yandex.com/bots) — «простукивалка» Яндекс.Директа, проверяет корректность ссылок из объявлений перед модерацией;
Mozilla/5.0 (compatible; YandexSitelinks; Dyatel; +http://yandex.com/bots) — «простукивалка» быстрых ссылок, используется для проверки доступности страниц, определившихся в качестве быстрых ссылок;
Mozilla/5.0 (compatible; YandexAdNet/1.0; +http://yandex.com/bots) — робот Рекламной сети Яндекса;
Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots) — робот Яндекс.Метрики;
Mozilla/5.0 (compatible; YandexNews/3.0; +http://yandex.com/bots) — робот Яндекс.Новостей;
Mozilla/5.0 (compatible; YandexNewslinks; +http://yandex.com/bots) — «простукивалка» Яндекс.Новостей, используется для проверки ссылок из новостных материалов;
Mozilla/5.0 (compatible; YandexCatalog/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Каталога, используется для временного снятия с публикации недоступных сайтов в Каталоге;
Mozilla/5.0 (compatible; YandexAntivirus/2.0; +http://yandex.com/bots) — антивирусный робот, который проверяет страницы на наличие опасного кода;
Mozilla/5.0 (compatible; YandexZakladki/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Закладок, используется для проверки доступности страниц, добавленных в закладки;
Mozilla/5.0 (compatible; YandexMarket/1.0; +http://yandex.com/bots) — робот Яндекс.Маркета;
Mozilla/5.0 (compatible; YandexVertis/3.0; +http://yandex.com/bots) — робот поисковых вертикалей;
Mozilla/5.0 (compatible; YandexCalendar/1.0; +http://yandex.com/bots) — робот Яндекс.Календаря, используется для синхронизации с другими календарями, особым образом интерпретирует robots.txt.


http://help.yandex.ru/webmaster/robot-work...ndex-robots.xml


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 1:05; Ответить: medved112
Сообщение #4


Mukis, если в решили узнать юзерагент, чтобы с помощью него делать подмену, то вы опоздали на десяток лет. Если ПС заявляют, что ходят под данными юзерагентами на сайты, то это не значит, что они не ходят под другими. Все палится и очень быстро.


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 1:07; Ответить: startup
Сообщение #5


Для полноты ответа smile.gif

https://support.google.com/webmasters/answer/1061943

Естественно, это не весь список ботов, есть масса тех, которые выявляют "нарушения" на сайтах.


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 13:20; Ответить: Mukis
Сообщение #6


medved112, Что имеется ввиду? Подмену чего? Юзер агента? А зачем это делать? Я подменять ничего не собираюсь)
Под другими, это какими?)

Я неверное немного не правильно поставил вопрос. Хочется знать какие боты у яндекса и гугла заходят, чтобы проиндексировать ссылки на сайте. С официальными списками я знаком. Может есть наблюдения?

Сообщение отредактировал Mukis - 22.10.2013, 13:22
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 19:17; Ответить: medved112
Сообщение #7


Mukis, подмену контента например, разный контент для разных ЮА. Или к примеру редирект, т.е. весь трафик пускать через редирект, а ЮА поисковиков отправлять на сайт. Раньше много было выдумок.
С официальными списками я знаком. Может есть наблюдения?

Да тут вам никто не скажет, они могут сидеть под видом обычного юзера, не всегда понять можно кто на самом деле это. А для индексации скорее всего официальные и должны забрести.

Сообщение отредактировал medved112 - 22.10.2013, 19:17


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 21:53; Ответить: Mukis
Сообщение #8


medved112, Ого. Ничего себе. Я и не знал. То есть можно сделать, к примеру, для пользователей ссылки не видны, а для поисковиков видны. Только теперь это ПС быстро палят? И какие их действия? Накладывают санкции?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 22.10.2013, 22:15; Ответить: jack
Сообщение #9


(Mukis @ 22.10.2013, 20:53) *
Ого. Ничего себе. Я и не знал.

Это называется клоакинг smile.gif Быстро палится и жестко наказывается.


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 23.10.2013, 13:18; Ответить: Mukis
Сообщение #10


jack, Насколько быстро? Сразу (даже в индекс не пускает), через неделю? Месяц?
Санкции - пессимизация?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) <Braga/> Создание Telegram-ботов, web-приложений, крипто-бирж, сайтов.
2 newbraga 1795 10.3.2024, 22:04
автор: newbraga
Горячая тема (нет новых ответов) В каких тизерных сетях меньше ботов?
37 Boymaster 8485 24.1.2024, 22:13
автор: Boymaster
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыВК: Реальные/целевые подписчики. Оплата за вступивших. Без ботов. Гарантия. Скидки! Тест за отзыв.
96 VilD 68656 17.3.2022, 2:37
автор: Hydra
Открытая тема (нет новых ответов) Разработка ботов под любую рутину. Разгрузи свой график!
1 basmeister 1279 19.12.2020, 13:35
автор: basmeister
Открытая тема (нет новых ответов) ZennoPoster-услуги по написанию ботов, автоматизация работы в браузере. Сбор любых баз.
ZennoPoster-услуги по написанию шаблонов
0 Progernaut 1203 13.11.2020, 20:20
автор: Progernaut


 



RSS Текстовая версия Сейчас: 25.4.2024, 5:59
Дизайн