X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> User agent ботов, Яндекса и Гугла
Mukis
Mukis
Topic Starter сообщение 21.10.2013, 23:22; Ответить: Mukis
Сообщение #1


Солнце еще высоко
******

Группа: Active User
Сообщений: 1513
Регистрация: 7.11.2012
Поблагодарили: 585 раз
Репутация:   129  


Кто-нибудь подскажет какой юзер агент у ботов поисковых систем?
Спасибо)
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rokot
rokot
сообщение 22.10.2013, 0:08; Ответить: rokot
Сообщение #2


Loading...
******

Группа: Super Moderator
Сообщений: 1672
Регистрация: 6.7.2012
Поблагодарили: 953 раза
Репутация:   136  


User-agent: Yandex
User-agent: *
Вы про это что ли?


--------------------
Дешевый и быстрый хостинг (US,RU сервера) | ПРОМОКОД на 10% - OFF10
Сайты на WordPress от 1500 рублей!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 0:59; Ответить: startup
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 272
Регистрация: 30.8.2011
Поблагодарили: 67 раз
Репутация:   9  


Развернуть/Свернуть
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) — основной индексирующий робот;
Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots) — индексатор Яндекс.Картинок;
Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots) — индексатор Яндекс.Видео;
Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots) — робот, индексирующий мультимедийные данные;
Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots) — робот поиска по блогам, индексирующий комментарии постов;
Mozilla/5.0 (compatible; YandexFavicons/1.0; +http://yandex.com/bots)— робот, индексирующий пиктограммы сайтов (favicons);
Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots)— робот сервиса Яндекс.Вебмастер;
Mozilla/5.0 (compatible; YandexPagechecker/1.0; +http://yandex.com/bots)— робот, обращающийся к странице при валидации микроразметки через форму Валидатор микроразметки;
Mozilla/5.0 (compatible; YandexImageResizer/2.0; +http://yandex.com/bots) — робот мобильных сервисов;
Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots) — робот Яндекс.Директа, особым образом интерпретирует robots.txt;
Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel; +http://yandex.com/bots) — «простукивалка» Яндекс.Директа, проверяет корректность ссылок из объявлений перед модерацией;
Mozilla/5.0 (compatible; YandexSitelinks; Dyatel; +http://yandex.com/bots) — «простукивалка» быстрых ссылок, используется для проверки доступности страниц, определившихся в качестве быстрых ссылок;
Mozilla/5.0 (compatible; YandexAdNet/1.0; +http://yandex.com/bots) — робот Рекламной сети Яндекса;
Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots) — робот Яндекс.Метрики;
Mozilla/5.0 (compatible; YandexNews/3.0; +http://yandex.com/bots) — робот Яндекс.Новостей;
Mozilla/5.0 (compatible; YandexNewslinks; +http://yandex.com/bots) — «простукивалка» Яндекс.Новостей, используется для проверки ссылок из новостных материалов;
Mozilla/5.0 (compatible; YandexCatalog/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Каталога, используется для временного снятия с публикации недоступных сайтов в Каталоге;
Mozilla/5.0 (compatible; YandexAntivirus/2.0; +http://yandex.com/bots) — антивирусный робот, который проверяет страницы на наличие опасного кода;
Mozilla/5.0 (compatible; YandexZakladki/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Закладок, используется для проверки доступности страниц, добавленных в закладки;
Mozilla/5.0 (compatible; YandexMarket/1.0; +http://yandex.com/bots) — робот Яндекс.Маркета;
Mozilla/5.0 (compatible; YandexVertis/3.0; +http://yandex.com/bots) — робот поисковых вертикалей;
Mozilla/5.0 (compatible; YandexCalendar/1.0; +http://yandex.com/bots) — робот Яндекс.Календаря, используется для синхронизации с другими календарями, особым образом интерпретирует robots.txt.


http://help.yandex.ru/webmaster/robot-work...ndex-robots.xml


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 1:05; Ответить: medved112
Сообщение #4


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Mukis, если в решили узнать юзерагент, чтобы с помощью него делать подмену, то вы опоздали на десяток лет. Если ПС заявляют, что ходят под данными юзерагентами на сайты, то это не значит, что они не ходят под другими. Все палится и очень быстро.


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 1:07; Ответить: startup
Сообщение #5


Бывалый
****

Группа: User
Сообщений: 272
Регистрация: 30.8.2011
Поблагодарили: 67 раз
Репутация:   9  


Для полноты ответа smile.gif

https://support.google.com/webmasters/answer/1061943

Естественно, это не весь список ботов, есть масса тех, которые выявляют "нарушения" на сайтах.


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 13:20; Ответить: Mukis
Сообщение #6


Солнце еще высоко
******

Группа: Active User
Сообщений: 1513
Регистрация: 7.11.2012
Поблагодарили: 585 раз
Репутация:   129  


medved112, Что имеется ввиду? Подмену чего? Юзер агента? А зачем это делать? Я подменять ничего не собираюсь)
Под другими, это какими?)

Я неверное немного не правильно поставил вопрос. Хочется знать какие боты у яндекса и гугла заходят, чтобы проиндексировать ссылки на сайте. С официальными списками я знаком. Может есть наблюдения?

Сообщение отредактировал Mukis - 22.10.2013, 13:22
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 19:17; Ответить: medved112
Сообщение #7


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Mukis, подмену контента например, разный контент для разных ЮА. Или к примеру редирект, т.е. весь трафик пускать через редирект, а ЮА поисковиков отправлять на сайт. Раньше много было выдумок.
С официальными списками я знаком. Может есть наблюдения?

Да тут вам никто не скажет, они могут сидеть под видом обычного юзера, не всегда понять можно кто на самом деле это. А для индексации скорее всего официальные и должны забрести.

Сообщение отредактировал medved112 - 22.10.2013, 19:17


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 21:53; Ответить: Mukis
Сообщение #8


Солнце еще высоко
******

Группа: Active User
Сообщений: 1513
Регистрация: 7.11.2012
Поблагодарили: 585 раз
Репутация:   129  


medved112, Ого. Ничего себе. Я и не знал. То есть можно сделать, к примеру, для пользователей ссылки не видны, а для поисковиков видны. Только теперь это ПС быстро палят? И какие их действия? Накладывают санкции?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 22.10.2013, 22:15; Ответить: jack
Сообщение #9


----------------
*******

Группа: Super Moderator
Сообщений: 7895
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10832 раза
Репутация:   595  


(Mukis @ 22.10.2013, 20:53) *
Ого. Ничего себе. Я и не знал.

Это называется клоакинг smile.gif Быстро палится и жестко наказывается.


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 23.10.2013, 13:18; Ответить: Mukis
Сообщение #10


Солнце еще высоко
******

Группа: Active User
Сообщений: 1513
Регистрация: 7.11.2012
Поблагодарили: 585 раз
Репутация:   129  


jack, Насколько быстро? Сразу (даже в индекс не пускает), через неделю? Месяц?
Санкции - пессимизация?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Разработка telegram ботов!
Предлагаю услуги по разработке telegram bot-ов
1 becoming 680 3.1.2018, 17:05
автор: becoming
Открытая тема (нет новых ответов) Требуется накрутка ботов в чаты телеграм
0 Вазелин 495 22.11.2017, 18:59
автор: Вазелин
Открытая тема (нет новых ответов) Кто может добавить быстро ботов в подписчики в группу?
Нужны боты быстро в группу?
1 nahalturu 777 29.9.2017, 14:05
автор: Smo_support
Открытая тема (нет новых ответов) Накрутка ботов
1 xxxDanielxxx 930 24.9.2017, 23:46
автор: nahalturu
Открытая тема (нет новых ответов) Оферы ВКонтакте (VIP) Без ботов
19 ipnesterov 6436 15.6.2016, 17:29
автор: ipnesterov


 



RSS Текстовая версия Сейчас: 26.5.2018, 14:19
Дизайн