X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> User agent ботов, Яндекса и Гугла
Mukis
Mukis
Topic Starter сообщение 21.10.2013, 23:22; Ответить: Mukis
Сообщение #1


Солнце еще высоко
******

Группа: Active User
Сообщений: 1451
Регистрация: 7.11.2012
Поблагодарили: 550 раз
Репутация:   127  


Кто-нибудь подскажет какой юзер агент у ботов поисковых систем?
Спасибо)
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
rokot
rokot
сообщение 22.10.2013, 0:08; Ответить: rokot
Сообщение #2


Loading...
******

Группа: Super Moderator
Сообщений: 1619
Регистрация: 6.7.2012
Поблагодарили: 899 раз
Репутация:   133  


User-agent: Yandex
User-agent: *
Вы про это что ли?


--------------------
Дешевый и быстрый хостинг (US,RU сервера) | ПРОМОКОД на 10% - OFF10
Сайты на WordPress от 1500 рублей!


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 0:59; Ответить: startup
Сообщение #3


Бывалый
****

Группа: User
Сообщений: 272
Регистрация: 30.8.2011
Поблагодарили: 67 раз
Репутация:   9  


Развернуть/Свернуть
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) — основной индексирующий робот;
Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots) — индексатор Яндекс.Картинок;
Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots) — индексатор Яндекс.Видео;
Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots) — робот, индексирующий мультимедийные данные;
Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots) — робот поиска по блогам, индексирующий комментарии постов;
Mozilla/5.0 (compatible; YandexFavicons/1.0; +http://yandex.com/bots)— робот, индексирующий пиктограммы сайтов (favicons);
Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots)— робот сервиса Яндекс.Вебмастер;
Mozilla/5.0 (compatible; YandexPagechecker/1.0; +http://yandex.com/bots)— робот, обращающийся к странице при валидации микроразметки через форму Валидатор микроразметки;
Mozilla/5.0 (compatible; YandexImageResizer/2.0; +http://yandex.com/bots) — робот мобильных сервисов;
Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots) — робот Яндекс.Директа, особым образом интерпретирует robots.txt;
Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel; +http://yandex.com/bots) — «простукивалка» Яндекс.Директа, проверяет корректность ссылок из объявлений перед модерацией;
Mozilla/5.0 (compatible; YandexSitelinks; Dyatel; +http://yandex.com/bots) — «простукивалка» быстрых ссылок, используется для проверки доступности страниц, определившихся в качестве быстрых ссылок;
Mozilla/5.0 (compatible; YandexAdNet/1.0; +http://yandex.com/bots) — робот Рекламной сети Яндекса;
Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots) — робот Яндекс.Метрики;
Mozilla/5.0 (compatible; YandexNews/3.0; +http://yandex.com/bots) — робот Яндекс.Новостей;
Mozilla/5.0 (compatible; YandexNewslinks; +http://yandex.com/bots) — «простукивалка» Яндекс.Новостей, используется для проверки ссылок из новостных материалов;
Mozilla/5.0 (compatible; YandexCatalog/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Каталога, используется для временного снятия с публикации недоступных сайтов в Каталоге;
Mozilla/5.0 (compatible; YandexAntivirus/2.0; +http://yandex.com/bots) — антивирусный робот, который проверяет страницы на наличие опасного кода;
Mozilla/5.0 (compatible; YandexZakladki/3.0; +http://yandex.com/bots) — «простукивалка» Яндекс.Закладок, используется для проверки доступности страниц, добавленных в закладки;
Mozilla/5.0 (compatible; YandexMarket/1.0; +http://yandex.com/bots) — робот Яндекс.Маркета;
Mozilla/5.0 (compatible; YandexVertis/3.0; +http://yandex.com/bots) — робот поисковых вертикалей;
Mozilla/5.0 (compatible; YandexCalendar/1.0; +http://yandex.com/bots) — робот Яндекс.Календаря, используется для синхронизации с другими календарями, особым образом интерпретирует robots.txt.


http://help.yandex.ru/webmaster/robot-work...ndex-robots.xml


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 1:05; Ответить: medved112
Сообщение #4


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Mukis, если в решили узнать юзерагент, чтобы с помощью него делать подмену, то вы опоздали на десяток лет. Если ПС заявляют, что ходят под данными юзерагентами на сайты, то это не значит, что они не ходят под другими. Все палится и очень быстро.


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
startup
startup
сообщение 22.10.2013, 1:07; Ответить: startup
Сообщение #5


Бывалый
****

Группа: User
Сообщений: 272
Регистрация: 30.8.2011
Поблагодарили: 67 раз
Репутация:   9  


Для полноты ответа smile.gif

https://support.google.com/webmasters/answer/1061943

Естественно, это не весь список ботов, есть масса тех, которые выявляют "нарушения" на сайтах.


--------------------
Оптимизация и продвижение сайтов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 13:20; Ответить: Mukis
Сообщение #6


Солнце еще высоко
******

Группа: Active User
Сообщений: 1451
Регистрация: 7.11.2012
Поблагодарили: 550 раз
Репутация:   127  


medved112, Что имеется ввиду? Подмену чего? Юзер агента? А зачем это делать? Я подменять ничего не собираюсь)
Под другими, это какими?)

Я неверное немного не правильно поставил вопрос. Хочется знать какие боты у яндекса и гугла заходят, чтобы проиндексировать ссылки на сайте. С официальными списками я знаком. Может есть наблюдения?

Сообщение отредактировал Mukis - 22.10.2013, 13:22
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 22.10.2013, 19:17; Ответить: medved112
Сообщение #7


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


Mukis, подмену контента например, разный контент для разных ЮА. Или к примеру редирект, т.е. весь трафик пускать через редирект, а ЮА поисковиков отправлять на сайт. Раньше много было выдумок.
С официальными списками я знаком. Может есть наблюдения?

Да тут вам никто не скажет, они могут сидеть под видом обычного юзера, не всегда понять можно кто на самом деле это. А для индексации скорее всего официальные и должны забрести.

Сообщение отредактировал medved112 - 22.10.2013, 19:17


--------------------
фыр фыр


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 22.10.2013, 21:53; Ответить: Mukis
Сообщение #8


Солнце еще высоко
******

Группа: Active User
Сообщений: 1451
Регистрация: 7.11.2012
Поблагодарили: 550 раз
Репутация:   127  


medved112, Ого. Ничего себе. Я и не знал. То есть можно сделать, к примеру, для пользователей ссылки не видны, а для поисковиков видны. Только теперь это ПС быстро палят? И какие их действия? Накладывают санкции?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
jack
jack
сообщение 22.10.2013, 22:15; Ответить: jack
Сообщение #9


----------------
*******

Группа: Super Moderator
Сообщений: 7863
Регистрация: 22.3.2009
Из: глины
Поблагодарили: 10734 раза
Репутация:   591  


(Mukis @ 22.10.2013, 20:53) *
Ого. Ничего себе. Я и не знал.

Это называется клоакинг smile.gif Быстро палится и жестко наказывается.


--------------------
Stimul-Cash и RX-Partners - лидеры фарма бизнеса!

Официальный канал MaulTalk в Telegram
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Mukis
Mukis
Topic Starter сообщение 23.10.2013, 13:18; Ответить: Mukis
Сообщение #10


Солнце еще высоко
******

Группа: Active User
Сообщений: 1451
Регистрация: 7.11.2012
Поблагодарили: 550 раз
Репутация:   127  


jack, Насколько быстро? Сразу (даже в индекс не пускает), через неделю? Месяц?
Санкции - пессимизация?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Требуется накрутка ботов в чаты телеграм
0 Вазелин 379 22.11.2017, 18:59
автор: Вазелин
Открытая тема (нет новых ответов) Кто может добавить быстро ботов в подписчики в группу?
Нужны боты быстро в группу?
1 nahalturu 696 29.9.2017, 14:05
автор: Smo_support
Открытая тема (нет новых ответов) Накрутка ботов
1 xxxDanielxxx 839 24.9.2017, 23:46
автор: nahalturu
Открытая тема (нет новых ответов) Разработка telegram ботов!
Предлагаю услуги по разработке telegram bot-ов
0 becoming 395 20.9.2017, 17:15
автор: becoming
Открытая тема (нет новых ответов) Оферы ВКонтакте (VIP) Без ботов
19 ipnesterov 6115 15.6.2016, 17:29
автор: ipnesterov


 



RSS Текстовая версия Сейчас: 14.12.2017, 17:29
Дизайн