X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Yandexblog пасётся на сайте, но в индекс сайт не попадает
alexa
alexa
Topic Starter сообщение 29.8.2009, 9:34; Ответить: alexa
Сообщение #1


Оптимизатор-Программист
******

Группа: Active User
Сообщений: 1507
Регистрация: 6.2.2008
Поблагодарили: 198 раз
Репутация:   54  


YandexBlog пасётся на сайте, но в индекс сайт не попадает, в чём причина ?
сайт давольно старенький
прыгал с хостинга на хостинг, менялась тематика,
но сейчас тематику более менее сохранил, и наполняю почти уником текстом ...


95.108.147.239 - - [28/Aug/2009:11:35:35 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
93.158.130.185 - - [28/Aug/2009:12:03:56 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.240 - - [28/Aug/2009:13:09:35 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
95.108.147.240 - - [28/Aug/2009:13:09:35 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
77.88.17.199 - - [28/Aug/2009:14:12:45 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.241 - - [28/Aug/2009:15:19:49 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
93.158.130.185 - - [28/Aug/2009:16:04:34 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.240 - - [28/Aug/2009:17:17:33 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.241 - - [28/Aug/2009:18:02:55 +0300] "GET /?feed=rss2 HTTP/1.1" 200 41223 "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.183 - - [28/Aug/2009:18:41:39 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
95.108.147.183 - - [28/Aug/2009:18:41:39 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.183 - - [28/Aug/2009:19:53:47 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.183 - - [28/Aug/2009:20:36:34 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
77.88.17.195 - - [28/Aug/2009:21:31:33 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.241 - - [28/Aug/2009:22:38:29 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.242 - - [28/Aug/2009:23:31:28 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
95.108.147.242 - - [28/Aug/2009:23:31:29 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
93.158.130.183 - - [29/Aug/2009:00:29:30 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
93.158.130.183 - - [29/Aug/2009:00:29:30 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.182 - - [29/Aug/2009:00:41:09 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
95.108.147.182 - - [29/Aug/2009:00:41:10 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.242 - - [29/Aug/2009:01:38:30 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.142.150 - - [29/Aug/2009:02:32:32 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:33 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:33 +0300] "GET / HTTP/1.1" 200 23439 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:35 +0300] "GET / HTTP/1.1" 200 23439 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:36 +0300] "GET / HTTP/1.1" 301 - "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.147.183 - - [29/Aug/2009:02:39:33 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
93.158.130.183 - - [29/Aug/2009:03:32:20 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.242 - - [29/Aug/2009:04:43:43 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
93.158.130.181 - - [29/Aug/2009:05:34:36 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "YandexSomething/1.0"
93.158.130.181 - - [29/Aug/2009:05:34:36 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.240 - - [29/Aug/2009:06:42:45 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"
95.108.147.239 - - [29/Aug/2009:07:21:08 +0300] "GET /?feed=rss2 HTTP/1.1" 304 - "-" "YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) 0 readers"


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ks_dp
ks_dp
сообщение 29.8.2009, 15:00; Ответить: ks_dp
Сообщение #2


Участник
***

Группа: User
Сообщений: 142
Регистрация: 24.8.2009
Из: dp_ua
Поблагодарили: 19 раз
Репутация:   1  


ТС, ИМХО, так этот бот работает только на рейтинг блогов Яндекса. Нужен этот Yandex/1.01.001 (compatible; Win16; I)
Yandex/1.03.003 (compatible; Win16; D) – робот, обращающийся к странице при добавлении ее через форму ”Добавить URL”
Yandex/1.02.000 (compatible; Win16; F) – индексация иконки сайта (favicon)
Yandex/1.01.001 (compatible; Win16; H) – определение зеркалов сайтов
Yandex/1.01.001 (compatible; Win16; I) – основной индексирующий робот
Yandex/1.03.000 (compatible; Win16; M) – робот, обращающийся при открытии страницы по ссылке ”Найденные слова”
Yandex/1.01.001 (compatible; Win16; P) – индексатор картинок
YaDirectBot/1.0 (compatible; Win 16; I) – индексация страниц сайта, участвующего в рекламной сети Яндекса
YandexBlog/0.99.101 (compatible; DOS3.30) – робот, индексирующий xml-файлы для поиска по блогам.
YandexSomething/1.0 – робот, индексирующий новостные потоки партнеров Яндекс-Новостей

Сообщение отредактировал ks_dp - 29.8.2009, 15:03


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
alexa
alexa
Topic Starter сообщение 29.8.2009, 15:20; Ответить: alexa
Сообщение #3


Оптимизатор-Программист
******

Группа: Active User
Сообщений: 1507
Регистрация: 6.2.2008
Поблагодарили: 198 раз
Репутация:   54  


ПАсибо!
тоже не густо но обращается,
чё ему контент не нравится ?
95.108.142.150 - - [19/Aug/2009:15:02:00 +0300] "GET / HTTP/1.1" 200 23750 "-" "Yandex/1.01.001 (compatible; Win16; H)"
93.158.144.27 - - [20/Aug/2009:07:52:59 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [20/Aug/2009:12:28:17 +0300] "GET / HTTP/1.1" 200 23786 "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.142.150 - - [21/Aug/2009:22:23:04 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [21/Aug/2009:22:23:05 +0300] "GET / HTTP/1.1" 301 - "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [21/Aug/2009:22:23:09 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [21/Aug/2009:22:23:10 +0300] "GET / HTTP/1.1" 200 23650 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [21/Aug/2009:22:23:12 +0300] "GET / HTTP/1.1" 200 23650 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [22/Aug/2009:02:51:37 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [22/Aug/2009:02:51:37 +0300] "GET / HTTP/1.1" 200 23451 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [22/Aug/2009:02:51:38 +0300] "GET / HTTP/1.1" 200 23451 "-" "Yandex/1.01.001 (compatible; Win16; H)"
93.158.146.240 - - [23/Aug/2009:16:25:40 +0300] "GET / HTTP/1.1" 200 23300 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.146.240 - - [23/Aug/2009:16:26:33 +0300] "GET /?p=474 HTTP/1.1" 200 10371 "-" "Yandex/1.01.001 (compatible; Win16; I)"
77.88.26.252 - - [23/Aug/2009:17:22:08 +0300] "GET /?page_id=480 HTTP/1.1" 200 20199 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [24/Aug/2009:07:56:10 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [24/Aug/2009:12:29:35 +0300] "GET / HTTP/1.1" 200 21456 "-" "Yandex/1.01.001 (compatible; Win16; I)"
77.88.22.5 - - [25/Aug/2009:07:00:22 +0300] "GET /sitemap-news.xml HTTP/1.1" 200 3914 "-" "Yandex/1.01.001 (compatible; Win16; I)"
77.88.22.5 - - [25/Aug/2009:07:00:22 +0300] "GET /sitemap.xml HTTP/1.1" 200 93745 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [25/Aug/2009:10:48:42 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [25/Aug/2009:13:56:00 +0300] "GET / HTTP/1.1" 200 21957 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [25/Aug/2009:23:18:46 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [25/Aug/2009:23:18:51 +0300] "GET / HTTP/1.1" 200 22169 "-" "Yandex/1.01.001 (compatible; Win16; I)"
77.88.22.5 - - [26/Aug/2009:02:24:20 +0300] "GET /sitemap-news.xml HTTP/1.1" 200 2822 "-" "Yandex/1.01.001 (compatible; Win16; I)"
77.88.22.5 - - [26/Aug/2009:02:24:20 +0300] "GET /sitemap.xml HTTP/1.1" 200 94633 "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.150.241 - - [28/Aug/2009:04:56:40 +0300] "HEAD /sitemap.xml HTTP/1.1" 200 - "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.150.241 - - [28/Aug/2009:04:56:44 +0300] "HEAD /sitemap-news.xml HTTP/1.1" 200 - "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.150.241 - - [28/Aug/2009:04:56:45 +0300] "GET /sitemap-news.xml HTTP/1.1" 200 2513 "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.150.241 - - [28/Aug/2009:04:56:44 +0300] "GET /sitemap.xml HTTP/1.1" 200 123316 "-" "Yandex/1.01.001 (compatible; Win16; I)"
95.108.142.150 - - [28/Aug/2009:05:34:38 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [28/Aug/2009:05:34:38 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [28/Aug/2009:05:34:39 +0300] "GET / HTTP/1.1" 200 21850 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [28/Aug/2009:05:34:41 +0300] "GET / HTTP/1.1" 200 21850 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [28/Aug/2009:05:34:43 +0300] "GET / HTTP/1.1" 301 - "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:32 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:33 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:33 +0300] "GET / HTTP/1.1" 200 23439 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:35 +0300] "GET / HTTP/1.1" 200 23439 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [29/Aug/2009:02:32:36 +0300] "GET / HTTP/1.1" 301 - "-" "Yandex/1.01.001 (compatible; Win16; H)"
93.158.144.27 - - [29/Aug/2009:10:32:13 +0300] "GET /robots.txt HTTP/1.1" 200 47 "-" "Yandex/1.01.001 (compatible; Win16; I)"
93.158.144.27 - - [29/Aug/2009:13:47:39 +0300] "GET / HTTP/1.1" 200 23706 "-" "Yandex/1.01.001 (compatible; Win16; I)"


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ks_dp
ks_dp
сообщение 29.8.2009, 15:25; Ответить: ks_dp
Сообщение #4


Участник
***

Группа: User
Сообщений: 142
Регистрация: 24.8.2009
Из: dp_ua
Поблагодарили: 19 раз
Репутация:   1  


Как часто обновляется контент, и вообще качественный ли он?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
4ester7
4ester7
сообщение 30.8.2009, 2:47; Ответить: 4ester7
Сообщение #5


SEO-ломастер
******


Группа: Active User
Сообщений: 1635
Регистрация: 21.5.2009
Из: Кременчуг
Поблагодарили: 472 раза
Репутация:   105  


в ключах присутствует "блог" или что-то в этом роде, если да, то наверное копипаст контент просто.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
medved112
medved112
сообщение 30.8.2009, 3:04; Ответить: medved112
Сообщение #6


В меру упитанная панда в полном расцвете сил
*******

Группа: Active User
Сообщений: 3182
Регистрация: 17.10.2008
Поблагодарили: 1374 раза
Репутация:   139  


У меня также, разговаривал с человеком - говорит и на забаненных робот пасется бывает, проверил свои забаненные - действительно, робот периодически просматривает страницы, хотя домен в бане уже пол года


--------------------
фыр фыр
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
alexa
alexa
Topic Starter сообщение 30.8.2009, 22:56; Ответить: alexa
Сообщение #7


Оптимизатор-Программист
******

Группа: Active User
Сообщений: 1507
Регистрация: 6.2.2008
Поблагодарили: 198 раз
Репутация:   54  


бана нет(сайт добавляется в адурл), контент нормальный, был бы это нулевой сайт , уверен что проиндексировался бы


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Посоветуйте тему WP! Новостной сайт
Нужна тема WP желательно рус и с ТП
12 aidos 857 Вчера, 22:58
автор: Nell
Открытая тема (нет новых ответов) 17 вещей на вашем сайте, которые ненавидят
Один из постулатов маркетинга — не раздражать людей
25 PostBrigada 3559 Вчера, 21:44
автор: alexandrrr
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыПрошу оценить новостной сайт
7 Cunningfox 680 Вчера, 20:31
автор: alexandrrr
Открытая тема (нет новых ответов) Оцените сайт на профпригодность
помощь по сайту
3 kupec 531 Вчера, 15:21
автор: Iga
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыПрибыль с видео на сайте и в соц сетях
Как получить доп доход с нативного контента
14 maxim_krasovskiy 2798 Вчера, 12:05
автор: maxim_krasovskiy


 



RSS Текстовая версия Сейчас: 13.12.2017, 6:09
Дизайн