X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Гугл индексирует запрет
Exitoso
Exitoso
Topic Starter сообщение 31.1.2014, 19:35; Ответить: Exitoso
Сообщение #1


Как так, в файле роботс стоит запрет на индексацию страниц сайт.ру/user/...., но гугл красавчик же, проиндексировал страницы, в поиске выдает ссылки на страницы юзеров и пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.", как так???


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
angarsky
angarsky
сообщение 31.1.2014, 19:47; Ответить: angarsky
Сообщение #2


Добро пожаловать, в клуб любителей Google. Эта проблема существует давно. Попробуйте удалить все лишнее через Webmaster и в метатеге страницы запретить индексацию - эти указания Google вроде как слушает.


--------------------
SEO и Drupal по понятиям.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
dvaadventure
dvaadventure
сообщение 2.2.2014, 20:05; Ответить: dvaadventure
Сообщение #3


Зайдите в гугл вебмастертулз / выберите нужный сайт / индекс google / Удалить URL-адреса
и будет Вам счастье smile.gif


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wh1mp
wh1mp
сообщение 24.2.2014, 21:49; Ответить: wh1mp
Сообщение #4


angarsky,
а как быть например, с сайтами которые на cms joomla, dle, wp? Подскажите пожалуйста я в этом нуб( желательно с примерами.

Сообщение отредактировал wh1mp - 24.2.2014, 21:50


--------------------
Отличный хостинг и адекватная тех. поддержка тут
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
waytoreason
waytoreason
сообщение 24.2.2014, 22:22; Ответить: waytoreason
Сообщение #5


Есть сканирование, а есть индексирование.

Сканирование - это получение списка страниц сайта. Индексирование - процесс анализа содержания страницы по словам, данные тегов Title, Alt и т.д.

Гугл, в отличие от Яндекса, сканирует все :) Написав в Robots директиву Disallow: /user - Вы запрещаете индексирование.

Кто-то удаляет такие ссылки через инструменты Google, я не удаляю, не вижу смысла. Эти страницы сайта можно найти только если ввести запрос: site:название сайта, в обычном поиске такие страницы не светятся.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
wh1mp
wh1mp
сообщение 24.2.2014, 22:44; Ответить: wh1mp
Сообщение #6


waytoreason,
а вес сайта не растикается по таким страницам?


--------------------
Отличный хостинг и адекватная тех. поддержка тут
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
waytoreason
waytoreason
сообщение 25.2.2014, 1:15; Ответить: waytoreason
Сообщение #7


wh1mp, не замечал такого.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
evkuv
evkuv
сообщение 27.2.2014, 14:55; Ответить: evkuv
Сообщение #8


такая же проблема, думаю она у всех. Пыталась удалять ссылки через вебмастер, но каждый раз это напряжно. Оставлю теперь все как есть


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
v123
v123
сообщение 5.3.2014, 12:40; Ответить: v123
Сообщение #9


Цитата(wh1mp @ 24.2.2014, 21:49) *
а как быть например, с сайтами которые на cms joomla, dle, wp?

Ну тут ситуация непонятная. В основном настоятельно рекомендуют вообще все закрывать, кроме контентных страниц. Но лично я экспериментировал: в одном сайте на WP все закрыл, в другом не закрывал ничего. Сканируется и индексируется везде одинаково. А какой смысл закрывать? Что, Яша все скриптовые файлы молотить что ли будет? Нет. Так же и гугл - да, он видит то, что в скриптах. По крайней мере так говорят. Но разве вы когда-нибудь в выдаче видели внутренность таких файлов?

Это я к тому, что поисковые системы устроены очень умно, над ними работают уже два десятка лет. И их специалисты знают все особенности cms. И сами не позволяют сканировать и индексировать ненужное. Посудите сами: им ведь тоже нужна качественная выдача, а не выдача всего подряд.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Master_It
Master_It
сообщение 6.3.2014, 1:51; Ответить: Master_It
Сообщение #10


На WordPress можно, даже нужно, использовать канонические адреса, чтобы сопли вида #more не попадали в выдачу.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Agent Accounts Google, TikTok, Bing, Facebook, VK, Yandex.Direct with balances(Агентские аккаунты Гугл,Фейсбук,ВКонтакте,Директ)
Не платите НДС 20% + Постоплата (Возврат до 50% бюджета)
0 ipnesterov 2282 21.4.2020, 15:54
автор: ipnesterov
Открытая тема (нет новых ответов) Ищу волшебника Гугл-таблиц
2 Bel_Ami 2051 6.12.2019, 19:36
автор: REGNET
Открытая тема (нет новых ответов) Куплю гугл отзывы на карте google
Желательно люди с Украины и хотя бы базовым уровнем
2 jorjo22 3163 13.7.2019, 23:23
автор: aleks19
Открытая тема (нет новых ответов) Настройка и ведение ваших компаний по контекстной рекламе Яндекс Директ и Гугл Эдвордс
23 AvramLincoln 10351 5.2.2019, 13:36
автор: AvramLincoln
Открытая тема (нет новых ответов) Оптимизирую Скорость Загрузки Вашего Сайта и Увеличу количество баллов в Гугл Пейдж Спид
0 procsi 3480 18.12.2017, 17:40
автор: procsi


 



RSS Текстовая версия Сейчас: 19.4.2024, 20:45
Дизайн