X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Добавить ответ в эту тему
> Как закрыть от робота страницы?
antart
antart
Topic Starter сообщение 22.5.2020, 7:34; Ответить: antart
Сообщение #1


Частый гость
**

Группа: User
Сообщений: 54
Регистрация: 3.2.2018
Поблагодарили: 2 раза
Репутация:   0  


Всем привет. Столкнулся с проблемой, после смены шаблона робот начал смотреть страницы-черновики статей. В вебмастере они показываются как загруженные:



Как сделать, чтобы они были недоступны роботу для просмотра?

0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pyaterka
pyaterka
сообщение 22.5.2020, 14:36; Ответить: pyaterka
Сообщение #2


Частый гость
**

Группа: User
Сообщений: 68
Регистрация: 17.5.2020
Из: Украина
Поблагодарили: 4 раза
Репутация:   0  


antart,
Запрет для всех User-agent: *
Disallow: /
Запрет для отдельного робота User-agent: YandexImages
Disallow: /
Запрет для всех, кроме одного робота User-agent: *
Disallow: /
User-agent: Yandex
Allow: /


Запрет индексации

Отдельной страницы User-agent: *
Disallow: /contact.html
Раздела User-agent: *
Disallow: /catalog/
Всего сайта, кроме одного раздела User-agent: *
Disallow: /
Allow: /catalog
Всего раздела, кроме одного подраздела User-agent: *
Disallow: /product
Allow: /product/auto
Поиска на сайте User-agent: *
Disallow: /search
Административной панели User-agent: *
Disallow: /admin

Как закрыть другую информацию
Запрет индексации

Типа файлов User-agent: *
Disallow: /*.jpg
Папки User-agent: *
Disallow: /images/
Папку, кроме одного файла User-agent: *
Disallow: /images/
Allow: file.jpg
Скриптов User-agent: *
Disallow: /plugins/*.js
utm-меток User-agent: *
Disallow: *utm=
utm-меток для Яндекса Clean-Param: utm_source&utm_medium&utm_campaign
Как закрыть сайт через мета-теги
Вариант 1.
<meta name=”robots” content=”noindex, nofollow”/>

Вариант 2.
<meta name=”robots” content=”none”/>
Атрибут “content” имеет следующие значения:


--------------------
Веб разработка сайтов, игор, магазинов, форумов.


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
VinogradOFF
VinogradOFF
сообщение 22.5.2020, 23:23; Ответить: VinogradOFF
Сообщение #3


Топовый постер
*******


Группа: Active User
Сообщений: 4123
Регистрация: 7.8.2018
Из: Казань
Поблагодарили: 560 раз
Репутация:   43  


pyaterka, а нельзя было человеку просто написать сразу:

Код
Disallow: */?p=


Только ТС, указанная мной выше конструкция уберет из индекса все посты с такой переменной т.е. если у тебя обычные посты (не черновики) тоже через ?p= а не через ЧПУ то не делай так


Поблагодарили: (1)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pyaterka
pyaterka
сообщение 23.5.2020, 0:35; Ответить: pyaterka
Сообщение #4


Частый гость
**

Группа: User
Сообщений: 68
Регистрация: 17.5.2020
Из: Украина
Поблагодарили: 4 раза
Репутация:   0  


VinogradOFF, а почему бы не ответить глобальней )


--------------------
Веб разработка сайтов, игор, магазинов, форумов.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
antart
antart
Topic Starter сообщение 24.5.2020, 9:38; Ответить: antart
Сообщение #5


Частый гость
**

Группа: User
Сообщений: 54
Регистрация: 3.2.2018
Поблагодарили: 2 раза
Репутация:   0  


VinogradOFF, pyaterka, спасибо) Простые статьи через ЧПУ.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Ostromir
Ostromir
сообщение 24.5.2020, 11:19; Ответить: Ostromir
Сообщение #6


Бывалый
****

Группа: User
Сообщений: 428
Регистрация: 10.8.2018
Поблагодарили: 38 раз
Репутация:   1  


VinogradOFF, а почему не так?

Код
Disallow: /?p=*


или это не будет работать?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Добавить ответ в эту тему
Быстрый ответ
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Как оправдать фейковый адрес организации
3 peacemaker 128 Вчера, 22:38
автор: VinogradOFF
Открытая тема (нет новых ответов) «Яндекс.Деньги» перестанет существовать после того, как перейдёт «Сбербанку»
считают аналитики.
11 VinogradOFF 311 Вчера, 21:53
автор: VinogradOFF
Открытая тема (нет новых ответов) Каталог товаров под заказ, как лучше реализовать?
НЕ интернет-магазин
1 Eji 78 Вчера, 13:45
автор: qpPeW
Горячая тема (нет новых ответов) Атака клонов! Или как бороться с мультиаккаунтами.
98 Pelican_Program 24409 Вчера, 13:19
автор: Pelican_Program
Открытая тема (нет новых ответов) Как купить аккаунт фейсбук?
8 Wanna_play_Lineage2 399 4.6.2020, 22:55
автор: EvilGomel


 



RSS Текстовая версия Сейчас: 6.6.2020, 5:31
Дизайн