Помощник
|
Будет ли робот яндекса загружать страницы из запрещенного раздела |
v0233
|
Сообщение
#1
|
||
|
|
||
|
|||
leshii_sf |
4.3.2012, 14:10;
Ответить: leshii_sf
Сообщение
#2
|
|
|
Будет ли он туда лезть и качать закрытые страницы скорее всего можно узнать в логах сервера. robots.txt предназначен дл управления индексацией, поэтому "новости" просто не будут проиндексированы. А вот зачем ему лезть в закрытый раздел... из любопытства)
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Сайты с доходом на продажу. Будет ли спрос? | 46 | Telnor | 45073 | 30.3.2024, 15:37 автор: trustedadvisor |
|
Продвижение сайтов в ТОП Яндекса за 2 недели. Рост позиций и трафика Бесплатный тест |
19 | Konrod | 9888 | 18.3.2024, 10:04 автор: Konrod |
|
Нужно ли закрывать ненужные страницы тегом noindex, follow? | 8 | noviktamw | 2913 | 2.3.2024, 12:53 автор: toplinks |
|
Вывод подсказок в топ яндекса + продвижение сайта | 6 | Mikhail_B | 1931 | 4.9.2022, 19:21 автор: Monah |
|
тИЦ отменили! Новый показатель Яндекса ИКС! Лучшие площадки под размещение. Бесплатное написание статей при любом заказе. Эксклюзивное предложение. Успей получить написание статей БЕСПЛАТНО |
71 | VIMstat | 78491 | 21.6.2022, 9:38 автор: VIMstat |
Текстовая версия | Сейчас: 23.4.2024, 16:35 |