Помощник
|
Помогите с написание робота пожалуйста! |
admin |
2.2.2011, 21:47;
Ответить: admin
Сообщение
#1
|
||
|
|
||
|
|||
Qvvi |
4.2.2011, 21:42;
Ответить: Qvvi
Сообщение
#2
|
|
|
User-agent: *
Disallow: /admin/ Disallow: /contrib/ Disallow: /doc/ Disallow: /lib/ Disallow: /modules/ Disallow: /plugins/ Disallow: /scripts/ Disallow: /tmp/ Host: www.site.ru Sitemap: http://www.site.ru/sitemap.xml Где Disallow: /admin/ Disallow: /contrib/ Disallow: /doc/ Disallow: /lib/ Disallow: /modules/ Disallow: /plugins/ Disallow: /scripts/ Disallow: /tmp/ - ссылки на страницы, которые вы не хотите что бы робот индексировал. Полный путь писать не надо Если есть www.site.ru/users - и вы хотите его закрыть - напишите: Disallow: /users/ Этого будет достаточно Закинуть в корень сайта будет достаточным.
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Помогите вспомнить рекламного бота Телеграм для обмена рекламой | 0 | Mixatraider | 725 | 21.2.2024, 23:42 автор: Mixatraider |
|
"Извините, что ожидание затянулось, но не думайте, пожалуйста, что мы про вас забыли. Мы заводим задачи по всем обращениям и контролируем работу над ними самым тщательным образом." Вопрос |
0 | kuz999 | 1243 | 5.2.2024, 14:06 автор: kuz999 |
|
Написание софта, разработка сайтов, моб. приложений и игр | 3 | BurzhuyXXi | 2411 | 10.11.2023, 19:51 автор: BurzhuyXXi |
|
Написание и размещение отзывов Заказываем отзывы |
6 | Blacktext | 2177 | 3.3.2023, 17:52 автор: kontenta |
|
Написание софта, разработка сайтов, моб. приложений и игр | 4 | BurzhuyXXi | 2294 | 25.2.2023, 14:35 автор: BurzhuyXXi |
Текстовая версия | Сейчас: 18.4.2024, 12:17 |