Помощник
 |
|
|
|
|
Сообщение сайта
 Как правильно разрешить в robots.txt индексацию всего сайта? |
metvekot
|
Сообщение
#1
|
||
 Старожил  Группа: Active User Сообщений: 1390 Регистрация: 5.8.2015 Поблагодарили: 188 раз Репутация:  30 
 |
|
||
 |
|
||
 |
x64
|
 1.12.2015, 19:36;
Ответить: x64
Сообщение
#2
|
 F.A.L.L.O.U.T. Группа: Active User Сообщений: 4055 Регистрация: 30.6.2011 Из: Железнодорожный (Балашиха) Поблагодарили: 3409 раз Репутация: 331
|
Всё просто
|
|
|
|
|
Drupal_way
|
1.12.2015, 20:52;
Ответить: Drupal_way
Сообщение
#3
|
 Бывалый Группа: User Сообщений: 410 Регистрация: 17.12.2011 Из: Ростов-на-Дону Поблагодарили: 73 раза Репутация: 6
|
Allow: /
-------------------- |
|
|
|
|
kronos
|
2.12.2015, 1:32;
Ответить: kronos
Сообщение
#4
|
 Белый веб-мастер 
 Группа: Active User Сообщений: 4703 Регистрация: 10.2.2009 Из: Харьков Поблагодарили: 2633 раза Репутация: 328
|
"Allow: /" и "Disallow:"
Это одно и то же. Пробел не важен. А какой вообще в этой строке смысл? Код User-agent: *
Disallow: -------------------- |
|
|
|
|
Вентилятор
|
2.12.2015, 3:27;
Ответить: Вентилятор
Сообщение
#5
|
 покупаю хорошие проекты Группа: Active User Сообщений: 1938 Регистрация: 8.8.2010 Поблагодарили: 663 раза Репутация: 112
|
вообще в таком случае роботс.тхт снесите, да и всё.
|
|
|
|
|
Элантрис
|
2.12.2015, 17:33;
Ответить: Элантрис
Сообщение
#6
|
 Участник Группа: User Сообщений: 246 Регистрация: 19.4.2013 Из: Москва Поблагодарили: 114 раз Репутация: 25
|
Robots.txt необходим для ограничения и настройки работы поисковых роботов на сайте, вы можете вовсе не использовать данный документ, тогда поисковые роботы съедят все что найдут. Пример такой реализации на IT портале Медуза.
-------------------- |
|
|
|
|
Sunnyky
|
22.12.2015, 16:15;
Ответить: Sunnyky
Сообщение
#7
|
|
|
Новичок Группа: Viewer Сообщений: 20 Регистрация: 22.12.2015 Поблагодарили: 0 раз Репутация: 0
|
Как сказали форумчане выше, роботс можно и вовсе снести, но я бы рекомендовал в нем указать основной хост и доступ к сайтмапу. По ускорению индексации и настройке роботса есть норм урок у топэксперт - http://www.topexpert.pro/open-seo-lessons/lesson-60.html
|
|
|
|
|
|
|
Похожие темы
| Тема | Ответов | Автор | Просмотров | Последний ответ | |
|---|---|---|---|---|---|
 |
Как вы отдыхаете от работы за компом | 151 | adw-kupon.ru | 19809 | Сегодня, 13:52 автор: Vmir |
 |
Какой % отказов нормален для сайта? | 14 | Aloof | 3362 | Сегодня, 13:50 автор: Vmir |
|
Как вы бросили работу и перешли на заработок с сайтов? | 20 | uahomka | 3439 | Сегодня, 11:54 автор: Skyworker |
|
Как в пушсетках покупают по 100-200 тысяч кликов за день? | 1 | Boymaster | 507 | Сегодня, 11:45 автор: Skyworker |
|
 Быстрая индексация страниц сайта и обратных ссылок - 2Index |
39 | 2Index | 6716 | Вчера, 16:16 автор: 2Index |
|
Текстовая версия | Сейчас: 23.4.2024, 18:38 |
