Помощник
|
Помогите с robots.txt |
quicks
|
Сообщение
#1
|
||
|
|
||
|
|||
FladeX |
19.12.2010, 15:31;
Ответить: FladeX
Сообщение
#2
|
|
Файл составлен правильно. То, что бот запрашивает эти странички - не страшно. В индексе они всё равно не появятся, а это самое главное.
Allow только не в тему. С первого раза не заметил) Сообщение отредактировал FladeX - 19.12.2010, 15:33 |
|
|
Bra1n |
19.12.2010, 15:35;
Ответить: Bra1n
Сообщение
#3
|
|
роботс составлен не правильно.
User-agent: Yandex Disallow: /*print Disallow: /user/ Disallow: /backup/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /uploads/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?dom Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /?do=lastcomments Disallow: /statistics.html Sitemap: http://site.com/sitemap.xml Host: site.com User-agent: * Disallow: /*print Disallow: /user/ Disallow: /backup/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /uploads/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?dom Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /?do=lastcomments Disallow: /statistics.html Вот так в точности будет правильно |
|
|
Tollun |
19.12.2010, 15:35;
Ответить: Tollun
Сообщение
#4
|
|
|
|
|
Bra1n |
19.12.2010, 15:38;
Ответить: Bra1n
Сообщение
#5
|
|
и у тебя неправильно
и где же тут не правильно? |
|
|
Tollun |
19.12.2010, 15:51;
Ответить: Tollun
Сообщение
#6
|
|
и где же тут не правильно? у него неправильно, так будет звучать вернее есть такое правило, если писать /xxx то будет запрещатся всё начинающиеся на это включая подкаталоги а если /xxx/ то только первый каталог а тот же /xxx/xx будет индексироваться. по этому правильнее Disallow: /backup Disallow: /engine Disallow: /language Disallow: /templates Disallow: /upgrade Disallow: /uploads Но вот почему-то у меня в индекс как то и таким образом запрещённый подкаталог залез (в ya) поэтому чтобы наверняка, то Disallow: /backup/*
Disallow: /engine/* Disallow: /language/* Disallow: /templates/* Disallow: /upgrade/* Disallow: /uploads/* |
|
|
Bra1n |
19.12.2010, 15:58;
Ответить: Bra1n
Сообщение
#7
|
|
правильность роботса вы всегда можете проверить здесь http://webmaster.yandex.ru/robots.xml
|
|
|
Tollun |
19.12.2010, 16:03;
Ответить: Tollun
Сообщение
#8
|
|
а так же ознакомится с мануалом по его использованию: http://help.yandex.ru/webmaster/?id=996567
|
|
|
FladeX |
19.12.2010, 16:04;
Ответить: FladeX
Сообщение
#9
|
|
есть такое правило, если писать /xxx то будет запрещатся всё начинающиеся на это включая подкаталоги а если /xxx/ то только первый каталог а тот же /xxx/xx будет индексироваться. Для таких случаев используется специальный символ $, обозначающий конец строки. Без этого символа под условие подходят все строки, имеющие указанную часть пути и любое продолжение - хоть слэш, хоть [a-z0-9]. |
|
|
Tollun |
19.12.2010, 16:06;
Ответить: Tollun
Сообщение
#10
|
|
Для таких случаев используется специальный символ $, обозначающий конец строки. Без этого символа под условие подходят все строки, имеющие указанную часть пути и любое продолжение - хоть слэш, хоть [a-z0-9]. речь не о том чтобы ограничить, а о том, чтобы небыло этого ограничения - именно поэтому * или отсутствие слэша на конце |
|
|
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Помогите вспомнить рекламного бота Телеграм для обмена рекламой | 0 | Mixatraider | 729 | 21.2.2024, 23:42 автор: Mixatraider |
|
Помогите рещить проблему с монитором. Почему низкое разрешение при подключении монитора через displayport? |
0 | Levels | 1702 | 11.12.2020, 0:48 автор: Levels |
|
Помогите кто нибудь получить партнерку Росбанк! | 7 | heisenberg_mw | 2343 | 7.8.2020, 9:28 автор: heisenberg_mw |
|
Помогите найти тему пожалуйста | 7 | virtas | 12523 | 24.7.2020, 17:02 автор: -JamesSmips- |
|
Помогите с поиском доноров | 3 | tehno_music | 3358 | 4.11.2019, 17:15 автор: goblin78 |
Текстовая версия | Сейчас: 24.4.2024, 15:59 |