X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

Открыть тему
Тема закрыта
> Еще раз о Robots.txt
pashich
pashich
Topic Starter сообщение 23.12.2012, 5:10; Ответить: pashich
Сообщение #1


неадекват
****


Группа: Banned
Сообщений: 441
Регистрация: 30.10.2011
Из: Санкт-Петербург
Поблагодарили: 69 раз
Репутация:   14  


Подскажите пожалуйста, хочу полностью закрыть один скрипт от индексации, там по дефолту создался такой Robots.txt

User-agent: *
Disallow: /browse.php
Disallow: /tmp


оно? Или надо править?


--------------------
неадекват
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
saraus
saraus
сообщение 23.12.2012, 5:30; Ответить: saraus
Сообщение #2


Старожил
******

Группа: Active User
Сообщений: 1219
Регистрация: 21.6.2011
Поблагодарили: 418 раз
Репутация:   67  


(pashich @ 23.12.2012, 4:10) *
закрыть один скрипт от индексаци

Если это browse.php, то все верно..
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pashich
pashich
Topic Starter сообщение 23.12.2012, 12:59; Ответить: pashich
Сообщение #3


неадекват
****


Группа: Banned
Сообщений: 441
Регистрация: 30.10.2011
Из: Санкт-Петербург
Поблагодарили: 69 раз
Репутация:   14  


saraus, благодарю.

Подскажите пожалуйста еще, Robots.txt рулит какие страницы показывать поисковым роботам, а что делает .htacces? Понимаю что нубский вопрос, но вот надо же когда-то с ним разобраться


--------------------
неадекват
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
saraus
saraus
сообщение 23.12.2012, 19:16; Ответить: saraus
Сообщение #4


Старожил
******

Группа: Active User
Сообщений: 1219
Регистрация: 21.6.2011
Поблагодарили: 418 раз
Репутация:   67  


(pashich @ 23.12.2012, 11:59) *
какие страницы показывать поисковым роботам

Смотря что Вам нужно. Если под бс, то вобще ничего закрывать не надо)). На нормальном сайте по идее должны быть открыты непосредственно статьи, ну можно еще рубрики, теги открыть (без постраничной навигации), если сайт трастовый, на новом желательно только главная и статьи.

(pashich @ 23.12.2012, 11:59) *
а что делает .htacces?

Много чего. В основном, что касается защиты сайта, а так же: блокировка нежелательных айпи, права на файлы, скрипты, перенаправление, редирект и прочее.. Подробнее юзаем поиск..
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pashich
pashich
Topic Starter сообщение 23.12.2012, 19:41; Ответить: pashich
Сообщение #5


неадекват
****


Группа: Banned
Сообщений: 441
Регистрация: 30.10.2011
Из: Санкт-Петербург
Поблагодарили: 69 раз
Репутация:   14  


у меня веб сервер nginx, а .htacces, я так понимаю, только для апача?


--------------------
неадекват
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
saraus
saraus
сообщение 23.12.2012, 20:41; Ответить: saraus
Сообщение #6


Старожил
******

Группа: Active User
Сообщений: 1219
Регистрация: 21.6.2011
Поблагодарили: 418 раз
Репутация:   67  


(pashich @ 23.12.2012, 18:41) *
.htacces, я так понимаю, только для апача

Совершенно верно
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pashich
pashich
Topic Starter сообщение 23.12.2012, 20:54; Ответить: pashich
Сообщение #7


неадекват
****


Группа: Banned
Сообщений: 441
Регистрация: 30.10.2011
Из: Санкт-Петербург
Поблагодарили: 69 раз
Репутация:   14  


А как тогда в nginx сделать запрет ip и т.д.? Вот к чему я это все спрашиваю. Сделал я на своем VPS себе анонимайзер. И вот не хочу чтобы левые люди его юзали. От индексации, как я понимаю, Robots.txt как в первом посте мне его закрывает. Но надо ли еще что-то сделать, чтобы левым было сложнее его найти?


--------------------
неадекват
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Vice
Vice
сообщение 23.12.2012, 23:04; Ответить: Vice
Сообщение #8


Новичок
*


Группа: User
Сообщений: 34
Регистрация: 16.10.2010
Поблагодарили: 7 раз
Репутация:   2  


pashich, что вы понимаете под "найти"? Если через поисковые систему - robots.txt будет достаточно. Если кто-то знает адрес, но вы не хотите, чтобы он пользовался - защита паролем вас спасёт


--------------------
Templatify - оригинальные премиум-шаблоны знаменитых студий за смешные деньги
StudioPress, ElegantThemes, WooThemes, MySiteMyWay, BoxedArt, TemplateWorld
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
saraus
saraus
сообщение 24.12.2012, 9:37; Ответить: saraus
Сообщение #9


Старожил
******

Группа: Active User
Сообщений: 1219
Регистрация: 21.6.2011
Поблагодарили: 418 раз
Репутация:   67  


(pashich @ 23.12.2012, 19:54) *
А как тогда в nginx сделать запрет ip и т.д.?

​Честно говоря хз, с nginx не работал ни разу, сидел, сижу на апаче. Чисто теоретически включить юзание скрипта только с вашего айпи или как сказал Vice, под пароль ставить папку. Но лучше это спросить у тех кто петрит в этом сервере..
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
135 Akira 47455 28.11.2017, 1:05
автор: Akira
Открытая тема (нет новых ответов) На текстовых биржах все еще можно заработать
postbrigada.ru - плохие тексты тоже тексты
13 PostBrigada 1190 27.11.2017, 21:01
автор: PostBrigada
Открытая тема (нет новых ответов) Nofollow ссылки из robots.txt, как это работает?
Как-то запретить к индексации без rel="nofollow" из robots.txt
7 coremission 482 17.11.2017, 17:17
автор: coremission
Открытая тема (нет новых ответов) На МКС впервые за 17 лет поменяют принтеры, выпущенные еще в 2000 году
0 MissContent 456 7.11.2017, 16:04
автор: MissContent
Открытая тема (нет новых ответов) Транскрибация аудио/видео записей и еще много полезных услуг для вас!
читать всем)))
3 robot_yaga2 766 23.10.2017, 20:15
автор: robot_yaga2


 



RSS Текстовая версия Сейчас: 13.12.2017, 21:27
Дизайн