X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость ( Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Нужна помощь Sitemap и Robots. Профи помогите.
Руслан_sf
Руслан_sf
Topic Starter сообщение 29.10.2013, 12:05; Ответить: Руслан_sf
Сообщение #1


Новичок
*

Группа: User
Сообщений: 6
Регистрация: 29.10.2013
Поблагодарили: 0 раз
Репутация:   0  


Добрый день всем.

Проблема следующего характера, сайт с большим количеством загруженных страниц (www.mtk.ru) в Вэбмастере около 1 200 000 в поиске всего 995 :)) Постоянно "колбасит" то вверх до 3 000 страниц то вниз как сейчас.

В Robots хочу закрыть доступ к разделам не нужным в индексации и в sitemap создать "индекс" с подкартами. Проблема в том что не знаю как убрать длинные имена в поисках - портят индексацию и далеко не спец по таким вопросам.

Обращался ко многим - без результатно. Самому хочется разобраться. Хэлп ?

Подскажите пж. с чего начать ?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
GreenT
GreenT
сообщение 29.10.2013, 12:44; Ответить: GreenT
Сообщение #2


Участник
***

Группа: User
Сообщений: 103
Регистрация: 20.9.2013
Поблагодарили: 0 раз
Репутация:   0  


У вас так называемые человеко понятные урлы (ЧПУ) их и рекомендуют делать всегда, в чем проблема с именами?

пример роботс для яндекса

Первое идет само имя бота, для которого инструкция
сл команда означает запрет и после двоеточия указываем что запрещаем - в данном случае все урлы сайта начинающиеся на /cgi-bin

курите этот сайт http://robotstxt.org.ru/ там все достаточно просто и подробно расписано

User-agent: Yandex
Disallow: /cgi-bin
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Руслан_sf
Руслан_sf
Topic Starter сообщение 29.10.2013, 13:30; Ответить: Руслан_sf
Сообщение #3


Новичок
*

Группа: User
Сообщений: 6
Регистрация: 29.10.2013
Поблагодарили: 0 раз
Репутация:   0  


(GreenT @ 29.10.2013, 15:44) *
У вас так называемые человеко понятные урлы (ЧПУ) их и рекомендуют делать всегда, в чем проблема с именами?

пример роботс для яндекса

Первое идет само имя бота, для которого инструкция
сл команда означает запрет и после двоеточия указываем что запрещаем - в данном случае все урлы сайта начинающиеся на /cgi-bin

курите этот сайт http://robotstxt.org.ru/ там все достаточно просто и подробно расписано

User-agent: Yandex
Disallow: /cgi-bin



Спасибо. Огромное. Почитаю.

Если что можно задавать вопросы ?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
GreenT
GreenT
сообщение 29.10.2013, 13:33; Ответить: GreenT
Сообщение #4


Участник
***

Группа: User
Сообщений: 103
Регистрация: 20.9.2013
Поблагодарили: 0 раз
Репутация:   0  


а почему нельзя то )
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Руслан_sf
Руслан_sf
Topic Starter сообщение 30.10.2013, 23:25; Ответить: Руслан_sf
Сообщение #5


Новичок
*

Группа: User
Сообщений: 6
Регистрация: 29.10.2013
Поблагодарили: 0 раз
Репутация:   0  


Добрый вечер или день.

Подскажите пж, команда:
Disallow: /list/rent/rooms/?* - все папки и тд после ? индексироваться не будут. Пример: /list/rent/rooms/?ren3737 не пойдет на посещение робота.
[/FONT]
Я правильно понял команду ?

[FONT=Trebuchet MS]Спс
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
GreenT
GreenT
сообщение 31.10.2013, 10:00; Ответить: GreenT
Сообщение #6


Участник
***

Группа: User
Сообщений: 103
Регистрация: 20.9.2013
Поблагодарили: 0 раз
Репутация:   0  


(Руслан_sf @ 31.10.2013, 02:25) *
Disallow: /list/rent/rooms/?* - все папки и тд после ? индексироваться не будут. Пример: /list/rent/rooms/?ren3737 не пойдет на посещение робота.

Не правильно

Disallow: /list/rent/rooms*
[/FONT]
вот это верное решение

[FONT=Trebuchet MS]курите это дополнительно
http://help.yandex.ru/webmaster/controllin.../robots-txt.xml
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
leshii_sf
leshii_sf
сообщение 1.11.2013, 1:13; Ответить: leshii_sf
Сообщение #7


Топовый постер
*******

Группа: Active User
Сообщений: 2589
Регистрация: 4.9.2011
Поблагодарили: 6 раз
Репутация:   1  


(GreenT @ 31.10.2013, 13:00) *
Disallow: /list/rent/rooms* вот это верное решение

а если /list/rent/rooms/itemnumber нужно индексировать? или /list/rent/roomscat
вопрос ведь был "закрыть все, что после "?".
--- добавлено: 1 ноя 2013 в 01:13 ---
(Руслан_sf @ 31.10.2013, 02:25) *
Disallow: /list/rent/rooms/?* - все папки и тд после ? индексироваться не будут. Пример: /list/rent/rooms/?ren3737 не пойдет на посещение робота. Я правильно понял команду ?

да.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Marketologov
Marketologov
сообщение 1.11.2013, 16:58; Ответить: Marketologov
Сообщение #8


Старожил
******

Группа: User
Сообщений: 2059
Регистрация: 6.2.2011
Поблагодарили: 0 раз
Репутация:   0  


leshii, прав в данном случае.

(Руслан_sf @ 29.10.2013, 15:05) *
Проблема в том что не знаю как убрать длинные имена в поисках - портят индексацию и далеко не спец по таким вопросам.

Зачем Вам их закрывать и как они могут портить индексацию?
Это дубли?
Если нет, то их лучше не закрывать.

Вот можете почитать мою статью

Для проверки,что бы каждый раз не задавать вопросы и не ждать на них ответов, пользуйтесь этим
Тут можно все проверить и протестовать, что будет индексировать, а что нет.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
MasterMarti
MasterMarti
сообщение 5.11.2013, 18:09; Ответить: MasterMarti
Сообщение #9


Частый гость
**

Группа: User
Сообщений: 86
Регистрация: 29.8.2013
Поблагодарили: 24 раза
Репутация:   9  


(leshii_sf @ 1.11.2013, 04:13) *
а если /list/rent/rooms/itemnumber нужно индексировать? или /list/rent/roomscat вопрос ведь был "закрыть все, что после "?".


В таком случае не лучше ли будет сразу отмести все "вопросы":
Disallow: /*?*

?


--------------------
Проверю качество внешних ссылок в FastTrust
http://www.maultalk.com/topic157753.html
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
leshii_sf
leshii_sf
сообщение 5.11.2013, 19:47; Ответить: leshii_sf
Сообщение #10


Топовый постер
*******

Группа: Active User
Сообщений: 2589
Регистрация: 4.9.2011
Поблагодарили: 6 раз
Репутация:   1  


(MasterMarti @ 5.11.2013, 21:09) *
В таком случае не лучше ли будет сразу отмести все "вопросы": Disallow: /*?*

Только в том случае, если вы полностью уверены, что все URL со знаком вопроса на любой позиции не являются необходимыми для индексации.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Помогите советом как пробить ЯШУ для сайта Giffs.ru ?!
Что нужно докрутить у сайта, что бы ЯША не устоял ?
10 sinoptik89 481 20.10.2020, 22:24
автор: VinogradOFF
Открытая тема (нет новых ответов) HomeWork - профи в монетизации студентов (18-24 года, Россия)
8 partner_hw 1458 20.10.2020, 15:12
автор: partner_hw
Открытая тема (нет новых ответов) Исправить проблему в сайте, требуется помощь программиста
1 woolf 222 14.10.2020, 14:47
автор: WoWeb
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыGAMBLING.pro - СРА-сеть для профи
56 Gamblingpro 13064 28.9.2020, 13:05
автор: Gamblingpro
Открытая тема (нет новых ответов) Тема имеет прикрепленные файлыНужна помощь по Адсенсу
sellers.json
5 MihalychAIP 336 26.9.2020, 3:17
автор: MihalychAIP


 



RSS Текстовая версия Сейчас: 30.10.2020, 2:14
Дизайн