X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Запросы сайта перегружают сервер, Собственно сайт - хостинг изображений
Most_Wanted
Most_Wanted
Topic Starter сообщение 13.3.2009, 1:37; Ответить: Most_Wanted
Сообщение #1


Здравствуйте, уважаемые форумчане! Решил обратиться к вам за помощью с описанием своей проблемы. Одним из моих проектов является сервис хостинга изображений. Создавал его лично для себя, но не по моей-же воле сайт начал подниматься и притягивать к себе всё новых и новых пользователей. Сайт активно рос, проблем вовсе не предвещалось. Но в начале прошлого месяца к сожалению пришлось столкнуться с проблемой перегрузки сервера запросами.

Как оказалось, некто мне неизвестный начал использовать сервис в своих темах оформления для сайта вконтакте.ру, а эти темы пустил в паблик. Темы распространялись, это соответственно начало создавать не малую нагрузку. Сервер начал активно падать. Пришлось принять меры и запретить отображение картинок для проблемного домена. Даже после таких изменений запросы по прежнему продолжили поступать. Дабы не травмировать развитие других моих чад, отключил имедж хост до нахождения выхода из ситуации. Сразу-же говорю, что запросов очень много. Для примера выложил 100 последних линий с лога до отключения сайта. Это вечернее время - активность людей поменьше. В дневное-же время активность была настолько большой, что кол-во запросов за одну секунду едва ли влазило в 100 линий.

Основные конфиги сервера: Intel® Pentium® 4 CPU 3.00GHz, 2 GB RAM + конечно-же стоит настроенный специалистом nginx. Хотелось бы узнать, что можно сделать в этой ситуации окромя ожидания. Очень неудобно перед пользователями сервиса. Всем буду очень благодарен за любого рода советы. Спасибо за внимание.

Сообщение отредактировал Most_Wanted - 13.3.2009, 1:42
Прикрепленные файлы
Прикрепленный файл  savepic_100lines.txt ( 21,31 килобайт ) Кол-во скачиваний: 250
 
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2PiN
2PiN
сообщение 13.3.2009, 1:42; Ответить: 2PiN
Сообщение #2


(Most_Wanted @ 13.3.2009, 1:37) *
некто мне неизвестный начал использовать сервис в своих темах оформления для сайта вконтакте.ру

Надо было подменить картинки (особо популярные), для лиц которые тебе не известны сиськами smile.gif... Так и отвадишь!


--------------------
WEBcommunity — Раскруткой занимаются посетители;
WEBvariator — Инструмент принятия решений.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Most_Wanted
Most_Wanted
Topic Starter сообщение 13.3.2009, 1:46; Ответить: Most_Wanted
Сообщение #3


(2PiN @ 13.3.2009, 0:42) *
Надо было подменить картинки (особо популярные), для лиц которые тебе не известны сиськами smile.gif... Так и отвадишь!

На начальном этапе такое решение выглядело бы вполне разумно, но сейчас-же оно в обратную сторону усложнит ситуацию. Моей ошибкой было то, что я со всем этим затянул. Среагировал бы раньше - масштабы были бы меньше. Так-же забыл добавить, что канал 100 Мбит. К чему я все это: с таким может столкнуться любой владелец сайта (тьфу-тьфу-тьфу). Это некий вид бесплатного ддоса. Создаешь тему для вконтакте - пихаешь туда незаметные картинки с сайта-жертвы и начинаешь ее популяризировать среди народа.

Сообщение отредактировал Most_Wanted - 13.3.2009, 1:50
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zulicjan
Zulicjan
сообщение 13.3.2009, 1:48; Ответить: Zulicjan
Сообщение #4


(Most_Wanted @ 13.3.2009, 1:46) *
На начальном этапе такое решение выглядело бы вполне разумно, но сейчас-же оно в обратную сторону усложнит ситуацию. Моей ошибкой было то, что я со всем этим затянул. Среагировал бы раньше - масштабы были бы меньше. Так-же забыл добавить, что канал 100 Мбит.


а к чуваку в контакте пробовал писать, что-бы ссылки забирал ????
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Most_Wanted
Most_Wanted
Topic Starter сообщение 13.3.2009, 1:54; Ответить: Most_Wanted
Сообщение #5


(Zulicjan @ 13.3.2009, 0:48) *
а к чуваку в контакте пробовал писать, что-бы ссылки забирал ????

Так проблема то в том, что тема стоит у каждого в броузере индивидуально. Принцип работы заключается в подгрузке .css файла непосредственно с самого компьютера. Пробовал искать тему в популярной группе контакта (http://vkontakte.ru/club30), ведь оттуда в большей части всё идёт, но использование ссылок на мой сервис найти не удалось. Был бы с этим связан один человек - проблему можно было бы решить, а сейчас-же их около сотни. Делаю вывод из большой разнообразности айпи с full log'a.

Сообщение отредактировал Most_Wanted - 13.3.2009, 1:57
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Zulicjan
Zulicjan
сообщение 13.3.2009, 2:02; Ответить: Zulicjan
Сообщение #6


(Most_Wanted @ 13.3.2009, 1:54) *
Так проблема то в том, что тема стоит у каждого в броузере индивидуально. Принцип работы заключается в подгрузке .css файла непосредственно с самого компьютера. Пробовал искать тему в популярной группе контакта (http://vkontakte.ru/club30), ведь оттуда в большей части всё идёт, но использование ссылок на мой сервис найти не удалось. Был бы с этим связан один человек - проблему можно было бы решить, а сейчас-же их около сотни. Делаю вывод из большой разнообразности айпи с full log'a.

мда... кроме бана всех этих ip никакого решения не вижу... ведь даже если ты все картинки удалишь, запросы останутся....
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Fayl
Fayl
сообщение 13.3.2009, 2:14; Ответить: Fayl
Сообщение #7


Гы, а чем сиськи то плохи? Представляю себе - поставил новую тему вконтакте, захожу на сайт - а там у меня вместо розовых медведей - сиськи!!! Я б обрадовался, чес слово)
Подмените те изображения на фото Толстых старых немытых геев, запросы резко упадут)))
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Dmitriy
Dmitriy
сообщение 13.3.2009, 2:44; Ответить: Dmitriy
Сообщение #8


Да уж Most_Wanted, ситуация у вас с одной стороны достаточно радостная ( в плане набора популярности и все такое ), но с другой стороны она очень плачевная, вам бы хорошего специалиста в области масштабируемости проэктов набирающих обороты, и возможно доп.сервер, для хотя бы какого то возобновления работы сервиса, так как такой поступок может раз и навсегда отвернуть всех ваших пользователей.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Most_Wanted
Most_Wanted
Topic Starter сообщение 13.3.2009, 2:57; Ответить: Most_Wanted
Сообщение #9


Zulicjan, если бы был написан автоматический скрипт, который бы банил айпи людей, потребляющих трафик с хостинга изображений и рефером вконтакте.ру, то я бы от такой идеи не отказался. В реалии-же динамика все решает. На долго такой ручной "борьбы" меня не хватило бы.
Fayl, задумался... Всётаки тоже вариант. Вызвать у обидчиков отвращение. Оригинально. biggrin.gif
Dmitriy, специалисты есть, но они прямым текстом говорят мне, что лучше его отключить на определённое время, мол должна-же будет измениться динамика используемости. Доп. сервер к сожалению не потяну. Кризис так-же хорошо ударил по карманам, прибыли в интернете уменьшились в несколько раз, а точнее теперь даже еле-еле покрывают затраты. На счёт спада доверия к сервису - сам понимаю. Если бы мне это было безразлично, не пытался бы даже найти выход из ситуации.

Сообщение отредактировал Most_Wanted - 13.3.2009, 3:00
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Dmitriy
Dmitriy
сообщение 13.3.2009, 4:01; Ответить: Dmitriy
Сообщение #10


mellow.gif unsure.gif sad.gif
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыБыстрая индексация страниц сайта и обратных ссылок - 2Index
38 2Index 6642 18.4.2024, 12:56
автор: 2Index
Открытая тема (нет новых ответов) Какой % отказов нормален для сайта?
11 Aloof 2821 16.4.2024, 12:48
автор: diviner99
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыSiteAnalyzer - бесплатная программа для аудита и анализа сайта
77 Chaser 74220 9.4.2024, 11:36
автор: Chaser
Открытая тема (нет новых ответов) Нужен кодер, чтобы пофиксить ошибку Wordpress после переноса сайта
0 Alex-777 864 7.4.2024, 18:05
автор: Alex-777
Горячая тема (нет новых ответов) Продвижение молодого сайта
30 maxmer 6579 26.3.2024, 21:49
автор: c4p1t4l15t


 



RSS Текстовая версия Сейчас: 20.4.2024, 3:25
Дизайн