vostryakov Mar 20 2009 at 15:31

Рисоваська, часть 3: Амазоновские веб-сервисы в действии

10 min

36K

Hosting

+95

Comments 51

kinmila Mar 20 2009 at 15:56

КОгда продолжение?

vostryakov Mar 20 2009 at 15:57

В течении двух недель допишу этот цикл статей.

kvladimir Mar 20 2009 at 15:59

Вау, спасибо за такой большой объем очень полезной информации!

vostryakov Mar 20 2009 at 16:03

Спасибо! Я очень надеялся, что это будет многим полезно

kvladimir Mar 20 2009 at 16:07

Наверняка будет, амазоновские сервисы очень мощные и всегда интересно узнать подробности о применении их на практике в реальных проектах, подобных вашему.

Скажите, а можно как-то автоматизировать подключение инстансов при увеличении нагрузки? Или все это делается только вручную?

vostryakov Mar 20 2009 at 16:10

Можно, так как все управление доступно через выполнение команд, то можно написать свои скрипты, которые автоматически запускают новый инстанс при увеличении нагрузки или останавливают, при снижении нагрузки

kvladimir Mar 20 2009 at 16:11

Спасибо, я так и думал)

shuron Mar 20 2009 at 17:00

Давно слышал, но разобрался что к чему только сейчас.
Очень интересная тема.
Судорожно думаю могу ли я это-где-нибудь применить?
Или всетаки выделеный сервак за туже цену мне выгоднее…

vostryakov Mar 20 2009 at 17:26

Самое лучшее применение Амазона — это стартапы, когда нельзя спрогнозировать нагрузку точно. Толи один сервер взять, то ли десять. А тут за пару минут нужно поднял еще инстансы :)

shuron Mar 20 2009 at 18:51

Нет ну просто у моего хостера поднять доп. сервак тоге вопрос минут…
Поэтому не очень убеждает.

vostryakov Mar 20 2009 at 19:41

А останавливать на каждую ночь лишние инстансы, когда нагрузка спадает автоматически? Я сильно не настаиваю на Амазоне, если у вас поднять-остановить сервак дело нескольких минут, и стоит вам это не больше $100 за сервер в месяц сравнимой конфигурации со стандартным инстансом. Возможно вас заинтересует S3 как хранилище данных, а сервера у вас будут свои.

shuron Mar 20 2009 at 19:01

Видимо ключевые моменты всетаки вот эти:

гибкий выбор типов инстансов под разные задачи

и

После выбора инстанса нужно выбрать и настроить образ операционной системы, который будет там работать. Образ — это как сама операционая система так и все необходимые для работы программы (Apache, MySQL, Memcached, Erlang и т.д.), а так же в образ могут быть включены и все нужные вам данные: содержимое сайта, исходники программы и т.д. Есть большое кол-во готовых образов от Амазона и энтузиастов.

Cataclysm Mar 20 2009 at 17:20

Попробовал этот сервис — правда удобно. Так же радует стабильность и надежность. Но решил им не пользоваться: Сайт в месяц жрет 500 Гбайт трафика, что равноценно 85 долларам в месяц. Получается слишком высокая цена.

shuron Mar 20 2009 at 18:56

В моем случае скорее наоборот. Амазон дешевле достойного выделеного сервака, хоть не на много.

Cataclysm Mar 20 2009 at 20:54

Ну теже выделенные сервера можно взять без ограничения по трафику.

UFO just landed and posted this here

andry Mar 21 2009 at 14:26

В самом деле, говорить что это дешевое решение не совсем правда=) Зачастую выделенный будет дешевле. Однако здесь есть плюшки за которые надо платить.

vorushin Mar 20 2009 at 17:27

Отличная статья, спасибо!
Недавно еще lionet порадовал — они потестили разные конфигурации выделенных серверов и амазоновских инстансов применительно к хостингу эрланг-приложений — lionet.livejournal.com/29844.html

thorn0 Mar 20 2009 at 17:36

Спасибо за статью! Comindwork в ближайшем будущем ожидает интеграция с амазоновскими сервисами, так что актуально, буду вникать.

vostryakov Mar 20 2009 at 17:40

Спасибо, за отзыв! Старался написать максимально просто. Если будут вопросы: пиши

kurokikaze Mar 20 2009 at 17:37

Вот это гайд, спасибо :)

vostryakov Mar 20 2009 at 17:42

Рад! :)

UFO just landed and posted this here

vostryakov Mar 20 2009 at 17:55

Мы используем два или три инстанса. Один под web-сервер: risovaska и один или два (в зависимости) от нагрузки под application server. Смотрим просто по нагрузке на систему и поднимаем еще инстанс, если становиться слишком большой. Система построена с учетом масштабируемости, поэтому для нас это не представляет проблем.

shuron Mar 20 2009 at 19:03

Ааа вот вижу реальную пользу. Вы экономите деньги отключая ненужное поненадобности…
Тепер наводит и менай на интересные мысли…
Спасибо…

savostin Mar 20 2009 at 18:08

Спасибо, особенно за плагины.
Кстати, есть AWS Management Console как вариант.
А не подскажете как удалить Instance? Или я чего-то не понимаю?

vostryakov Mar 20 2009 at 18:27

Про AWS Management Console знаю, но он пока еще малофункциональный. У Elasticfox намного больше возможностей. Вот они его докрутят к лету до всего чего обещали (в том числе и балансировка нагрузки между инстансами), тогда можно перейти на него. Правда, насколько я понял, когда они его докрутят, то он будет платный.
остановить инстанс можно с помощью Elasticfox на закладке Instances: выделить нужный инстанс в гриде и нажать кнопку «Terminate Selected Instance(s)»

savostin Mar 20 2009 at 19:07

остановить понятно, а вообще удалить/очистить список? Обновить не помагает — terminated висит в списке. Вышел/зашел — terminated instance пропал. Они там по какому-то принципу сами удаляются?

vostryakov Mar 20 2009 at 19:46

Да, они удаляются из списка через какое-то время, примерно через пару часов. Могу предположить, что так сделано, что в случае зависания инстанса, ты мог сообщить амазону какие-то данные о зависшем инстансе, чтобы они попробовали что-то сделать.

savostin Mar 20 2009 at 19:50

Спасибо.

theRavel Mar 20 2009 at 18:09

быстро развиваетесь :)

vostryakov Mar 20 2009 at 18:27

Спасибо! :)

f33l Mar 20 2009 at 20:58

спасибо

только все же неясно, как обеспечить надежность хранения данных, если используется, например, mysql?
насколько я понимаю, можно сделать, чтобы физически бд хранилась на Elastic Block Store, насколько это надежно и быстро? и не придется ли в таком случае сильно переплачивать?

vostryakov Mar 20 2009 at 22:15

Да, располагаете базу mysql сервера на EBS. Как я писал в статье, скорость работы с EBS выше чем со встроенным диском инстанса. Надежность тоже выше. К тому же вы можете делать snapshots в S3, то есть фактически снимок тома EBS. А S3 обеспечивает сверхнадежность хранения данных. И как я писал в статье стоит это очень мало. У нас один том в 10ГБ обходиться около $2 в месяц.

Еще вам будет интересен комментарий ниже от neiromancer.

f33l Mar 21 2009 at 06:31

ок, пасиб еще раз )

lasc Mar 21 2009 at 01:16

я весь root кидаю на EBS и с него все работает

vostryakov Mar 21 2009 at 11:06

Ого, круто! Будем знать :)

lasc Mar 21 2009 at 11:20

howto на форумах амазона есть, работает через pivot. за полгода проблем нет.

впрочем и инстанс ни разу не ломался, так что даже не знаю надо ли гемороится с EBS

baxtep2 Apr 3 2009 at 12:10

ну vostrikov пишет что, скорость работы с EBS выше чем со встроенным диском инстанса, т.е. переброс всего root на EBS дает прирост в дисковых операциях???

lasc Apr 3 2009 at 13:08

не могу сказать, для меня все сьедается удаленностью от зеландии, надо бы перенести в другую зону попробовать но что то руки не доходят

vostryakov Apr 3 2009 at 18:19

Я тоже не могу сказать точных данных. Мои слова основаны на заявлении Амазона в описании EBS у них на сайте.

P.S. Моя фамилия: Востряков — vostryakov :)

neiromancer Mar 20 2009 at 21:07

кому интересно — спрашивайте,
под AWS гоняем кластера приложений и БД уже более полугода — есть реальные вопросы — в личку или аську

Yfka Mar 21 2009 at 08:36

Спасибо.

Интересуют вопросы:
1. Для самого маленького инстанса они писали: I/O Performance: Moderate
Насколько это умеренное?
Больше всего интересует не файловая система, а сеть в инет.

2. 160 GB instance storage (150 GB plus 10 GB root partition)
Я так понял, что при любом зависании или перезагрузке или выключении эти 150 Гб теряются. Есть ли какой в них практический смысл?

vostryakov Mar 21 2009 at 11:13

1. На первый вопрос не могу ничего сказать, замеров не делали. У нас работает иногда два инстанса с распределенной базой между ними. Нас скорость устраивала, но каких-то замеров мы не делали.

2. Обычно есть. Мы используем распределенную базу Mnesia на Эрланге. Так вот первый инстанс хранит свою базу мнезии на EBS, а второй инстанс хранит на instance storage, так как это не критично, если он зависнет. Плюс всякие логи мы храним тоже на instance storage, то есть то, что можно в принципе потерять. Реально за полгода работы ни один инстансе ни разу не упал. То есть на EBS можно хранить критичные данные, а все остальное на instance storage.

oleamm Mar 24 2009 at 18:21

Можно ли использовать амазон как обычный VPS/выделенный сервер? Изучив тему и содержание сайта понял что на заказанную площадку устанавливается система (ubuntu, fedora, windows и т.п.), я имею к ней root доступ и могу поставить на нее LAMP и все что мне потребуется. Или я заблуждаюсь?

vostryakov Mar 24 2009 at 18:27

Да, вы можете использовать любой сервер от Амазона (инстанс) как VPS и поставить туда все что захотите (LAMP, конечно без проблем). Вы все правильно понимаете.