Submit Search
MobingiALM でスポットインスタンスをいい感じに手なづけている裏側の話 / How to manage EC2 Spot Instances
0 likes
879 views
M
Masafumi Noguchi
MasterCloud #4 2017.8.10 https://mastercloud.connpass.com/event/61736/
Software
Read more
1 of 44
Download now
Download to read offline
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
More Related Content
PDF
マルチクラウド環境でモビンギはどのようにコンテナを動かしているか
Masafumi Noguchi
PDF
OpenShift 3で、DockerのPaaSを作る話
Kazuto Kusama
PPTX
AWS Amplify 入門
Hideaki Aoyagi
PPTX
コンテナベースサーバーレスプラットフォーム「Knative」はServerlessなのか?
Hideaki Aoyagi
PPTX
CCCEU Feedback
Go Chiba
PDF
Google Cloud Messaging for Android ことはじめ(Eclipseから動かしてみる編)
kojiokb
PDF
Google Cloud Messaging for Android ことはじめ(もっと簡単に動かしてみる編)
kojiokb
PPTX
AKS と ACI を組み合わせて使ってみた
Hideaki Aoyagi
マルチクラウド環境でモビンギはどのようにコンテナを動かしているか
Masafumi Noguchi
OpenShift 3で、DockerのPaaSを作る話
Kazuto Kusama
AWS Amplify 入門
Hideaki Aoyagi
コンテナベースサーバーレスプラットフォーム「Knative」はServerlessなのか?
Hideaki Aoyagi
CCCEU Feedback
Go Chiba
Google Cloud Messaging for Android ことはじめ(Eclipseから動かしてみる編)
kojiokb
Google Cloud Messaging for Android ことはじめ(もっと簡単に動かしてみる編)
kojiokb
AKS と ACI を組み合わせて使ってみた
Hideaki Aoyagi
What's hot
(20)
PDF
LocalStack
chibochibo
PPTX
Jupiter notebookをawsに構築しよう
Mugen Fujii
PPTX
Amazon EKS への道 ~ EKS 再入門 ~
Hideaki Aoyagi
PPTX
コンテナ運用基盤 with OpenShift
Y K
PDF
Ruby で zabbix agent の loadable module を作れる loadable module を C言語 + mruby で作った
takanori suzuki
PDF
Istio, Kubernetes and Cloud Foundry
Kazuto Kusama
PDF
Vagrantと網元で開発環境を作ってみよう
Takuma Morikawa
PPTX
第六回Jenkins勉強会
Kohsuke Kawaguchi
PDF
Azure serverlesssummit2018
Tsukasa Kato
PPTX
Live配信のワークフロー takusuta tech conf #1
yoshinori sugiyama
PDF
各社のFaaSを比較してみる
ryosuke matsumura
PPTX
開発環境をVagrantからdockerに移行してみた
pyar6329
PPTX
ここ最近のJenkins新機能
Kohsuke Kawaguchi
PDF
The Internal of Serverless Plugins
Terui Masashi
PDF
サーバー&インフラ勉強会 Vol.1 いとー
krs_mizuno
PDF
Cloud Foundry構成概要 111018
Uemura Yuichi
PDF
Google Cloud Messaging for Android ことはじめ(サンプルコードを動かしてみる編)
kojiokb
PPTX
Grunt入門
Tsuyoshi Maeda
PPTX
Infrakit Docker_Tokyo_meetup
Yuji Oshima
PDF
Babelで先取り次世代javascript
Tsuyoshi Maeda
LocalStack
chibochibo
Jupiter notebookをawsに構築しよう
Mugen Fujii
Amazon EKS への道 ~ EKS 再入門 ~
Hideaki Aoyagi
コンテナ運用基盤 with OpenShift
Y K
Ruby で zabbix agent の loadable module を作れる loadable module を C言語 + mruby で作った
takanori suzuki
Istio, Kubernetes and Cloud Foundry
Kazuto Kusama
Vagrantと網元で開発環境を作ってみよう
Takuma Morikawa
第六回Jenkins勉強会
Kohsuke Kawaguchi
Azure serverlesssummit2018
Tsukasa Kato
Live配信のワークフロー takusuta tech conf #1
yoshinori sugiyama
各社のFaaSを比較してみる
ryosuke matsumura
開発環境をVagrantからdockerに移行してみた
pyar6329
ここ最近のJenkins新機能
Kohsuke Kawaguchi
The Internal of Serverless Plugins
Terui Masashi
サーバー&インフラ勉強会 Vol.1 いとー
krs_mizuno
Cloud Foundry構成概要 111018
Uemura Yuichi
Google Cloud Messaging for Android ことはじめ(サンプルコードを動かしてみる編)
kojiokb
Grunt入門
Tsuyoshi Maeda
Infrakit Docker_Tokyo_meetup
Yuji Oshima
Babelで先取り次世代javascript
Tsuyoshi Maeda
Ad
MobingiALM でスポットインスタンスをいい感じに手なづけている裏側の話 / How to manage EC2 Spot Instances
1.
MobingiALM で スポットインスタンスを いい感じに手なづけている裏側の話 Masafumi Noguchi 2017.8.10
MasterCloud #4
2.
自己紹介 ・野口雅史(Masafumi Noguchi) ・Mobingi, Inc. ・github.com/ngratin ・Mobingi
blog - https://labs.mobingi.com ・Slack group - https://slack.mobingi.com
3.
Mobingi ALM (Saasサービス) ・アプリケーションをクラウドで動かすことを簡単に。 ・インフラ/アプリケーション実行環境の構築、継続的 なデプロイの自動化。 ・アプリケーション実行環境はDocker
を利用。 ・お客様はアプリケーションの開発に集中出来る。
6.
についてのお話 (スポットブロック、スポットフリートではなく通常の スポットインスタンスのお話です)
7.
とは?
8.
Amazon EC2 の購入オプション オンデマンド
通常の従量課金(長期契約、前払いなし) リザーブド 1~3年間の利用予約 オンデマンドの最大75%割引 スポット 未使用のインスタンスに入札し利用 オンデマンドの最大90%割引 Dedicated Host 専用物理サーバ
9.
Amazon EC2 の購入オプション オンデマンド
通常の従量課金(長期契約、前払いなし) リザーブド 1~3年間の利用予約 オンデマンドの最大75%割引 スポット 未使用のインスタンスに入札し利用 オンデマンドの最大90%割引 Dedicated Host 専用物理サーバ
10.
料金例 (2017.8.9 10:30時点,
東京リージョン, Linux, 1時間当たりの単価) オンデマンド スポット 割引率 m4.large $0.129 $0.0286 78% m3.medium $0.096 $0.0124 87% r4.large $0.16 $0.0253 84% c4.large $0.126 $0.029 77%
11.
料金例 (2017.8.9 10:30時点,
東京リージョン, Linux, 1時間当たりの単価) オンデマンド スポット 割引率 m4.large $0.129 $0.0286 78% m3.medium $0.096 $0.0124 87% r4.large $0.16 $0.0253 84% c4.large $0.126 $0.029 77%
12.
なぜ安いのか ・未使用のインスタンスを安くてもいいから使っても らいたい。(AWS) ・入札形式。入札価格がスポット価格を上回り、空き があれば利用可能。(需要と共有) ・スポット価格が変動し、入札価格を上回ると強制 ターミネートされる。
13.
スポットインスタンスの仕組み スポット価格 オンデマンド価格
14.
スポットインスタンスの仕組み スポット価格 入札価格 オンデマンド価格
15.
スポットインスタンスの仕組み スポット価格 入札価格 オンデマンド価格 起動可能 起動可能削除 削除
16.
スポットインスタンス価格履歴
17.
スポットインスタンス価格履歴
18.
スポットインスタンスの仕組み スポット価格 入札価格 オンデマンド価格 課金されるのはスポット価格 (入札価格ではない)
19.
スポットインスタンス活用のポイント ・コストを下げつつ継続的にサービスを提供したい - オンデマンドとの併用 - 入札価格 ・強制ターミネート前の処理 -
新規のリクエストは停止しておきたい
20.
スポットインスタンス活用のポイント ・コストを下げつつ継続的にサービスを提供したい - オンデマンドとの併用 - 入札価格 ・強制ターミネート前の処理 -
新規のリクエストは停止しておきたい
22.
スポットインスタンス活用 スタックの重要度や目的に合わせて、お客様自身で スポットインスタンスの割合を設定可能 たとえば、 ・テスト環境であればサービス停止を許容しスポット100% ・QA 環境であればスポット50% (オンデマンドの数を担保しておく)
23.
構成 On-Demand Spot
24.
構成 ・Auto Scaling Group,
Launch Configuration の組を オンデマンドインスタンス用、スポットインスタ ンス用とで分ける。 ・同じロードバランサの配下に設定する。 ・一般的な組み合わせですが、 AWSでこの構成は自動で設定してくれない。
25.
スポットインスタンス活用のポイント ・コストを下げつつ継続的にサービスを提供したい - オンデマンドとの併用 - 入札価格 ・強制ターミネート前の処理 -
新規のリクエストは停止しておきたい
26.
Cost vs. Availability スポット価格 オンデマンド価格
27.
Cost vs. Availability スポット価格 入札価格 オンデマンド価格
28.
Cost vs. Availability スポット価格 入札価格 オンデマンド価格
29.
Cost vs. Availability スポット価格 入札価格 オンデマンド価格 削除削除
起動可能
30.
Cost vs. Availability スポット価格 入札価格 オンデマンド価格
31.
Cost vs. Availability スポット価格 入札価格 オンデマンド価格 起動可能
32.
スポットインスタンス活用のポイント ・コストを下げつつ継続的にサービスを提供したい - オンデマンドとの併用 - 入札価格 ・強制ターミネート前の処理 -
新規のリクエストは停止しておきたい
33.
構成 On-Demand Spot
34.
構成 On-Demand Spot
35.
構成 On-Demand Spot リクエストは受け付けない ようにしたい
36.
強制ターミネートの通知を受取る方法 ・インスタンスメタデータで取得 ・強制ターミネートの 2 分前から警告が提供される -
通常は 404 - 強制ターミネート対象の場合、ターミネート時刻が返る http://169.254.169.254/latest/meta-data/spot/termination-time
37.
強制ターミネートの通知を受取る方法
38.
強制ターミネートの通知を受取る方法
39.
強制ターミネートの通知を受取る方法 ・インスタンスメタデータで取得 ・強制ターミネートの 2 分前から警告が提供される -
通常は 404 - 強制ターミネート対象の場合、ターミネート時刻が返る http://169.254.169.254/latest/meta-data/spot/termination-time
40.
modaemon (MobingiALM) ・コンテナ管理デーモン ・docker run/stop,
git clone ・NAT (Host - Container) Container Ubuntu Apache PHP modaemon Host OS Docker
41.
・コンテナ管理デーモン ・docker run/stop, git
clone ・NAT (Host - Container) ・メタデータチェック(ELB からデタッチ) Container Ubuntu Apache PHP modaemon Host OS Docker Check metadata modaemon (MobingiALM)
42.
まとめ ・スポットインスタンスを活用してコスト削減 ・オートスケーリンググループを分けることで、 オンデマンドインスタンスの数を担保。 ・MobingiALM では modaemon
でインスタンス側で 必要な対応をしている。
43.
さいごに Alibaba Cloud にもスポットインスタンス欲しいですね♥
Download