Cloudian presentation for OSCA

Cloudian（クラウディアン）のご紹介
OSCA クラウドソリューションセミナー

2012年10月16日
クラウディアン株式会社

Copyright © 2012 Cloudian Inc. & KK All Rights Reserved. Page 1

Agenda

 Cloudianとは

 Cloudianの差別化ポイント

 Cloudianのアーキテクチャ


Cloudian（クラウディアン）とは
 商用実績のある大規模分散オブジェクトストレージ

 Amazon S3互換の豊富なAPI
 デファクトスタンダード
 オープンなAPI仕様
 既存のS3対応アプリケーションが
そのまま利用できる

 異種混在、低コスト汎用サーバー
利用のソフトウェア製品


Cloudian（クラウディアン）とは
 耐障害性、エラスティック性（弾力性）
 データをノード間で複製、データセンター間で複製
 サービス無停止でノードを追加できる（容量が拡大できる）

 マルチテナント、豊富な管理機能（課金、QoSなど）


S3 APIの例 - オブジェクトの格納
PUT /my-image.jpg HTTP/1.1
Host: my-bucket.s3.mydomain.jp
Date: Fri, 14 Sep 2012 17:50:00 GMT
Authorization: アクセスキー:シグネチャー
Content-Type: text/plain
Content-Length: 11434
Expect: 100-continue
…（以降、オブジェクトのデータ）

 REST - HTTP/HTTPSによるステートレスな通信
 シグネチャーは、リクエストの内容と時刻をシークレットキーで
ハッシュ値化したもの
 第３者が傍受しても、シークレットキーなしでは再実行や改ざん不可


S3 APIの例 - オブジェクトの取り出し
GET /my-image.jpg HTTP/1.1
Host: my-bucket.s3.mydomain.jp
Date: Fri, 14 Sep 2012 21:32:02 GMT
Range: bytes=0-500
Authorization:…


S3 APIによるアクセス
アプリケーションユーザー
クライアント・ライブラリー

ロード・バランサーロード・バランサー

Web画面（CMC）
S3 互換 REST API

Cloudian S3
ストレージノード


ネットワークファイルサーバー（NFS/CIFS）

アプリケーションユーザー
NFS / CIFS

S3対応ゲートウェイ（他社製品）
NAS ゲートウェイ
でファイルサーバー化
ロード・バランサー

S3 互換 REST API

Cloudian S3
ストレージノード


管理API
RESTful API
ユーザーシステム管理者課金システム
JSON形式のデータ


Web画面（CMC）

管理API

Cloudian
管理機能


Agenda

 Cloudianとは




高度なS3機能をカバー＋独自の追加機能

将来のS3機能

高度なS3機能
マルチパート・アップロード
Cloudian独自追加機能
ACL、オブジェクト・バージョニング
ロケーション・コンストレイン
マルチ・テナント
公開URLアクセス等
利用量制御（QoS）
基本S3 API互換
Put、Get、Head、Delete、等利用量レポート
基本オブジェクトストレージ機能
バーチャル・バケット
RESTful API、メタデータ付与
オブジェクトをバケットに格納、分散と複製マルチ・データセンター


高度なS3 APIの例 - オブジェクト・バージョニング

http://docs.amazonwebservices.com/AmazonS3/latest/dev/ObjectVersioning.html


高度なS3 APIの例 - ロケーション・コンストレイン


数多くのS3エコシステム製品で接続性を実証済み

代表的なS3エコシステム製品


複数データセンター対応

論理リング内のノード
数は2127まで理論的に
は可能（ほぼ無制限）

ただし、運用面では、
100台～400台
データを
論理リング複数のノード
に自動複製

DC1

DC2

複数データセンターや
ラック単位で指定可能
ノード追加や縮退時に、
自動でデータリバランス


マルチテナント、利用量制御（QoS）

格納容量バイト規制要求数規制


利用量レポート

• CMC上で統計情報をグラフ表示
• 管理APIを通じて利用実績
データをエクスポート


巨大オブジェクトも効率的に格納
オブジェクトのサイズに応じて最適な格納先を選択

小さなオブジェクト

HyperStore
Manager NOSQLデータベース

（特許申請中）
大きなオブジェクト

仮想マシンの
ムービー
VMイメージ

ファイルシステム

巨大オブジェクトも効率的に格納
 HyperStoreを利用しない時と比較して
 書き込み：約30％高速化
 読み出し：約400％高速化
 ディスク容量の利用効率：50％→80％に向上

HyperStore無し HyperStore有り

iostat %
utilization

io read/write
(MB)


ユーザー数、グループ数、格納サイズを無制限に拡張
バーチャル・バケット機能の例本年10月アルファ版リリース予定

１リージョンの容量を超えるバケットを実現
リージョン A リージョン B

１PB × 5＝5PB

例：1PB 例：1PB

リージョン C リージョン D リージョン E
例：1PB 例：1PB 例：1PB


Zabbixによるモニタリング
• CPU使用率、ディスク使用率
• S3オペレーションごとの統計データ（回数、遅延時間）
• Cassandraの統計データ


Agenda

 Cloudianとは




ストレージには実績のあるOSSを採用
Redis Apache Hyper-
超高速
インメモリDB Cassandra Store
大規模分散DB

データ分散参照

認証情報アカウント情報

QoSカウンタオブジェクト・メタデータ

オブジェクト・データ

利用実績データ


単一故障点を解消（No SPOF）
DC1 DC2

S3API/管理API S3API/管理API S3API/管理API S3API/管理API
サーバーサーバーサーバーサーバー

Redisマスタ Redisスレーブ Redisスレーブ Redisスレーブ

Cassandra Cassandra Cassandra Cassandra

HyperStore HyperStore HyperStore HyperStore

S3API/管理API S3API/管理API S3API/管理API S3API/管理API
サーバーサーバーサーバーサーバー

Cassandra Cassandra Cassandra Cassandra

HyperStore HyperStore HyperStore HyperStore


まとめ
 Cloudianは商用実績のある大規模分散オブジェクトストレージ

 高度なS3 APIをサポート
 マルチパート・アップロード、ACL、オブジェクト・バージョニング、
ロケーション・コンストレイン、公開URLアクセス等
 既存のS3対応アプリケーションがそのまま利用できる

 独自の追加機能
 複数データセンター対応
 マルチテナント、利用量制御（QoS）
 巨大なオブジェクトを効率的に格納
 ユーザー数、グループ数、格納サイズを無制限に拡張

 実績あるOSSの採用により堅牢性を実現


Cloudian評価版申し込み：
http://cloudian.jp/cloud-storage-products/cloudian_eval_agr.php

Homepage: cloudian.jp

Cloudian Twitter:@cloudian_kk

Cloudian Facebook Page:
http://www.facebook.com/cloudian.cloudstorage.S3

Cloudian Blog:
http://www.gemini-bigdata.com/

Copyright © 2012 Cloudian Inc. & KK All Rights Reserved.

Cloudian presentation for OSCA

More Related Content

What's hot (20)

Viewers also liked (20)

Similar to Cloudian presentation for OSCA (20)

More from CLOUDIAN KK (13)

Cloudian presentation for OSCA