ビッグデータ向け スケールアウト型データベース GridDBのご紹介
0 likes77 views
クラウドコンピューティングEXPO[春]ご紹介資料 ビッグデータ向け スケールアウト型データベース GridDBのご紹介 クラウドコンピューティングEXPO[春]（2016 年 5 月 11、12、13 日）
ビッグデータ向け スケールアウト型データベース GridDBのご紹介
- 1. © 2016 Toshiba Corporation ビッグデータ向け スケールアウト型データベースのご紹介 2016年 5月 11日～ 5月 13日 インダストリアルICTソリューション社
- 2. © 2016 Toshiba Corporation 2 『あらゆるモノがつながる世界 ～ IoT』 により、 実世界で発生する膨大かつ高頻度に発生する ビッグデータの活用が社会インフラに新しい価値 を創造しようとしています。 ビッグデータ/IoT時代の社会インフラを支える 新しいコンセプトとテクノロジーのデータベース GridDBについてご紹介します。
- 3. © 2016 Toshiba Corporation 3 ビッグデータ・・時々刻々発生する膨大なIoTデータ 何を すべきなのか？ 何がおこるのか？ 何がおきたのか？ APL ログ Web サイト Web・SNS ログ RDBMS CRM/ERP センサー ヒ ト に よ る 記 録 ヒ ト に よ る 操 作 モ ノ に よ る 収 集 実世界での人間活動と自然・社会環境を データとして把握・融合・分析してリアルタイムに活用
- 4. © 2016 Toshiba Corporation 4 ビッグデータ・・・特に IoTデータ・・・社会インフラ ☑分、秒、さらにそれ以下の周期で発生する 膨大なデータを高速に扱うこと ☑長期間に渡るデータの保持とそれに伴う性能 の劣化がないこと ☑各センサー内のデータの欠損や参照データの 矛盾なくデータの一貫性や整合性を保つこと データベース要件
- 5. © 2016 Toshiba Corporation 5 伝統的なRDBMS Consistency（一貫性） ： Scalability（拡張性） ： Availability（可用性） ： ∴ ビッグデータには不適 × △ 〇
- 6. © 2016 Toshiba Corporation 6 NoSQL (Not Only SQL) Consistency（一貫性） ： Scalability（拡張性） ： Availability（可用性） ： ∴ ビッグデータには適している 〇 △ ×
- 7. © 2016 Toshiba Corporation 7 IoTにおけるNoSQLの課題 ☑IoTデータの管理が困難 ☑既存のクラスタ管理方式に起因する データの一貫性と処理速度のトレードオフ ☑センサ単位の一貫性を保てない ☑時間範囲指定の検索ができない ☑メモリが足りない場合に性能が大幅に劣化 など
- 8. © 2016 Toshiba Corporation 8
- 9. © 2016 Toshiba Corporation 9 特長 高い処理能力 High Performance 柔軟な拡張性 High Scalability 強い信頼感 High Reliability リアルタイム性重視、遅延 なく多様なデータな登録・ 更新・検索 容量や性能に応じて簡単 に拡張・縮退 障害が発生しても無停止 運用の実現 IoT指向モデル IoT Oriented IoT指向のデータモデルで IoTに必要な機能の実現 時々刻々発生する膨大なIoTデータの登録・蓄積から分析まで ワンストップで支える新しいコンセプト/テクノロジーのデータベース
- 10. © 2016 Toshiba Corporation 10 独自のキーコンテナ型データモデルの採用 キーバリュー型 カラム型 ドキュメント型 キーコンテナ型 キー バリュー コンテナ バリューカラム1 カラム0 バリュー バリューカラム2 キー キー ドキュメント バリューコレク1 コレク0 バリュー バリューコレク2 バリュー バリュー バリュー キー コンテナ：スキーマで定義されたデータセットの集まり (テーブル) コレクションコンテナ：レコード管理用 (行と列から構成される集合) 時系列コンテナ：時系列データ管理用 (時刻で並べられた集合)
- 11. © 2016 Toshiba Corporation 11 増加し続けるIoTデータの管理にフイット データ登録 機器2 機器3 ・ ・ ・ IoTデータ 機器１のレコード キー バリュー 機器1 対象ごとにIoTデータ を格納 テーブル表現で管理 機器N キー コンテナ コンテナ単位でACID保証 (レコード単位でトランザクション操作) 使い慣れたRDBに近いモデリングとSQLの利用が可能 効率的な時系列データ処理の提供 ※ACID : Atomicity、Consistency、Isolation、Durability (期限解放、データアグリテーション機能/サンプリング機能 など)
- 12. © 2016 Toshiba Corporation 12 既存クラスタ管理方式に起因するトレードオフ マスタスレーブ型 クラスタのデータ配置に関するメタ情報を集約・管理するマスタ ノードとデータを保管する複数のスレーブノードから構成 ピアツーピア型 すべてのノードが同じ機能をもつホモジニアスなクラスタから構 成 一貫性維持のためのノード間通信の オーバヘッドが大 × 〇 ノード追加でのデータ再配置が容易 マスタノードが単一障害点(SPOF)× 〇 一貫性の維持は容易 ノード追加でのデータ再配置が難しい× ノード1 ノード4 ノード3 ノード2 ノード1 ノード2 ノード4ノード3 マスタ マスタ´HA
- 13. © 2016 Toshiba Corporation 13 一貫性と処理速度を両立した 高可用性の実現 ハイブリッド型クラスタ技術をもちいた自律制御クラスタ管理による 障害発生時や拡張時も無停止運転を実現 ノード間で自動的・動的にマスターノード、データ配置を決定・管理 明示的なマスターノード(管理マスター)が不要、単一故障点(SPOF)を排除 レプリケーションによるデータ多重化・フェイルオーバーが可能 データ配置情報 (ローカル） データ1 オリジナル データ5 レプリカ データ配置情報 (ローカル） データ1 レプリカ データ2 オリジナル データ配置情報 (ローカル） データ2 レプリカ データ3 オリジナル データ配置情報 (ローカル） データ4 オリジナル データ3 レプリカ データ配置情報 (ローカル） データ4 レプリカ データ5 オリジナル データ配置情報 (管理マスタ） データ配置情報 (新管理マスタ） ノード2ノード1 ノード3 ノード4 ノード5
- 14. © 2016 Toshiba Corporation 14 Consistency（一貫性） ： Scalability（拡張性） ： Availability（可用性） ： ∴ ビッグデータ/IoTデータには最適 〇 〇 △
- 15. © 2016 Toshiba Corporation 16 GitHub上に ソースコード公開 (2016/2/25)https://github.com/griddb オープンソースサイト http://www.github.com/ デベロッパーズサイト http://developers.griddb.net/
- 16. © 2016 Toshiba Corporation 17 ビッグデータ技術の普及促進に貢献 多くのヒトに使ってみてもらいたい いろんなニーズをつかみたい 他のソフトウェアとの連係促進したい
- 17. © 2016 Toshiba Corporation 18 展示ブースのご案内 下記ブースにて、本セッションに関連した内容をご紹介しています。 ビッグデータ向け スケールアウト型データベース 「GridDB」 東芝ブース 現在地 セッションコーナー ご商談コーナー Information