Webアプリケーションから見たCassandra

Web アプリケーションから見た Cassandra ワークスアプリケーションズ堤勇人

自己紹介堤勇人ワークスアプリケーションズ ATE 本部 Webmail 主に DB 周りやバッチ処理、最近では Cassandra 担当 twitter : 2t3

今日話すこと基本： Cassandra を検討する際の一助となる内容： Cassandra を使ったプロジェクト、 Webmail の説明何故 Cassandra を使ったか Cassandra の使い方

Webmail とは？ワークスアプリケーションズが 2010 年 4 月に開始したプロジェクトバックエンドは基本的に Cassandra のみ Amazon EC2 上で動作中 Cassandra を含め、全て OSS を利用メールデコード等、有用な物は OSS として公開予定

Webmail とは？こんな画面

バックエンドに要求されるスペック TB 単位のデータに 500ms 以下でアクセス ACID( 原子性、一貫性、独立性、永続性 ) を満たす常に Read/Write ができるスモールスタート、スケーリングが可能

候補は色々 SQL: Oracle, DB2, MySQL,etc... NoSQL: HBase, Voldemort, MongoDB, MemcacheDB, Cassandra, etc...

判断要求を完全に満たす DB は、現状存在しないスケーリングと常時アクセスを重視すると、有力なのが Cassandra

Cassandra のできること保存したデータがちゃんと返ってくる一台落ちても、アクセスが阻害されない動かしたままバージョンアップが可能最低三台から始めて、必要な分だけ追加できる

Cassandra の設定強い一貫性を持たせて運用するレプリカを 3 台に Read/Write を QUORUM で行う Write Read

スケールの変化最初期 (2010/4) 150GB c1.medium × 3 181$ 現在 (2011/10) 13,000GB m1.large × 18 7,326$ 1 日 30 万通程度

かかる費用 EC2 での値を出すと、運用、バックアップが取りやすい形式なら 500$/TB ・月なるべく安く頑張るなら 350$/TB ・月

まとめ実際に Web アプリケーションのバックエンドとして Cassandra を使うことは可能高可用性や、一貫性と遅延をトレードオフできる柔軟性などは、これまで不可能だった要求を満たせる可能性がある特にスケーリングは RDB で苦労していた部分がとても楽になる

まとめ以下のどれかに該当する新規プロジェクトなら、 Cassandra を検討に入れてよい TB 単位のデータを扱う小さなデータからスモールスタートするシステムを無停止で運用する

以上、ありがとうございました質問があればこちらまで twitter : 2t3

Cassandra の障害対策一台落ちても、アクセスできるじゃあレプリカが二台落ちたら？ appendix Write Read

Cassandra の障害対策一貫性を落として残りの 1 台でやりくりしますじゃあ 3 台落ちたら？ appendix Write Read

Cassandra の障害対策バックアップを直接読みます appendix Read

Cassandra の設定プロファイル Web アプリケーションのバックエンドのような強い一貫性が必要な場合レプリカ 3 台 Read/Write を QUORUM で行うでは他の場合は？ appendix 2

Cassandra の設定プロファイルロギングなど、データの書き込み速度を重視する場合レプリカ 2~3 台 Write を ONE で行う Read の前に flush や repair を行う appendix 2

Cassandra の設定プロファイル検索 index など、定期的なデータ作成とその頻繁な読み出しを行う場合レプリカ 1 台 Read を ONE で行う Write は ALL で行うが、ノードのダウン時には回復を待っても良い appendix 2

Cassandra の O/R マッパー Cassandra は Column の自由度が高いのでデータ構造がややこしくなりがち Thrift の API もちょっと煩雑 CQL でも基本同じなので O/R マッパーを実装しました appendix 3

Cassandra の O/R マッパーオブジェクトでやりとり appendix 3 Mail mail = kvs.get(“tsutsumi201110051650”, Mail.class); mail.subject = “test”; kvs.insert(mail); List<Mail> mails = kvs.search(“tsutsumi”, Mail.class); kvs.delete(mails);

Cassandra の O/R マッパーアノテーションで管理 appendix 3 @Entity public class Mail { @Key public String emailId; @Family public String subject; }

Cassandra の O/R マッパーカウンターも実装 appendix 3 @Entity public class MailFolder { @Key public String folderId; @Family public String name; @Counter public long unreadCount; }

Cassandra の O/R マッパー詳細は ASCII.technologies の連載に書きました 2011 年 1 月号休刊なので見つからないと思います appendix 3

Cassandra の O/R マッパー OSS として公開予定 appendix 3

おわり質問があればこちらまで twitter : 2t3

Webアプリケーションから見たCassandra

More Related Content

What's hot (20)

Similar to Webアプリケーションから見たCassandra (14)

Webアプリケーションから見たCassandra

Editor's Notes