Submit Search
RDB経験者に送るMongoDBの勘所(db tech showcase tokyo 2013)
48 likes
10,170 views
Ryuji Tamagawa
RDBとの比較でMongoDBの特徴を紹介しています。
Technology
Read more
1 of 29
Download now
Downloaded 67 times
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
More Related Content
PPTX
MongoDBが遅いときの切り分け方法
Tetsutaro Watanabe
PDF
MongoDBのアレをアレする
Akihiro Kuwano
PPTX
Mongo dbを知ろう
CROOZ, inc.
PPTX
MongoDBの監視
Tetsutaro Watanabe
PPTX
がっつりMongoDB事例紹介
Tetsutaro Watanabe
PPTX
初心者向けMongoDBのキホン!
Tetsutaro Watanabe
PPTX
WiredTigerを詳しく説明
Tetsutaro Watanabe
PDF
PostgreSQLの関数属性を知ろう
kasaharatt
MongoDBが遅いときの切り分け方法
Tetsutaro Watanabe
MongoDBのアレをアレする
Akihiro Kuwano
Mongo dbを知ろう
CROOZ, inc.
MongoDBの監視
Tetsutaro Watanabe
がっつりMongoDB事例紹介
Tetsutaro Watanabe
初心者向けMongoDBのキホン!
Tetsutaro Watanabe
WiredTigerを詳しく説明
Tetsutaro Watanabe
PostgreSQLの関数属性を知ろう
kasaharatt
What's hot
(20)
PDF
PostgreSQL のイケてるテクニック7選
Tomoya Kawanishi
PDF
MongoDB〜その性質と利用場面〜
Naruhiko Ogasawara
PDF
MongoDB概要:金融業界でのMongoDB
ippei_suzuki
PDF
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
Koichiro Matsuoka
PDF
MongoDB Configパラメータ解説
Shoken Fujisaki
PDF
PostgreSQL10を導入!大規模データ分析事例からみるDWHとしてのPostgreSQL活用のポイント
NTT DATA OSS Professional Services
PDF
後悔しないもんごもんごの使い方 〜アプリ編〜
Masakazu Matsushita
PDF
PostgreSQLアーキテクチャ入門(INSIGHT OUT 2011)
Uptime Technologies LLC (JP)
PDF
Cassandraとh baseの比較して入門するno sql
Yutuki r
PDF
MongoDBを用いたソーシャルアプリのログ解析 〜解析基盤構築からフロントUIまで、MongoDBを最大限に活用する〜
Takahiro Inoue
PDF
Vacuum徹底解説
Masahiko Sawada
PDF
pgvectorを使ってChatGPTとPostgreSQLを連携してみよう!(PostgreSQL Conference Japan 2023 発表資料)
NTT DATA Technology & Innovation
PDF
DBスキーマもバージョン管理したい!
kwatch
PDF
イミュータブルデータモデル(世代編)
Yoshitaka Kawashima
PDF
並列クエリを実行するPostgreSQLのアーキテクチャ
Kohei KaiGai
PPTX
Redisの特徴と活用方法について
Yuji Otani
PDF
MySQLバックアップの基本
yoyamasaki
PDF
Webアプリを並行開発する際のマイグレーション戦略
Takayuki Shimizukawa
PDF
binary log と 2PC と Group Commit
Takanori Sejima
PPTX
PostgreSQLの統計情報について(第26回PostgreSQLアンカンファレンス@オンライン 発表資料)
NTT DATA Technology & Innovation
PostgreSQL のイケてるテクニック7選
Tomoya Kawanishi
MongoDB〜その性質と利用場面〜
Naruhiko Ogasawara
MongoDB概要:金融業界でのMongoDB
ippei_suzuki
DDD x CQRS 更新系と参照系で異なるORMを併用して上手くいった話
Koichiro Matsuoka
MongoDB Configパラメータ解説
Shoken Fujisaki
PostgreSQL10を導入!大規模データ分析事例からみるDWHとしてのPostgreSQL活用のポイント
NTT DATA OSS Professional Services
後悔しないもんごもんごの使い方 〜アプリ編〜
Masakazu Matsushita
PostgreSQLアーキテクチャ入門(INSIGHT OUT 2011)
Uptime Technologies LLC (JP)
Cassandraとh baseの比較して入門するno sql
Yutuki r
MongoDBを用いたソーシャルアプリのログ解析 〜解析基盤構築からフロントUIまで、MongoDBを最大限に活用する〜
Takahiro Inoue
Vacuum徹底解説
Masahiko Sawada
pgvectorを使ってChatGPTとPostgreSQLを連携してみよう!(PostgreSQL Conference Japan 2023 発表資料)
NTT DATA Technology & Innovation
DBスキーマもバージョン管理したい!
kwatch
イミュータブルデータモデル(世代編)
Yoshitaka Kawashima
並列クエリを実行するPostgreSQLのアーキテクチャ
Kohei KaiGai
Redisの特徴と活用方法について
Yuji Otani
MySQLバックアップの基本
yoyamasaki
Webアプリを並行開発する際のマイグレーション戦略
Takayuki Shimizukawa
binary log と 2PC と Group Commit
Takanori Sejima
PostgreSQLの統計情報について(第26回PostgreSQLアンカンファレンス@オンライン 発表資料)
NTT DATA Technology & Innovation
Ad
Similar to RDB経験者に送るMongoDBの勘所(db tech showcase tokyo 2013)
(20)
PDF
Mongo dbを知ろう devlove関西
Ryuji Tamagawa
PDF
データベース勉強会 In 広島 mongodb
Ryuji Tamagawa
PDF
初めてのMongo db
Ryuji Tamagawa
PDF
レガシーシステムのDBマイグレーションし始めた話
nekogeruge_987
PDF
Htmlコーディングの効率化 前編
Yasuhito Yabe
PDF
PHP+MySQLを使ったスケーラブルなソーシャルゲーム開発
infinite_loop
PPTX
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
Katsunori Kanda
PDF
地方企業がソーシャルゲーム開発を成功させるための10のポイント
Kentaro Matsui
PDF
MongoDBCSharp
ytanno
PDF
Casual Compression on MongoDB
moai kids
PDF
[AWSマイスターシリーズ] Amazon DynamoDB
Amazon Web Services Japan
PDF
短期間+大規模ゲーム開発でも破綻しないHTML・SCSS
Shogo Iwano
PPT
20131012 nodejs
Amuro Nishizawa
PPTX
mrubyで作るマイコンボード
kishima7
PDF
JavaScriptトレンド総括(2014)
VOYAGE GROUP
PDF
既存システムへの新技術活用法 ~fluntd/MongoDB~
じゅん なかざ
KEY
エンジニアの為のWordPress入門 〜WordPressはWebAppプラットフォームです〜
Yuji Nojima
PDF
パネルディスカッション資料(公開版)
odakeiji
PDF
簡単!低コスト!楽しい!レスポンシブ デザイン ディレクション
Yuji Nojima
PPT
Google Product
Daisuke Sugai
Mongo dbを知ろう devlove関西
Ryuji Tamagawa
データベース勉強会 In 広島 mongodb
Ryuji Tamagawa
初めてのMongo db
Ryuji Tamagawa
レガシーシステムのDBマイグレーションし始めた話
nekogeruge_987
Htmlコーディングの効率化 前編
Yasuhito Yabe
PHP+MySQLを使ったスケーラブルなソーシャルゲーム開発
infinite_loop
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
Katsunori Kanda
地方企業がソーシャルゲーム開発を成功させるための10のポイント
Kentaro Matsui
MongoDBCSharp
ytanno
Casual Compression on MongoDB
moai kids
[AWSマイスターシリーズ] Amazon DynamoDB
Amazon Web Services Japan
短期間+大規模ゲーム開発でも破綻しないHTML・SCSS
Shogo Iwano
20131012 nodejs
Amuro Nishizawa
mrubyで作るマイコンボード
kishima7
JavaScriptトレンド総括(2014)
VOYAGE GROUP
既存システムへの新技術活用法 ~fluntd/MongoDB~
じゅん なかざ
エンジニアの為のWordPress入門 〜WordPressはWebAppプラットフォームです〜
Yuji Nojima
パネルディスカッション資料(公開版)
odakeiji
簡単!低コスト!楽しい!レスポンシブ デザイン ディレクション
Yuji Nojima
Google Product
Daisuke Sugai
Ad
More from Ryuji Tamagawa
(20)
PDF
20171012 found IT #9 PySparkの勘所
Ryuji Tamagawa
PDF
20170927 pydata tokyo データサイエンスな皆様に送る分散処理の基礎の基礎、そしてPySparkの勘所
Ryuji Tamagawa
PPTX
hbstudy 74 Site Reliability Engineering
Ryuji Tamagawa
PDF
PySparkの勘所(20170630 sapporo db analytics showcase)
Ryuji Tamagawa
PDF
20170210 sapporotechbar7
Ryuji Tamagawa
PDF
20161215 python pandas-spark四方山話
Ryuji Tamagawa
PDF
20161004 データ処理のプラットフォームとしてのpythonとpandas 東京
Ryuji Tamagawa
PDF
20160708 データ処理のプラットフォームとしてのpython 札幌
Ryuji Tamagawa
PDF
20160127三木会 RDB経験者のためのspark
Ryuji Tamagawa
PDF
20151205 Japan.R SparkRとParquet
Ryuji Tamagawa
PDF
Performant data processing with PySpark, SparkR and DataFrame API
Ryuji Tamagawa
PDF
Apache Sparkの紹介
Ryuji Tamagawa
PDF
足を地に着け落ち着いて考える
Ryuji Tamagawa
PDF
ヘルシープログラマ・翻訳と実践
Ryuji Tamagawa
PDF
Google Big Query
Ryuji Tamagawa
PDF
BigQueryの課金、節約しませんか
Ryuji Tamagawa
PDF
You might be paying too much for BigQuery
Ryuji Tamagawa
PDF
Google BigQueryについて 紹介と推測
Ryuji Tamagawa
PDF
lessons learned from talking at rakuten technology conference
Ryuji Tamagawa
PDF
丸の内MongoDB勉強会#20LT 2.8のストレージエンジン動かしてみました
Ryuji Tamagawa
20171012 found IT #9 PySparkの勘所
Ryuji Tamagawa
20170927 pydata tokyo データサイエンスな皆様に送る分散処理の基礎の基礎、そしてPySparkの勘所
Ryuji Tamagawa
hbstudy 74 Site Reliability Engineering
Ryuji Tamagawa
PySparkの勘所(20170630 sapporo db analytics showcase)
Ryuji Tamagawa
20170210 sapporotechbar7
Ryuji Tamagawa
20161215 python pandas-spark四方山話
Ryuji Tamagawa
20161004 データ処理のプラットフォームとしてのpythonとpandas 東京
Ryuji Tamagawa
20160708 データ処理のプラットフォームとしてのpython 札幌
Ryuji Tamagawa
20160127三木会 RDB経験者のためのspark
Ryuji Tamagawa
20151205 Japan.R SparkRとParquet
Ryuji Tamagawa
Performant data processing with PySpark, SparkR and DataFrame API
Ryuji Tamagawa
Apache Sparkの紹介
Ryuji Tamagawa
足を地に着け落ち着いて考える
Ryuji Tamagawa
ヘルシープログラマ・翻訳と実践
Ryuji Tamagawa
Google Big Query
Ryuji Tamagawa
BigQueryの課金、節約しませんか
Ryuji Tamagawa
You might be paying too much for BigQuery
Ryuji Tamagawa
Google BigQueryについて 紹介と推測
Ryuji Tamagawa
lessons learned from talking at rakuten technology conference
Ryuji Tamagawa
丸の内MongoDB勉強会#20LT 2.8のストレージエンジン動かしてみました
Ryuji Tamagawa
RDB経験者に送るMongoDBの勘所(db tech showcase tokyo 2013)
1.
RDB経験者に送る MongoDBの勘所 ! 玉川竜司
2.
自己紹介 • 玉川竜司 • FB: Ryuji Tamagawa • Twitter:
tamagawa_ryuji • 本業ソフト開発(Sky株式会社) • 兼業翻訳者(ほぼオライリー)
3.
もうすぐ出ます
4.
今日のお題は MongoDB
5.
MongoDBのいいところ • 一言で言うなら「お手軽」 いい意味で • Webアプリケーションで求められる機能が手っ取り早く使える • 多目的の高性能「オートマ車」 • インストーラやパッケージですぐ動きます • クラウド上で実績多数 • 多くの言語で、仕様がある程度統一されているドライバが利用可能
6.
ただし • 集計は(今のところ)苦手 • (ほんとの)ビッグデータはちょっと難しいかも • 基本的に、オンメモリでいけるかどうかが問題 • そういえば、でかいメモリのインスタンス、AWSでもAzureで もさくらでも増えましたね・・・
7.
RDBとの違い • 物理構造の違い • 論理構造の違い • トレードオフの柔軟性 • レプリカセット • シャーディング
8.
物理構造の違い RDB エンジンが管理する (物理)メモリバッファ データファイル MongoDB OSが管理するメモリ データ(メモリマップドファイル)
9.
物理構造の違い(2) • とにかく、「ホット」なデータが物理メモリに収まるかが肝心 • RDBほど細かなメモリのチューニングはできない • データが大きいなら、RAMを増やすか、シャーディングでスケール アウト
10.
論理構造の違い RDB MongoDB { _id: new ObjectId("6a5b1476238d3b4dd5000048"), slug:
"gardening-tools", ancestors: [{ name: "Home", _id: new ObjectId("8b87fb1476238d3b4dd500003"), slug: "home" }, { name: "Outdoors", _id: new ObjectId( 9a9fb1476238d3b4dd5000001"), slug: "outdoors" } ], parent_id: new ObjectId("9a9fb1476238d3b4dd5000001"), name: "Gardening Tools", description: "Gardening gadgets galore!",
11.
論理構造の違い(2) • スキーマの自由度は高い(特に変更に強い) • ドキュメントを超えたアトミック性はない • 設計上のトレードオフが生じる • 一つのドキュメントで閉じない場合はIDで参照 • そうなると、処理をプログラムで書く必要が出てくる
12.
トレードオフの柔軟性 RDB MongoDB 書き込み保証 する?しない? しなけりゃ高速 書いたら がっつり 永続化 トランザクション はデフォルト WAL使う? いくつのレプリ カへ書けたら成功 したことにする?
13.
トレードオフの柔軟性(2) • 書き込みの確実性とパフォーマンスはトレードオフ • 大量のログの記録などでは、多少こぼれるリスクを抱えてもコストダウ ンしたいこともある • 逆に、データセンター間で複製できていることを保証したいこともある • 書き込み保証(Write Concern)、WAL、レプリカへの書き込み、タ ギングなどで、多彩な調整が可能
14.
レプリカセットとシャーディングについて ちょっと注釈 • これらについては、「技術的には」RDBとの対立概念ではない • ただし、商用RDBではコストが跳ね上がる(ですよね?)機能 • MongoDBでは最初から組み込まれて、非常にお手軽 & 便利
15.
レプリカセット Client-App Driver 書込 読取 Repreca-Slave 複製 Repreca-Master Repreca-Slave
16.
レプリカセット(マスター交代) Client-App Driver 読取 書込 Repreca-Slave 複製 Repreca-Master Repreca-Master
17.
レプリカセット (パフォーマンストレードオフ) Client-App Driver 書込 読取 Repreca-Slave Repreca-Master (バックアップ) 複製 (インデックスあり) Repreca-Slave (インデックスあり) バックアップ用のインスタン スにはインデックスを付けず、 非力なマシンで済ませる
18.
レプリカセット(DC間での分散) Client-App Driver 書込 Repreca-Master 複製 読取 Repreca-Slave Repreca-Slave DC-1 DC-2
19.
レプリカセットのまとめ • 読み取り負荷の分散 • 耐障害性 • 自動フェイルオーバー & リカバリ • 多彩なトレードオフ
20.
シャーディング Client-App • • mongod for mongod for あかさたな はまやらわ パフォーマンスは上がる • mongos メモリ量をn倍に • Driver 書き込み負荷を1/nに 障害は起きやすくなる →レプリカセットと併用
21.
シャーディング(意味なしパターン) Client-App Driver • ホットになるのは最新のシャードばかり • 順序づけできるシャードキーは要注意 • キーにはハッシュ的なデータが向く • 場合によっては複合キーを使う mongos mongod for mongod for mongod
for 2013/9 2013/10 2013/11
22.
シャーディングのまとめ • 「わりとビッグ」なデータに対応するための仕組み →どのくらいビッグかはハードによるが、期待しすぎは禁物 • キーの選択がキモ • 耐障害性はシャーディングと組み合わせて担保
23.
RDBに似ているところは? 柔軟なインデックス!
24.
柔軟なインデックス • NoSQLエンジンは、インデックスが限定的なものが多い • MongoDBは、BSONデータのどこにでもインデックスを張れる • 複合キーも張れる • いくつでも張れる • クエリオプティマイザがキーの有無を(ある程度)ちゃんと見てくれる
25.
まとめ
26.
今日話したこと • この本に事細かに書かれています。 • 電子書籍もあります。 • http://www.oreilly.co.jp/ books/9784873115900/ • そのほかにもMongoDB関連の電子 書籍があるので、オライリージャパ ンのサイトで検索を。
27.
それはともかく • 簡単に始められて • かなり深く使うこともできます • ただし落とし穴もあります →コミュニティへどうぞ! http://www.mongodb.jp • まずは手を動かしてみましょう!
28.
最後に告知 • MongoDB Tokyo 2013
開催 • • • 日時:12/12(木) 申し込みサイト:http://atnd.org/event/mongodbtokyo2013 MongoDB University 日本語講座:第2弾開催 • 日時:11/25 • 申し込みサイト:https://education.mongodb.com/courses/10gen/M101P/2013_November/about
29.
ご清聴ありがとうございました。
Download