CData Sync Hand-on 資料
Download as PPTX, PDF0 likes297 views
クラウドデータのDB への同期ツールCData Sync のセミナー資料です。
CData Sync Hand-on 資料
- 1. © 2018 CData Software Japan, LLC | www.cdata.com/jp Supported by
- 2. © 2018 CData Software Japan, LLC | www.cdata.com/jp
- 3. © 2018 CData Software Japan, LLC | www.cdata.com/jp CData Sync リリースセミナー＆ハンズオン CData Software Japan
- 4. © 2018 CData Software Japan, LLC | www.cdata.com/jp 1. About CData Software
- 5. © 2018 CData Software Japan, LLC | www.cdata.com/jp About CData Software Bi-directional Access to Live App, Database, & Web API Data Through Standard Drivers ・CData Software, Inc. / Started: 1994 (/nsoftware) ・Location: Chapel Hill, NC a spin-off of /n software ・CData Japan: 2016/6 (JV with Infoteria) ・20年以上にわたりデータ関連コンポーネントを提供 ・100+ 対応データソース ・See the World as a Database をミッションにクラウドデータ接続を標準化 ・APIエコシステムの構築をサポート
- 6. © 2018 CData Software Japan, LLC | www.cdata.com/jp RDB(SQL) ⇔ Web API 変換のエキスパート Enable real-time data integration with hundreds of applications, databases, and Web APIs Data Drivers API をあらゆるツールや人から 利用出来るように API Server 業界標準のAPIをポイント＆ クリック操作で作成
- 7. © 2018 CData Software Japan, LLC | www.cdata.com/jp RDB(SQL) ⇔ Web API 変換のエキスパート Enable real-time data integration with hundreds of applications, databases, and Web APIs Sync クラウドサービスのデータをポイント＆クリッ ク操作でレプリカ（コピー）を作成
- 8. © 2018 CData Software Japan, LLC | www.cdata.com/jp 業界最多級のデータソース Drivers for NoSQL, Big Data, & SaaS Connectivity CRMおよびマーケティング自動化 会計システム コラボレーションおよびERP オンプレミスおよびクラウドDB ドキュメントおよびファイル形式 ソーシャルネットワーキングネットワーキングおよび認証 電子商取引 その他
- 9. © 2018 CData Software Japan, LLC | www.cdata.com/jp Global Customers
- 10. © 2018 CData Software Japan, LLC | www.cdata.com/jp Japan Customers
- 11. © 2018 CData Software Japan, LLC | www.cdata.com/jp OEM Partners-by Global #1 players, by Japan’s #1 players Embedded In The Leading BI, ETL, Data Integration, Data Virtualization, and Data Warehousing Tools
- 12. © 2018 CData Software Japan, LLC | www.cdata.com/jp 2. Why need Sync
- 13. © 2018 CData Software Japan, LLC | www.cdata.com/jp ❝CData さん、仮想RDB もいいけど、 RDB でクラウドデータあつかえない？❞
- 14. © 2018 CData Software Japan, LLC | www.cdata.com/jp 連携が必要ないSaaS はない • 連携：Point to point • データ量：大きくなる可能性も • 同期頻度：リアルタイム～日時バッチ程度 • 難易度：低（通知）、高（オートメーション） 通知だけなどであれば、リアルタイム性が重視され るが連携の難易度自体は低く、API での連携実 装向き。 オートメーションとなると、ロジック、重複の扱いなど 難易度があがる • 連携：DB 同期 • データ量：小～中 • 同期頻度：日時バッチで充分 • 難易度：高 DB の同期は、細かいところで難易度が高い （後述） • 連携：DB 同期（マスター＋トランザクショ ン） • 大 • 同期頻度：日時バッチで充分 • 難易度：中 データの量が多いことや非構造化データの問題 オートメーション・通知系 マスター同期 分析
- 15. © 2018 CData Software Japan, LLC | www.cdata.com/jp • 多くの開発者のデフォルトはRDBMS/SQL • Web API の習得自体が大きな負担 • アプリケーション側の自動クエリ生成などの機能 を使用できないケースも • 増えているのは非構造化データ • REST/SOAP APIs & SDKs のデータモデリ ングの差異 • 各開発言語に依存したSDK • サービス側のAPI 変更への追従負荷 • 連携部分が俗人化しアップデートに大きなコスト そもそもAPI を使った連携は負担大 Web API習得の負担 開発言語への依存 運用・アップデート対応負荷
- 16. © 2018 CData Software Japan, LLC | www.cdata.com/jp CData Drivers 技術で仮想RDB 化 • JSON/XMLなどのデータ をテーブル構造にマッピング • 非構造化データからスキー マを自動検出 • 標準SQLでのデータアクセ スを可能に • フルCRUDを実現 • JOIN / フィルタリングや集 計関数にも対応 • アプリ/ツールの標準対応 インターフェースとして接続 • 各種プラットフォームが提供 する高度なフレームワーク活 用が可能 • ファイアウォールやプロキシな どのネットワーク機能に標準 対応 • 各種認証・ログ管理等のエ ンタープライズレベルの要求 をすべて統一UIで提供 テーブル化 （スキーマ付与） 標準SQL クエリエンジン 標準インターフェース セキュリティ 管理機能 ODBC
- 17. © 2018 CData Software Japan, LLC | www.cdata.com/jp Drivers 活用で API 連携開発は大幅に楽にはなるが、
- 18. © 2018 CData Software Japan, LLC | www.cdata.com/jp ❝CData さん、仮想RDB もいいけど、 RDB でクラウドデータあつかえない？❞
- 19. © 2018 CData Software Japan, LLC | www.cdata.com/jp まだ残る残る面倒なポイント • RDB化されても、ジョブ起 動やマッピングは必要 • カスタムアプリを作るのは手 間 • むやみにAPI を叩くとアクセ ス制限がかかる • クエリ量や通信料が増える と課金が心配 • 「差分更新」の組み方は？ • パフォーマンスを出すクエリ の検討 • データソース毎に最適なクエ リは異なる（実際のデータ 構造も影響） • API 自体ではなく、アプリ へのアクセス制限やセキュリ ティ機能の実装が必要 ジョブ起動＝アプリ 作成 リミット制限・課金 パフォーマンス セキュリティ機能
- 20. © 2018 CData Software Japan, LLC | www.cdata.com/jp そもそも「DB への同期」で済むケースが多い？ • 連携：Point to point • データ量：大きくなる可能性も • 同期頻度：リアルタイム～日時バッチ程度 • 難易度：低（通知）、高（オートメーション） 通知だけなどであれば、リアルタイム性が重視され るが連携の難易度自体は低く、API での連携実 装向き。 オートメーションとなると、ロジック、重複の扱いなど 難易度があがる • 連携：DB 同期 • データ量：小～中 • 同期頻度：日時バッチで充分 • 難易度：高 DB の同期は、細かいところで難易度が高い （後述） • 連携：DB 同期（マスター＋トランザクショ ン） • 大 • 同期頻度：日時バッチで充分 • 難易度：中 データの量が多いことや非構造化データの問題 オートメーション・通知系 マスター同期 分析用データ作成 こちらのケースは「DB への同期」でカバーできる場合が多い
- 21. © 2018 CData Software Japan, LLC | www.cdata.com/jp ❝SaaS データをまるっとDB に同期する ことに最適化したアプリがあれば便利！❞
- 22. © 2018 CData Software Japan, LLC | www.cdata.com/jp 連携ではないけれど、「バックアップ」の必要性 SaaS 上のデータも、「企業の所有する資産」 • サービスが止まる • SaaS ベンダーと訴訟になったらデータは？ • SaaS 側でのデータの喪失 • 過去のデータの断面の保存 BCP • ネットワークが使えない場合でも業務を最低限継続できるか
- 23. © 2018 CData Software Japan, LLC | www.cdata.com/jp 「SaaS データをDBにSync（同期）するアプリ」 という最大公約数のアプローチ
- 24. © 2018 CData Software Japan, LLC | www.cdata.com/jp 向き/不向き ケース CData Sync レコメンド バックアップ ◎ 最適 - DataLake （分析・帳票） ◎ 最適 - 複数SaaS -> 統合DB ◎ 最適 SQL リモーティングも可 マスター同期 〇 適 レプリケーション作成 ワークフロー × ワークフローサービス、FaaS、ETL を 通知 × FaaS やAPI コーディングを 既存テーブルへのマッピング × ETL/Driver を
- 25. © 2018 CData Software Japan, LLC | www.cdata.com/jp 3. Features of CData Sync
- 26. © 2018 CData Software Japan, LLC | www.cdata.com/jp CData Sync Features Replicate Any Data Source To Any Database With A Few Clicks • SQL Server, MySQL, DB2, など多様なデータ ベースをサポート。 • MongoDB, Cassandra などのNoSQLやクラウド サービスも対応予定。 • インテリジェントな差分更新 でデータ同期の通信を効率 化 • シンプルな管理コンソールで 直観的な設定操作。 • クラウドデータの意図しない 喪失への対策として、バック アップ・アーカイブとしての利 用も。 豊富な データベース対応 差分更新 ノンプログラミング バックアップ・ アーカイブとして
- 27. © 2018 CData Software Japan, LLC | www.cdata.com/jp クラウドデータソース ラインナップ Supported SaaS/Cloud Sources
- 28. © 2018 CData Software Japan, LLC | www.cdata.com/jp Sync先データベース ラインナップ Supported SaaS/Cloud Destinations NoSQL(Cassandra, Couchbase, HBASE),一部クラウドDB(BigQuery, Redshift)は対応予定。
- 29. © 2018 CData Software Japan, LLC | www.cdata.com/jp 4. Demo & Hands on
- 30. © 2018 CData Software Japan, LLC | www.cdata.com/jp デモ＆ハンズオン内容 Demo & Hands on scenario 1. CData Sync製品のインストール 2. 製品の各機能の説明 3. SalesforceのデータをMySQLにSync 4. Dynamics CRM Online(Dynamics 365)のデータをMySQLにSync 5. APIからSyncジョブを実行 6. MySQL上でクラウドサービスに跨る顧客データを併せて確認
- 31. © 2018 CData Software Japan, LLC | www.cdata.com/jp アンケートご協力のお願い Questionnaire https://docs.google.com/forms/d/16bAqkrvkk6qZm8sAMpA5F3_TbIAvhSC4R_yjWV0 mWks/
- 32. © 2018 CData Software Japan, LLC | www.cdata.com/jp Thank You!