[Cloud OnAir] ビジネスを変革する！クラウドを活用したデータ分析基盤の第一歩 (e-Learning) 2018年4月19日 放送
1 like1,716 views
データを分析し、機械学習などを活用していくためにはデータを蓄積することがまず重要となります。データウェアハウス、データレイクといったデータ分析の第一歩をわかりやすく説明し、それがビジネスにどう役立つかをお話します。また、それを Google Cloud Platform BigQuery や Google Cloud Storage, G Suite といったサービスを活用することでどのように簡単に実現できるかもご紹介します。
[Cloud OnAir] ビジネスを変革する！クラウドを活用したデータ分析基盤の第一歩 (e-Learning) 2018年4月19日 放送
- 1. Cloud Onr Cloud OnAir Cloud OnAir ビジネスを変革する！クラウドを活用し たデータ分析基盤の第一歩 2018 年 4 月 19 日 放送 e-Learning 補助資料
- 4. Cloud OnAir はじめに 先週の放送 データを使いこなして ● 分析で売上の落ちてる原因がわかる ● 意思決定を助ける ● 機械学習テクノロジーを使いこなす 最初の一歩の話をしました
- 5. Cloud OnAir ふりかえり ● データを活用するためには、 データを 蓄積、整理・分析 する必要がある ○ データを蓄積：データレイク ○ データを整理・分析：データウェアハウス (DWH) ● クラウドならではのスケーラビリティ、コストを利用することで気軽に構築 機械学習、データ分析などを活用する時を逃さない 第一歩目 ： データ活用のための基盤を構築
- 7. Cloud OnAir 振り返り データレイク データウェアハウス 事業の データベース Webサイトのア クセスログ 分析者 Cloud Storage BigQuery
- 9. Cloud OnAir Appendix. Google Cloud Storage へのアップロード (1) 1. Cloud Storage でバケットを作成
- 10. Cloud OnAir Appendix. Google Cloud Storage へのアップロード (2) 1. Cloud Storage でバケットを作成
- 11. Cloud OnAir Appendix. Google Cloud Storage へのアップロード (3) 1. Cloud Storage でバケットを作成
- 12. Cloud OnAir Appendix. パブリックデータのダウンロード パブリックデータをダウンロードして、 データレイクに保存します。 ● 地震データ http://earthquake.usgs.gov/earthquakes/map/
- 13. Cloud OnAir 1. 設定ボタンをクリック 2. 30日分、マグニチュード 2.5+を選択 4. “Download Earthquakes”ボタンをクリック し、”CSV”を選択してダウンロードする 3. 画面左上の「∨」をクリック
- 14. Cloud OnAir Zip を解凍し、 CSV ファイルをドロップしてアップロード
- 15. Cloud OnAir Gsutil を利用する (自動化の際に利用) Gsutil : コマンドラインの GCS 操作ツール https://cloud.google.com/storage/docs/gsutil ● 任意のサーバー、クライアントにインストールしてアップ ロードを自動化する ● Cloud Shell から利用する
- 16. Cloud OnAir Gsutil を利用する (自動化の際に利用) Cloud Shell を起動 1. Cloud Shell ボタンをクリック 2. Cloud Shell が起動
- 17. Cloud OnAir Gsutil を利用する (自動化の際に利用) バケットを確認する $ gsutil ls 地震データをアップロードする $ wget https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv $ gsutil ls
- 18. Cloud OnAir Gsutil を利用する (自動化の際に利用) 地震データをダウンロードする $ wget https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv 地震データをアップロードする $ wget https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv