Vertex AIを用いた
時系列データの解析
2021/12/18 機械学習の社会実装勉強会 第6回
- UX企画関連のソフトウェア開発に従事
- 統計・MLを用いた解析機能の開発及び運用を担当
自己紹介
岩澤幸太朗
前回やったこと
- ARIMAモデルの概要
- ARIMAモデルを用いたCOVID-19感染者数予測
【第5回】BigQueryML を用いた時系列データの分析( ARIMAモデル)
◆ ARIMAモデル (自己回帰和分移動平均モデル)
ARMAモデル 次数, p, d, q
d個前の値との差分
復習
→ 過去の自分の値から未来の値を予測 (外的要因は考慮しない )
(ARMA + 和分過程 )
ARモデル MAモデル
ARMAモデル
ARIMAモデル
前回の結果 (ARIMAモデルによるCOVID-19感染者数予測)
予測モデルとしては失敗
反省:時系列データ予測の難しさ
一変量時系列解析
- 日付、 感染者数
多変量時系列解析
- 日付、感染者数、
人出、ワクチン接種者数、
人口統計、気温、...
長期的傾向(トレンド)
- 増加 or 減少
周期性
- 週次
- 季節性 (?)
外的要因 (複数の特徴量)
- 大規模イベント
- 衛生意識の変化
- 変異株の出現
- …
過去の自分の値から
将来の値を予測
本日の内容
- Vertex AI の概要
- Vertex AI を用いた時系列データの解析
- 予測結果の可視化
Vertex AI
MLOps with Vertex AI
https://cloud.google.com/vertex-ai?hl=ja#section-7
*各セルのサービス名称,関係変わっているかも
- Google I/O 21にて発表(一般提供)
- 機械学習ワークフローの統合環境
- AutoML含む各種MLツールへのアクセス
- AutoML
- Vertex AI Workbench
- Deep Learning VM Image
- Vertex AI Data Labeling
- Vertex Explainable AI
- Vertex AI Model Monitoring
- …
AutoML
予測
ハイパーパラメータチューニング
データ前処理
モデルデプロイ
…
データセット読
み込み
AutoML
アンサンブル学習
モデル選択
モデル評価
トレーニング データ(2020-04-01 ~ 2021-10-31)
時間列(日付)+ 時系列識別子(国)+ ターゲット列(感染者数)+ 特徴を表す列
- 欠損値を避ける
- 十分なトレーニング データ
- 10 以上の時系列識別子
.
.
.
参
考:https://cloud.google.com/vertex-ai/docs/datasets/bp-tabular
予測データ(2021-11-01 ~ 2021-11-14 + コンテキスト期間)
→予測日数分の行のTarget 列 (new_confirmed)はNULLにする
.
.
.
Demo
….… ( ^ ω ^ )
- 最新の知見を用いた多変量時系列解析がUI上で実行できた
- 人の手はある程度必要
- 一定のデータセット理解
- 説明変数選択
- 前処理
- 評価指標選択
- 説明性
- Auto MLの料金のご確認を、ご利用は計画的に
所感
参考文献・リンク
コードはこちら
https://github.com/kootr/ml-study-session
Vertex AI AutoML ForecastingでDNNの強力な多変量時系列予測を自動モデリングしてしまおう
Vertex AI ではじめる時系列分析入門
How to build forecasting models with Vertex AI
ML 入門: Vertex AI のラーニングパス
Using AutoML for Time Series Forecasting
GCP: AutoML
AutoMLで破産しないように気をつけたいポイント
GCPのAutoMLを使っていたら12万の請求゙がきてしまった話
Summary of rules for identifying ARIMA models

More Related Content

PDF
Vertex AI Pipelinesで BigQuery MLのワークフローを管理 (ETL ~ デプロイまで)
PDF
マーク付き点過程
PDF
機械学習で泣かないためのコード設計
PDF
機械学習モデルの判断根拠の説明
PPTX
MLOps入門
PDF
最新リリース:Optuna V3の全て - 2022/12/10 Optuna Meetup #2
PDF
AWSではじめるMLOps
PDF
『バックドア基準の入門』@統数研研究集会
Vertex AI Pipelinesで BigQuery MLのワークフローを管理 (ETL ~ デプロイまで)
マーク付き点過程
機械学習で泣かないためのコード設計
機械学習モデルの判断根拠の説明
MLOps入門
最新リリース:Optuna V3の全て - 2022/12/10 Optuna Meetup #2
AWSではじめるMLOps
『バックドア基準の入門』@統数研研究集会

What's hot (20)

PDF
機械学習による統計的実験計画(ベイズ最適化を中心に)
PDF
PDF
7. Vertex AI Model Registryで BigQuery MLのモデルを管理する
PDF
BlackBox モデルの説明性・解釈性技術の実装
PDF
ブースティング入門
PPTX
[DL輪読会]ドメイン転移と不変表現に関するサーベイ
PDF
ブレインパッドにおける機械学習プロジェクトの進め方
PPTX
[DL輪読会]GLIDE: Guided Language to Image Diffusion for Generation and Editing
PDF
状態空間モデルの考え方・使い方 - TokyoR #38
PPTX
SSII2020SS: グラフデータでも深層学習 〜 Graph Neural Networks 入門 〜
PDF
[論文紹介] 機械学習システムの安全性における未解決な問題
PDF
GAN(と強化学習との関係)
PDF
最適化超入門
PDF
[Cloud OnAir] BigQuery の一般公開データセットを 利用した実践的データ分析 2019年3月28日 放送
PDF
実践 Amazon Mechanical Turk ※下記の注意点をご覧ください(回答の質の悪化・報酬額の相場の変化・仕様変更)
PPTX
[DL輪読会]When Does Label Smoothing Help?
PDF
2. BigQuery ML を用いた時系列データの解析 (ARIMA model)
PDF
Deep Learning Lab 異常検知入門
PDF
入門 Kubeflow ~Kubernetesで機械学習をはじめるために~ (NTT Tech Conference #4 講演資料)
PDF
Hyperoptとその周辺について
機械学習による統計的実験計画(ベイズ最適化を中心に)
7. Vertex AI Model Registryで BigQuery MLのモデルを管理する
BlackBox モデルの説明性・解釈性技術の実装
ブースティング入門
[DL輪読会]ドメイン転移と不変表現に関するサーベイ
ブレインパッドにおける機械学習プロジェクトの進め方
[DL輪読会]GLIDE: Guided Language to Image Diffusion for Generation and Editing
状態空間モデルの考え方・使い方 - TokyoR #38
SSII2020SS: グラフデータでも深層学習 〜 Graph Neural Networks 入門 〜
[論文紹介] 機械学習システムの安全性における未解決な問題
GAN(と強化学習との関係)
最適化超入門
[Cloud OnAir] BigQuery の一般公開データセットを 利用した実践的データ分析 2019年3月28日 放送
実践 Amazon Mechanical Turk ※下記の注意点をご覧ください(回答の質の悪化・報酬額の相場の変化・仕様変更)
[DL輪読会]When Does Label Smoothing Help?
2. BigQuery ML を用いた時系列データの解析 (ARIMA model)
Deep Learning Lab 異常検知入門
入門 Kubeflow ~Kubernetesで機械学習をはじめるために~ (NTT Tech Conference #4 講演資料)
Hyperoptとその周辺について
Ad

Similar to 3. Vertex AIを用いた時系列データの解析 (8)

PDF
14. BigQuery ML を用いた多変量時系列データの解析.pdf
PDF
時系列解析の使い方 - TokyoWebMining #17
PDF
時系列分析入門
PDF
[R勉強会][データマイニング] R言語による時系列分析
PPTX
【DL輪読会】時系列予測 Transfomers の精度向上手法
PDF
明日から役立つ BigQuery ML 活用 5 つのヒント | Google Cloud INSIDE Games & Apps: Online
PDF
Mln23 aws forecast-report1
PDF
第31回TokyoR LT資料
14. BigQuery ML を用いた多変量時系列データの解析.pdf
時系列解析の使い方 - TokyoWebMining #17
時系列分析入門
[R勉強会][データマイニング] R言語による時系列分析
【DL輪読会】時系列予測 Transfomers の精度向上手法
明日から役立つ BigQuery ML 活用 5 つのヒント | Google Cloud INSIDE Games & Apps: Online
Mln23 aws forecast-report1
第31回TokyoR LT資料
Ad

More from 幸太朗 岩澤 (10)

PDF
15. Transformerを用いた言語処理技術の発展.pdf
PDF
BigQuery ML for unstructured data
PDF
12. Diffusion Model の数学的基礎.pdf
PDF
行列分解の数学的基礎.pdf
PDF
BigQuery MLの行列分解モデルを 用いた推薦システムの基礎
PDF
Vertex AI Pipelinesで BigQuery MLのワークフローを管理
PDF
6. Vertex AI Workbench による Notebook 環境.pdf
PDF
5. Big Query Explainable AIの紹介
PDF
4. CycleGANの画像変換と現代美術への応用
PDF
1. BigQueryを中心にした ML datapipelineの概要
15. Transformerを用いた言語処理技術の発展.pdf
BigQuery ML for unstructured data
12. Diffusion Model の数学的基礎.pdf
行列分解の数学的基礎.pdf
BigQuery MLの行列分解モデルを 用いた推薦システムの基礎
Vertex AI Pipelinesで BigQuery MLのワークフローを管理
6. Vertex AI Workbench による Notebook 環境.pdf
5. Big Query Explainable AIの紹介
4. CycleGANの画像変換と現代美術への応用
1. BigQueryを中心にした ML datapipelineの概要

3. Vertex AIを用いた時系列データの解析