Getting started with MLOps
- 2. 自己紹介 shibui yusuke ● 自動運転スタートアップのティアフォー所属 ● よろず屋 ● MLOpsコミュニティのオーガナイザー ● もともとクラウド基盤の開発、運用。 ● ここ5年くらいMLOpsで仕事。 ● Github: @shibuiwilliam ● Qiita: @cvusk ● FB: yusuke.shibui ● 最近やってること: FlutterとIstio cat : 0.55 dog: 0.45 human : 0.70 gorilla : 0.30 物体検知
- 9. MLOpsのはじめ方
- 10. Good ● プロダクトの課題からはじめる ● リリースからはじめる ● プロダクトの価値からはじめる Bad ● 機械学習からはじめる ● 汎用基盤からはじめる ● 技術的な課題からはじめる Issueからはじめる
- 11. プロダクトを設計する ● 課題： 画像データの検索に時間がかかっている ● 状況： 大量の画像データが保存されており、 有効活用したいが必要な画像を 検索することができない ● 成功の定義： 利用者が画像を選択するまでの時間を **分以内に短縮する
- 13. 使い方を考える ネコ ネコ イヌ ・・・ ネコ 個数 位置 明るさ 場所 容易さ 便利さ 画像をアップロード 用途次第 カテゴリを選択 画像分類 フリーテキスト入力 画像分類＋自然言語処理 フリーテキストと属性 画像分類＋物体検知＋ 自然言語処理 画像から類似画像を検索 特徴量抽出＋ANN 3 暗 外 上
- 14. 評価方法を考える ● 目的を手段で要素分解する仮説を立てる ● はやめに仮説検証できる技術を選択する 目的のコンテンツを 収集するまでの時間 日時検索 画像認識 目的のコンテンツを 収集するまでの時間 適切にタグ付けされた コンテンツ数と正解率 目的のコンテンツを 収集するまでの時間 画像分類の Accuracy 物体検知の Ave. Precision
- 18. （参考）機械学習の管理系ライブラリ ● モデルの管理 ○ modeldb: https://github.com/VertaAI/modeldb ○ keepsake: https://keepsake.ai/ ● データも管理 ○ DVC: https://dvc.org/ ● 学習の経過も記録 ○ TensorBoard: https://www.tensorflow.org/tensorboard ● 学習パイプラインと経過とモデルを記録 ○ mlflow: https://mlflow.org/ ● 学習パイプラインと基盤 ○ Metaflow: https://metaflow.org/ ○ KubeFlow: https://www.kubeflow.org/ ● 学習済みモデルを解析 ○ Tensorflow Model Analysis: https://www.tensorflow.org/tfx/guide/tfma ○ Netron: https://github.com/lutzroeder/netron
- 20. （参考）機械学習の推論ライブラリ ● TensorFlow, Keras ○ サーバサイド：TensorFlow Serving https://www.tensorflow.org/tfx/guide/serving ○ スマホ：TensorFlow Lite https://www.tensorflow.org/lite?hl=ja ● PyTorch ○ サーバサイド：ONNX Runtime https://github.com/microsoft/onnxruntime ○ サーバサイド：Torch Serve https://pytorch.org/serve/ ○ スマホ：PyTorch Mobile https://pytorch.org/mobile/home/ ● scikit-learn ○ サーバサイド：ONNX Runtime https://github.com/microsoft/onnxruntime
- 25. まとめ
- 26. 本を出版します！ ● AIエンジニアのための 機械学習システムデザインパターン ● 2021年5月17日出版 ● https://www.amazon.co.jp/dp/4798169447/