re:Invent 2020 データとか、機械学習とかの頭の整理
- 1. Fin-JAWS 第17回 re:Invent 2020 Online re:Cap データとか、機械学習とかの頭の整理
- 2. みなみ たつや 1984年 2000年 宮崎県都城市 • 鹿児島弁 訛り • 釣り / カメラ / 落語 / NBA / アニメ 宮崎県立都城西高等学校 2007年 2018年 2003年 鹿児島大学理学部 物理科学科 FolkSong同好会 2020年 株式会社インフォテクノ朝日 （朝日生命グループ） • 営業職員用端末の開発に従事 株式会社Blue Lab 出向 • みずほフィナンシャルグループ • 新規事業開発、DX • Fin-JAWS、FINOLAB Insurtech WG 参加 • フィンテックエンジニア養成読本 執筆
- 9. つまり
- 10. 他力本願！！
- 11. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru
- 12. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru SageMaker機能・サービスの追加
- 13. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru 異常検知系サービス
- 14. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru ＋ML
- 15. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru コンピュータビジョン エッジコンピューティング
- 16. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learnin Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru コンピュータビジョン
- 17. re:Invent2020発表データ関連新サービス AWS Glue Elastic Views AWS Panorama Appliance Deep Profiling for SageMaker Debugger Amazon SageMaker Data Wrangler AWS Panorama Device SDK Amazon SageMaker Edge Manager Amazon SageMaker Feature Store Amazon QuickSight Q Amazon Redshift ML Amazon SageMaker Pipelines Real-Time Contact Lens for Amazon Connect Amazon Neptune ML Amazon Monitron Amazon Connect Voice ID Amazon Lookout for Metrics Amazon Lookout for Equipment Amazon Kendra incremental learning Amazon SageMaker JumpStart Amazon Lookout for Vision Amazon SageMaker Clarify Amazon HealthLake Amazon Forecast Weather Index Amazon Connect Wisdom Amazon DevOps Guru まてりあらいずどびゅー 天気のデータをMLに使おう 健康データの統合管理
- 19. 追加された機能・サービスを整理
- 22. SageMakerのおさらい https://aws.amazon.com/jp/sagemaker/ フルマネージド型のデータラベル付けサービス • テキスト分類（Text classification） • 画像分類（Image classification） • 物体検出（Bounding box） • セマンティック・セグメンテーション（Semantic Segmentation） • ユーザー定義のカスタムタスク（Custom）
- 33. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager
- 34. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager 前処理 ビジュアルインターフェイスを利用し、表のサマリー、ヒス トグラム、散布図などを表示したり、欠落データの補完、型 変換やOne-Hotエンコーディングなどの前処理を実行可能
- 35. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager バイアス検知 データとモデルで測定しバイアスを検出。Data Wranglerと統 合されているため、データ準備中に検知することが可能
- 36. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager Debuggerでモニタリング・プロファイリング GPU、CPU、ネットワーク、メモリ、メトリクス等をビジュ アライズ
- 37. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager 処理済みデータを保管・再利用 学習や予測ジョブで使用される処理済みデータの安全な保存、 検索、共有できるリポジトリ
- 38. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager CD/CI 機械学習におけるCD/CIを実現。データ準備・様々なある後 リズムやパラメータでの実験・モデルの学習やチューニン グ・モデルのデプロイといった一連のワークフローを自動化
- 39. re:Invent 2020新機能・サービスを追加 https://aws.amazon.com/jp/sagemaker/ Amazon SageMaker Data Wrangler Amazon SageMaker Feature Store Amazon SageMaker Pipelines Deep Profiling for SageMaker Debugger Amazon SageMaker Clarify Amazon SageMaker Edge Manager エッジコンピューティング管理 エッジデバイスでのモデル適用・セキュア・監視など。