Annotation Meetup 20180705
2 likes2,601 views
2018年7月5日にABEJAセミナールームで開催されたAnnotation Meetupの発表で使った資料です。 来栖川電算がどのような考え方に従ってアノテーションしているかが分かります。参考にしてください。 たくさんのアノテーションプロジェクトで鍛えられた来栖川電算製のアノテーションツールAnnoFabについても載っています。無料なのでぜひ使ってください。 [AnnoFab] http://annofab.com/
Annotation Meetup 20180705
- 1. アノテーションこそが本質 A B E J A セ ミ ナ ー ル ー ム 2 0 1 8 . 7 . 5 来 栖 川 電 算 取 締 役 山 口 陽 平 A B E J A C l o u d A I N i g h t A n n o t a t i o n M e e t u p # a b e j a a i
- 2. 今日話すこと 1. はじめに 2. 背景 3. 来栖川電算のプロセス 4. 来栖川電算のツール 5. まとめ 2
- 4. 山 口 陽 平 @melleo1978 • 所属 ＆ 経歴 – 有限会社 来栖川電算 取締役 – 名古屋工業大学大学院 博士前期課程修了 – IPA未踏ソフトウェア創造事業 採択 – Mashup Awards 9 優秀賞受賞 • 自己紹介 企画から実装まで全部やる人 – AI技術 & アルゴリズム の研究開発 • 文字認識，物体認識，動作認識，行動認識 – 言語処理系 の研究開発 • 分散DB，仮想機械，コンパイラ • 好きなサービス AWS Lambda ※実物に髪の毛はありません。 4
- 5. 山 口 陽 平 @melleo1978 • ［実践］画像認識 を執筆 WEB+DB PRESS Vol.83 – これから画像認識をはじめる人におススメ 5 – OpenCV の使い 方や実装例 – SIFTなどの各種 アルゴリズムや 特定物体認識の しくみ – 精度改善への取 り組み方
- 6. 来栖川電算 設立 2003年（名古屋工業大学発ベンチャー） 従業員 50人 • SF 世界の技術を実現し、社会に役立てる – AI 技術のライセンス販売・研究・SI • 文字認識，物体認識，動作認識，行動認識 – スマホアプリの企画・制作・運営 スマートライフ技術 NTTドコモ様との共同研究 スマートドライブ技術 大手自動車メーカー様むけ メイドさん もふくめて 6
- 7. 技術者集団 様々なアルゴリズムや知識で課題解決 • 最先端の AI 技術 – 文字認識，物体認識，モーション認識 • 限界性能を引き出す優れた実装技術 – 機械学習・コンパイラ・データベースなどの アルゴリズムやバイナリハックを駆使した高 精度化・高速化・省資源化・並列化・分散化 • 高品質なソフトウェアを実現する技術 – 言語・アーキテクチャ・プロセスに対する深 い理解に基づく設計と計画 7
- 11. AI 実現のための力点 そもそも仕様（データ収集・アノテーション）は重要 1. タスク設計 重要度：40% • システム全体のデータフローの設計 • 機械学習を適用する機能と入出力の明確化 2. データ収集・アノテーション 重要度：40% • データの質・量・時期の計画・生産 • アノテーションルールの明確化・改良 3. 機械学習 重要度：20% • パイプライン（学習・推論）の設計・改良 • 訓練・検証・ハイパーパラメータの調整 11
- 12. 最近の傾向 深層学習以降、データ整備による性能改善がよく効く • モデルがデータによく適合 ⇒ 切り分け◎ 12 推 論 の 誤 り 性 能 の 改 善 モデルアーキテクチャの改善 データ収集・アノテーションの改善 サンプリング・シンセサイズの改善 評価手法の改善 タスク設計の改善
- 19. 他の知見 まずいルールには種類がある • 時間がかかる部分 – ×作図 – ●探索 ＆ 判断の迷い • ブレるルール – 主観に基づく入力 – 予測に基づく入力 • 漏れるルール – 特定の条件でだけ囲うなど 19
- 26. その他 徹底的な自動化支援 ⇒ Web API と CLI により、大量一括処理や外部システムとの連携が容易 多言語対応 ⇒ 表示されるメッセージは全て日本語と英語に対応。カスタマイズ可能 プライベートストレージ対応 ※有料オプション ⇒ セキュリティが心配な方のために、社内ストレージに対応 プロフェッショナルサービス ※有料オプション ⇒ アノテーション作業，AI開発，これらに対するコンサルティング 26
- 28. まとめ 来栖川電算流 アノテーションはこうしろ • ルールが確定するまで丸投げしない • 研究者と一緒にルール策定 • 最初にみんなで練習 • 緊密な課題管理ができるツールの使用 – ABEJA のツール – 来栖川電算のツール 28