SlideShare a Scribd company logo
小型ヘリコプタにおける着陸制御に
  向けたビジョンベース位置推定

   Vision-based position presumption
 for landing control in small helicopter


                             木村卓哉
          複雑系工学講座 調和系工学研究室
研究背景
ヘリコプタの自律ロボット化
    ・ 有人飛行が困難な場所またはオペレータの有視界外での行動
    ・ 制御の自律化による操縦負荷の軽減

大型ヘリコプタによる自律ロボット化に関する研究

    ・ラジコンヘリコプタの姿勢制御・ホバリング制御(01,辛,藤原)
    ・位置制御器,速度制御器,姿勢制御器によるホビー用無人ヘリコプタの自律制御(03,羽沢)




 自律型ヘリコプタを小型化する利点

    ・ 複数台の低コストな機体の協調作業による探索タスクの高速化
    ・ 機体の制作・維持コスト削減 (配備容易性、飛行燃料の軽減など)

 小型化によりタスクに応じて自律型ヘリコプタの活用範囲の拡大が可能
課題と問題点
小型化によって生じる課題
 ・ ペイロードの制約下でのシステム構成 (搭載するセンサやプロセッサに制約)
 ・ 小型化による飛行の不安定性や外乱の影響を踏まえた制御の確立

    カメラ画像に基づいたビジョンベースの制御による研究が一般的
               搭載カメラによる小型ヘリコプタの位置・姿勢制御(09,飯村)

自律ヘリコプタに必要とされる能力
  離陸の自動化       フライトの自動化     着陸の自動化

               着陸に向けた
                          着陸地点の認識        着陸制御
               自己位置推定

 本研究の目的
  自動着陸に向けたカメラ画像を用いた自己位置推定
    着陸という観点から、特に高さ方向の自己位置推定に着目する
カメラ画像に基づく自己位置推定
円形のランドマークの認識による自己位置推定手法
 カメラ搭載型バルーンロボットシステムの開発とPD制御による位置制御の実現(04,角田)


 高度の推定              カメラ座標系

高度の変化によるカメラ画像中の
円の直径の変化から推定



 水平方向の座標推定
複数の円の中心とヘリコプタの
位置関係により推定可能
(本研究では一つの円のみによ
る高度の推定に限定)
ランドマークの認識アルゴリズム(1/2)
①閾値の設定
 事前調査で撮影しておいた画像からランドマークを表すピクセルのRGB濃度
 を調査し、円以外の物体を認識しないように閾値の上限値と下限値を設定

                         下限値   上限値
                     R     160   255
                     G      45   130
                     B      60   155

②円の内部点認識
5×5ピクセルの領域全てで閾値内に収まる円の内部点を求める
→1ピクセルごとに求めた場合、ランドマーク以外の点認識してしまう可能性がある
ランドマークの認識アルゴリズム(2/2)
③エッジ点検出
 ②で求められた円の内部点からマスクを生成し、抽出した画像をSobel
 フィルタにかけてエッジ点を検出する



④中心座標と直径の算出
 ③で求めたエッジ点から3点をランダムに選び,円の方程式に基づいて
  円の中心座標(xc,yc)と円の直径 d [pixel]を求める。
                       (X1,Y1)    d




                                           (X3,Y3)

                        (X2,Y2)       (xc,yc)
自己位置の算出
画像から得られた円の中心座標と直径から着陸地点を原点とした座標を算出

   X軸、Y軸方向                                Z軸方向
  円の中心座標(xc,yc)         事前にヘリコプタの高度h [cm]における
 円の実直径:20[cm]           画像中の円の直径d [pixel]を調査
 画像における直径:d [pixel]
      20               h [cm] d [pixel]
   l ≒ [cm / pixel ]        30
                            40
                                    235
                                    172    目標地点までの距離
      d                     50      140
                            60      118
                            70      102
                            80       90
                            90       81    近似式で表す
                           100       73
 着陸点を原点としたときの              110       65          7972
 現在地の座標                    125
                           150
                                     58
                                     48
                                           h≒     1.0245
                                                          [cm]
                                                d
   x  ( xc・l )           175
                           200
                                     40
                                     36
                           230       33
   y  ( yc・l )
検証実験1
カメラを固定した場合の測位精度の検証


         カメラ




                                   水準器




                Z軸   44cmで固定

               X軸              撮影された画像
                     Y軸
                          ランドマーク
検証実験1 実験結果

         測位アルゴリズム中のランダムネスの影響の検証


 1つの画像から独立に100回測位した結果の分布




                           Z軸[cm]
Y軸[cm]




                                    5cm




             X軸[cm]
自律ヘリコプタのシステム構成
検証実験2:ヘリコプタ実機にカメラを搭載し検証

  RCヘリコプタ                小型カメラ             動画ファイル




                          Microsoft
 ・Innovator 重量 700 [g]    LifeCam Show   測位アルゴリズム

                                         測位精度を検証

                           プロポ
  人の制御で
 ヘリコプタを操作
実験2結果
        (cm)




                               2       4                6
                                                 (s)

                                                       200
                   <<実験環境>>



               C                                       100

                                   h
                   100

                         250               250         0
考察
 円形のランドマークを用いて高度の推定が実現できることを
  確認した
 下記の例のような、ランドマークが画像から外れたり、小さく
  ぶれている画像が含まれていても,推定値が計算不能にな
  ることは無かった




  検証実験2において、画面から   検証実験2において、最も高度が
  ランドマークが外れている例    高くなったときの画像
結論
 円形ランドマークを用いた測位アルゴリズムを実装し、実機のヘリコプタ
  を用いて得られた画像による高度の測位実験を行った
 その結果、現時点におけるヘリコプタの振動や加速による画像のぶれや
  ボケが含まれている場合でも測位可能であることが明らかになった



今後の予定
 測位精度の定量的な評価を行い、着陸制御に向けた知見を得る
 着陸地の認識を実現し、具体的な着陸制御について検討を行う

More Related Content

PDF
水平線検出による船体動揺映像の安定化スライド
PDF
水平線検出による船体動揺映像の安定化論文
PPTX
CG2013 08
PPTX
CG2013 09
PDF
CEDEC2015 サブディビジョンサーフェスの すべてがわかる
PDF
プレゼン資料
PPTX
CG2013 11
PDF
Stochastic Process Overview (hypothesis)
水平線検出による船体動揺映像の安定化スライド
水平線検出による船体動揺映像の安定化論文
CG2013 08
CG2013 09
CEDEC2015 サブディビジョンサーフェスの すべてがわかる
プレゼン資料
CG2013 11
Stochastic Process Overview (hypothesis)

Similar to Kimura b (20)

PDF
学生科学賞2020_自律走行システムの考案
PDF
Umemoto m
PPTX
Bachelor Presentation
PPTX
RAPiD
PDF
SSII2018TS: 3D物体検出とロボットビジョンへの応用
PPT
3D cybercode wiss1996
PDF
大気球シンポジウム111006 工学1
PDF
2016.04.27
PDF
20090924 姿勢推定と回転行列
PDF
Master Thesis
PPTX
Structured Light 技術俯瞰
PDF
Ppt umemoto g
PDF
ハイブリッドロケットエンジンによる多段式打ち上げ機
PDF
3D映像のための自動色補正スライド
PPT
D論公聴会資料
PDF
DP2-Bsw計測(Dp25用)
PDF
Shogo Yamazaki Bachelor Thesis
PPTX
データ駆動型実世界計測におけるセンサ配置とデータ収集を支援するシステムの開発(EC2019)
PDF
Trend of 3D object detections
PPTX
Miyoshi Bachelor Thesis
学生科学賞2020_自律走行システムの考案
Umemoto m
Bachelor Presentation
RAPiD
SSII2018TS: 3D物体検出とロボットビジョンへの応用
3D cybercode wiss1996
大気球シンポジウム111006 工学1
2016.04.27
20090924 姿勢推定と回転行列
Master Thesis
Structured Light 技術俯瞰
Ppt umemoto g
ハイブリッドロケットエンジンによる多段式打ち上げ機
3D映像のための自動色補正スライド
D論公聴会資料
DP2-Bsw計測(Dp25用)
Shogo Yamazaki Bachelor Thesis
データ駆動型実世界計測におけるセンサ配置とデータ収集を支援するシステムの開発(EC2019)
Trend of 3D object detections
Miyoshi Bachelor Thesis
Ad

More from harmonylab (20)

PDF
【卒業論文】LLMを用いたMulti-Agent-Debateにおける反論の効果に関する研究
PDF
【卒業論文】深層学習によるログ異常検知モデルを用いたサイバー攻撃検知に関する研究
PDF
【卒業論文】LLMを用いたエージェントの相互作用による俳句の生成と評価に関する研究
PPTX
【修士論文】帝国議会および国会議事速記録における可能表現の長期的変遷に関する研究
PPTX
【修士論文】競輪における注目レース選定とLLMを用いたレース紹介記事生成に関する研究
PDF
【卒業論文】ステレオカメラによる車両制御における深層学習の適用に関する研究(A Study on Application of Deep Learning...
PDF
A Study on the Method for Generating Deformed Route Maps for Supporting Detou...
PPTX
【修士論文】LLMを用いた俳句推敲と批評文生成に関する研究
PDF
【修士論文】視覚言語モデルを用いた衣服画像ペアの比較文章生成に関する研究(A Study on the Generation of Comparative...
PPTX
【DLゼミ】Generative Image Dynamics, CVPR2024
PDF
From Pretraining Data to Language Models to Downstream Tasks: Tracking the Tr...
PDF
Generating Automatic Feedback on UI Mockups with Large Language Models
PDF
【DLゼミ】XFeat: Accelerated Features for Lightweight Image Matching
PPTX
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
PPTX
【修士論文】経路探索のための媒介中心性に基づく道路ネットワーク階層化手法に関する研究
PPTX
A Study on Decision Support System for Snow Removal Dispatch using Road Surfa...
PPTX
【卒業論文】印象タグを用いた衣服画像生成システムに関する研究
PPTX
【卒業論文】大規模言語モデルを用いたマニュアル文章修正手法に関する研究
PPTX
DLゼミ:Primitive Generation and Semantic-related Alignment for Universal Zero-S...
PPTX
DLゼミ: MobileOne: An Improved One millisecond Mobile Backbone
【卒業論文】LLMを用いたMulti-Agent-Debateにおける反論の効果に関する研究
【卒業論文】深層学習によるログ異常検知モデルを用いたサイバー攻撃検知に関する研究
【卒業論文】LLMを用いたエージェントの相互作用による俳句の生成と評価に関する研究
【修士論文】帝国議会および国会議事速記録における可能表現の長期的変遷に関する研究
【修士論文】競輪における注目レース選定とLLMを用いたレース紹介記事生成に関する研究
【卒業論文】ステレオカメラによる車両制御における深層学習の適用に関する研究(A Study on Application of Deep Learning...
A Study on the Method for Generating Deformed Route Maps for Supporting Detou...
【修士論文】LLMを用いた俳句推敲と批評文生成に関する研究
【修士論文】視覚言語モデルを用いた衣服画像ペアの比較文章生成に関する研究(A Study on the Generation of Comparative...
【DLゼミ】Generative Image Dynamics, CVPR2024
From Pretraining Data to Language Models to Downstream Tasks: Tracking the Tr...
Generating Automatic Feedback on UI Mockups with Large Language Models
【DLゼミ】XFeat: Accelerated Features for Lightweight Image Matching
【修士論文】代替出勤者の選定業務における依頼順決定方法に関する研究   千坂知也
【修士論文】経路探索のための媒介中心性に基づく道路ネットワーク階層化手法に関する研究
A Study on Decision Support System for Snow Removal Dispatch using Road Surfa...
【卒業論文】印象タグを用いた衣服画像生成システムに関する研究
【卒業論文】大規模言語モデルを用いたマニュアル文章修正手法に関する研究
DLゼミ:Primitive Generation and Semantic-related Alignment for Universal Zero-S...
DLゼミ: MobileOne: An Improved One millisecond Mobile Backbone
Ad

Kimura b