Submit Search
VTC on Unity の 進捗について
0 likes
819 views
R
Ryodo Tanaka
つくばチャレンジ 2020 第2回 LT 大会での発表資料です.
Technology
Read more
1 of 15
Download now
Download to read offline
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
More Related Content
PDF
5分でわかる Sensor SDK
UnityTechnologiesJapan002
PDF
tf,tf2完全理解
Koji Terada
PDF
SSII2021 [TS1] Visual SLAM ~カメラ幾何の基礎から最近の技術動向まで~
SSII
PDF
工学系大学4年生のための論文の読み方
ychtanaka
PPTX
SLAM勉強会(PTAM)
Masaya Kaneko
PDF
四脚ロボットによるつくばチャレンジへの取り組み
kiyoshiiriemon
PDF
semantic segmentation サーベイ
yohei okawa
PPTX
確率ロボティクス第二回
Ryuichi Ueda
5分でわかる Sensor SDK
UnityTechnologiesJapan002
tf,tf2完全理解
Koji Terada
SSII2021 [TS1] Visual SLAM ~カメラ幾何の基礎から最近の技術動向まで~
SSII
工学系大学4年生のための論文の読み方
ychtanaka
SLAM勉強会(PTAM)
Masaya Kaneko
四脚ロボットによるつくばチャレンジへの取り組み
kiyoshiiriemon
semantic segmentation サーベイ
yohei okawa
確率ロボティクス第二回
Ryuichi Ueda
What's hot
(20)
PDF
リンク機構を有するロボットをGazeboで動かす
tomohiro kuwano
PDF
Cvpr 2021 manydepth
Kenta Tanaka
PDF
ROS の活用による屋外の歩行者空間に適応した自律移動ロボットの開発
Yoshitaka HARA
PDF
UnityとROSの連携について
UnityTechnologiesJapan002
PDF
SSII2022 [TS2] 自律移動ロボットのためのロボットビジョン〜 オープンソースの自動運転ソフトAutowareを解説 〜
SSII
PDF
SLAM入門 第2章 SLAMの基礎
yohei okawa
PDF
Cartographer を用いた 3D SLAM
Yoshitaka HARA
PDF
論文紹介:Multimodal Learning with Transformers: A Survey
Toru Tamaki
PDF
SSII2019企画: 画像および LiDAR を用いた自動走行に関する動向
SSII
PDF
【メタサーベイ】Neural Fields
cvpaper. challenge
PPTX
確率ロボティクス第11回
Ryuichi Ueda
PDF
つながるロボット 〜分散協調ロボットの開発を加速化するROSの紹介〜
Hideki Takase
PPTX
[DL輪読会]LightTrack: A Generic Framework for Online Top-Down Human Pose Tracking
Deep Learning JP
PDF
Cartographer と Autoware を用いた自律走行
Yoshitaka HARA
PPTX
確率ロボティクス第13回
Ryuichi Ueda
PDF
【DL輪読会】A Path Towards Autonomous Machine Intelligence
Deep Learning JP
PDF
【Unity道場スペシャル 2017京都】乱数完全マスター 京都編
Unity Technologies Japan K.K.
PPTX
FPGAを用いたフルパイプラインによるバイラテラルフィルタの高速化手法
Nobuho Hashimoto
PDF
ROS を用いた自律移動ロボットのシステム構築
Yoshitaka HARA
PDF
三次元点群を取り扱うニューラルネットワークのサーベイ
Naoya Chiba
リンク機構を有するロボットをGazeboで動かす
tomohiro kuwano
Cvpr 2021 manydepth
Kenta Tanaka
ROS の活用による屋外の歩行者空間に適応した自律移動ロボットの開発
Yoshitaka HARA
UnityとROSの連携について
UnityTechnologiesJapan002
SSII2022 [TS2] 自律移動ロボットのためのロボットビジョン〜 オープンソースの自動運転ソフトAutowareを解説 〜
SSII
SLAM入門 第2章 SLAMの基礎
yohei okawa
Cartographer を用いた 3D SLAM
Yoshitaka HARA
論文紹介:Multimodal Learning with Transformers: A Survey
Toru Tamaki
SSII2019企画: 画像および LiDAR を用いた自動走行に関する動向
SSII
【メタサーベイ】Neural Fields
cvpaper. challenge
確率ロボティクス第11回
Ryuichi Ueda
つながるロボット 〜分散協調ロボットの開発を加速化するROSの紹介〜
Hideki Takase
[DL輪読会]LightTrack: A Generic Framework for Online Top-Down Human Pose Tracking
Deep Learning JP
Cartographer と Autoware を用いた自律走行
Yoshitaka HARA
確率ロボティクス第13回
Ryuichi Ueda
【DL輪読会】A Path Towards Autonomous Machine Intelligence
Deep Learning JP
【Unity道場スペシャル 2017京都】乱数完全マスター 京都編
Unity Technologies Japan K.K.
FPGAを用いたフルパイプラインによるバイラテラルフィルタの高速化手法
Nobuho Hashimoto
ROS を用いた自律移動ロボットのシステム構築
Yoshitaka HARA
三次元点群を取り扱うニューラルネットワークのサーベイ
Naoya Chiba
Ad
Similar to VTC on Unity の 進捗について
(20)
PDF
Virtual Tsukuba Challenge on Unity のアップデートについて
Ryodo Tanaka
PDF
Virtual Tsukuba Challenge on Unity について
Ryodo Tanaka
PPTX
Practical game development with Stingray
Naoji Taniguchi
PDF
IoT with Unity
Saitou Yuta
PPTX
Azure Remote Renderingを試す
Takahiro Miyaura
PDF
片岡Io tltシリーズネタ 2016/10/29
Yukihito Kataoka
PDF
Virtual Tsukuba Challenge on Unity について
UnityTechnologiesJapan002
PDF
Rsj2013 sekiyama 3
openrtm
PPTX
kintone で AIによる画像解析の活用を試してみた
Cybozucommunity
PPTX
160531 IoT LT #15 @ 日本IBM
Toshiki Tsuboi
PDF
触ってみよう! Robotics Studio -レゴマインドストームRCXを動かしてみる
asa88
PDF
NGK2018B マルチプラットフォームQtと日本Qtユーザー会の紹介
Kazuo Asano (@kazuo_asa)
PPTX
東方ゲームAIとその歴史
ide_an
PPTX
だんグラで「Mixed Reality Toolkit V2」のサンプルを動かしてみた
Takahiro Miyaura
PPTX
MRTK3を調べてみた
Takahiro Miyaura
PDF
Android & Nui & Physical Computing
Takahiro KUREBAYASHI
PPTX
「Mixed Reality Toolkit V1」のあの機能ってV2では?~ 空間マッピングとTagalong ~
Takahiro Miyaura
PDF
ロボコンの為のFusion360講座 #CAD編
電大 ヒュー研
PPTX
見える!「IoT」NefryでJenkinsのXFD作ってみた
Tone Blue
PPTX
IoTLT Kumamoto vol3
Syota Yano
Virtual Tsukuba Challenge on Unity のアップデートについて
Ryodo Tanaka
Virtual Tsukuba Challenge on Unity について
Ryodo Tanaka
Practical game development with Stingray
Naoji Taniguchi
IoT with Unity
Saitou Yuta
Azure Remote Renderingを試す
Takahiro Miyaura
片岡Io tltシリーズネタ 2016/10/29
Yukihito Kataoka
Virtual Tsukuba Challenge on Unity について
UnityTechnologiesJapan002
Rsj2013 sekiyama 3
openrtm
kintone で AIによる画像解析の活用を試してみた
Cybozucommunity
160531 IoT LT #15 @ 日本IBM
Toshiki Tsuboi
触ってみよう! Robotics Studio -レゴマインドストームRCXを動かしてみる
asa88
NGK2018B マルチプラットフォームQtと日本Qtユーザー会の紹介
Kazuo Asano (@kazuo_asa)
東方ゲームAIとその歴史
ide_an
だんグラで「Mixed Reality Toolkit V2」のサンプルを動かしてみた
Takahiro Miyaura
MRTK3を調べてみた
Takahiro Miyaura
Android & Nui & Physical Computing
Takahiro KUREBAYASHI
「Mixed Reality Toolkit V1」のあの機能ってV2では?~ 空間マッピングとTagalong ~
Takahiro Miyaura
ロボコンの為のFusion360講座 #CAD編
電大 ヒュー研
見える!「IoT」NefryでJenkinsのXFD作ってみた
Tone Blue
IoTLT Kumamoto vol3
Syota Yano
Ad
More from Ryodo Tanaka
(7)
PDF
WRS トンネルチャレンジ 現地からリポートしてみる
Ryodo Tanaka
PDF
Constraint Motion Planning について
Ryodo Tanaka
PDF
激安犬ロボを買って壊して直せてたらいいなぁ...
Ryodo Tanaka
PDF
小ネタ:Android上でroscoreを走らせてみた
Ryodo Tanaka
PDF
choreonoid_ros_control を実装した話
Ryodo Tanaka
PPTX
roslaunch test + industrial_ci
Ryodo Tanaka
PDF
Moveitを使ったアプリケーションの紹介
Ryodo Tanaka
WRS トンネルチャレンジ 現地からリポートしてみる
Ryodo Tanaka
Constraint Motion Planning について
Ryodo Tanaka
激安犬ロボを買って壊して直せてたらいいなぁ...
Ryodo Tanaka
小ネタ:Android上でroscoreを走らせてみた
Ryodo Tanaka
choreonoid_ros_control を実装した話
Ryodo Tanaka
roslaunch test + industrial_ci
Ryodo Tanaka
Moveitを使ったアプリケーションの紹介
Ryodo Tanaka
VTC on Unity の 進捗について
1.
TNK 田中 良道 桑野 僚大 Virtual
Tsukuba Challenge on Unity 2020.11.28
2.
1自己紹介 田中 良道(Ryodo Tanaka) •
所属:筑波大学(学生) • 研究:Multi Contact Motion Planning • 趣味:クラリネット演奏 • Twitter:@Ryodo Tanaka 桑野 僚大(Tomohiro Kuwano) • 所属:某自動車メーカー • 趣味:電子工作,プログラミング … etc • Twitter:@calm0815 ↑最近買った犬ロボ ← 高2の頃の様子 現在はここから +20kg...
3.
2vtc_unity の概要 Unity Rviz,rqt
4.
3パッケージ構成 vtc_unity 統合パッケージ 環境・センサ・ロボット 自由に組み合わせ可能!(※ROS1 の利用が前提) unit04_unity ロボットパッケージ • ROS#
を利用 • URDFから作成可能 sensors_unity センサパッケージ • 3D LiDAR • RGB Camera • IMU (6 Axis) vtc_world_unity 環境パッケージ • 点群から生成 • つくば市役所周辺 • 公園はUpdate中!
5.
4環境データの構築 Point Cloud Data 約1,400万点 by
防衛大学 冨沢研究室(Stencil 2.0) Blender (≥2.8) メッシュ化 less than 10,000ポリゴン モデル化 オブジェクト配置
6.
5ロボットモデルの構築 • xml記法のファイル • あらゆるプログラムが参照 URDF (Unified
Robot Description Format) • テクスチャ • 衝突モデル • Joint設定 は自動生成 • 質量情報 • センサモデル は手動生成 [1] https://github.com/siemens/ros-sharp/wiki/User_App_ROS_TransferURDFFromROS API[1]
7.
6センサモデルの構築 3D LiDAR [2] https://github.com/Field-Robotics-Japan/sensors_unit 6Axis
IMU RGB Camera RGBD Camera sensors_unity[2] [3] Inamura, T. and Mizuchi, Y., 2020. SIGVerse: A cloud-based VR platform for research on social and embodied human- robot interaction. arXiv preprint arXiv:2005.00825. Inamura, T et. at. al [3] Figure.3 より引用 2D LiDAR・Wheel Odometry は近日実装予定
8.
7シミュレータ構築の難所(環境づくり) 木等の複雑形状の計測はどうする? そもそも木の除去も大変! 上:点群,下:メッシュモデル 同じ木のモデルでも 計測したものは平たいメッシュを観測している…
9.
8シミュレータ構築の難所(環境づくり) そもそも木の除去も大変! 上:点群,下:メッシュモデル 同じ木のモデルでも 計測したものは平たいメッシュを観測している… 木等の複雑形状の計測はどうする?
10.
9シミュレータ構築の難所(環境づくり) 三角メッシュ化(再近傍)点群 メッシュの単純化 単純化(手動)した領域 まだ単純化 していない領域 大事な処理のほとんどが手動…とても大変…orz
11.
10シミュレータ構築の難所(通信) Serialize/Deserialize Publish/Subscribe rosbridge_server websocket HTTP Serialize / Deserialize でJSON(Text)に変換… 通信速度が下がる原因に
12.
11 Serialize/Deserialize Publish/Subscribe rosbridge_server websocket HTTP 通常のトピック通信と同じ Unityが起動する すべてのOSで起動可能!! 複数PC間での通信が可能 シミュレータ構築の難所(通信)
13.
12シミュレータ構築の難所(LiDAR) • 通信速度が遅い(前述) • 葉っぱなどのモデルが単調 •
レーザー強度モデル無し VTC (UE4) by fuRo VTC on Unity • 通信速度が速い(並列処理) • レーザー強度モデル有り[4] [4] 吉田 智章, 原 祥尭, “移動ロボットシミュレータにおける 3D Lidar の受光強度シ ミュレーション”, ROBOMECH 2020, 2020. 平面プレート の形状を観測…
14.
13Update(予定) • 公園エリアの作りこみ • 各種Objectの配置 vtc_world_unity(環境) sensors_unity(センサ) unit04_unity(ロボット) •
レーザー強度(LiDAR)の実装 • ノイズの付加 • GPSセンサの追加 • 通信規格の修正・軽量化 • URDFからのモデル作成方法マニュアルの追加 その他 • NPCの追加 • オンラインNPC・ロボットの追加 更新内容は Twitterにて公開! @RyodoTanaka
15.
14 https://github.com/Field-Robotics-Japan/vtc_world_unity vtc_world_unity(環境) sensors_unity(センサ) https://github.com/Field-Robotics-Japan/sensors_unity unit04_unity(ロボット) https://github.com/Field-Robotics-Japan/unit04_unity vtc_unity(統合) https://github.com/Field-Robotics-Japan/vtc_unity お気軽にContributeお願いします! 公開場所(LICENSE : Appache
2.0)
Download