点群を使いこなせ！ 可視化なんて当たり前、xRと点群を組み合わせたUnityの世界 【Interact , Stipple】
1 like5,783 views
デジタルツイン環境を構築する際にも使われることの多い点群。 実は、膨大なデータである "点群/PointCloud" をUnityで簡単に扱うことが可能です。 本日は、Unityを拡張した強力なツール【Interact】と【Stipple】をご紹介。 CADデータ、点群データを読み込めるのは当たり前、コードを書かなくてもすぐに使えます。 この機会にUnityの持つ可能性を広げてください！
点群を使いこなせ！ 可視化なんて当たり前、xRと点群を組み合わせたUnityの世界 【Interact , Stipple】
- 2. Developer Advocate - AEC 竹内一生 / Takeuchi Issey 自己紹介
- 3. 本日のおすすめユーザー層 • 産業向けコンテンツ、DXなどを考えている方 • インハウスで手軽に工学シミュレーションを行いたい方 • とにかく 点群を手軽に扱いたい方 • とにかく VR/AR を直ぐに試したい方 • とにかく デジタルツインだ！という方
- 4. Generative Art — Made with Unity
- 5. 点群をUnityで扱うためには Keijiro / Pcx github Visual Effect Graph 公式HP Unity Asset Store Point Cloud Viewer and Tools and more… jujunjun110 / PointCloud VR github
- 6. Unityのスペシャリスト集団 “LIGHT & SHADOWS” が提供する Unityを拡張する強力なツールたち 公式HP 公式HP 公式HP
- 8. Generative Art — Made with Unity
- 9. Interact の特徴 INTERACTは、バーチャルリアリティで 3D CAD モデルを視覚化して操作するための強力なプラットフォームです。 このソリューションは、よく知られているゲームエンジンUnity3Dに基づいています。 そのため、独自のスクリプトを開発して、独自のニーズに合わせてソリューションをカスタマイズできます。 INTERACTは、 2つのコア技術を組み合わせた製品です。 詳細 Pixyz xde XDEは、INTERACTで使用される物理エ ンジンであり、 剛体と柔軟な物体の衝突の検出だけで なく、特大の点群の視覚化などの複雑な シミュレーションを可能にします。 Pixyzは、３Dデータを軽量化・最適化 するソリューションです。 CADデータから最適化されたメッ シュを生成できる、クラス最高のテ セレーターツールです。 詳細 ※xdeはInteractに同梱 ※Pixyzは別途
- 10. Interact の特徴 • CAD/BIM ファイルのインポート (Revit、Rhinoceros、SolidWorks、CATIA、3DXML、IGES、STEP …etc) • 3D スキャン (点群) のインポート • スケール 1:1 ビジュアライゼーション (HTC Vive、Oculus Rift、HoloLens、CAVE …etc) • 組み込み物理エンジン(マルチボディダイナミクス、衝突検出、摩擦 …etc) • 自然な相互作用(直接自分の手で3Dオブジェクトを操作) • マルチユーザーおよびマルチコラボレーション • リアルタイム人間工学的（エルゴノミクス）評価 生産シナリオの共同シミュレーション 点群の視覚化と相互作用 エルゴノミクス評価
- 12. SUPPORTED FORMATS CAD / 3D formats : .3dm .3ds .3dxml .asm .CATPart .CATProduct .CATShape .cgr .csb .dae .dwg .dxf .fbx .ifc .iges .igs .jt .neu .neu* .obj .p_t .par .pdf .plmxml .prc .prt .prt* .psm .pwd .sab .sat .skp .sldasm .sldprt .step .stepz .stl .stp .u3d .vda .vrml .wrl .wire .x_b .x_t .xas .xas* .xmt .xmt_bin .xmt_txt .xpr .xpr* Pointcloud formats ※Pixyzは要らない CAD Design Softwares examples .e57 .pts .ptx .las .db Catia SolidWorks Creo SolidEdge ACIS SAT VDA-FS Rhino VRML COLLADA Parasolid Sketchup 3dsmax AutoCAD モデルデータの読み込みは、Pixyzを推奨
- 14. IMPORTING CAD MODELS 3D モデルの読み込み時に細かく設定をすることが可能です。 LODなどの設定でモデルを軽くしたり、シミュレーションのパフォーマンスを調整します。 ドキュメント
- 15. IMPORTING CAD MODELS Level of Details (LOD) LOD（最適化手法）を使用すると、カメラからの距離が長くなるにつれて、オブジェクトに対してレン ダリングされる三角形の数を減らすことができます。 LOD は、ハードウェアの負荷を軽減し、レンダリングパフォーマンスを向上させます。 インポート ウィンドウでは、各 LOD を個別に設定できます。 ドキュメント LOD0 = Very-High preset 100% to 70% LOD1 = Poor preset 70% to 20% Culled (Hidden) Under 7%
- 16. IMPORTING CAD MODELS Cleaning CAD models パフォーマンスの問題が発生した場合(リフレッシュ レートが低い)、3D モデルに含まれるパーツが 多すぎる可能性があります。 小さな部品(例えばネジ)でさえ、かなりの数があるとパフォーマンスに大きな影響を与える可能性 があります。 2種類の方法で、CADモデルをきれいにすることが出来ます。 ドキュメント • Merge Parts この関数は、1 つのオブジェクトに複数のメッシュを結合します。 (複数のオブジェクトを選択するには、Ctrl キーを押したままにします) Merge by color : 同じ色を共有するすべてのオブジェクトが結合されます。 Merge by name : 特定の名前タグに従ってオブジェクトをマージできます。
- 17. IMPORTING CAD MODELS Cleaning CAD models ドキュメント • Remove Parts しきい値より低い、またはより高いポリゴンの数を持つ部品を 削除することができます Ex:三角形が 1000 未満のパーツを削除する (ねじ、ボルトおよび軸受け)
- 18. Importing Point Clouds PointCloudファイルをコンピューター上のデータベース (.db) ファイルにエンコードします 。 ※ファイルの作成には、数時間かかることがあります。 プレイヤーの位置とポイント（点群数）に応じて、最も関連性の高いポイントを動的にストリーミング することが可能。 サポートされている点群ファイル形式: E57 (.e57) PTS / PTX (.pts, .ptx) LAS (.las) ドキュメント
- 19. Importing Point Clouds • Point cloud appearance : 3つの異なる視覚化モードが利用可能です(ポイント、スプラットまたは コーンとしてレンダリング) • Point budget : フレームごとに表示されるポイントの最大数。 フレーム レートの問題が発生した場合は、最大数を調整する必要があ ります。 • Point budget Mem: 視野付近のポイントのプリロードを可能にするキャッシュサイズを調整 します(シーンにポイントがポップアップするのを避けます)。 • Center Origin: 点群が見えない場合は、その原点が遠すぎる可能性があります。 Unity座標、中央に再設定することが可能。 ドキュメント
- 20. Importing Point Clouds ドキュメント INTERACT には、3D ポイント クラウドを手動で編集およびレンダリングするための基本的なツール が用意されています。 • Cropping and removing points トリミングと削除機能を提供する大きなボックスをインスタンス化します。 1 つのクラウドを選択するには、PointCloudTool のインスペクターの 「点群」 フィールドにド ラッグします。 Crop:ボックス内に含まれる点を使用して新しい点群(元の点群のサブセット)を作成します。 Original file REMOVE CROP 消去 切り取り
- 21. VR / AR Systems ドキュメント INTERACT には、各種デフォルト設定が用意されており、直ぐに体験を開始することが可能。 • 背景3種類 (ホワイトラボ、工場、都市) • デバイス類
- 23. VR Systems ドキュメント VR 機能 抜粋 ワープ移動 計測ツール キーボード 断面ツール
- 24. Xde Physics Engine ドキュメント XDE Physics Engine 正確な衝突検出などが可能になるインタラクティブな物理エンジンです。 使用例としては、アセンブリの検証、オブジェクトの操作などが挙げられます。 XDE は C++ で記述されており、最大限の効率を提供するように最適化されています。 Unity3D とは別のプロセスとして実行され、リアルな物理的な動作に従って、 シーン内のオブジェクトとの判定を画面にオーバーライドします。
- 25. Xde Physics Engine ドキュメント Joint Type 複数のモデル（リジッド ボディ）と機械的なジョイントを非常に効率的に相互接続した複雑なシーンをアニ メーション化することができます。 単なるアニメーションだけでなく、動的効果の非常に正確なシミュレーションが可能。 Fixed Joint Free Joint Hinge Joint Prismatic Joint Mapped joint Helical joint
- 26. Xde Physics Engine ドキュメント Configuring Collisions 衝突検出の設定は非常に簡単で、衝突が発生したときにオブジェクトのグループがどのように動作するかを設定するだけ。 ※XDE では、 ‘Group of objects’ を‘Layers’と呼びます。 (ex : Layerの ‘Robots’ はシーン内の Robot タイプのすべてのオブジェクトを含みます)。 衝突検出を設定する際には、 ‘Layers’ を慎重に定義することが重要です。
- 27. Xde Physics Engine ドキュメント Configuring Collisions ‘Layers’間で可能な当たり判定を定義できます。 2 つの‘Layers’(行と列) の交点をクリックすると、3 種類のインタラ クションを選択できます。 • None (empty square) : これらの2つの層の間で衝突が監視されません • Collision ( C ) : 衝突検出がアクティブになります。四角形の右側にあるチェック ボックスがオンの場合、衝突点の位置に赤い矢印が表示されます (下図を参照)。 • Interference ( I ) : 2 つのオブジェクトは互いに貫通できますが、干渉は監視されます。 四角形の右側にあるチェックボックスをオンにすると、推論が発生 した場合、オブジェクトは黄色で表示されます。(下図を参照) Ex:カ プ セ ル と 立 方 体 の 衝 突 Ex:カ プ セ ル と 立 方 体 の 干 渉
- 28. Xde Physics Engine ドキュメント Creating cable 3Dモデルを使用して、フレキシブルケーブルを生成することが可能（生成に使用した3Dモデルは非表示にする）。 ケーブルの変形を計算するには、2つの状態を設定する必要があります。 ①初期構成で、ケーブルの各ポイントの初期開始位置です。 ②ケーブルに内部応力がない位置。 ※真っ直ぐなケーブルの場合、初期位置と基準位置は同じです。
- 30. Scenarisation ドキュメント How to grab 3Dモデル（オブジェクト）を掴むことが可能 ‘Xde Asb Part’を対象となるモデルにアタッチすることで、手で持つことが可能になります。
- 31. Ergonomics ドキュメント Motion Capture and Ergonomics Viveトラッカーを使用して人間の動きを再現することが可能 ボディトラッキングやエルゴノミクス評価など、さまざまな用途に使用できます。 スーツは両腕、足およびベルトのまわりの5つの装置で構成されています。 使用する際は以下のメニューから追加
- 33. INDUSTRIAL toolbox ドキュメント INDUSTRIAL LIBRARY 一般的に使用されるプレハブコンポーネントが用意されています。 • Industrial Robots • Safety components (light curtains, safety lasers) • Production components (conveyor, operator panels) TEXTURE LIBRARY テクスチャと調整済みのマテリアルも用意されています。
- 36. Generative Art — Made with Unity
- 37. Stipple ドキュメント サポートされている点群ファイル形式: E57 (.e57) PTS / PTX (.pts, .ptx) LAS (.las) 実は ... StippleはInteractに搭載されている点群の読み込みや編集機能を継承した製品です。 ※点群の当たり判定機能はInteractのxdeによるものなので実装されてない PointCloudファイルをコンピューター上のデータベース (.db) ファイルにエンコードします 。 ※ファイルの作成には、数時間かかることがあります。 プレイヤーの位置とポイント（点群数）に応じて、最も関連性の高いポイントを動的にストリーミングすることが可能。
- 38. Compare ドキュメント
- 39. Point Cloud Cross Section ドキュメント