Maurizio Moriconi - ARKit: Augmented Reality made simple - Codemotion Milan 2017
0 likes345 views
Il documento descrive ARKit, un framework di realtà aumentata per dispositivi iOS, evidenziando i requisiti hardware e le funzionalità di tracciamento, rilevamento dei piani e stima della luce. Viene presentata la struttura delle sessioni AR, inclusi gli ancoraggi e il rendering, e sono discussi potenziali problemi di estrazione delle informazioni dalla scena. In conclusione, il documento include riferimenti a plugin come Unity per l'integrazione con ARKit.
Maurizio Moriconi - ARKit: Augmented Reality made simple - Codemotion Milan 2017
- 1. ARKit: Augmented Reality made simple Maurizio Moriconi CODEMOTION MILAN - SPECIAL EDITION 10 – 11 NOVEMBER 2017
- 2. Chi Sono? CTO, Mobile Developer Community Co-FounderMaurizio Moriconi bugman
- 3. Augmented Reality (AR) Virtual Reality + Reality Reality Uso della camera o di occhiali per “aumentare” la realtà con oggetti 3D virtuali
- 7. ARKit • Framework per mobile • E’ ad ALTO livello! • Funziona solo su iOS!!!
- 8. Requisiti ARKit • iPhone SE • iPhone 6s • iPhone 6s Plus • iPhone 7 • iPhone 7 Plus • iPhone 8 • iPhone 8 Plus • iPhone X • iPad 2017 • iPad Pro 9.7 pollici • iPad Pro 10.5 pollici • iPad Pro 12.9 pollici
- 10. Tracking • Tracciamento in real time della posizione del dispositivo nel mondo reale! • Visual-inertial odometry (VIO) • Nessun setup “esterno” (no marker)
- 11. Scene understanding • Plane detection • Light estimation • Hit-testing
- 13. Hello ARKit! A simple demo project!
- 14. ARSession Framework basato su sessione, che gira a 60 frames al secondo! La sessione può essere lanciata, messa in pausa, reimpostata: • ARSessionObserver per gestire i cambi di stato della sessione • ARSessionDelegate per ricevere i frames catturati e aggiornamenti sugli anchor
- 15. ARConfiguration Tre configurazioni: • AROrientationTrackingConfiguration • ARWorldTrackingConfiguration • ARFaceTrackingConfiguration Abilita anche la light estimation, e il plane detection
- 16. ARFrame La sessione cattura dei frame che contengono • l’immagine catturata • informazioni sul tracking • informazioni sulla scena: tracking points e condizioni di luce
- 17. ARAnchor Un anchor è punto posizionato ed orientato nel mondo reale. ARKit si occupa di mantenere fissa la posizione e l’orientamento di un anchor se l’utente muove la camera. E’ necessario aggiungere gli anchor nella ARSession.
- 19. Feature Points Punti estratti dall’analisi dei frames! Possibili problematiche nell’estrazione: • Poca luce • Poche “texture” • Movimenti veloci
- 20. Plane detection Da un insieme di feature points è possibile ricostruire un piano. Per ora solo orizzontale :( Se è abilitato il planeDetection in automatico vengono aggiunti degli ARPlaneAnchor! E’ possibile fare plane merging!
- 21. Hit Testing Intercetta un punto nella scena reale Utilizza le informazioni della scena I risultati sono ordinati per distanza (dal più “vicino” al più “lontano”) Ci sono diversi tipi di Hit-test
- 22. Light estimation Si attiva dalla configurazione (lightEstimationEnabled) E’ possibile riconoscere: • ambientIntensity (1000 neutrale) • ambientColorTemperature (6500 luce “bianca”)
- 23. Light estimation
- 24. Demo Time Show me the code!
- 27. ARKit
- 28. Back to the ’80…