MOSCARDO - Design del front end di realtà aumentata, navigazione 3D e web

Croce T., Moroni D., Tampucci M.

augmented reality  uav  web  gestural interfaces  3d recostruction  SLAM  Structural Health Monitoring 

Il presente deliverable, relativo all'Attività 3.2 di progetto, descrive: - La progettazione di tecniche di realtà aumentata per la visualizzazione interattiva di stream video, dati in real-time dai sensori e modelli storici - La progettazione di interfacce per il controllo attivo dell'ispezione e la navigazione - La progettazione del Front-end Web L'obiettivo dell'attività 3.2 "Progettazione del Front End di Realtà Aumentata, Navigazione 3D e Web" è quello di progettare, studiando al tempo stesso le tecnologie a disposizione, quanto verrà implementato nelle fasi successive del progetto relativamente alle interfacce utente del Sistema Moscardo. In particolare sono studiate tecniche e strategie per la realizzazione di un Front end di realtà aumentata che sia in grado di arricchire le immagini acquisite da un drone con i valori rilevati dai sensori al momento inquadrati. Sono state analizzate quindi tecniche di SLAM (Simultaneous Localization and Mapping) per seguire e riconoscere gli spostamenti compiuti dal drone e determinare quindi, conoscendo la posizione dei sensori, quali sensori sono attualmente inquadrati. In un contesto di realtà aumentata, l'operatore sarà quindi in grado di visualizzare la ripresa video effettuata dal drone con annesse le misure compiute dai sensori. Il Front end sarà quindi in grado di mostrare ulteriori informazioni quali dati storici, grafici e ultime anomalie registrate selezionandoli da un apposito menu. Sono stati inoltre studiati i più moderni engine 3D che verranno impiegati per la realizzazione di un Front end di navigazione 3D che permetta l'esplorazione della struttura monitorata e l'accesso, in remoto, ai sensori e alle misurazioni compiute. Infine sono state progettate le applicazioni Web per la gestione e manutenzione delle reti dei sensori che comporranno il Front end Web attraverso il quale sarà possibile gestire ed interagire con i dati raccolti. Analogamente all'attività svolta, in questo deliverable, verranno analizzati i vari Front end fornendo per ciascuno i componenti coinvolti per la sua realizzazione e i possibili casi di utilizzo. Saranno poi descritti i software, le tecniche ed i dispositivi analizzati durante l'attività di studio e per ciascuno di essi, sarà presentata la soluzione scelta per l'implementazione dei Front end all'interno del progetto Moscardo.

Source: Project report, MOSCARDO, Deliverable D3.2, 2018