Come funziona RealSpace 3D, tech acquisita da Oculus

Dopo i primi due anni di Oculus VR passati a tentare di risolvere i difficili dilemmi inerenti al display e al tracciamento a bassa latenza, durante l’Oculus Connect, l’attenzione si era spostata un po’ anche sui problemi audio.

Conseguentemente al rilascio del prototipo Crescent Bay il primo passo per il miglioramento dell’audio è consistito nell’integrazione di cuffie sui lati del visore, per poi annunciare la licenza di una tecnologia 3D di elaborazione spaziale dell’audio chiamata RealSpace 3D della Visisonics.

L’audio è assolutamente fondamentale per dare l’effetto impatto in quasi tutte le forme di intrattenimento. Sia i film che i giochi si basano molto sul suono per raggiungere il nostro subconscio e migliorare, trasformare, o sovvertire le sensazioni date dalle immagini.

Imitare l’esperienza del suono nella vita quotidiana e cercare di applicare tale esperienza, con un alto livello di realismo, nell’intrattenimento è stata una sfida che ha da tempo preso il posto delle questioni scatenate dalla necessità di miglioramento della grafica e, nel corso degli anni, si sono evolute innumerevoli tecnologie che lavorano in tal senso.

Il nuovo prototipo Crescent Bay, col quale sono state sfoggiate le cuffie integrate ad alta qualità, non era l’unico obiettivo del team di Oculus VR, fa parte della pipeline audio, dunque, anche RealSpace 3D Audio.

Sul palco del Connect, il CEO Brendan Iribe Oculus ha detto:

Stiamo lavorando sull’audio con la stessa tenacia con cui lavoriamo sul visore. Abbiamo un intero team dedicato a questo aspetto. È parte essenziale di questa iniziativa la concessione in licenza della tecnologia audio da parte di RealSpace 3D, sistema audio ad alta fedeltà VR sviluppatosi in 10 anni.

Visisonics, ideatrice di RealSpace3D, offre una vasta gamma di soluzioni per la cattura, la miscelazione e la lavorazione delle fasi sonore 3D, tra cui una specie di “camera panoramica audio’”,  costituita da una sfera da 8 pollici con 64 microfoni e 5 telecamere incorporati per l’acquisizione di video panoramici e audio spaziali da combinare tra loro.

La società ha stretti legami con l’Università del Maryland, istituto frequentato dal CEO di Oculus, Brendan Iribe, il quale ha recentemente donato 31 milioni dollari all’ateneo per finanziare delle borse di studio e l’espansione delle relative strutture informatiche.

La demo standard è una dimostrazione abbastanza semplice che utilizza una visuale in prima persona e impiega degli effetti sonori e della musica prima suonata senza e poi con l’elaborazione da parte di RealSpace 3D.

Niente di speciale, forse, ma quando ci si sposta la testa, si ha la sensazione che il suono degli oggetti visualizzati sia disposto nello spazio 3D esattamente come previsto, anche nel caso in cui si trovano dietro di voi. Gli esiti più sbalorditivi, comunque, sono dati dall’effetto di audio verticale, quando un suono si trova sopra la nostra testa, come nel caso di un velivolo, ad esempio, ci si sente spinti a guardare verso l’alto e, ancora, se ci si trova nell’ambiente virtuale in prossimità della fonte del suono, il progressivo aumento del volume rende il tutto ancora più realistico.