Come funziona la tecnologia di tracciamento delle mani di Oculus Quest


Gli Oculus Quest (sia l'originale che secondo modello ) hanno una storia interessante di funzionalità aggiunte molto tempo dopo che l'hardware è uscito in circolazione. Il più famoso di questi è Oculus Link, che trasforma effettivamente Quest in un Oculus Rift. Questa funzionalità ha avuto un tale successo che Oculus ha deciso di interrompere tutti i loro auricolari tranne il Quest.

Il monitoraggio delle mani non ha ottenuto il successo ottenuto con Oculus Link, ma è comunque una funzionalità straordinaria con un grande potenziale. Con il tracciamento manuale non hai affatto bisogno di controller. Le tue mani vengono digitalizzate nel mondo VR!

Se hai un Quest o stai pensando di acquistarne uno, vale la pena sapere come funziona il tracciamento delle mani e cosa può apportare all'esperienza VR.

Come Quest segue il mondo

Oculus Quest utilizza un innovativo approccio al tracciamento del movimento che è comunemente indicato come tracciamento "dentro-fuori", che è molto diverso dal modo in cui ha funzionato il tracciamento del movimento in passato.

Quando le prime cuffie di nuova generazione furono rilasciate a metà degli anni 2010, utilizzavano una o più videocamere di localizzazione esterne. Le speciali luci di rilevamento del movimento sulle cuffie indicavano alla telecamera esattamente dove si trovavano le cuffie rispetto ad essa. Con un po 'di matematica intelligente, i dati potrebbero quindi essere convertiti in un tracciamento del movimento molto accurato nello spazio 3D. È così che le cuffie VR premium offrono "sei gradi di libertà", noti anche come 6DoF.

Quest sposta la videocamera sensore sull'auricolare stesso, in questo caso posizionandoli in punti strategici del dispositivo. Altri auricolari possono utilizzare ancora più fotocamere per migliorare la precisione. Queste quattro telecamere consentono alla Quest di guardare il mondo reale intorno a te e determinare qual è la tua posizione all'interno di quello spazio.

Questo è ciò che consente a Quest di essere autonomo e portatile. È anche la funzione che consente di tracciare le mani con Oculus in primo luogo ..

I controller touch standard di Oculus

Per capire cosa rende il tracciamento delle mani di Oculus così impressionante , dobbiamo iniziare con i controller fisici piuttosto banali forniti con Oculus Quest. Ognuno è completamente tracciato dal movimento da sensori interni e speciali indicatori di tracciamento del movimento che indicano alle telecamere di bordo di Quest dove sono i controller rispetto alle cuffie.

Quando tieni in mano i controller touch in VR, loro " tracciato con straordinaria precisione. Utilizzando l'impugnatura e i pulsanti di attivazione sul controller, il software VR può creare un'esperienza convincente di afferrare e manipolare oggetti. Questo è usato con grande effetto in giochi come Half-Life Alyx e La salita, dove gli oggetti avvincenti nel mondo VR sono una parte centrale del gioco.

Anche i controller touch offrono un feedback tattile grazie a dispositivi chiamati "attuatori lineari", che possono creare sensazioni fisiche di urtare cose, vibrazioni e altre sensazioni tattili. Le levette e i pulsanti offrono anche un modo familiare per spostarsi in uno spazio VR quando non puoi fisicamente muoverti nel tuo spazio reale.

Lo svantaggio principale di questo rispetto al tracciamento manuale è che hai degli hook per le mani. Puoi eseguire semplici movimenti di pizzicamento con le tue mani virtuali, ma questo è il limite. Non sembra una limitazione importante quando i giochi sono progettati attorno ai controller, ma il tracciamento delle mani apre uno spettro di nuove possibilità in VR.

Cosa fa Oculus Hand-Tracking

Quando il tracciamento delle mani è abilitato, vedrai una rappresentazione accurata delle tue mani reali nel mondo VR. Ogni movimento delle dita o del polso si rifletterà nei loro doppelganger virtuali.

Hand Tracking non è più una funzione beta di Quest. Ora è integrato nel sistema operativo e in molte applicazioni Quest di prima parte. Il primo grande vantaggio qui è che se vuoi semplicemente mettere su Quest e guardare un film in VR o navigare nell'app store, non devi passare attraverso lo sforzo di legare i controller touch. Usando solo le tue mani, puoi accedere ai menu di sistema e navigare con facilità.

Ora che il monitoraggio delle mani è una funzionalità ufficiale di Quest, gli sviluppatori di app di terze parti possono aggiungerlo alle loro app. Esistono già numerose app che fanno un uso eccellente della funzione di tracciamento manuale di Oculus, ma siamo sicuri che gli sviluppatori troveranno molti modi più interessanti in cui il tracciamento manuale diretto può trasformare l'esperienza VR

Come Oculus Hand-tracking funziona

I risultati dell'hand-tracking sono piuttosto sorprendenti, ma come funziona effettivamente? Ovviamente Oculus non pubblicherà i dettagli esatti della loro soluzione proprietaria, ma conosciamo le tecnologie e i principi coinvolti.

Innanzitutto, le telecamere di bordo sono essenziali per far funzionare il monitoraggio manuale. Non solo forniscono informazioni stereoscopiche sulla profondità, ma anche dati visivi per l'elaborazione mediante visione artificiale. Cos'è la visione artificiale? È un ramo di intelligenza artificiale, in particolare un campo noto come apprendimento automatico. È la stessa tecnologia che consente all'app fotocamera del telefono di identificare rapidamente i volti in una foto.

Essenzialmente, il software deve imparare cosa nei dati di immagine forniti dalla fotocamera è una mano e cosa non lo è. Ciò è stato probabilmente fatto mostrando al software migliaia e migliaia di mani in ambienti diversi finché non è stato possibile trovare in modo affidabile un modo rapido ed efficace per distinguerli da tutto il resto nella tua stanza.

Una volta che il software può creare modelli virtuali accurati e in tempo reale delle tue mani, gli sviluppatori di app possono usarli per qualsiasi cosa riescano a pensare. Ora puoi manipolare con precisione gli oggetti in VR!

Esperienze tracciate a mano che vale la pena provare

Se possiedi un Oculus Quest puoi provare la funzione di tracciamento delle mani di Oculus senza doverne acquistare particolare app. Come accennato in precedenza, funziona nell'ambiente Quest principale e in alcune app di prima parte. Quando si tratta di esperienze di terze parti, ce ne sono alcune che vale la pena evidenziare.

La linea è un'esperienza narrativa da $ 4,99 che funge anche da demo tecnica perfetta per il monitoraggio delle mani. Racconta la storia di una città modello in scala che funziona a orologeria e binari.

Il nostro eroe Pedro è innamorato di Rosa, ma non può sfuggire al suo destino. Finché un giorno non accadrà qualcosa di nuovo. Interagisci con il loro mondo in scala usando la tua mano per girare manopole, tirare leve e giocherellare con tutto ciò che puoi. È un'esperienza lineare e breve, ma può mostrare il monitoraggio delle mani in un modo molto divertente in circa 15 minuti.

Valzer dello stregone ($ 9,99) è un'altra eccellente vetrina della tecnologia. Puoi usare le mani per lanciare incantesimi e interagire con praticamente tutto nel mondo VR che ti circonda. Se hai mai desiderato vivere la fantasia di essere un mago in grado di sparare fulmini dalle loro mani, questo è il gioco che fa per te!

Cosa ne pensi dell'hand tracking in Quest? L'hai provato? Quali giochi consiglieresti? Condividi le tue opinioni nei commenti.

Post correlati:


11.03.2021