Jak funguje technologie sledování rukou Oculus Quest


Oculus Quest (původní i druhý model ) mají zajímavou historii funkcí, které se přidávají dlouho poté, co je hardware venku. Nejznámější z nich je Oculus Link, která z Questu efektivně udělá Oculus Rift. Tato funkce byla tak úspěšná, že se Oculus rozhodl ukončit všechny své náhlavní soupravy kromě Quest.

Sledování rukou neudělalo takovou splash jako Oculus Link, ale stále je to úžasná funkce s velkým potenciálem. Díky ručnímu sledování ovladače vůbec nepotřebujete. Vaše vlastní ruce jsou digitalizovány do světa VR!

Pokud máte Quest nebo uvažujete o koupi jednoho, stojí za to vědět, jak funguje sledování rukou a co může přinést zážitku z VR.

Jak Quest sleduje svět

Oculus Quest využívá inovativní přístup ke sledování pohybu, který se běžně označuje jako sledování „naruby“, což se velmi liší od toho, jak sledování pohybu fungovalo v minulosti.

Když byly v polovině roku 2010 vydány první náhlavní soupravy nové generace, využily jednu nebo více externích sledovacích kamer. Speciální světla pro sledování pohybu na náhlavní soupravě řekla fotoaparátu přesně, kde se náhlavní souprava nachází. S nějakou chytrou matematikou by tato data mohla být převedena na velmi přesné sledování pohybu ve 3D prostoru. Takto prémiové náhlavní soupravy VR nabízejí „šest stupňů volnosti“, známých také jako 6DoF.

Quest pohybuje kamerou senzor na samotnou náhlavní soupravu, v tomto případě je umístěte na strategická místa v zařízení. Jiné náhlavní soupravy mohou ke zlepšení přesnosti používat ještě více fotoaparátů. Tyto čtyři kamery umožňují Questu podívat se na skutečný svět kolem vás a určit, jaká je vaše pozice v tomto prostoru.

Díky tomu může být Quest samostatný a přenosný. Je to také funkce, která umožňuje sledování rukou pomocí Oculus na prvním místě.

Standardní dotykové ovladače Oculus

Abychom pochopili, díky čemu je sledování rukou Oculus tak působivé , musíme začít s poněkud pozemskými fyzickými řadiči, které přicházejí s Oculus Quest. Každý z nich je plně sledován pohybem pomocí interních senzorů a speciálních značek pro sledování pohybu, které sdělují palubním kamerám Quest, kde jsou ovladače ve vztahu k headsetu.

Když držíte dotykové ovladače ve VR, jsem sledován se záhadnou přesností. Pomocí tlačítek pro uchopení a spouště na ovladači může software VR vytvořit přesvědčivý zážitek z popadání a manipulace s předměty. To se skvěle využívá ve hrách jako Poločas rozpadu Alyx a Výstup, kde je uchopení předmětů ve světě VR ústřední součástí hry.

Dotykové ovladače také nabízejí haptickou zpětnou vazbu díky zařízením zvaným „lineární ovladače“, která mohou vytvářet fyzické pocity narážení na věci, vibrace a další dotykové vjemy. Palce a tlačítka také nabízejí známý způsob, jak se pohybovat po prostoru VR, když se ve fyzickém prostoru fyzicky pohybovat nemůžete.

Hlavní nevýhodou oproti ručnímu sledování je to, že máte háčky na ruce. Virtuálními rukama můžete provádět jednoduché štípací pohyby, ale to je rozsah. Nepřipadá to jako hlavní omezení, když jsou hry navrženy kolem ovladačů, ale sledování rukou otevírá spektrum nových možností ve VR.

Co dělá Oculus Hand-Tracking

Když sledování rukou je povoleno, uvidíte přesné zobrazení vašich skutečných rukou ve světě VR. Každý pohyb vašich prstů nebo zápěstí se projeví v jejich virtuálních dvojcích.

Ruční sledování již není beta funkcí Questu. Nyní je integrován do operačního systému a mnoha aplikací Quest od první strany. První hlavní výhodou zde je, že pokud si chcete rychle nasadit Quest a sledovat film ve VR nebo procházet obchod s aplikacemi, nemusíte se snažit připoutat dotykové ovladače. Pomocí svých rukou můžete snadno přistupovat k systémovým nabídkám a snadno se pohybovat.

Teď, když je sledování rukou oficiální funkcí Quest, mohou vývojáři aplikací třetích stran přidat do svých aplikací. Existuje již řada aplikací, které skvěle využívají funkci sledování rukou Oculus, ale jsme si jisti, že vývojáři najdou mnohem více vzrušujících způsobů, jak může přímé sledování rukou změnit prostředí VR.

Jak Oculus Hand-tracking works

Výsledky ručního sledování jsou docela úžasné, ale jak to vlastně funguje? Oculus samozřejmě nepublikuje přesné podrobnosti svého proprietárního řešení, ale známe příslušné technologie a principy.

Zaprvé, palubní kamery jsou pro fungování ručního sledování zásadní. Poskytují nejen stereoskopické hloubkové informace, ale také vizuální data pro zpracování strojovým viděním. Co je strojové vidění? Je to odvětví umělá inteligence, konkrétně pole známé jako strojové učení. Je to stejná technologie, která umožňuje aplikaci fotoaparátu vašeho telefonu rychle identifikovat tváře na fotografii.

Software se v zásadě musí naučit, co v obrazových datech poskytovaných fotoaparátem je ruka a co není ruka. To bylo pravděpodobně provedeno ukázkou softwaru tisíce a tisíce rukou v různých prostředích, dokud nemohl spolehlivě zjistit rychlý a efektivní způsob jejich odlišení od všeho ostatního ve vaší místnosti.

Jakmile může software vytvořit přesné virtuální modely vašich rukou v reálném čase, vývojáři aplikací je mohou použít k čemukoli, na co si vzpomenou. Nyní můžete přesně manipulovat s objekty ve VR!

Ručně sledované zkušenosti stojí za vyzkoušení

Pokud vlastníte Oculus Quest, můžete vyzkoušet funkci Oculus hand-tracking, aniž byste museli kupovat jakékoli konkrétní aplikace. Jak již bylo zmíněno výše, funguje v hlavním prostředí Quest i v několika aplikacích první strany. Pokud jde o zážitky třetích stran, je třeba zdůraznit několik.

Linie je narativní zážitek ve výši 4,99 $, který slouží také jako perfektní tech-demo pro sledování rukou. Vypráví příběh zmenšeného modelového města, které běží na hodinovém stroji a na kolejích.

Náš hrdina Pedro je do Rosy zamilovaný, ale svému osudu nemůže uniknout. Dokud se jednoho dne nestane něco nového. Interakce s jejich světem zmenšeného modelu pomocí ruky můžete otáčet knoflíky, zatahovat páčky a hrát si se vším, co můžete. Je to lineární, krátká zkušenost, ale může se velmi pohodlně pochlubit sledováním ruky asi za 15 minut.

Waltz of the Wizard (9,99 $) je další vynikající přehlídkou této technologie. Svými rukama můžete kouzlit a komunikovat téměř se vším ve světě VR kolem vás. Pokud jste někdy chtěli prožít fantazii, že jste čaroděj, který dokáže střílet blesky ze svých rukou, je to pro vás hra!

Co si myslíte o sledování rukou na Questu? Zkusil jsi to? Které hry byste doporučili? Sdílejte své postřehy v komentářích.

Související příspěvky:


11.03.2021