Az Oculus Quest (mind az eredeti, mind a második modell^{(second model)} ) érdekes története van a funkcióknak, amelyeket jóval azután adtak hozzá, hogy a hardver már megjelent a vadonban. Ezek közül a leghíresebb az Oculus Link , amely gyakorlatilag Oculus Riftté^(Rift) változtatja a küldetést^(Quest) . Ez a funkció annyira sikeres volt, hogy az Oculus úgy döntött, hogy a Quest kivételével az összes fejhallgatóját leállítja . 

A kézi^(Hand) követés nem hozta meg azt a feltűnést, mint az Oculus Link , de ez még mindig egy csodálatos funkció, rengeteg lehetőséggel. A kézi követéssel egyáltalán nincs szükség vezérlőkre. Saját kezeit digitalizálják a VR világába! 

Ha van egy küldetésed^(Quest) , vagy egy vásárláson gondolkodsz, érdemes tudni, hogyan működik a kézi követés, és mit hozhat a VR-élménybe.

Hogyan követi a Quest a világot

Az Oculus Quest innovatív megközelítést alkalmaz a mozgáskövetés terén, amelyet általában „belülről kifelé” történő követésnek neveznek, ami nagyon eltér attól, ahogyan a mozgáskövetés működött a múltban. 

Amikor a 2010-es évek közepén megjelentek az első új generációs fejhallgatók, egy vagy több külső nyomkövető kamerát használtak. A fejhallgatón található speciális mozgáskövető lámpák pontosan jelzik a kamerának, hogy a headset hol van hozzá képest. Némi okos matematikával ezeket az adatokat nagyon pontos mozgáskövetéssé lehet alakítani a 3D térben. A prémium VR fejhallgatók így kínálnak „hat szabadsági fokot”, más néven 6DoF-et. 

A Quest^(Quest) magára a headsetre helyezi a kameraérzékelőt, ebben az esetben stratégiai helyekre helyezi őket az eszközön. Más fejhallgatók még több kamerát használhatnak a pontosság javítása érdekében. Ez a négy kamera lehetővé teszi a Quest számára, hogy a valós világot körülvegye, és meghatározza, mi a helyzete a téren belül. 

Ez az, ami lehetővé teszi, hogy a Quest önálló és hordozható legyen. Ez az a funkció is, amely lehetővé teszi a kézi követést az Oculus segítségével.

A szabványos Oculus Touch vezérlők^{(Standard Oculus Touch Controllers)}

Ahhoz, hogy megértsük, mitől olyan lenyűgöző az Oculus kézkövetés, el kell kezdenünk az Oculus Questhez^{(Oculus Quest)} tartozó meglehetősen hétköznapi fizikai vezérlőkkel . Mindegyiket teljes mértékben követik a belső érzékelők és a speciális mozgáskövető jelzők, amelyek megmondják a Quest fedélzeti kameráinak, hogy a vezérlők hol vannak a headsethez képest.

Ha VR-ben tartja az érintővezérlőket, a rendszer hihetetlen pontossággal követi nyomon őket. A vezérlőn lévő markolat és trigger gombok használatával a VR-szoftver meggyőző élményt teremthet a tárgyak megragadásával és manipulálásával kapcsolatban. Ezt nagyszerűen használják olyan játékokban, mint a Half-Life Alyx és a The Climb^{(The Climb)} , ahol a VR-világ megragadó elemei a játékmenet központi részét képezik. 

Az érintővezérlők tapintási^{(Touch Controllers)} visszajelzést is kínálnak a „lineáris aktuátoroknak” nevezett eszközöknek köszönhetően, amelyek a dolgokba való ütközés fizikai érzését, rezgését és egyéb érintési érzeteket kelthetik. A hüvelykujj és a gombok szintén ismerős módot kínálnak a VR-térben való mozgásra, amikor fizikailag nem tud mozogni a valós térben.

Ennek a fő hátránya a kézi követéshez képest, hogy horgokkal rendelkezik a kézhez. Virtuális kezeivel egyszerű csípő mozdulatokat is végrehajthat, de ez a mértéke. Nem tűnik jelentős korlátozásnak, ha a játékokat a kontrollerek köré tervezik, de a kézi követés új lehetőségek tárházát nyitja meg a VR-ben.

Mire képes az Oculus Hand-Tracking?

Ha a kézkövetés engedélyezve van, akkor a valódi kezek pontos ábrázolását láthatja a VR világában. Ujjainak vagy csuklóinak minden egyes mozdulata megjelenik a virtuális kettős mozdulataikban.

A Hand Tracking^{(Hand Tracking)} már nem a Quest béta funkciója . Mostanra integrálva van az operációs rendszerbe és számos első féltől származó Quest alkalmazásba. Az első jelentős előny itt az, hogy ha csak gyorsan fel akarja venni a Questet^(Quest) , és filmet nézni VR-ben, vagy böngészni az alkalmazásboltban, akkor nem kell az érintővezérlők felcsatolásával foglalkoznia. Csak a kezével elérheti a rendszermenüket, és könnyedén navigálhat.

Most, hogy a kézi követés a Quest hivatalos funkciója , a harmadik féltől származó alkalmazásfejlesztők hozzáadhatják alkalmazásaikhoz. Már számos olyan alkalmazás létezik, amely kiválóan használja ki az Oculus kézi követés funkcióját, de biztosak vagyunk benne, hogy a fejlesztők még sok izgalmasabb módot találnak majd arra, hogy a közvetlen kézi követés átalakítsa a VR-élményt.

Hogyan működik az Oculus kézi követés?

A kézi nyomon követés eredményei elképesztőek, de hogyan is működik valójában? Nyilvánvaló , hogy az Oculus nem fogja közzétenni saját fejlesztésű megoldásának pontos részleteit, de ismerjük az érintett technológiákat és elveket.

Először is, a fedélzeti kamerák elengedhetetlenek a kézi követés működéséhez. Nemcsak sztereoszkópikus mélységinformációkat adnak, hanem vizuális adatokat is a gépi látás általi feldolgozáshoz. Mi az a gépi látás? Ez a mesterséges intelligencia^{(artificial intelligence)} egyik ága , pontosabban a gépi tanulásnak nevezett terület. Ez ugyanaz a technológia, amely lehetővé teszi, hogy a telefon kameraalkalmazása gyorsan azonosítsa az arcokat a fényképen.

Lényegében a szoftvernek meg kell tanulnia, hogy a kamera által szolgáltatott képadatokban mi számít kéznek és mi nem kéz. Ez valószínűleg úgy történt, hogy a szoftvernek több ezer és ezer leosztást mutatott be különböző környezetekben, amíg megbízhatóan ki nem tudta találni a gyors és hatékony módszert, amellyel megkülönböztetheti őket minden mástól a szobában.

Miután a szoftver pontos, valós idejű virtuális modelleket tud létrehozni az Ön kezéről, az alkalmazásfejlesztők bármire használhatják őket, amire csak gondolnak. Most már precízen manipulálhatja az objektumokat a VR-ben!

Kézzel követett élmények, amelyeket érdemes kipróbálni

Ha van egy Oculus Quest , akkor kipróbálhatja az Oculus kézi követési funkcióját anélkül, hogy bármilyen alkalmazást kellene vásárolnia. Mint fentebb említettük, működik a fő Quest környezetben, valamint néhány belső alkalmazásban. A harmadik felektől származó élmények kapcsán érdemes néhányat kiemelni.

A The Line^{(The Line)} egy 4,99 dolláros narratív élmény, amely tökéletes tech-demóként is szolgál a kézi követéshez. Egy óraszerkezeten és síneken futó makettváros történetét meséli el. 

Hősünk, Pedro szerelmes Rosába^(Rosa) , de nem kerülheti el a sorsát. Amíg egy napon valami új nem történik. Úgy léphet kapcsolatba a méretarányos modellvilágukkal, hogy a kezével forgatja a gombokat, húzza meg a karokat, és mindennel babrál, amit csak tud. Ez egy lineáris, rövid élmény, de körülbelül 15 perc alatt nagyon szórakoztató módon mutatja be a kézi követést.

A Waltz of the Wizard^{(Waltz of the Wizard)} (9,99 USD) a technológia másik kiváló bemutatója. A kezével varázsolhat, és szinte mindennel kommunikálhat a körülötte lévő VR-világban. Ha valaha is szeretted volna megélni a varázsló fantáziáját, aki lámpákat tud kilőni a kezéből, ez a játék az Ön számára!

Mi a véleményed a kézi követésről a Quest -en ? Kibróbáltad? Milyen játékokat ajánlanátok? Ossza^(Share) meg meglátásait a megjegyzésekben.

How Oculus Quest Hand Tracking Technology Works

The Oculus Quest (both the original and second model) have an interesting history of features being added long after the hardware is out in the wild. The most famous of these is Oculus Link, which effectively turns the Quest into an Oculus Rift. This feature was so successful that Oculus decided to discontinue all their headsets but the Quest. 

Hand tracking hasn’t made quite the splash Oculus Link did, but it’s still an amazing feature with lots of potential. With hand-tracking you don’t need controllers at all. Your own hands are digitized into the VR world! 

If you have a Quest or are thinking of buying one, it’s worth knowing how hand tracking works and what it can bring to the VR experience.

How Quest Tracks the World

The Oculus Quest uses an innovative approach towards motion tracking that’s commonly referred to as “inside-out” tracking, which is very different from how motion tracking worked in the past. 

When the first next-generation headsets were released in the mid-2010s, they made use of one or more external tracking cameras. Special motion tracking lights on the headset told the camera exactly where the headset was in relation to it. With some clever math, that data could then be converted to very accurate motion tracking in 3D space. This is how premium VR headsets offer “six degrees of freedom”, also known as 6DoF. 

Quest moves the camera sensor onto the headset itself, in this case placing them in strategic spots on the device. Other headsets may use even more cameras to improve accuracy. These four cameras let the Quest look at the real world around you and determine what your position is within that space. 

That’s what allows the Quest to be self-contained and portable. It’s also the feature that allows for hand-tracking with the Oculus to be possible in the first place..

The Standard Oculus Touch Controllers

To understand what makes Oculus hand tracking so impressive, we have to start with the rather mundane physical controllers that come with the Oculus Quest. Each one is fully motion-tracked by internal sensors and special motion tracking markers that tell the Quest’s onboard cameras where the controllers are relative to the headset.

When you’re holding the touch controllers in VR, they’re tracked with uncanny accuracy. Using the grip and trigger buttons on the controller, VR software can create a convincing experience of grabbing and manipulating items. This is used to great effect in games such as Half-Life Alyx and The Climb, where gripping items in the VR world is a central part of gameplay. 

The Touch Controllers also offer haptic feedback thanks to devices called “linear actuators”, which can create physical feelings of bumping into things, vibration and other touch sensations. Thumbsticks and buttons also offer a familiar way to move around a VR space when you can’t physically move about in your real space.

The main disadvantage of this compared to hand-tracking is that you have hooks for hands. You can perform simple pinching movements with your virtual hands, but that’s the extent of it. It doesn’t feel like a major limitation when games are designed around the controllers, but hand tracking opens a spectrum of new possibilities in VR.

What Oculus Hand-Tracking Does

When hand tracking is enabled, you’ll see an accurate representation of your real hands within the VR world. Each movement of your fingers or wrist will be reflected in their virtual doppelgangers.

Hand Tracking is no longer a beta feature of Quest. It’s now integrated into the operating system and many first party Quest applications. The first major benefit here is that if you just quickly want to put on your Quest and watch a movie in VR or browse around the app store, you don’t have to go through the effort of strapping on the touch controllers. Using just your hands, you can access system menus and navigate around with ease.

Now that hand-tracking is an official feature of Quest, third-party app developers can add it to their apps. There are already a number of apps that make excellent use of the Oculus hand-tracking feature, but we’re sure developers will find many more exciting ways in which direct hand-tracking can transform the VR experience

How Oculus Hand-tracking Works

The results of hand-tracking are pretty amazing, but how does it actually work? Obviously Oculus isn’t going to publish the exact details of their proprietary solution, but we do know the technologies and principles involved.

First, the on-board cameras are essential to making hand-tracking work. Not only do they provide stereoscopic depth information, but also visual data for processing by machine vision. What’s machine vision? It’s a branch of artificial intelligence, specifically a field known as machine learning. It’s the same technology that lets your phone’s camera app quickly identify faces in a photo.

Essentially, the software has to learn what in the image data provided by the camera is a hand and what isn’t a hand. This was probably done by showing the software thousands and thousands of hands in different environments until it could reliably figure out a fast and effective way of telling them apart from everything else in your room.

Once the software can create accurate, real-time virtual models of your hands, app developers can use them for anything they can think of. You can now precisely manipulate objects in VR!

Hand-tracked Experiences Worth Trying

If you own an Oculus Quest you can try out the Oculus hand-tracking feature without having to buy any particular app. As mentioned above, it works in the main Quest environment as well as a few first-party apps. When it comes to 3rd-party experiences, there are a few worth highlighting.

The Line is a $4.99 narrative experience that also serves as a perfect tech-demo for hand tracking. It tells the tale of a scale model town that runs on clockwork and tracks. 

Our hero Pedro is in love with Rosa, but he can’t escape his fate. Until something new happens one day. You interact with their scale model world by using your hand to turn knobs, pull levers and fiddle with everything that you can. It’s a linear, short experience, but can show off hand-tracking in a very entertaining way in about 15 minutes.

Waltz of the Wizard ($9.99) is another excellent showcase of the technology. You can use your hands to cast spells and interact with just about everything in the VR world around you. If you’ve ever wanted to live out the fantasy of being a wizard who can shoot bolts of lighting from their hands, this is the game for you!

What do you think of hand tracking on Quest? Have you tried it? Which games would you recommend? Share your insights in the comments.

Related posts

• Hogyan játssz vezeték nélküli PC-s VR-játékokat az Oculus Questen a virtuális asztallal

• Hogyan működik az Xbox streamelés PC-re

• Hogyan játssz SteamVR játékokat az Oculus Quest 2-n

• A 8 legjobb ingyenes játék az Oculus Quest 2-n

• Az Air Link beállítása az Oculus Quest 2-n

• A legjobb vezetékes és vezeték nélküli játékfejhallgatók

• Mit jelent a GG a játékokban, a csevegésben és egyebekben?

• 8 ingyenesen játszható MMORPG 2021-ben

• Monitor vs TV játékhoz? Van-e legjobb választás?

• Játékmód beszerzése Androidon

• A virtualizáció engedélyezése az MSI Gaming Plus Max B450-ben

• Hogyan suttogjunk a Twitchen

• Mi az a Roll20 dinamikus világítás és hogyan kell használni?

• PS4 vezérlő csatlakoztatása számítógéphez

• Hogyan szerezz több nézőt a Twitchen

• 6 legjobb Oculus Quest 2 hatékonyságnövelő alkalmazás

• Az 5 legjobb Minecraft mod csomag

• A 6 legjobb, most ingyenesen játszható nyilvános domain videojáték

• A GBoost használatával növelheti a játék teljesítményét Windows 10 PC-n

• Használhat billentyűzetet és egeret konzolos játékhoz?