Oculus Quest ( и оригиналният, и вторият модел^{(second model)} ) имат интересна история на добавяне на функции дълго след като хардуерът е пуснат в дивата природа. Най-известният от тях е Oculus Link , който ефективно превръща Quest в Oculus Rift . Тази функция беше толкова успешна, че Oculus реши да спре всичките си слушалки, освен Quest . 

^(Hand)Проследяването на ръцете не е допринесло толкова, колкото Oculus Link , но все пак е невероятна функция с много потенциал. С ръчно проследяване изобщо не се нуждаете от контролери. Вашите собствени ръце са дигитализирани в света на VR! 

Ако имате Quest или мислите да закупите такъв, струва си да знаете как работи проследяването на ръцете и какво може да донесе за VR изживяването.

Как Quest проследява света

Oculus Quest използва иновативен подход към проследяването на движението, което обикновено се нарича проследяване „отвътре навън“, което е много различно от това как е работило проследяването на движението в миналото. 

Когато първите слушалки от следващо поколение бяха пуснати в средата на 2010-те, те използваха една или повече външни камери за проследяване. Специални светлини за проследяване на движението на слушалките казват на камерата точно къде се намира слушалката спрямо нея. С малко умна математика тези данни могат да бъдат преобразувани в много точно проследяване на движението в 3D пространство. Ето как първокласните VR слушалки предлагат „шест степени на свобода“, известни също като 6DoF. 

Quest премества сензора на камерата върху самите слушалки, като в този случай ги поставя на стратегически места на устройството. Други слушалки може да използват още повече камери за подобряване на точността. Тези четири камери позволяват на Quest да разгледа реалния свят около вас и да определи каква е вашата позиция в това пространство. 

Това позволява на Quest да бъде самостоятелен и преносим. Това е и функцията, която позволява ръчно проследяване с Oculus да бъде възможно на първо място.

Стандартните Oculus Touch контролери^{(Standard Oculus Touch Controllers)}

За да разберем какво прави проследяването на ръцете на Oculus толкова впечатляващо, трябва да започнем с доста обикновените физически контролери, които идват с Oculus Quest . Всеки от тях е напълно проследен от вътрешни сензори и специални маркери за проследяване на движението, които казват на бордовите камери на Quest къде са контролерите спрямо слушалките.

Когато държите сензорните контролери във VR, те се проследяват с невероятна точност. Използвайки бутоните за захващане и задействане на контролера, софтуерът за VR може да създаде убедително изживяване при хващане и манипулиране на елементи. Това се използва с голям ефект в игри като Half-Life Alyx и The Climb , където захващането на предмети в света на VR е централна част от играта. 

Сензорните контролери^{(Touch Controllers)} също така предлагат хаптична обратна връзка благодарение на устройствата, наречени „линейни задвижващи механизми“, които могат да създадат физически усещания за блъскане в неща, вибрации и други усещания при докосване. Пръчиците и бутоните също предлагат познат начин за придвижване из VR пространство, когато не можете физически да се движите в реалното си пространство.

Основният недостатък на това в сравнение с проследяването на ръцете е, че имате куки за ръце. Можете да изпълнявате прости движения с прищипване с виртуалните си ръце, но това е степента на това. Не се чувства като голямо ограничение, когато игрите са проектирани около контролерите, но проследяването на ръцете отваря спектър от нови възможности във VR.

Какво прави Oculus Hand-Tracking

Когато проследяването на ръцете е активирано, ще видите точно представяне на истинските си ръце в света на VR. Всяко движение на пръстите или китката ви ще бъде отразено в техните виртуални двойници.

Проследяването на ръцете^{(Hand Tracking)} вече не е бета функция на Quest . Вече е интегриран в операционната система и много приложения на Quest от първи страни . Първото голямо предимство тук е, че ако просто искате бързо да облечете своя Quest и да гледате филм във VR или да разглеждате магазина за приложения, не е нужно да се налагате да вържете сензорните контролери. Използвайки само ръцете си, можете да осъществявате достъп до системните менюта и да се придвижвате с лекота.

Сега, когато ръчното проследяване е официална функция на Quest , разработчиците на приложения от трети страни могат да го добавят към своите приложения. Вече има редица приложения, които отлично използват функцията за ръчно проследяване на Oculus , но сме сигурни, че разработчиците ще намерят много по-вълнуващи начини, по които директното ръчно проследяване може да трансформира VR изживяването

Как работи Oculus Hand-tracking

Резултатите от ръчното проследяване са доста невероятни, но как всъщност работи? Очевидно Oculus няма да публикува точните подробности за тяхното собствено решение, но ние знаем съответните технологии и принципи.

Първо, бордовите камери са от съществено значение, за да може ръчното проследяване да работи. Те не само предоставят стереоскопична информация за дълбочината, но и визуални данни за обработка от машинно зрение. Какво е машинното зрение? Това е клон на изкуствения интелект^{(artificial intelligence)} , по-специално област, известна като машинно обучение. Това е същата технология, която позволява на приложението за камера на телефона ви бързо да идентифицира лица в снимка.

По същество софтуерът трябва да научи какво в данните за изображението, предоставени от камерата, е ръка и кое не е ръка. Това вероятно беше направено чрез показване на софтуера на хиляди и хиляди ръце в различни среди, докато не можеше надеждно да намери бърз и ефективен начин да ги различи от всичко останало във вашата стая.

След като софтуерът може да създаде точни виртуални модели на ръцете ви в реално време, разработчиците на приложения могат да ги използват за всичко, за което се сетят. Вече можете прецизно да манипулирате обекти във VR!

Ръчно проследени преживявания, които си струва да опитате

Ако притежавате Oculus Quest , можете да изпробвате функцията за ръчно проследяване на Oculus , без да се налага да купувате конкретно приложение. ^(Oculus)Както бе споменато по-горе, той работи в основната среда на Quest , както и в няколко приложения на първи страни. Когато става въпрос за изживяване на трети страни, има няколко, които си струва да се подчертаят.

The Line е разказ за $4,99, който също служи като перфектна технологична демонстрация за проследяване на ръцете. Той разказва историята на мащабен модел на град, който работи по часовников механизъм и писти. 

Нашият герой Педро^(Pedro) е влюбен в Роза^(Rosa) , но не може да избяга от съдбата си. Докато един ден не се случи нещо ново. Вие взаимодействате с техния свят на мащабни модели, като използвате ръката си, за да завъртите копчетата, да дърпате лостовете и да се занимавате с всичко, което можете. Това е линейно, кратко изживяване, но може да покаже проследяването на ръцете по много забавен начин за около 15 минути.

Валсът на магьосника^{(Waltz of the Wizard)} ($9,99) е друга отлична демонстрация на технологията. Можете да използвате ръцете си, за да правите заклинания и да взаимодействате с почти всичко в света на VR около вас. Ако някога сте искали да изживеете фантазията си да бъдете магьосник, който може да изстрелва светлинни стрели от ръцете си, това е играта за вас!

Какво мислите за проследяването на ръцете в Quest ? пробвахте ли го? Кои игри бихте препоръчали? Споделете^(Share) своите прозрения в коментарите.

How Oculus Quest Hand Tracking Technology Works

The Oculus Quest (both the original and second model) have an interesting history of features being added long after the hardware is out in the wild. The most famous of these is Oculus Link, which effectively turns the Quest into an Oculus Rift. This feature was so successful that Oculus decided to discontinue all their headsets but the Quest. 

Hand tracking hasn’t made quite the splash Oculus Link did, but it’s still an amazing feature with lots of potential. With hand-tracking you don’t need controllers at all. Your own hands are digitized into the VR world! 

If you have a Quest or are thinking of buying one, it’s worth knowing how hand tracking works and what it can bring to the VR experience.

How Quest Tracks the World

The Oculus Quest uses an innovative approach towards motion tracking that’s commonly referred to as “inside-out” tracking, which is very different from how motion tracking worked in the past. 

When the first next-generation headsets were released in the mid-2010s, they made use of one or more external tracking cameras. Special motion tracking lights on the headset told the camera exactly where the headset was in relation to it. With some clever math, that data could then be converted to very accurate motion tracking in 3D space. This is how premium VR headsets offer “six degrees of freedom”, also known as 6DoF. 

Quest moves the camera sensor onto the headset itself, in this case placing them in strategic spots on the device. Other headsets may use even more cameras to improve accuracy. These four cameras let the Quest look at the real world around you and determine what your position is within that space. 

That’s what allows the Quest to be self-contained and portable. It’s also the feature that allows for hand-tracking with the Oculus to be possible in the first place..

The Standard Oculus Touch Controllers

To understand what makes Oculus hand tracking so impressive, we have to start with the rather mundane physical controllers that come with the Oculus Quest. Each one is fully motion-tracked by internal sensors and special motion tracking markers that tell the Quest’s onboard cameras where the controllers are relative to the headset.

When you’re holding the touch controllers in VR, they’re tracked with uncanny accuracy. Using the grip and trigger buttons on the controller, VR software can create a convincing experience of grabbing and manipulating items. This is used to great effect in games such as Half-Life Alyx and The Climb, where gripping items in the VR world is a central part of gameplay. 

The Touch Controllers also offer haptic feedback thanks to devices called “linear actuators”, which can create physical feelings of bumping into things, vibration and other touch sensations. Thumbsticks and buttons also offer a familiar way to move around a VR space when you can’t physically move about in your real space.

The main disadvantage of this compared to hand-tracking is that you have hooks for hands. You can perform simple pinching movements with your virtual hands, but that’s the extent of it. It doesn’t feel like a major limitation when games are designed around the controllers, but hand tracking opens a spectrum of new possibilities in VR.

What Oculus Hand-Tracking Does

When hand tracking is enabled, you’ll see an accurate representation of your real hands within the VR world. Each movement of your fingers or wrist will be reflected in their virtual doppelgangers.

Hand Tracking is no longer a beta feature of Quest. It’s now integrated into the operating system and many first party Quest applications. The first major benefit here is that if you just quickly want to put on your Quest and watch a movie in VR or browse around the app store, you don’t have to go through the effort of strapping on the touch controllers. Using just your hands, you can access system menus and navigate around with ease.

Now that hand-tracking is an official feature of Quest, third-party app developers can add it to their apps. There are already a number of apps that make excellent use of the Oculus hand-tracking feature, but we’re sure developers will find many more exciting ways in which direct hand-tracking can transform the VR experience

How Oculus Hand-tracking Works

The results of hand-tracking are pretty amazing, but how does it actually work? Obviously Oculus isn’t going to publish the exact details of their proprietary solution, but we do know the technologies and principles involved.

First, the on-board cameras are essential to making hand-tracking work. Not only do they provide stereoscopic depth information, but also visual data for processing by machine vision. What’s machine vision? It’s a branch of artificial intelligence, specifically a field known as machine learning. It’s the same technology that lets your phone’s camera app quickly identify faces in a photo.

Essentially, the software has to learn what in the image data provided by the camera is a hand and what isn’t a hand. This was probably done by showing the software thousands and thousands of hands in different environments until it could reliably figure out a fast and effective way of telling them apart from everything else in your room.

Once the software can create accurate, real-time virtual models of your hands, app developers can use them for anything they can think of. You can now precisely manipulate objects in VR!

Hand-tracked Experiences Worth Trying

If you own an Oculus Quest you can try out the Oculus hand-tracking feature without having to buy any particular app. As mentioned above, it works in the main Quest environment as well as a few first-party apps. When it comes to 3rd-party experiences, there are a few worth highlighting.

The Line is a $4.99 narrative experience that also serves as a perfect tech-demo for hand tracking. It tells the tale of a scale model town that runs on clockwork and tracks. 

Our hero Pedro is in love with Rosa, but he can’t escape his fate. Until something new happens one day. You interact with their scale model world by using your hand to turn knobs, pull levers and fiddle with everything that you can. It’s a linear, short experience, but can show off hand-tracking in a very entertaining way in about 15 minutes.

Waltz of the Wizard ($9.99) is another excellent showcase of the technology. You can use your hands to cast spells and interact with just about everything in the VR world around you. If you’ve ever wanted to live out the fantasy of being a wizard who can shoot bolts of lighting from their hands, this is the game for you!

What do you think of hand tracking on Quest? Have you tried it? Which games would you recommend? Share your insights in the comments.

Related posts

• Как да играете безжични компютърни VR игри на Oculus Quest с виртуален работен плот

• Как работи Xbox Streaming към компютър

• Как да играете SteamVR игри на Oculus Quest 2

• 8 най-добри безплатни игри на Oculus Quest 2

• Как да настроите Air Link на Oculus Quest 2

• Как да получите повече зрители на Twitch

• Най-добрите механични клавиатури за игри и работа за компютър с Windows 10

• Какво е динамично осветление Roll20 и как да го използваме?

• Можете ли да използвате клавиатура и мишка за конзолни игри?

• Как да започнете в Animal Crossing: New Horizons

• Използвайте GBoost, за да увеличите производителността на игрите на компютър с Windows 10

• Какво представлява кодът на Konami и как го използвате?

• 5-те най-добри пакета модификации на Minecraft

• 7 най-добри SSD диска за игри

• Как да активирате виртуализацията в MSI Gaming Plus Max B450

• 8 компютърни игри със страхотни истории

• Къде да намерите диаманти, слуз и пчели в Minecraft

• Как да промените кожата на Minecraft на компютър или мобилен телефон

• Как да свържете PS4 контролер към компютър

• Лаптоп HP OMEN 15 за мощни и потапящи игри