Oculus Quest (zarówno oryginał, jak i drugi model ) mają ciekawą historię funkcji dodawanych długo po tym, jak sprzęt wyszedł na wolność. Najbardziej znanym z nich jest Oculus Link, który skutecznie zmienia Quest w Oculus Rift. Ta funkcja odniosła tak duży sukces, że Oculus postanowił zrezygnować ze wszystkich swoich zestawów słuchawkowych oprócz Quest.
Śledzenie rąk nie jest tak popularne, jak Oculus Link, ale nadal jest niesamowitą funkcją o dużym potencjale. Dzięki śledzeniu dłoni w ogóle nie potrzebujesz kontrolerów. Twoje własne ręce są przenoszone do świata VR!
Jeśli masz Quest lub myślisz o zakupie, warto wiedzieć, jak działa śledzenie dłoni i co może wnieść do rzeczywistości wirtualnej.
Jak Quest śledzi świat
Oculus Quest wykorzystuje innowacyjny podejście do śledzenia ruchu, które jest powszechnie określane jako śledzenie „od wewnątrz na zewnątrz”, które bardzo różni się od sposobu, w jaki śledzenie ruchu działało w przeszłości.
Kiedy w połowie 2010 roku pojawiły się pierwsze zestawy słuchawkowe nowej generacji, korzystały one z co najmniej jednej zewnętrznej kamery śledzącej. Specjalne światła śledzące ruch na zestawie słuchawkowym wskazywały aparatowi, gdzie dokładnie znajduje się zestaw słuchawkowy w stosunku do niego. Dzięki sprytnej matematyce dane te można następnie przekształcić w bardzo dokładne śledzenie ruchu w przestrzeni 3D. W ten sposób wysokiej jakości zestawy słuchawkowe VR oferują „sześć stopni swobody”, znane również jako 6DoF.
Quest porusza kamerą czujnika na samym zestawie słuchawkowym, w tym przypadku umieszczając je w strategicznych miejscach na urządzeniu. Inne zestawy słuchawkowe mogą korzystać z jeszcze większej liczby kamer, aby poprawić dokładność. Te cztery kamery pozwalają Questowi spojrzeć na rzeczywisty świat wokół ciebie i określić, jaka jest twoja pozycja w tej przestrzeni.
Dzięki temu Quest może być samodzielny i przenośny. Jest to również funkcja, która umożliwia przede wszystkim śledzenie dłoni za pomocą Oculus.
Standardowe kontrolery dotykowe Oculus
Aby zrozumieć, dlaczego śledzenie dłoni Oculus jest tak imponujące , musimy zacząć od raczej przyziemnych kontrolerów fizycznych, które są dostarczane wraz z Oculus Quest. Każdy z nich jest w pełni śledzony przez wewnętrzne czujniki i specjalne znaczniki śledzenia ruchu, które informują wbudowane kamery Questa, gdzie znajdują się kontrolery względem zestawu słuchawkowego.
Kiedy trzymasz kontrolery dotykowe w VR, oni ' ponownie śledzone z niesamowitą dokładnością. Korzystając z przycisków uchwytu i spustu na kontrolerze, oprogramowanie VR może stworzyć przekonujące wrażenia podczas chwytania i manipulowania przedmiotami. Jest to wykorzystywane z doskonałym efektem w grach takich jak Half-Life Alyx i Wspinaczka, w których chwytanie przedmiotów w świecie VR jest centralną częścią rozgrywki.
Kontrolery dotykowe również oferują dotykowe sprzężenie zwrotne dzięki urządzeniom zwanym „siłownikami liniowymi”, które mogą wywoływać fizyczne odczucia zderzania się z przedmiotami, wibracji i innych wrażeń dotykowych. Drążki i przyciski oferują również znajomy sposób poruszania się po przestrzeni VR, gdy nie możesz fizycznie poruszać się w prawdziwej przestrzeni.
Główną wadą tego w porównaniu ze śledzeniem dłoni jest to, że masz haczyki na ręce. Możesz wykonywać proste ruchy szczypania za pomocą wirtualnych dłoni, ale to wszystko. Nie wydaje się to poważnym ograniczeniem, gdy gry są projektowane w oparciu o kontrolery, ale śledzenie rąk otwiera spektrum nowych możliwości w rzeczywistości wirtualnej.
Co robi Oculus Hand-Tracking
Kiedy śledzenie rąk jest włączone, zobaczysz dokładną reprezentację swoich prawdziwych dłoni w świecie VR. Każdy ruch twoich palców lub nadgarstka zostanie odzwierciedlony w ich wirtualnych sobowtórach.
Śledzenie rąk nie jest już funkcją beta Quest. Jest teraz zintegrowany z systemem operacyjnym i wieloma aplikacjami firmy Quest. Pierwszą dużą zaletą jest to, że jeśli chcesz po prostu szybko założyć Quest i obejrzeć film w VR lub przeglądać sklep z aplikacjami, nie musisz wykonywać wysiłku związanego z podłączaniem kontrolerów dotykowych. Używając tylko rąk, możesz uzyskać dostęp do menu systemowych i z łatwością poruszać się po nim.
Teraz, gdy śledzenie dłoni jest oficjalną funkcją Quest, zewnętrzni deweloperzy aplikacji mogą dodawać je do swoich aplikacji. Istnieje już wiele aplikacji, które doskonale wykorzystują funkcję śledzenia dłoni Oculus, ale jesteśmy pewni, że programiści znajdą wiele ciekawszych sposobów, w jakie bezpośrednie śledzenie dłoni może zmienić wrażenia z rzeczywistości wirtualnej.
W jaki sposób Oculus Hand-tracking działa
Wyniki śledzenia dłoni są niesamowite, ale jak to właściwie działa? Oczywiście Oculus nie zamierza publikować dokładnych szczegółów swojego zastrzeżonego rozwiązania, ale znamy technologie i zasady z tym związane.
Po pierwsze, kamery pokładowe są niezbędne do śledzenia dłoni. Dostarczają nie tylko stereoskopowych informacji o głębi, ale także danych wizualnych do przetwarzania przez widzenie maszynowe. Co to jest wizja maszynowa? Jest to gałąź sztuczna inteligencja, a konkretnie dziedzina znana jako uczenie maszynowe. To ta sama technologia, która pozwala aplikacji aparatu w telefonie szybko identyfikować twarze na zdjęciu.
Zasadniczo oprogramowanie musi nauczyć się, co w danych obrazu dostarczonych przez aparat jest ręką, a co nie. Prawdopodobnie zostało to zrobione poprzez pokazanie oprogramowaniu tysięcy i tysięcy rąk w różnych środowiskach, dopóki nie będzie w stanie wiarygodnie wymyślić szybkiego i skutecznego sposobu odróżnienia go od wszystkiego innego w twoim pokoju.
Gdy oprogramowanie będzie mogło tworzyć dokładne, wirtualne modele twoich dłoni w czasie rzeczywistym, twórcy aplikacji mogą używać ich do wszystkiego, o czym tylko przyjdą na myśl. Możesz teraz precyzyjnie manipulować obiektami w VR!
Ręcznie śledzone doświadczenia, które warto wypróbować
Jeśli posiadasz Oculus Quest, możesz wypróbować funkcję śledzenia dłoni Oculus bez konieczności kupowania żadnego konkretna aplikacja. Jak wspomniano powyżej, działa w głównym środowisku Quest, a także w kilku własnych aplikacjach. Jeśli chodzi o doświadczenia innych firm, jest kilka, na które warto zwrócić uwagę.
Linia to doświadczenie narracyjne za 4,99 USD, które służy również jako doskonałe demo techniczne do śledzenia dłoni. Opowiada historię modelowego miasta, które działa na zegarku i torach.
Nasz bohater Pedro jest zakochany w Rosie, ale nie może uciec przed swoim losem. Aż pewnego dnia wydarzy się coś nowego. Wchodzisz w interakcję z ich światem modeli w zmniejszonej skali, używając dłoni do obracania gałek, pociągania dźwigni i majstrowania przy wszystkim, co możesz. To liniowe, krótkie doświadczenie, ale może pokazać śledzenie dłoni w bardzo zabawny sposób w około 15 minut.
Walc czarodzieja (9,99 USD) to kolejny doskonały przykład tej technologii. Możesz używać rąk do rzucania zaklęć i wchodzenia w interakcje z niemal wszystkim w otaczającym Cię świecie VR. Jeśli kiedykolwiek chciałeś spełnić marzenie o byciu czarodziejem, który potrafi strzelać błyskawicami z rąk, to jest gra dla Ciebie!
Co myślisz o śledzeniu ręki w Quest? Próbowałeś tego? Które gry byś polecił? Podziel się spostrzeżeniami w komentarzach.