Die Oculus Quest (sowohl das ursprüngliche als auch das zweite Modell) hat eine interessante Geschichte von Funktionen, die hinzugefügt wurden, lange nachdem die Hardware in freier Wildbahn war. Das bekannteste davon ist Oculus Link, das die Quest effektiv in einen Oculus Rift verwandelt. Diese Funktion war so erfolgreich, dass Oculus beschloss, alle Headsets außer dem Quest einzustellen.
Das Hand-Tracking hat nicht ganz so viel Aufsehen erregt wie Oculus Link, aber es ist immer noch eine erstaunliche Funktion mit viel Potenzial. Mit Hand-Tracking benötigen Sie überhaupt keine Controller. Ihre eigenen Hände werden in die VR-Welt digitalisiert!
Wenn du eine Quest hast oder darüber nachdenkst, eine zu kaufen, solltest du wissen, wie Handtracking funktioniert und was es für das VR-Erlebnis bedeuten kann.
Wie Quest die Welt verfolgt
Die Oculus Quest verwendet einen innovativen Ansatz für die Bewegungsverfolgung, der allgemein als „Inside-Out“-Tracking bezeichnet wird und sich stark von der Funktionsweise der Bewegungsverfolgung in der Vergangenheit unterscheidet.
Als die ersten Headsets der nächsten Generation Mitte der 2010er Jahre auf den Markt kamen, nutzten sie eine oder mehrere externe Tracking-Kameras. Spezielle Bewegungsverfolgungslichter am Headset sagten der Kamera genau, wo sich das Headset in Bezug darauf befand. Mit etwas cleverer Mathematik könnten diese Daten dann in eine sehr genaue Bewegungsverfolgung im 3D-Raum umgewandelt werden. So bieten Premium-VR-Headsets „sechs Freiheitsgrade“, auch bekannt als 6DoF.
Quest bewegt den Kamerasensor auf das Headset selbst und platziert sie in diesem Fall an strategischen Stellen auf dem Gerät. Andere Headsets können sogar noch mehr Kameras verwenden, um die Genauigkeit zu verbessern. Diese vier Kameras lassen den Quest die reale Welt um Sie herum betrachten und bestimmen, wo sich Ihre Position in diesem Raum befindet.
Dadurch kann die Quest eigenständig und tragbar sein. Es ist auch die Funktion, die das Hand-Tracking mit dem Oculus überhaupt erst möglich macht..
Die Standard-Oculus Touch-Controller
Um zu verstehen, was das Oculus-Handtracking so beeindruckend macht, müssen wir mit den eher banalen physischen Controllern beginnen, die mit dem Oculus Quest geliefert werden. Jeder wird von internen Sensoren und speziellen Bewegungsverfolgungsmarkern vollständig bewegungsverfolgt, die den integrierten Kameras des Quest mitteilen, wo sich die Controller relativ zum Headset befinden.
Wenn Sie die Touch-Controller in VR halten, werden sie mit unheimlicher Genauigkeit verfolgt. Mithilfe der Griff- und Auslösetasten auf dem Controller kann die VR-Software ein überzeugendes Erlebnis beim Greifen und Manipulieren von Gegenständen schaffen. Dies wird in Spielen wie Half-Life Alyx und The Climb sehr effektiv genutzt, wo das Greifen von Gegenständen in der VR-Welt ein zentraler Bestandteil des Gameplays ist.
Die Touch-Controller bieten auch haptisches Feedback dank Geräten, die als „lineare Aktuatoren“ bezeichnet werden und physische Gefühle wie Anstoßen, Vibrationen und andere Berührungsempfindungen erzeugen können. Thumbsticks und Schaltflächen bieten auch eine vertraute Möglichkeit, sich in einem VR-Raum zu bewegen, wenn Sie sich in Ihrem realen Raum nicht physisch bewegen können.
Der Hauptnachteil davon im Vergleich zum Hand-Tracking ist, dass Sie Haken für die Hände haben. Sie können mit Ihren virtuellen Händen einfache Kneifbewegungen ausführen, aber das ist der Umfang. Es fühlt sich nicht wie eine große Einschränkung an, wenn Spiele um die Controller herum entwickelt werden, aber Hand-Tracking eröffnet ein Spektrum neuer Möglichkeiten in VR.
Was Oculus Hand-Tracking macht
Wenn die Handverfolgung aktiviert ist, sehen Sie eine genaue Darstellung Ihrer echten Hände in der VR-Welt. Jede Bewegung Ihrer Finger oder Ihres Handgelenks wird in ihren virtuellen Doppelgängern reflektiert.
Handtracking ist keine Beta-Funktion von Quest mehr. Es ist jetzt in das Betriebssystem und viele First-Party-Quest-Anwendungen integriert. Der erste große Vorteil hier ist, dass Sie sich nicht die Mühe machen müssen, die Touch-Controller anzulegen, wenn Sie nur schnell Ihren Quest anziehen und einen Film in VR ansehen oder im App Store stöbern möchten. Mit nur Ihren Händen können Sie auf Systemmenüs zugreifen und mühelos navigieren.
Jetzt, da Hand-Tracking eine offizielle Funktion von Quest ist, können App-Entwickler von Drittanbietern es zu ihren Apps hinzufügen. Es gibt bereits eine Reihe von Apps, die die Oculus-Handtracking-Funktion hervorragend nutzen, aber wir sind sicher, dass Entwickler noch viele weitere aufregende Möglichkeiten finden werden, wie direktes Handtracking das VR-Erlebnis verändern kann
So funktioniert Oculus Hand-Tracking
Die Ergebnisse des Hand-Trackings sind ziemlich erstaunlich, aber wie funktioniert es eigentlich? Offensichtlich wird Oculus nicht die genauen Details ihrer proprietären Lösung veröffentlichen, aber wir kennen die beteiligten Technologien und Prinzipien.
Erstens sind die Bordkameras unerlässlich, damit die Handverfolgung funktioniert. Sie liefern nicht nur stereoskopische Tiefeninformationen, sondern auch visuelle Daten zur Verarbeitung durch maschinelles Sehen. Was ist Bildverarbeitung? Es ist ein Zweig der künstlichen Intelligenz, insbesondere ein Bereich, der als maschinelles Lernen bekannt ist. Es ist dieselbe Technologie, mit der die Kamera-App Ihres Telefons schnell Gesichter auf einem Foto erkennen kann.
Im Wesentlichen muss die Software lernen, was in den von der Kamera gelieferten Bilddaten eine Hand ist und was nicht. Dies geschah wahrscheinlich, indem der Software Tausende und Abertausende von Händen in verschiedenen Umgebungen gezeigt wurden, bis sie zuverlässig eine schnelle und effektive Methode finden konnte, sie von allem anderen in Ihrem Zimmer zu unterscheiden.
Sobald die Software genaue virtuelle Modelle Ihrer Hände in Echtzeit erstellen kann, können App-Entwickler sie für alles verwenden, was ihnen einfällt. Du kannst jetzt Objekte in VR präzise manipulieren!
Von Hand aufgezeichnete Erfahrungen, die es wert sind, ausprobiert zu werden
Wenn Sie eine Oculus Quest besitzen, können Sie die Oculus-Handtracking-Funktion ausprobieren, ohne eine bestimmte App kaufen zu müssen. Wie oben erwähnt, funktioniert es in der Hauptumgebung von Quest sowie in einigen Apps von Erstanbietern. Wenn es um Erfahrungen von Drittanbietern geht, gibt es einige, die es wert sind, hervorgehoben zu werden.
The Line ist ein narratives Erlebnis für 4,99 US-Dollar, das auch als perfekte Tech-Demo für Handtracking dient. Es erzählt die Geschichte einer maßstabsgetreuen Modellstadt, die auf Uhrwerk und Gleisen läuft.
Unser Held Pedro ist in Rosa verliebt, aber er kann seinem Schicksal nicht entkommen. Bis eines Tages etwas Neues passiert. Sie interagieren mit ihrer maßstabsgetreuen Modellwelt, indem Sie mit Ihrer Hand an Knöpfen drehen, Hebel ziehen und mit allem herumspielen, was Sie können. Es ist eine lineare, kurze Erfahrung, kann aber in etwa 15 Minuten auf sehr unterhaltsame Weise Hand-Tracking zeigen.
Waltz of the Wizard (9,99 $) ist ein weiteres hervorragendes Schaufenster der Technologie. Sie können Ihre Hände verwenden, um Zauber zu wirken und mit fast allem in der VR-Welt um Sie herum zu interagieren. Wenn du schon immer die Fantasie ausleben wolltest, ein Zauberer zu sein, der Blitze aus seinen Händen schießen kann, ist dies das richtige Spiel für dich!
Was hältst du von Handtracking auf Quest? Hast du es versucht? Welche Spiele würdet ihr empfehlen? Teilen Sie Ihre Erkenntnisse in den Kommentaren.