In den letzten Jahren hat sich Hand-Tracking zu einer integralen Funktion von Virtual-Reality (VR)-Geräten entwickelt. Es ermöglicht Benutzern, ihre Hände als Eingabemethode zu verwenden, anstatt die herkömmlichen VR Controller zu verwenden. Diese Funktion eröffnet Entwicklern eine Vielzahl von Möglichkeiten und Herausforderungen, insbesondere im Hinblick auf die Benutzerfreundlichkeit. In diesem Artikel werden wir uns genauer mit dem Konzept des Hand-Trackings befassen und die unterstützenden VR-Brillen sowie deren Vor- und Nachteile untersuchen.
Hand-Tracking ermöglicht es Benutzern von VR-Geräten, Aufgaben und Aktionen in der virtuellen Umgebung durch einfache Handgesten auszuführen, wie z.B. das Zusammendrücken, Ziehen, Drücken oder Ziehen. Die präzise Verfolgung der Hände in der virtuellen Welt ist entscheidend für ein realistisches VR-Erlebnis. Ein vollständig artikuliertes Tracking-System und Hardware sind erforderlich, um die Position der Hände des Benutzers im virtuellen Raum in Bezug auf die reale Welt zu bestimmen und die Bewegungen der Finger und Gelenke so schnell und genau wie möglich zu erfassen. Dies ermöglicht natürliche Interaktionen und ein immersiveres Erlebnis.
Einige VR-Headsets unterstützen mittlerweile Hand-Tracking nativ. Beispiele dafür sind das HoloLens 2, Magic Leap 2, das Meta Quest 2/3, Meta Quest Pro und die Pico 4 Enterprise.
Magic Leap 2 verfügt über ein beeindruckendes diagonales Sichtfeld von 70°, eine dynamische Dimmfunktion und eine herausragende Leistung von 16 GB RAM
Die HoloLens 2 ist die zweite Generation der revolutionären Mixed-Reality-Brille von Microsoft. Sie wurde offiziell im Jahr 2019 eingeführt und bietet mehr Rechenleistung, bessere Sensoren, eine längere Akkulaufzeit und ein größeres Sichtfeld im Vergleich zum Vorgängermodell. Die HoloLens 2 verfügt über eine Eye-Tracking-Funktion, die es ermöglicht, die Augenbewegungen des Benutzers zu verfolgen. Anstelle von dedizierten Controllern wird die HoloLens 2 durch Gestensteuerung und Sprachbefehle bedient. Neue und intuitivere Handgesten ermöglichen eine einfache Bedienung von Inhalten.
Die Meta Quest 2 ist eine sehr beliebte eigenständige VR-Brille. Die Meta Quest 2 unterstützt auch Controller-freies Hand-Tracking. Mithilfe von maschinellem Lernen erkennt die Brille die Position der Finger und ermöglicht so die Steuerung von Objekten und Aktionen in der virtuellen Umgebung.
Die Pico 4 verfügt ähnlich wie die Meta Quest über die optionale Handtracking-Steuerung neben der Steuerung durch VR Controller.
Leap Motion ist ein kleines Gerät, das über USB an einen Computer angeschlossen oder vorne an VR Headsets montiert werden kann und es Benutzern ermöglicht, digitale Objekte mit Handgesten und Bewegungen zu manipulieren. Mit Ultraleap und der mitgelieferten SDK kann man VR Brillen ohne eingebautes Handtracking auf Handtracking aufrüsten.
Das Premium Headset von Varjo XR-3 hat Ultraleap bereits eingebaut um bestes Haqndtracking zu ermöglichen.
Die Quest 3 verfügt über ein verbessertes Handtracking-System. Das System verwendet Tiefensensoren, um die Position und Bewegung der Hände in 3D zu verfolgen. Das Handtracking bei der Quest 3 ist genauer und zuverlässiger als das der Vorgängermodelle. Es kann nun auch komplexere Handgesten erkennen, z. B. das Greifen und Loslassen von Objekten.
Es gibt drei Möglichkeiten, wie Benutzer mit der virtuellen Umgebung interagieren können: direkte Manipulation, Handstrahlen und Gestenerkennung.
Direkte Manipulation: Benutzer können mit ihren Händen auf Objekte in der VR-Umgebung zugreifen und mit ihnen interagieren. Diese Methode ermöglicht eine intuitive Steuerung, bei der Objekte realitätsgetreu reagieren. Benutzer können Objekte aufheben, Knöpfe drücken und Benutzeroberflächenkomponenten aktivieren, als ob sie mit einem Touchscreen interagieren würden.
Handstrahlen (lasern): Diese Methode ermöglicht es Benutzern, einen Strahl aus ihrer Hand zu erzeugen, um auf entfernte Objekte zuzugreifen. Durch Gesten können Benutzer Objekte in der Ferne greifen, drehen oder drücken. Möglicherweise spüren Benutzer zu Beginn oder während der Interaktion mit dem Objekt sogar haptisches Feedback.
Gestenerkennung: Bei dieser Methode analysiert das VR-Gerät die Hand- und Fingerhaltungen des Benutzers und löst entsprechende Reaktionen aus. Ein Beispiel dafür ist ein System, das es einem Benutzer ermöglicht, einen Screenshot zu machen, indem er die Spitzen seiner Daumen zu seinem Zeigefinger bringt, um eine quadratische Form zu erstellen, die das Durchsehen des Rahmens einer Kamera imitiert.
Es ist ratsam, Gesten in das Design einzubeziehen, wenn die inhärente Bedeutung einer Geste mit dem gewünschten Ergebnis übereinstimmt.
Intuitive Interaktion: Hand-Tracking ermöglicht es Benutzern, natürliche und intuitive Handgesten zur Steuerung von Objekten in der virtuellen Umgebung zu verwenden.
Erhöhte Immersion: Durch die Möglichkeit, die eigenen Hände in Echtzeit in der VR-Umgebung zu sehen, wird ein höheres Maß an Immersion erreicht.
Keine zusätzlichen Controller erforderlich: Mit Hand-Tracking entfällt die Notwendigkeit zusätzlicher Controller, was den Komfort und die Benutzerfreundlichkeit verbessert.
Begrenzte Funktionalität: Die Möglichkeiten der Interaktion sind beim Hand-Tracking im Vergleich zu herkömmlichen Controllern begrenzt. Komplexere Aktionen und Spiele erfordern möglicherweise weiterhin den Einsatz von Controllern.
Begrenzter Erfassungsbereich: Der Erfassungsbereich der Kameras für das Hand-Tracking ist kleiner als der Bereich, in dem die Controller erkannt werden. Benutzer müssen daher vorsichtiger sein, wie sie sich bewegen.
Sie sind interessierst in die Entwicklung einer Virtual Reality oder 360° Tour Anwendung? Sie haben vielleicht noch Fragen zum Budget und Umsetzung. Melden sie sich gerne bei mir.
Ich freue mich auf Sie
Clarence Dadson CEO Design4real
