Key Takeaways
- Forscher haben einen Mechanismus entwickelt, um VR-Avatare durch Gesichtsausdrücke zu steuern.
- Die Forscher fanden heraus, dass Gesichtsausdrücke weitaus eindringlichere Erfahrungen hervorriefen.
-
Die Technik kann dazu beitragen, VR für Menschen mit Behinderungen zugänglich zu machen.
Nachdem die Biometrie revolutioniert wurde, sind Gesichter bereit, eine andere Technologie zu beleben: Virtual Reality (VR).
In einer kürzlich durchgeführten Studie verwendete ein internationales Forscherteam aus Australien, Neuseeland und Indien gängige Gesichtsausdrücke wie ein Lächeln und ein Stirnrunzeln, um in VR-Umgebungen zu interagieren und bestimmte Aktionen auszulösen, mit überraschenden Ergebnissen.
„Insgesamt haben wir erwartet, dass die Handheld-Controller besser abschneiden, da sie eine intuitivere Methode sind als Gesichtsausdrücke“, bemerkte Professor Mark Billinghurst von der University of South Australia, einer der an dem Experiment beteiligten Forscher, in a Pressemitteilung. „Die Leute berichteten jedoch, dass sie sich stärker in die VR-Erlebnisse eintauchen, die durch Gesichtsausdrücke gesteuert werden.“
Intuitives Eintauchen
Die Forscher unter der Leitung des Forschers Dr. Arindam Dey von der University of Queensland, der mit Prof. Billinghurst am australischen Forschungszentrum für interaktive und virtuelle Umgebungen zusammenarbeitet, argumentierten, dass die meisten VR-Schnittstellen physische Interaktionen mit tragbaren Controllern erfordern.
In ihrer Arbeit stellen die Forscher fest, dass sie die Mimik einer Person verwenden wollten, um Objekte in VR zu manipulieren, ohne einen Handheld-Controller oder ein Touchpad zu verwenden. Sie entwickelten einen Mechanismus, um verschiedene Gesichtsausdrücke, darunter Wut, Freude und Überraschung, mit Hilfe eines Elektroenzephalogramm-Headsets (EEG) zu identifizieren.
Zum Beispiel wurde ein Lächeln verwendet, um den Befehl zum Bewegen des virtuellen Avatars des Benutzers auszulösen, während ein Stirnrunzeln einen Stoppbefehl auslöste und ein Zusammenpressen verwendet wurde, um eine vordefinierte Aktion auszuführen, anstatt einen Handheld-Controller zur Steuerung zu verwenden der Avatar, erklärte Prof. Billinghurst in der Pressemitteilung.
Als Teil der Forschung entwarf die Gruppe drei virtuelle Umgebungen, zwei fröhliche und beängstigende und eine dritte neutrale. Dadurch konnten die Forscher den kognitiven und physiologischen Zustand jedes Teilnehmers messen, während er in jedes der drei Szenarien eingetaucht war.
In der fröhlichen Umgebung lächelten die Teilnehmer, um sich mit zusammengepresstem Kiefer durch einen Park zu bewegen, um Schmetterlinge zu fangen, und runzelten die Stirn, um anzuh alten. In ähnlicher Weise wurden in der gruseligen Umgebung dieselben Ausdrücke verwendet, um durch eine unterirdische Basis zu navigieren, um Zombies zu erschießen, während die Gesichtsausdrücke in der neutralen Umgebung den Benutzern halfen, sich durch eine Werkstatt zu bewegen und verschiedene Gegenstände aufzuheben.
Die Forscher stellten dann die neurologischen und physiologischen Auswirkungen der Interaktion des Benutzers in den drei VR-Umgebungen anhand von Gesichtsausdrücken zusammen und verglichen sie mit Interaktionen, die über häufig verwendete Handheld-Controller durchgeführt wurden.
Prof. Billinghurst bemerkte, dass die Forscher am Ende des Experiments zu dem Schluss kamen, dass es zwar harte Arbeit für das Gehirn ist, sich nur auf Gesichtsausdrücke in einer VR-Umgebung zu verlassen, es den Teilnehmern jedoch ein intensiveres und realistischeres Erlebnis bietet als die Verwendung von Handheld-Controllern.
Eine bloße Spielerei?
Die Forscher behaupten, dass die Interaktion mit VR durch Gesichtsausdrücke nicht nur eine neuartige Möglichkeit bietet, VR zu nutzen, sondern die Technik sie auch zugänglicher machen wird. Durch den Verzicht auf Handheld-Controller werden Menschen mit Behinderungen, von Menschen mit Motoneuronerkrankungen bis hin zu Amputierten, endlich in der Lage sein, VR zu erleben.
Auch wenn sie daran arbeiten, es benutzerfreundlicher zu machen, schlagen die Forscher vor, dass die Technologie auch zur Ergänzung von Handheld-Controllern verwendet werden kann, insbesondere für VR-Umgebungen, in denen Gesichtsausdrücke eine natürlichere Form der Interaktion sind.
"Der größte Teil der menschlichen Kommunikation besteht eigentlich aus Körpersprache [und] mikrofeinen Gesichtsausdrücken, die uns oft nicht bewusst sind, daher kann eine korrekte Gesichtsverfolgung virtuelle soziale Interaktionen sicherlich auf eine ganz neue Ebene heben." Lucas Rizzotto, unerschrockener YouTuber und YouTuber, sagte Lifewire per E-Mail.
Rizzotto, dessen berühmteste Kreation eine VR-Zeitmaschine ist, glaubt, dass die Gesichtsverfolgung definitiv eine Rolle spielt, wenn es um soziale VR und Augmented Reality (AR) und das Metaversum geht, obwohl er Bedenken hat, dass dies zunimmt Mainstream-Akzeptanz.
"Was die reine Steuerung von Erfahrungen mit deinem Gesicht betrifft, bin ich sicher, dass es hier einige kreative Möglichkeiten gibt, wenn es um Kunst und Zugänglichkeit geht", meinte Rizzotto. "Aber es könnte auch leicht nur eine Spielerei sein, wenn wir so viele zuverlässigere Eingabeformen haben."
