Wie Face Tracking VR verbessern könnte

Inhaltsverzeichnis:

Wie Face Tracking VR verbessern könnte
Wie Face Tracking VR verbessern könnte
Anonim

Key Takeaways

  • Gesichtsverfolgungssysteme könnten die virtuelle Realität viel ausdrucksstärker machen.
  • HTC hat kürzlich eine neue Reihe von Trackern für seine Vive-Virtual-Reality-Headsets angekündigt, darunter einen, der Gesichtsausdrücke und Mundbewegungen verfolgt.
  • Der VIVE Facial Tracker kann bis zu 38 verschiedene Gesichtsbewegungen verfolgen, und wenn er mit dem VIVE Pro Eye gekoppelt ist, können Benutzer die vollständige Gesichtsverfolgung aktivieren.
Image
Image

Neue Gesichtsverfolgungssysteme für Virtual-Reality-Headsets könnten die Art und Weise, wie Benutzer kommunizieren, verändern, sagen Experten.

HTC hat kürzlich eine neue Reihe von Trackern für seine Vive-Virtual-Reality-Headsets angekündigt, darunter einen, der Gesichtsausdrücke und Mundbewegungen verfolgt. Es ist Teil eines wachsenden Trends, VR reaktionsschneller und interaktiver zu machen.

"Realistischere Erfahrungen zu machen ist wichtig, um VR vollständig von einer Neuheit oder einem Nischentool zu einer weit verbreiteten Verbrauchertechnologie zu überführen", Ellysse Dick, Policy Analyst bei der Information Technology and Innovation Foundation, einem Think Tank für Wissenschaft und Technologiepolitik, sagte in einem E-Mail-Interview.

"Es wird sinnvollere Interaktionen und reichh altigere Erfahrungen ermöglichen, die den Markt in Bereichen wie Bildung, Zusammenarbeit am Arbeitsplatz und Unterh altung erweitern werden."

Ich sehe zu, wie ich dich beobachte

HTC sagt, dass der VIVE Facial Tracker bis zu 38 verschiedene Gesichtsbewegungen verfolgen kann, und wenn er mit dem VIVE Pro Eye gekoppelt ist, können Benutzer die vollständige Gesichtsverfolgung aktivieren.

Das Gerät hat eine Reaktionszeit von weniger als 10 Millisekunden und verwendet zwei Kameras, um die Bewegungen der unteren Gesichtshälfte zu erfassen. Aufgrund der Infrarotbeleuchtung kann es auch in schwach beleuchteten Umgebungen verfolgen. Laut VIVE wird der Facial Tracker am 24. März für 129,99 $ erhältlich sein.

"Ein Hauch von finsterem Blick", schreibt das Unternehmen auf seiner Website. "Ein Grinsen. Ein Lächeln. VIVE Facial Tracker erfasst Ausdrücke und Gesten mit Präzision durch 38 Mischformen auf Lippen, Kiefer, Zähnen, Zunge, Wangen und Kinn."

Aber der Facial Tracker funktioniert nicht mit allen Headsets von HTC. Das Unternehmen sagt, dass es mit der professionellen Vive Pro-Linie kompatibel sein wird, aber nicht mit dem verbraucherorientierten Vive Cosmos.

Andere Unternehmen integrieren bereits Gesichtsverfolgung in Virtual-Reality-Headsets. Das Magic Leap One und Microsofts HoloLens verfügen beide über Ausdrucksverfolgung.

Ein radikaler Sprung

Gesichtsverfolgung könnte in Zukunft zu radikalen Veränderungen in der virtuellen Realität führen, sagen Experten. Beispielsweise könnte ein Headset Ihre Reaktion auf Schnittstellen verstehen und sie entsprechend anpassen, sagte Jared Ficklin, ein Pionierentwickler von Software-Benutzerschnittstellen und leitender Kreativtechnologe bei argodesign, in einem E-Mail-Interview. Oder eine zukünftige Version könnte überwachen, was Sie gerade ansehen.

"Stellen Sie sich vor, Sie betrachten ein Objekt und machen eine kleine Geste, um es auszuwählen, anstatt zu versuchen, einen Cursor herumzulenken", sagte er.

"Oder die Verwendung von Stimme in Kombination mit Blick und Gestik ermöglicht eine sehr natürliche Interaktion. Stellen Sie das hier. Man kann sich auch die andere Richtung und die Entwicklung kleinerer, weniger sozial visueller Hinweise vorstellen."

Das Zusammenpressen der Wangen oder das Ziehen der Mundwinkel könnte auf Interaktionen wie „Auswählen“und „Zurück“abgebildet werden, was es einigen ermöglicht, in der Öffentlichkeit zu rechnen, ohne die Aufmerksamkeit auf die Tatsache zu lenken, dass Sie in der Öffentlichkeit rechnen, sagte Ficklin.

"Wenn Sie einen tragbaren mobilen Computer verwenden, insbesondere in Form einer Brille, wird dieses gesellschaftlich akzeptierte oder sozial versteckte Computing sehr wichtig."

Das Gesicht entriegelt die Kommunikation

Das Lesen von Ausdrücken ist der Schlüssel zur Kommunikation, sowohl im virtuellen als auch im wirklichen Leben. Das menschliche Gesicht erzeugt 21 grundlegende Gesichtsausdrücke, die von VR gelesen werden könnten, sagte Körpersprachenexpertin Patti Wood in einem E-Mail-Interview. Von den 36 Muskeln, die für Gesichtsausdrücke verwendet werden, wird nur ein Bruchteil davon beim Lächeln verwendet, Es wird sinnvollere Interaktionen und reichh altige Erfahrungen ermöglichen, die den Markt in Bereichen wie Bildung, Zusammenarbeit am Arbeitsplatz und Unterh altung erweitern werden.

"Die genaue Anzahl der Muskeln hängt davon ab, wie Forscher ein Lächeln definieren", sagte Wood. „Die meisten Experten sagen, dass sechs Muskelpaare direkt am Lächeln beteiligt sind.“

Facial Expression Tracking könnte die VR-Erfahrung für Benutzer radikal verändern, insbesondere für diejenigen, die Avatare während einer Telepräsenzsitzung verwenden, in der Sie mit anderen Leuten chatten, sagte Ficklin.

"Es dreht sich alles um die Bedeutung der nonverbalen Kommunikation", sagte er.„Das Zuordnen von Gesichtsausdrücken zum Avatar des Benutzers bedeutet, dass diejenigen, die sich mit ihnen in einem Meeting befinden, mehr von den nonverbalen Kommunikationskanälen haben, die wir von einem persönlichen oder Video-Chat erwarten. Sie können sehen, wie die Person reagiert.“

Empfohlen: