Key Takeaways
- Forscher haben eine neue Art des Tippens in der virtuellen Realität vorgeschlagen, die KI verwendet, um die Vibrationen Ihrer Knochen zu analysieren.
- TapID könnte Menschen mit virtuellen Headsets auf jeder Oberfläche tippen lassen.
- Oculus entwickelt eine Technologie, um die Kameras seines Headsets zu verwenden, um deine Fingerbewegungen zu lesen, wenn du auf einer virtuellen Tastatur tippst.
Das Tippen mit einem Virtual-Reality-Headset könnte dank einer neuen Erfindung, die die Vibrationen in Ihren Knochen analysiert, einfacher werden.
Die Verwendung einer Tastatur in VR ist schwierig, weil Sie wirklich nicht sehen können, wo Ihre Finger landen. Das neue TapID-Gadget ist ein Armband, das zwei Bewegungssensoren trägt, von denen einer an jedem Handgelenk getragen wird, so Forscher, die kürzlich eine Abhandlung über ihre Erfindung veröffentlicht haben. Das Gerät erkennt Berührungen von jedem Finger des Benutzers einzeln.
„Im Moment verwenden die meisten VR-Benutzer ein Handheld-Controller-Gerät, das sich wie ein Laserpointer verhält“, sagte Scott Camball, ein Telekommunikations- und Telekonferenz-Enthusiast, in einem E-Mail-Interview. „Sie müssen auf jeden Buchstaben auf der virtuellen Tastatur zeigen, und das Abtippen kann sehr lange dauern. Dies funktioniert für Videospiele, aber nicht für arbeitsbezogene Aufgaben. TapID würde es Benutzern ermöglichen, einen virtuellen Arbeitsplatz mit großen Bildschirmen ohne die Masse eines Desktop-Computers zu haben.“
Lass deine Finger sprechen
TapID funktioniert, indem es die Vibrationen durch Ihr Skelettsystem mithilfe eines maschinellen Lernalgorithmus analysiert. In VR-Umgebungen könnten Benutzer mit ihren Fingern auf einer virtuellen Tastatur tippen oder mit virtuellen Objekten auf einer Oberfläche interagieren.
"TapID würde es Benutzern ermöglichen, einen virtuellen Arbeitsplatz mit großen Bildschirmen ohne die Masse eines Desktop-Computers zu haben."
„Wir schlagen vor, alle direkten Interaktionen in VR auf passive Oberflächen zu verlagern“, schreiben die Autoren in ihrem Artikel. „Im Vergleich zur Interaktion in der Luft bietet die Berührungsinteraktion auf Oberflächen den Benutzern die Möglichkeit, ihre Arme zwischen den Interaktionen auszuruhen, während sie gleichzeitig bei längeren Interaktionen physische Unterstützung bieten.“
Andere Möglichkeiten, VR einzugeben
Virtual-Reality-Unternehmen hoffen, die Benutzer produktiver zu machen, indem sie Alternativen zu den aktuellen Pointer-Systemen anbieten. Facebook Reality Labs entwickelt eine Technologie, um Kameras auf dem Oculus-Headset zu verwenden, um Ihre Fingerbewegungen zu lesen, wenn Sie auf einer virtuellen Tastatur tippen, wies Camball darauf hin.
„Der Vorteil davon ist, dass kein Armband benötigt wird, aber das Hand-Tracking von Facebook Labs funktioniert derzeit nicht gut genug für eine breite Akzeptanz“, fügte er hinzu.„Aktuell ist die Ergonomie des Tippens in VR ein großes Problem, da herkömmliche Eingabemethoden mit einer virtuellen Tastatur ermüdend sind, da ein Controller oder die Hände in das Blickfeld der Kamera geh alten werden müssen.“
Hersteller arbeiten auch an einem ringförmigen Gadget, das Benutzer der virtuellen Realität an ihren Finger stecken können, sagte Ivan Pleshkov, ein Entwickler bei ScienceSoft, einem Softwareentwicklungsunternehmen, in einem E-Mail-Interview. „Es ist noch bequemer zu tragen und intuitiver zu bedienen – der Benutzer kann Zeichen in die Luft zeichnen und ist nicht von der Kameraposition abhängig“, fügte er hinzu.
Eine weitere in der Entwicklung befindliche Eingabemethode ist eine virtuelle Tastatur, die Eye-Tracking verwendet. „Dank des Sensors, der die Position der Augen erfasst und verarbeitet, kann ein Benutzer Zeichen eingeben, indem er seinen Blick darauf ruht, um sie einzugeben“, sagte Pleshkov. „Es verspricht eine weniger ermüdende Erfahrung zu werden, obwohl die Tippgeschwindigkeit in Frage gestellt wird – die Methode erfordert eine gewisse Anpassung, um sie zu erhöhen.”
Die Verwendung einer echten Tastatur in VR ist eine Option, obwohl sie im Moment unhandlich ist. Die App Immersed für Oculus Quest ist ein gemeinsam genutzter virtueller Arbeitsbereich, der eine Möglichkeit bietet, eine physische Tastatur zu kalibrieren, damit Sie in VR tippen können. In einer auf Reddit veröffentlichten Demonstration demonstrierte Immersed-Gründer Renji Bijoy das Tippen mit 164 Wörtern pro Minute unter Verwendung der Funktion.
Einige Entwickler hoffen, dass die Sprachsteuerung besser sein könnte als jede Tastatur.
Ungeschickte Handsteuerungen schrecken neue VR-Benutzer oft ab, sagte Ottomatias Peura, Head of Growth bei Speechly, einem Unternehmen für Sprachsteuerungssoftware, in einem E-Mail-Interview. „Dies ist besonders problematisch in bestimmten VR-Umgebungen, die nur ein- oder zweimal verwendet werden können, wie z. B. Umgebungen für Immobilien oder Live-Musik“, fügte er hinzu.
Übung kann die Art und Weise verbessern, wie Benutzer Standard-Controller steuern, aber die Manipulation von VR durch Sprache ist noch besser, sagte Peura.
„Sprache ist auch in VR eine großartige Option, um die Benutzererfahrung zu verbessern, da sie die natürlichste Interaktionsmodalität für uns Menschen ist“, fügte er hinzu. „Während es mit aufgesetzter VR-Brille schwierig sein kann, mit dem linken Controller auf B zu klicken, ist es sehr intuitiv, ‚Tür öffnen‘zu sagen.“
