Startup zeigt präzises Fingertracking und macht die Hand zum Controller

Die eigenen Hände sind in Virtual Reality das natürlichste Interface, 3D-Controller ein praktisches Werkzeug. Das US-Startup Perceptive IO kombiniert das Beste aus beiden Welten und macht aus der Hand einen Controller.

Grundlage für das neue Interface ist ein sehr schnelles, präzises und robustes Verfahren für die Hand- und Fingererkennung. Die Entwickler geben an, dass das komplette System mit bis zu 1000 Bildern pro Sekunde laufen kann bei einer sehr geringen Latenz. Das Tracking der Hände und Finger übernimmt eine Tiefenkamera.

Laut den Entwicklern - und so wird es im Video unter dem Artikel demonstriert - werden selbst feinste Fingerbewegungen ohne sichtbare Verzögerung erfasst. Das System erkennt die linke und rechte Hand einzeln und kann sie auch bei komplexen Handstellungen verlässlich auseinanderhalten. Dabei unterstützt ein künstliches neuronales Netz, das zuvor mit 3D-Daten von Händen trainiert wurde, die miteinander und mit Objekten interagieren. Selbst wenn sich die Hände oder Finger gegenseitig berühren und verdecken, soll das Tracking ohne Aussetzer laufen.