Facebook zeigt nahezu perfektes Handtracking

Handtracking ist eine große Herausforderung, sobald sich die Hände gegenseitig in die Quere kommen. Facebook scheint das Problem gelöst zu haben, wenn auch mit hohem technischen Aufwand. Die beim Verfahren gewonnenen Daten könnten dennoch VR-Brillen wie Oculus Quest 2 zugutekommen.

Im November zeigten die Forscher des Facebook Reality Labs (FRL), wie sie mit KI-Unterstützung das Tracking für die Oculus Quest 2 (Test) verbesserten: Megatrack (Monochrome Egocentric Articulated Hand-Tracking) liefert robustes Handtracking in nahezu allen Lichtverhältnissen.

Doch sobald zwei Hände miteinander oder mit Gegenständen interagieren, kommt das System nicht mehr hinterher. Denn diese Art der Interaktion geht mit der Verdeckung von einzelnen Fingern oder anderen Teilen der Hand einher.