Gehörlose mit AR verstehen: Diese KI übersetzt Fingersprache

Künstliche Intelligenz und Augmented Reality in Kombination könnten eines Tages die Kommunikation zwischen Hörenden und Gehörlosen erleichtern. Ein Student hat eine App entwickelt, die in Echtzeit Gesten des Fingeralphabets erkennt und übersetzt.

Ricardo Santana studiert Luft- und Raumfahrttechnik an der Technischen Universität Delft und beschäftigt sich dort unter anderem mit KI-Technologie. In einem seiner Forschungsprojekte hat Santana eine KI auf die Erkennung von Zeichen aus dem nordamerikanischen Fingeralphabet trainiert.

In einem Video zeigt er das Ergebnis seiner Arbeit. Er buchstabiert seinen Namen allein durch Gesten. Die KI erkennt die Zeichen und zeigt den betreffenden Buchstaben über der Hand an.