Forscher der Tel Aviver Universität haben zusammen mit Facebook eine Technologie entwickelt, die aus Selfies animierte Videos macht, in denen die abgebildete Person Gesichtsausdrücke einer dritten Person annimmt. Die Technologie könnten helfen, die Mimik von VR-Nutzern zu erkennen und auf Avatare in Social-VR-Apps zu übertragen.
Als Grundlage für die Gesichtsausdrücke nutzt die Technologie das Video einer dritten Person (siehe Gif). Die Algorithmen analysieren die Mimik im Video und übertragen sie anschließend auf die Fotografie. Dabei wird das Bild an den entscheidenden Stellen im Gesicht so manipuliert, dass der gewünschte Gesichtsausdruck entsteht.
Die Technologie kann auch Gesichtsregionen zeigen, die im Originalbild verborgen sind. Ein Beispiel sind die Zähne, die vom Video auf die Fotografie übertragen werden. In einem letzten Schritt werden der Animation Details hinzugefügt, die für einen glaubhaften Gesamteindruck sorgen, wie etwa Hautfalten, die beim Lächeln entstehen. Die Technologie funktioniert selbst mit gemalten Porträts.
PREMIUM-INHALT
Dieser Inhalt ist für unsere Abonnenten sichtbar.