iPhone 13 Lidar-Videos aus "Cyberpunk Shibuya" faszinieren auch William Gibson

iPhone 13 Lidar-Videos aus

Der Foto- und Videokünstler Keijiro Takahashi demonstriert sein "AR-fähiges" Videoformat samt dazugehöriger App mit einer beeindruckenden Cyberpunk-Szene aus dem Tokioter Stadtteil Shibuya. William Gibson findet das gut.

Anzeige
Anzeige

Mit den Fortschritten bei Computer Vision und kompakter Lidar-Sensorik wächst das 3D-Verständnis von mobilen Endgeräten wie Smartphones. Die Endvision der Technologie ist, dass man eines Tages ganze 3D-Szenen so einfach und qualitativ hochwertig filmen oder scannen kann, wie es heute mit 2D-Fotos und -Videos möglich ist.

Wir erinnern uns: Die ersten Smartphone-Kameras wie das Nokia 7650 boten gerade mal bis zu 0,3 Megapixel. Videoaufnahmen waren undenkbar. Heute machen die besten Smartphone-Kameras mit KI-Fotografie professionellen Kameras Konkurrenz - bei Fotos und Videos.

Ausflug ins Cyberpunk-Shibuya

Das Potenzial dieser AR-fähigen Clips zeigt Takahashi anhand selbstgedrehter Videos im Tokioter Elektrostadtteil Shibuya, die er mit Kamera und Lidar-Sensor im iPhone 13 Pro Max filmte, in Unity importierte und dort dann Spezialeffekte auf die 3D-Daten legte. Das Ergebnis erinnert an eine gefilmte Szene aus einem Cyberpunk - sorry, Metaverse - Szenario.

Video: Keijiro Takahashi

Der größte Nachteil der aktuellen Lidar-Technologie im iPhone 13 Pro Max ist laut Takahashi die Reichweitenbegrenzung auf circa fünf Meter, die im Video gut zu erkennen ist - dort endet der visuelle Effekt. Er denkt über eine KI-Erweiterung nach, die auf Basis der exakten Lidar-Messungen vorne die 3D-Daten jenseits der Fünf-Meter-Marke schätzt.

Video: Keijiro Takahashi

Für Entwickler:innen: Die Bibcam-App bekommt ihr unter Open Domain-Lizenz kostenlos bei Github, ebenso die Erweiterung für visuelle AR-Effekte Bibcam Vfx. Weitere Videobeispiele und Informationen zu Takahashis Projekten findet ihr auf seiner Webseite.

Apropos Cyberpunk: Bei Twitter teilte der Sci-Fi-Autor William Gibson das Shibuya-Video von Takahashi. Gibson prägte in seinem 1984 erschienenen Roman Neuromancer den Begriff Cyberpunk. Weitere interessante Sci-Fi-Bücher über VR, Cyberpunk und das Metaverse gibt es im verlinkten Artikel.

Weiterlesen über XR-Kunst: