Apple & Photogrammetrie: So gut funktioniert "Object Capture"
Auf der WWDC 2021 stellte Apple eine eigene Schnittstelle für Photogrammetrie vor. "Object Capture" liefert laut ersten Experimenten hochwertige Ergebnisse und könnte in Zukunft tolle 3D-Scans mit dem iPhone ermöglichen - auch ohne Lidar.
Mit Photogrammetrie lassen sich erstaunlich realistische digitale 3D-Duplikate von Objekten und Orten erstellen. Hierbei wird der Gegenstand des Interesses zuerst aus so vielen Perspektiven wie möglich fotografiert. Eine Software vernäht die Fotografien anschließend in einem rechenintensiven Prozess zu einem detaillierten 3D-Modell samt Textur.
Brauchte man früher hochwertige Kameras, spezielle Photogrammetrie-Programme und viel Rechenleistung, könnte in ein paar Jahren schon ein Smartphone reichen. Mit dem Lidar-Scanner des iPhone 12 Pro (Max) zum Beispiel gelingen schon heute tolle 3D-Scans.
___STEADY_PAYWALL___Object Capture - schnell und gut, aber nur auf Macs
Apples Object Capture soll die Hürden für hochwertige Photogrammetrie weiter senken. Mit der Software können Entwickler Apps mit einem Apple-eigenen, optimierten Photogrammetrie-Prozess entwickeln.
Die Schnittstelle richtet sich an Entwickler und Unternehmen, die relativ unkompliziert 3D-Duplikate physischer Gegenstände erstellen wollen und unterstützt derzeit nur Macs. Gut möglich, dass Object Capture in Zukunft den Weg aufs iPhone und iPad findet, damit für Endverbraucher interessant wird und zur Demokratisierung hochwertigen 3D-Scannings beiträgt.
Erste Tests der Schnittstelle deuten auf eine besonders hochwertige und schnelle Photogrammetrie-Lösung.
Lidar-Scanner ist optional
Das Apple-Blog 9to5Mac hat Object Capture ausprobiert. Laut Apple kann die Schnittstelle Fotos einer Digitalkamera, Drohne oder eines iPhones oder iPads verarbeiten. Ein Lidar-Scanner wird nicht benötigt. Der Redakteur nutzte ein iPhone 12 Pro Max mit iOS 15-Beta und fotografierte damit eine Teeverpackung von allen Seiten.
Etwa 30 Fotografien reichen aus. Für beste Ergebnisse empfiehlt Apple mehr Fotografien, optimale Lichtbedingungen, ein Stativ und eine Plattform, die das Objekt dreht, ohne seine räumliche Position zu verändern. Der Redakteur verzichtete für seinen Test auf diese Hilfsmittel.
Object Capture ist ein MacOS 12-Feature. Das neue Betriebssystem mit den Namen Monterey erscheint im Herbst. Da es demzufolge noch keine MacOS-App gibt, die Object Capture unterstützt, kompilierte der Tester eine eigene App basierend auf Anweisungen und Beispielen Apples.
Gute Ergebnisse in kurzer Zeit
In einem nächsten Schritt übertrug der Redakteur die Bilder auf einen Mac und ließ sie von der App zu einem 3D-Modell zusammenfügen.
Laut Apple wird ein Intel-Mac mit 15 Gigabyte Arbeitsspeicher und einer AMD-Grafikkarte mit mindestens 4 Gigabyte Videospeicher benötigt oder aber ein beliebiger Mac mit M1-Chip. Der Tester nutzte ein neues Macbook Air.
Das Gerät vernähte 40 Fotos in weniger als vier Minuten zu einem 3D-Objekt in Apples proprietärem AR-Dateiformat USDZ. Mit dem Fotografieren nahm der Prozess circa zehn Minuten in Anspruch. Das Resultat ist in folgendem Video zu sehen. Die rechte Verpackung ist echt, die linke digital.
Twitter-Stimmen fallen positiv aus
Auf Twitter gibt es ebenfalls schon Beispiele von Testern und Entwicklern. Der 3D-Scanning-Experte Jonathan Stephens digitalisierte mit Object Capture einen Turnschuh. Geometrie und Texturen wurden detailgetreu eingefangen.
Following in @MikkoH's footsteps...I modeled my current favorite running shoe with #Objectcapture. Unlike Mikko, I just did a collection pattern around the shoe while it sat on my dining table (so no bottom). This is so easy! Should I make a tutorial video? @Apple @Nike #VR pic.twitter.com/rEaaLAg0el
— Jonathan Stephens (@jonstephens85) June 9, 2021
Ein Twitter-Nutzer mit dem Namen Chait digitalisierte einen Hut, erneut mit gutem Ergebnis.
MIXED.de ohne Werbebanner- Zugriff auf mehr als 9.000 Artikel
MIXED.de ohne Werbebanner- Kündigung jederzeit online möglich
Here is my take on #ObjectCapture
I'm impressed by the seamless stitching of the texture given repeating patterns. https://t.co/BfYmf7enXZ— Chait (@chetu3319) June 9, 2021
Der CEO der weltgrößten 3D-Modellbibliothek Sketchfab sammelt derweil Beispiele für 3D-Scans, die mit Object Capture erstellt wurden. Eines davon ist dieser Bonsai oder die folgende Ananas.
Great to see the first @apple object captures landing on @Sketchfab thanks to our new #usdz support.
Here is a pineapple by @MikkoH, you can explore the diffuse, normal, roughness and AO maps: https://t.co/edUGLRAyn8#WWDC2021 pic.twitter.com/mJPJSFkEFO
— alban denoyel (@albn) June 9, 2021
Entwickler Ethan Saadia hat bereits eine MacOS-App mit grafischer Benutzeroberfläche entwickelt, die die Photogrammetrie mit Object Capture vereinfacht und automatisiert. Wenn MacOS 12 und iOS 15 im Herbst erscheint, sollten dem 3D-Scanning mit Apples neuer Schnittstelle nichts mehr im Wege stehen.
I just created a graphical interface for Object Capture! It’s a Mac app that lets you select a folder of images and create a #3D model with one click. At the end, save to a #USDZ file. More details coming later today!#WWDC21 #realitykit #objectcapture #1scanaday #AR #ARKit pic.twitter.com/NhuJIcpYXi
— Ethan Saadia @ #WWDC21 (@EthanSaadia) June 10, 2021
Eine ausführlichere Video-Erklärung von Object Capture samt weiterführenden Ressourcen gibt es auf Apples Entwicklerseite.
Quelle: 9to5Mac, Titelbild: rom4in
Weiterlesen über Apple AR:
- Apple AR-Brille: Steuerung per Mikrogestik?
- Apple AR: Tausende 3D-Modelle jetzt frei verfügbar
- iPhone 12 Pro: Wie Apple AR alltäglich machen will
Hinweis: Links auf Online-Shops in Artikeln können sogenannte Affiliate-Links sein. Wenn ihr über diesen Link einkauft, erhält MIXED.de vom Anbieter eine Provision. Für euch verändert sich der Preis nicht.
