AR in VR: So läuft Google Lens in Virtual Reality

26.08.2019 Tomislav Bezmalinovic

Google Lens verrichtet hervorragende Arbeit in der physischen Welt. Weshalb sollte sie das nicht auch in der Virtual Reality tun?

Mit Google Lens erkennt die Smartphone-Kamera Objekte und zeigt automatisch eine passende Suchanfrage an, sodass man prompt nützliche Informationen zum betreffenden Motiv erhält. Das funktioniert mit Bauwerken, Hunderassen, Kunstwerken und vielem mehr: Rund eine Milliarde Objekte soll die KI-gestützte App bereits identifizieren können.

2019 erhielt Google Lens neue Funktionen: So erkennt die App Texte aus der physischen Welt und extrahiert sie automatisch, sodass sie digital geteilt werden können.

Besonders beeindruckend ist die neue, visuelle Echtzeitübersetzung, die fremdsprachige Texte auf Objekten durch Text in der gewünschten Zielsprache ersetzt. Zum Beispiel auf Zugtickets, wie im folgenden Video ganz rechts zu sehen ist.

Wie in RR so in VR

Der VR-Entwickler und Twitter-Nutzer Phasedragon wollte diese Funktion in Virtual Reality nutzen und implementierte sie kurzerhand selbst, wie in einem bei Twitter veröffentlichten Video zu sehen ist.

So I got google lens working in VR 👀 pic.twitter.com/rFCS7nUgbx

— Phasedragon (@Phasedragoon) August 22, 2019

Bitte dieses Feld leer lassen

XR-Briefing
Hol dir die wichtigsten News aus der Zukunft der Computer wöchentlich bequem ins E-Mail-Postfach.

• VR, AR, KI & mehr
• kostenlos
• jederzeit kündbar

Datenschutzerklärung

Prüfe deinen Posteingang oder Spam-Ordner, um dein Abonnement zu bestätigen.

Im Video hält sich Phasedragon innerhalb eines virtuellen koreanischen Bahnhofs auf. Mit dem Programm Sparkocam filmte der Entwickler in VR und exportierte den Kamerafeed für Google Lens, während das Programm selbst mit Hilfe von Android Studio lief.

Das Experiment gelang: Google Lens macht keinen Unterschied zwischen real und digital und übersetzt Text in der Virtual Reality vom Koreanischen ins Englische. Phasedragon experimentierte davor mit Microsoft Translate, war mit dem Resultat aber nicht sonderlich zufrieden.

Titelbild: Phasedragon, Quelle: 9to5Google, Via: Road to VR

Weiterlesen zum Thema Google-Technologie:

• Google rollt erste AR-Tiere in die Suche aus
• Neue Sprachsynthese: Google-KI klingt jetzt fast wie ein Mensch
• Das sind fünf spannende KI-Apps aus Googles Forschungslaboren

Hinweis: Links auf Online-Shops in Artikeln können sogenannte Affiliate-Links sein. Wenn ihr über diesen Link einkauft, erhält MIXED.de vom Anbieter eine Provision. Für euch verändert sich der Preis nicht.