Augmented Reality: Mit Hololens spielend einfach Klavier lernen

Augmented Reality: Mit Hololens spielend einfach Klavier lernen

Ein japanisches Startup arbeitet an einer App namens „Teomirn“ für Microsoft Hololens, mit der man spielend Klavierstücke lernen kann. 

Bevor man loslegen kann, muss Hololens das reale Klavier scannen. Ist das erledigt, wählt man aus einem Menü das Klavierstück, das man lernen möchte. Danach erscheint, durch die Linse der AR-Brille gesehen, das Hologramm eines Pianisten, der das Stück am eigenen Klavier vorspielt.

Seine Hände und Finger werden präzise wiedergegeben, sodass man deren Bewegungen genau studieren kann – soweit es das begrenzte Sichtfeld der Hololens zulässt. Den Körper des virtuellen Pianisten kann man wahlweise bis auf die Hände ausblenden, um sich ganz auf diese zu konzentrieren.

___STEADY_PAYWALL___

Wenn man das Klavierstück selbst üben will, wechselt man in den Unterrichtsmodus. Dann wird oberhalb der realen eine virtuelle Klaviatur samt Hände angezeigt. Von oben fließen grüne und blaue Streifen auf die Klaviertasten hinab. Grün steht für die linke Hand, Blau steht für die rechte Hand. Treffen die Streifen auf eine Klaviertaste, muss diese betätigt werden.

Lernen nach dem Guitar-Hero-Prinzip

Die Länge der Streifen macht deutlich, wie lange man die Taste gedrückt halten muss. Wer Musikspiele wie „Rock Band“ oder „Guitar Hero“ ausprobiert hat, kennt dieses Prinzip des Noten-Highways. Da auch die Hände des Pianisten eingeblendet sind, lernt man zugleich die korrekte Fingerstellung.

Einen Klavierlehrer und das Notenlesen wird die App nicht ersetzen können. Aber sie könnte den Klavierunterricht sinnvoll ergänzen oder Laien einen Eindruck vom Klavierspielen verschaffen. Laut den Entwicklern ist die App noch nicht reif für eine Veröffentlichung. Das Team sucht derzeit noch nach Partnern und Investoren, die das Projekt finanziell unterstützen.

Nvidia DLAA: Mit KI gegen kantige Computergrafik

Nvidia DLAA: Mit KI gegen kantige Computergrafik

VR-Ballett „kinesphere“: So habt ihr Roboter noch nie gesehen – Kritik

VR-Ballett „kinesphere“: So habt ihr Roboter noch nie gesehen – Kritik

Half_Dome_Prototypen_1_2_3

Oculus: „Facebooks VR-Dominanz wird nicht ewig dauern“

Neurograins: Die Zukunft des Gehirn-Computer-Interface?

Neurograins: Die Zukunft des Gehirn-Computer-Interface?

Matrix 4: Keanu Reeves sieht 20 Jahre in die digitale Zukunft

Matrix 4: Keanu Reeves sieht 20 Jahre in die digitale Zukunft

Emmy-Verleihung 2021: Diese VR-Filme haben abgeräumt

Emmy-Verleihung 2021: Diese VR-Filme haben abgeräumt

Der neue Echo 4 Smart Speaker in weiß.
logoUPDATE

Alexa Guide: Routinen, Multiroom, Anrufe & Echo einrichten

Eine Frau sitzt vor einem Fenster und schaut hinaus. Im Zimmer ist es dunkel, helles Licht kommt durch das Fenster.

Sci-Fi-Horror „Demonic“: Wie die VR-Traumwelt entstand

Microsoft Mesh: Holo-Plattform bekommt großes Update

Microsoft Mesh: Holo-Plattform bekommt großes Update

VR, Kunst & Fernsteuerung: Interaktives VR-Twitch-Game startet bald

VR, Kunst & Fernsteuerung: Interaktives VR-Twitch-Game startet bald

| Featured Image: Teomirn | Source: UploadVR