Augmented Reality: Mit Hololens spielend einfach Klavier lernen

Augmented Reality: Mit Hololens spielend einfach Klavier lernen

Ein japanisches Startup arbeitet an einer App namens „Teomirn“ für Microsoft Hololens, mit der man spielend Klavierstücke lernen kann. 

Mit Werbeeinnahmen bezahlen wir unsere Redakteur:innen.
Mit einem MIXED-Abo kannst Du unsere Seite werbefrei lesen.

Bevor man loslegen kann, muss Hololens das reale Klavier scannen. Ist das erledigt, wählt man aus einem Menü das Klavierstück, das man lernen möchte. Danach erscheint, durch die Linse der AR-Brille gesehen, das Hologramm eines Pianisten, der das Stück am eigenen Klavier vorspielt.

Seine Hände und Finger werden präzise wiedergegeben, sodass man deren Bewegungen genau studieren kann – soweit es das begrenzte Sichtfeld der Hololens zulässt. Den Körper des virtuellen Pianisten kann man wahlweise bis auf die Hände ausblenden, um sich ganz auf diese zu konzentrieren.

___STEADY_PAYWALL___

Wenn man das Klavierstück selbst üben will, wechselt man in den Unterrichtsmodus. Dann wird oberhalb der realen eine virtuelle Klaviatur samt Hände angezeigt. Von oben fließen grüne und blaue Streifen auf die Klaviertasten hinab. Grün steht für die linke Hand, Blau steht für die rechte Hand. Treffen die Streifen auf eine Klaviertaste, muss diese betätigt werden.

logo
  • checkMIXED.de ohne Werbebanner
  • checkZugriff auf mehr als 9.000 Artikel
  • checkKündigung jederzeit online möglich
ab 2,80 € / Monat

Lernen nach dem Guitar-Hero-Prinzip

Die Länge der Streifen macht deutlich, wie lange man die Taste gedrückt halten muss. Wer Musikspiele wie „Rock Band“ oder „Guitar Hero“ ausprobiert hat, kennt dieses Prinzip des Noten-Highways. Da auch die Hände des Pianisten eingeblendet sind, lernt man zugleich die korrekte Fingerstellung.

Einen Klavierlehrer und das Notenlesen wird die App nicht ersetzen können. Aber sie könnte den Klavierunterricht sinnvoll ergänzen oder Laien einen Eindruck vom Klavierspielen verschaffen. Laut den Entwicklern ist die App noch nicht reif für eine Veröffentlichung. Das Team sucht derzeit noch nach Partnern und Investoren, die das Projekt finanziell unterstützen.

News der Woche: Meta vs. FTC und ein überraschendes Comeback

News der Woche: Meta vs. FTC und ein überraschendes Comeback

Nvidia und Stanford zeigen 3D-GAN für bessere Fake-Bilder

Nvidia und Stanford zeigen 3D-GAN für bessere Fake-Bilder

180-Grad-VR-Kameras: Welche liefert das beste Bild?

180-Grad-VR-Kameras: Welche liefert das beste Bild?

Ist Kaugummi der Endgegner für Motion Sickness in VR?

Ist Kaugummi der Endgegner für Motion Sickness in VR?

VR-Müdigkeit nach tollem Erstling – Studiochef erklärt VR-Ausstieg

VR-Müdigkeit nach tollem Erstling – Studiochef erklärt VR-Ausstieg

Ecovacs Deebot T9+ im Langzeittest: Nie wieder ohne Absaugstation

Ecovacs Deebot T9+ im Langzeittest: Nie wieder ohne Absaugstation

Smart Home: Welche Geräte unterstützen Matter?

Smart Home: Welche Geräte unterstützen Matter?

Meta: US-Kartellbehörde nimmt VR-Strategie ins Visier

Meta: US-Kartellbehörde nimmt VR-Strategie ins Visier

Apple-Brille überhitzt, Launch verschoben – Bericht

Apple-Brille überhitzt, Launch verschoben – Bericht

Alexa geht ins Gym: Sprach-KI regelt Gewicht auf smarten Hanteln

Alexa geht ins Gym: Sprach-KI regelt Gewicht auf smarten Hanteln

| Featured Image: Teomirn | Source: UploadVR