Spectrogram und Apple Vision Pro

Spectrogram und Apple Vision Pro
April 23, 2024 mahal
In Blog
Spektrogramm, dargestellt mit SpectrogramFlatView von AudioKit UI mit Code von Raskin

Um Musik nicht nur zu hören, sondern auch zu sehen, gibt es mehre technische Werckzeuge [;)]. Eines davon ist das Spektrogramm. Dieses zeigt auf einer Zeitachse alle vorhandenen Frequenzen eines einzelnen Tons, eines Geräusches oder eines ganzen Musikstückes. Das Spektrogramm kann benutzt werden, um Muster zu erkennen, beispielsweise Obertöne oder Knacken oder Schwebungen. Oder um einen digitalen «Fingerabdruck» zu zeichnen, der mit anderen verglichen werden kann, beispielsweise um Vogelstimmen zu vergleichen und erkennen.

Wir werden ein solches Spektrogramm in unserer App Werckmeister einsetzen und haben die entsprechende Darstellung programmiert und im Open Source Framework AudioKit UI integriert. Sie heisst SpectrogramFlatView und ist in der neusten Version der App Synesthesia AR auf dem Apple Vision Pro «Spatial Computer» verfügbar. Die App bietet mehrere Darstellungen, um Musik zu visualisieren, darunter zwei Spektrogramme, eines in 3D und unsere «flache» Darstellung. Damit läuft heute bereits Code von Raskin auf der neusten Technologie von Apple.

Comments (0)

Leave a reply