Intelligent structuring and exploration of digital music collections

摘要

Diese Arbeit präsentiert eine allgemeine Methodik zur automatischen inhaltsbasierten Strukturierung und Visualisierung großer digitaler Musiksammlungen. Die Methode besteht aus dem Extrahieren musikalisch und perzeptuell relevanter Muster (,Features') aus Audioaufnahmen (z. B. mp3-Files), der Projektion der Daten und der Musiksammlung auf zweidimensionale (möglicherweise hierarchisch strukturierte) Visualisierungsebenen mittels topologiererhaitender Projektionsmethoden und der Visualisierung der resultierenden Strukturen mittels einer neuen graphischen Metapher (den so genannten, Islands of Music'), so dass die inhärente Struktur der Musiksammlung für den Benutzer sichtbar wird. Es wird auch gezeigt, wie beliebige zusätzliche Metadaten in den Visualisierungsvorgang integriert und verschiedene Gesichtspunkte von (musikalischer) Ähnlichkeit definiert und mit einbezogen werden können. Der Beitrag bietet eine kurze Beschreibung der Grundmethodik, präsentiert drei Softwareprototypen und diskutiert dann die praktischen Anwendungsmöglichkeiten solcher Technologien.%In this paper we present a general approach to the automatic content-based organization and visualization of large digital music collections. The general methodology consists in extracting musically and perceptually relevant patterns ('features') from the given audio recordings (e.g., mp3 files), using topology-preserving data projection methods to map the entire music collection onto two-dimensional visualization planes (possibly in a hierarchical fashion), and using a new display metaphor (the 'Islands of Music') to display the inherent structure of the music collection to the user. It is shown how arbitrary meta-data can be integrated into the visualization process, and how similarity according to different viewpoints can be defined and exploited. The basic methodology is briefly described, three prototype systems are presented, and a general discussion of the practical application possibilities of such technologies is offered.