Beat Tracking

Die Synchronisation von multimedialen Inhalten zu Musiksignalen stellt häufig Echtzeitanforderungen. Von großer Bedeutung ist dabei die Ermittlung der zeitlichen Positionen von Zählzeiten in einem Musikstück. Hierfür wurde am Fraunhofer IDMT das Beat Tracking zur Synchronisation über eine MIDI-Schnittstelle geschaffen. Diese Anwendung dient der Steuerung jeglicher Audio- und Videosoftware, die zur Synchronisation über MIDI-Clock vorgesehen sind.

Das am Fraunhofer IDMT entwickelte Verfahren basiert auf der Berechnung eines Akzentsignals, welches mit dem Empfinden von dynamischen Akzenten korreliert. Dieses Akzentsignal wird aus der Analyse von Teilbändern gewonnen. Nach einer Abschätzung des vorliegenden Tempos werden die Hauptschläge des Rhythmus verfolgt.

Die Anwendung ist in der Lage, Audio- und Videosoftware über eine MIDI-Clock-Schnittstelle zu steuern. Eine Reihe von Bedienelementen erlaubt unterstützende Usereingriffe zur Verbesserung der Erkennungsleistung, welche in verschiedenen Anwendungsszenarien sinnvoll sind (z. B. zum Ausgleich eines systembedingten Delays). Eine mögliche Anwendung des Beat Tracking stellt die Synchronisation von visuellen Effekten und Bildwechseln in VJ-Software dar.