DE10101473B4 - Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them - Google Patents

Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them Download PDF

Info

Publication number
DE10101473B4
DE10101473B4 DE2001101473 DE10101473A DE10101473B4 DE 10101473 B4 DE10101473 B4 DE 10101473B4 DE 2001101473 DE2001101473 DE 2001101473 DE 10101473 A DE10101473 A DE 10101473A DE 10101473 B4 DE10101473 B4 DE 10101473B4
Authority
DE
Germany
Prior art keywords
music
piece
phase
tempo
digital
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
DE2001101473
Other languages
German (de)
Other versions
DE10101473A1 (en
Inventor
Friedemann Becker
Thomas Holl
Michael Kurz
Toine Diepstraten
Daniel Haver
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Native Instruments Software Synthesis GmbH
Original Assignee
Native Instruments Software Synthesis GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Native Instruments Software Synthesis GmbH filed Critical Native Instruments Software Synthesis GmbH
Priority claimed from DE10164686A external-priority patent/DE10164686B4/en
Priority to DE10164686A priority Critical patent/DE10164686B4/en
Priority to AU2002244636A priority patent/AU2002244636A1/en
Priority to US10/251,000 priority patent/US7615702B2/en
Priority to EP02712804A priority patent/EP1380026A2/en
Priority to JP2002556874A priority patent/JP2004527786A/en
Priority to PCT/EP2002/000074 priority patent/WO2002056292A2/en
Publication of DE10101473A1 publication Critical patent/DE10101473A1/en
Publication of DE10101473B4 publication Critical patent/DE10101473B4/en
Application granted granted Critical
Priority to US12/565,766 priority patent/US8680388B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/40Rhythm
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/076Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of timing, tempo; Beat detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/155Musical effects
    • G10H2210/195Modulation effects, i.e. smooth non-discontinuous variations over a time interval, e.g. within a note, melody or musical transition, of any sound parameter, e.g. amplitude, pitch, spectral response, playback speed
    • G10H2210/241Scratch effects, i.e. emulating playback velocity or pitch manipulation effects normally obtained by a disc-jockey manually rotating a LP record forward and backward
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/011Files or data streams containing coded musical information, e.g. for transmission
    • G10H2240/046File format, i.e. specific or non-standard musical file format used in or adapted for electrophonic musical instruments, e.g. in wavetables
    • G10H2240/061MP3, i.e. MPEG-1 or MPEG-2 Audio Layer III, lossy audio compression
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/325Synchronizing two or more audio tracks or files according to musical features or musical timings

Abstract

Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes mit den folgenden Verfahrensschritten:
– näherungsweise Ermittlung des Tempos (A) des Musikstückes durch eine statistische Auswertung (STAT) der zeitlichen Abstände (Ti) rhythmusrelevanter Beat-Informationen in den digitalen Audiodaten (Ei),
– näherungsweise Ermittlung der Phase (P) des Musikstückes anhand der Lage der Takte in den digitalen Audiodaten im Zeitraster eines mit einer dem ermittelten Tempo proportionalen Frequenz schwingenden Referenz-Oszillators (MCLK),
– sukzessive Korrektur von ermitteltem Tempo (A) und Phase (P) des Musikstückes anhand einer Phasenverschiebung des Referenz-Oszillators (MCLK) relativ zu den digitalen Audiodaten durch Auswertung der resultierenden systematischen Phasenverschiebung und Regulierung der Frequenz des Referenz-Oszillators proportional zur ermittelten Phasenverschiebung.
Method for detecting the tempo and phase of a piece of music in digital format with the following method steps:
Approximate determination of the tempo (A) of the piece of music by a statistical evaluation (STAT) of the time intervals (Ti) of rhythm-relevant beat information in the digital audio data (Ei),
Approximate determination of the phase (P) of the piece of music based on the position of the clocks in the digital audio data in the time frame of a frequency oscillating reference oscillator (MCLK) which is proportional to the determined tempo,
- Successive correction of the detected tempo (A) and phase (P) of the piece of music based on a phase shift of the reference oscillator (MCLK) relative to the digital audio data by evaluating the resulting systematic phase shift and regulating the frequency of the reference oscillator proportional to the determined phase shift.

Figure 00000001
Figure 00000001

Description

Die Erfindung betrifft die Erkennung und Anpassung von Tempo und Phase von Musikstücken, insbesondere zur Realisierung eines interaktiven Musikabspielers, der unter anderem eine Möglichkeit zur Reproduktion von mehreren zu einem neuen Gesamtwerk synchronisierten Musikstücken bietet. Dabei werden digitale Musikdaten nach einer vorteilhaften Ausgestaltung durch ein gleichzeitiges Abspielen von mehreren Musikstücken auf einem Standard-CD-ROM-Laufwerk in Echtzeit gewonnen.The Invention relates to the detection and adaptation of pace and phase of music, in particular for the realization of an interactive music player, among other things a possibility for the reproduction of several synchronized to a new complete work music pieces offers. In the process, digital music data becomes advantageous Design by a simultaneous playback of several pieces of music a standard CD-ROM drive in real time.

Der Beruf des Disk Jockeys (kurz: DJ) erfährt in der heutigen, durch moderne elektronische Musik geprägten Tanz-Kultur eine enorme technische Aufwertung. Zum Handwerk dieses Berufes gehört das Arrangieren der Musiktitel zu einem Gesamtwerk (dem Set, dem Mix) mit einem eigenen Spannungsbogen. Dabei ist es unter anderem unerlässlich, die einzelnen Titel in ihrem Tempo und ihrer Phase, also der Lage der Takte im Zeitraster, derart anzugleichen (engl. kurz: „Beatmatching"), dass die Stücke in den Übergängen zu einem Ganzen verschmelzen und der Rhythmus nicht unterbrochen wird.Of the Occupation of the Disk Jockey (short: DJ) is experiencing in today, through embossed modern electronic music Dance culture a huge technical appreciation. To the craft of this Belongs to a profession arranging the songs into a complete work (the set, the Mix) with its own voltage arc. It is among other things essential the individual titles in their tempo and their phase, ie the situation The clocks in the time grid, in such a way to match (English for short: "Beatmatching") that the pieces in the transitions to melt into a whole and the rhythm is not interrupted.

In diesem Zusammenhang stellt sich das technische Problem der Tempo- und Phasenangleichung zweier Musikstücke bzw. Audiotracks in Echtzeit. Dabei wäre es wünschenswert, wenn eine Möglichkeit zur automatischen Tempo- und Phasenangleichung zweier Musikstücke bzw. Audiotracks in Echtzeit zur Verfügung stünde, um den DJ von diesem technischen Aspekt des Mixens zu befreien, bzw. einen Mix automatisch oder halbautomatisch, ohne die Hilfe eines versierten DJ's erstellen zu können.In In this context, the technical problem of speeding up and phase alignment of two pieces of music or audio tracks in real time. It would be it desirable if a possibility for automatic tempo and phase alignment of two pieces of music or Audio tracks available in real time would, to free the DJ from this technical aspect of mixing, or a mix automatically or semi-automatically, without the help an accomplished DJ to create.

Bisher wurde dieses Problem nur in Teilaspekten gelöst. So gibt es Software-Player für das Format MP3 (ein Standardformat für komprimierte digitale Audiodaten), die reine Echt– zeit-Tempoerkennung und -anpassung realisieren. Die Erkennung der Phase muss jedoch weiterhin durch das Gehör und die Anpassung des DJ manuell erfolgen. Dadurch wird ein beträchtliches Maß an Aufmerksamkeit des DJ in Anspruch genommen, was andernfalls für künstlerische Aspekte wie Musikzusammenstellung etc. zur Verfügung stünde.So far This problem has been solved only in part. So there is software player for the Format MP3 (a standard format for compressed digital audio data), the pure real-time tempo detection and adapt. However, the detection of the phase must be continue by hearing and the adjustment of the DJ done manually. This will be a considerable Measure Attracted attention of the DJ, what else for artistic Aspects like music composition etc. would be available.

Weiter sind Hardware-Effektgeräte zur Bearbeitung von Audioinformationen bekannt, die zwar Echtzeit-Tempo- und -Phasenerkennung realisieren, jedoch keine Anpassung von Tempo und Phase am Audiomaterial vornehmen können, wenn dieses nur analog eingespeist wird. Es kann lediglich die relative Phasenverschiebung der beiden Audiotracks optisch angezeigt werden.Further are hardware effect devices to edit audio information that has real-time tempo and phase detection, but no adaptation of tempo and phase on the audio material, if this only analog is fed. It can only be the relative phase shift the two audio tracks are visually displayed.

Aus der Patentschrift US 5 256 832 A ein Verfahren zur Bestimmung von Beat-Positionen bekannt. Dabei wird an Hand von Schwellwerten innerhalb eines Intervalls die Beat-Position bestimmt. Eine entsprechende MIDI Clock wird auf der Basis der Beat-Positionen bestimmt, die an einen MIDI-Sequenzer ausgegeben wird.From the patent US 5 256 832 A a method for determining beat positions known. The beat position is determined on the basis of threshold values within an interval. A corresponding MIDI clock is determined based on the beat positions output to a MIDI sequencer.

Es sind jedoch keine Geräte bekannt, welche die Tempo-Information zur Berechung von Loops (das sind kurze Audio-Teilstücke, die fortlaufend wiederholt wiedergegeben werden können) und Loop-Längen nutzt. Diese werden bei den bisher dafür verwendeten Wiedergabegeräten entweder vorher geschnitten und geladen (Software-MP3-Player) oder manuell gesetzt und angepasst (Hardware-CD-Player).It But they are not devices known the tempo information to compute loops (these are short audio chunks that repeat continuously can be reproduced) and uses loop lengths. These will be among the most so far used playback devices either previously cut and loaded (software MP3 player) or set manually and adjusted (hardware CD player).

Eine Aufgabe der vorliegenden Erfindung besteht somit in der Schaffung einer Möglichkeit zur automatischen Tempo- und Phasenangleichung zweier Musikstücke bzw. Audiotracks in Echtzeit mit möglichst hoher Genauigkeit.A Object of the present invention is therefore in the creation a possibility for automatic tempo and phase alignment of two pieces of music or Audio tracks in real time with as possible high accuracy.

Eine wesentliche zu überwindende technische Hürde stellt dabei die Genauigkeit einer Tempo- und Phasen-Messung dar, welche mit der für diese Messung zur Verfügung stehenden Zeit sinkt. Das Problem stellt sich somit vorrangig für eine Ermittlung des Tempos und der Phase in Echtzeit, wie es u.a. beim Live-Mixen der Fall ist.A essential to be overcome technical hurdle represents the accuracy of a tempo and phase measurement, which with the for this measurement available standing time decreases. The problem thus arises primarily for an investigation the tempo and the phase in real time as it is during live mixing the case is.

Gelöst wird diese Aufgabe durch eine Erfindung mit den Merkmalen der unabhängigen Ansprüche.Is solved This object is achieved by an invention having the features of the independent claims.

Insbesonder wird die Erfindung durch ein Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes mit den folgenden Verfahrensschritten gelöst.

  • a) näherungsweise Ermittlung des Tempos (A) des Musikstückes durch eine statistische Auswertung (STAT) der zeitlichen Abstände (Ti) rhythmusrelevanter Beat-Informationen in den digitalen Audiodaten (Ei),
  • b) näherungsweise Ermittlung der Phase (P) des Musikstückes anhand der Lage der Takte in den digitalen Audiodaten im Zeitraster eines mit einer dem ermittelten Tempo proportionalen Frequenz schwingenden Referenz-Oszillators (MCLK),
  • c) sukzessive Korrektur von ermitteltem Tempo (A) und Phase (P) des Musikstückes anhand einer Phasenverschiebung des Referenz-Oszillators (MCLK) relativ zu den digitalen Audiodaten durch Auswertung der resultierenden systematischen Phasenverschiebung und Regulierung der Frequenz des Referenz-Oszillators proportional zur ermittelten Phasenverschiebung.
In particular, the invention is achieved by a method for detecting the tempo and phase of a piece of music in digital format with the following method steps.
  • a) Approximate determination of the tempo (A) of the piece of music by a statistical evaluation (STAT) the time intervals (Ti) of rhythm-relevant beat information in the digital audio data (Ei),
  • b) approximately determining the phase (P) of the piece of music on the basis of the position of the clocks in the digital audio data in the time frame of a frequency oscillating reference oscillator (MCLK) which is proportional to the determined tempo,
  • c) successive correction of the determined tempo (A) and phase (P) of the piece of music based on a phase shift of the reference oscillator (MCLK) relative to the digital audio data by evaluating the resulting systematic phase shift and regulating the frequency of the reference oscillator proportional to the determined phase shift ,

Es erfolgt also eine sukzessive Annäherung an den idealen Wert in einem Regelkreis.It So there is a successive approximation to the ideal value in a loop.

Dabei hat es sich als günstig erwiesen, wenn rhythmusrelevante Beat-Informationen durch Bandpassfilterung der zugrunde liegenden digitalen Audiodaten in verschiedenen Frequenzbereichen gewonnen werden.there it has to be cheap proven when rhythm-relevant beat information through bandpass filtering the underlying digital audio data in different frequency ranges be won.

Besonders gut gelingt dies, wenn Rhythmusintervalle der Audiodaten im Bedarfsfall durch Multiplikation ihrer Frequenz mit 2er Potenzen in eine vordefinierte Frequenz-Oktave transformiert werden, wo diese Zeitintervalle zur Tempoermittlung liefern. Wenn der Frequenz-Transformation eine Gruppierung von Rhythmusintervallen, insbesondere in Paare oder Dreiergruppen, durch Addition ihrer Zeitwerte vorausgeht, so ergeben sich zusätzliche relevante Intervalle.Especially This works well if rhythm intervals of the audio data in case of need by multiplying their frequency by powers of 2 into a predefined one Frequency octave are transformed where these time intervals for Deliver tempo determination. If the frequency transformation is a grouping rhythm intervals, especially in pairs or triplets, preceded by the addition of their time values, additional results relevant intervals.

Nach einer vorteilhaften Ausgestaltung wird die gewonnene Menge an Daten von Zeitintervallen der rhythmusrelevanten Beat-Informationen auf Häufungspunkte untersucht. Die näherungsweise Tempoermittlung erfolgt dann anhand der Informationen eines Häufungsmaximums.To An advantageous embodiment is the amount of data obtained of time intervals of the rhythm-relevant beat information accumulation points examined. The approximate Tempo determination then takes place on the basis of the information of a cumulative maximum.

Nach einer weiteren vorteilhaften Ausgestaltung des Verfahrens gemäß der vorliegenden Erfindung wird zur näherungsweisen Ermittlung der Phase des Musikstückes die Phase des Referenz-Oszillators derart gewählt, dass sich die größtmögliche Übereinstimmung zwischen den rhythmusrelevanten Beat-Informationen in den digitalen Audiodaten und den Nulldurchgängen des Referenz-Oszillators einstellt.To a further advantageous embodiment of the method according to the present invention Invention becomes approximate Determination of the phase of the piece of music the phase of the reference oscillator chosen such that the greatest possible match between the rhythm-relevant beat information in the digital audio data and the zero crossings of the reference oscillator.

Weiter hat es sich als günstig erwiesen, wenn eine sukzessive Korrektur von ermitteltem Tempo und Phase des Musikstückes in regelmäßigen Abständen in so kurzen Zeitintervallen erfolgt, dass resultierende Korrekturbewegungen und/oder Korrekturverschiebungen unterhalb der Hörbarkeitsgrenze bleiben.Further it has to be cheap proved when a gradual correction of the determined tempo and phase of the piece of music at regular intervals in such short time intervals occurs that resulting correction movements and / or correction shifts remain below the audibility limit.

Indem alle sukzessiven Korrekturen von ermitteltem Tempo und Phase des Musikstückes über die Zeit akkumuliert werden, können darauf aufbauend weitere Korrekturen mit stetig steigender Präzision erfolgen.By doing all successive corrections of the determined tempo and phase of the Piece of music about the Time can be accumulated Based on this further corrections with steadily increasing precision take place.

Anstelle solche sukzessiven Korrekturen permanent vorzunehmen, kann dies alternativ auch solange erfolgen, bis ein vorgegebener tolerierbarer Fehlergrenzwert unterschritten wird. Dafür eignet sich für das ermittelte Tempo insbesondere ein Fehlergrenzwert kleiner als 0,1%.Instead of This can be done permanently by making such successive corrections alternatively, as long as until a given tolerable Error limit is fallen below. This is suitable for the determined Pace especially an error limit less than 0.1%.

Damit eine Anpassung auf mögliche Tempoänderungen im Musikstück erreicht wird, erfolgt für den Fall, dass die Korrekturen über einen vorgebbaren Zeitraum hinweg immer jeweils negativ oder positiv sind, eine erneute näherungsweise Ermittlung von Tempo und Phase mit anschließender sukzessiver Korrektur.In order to an adaptation to possible tempo changes in the music piece is achieved takes place for the case that the corrections over always a negative or positive for a predefined period of time are, a renewed approximately Determination of tempo and phase followed by successive correction.

Neben der voranstehenden automatischen Erkennung von Tempo und Phase von Musikstücken bedarf es zur Lösung der eingangs genannten Aufgabe auch noch einer Anpassung von Tempo und Phase der Musikstücke.Next the above automatic detection of tempo and phase of music pieces it requires a solution the task mentioned above also an adaptation of pace and phase of the music pieces.

Dieses Problem wird gelöst, indem nach einer ersten näherungsweisen Ermittlung des Tempos und der Phase des Musikstückes das Ergebnis und die Anpassung sukzessive durch Rückwirkung auf die Abspielgeschwindigkeit des Musikstückes verbessert wird.This Problem is solved by looking for a first approximation Determining the tempo and the phase of the piece of music the result and the adaptation successively through reaction is improved to the playback speed of the piece of music.

Gemäß der Erfindung erfolgt dies durch ein Verfahren zur Synchronisierung von mindestens zwei in digitalem Format vorliegenden Musikstücken mit folgenden Verfahrensschritten:

  • – vollständige Ermittlung von Tempo und Phase des ersten Musikstückes wie voranstehend beschrieben,
  • – näherungsweise Ermittlung von Tempo und Phase des weiteren Musikstückes wie voranstehend beschrieben,
  • – Anpassung der Abspielgeschwindigkeit und der Abspielphase dieses weiteren Musikstückes durch sukzessive Anpassung der Frequenz und der Phase des diesem weiteren Musikstück zugeordneten Referenz-Oszillators an die Frequenz und die Phase des dem anderen Musikstück zugeordneten Referenz-Oszillators.
According to the invention, this is done by a method for synchronizing at least two pieces of music in digital format with the following method steps:
  • Complete determination of tempo and phase of the first piece of music as described above,
  • Approximately determining the tempo and phase of the further piece of music as described above,
  • - Adaptation of the playback speed and the playback phase of this further piece of music by successive adjustment of the frequency and the phase of this further piece of music associated Refe rence oscillator to the frequency and the phase of the other piece of music associated with the reference oscillator.

Dabei hat es sich als vorteilhaft herausgestellt, wenn zur Anpassung der Abspielgeschwindigkeit und der Abspielphase des weiteren Musikstückes anhand einer möglichen Phasenverschie bung des diesem weiteren Musikstück zugeordneten Referenz-Oszillators relativ zu dem Referenz-Oszillator des anderen Musikstückes eine Auswertung der resultierenden systematischen Phasenverschiebung und eine Regulierung der Frequenz des dem weiteren Musikstück zugeordneten Referenz-Oszillators proportional der ermittelten Phasenverschiebung erfolgt.there It has been found to be advantageous when adapting the Playback speed and the playback phase of the other piece of music based a possible Phase shift environment of this further piece of music associated reference oscillator relative to the reference oscillator of the other piece of music an evaluation of the resulting systematic phase shift and regulation of frequency of the further piece of music associated reference oscillator proportional to the determined phase shift he follows.

Es erfolgt also eine sukzessive Annäherung an den idealen Wert in einem Regelkreis, in welchem die Tempo und Phasen-Informationen auf die Steuerung der Abspielgeschwindigkeit des Audiomaterials zurückwirken.It So there is a successive approximation to the ideal value in a loop in which the tempo and Phase information on the control of the playback speed of the audio material react.

Zum Abspielen von vorproduzierter Musik werden heutzutage verschiedenartige Geräte für verschiedene Speichermedien wie Schallplatte, CD oder Cassette verwendet. Diese Formate wurden jedoch nicht dafür entwickelt, in den Abspielprozess einzugreifen, um die Musik damit auf kreative Art zu bearbeiten. Diese Möglichkeit ist aber wünschenswert und wird heutzutage trotz der gegebenen Einschränkungen von den eingangs erwähnten Disk Jockeys praktiziert. Dabei werden bevorzugt Vinyl-Schallplatten verwendet, weil man dort am leichtesten mit der Hand die Abspielgeschwindigkeit und -position beeinflussen kann.To the Playing pre-produced music is becoming very different nowadays equipment for different Storage media such as vinyl, CD or cassette used. These However formats were not for it designed to intervene in the playback process to the music with it to work in a creative way. This possibility is desirable and is nowadays, despite the limitations of the aforementioned disk Jockeys practiced. Here are preferred vinyl records used because it is easiest to play with the speed of play and position.

Heute werden aber überwiegend digitale Formate wie Audio-CD und MP3 zum Speichern von Musik verwendet. Mit der vorangehend beschriebenen Erfindung wird nun der genannte kreative Umgang mit Musik auf beliebigen digitalen Formaten ermöglicht.today but are predominantly Digital formats like audio CD and MP3 are used to store music. With the invention described above is now called Creative handling of music on any digital formats possible.

Durch das vorangehend beschriebene Verfahren gemäß der Erfindung ist es nämlich möglich, aus einer Sammlung von Musiktiteln auf vollautomatische Weise einen Mix zu erstellen, bei welchem die Stücke tempo- und phasenrichtig aneinandergereiht werden.By Namely, the method according to the invention described above is possible a collection of songs in a fully automated way Create mix in which the pieces in tempo- and in-phase strung together.

Dies wird durch einen Musik-Abspieler ermöglicht, bei dem mindestens zwei in digitalem Format vorliegende Musikstücke wie voranstehend dargestellt in Echtzeit synchronisierbar sind.This is enabled by a music player in which at least two pieces of music in digital format as shown above can be synchronized in real time.

Besonders effektiv gelingt dies bei einem solchen Musik-Abspieler, bei dem jeweils rhythmusrelevante Beat-Informationen eines vorgegebenen zurückliegenden Zeitraums ausgehend von einer aktuellen Abspielposition des Musikstückes als Grundlage zur Tempoermittlung in Echtzeit dienen.Especially This is effectively achieved in such a music player, in each of which rhythm-relevant beat information a given past Period starting from a current play position of the piece of music as Basis for determining the tempo in real time.

Durch die automatische Tempoerkennung kann auf Wunsch des Hörers der Inhalt einer Musikdatenquelle, z.B. einer Compakt Disk CD, in einer von ihm wählbaren z.B. tempoabhängigen Reihenfolge als homogener Mix wiedergegeben werden.By The automatic tempo detection can be at the request of the listener Content of a music data source, e.g. a compact disc CD, in one selectable by him e.g. speed-related Sequence can be played as a homogeneous mix.

Die Erfindung umfasst daher auch einen solchen Musik-Abspieler, bei dem synchronisierte Musikstücke automatisch zu einem Gesamtwerk mit einheitlichem Rhythmus arrangierbar und abspielbar sind.The The invention therefore also encompasses such a music player the synchronized music pieces automatically arranged to a complete work with a uniform rhythm and playable.

Um gezielt Eingreifen zu können, ist es wichtig, eine grafische Repräsentation der Musik zu haben, in der man die aktuelle Abspielposition und auch einen gewissen Zeitraum in der Zukunft und in der Vergangenheit erkennt. Dazu stellt man üblicherweise die Amplitudenhüllkurve der Klangwellenform über einen Zeitraum von mehreren Sekunden vor und nach der Abspielposition dar. Die Darstellung verschiebt sich in Echtzeit in der Geschwindigkeit, in der die Musik spielt.Around to be able to intervene in a targeted manner, is it important to have a graphical representation of the music in which one the current play position and also a certain Recognizes period in the future and in the past. Adds to this usually the amplitude envelope the sound waveform over a period of several seconds before and after the playhead position The display shifts in real time in speed, in which the music plays.

Dabei besteht das prinzipielle Bedürfnis, möglichst viel hilfreiche Information in der grafischen Darstellung haben, um gezielt eingreifen zu können. Außerdem möchte man ergonomisch in den Abspielvorgang eingreifen können, auf vergleichbare Art mit dem von DJ's häufig praktizierten "Scratching" auf Vinylplattenspielern, wobei der Plattenteller während der Wiedergabe angehalten und vorwärts sowie rückwärts bewegt wird.there there is a fundamental need preferably have much helpful information in the graph, to intervene in a targeted manner. Furthermore would like to you can engage ergonomically in the playback on comparable to DJ's often practiced "scratching" on vinyl record players, being the turntable during playback is stopped and moved forwards and backwards.

Zur Lösung dieses Problems schlägt die vorliegende Erfindung einen interaktiven Musik-Abspieler vor, der

  • – ein Mittel zur graphischen Darstellung von mit einer Tempo- und Phasenerkennungsfunktion, insbesondere einer solchen wie vorangehend beschrieben, bestimmten Taktgrenzen eines in der Wiedergabe befindlichen Musikstückes in Echtzeit,
  • – ein erstes Steuerelement zum Wechsel zwischen einem ersten Betriebsmodus, in dem das Musikstück mit einem konstanten Tempo abgespielt wird, und einem zweiten Betriebsmodus, in dem die Abspielposition und/oder Abspielgeschwindigkeit vom Anwender direkt beeinflussbar in Echtzeit ist, und
  • – ein zweites Steuerelement zur Manipulation der Abspielposition in Echtzeit umfasst.
To solve this problem, the present invention proposes an interactive music player which
  • A means for graphing in real-time, with a tempo and phase detection function, in particular such as described above, certain beat boundaries of a piece of music in play,
  • - A first control to change between a first mode of operation in which the piece of music is played at a constant tempo, and a second mode of operation in which the playing position and / or playing speed is directly influenced by the user in real time, and
  • - Includes a second control for manipulating the playback position in real time.

Nach einer vorteilhaften Ausgestaltung dieses interaktiven Musik-Abspielers ist dieser zusätzlich ausgestattet mit

  • – einem Mittel zur graphischen Darstellung der aktuellen Abspielposition, mit dem eine Amplitudenhüllkurve der Klangwellenform des wiedergegebenen Musikstückes über einen vorgebbaren Zeitraum vor und nach der aktuellen Abspielposition darstellbar ist, wobei sich die Darstellung in Echtzeit mit dem Tempo der Wiedergabe des Musikstückes verschiebt, und mit
  • – einem Mittel zur Glättung eines stufigen Verlaufs zeitlich begrenzter, mit dem zweiten Steuerelement vorgegebener Abspiel-Positionsdaten zu einem sich gleichmäßig mit einer der Audio-Abtastrate entsprechenden zeitlichen Auflösung ändernden Signal.
According to an advantageous embodiment of this interactive music player this is additionally equipped with
  • - A means for graphing the current play position, with an amplitude envelope of the sound waveform of the reproduced piece of music over a predetermined period of time before and after the current play position can be displayed, the display moves in real time with the tempo of the playback of the piece of music, and with
  • - Means for smoothing a graded course of time-limited, predetermined by the second control playback position data to a uniformly with one of the audio sampling rate corresponding temporal resolution changing signal.

Dabei hat es sich als vorteilhaft erwiesen, wenn zur Glättung eines stufigen Verlaufs zeitlich begrenzter Abspiel-Positionsdaten ein Mittel zur Rampenglättung vorgesehen ist, durch das mit jeder vorgegebenen Abspiel-Positionsnachricht eine Rampe mit konstanter Steigung auslösbar ist, die in einem vorgebbaren Zeitintervall das geglättete Signal von seinem bisherigen Wert auf den Wert der Abspiel-Positionsnachricht fährt. Alternativ oder zusätzlich kann ein lineares digitales Tiefpaß-Filter, insbesondere ein Resonanzfilter zweiter Ordnung, zur Glättung eines stufigen Verlaufs vorgegebener zeitlich begrenzter Abspiel-Positionsdaten dienen.there It has proved to be advantageous when for smoothing a stage history of temporally limited play position data Means for ramp smoothing is provided by the with each predetermined play position message a Ramp with constant slope can be triggered, which is in a predeterminable Time interval the smoothed Signal from its previous value to the value of the play position message moves. Alternatively or in addition can be a linear digital low-pass filter, in particular a Resonant filter second order, for smoothing a graded course serve predetermined temporally limited play position data.

Um Sprünge bei der Wiedergabe zu vermeiden, dient im Fall eines Wechsels zwischen den Betriebsmodi die im vorhergehenden Modus erreichte Position als Ausgangsposition im neuen Modus.Around jumps to avoid during playback, serves in the event of a change between operating modes reached the position reached in the previous mode as starting position in the new mode.

Im Fall eines Wechsels zwischen den Betriebsmodi wird zur Vermeidung von abrupten Geschwindigkeitsänderungen die im vorhergehenden Modus erreichte aktuelle Abspielgeschwindigkeit durch eine Glättungsfunktion, insbesondere eine Rampenglättung oder ein lineares digitales Tiefpaß-Filter, auf die dem neuen Betriebsmodus entsprechende Abspielgeschwindigkeit geführt.in the Case of a change between the operating modes is avoided of abrupt speed changes the current playback speed reached in the previous mode through a smoothing function, especially a ramp smoothing or a linear digital low-pass filter on the new operating mode corresponding playback speed out.

Um beim Abspielen mit sich stark und schnell ändernder Geschwindigkeit eine möglichst authentische Wiedergabe ähnlich dem „Scratchen" mit einem Vinyl-Plattenspieler zu erreichen, verwendet eine weitere vorteilhafte Ausführungsform des interaktiven Musik-Abspielers nach der Erfindung für ein Audiosignal ein Scratch-Audio-Filter, wobei das Audiosignal einer Pre-Emphase-Filterung (Vorverzerrung) unterzogen und in einem Pufferspeicher abgelegt wird, aus dem es in Abhängigkeit von der jeweiligen Abspielgeschwindigkeit mit variablem Tempo auslesbar ist, um anschließend einer De-Emphase-Filterung (Rückentzerrung) unterzogen und wiedergegeben zu werden.Around when playing with fast and fast changing speed one preferably similar to authentic playback the "scratching" with a vinyl turntable to achieve uses a further advantageous embodiment of the interactive music player according to the invention for an audio signal a scratch audio filter, the audio signal being pre-emphasis filtered (Predistortion) and stored in a buffer memory becomes, out of which it depends from the respective playback speed with variable tempo readable is to go afterwards De-emphasis filtering (back equalization) to be subjected to and reproduced.

Aus den Tempoinformationen lässt sich die Länge eines oder mehrerer Takte mit hinreichender Genauigkeit ermitteln um auf Tastendruck die Länge eines Loops so zu setzten, dass sich dieser „knackfrei" und mit dem Tempo des ursprünglichen Audiotracks spielen lässt. Bei einem solchen interaktiven Musik- Abspieler, der Tempoinformationen auf die beschriebene Weise gemäß der Erfindung ermittelt, ist nach einer weiteren vorteilhaften Ausgestaltung für eines oder mehrere der synchronisierten Musikstücke anhand der ermittelten Tempoinformation des jeweiligen Musikstückes die Länge einer über einen oder mehrere Takte dieses Musikstückes reichenden Wiedergabe-Schleife in Echtzeit taktsynchron definierbar und abspielbar.Out lets the tempo information the length one or more cycles with sufficient accuracy at the touch of a button, the length a loop so that this is "crack-free" and with the pace of the original Play audio tracks. In such an interactive music player, the tempo information on the manner described according to the invention determined is, according to a further advantageous embodiment of a or more of the synchronized pieces of music based on the determined tempo information of the respective piece of music the length one over one or more bars of this piece of music reaching playback loop in real time isochronous definable and playable.

Die Phasen-Informationen können dazu genutzt werden, wiederum auf Tastendruck, Sprungmarken innerhalb des Tracks, sogenannte Cue-Points, oder ganze Loops genau auf einen Taktanfangs-Beat zu legen. Ein vorteilhafter interaktiver Musik-Abspieler wird also dadurch weitergebildet, dass für eines oder mehrere der synchronisierten Musikstücke anhand der ermittelten Phaseninformation des jeweiligen Musikstückes in Echtzeit taktsynchrone Sprungmarken definierbar und innerhalb dieses Musikstückes um ganzzahlige Vielfache von Takten verschiebbar sind. Solche Cue-Points und Loops können auch auf Tastendruck um ganzzahlige Vielfache von Takten innerhalb des Tracks verschoben werden. Beides erfolgt in Echtzeit, während der Wiedergabe des Audio-Tracks.The Phase information can to be used, again at the touch of a button, jump marks within of the track, so-called cue points, or entire loops exactly to one Clock initial Beat to lay. An advantageous interactive music player will be so further developed by that for one or more of the synchronized pieces of music based on the determined Phase information of the respective piece of music in real time isochronous Jump labels definable and within this piece of music integer multiples of bars are displaceable. Such cue points and loops can even at the touch of a button by integer multiples of bars within of the track. Both are done in real time while the Play the audio track.

Des weiteren ermöglicht die gewonnene Information über das Tempo und die Phase eines Audiotracks die Ansteuerung sogenannter temposynchroner Effekte. Dabei wird das Audiosignal passend zum eigenen Rhythmus manipuliert, was rhythmisch effektvolle Echtzeit-Klangveränderung ermöglicht. Insbesondere kann die Tempo-Information dazu genutzt werden, Loops mit taktgenauen Längen in Echtzeit aus dem Audiomaterial herauszuschneiden.Of further allows the information obtained the tempo and phase of an audio track driving so-called tempo-synchronous effects. The audio signal will match the own rhythm manipulated, what rhythmically effective real-time sound change allows. In particular, the tempo information can be used to loops with tact-precise lengths to cut out of the audio material in real time.

Ein weiter vorteilhafter interaktiver Musik-Abspieler zeichnet sich daher dadurch aus, dass jeder wiedergegebene Audiodatenstrom durch Signalverarbeitungsmittel in Echtzeit manipulierbar ist, insbesondere durch Filtereinrichtungen und/oder Audioeffekte.One further advantageous interactive music player excels Therefore, characterized in that each reproduced audio stream Signal processing means can be manipulated in real time, in particular by Filtering devices and / or audio effects.

Herkömmlicherweise werden beim Mischen mehrerer Musikstücke die Audioquellen von Tonträgern auf mehreren Abspielgeräten, z.B. Plattenspielern oder CD-Playern, abgespielt und über ein Mischpult abgemischt. Bei dieser Vorgehensweise beschränkt sich eine Audioaufnahme auf eine Aufzeichnung des Endresultats. Auf der Grundlage von Computersystemen mit Audioschnittstellen mit geeigneter Audioverarbeitungssoftware wie Audio-Sequenzern oder sogenannten Samplebearbeitungsprogrammen, bei denen digitale Audioinformationen manipuliert werden können, ist ein interaktives Eingreifen des Anwenders während der Wiedergabe nicht möglich.traditionally, When mixing multiple pieces of music, the audio sources of sound carriers become several players, e.g. Turntables or CD players, played and over Mixer mixed. This procedure is limited an audio recording on a recording of the final result. On the Base computer systems with audio interfaces with appropriate Audio processing software such as audio sequencers or so-called Sample editing programs that involve digital audio information can be manipulated is not an interactive intervention of the user during playback possible.

Für eine Reproduktion des Mischvorganges oder um zu einem späteren Zeitpunkt exakt an einer vorgebbaren Position innerhalb eines Musikstückes weitermischen zu können, wäre es wünschenswert, wenn nicht nur das Endresultat abspeicherbar wäre.For a reproduction the mixing process or at a later time exactly at one to be able to mix preselectable position within a piece of music, it would be desirable if not only the final result could be stored.

Diese Anforderung wird gemäß der Erfindung durch einen interaktiven Musik-Abspieler gelöst, der dadurch weitergebildet ist, dass Echtzeiteingriffe über den zeitlichen Ablauf als digitale Steuerinformationen speicherbar sind, insbesondere solche eines Mischvorganges mehrerer Musikstücke und/oder zusätzliche Signalverarbeitungen.These Requirement is according to the invention solved by an interactive music player, who develops it is that real-time interventions over the timing can be stored as digital control information are, in particular those of a mixing process of several pieces of music and / or additional Signal processing.

Indem Mischvorgänge von Musikstücken und/oder interaktive Eingriffe in Musikstücke mit Audiosignalverarbeitungsmitteln als ein neues Gesamtwerk unabhängig von digitalen Audioinformationen von Musikstücken in Form digitaler Steuerinformationen, insbesondere zu Reproduktionszwecken, speicherbar sind, lässt sich der Vorgang des interaktiven Mischens und einer interaktiven Effektbearbeitung aufzeichnen und jederzeit wiedergeben.By doing mixing operations of music pieces and / or interactive interventions in pieces of music with audio signal processing means independent as a new complete work digital audio information of pieces of music in the form of digital control information, especially for reproduction purposes, can be stored, can be the process of interactive mixing and interactive effects editing Record and play at any time.

Nach einer weiteren vorteilhaften Ausgestaltung der Erfindung weisen gespeicherte digitale Steuerinformationen ein Format auf, das Informationen zur Identifikation der verarbeiteten Musikstücke und eine jeweilige diesen zugeordnete zeitliche Abfolge von Abspielpositionen und Zustandsinformationen der Stellglieder des Musik-Abspielers umfasst.To have a further advantageous embodiment of the invention Stored digital control information is a format containing information for identifying the processed pieces of music and a respective one of these associated temporal sequence of play positions and state information includes the actuators of the music player.

Ein entscheidender Vorteil dieser Aufzeichnungsmöglichkeit und des vorgeschlagenen Formates besteht in der Tatsache, dass eine digitale Aufzeichnung des Mischvorgangs unabhängig von den Audiodaten der gemischten Musikstücke und damit ohne urheberrechtlich problematisches Kopieren dieser Audiodaten erfolgen kann. Das Gesamtresultat kann damit jederzeit selbständig wiedergegeben, weiterverarbeitet, vervielfältigt und übertragen werden.One decisive advantage of this recording option and the proposed Formats consists in the fact that a digital record the mixing process independently from the audio data of the mixed pieces of music and thus without copyright problematic copying of this audio data can be done. The overall result can be self-employed at any time reproduced, further processed, duplicated and transmitted.

Ein besonders vorteilhafter interaktiver Musik-Abspieler ist durch ein geeignet programmiertes mit Audioschnittstellen ausgestattetes Computersystem realisiert. Dabei können standardmäßige Datenspeicher des Computersystems zur Aufnahme der Steuerdatei dienen. Auch wird damit ein besonders interessanter Austausch der in der Regel wenig speicherintensiven Aufzeichnungsdateien z.B. auch über das Internet ermöglicht.One particularly advantageous interactive music player is through suitably programmed computer system equipped with audio interfaces realized. It can standard data storage of the computer system for receiving the control file. Also will thus a particularly interesting exchange of usually little memory-intensive recording files e.g. also about that Internet enabled.

In diesem Zusammenhang ermöglicht die Erfindung auch die Bereitstellung eines Datenträgers, insbesondere einer Compact Disc, der

  • – einen ersten Datenbereich mit digitalen Audiodaten eines oder mehrerer Musikstücke und
  • – einen zweiten Datenbereich mit einer Steuerdatei mit digitalen Steuerinformationen zur Ansteuerung eines Musik-Abspielers umfasst, insbesondere eines solchen wie im vorangehenden beschrieben, wobei
  • – die Steuerdaten des zweiten Datenbereichs auf Audiodaten des ersten Datenbereichs Bezug nehmen.
In this context, the invention also enables the provision of a data carrier, in particular a compact disc, the
  • A first data area with digital audio data of one or more pieces of music and
  • - Includes a second data area with a control file with digital control information for controlling a music player, in particular such as described above, wherein
  • - refer the control data of the second data area to audio data of the first data area.

Dabei ist es besonders vorteilhaft, wenn die digitalen Steuerinformationen des zweiten Datenbereichs Mischvorgänge von Musikstücken und/oder interaktive Eingriffe in Musikstücke mit Audiosignalverarbeitungsmitteln als ein neues Gesamtwerk der digitalen Audioinformationen von Musikstücken des ersten Datenbereichs repräsentieren.there it is particularly advantageous if the digital control information the second data area mixing operations of pieces of music and / or interactive interventions in pieces of music with audio signal processing means as a new complete work of digital audio information of music pieces of the first data area represent.

Weiter hat es sich als günstig erwiesen, wenn gespeicherte digitale Steuerinformationen des zweiten Datenbereichs ein Format aufweisen, das Informationen zur Identifikation der verarbeiteten Musikstücke des ersten Datenbereichs und eine jeweilige diesen zugeordnete zeitliche Abfolge von Abspielpositionen und Zustandsinformationen der Stellglieder des Musik-Abspielers umfasst.Further it has to be cheap proven when stored digital control information of the second data area have a format containing information for identifying the processed music of the first data area and a respective temporal associated therewith Sequence of playback positions and status information of the actuators of the music player.

Auf einem solchen Datenträger lässt sich auch vorteilhaft ein Computerprogrammprodukt anordnen, das direkt in den internen Speicher eines digitalen Computers geladen werden kann und Softwareabschnitte umfasst, mit denen dieser digitale Computer die Funktion eines Musik-Abspielers übernimmt, insbesondere eines solchen wie vorangehend beschrieben, mit dem entsprechend den Steuerdaten des zweiten Datenbereichs des Datenträgers, die auf Audiodaten des ersten Datenbereichs des Datenträgers verweisen, ein durch die Steuerdaten repräsentiertes Gesamtwerk abspielbar ist, wenn das Programmprodukt auf einem Computer ausgeführt wird.On such a disk let yourself also advantageously arrange a computer program product that directly be loaded into the internal memory of a digital computer can and software sections that this digital computer uses assumes the function of a music player, especially one such as described above with the corresponding control data of the second data area of the volume, which is based on audio data of the first data area of the volume refer to a complete work represented by the control data is when the program product is running on a computer.

Dadurch dass der interaktive Musik-Abspieler die Audio-Wiedergabe, die Signal-Analyse und die Signal-Transformation mittels Effekten und Loops vereint, besteht die Möglichkeit erstmalig sowohl eine Echtzeit-Erkennung des Tempos und der Phase eines Audiotracks als auch deren automatische Angleichung zu realisieren. Zusätzlich liefert die Analyse notwendigen Ausgangsdaten für die Steuerung temposynchroner Effekte und Loops.Thereby that the interactive music player plays the audio, the signal analysis and the Signal transformation by means of effects and loops united exists the possibility for the first time both a real-time recognition of the tempo and the phase an audio track as well as their automatic alignment. additionally The analysis provides necessary output data for the control tempo-synchronous Effects and loops.

Vorteile sind unter anderem die dadurch geschaffene Möglichkeit der Automatisierung des sog. Beatmatchings, einer nicht leicht erlernbare Grundvoraussetzung des DJ-Mixens, die bei jedem Übergang zweier Musikstücke einen erheblichen Teil der Aufmerksamkeit des DJ's in Anspruch nimmt. Weiterhin besteht die Möglichkeit den gesamten Mix-Vorgang zu automatisieren.advantages Among other things, this creates the possibility of automation created by it the so-called beat matching, a not easy to learn basic requirement of DJ mixing, at every transition two pieces of music a considerable amount of the DJ's attention. Continue to exist the possibility to automate the entire mix process.

Weitere Vorteile und Details der Erfindung ergeben sich anhand der folgenden Beschreibung vorteilhafter Ausführungsbeispiele und in Verbindung mit den Figuren. Es zeigt in Prinzipdarstellung:Further Advantages and details of the invention will become apparent from the following Description of advantageous embodiments and in conjunction with the figures. It shows in schematic representation:

1 ein Blockschaltbild zur Veranschaulichung der Gewinnung rhythmusrelevanter Informationen und deren Auswertung zur näherungsweisen Ermittlung von Tempo und Phase eines Musikdatenstroms, 1 a block diagram to illustrate the extraction of rhythm-relevant information and their evaluation for the approximate determination of the tempo and phase of a music data stream,

2 ein weiteres Blockschaltbild zur sukzessiven Korrektur von ermitteltem Tempo und Phase, 2 a further block diagram for the successive correction of the determined tempo and phase,

4 ein Blockschaltbild eines interaktiven Musik-Abspielers gemäß der Erfindung mit Eingriffsmöglichkeit in eine aktuelle Abspielposition, 4 1 is a block diagram of an interactive music player according to the invention with the possibility of engaging in a current playback position;

5 ein Blockschaltbild einer zusätzlichen Signalverarbeitungskette zur Realisierung eines Scratch-Audio-Filters gemäß der Erfindung und 5 a block diagram of an additional signal processing chain for the realization of a scratch-audio filter according to the invention and

6 einen Datenträger, der Audiodaten und Steuerdateien zur Reproduktion von aus den Audiodaten gemäß der Erfindung erstellten Gesamtwerken vereint. 6 a data carrier combining audio data and control files for reproducing entire works created from the audio data according to the invention.

Im folgenden soll eine mögliche Realisierung der näherungsweisen Tempo- und Phasenerkennung sowie Tempo- und Phasenanpassung gemäß der Erfindung dargestellt werden.in the following is a possible Realization of the approximation Tempo and phase detection as well as tempo and phase adaptation according to the invention being represented.

Erster Schritt der Prozedur ist eine erste, näherungsweise Ermittlung des Tempos des Musikstückes. Dies erfolgt durch eine statistische Auswertung der zeitlichen Abstände der sog. Beat-Ereignisse. Eine Möglichkeit zur Gewinnung rhythmusrelevanter Ereignisse aus dem Audiomaterial erfolgt durch schmale Bandpassfilterung des Audiosignals in verschiedenen Frequenzbereichen. Um das Tempo in Echtzeit zu ermitteln, werden für die folgenden Berechnungen jeweils nur die Beatereignisse der letzten Sekunden verwendet. Dabei entsprechen 8 bis 16 Ereignisse in etwa 4 bis 8 Sekunden.first Step of the procedure is a first, approximate determination of the Tempo of the piece of music. This is done by a statistical evaluation of the time intervals of so-called beat events. A possibility for obtaining rhythm-relevant events from the audio material is done by narrow bandpass filtering of the audio signal in different Frequency ranges. To determine the tempo in real time for the following calculations only the beat events of the last one Seconds used. Here are 8 to 16 events in about 4 to 8 seconds.

Aufgrund der quantisierten Struktur von Musik (16tel Noten Raster) können nicht nur Viertelnoten Beat-Intervalle zur Tempoberechnung herangezogen werden. Auch andere Intervalle (16tel, 8tel, ½ und ganze Noten) können durch Oktavierung (z.B. durch Multiplizieren ihrer Frequenz mit 2er Potenzen) in eine vordefinierte Frequenz-Oktave (z.B. 80 – 160 bpm, Englisch für Beats per minute) transformiert werden und somit temporelevante Informationen liefern. Fehlerhafte Oktavierungen (z.B. von Triolen-Intervallen) fallen später wegen ihrer verhältnismäßigen Seltenheit bei der statistischen Auswertung nicht ins Gewicht.by virtue of the quantized structure of music (16th notes grid) can not only quarter-note beat intervals used for tempo calculation become. Other intervals (16th, 8th, ½ and whole notes) can also be used Octave (for example, by multiplying its frequency by powers of 2) into a predefined frequency octave (e.g., 80 - 160 bpm, English for beats per minute) and thus temporally relevant information deliver. Faulty octaves (e.g., of triplet intervals) fall later because of their relative rarity in the statistical evaluation not significant.

Um auch Triolen, bzw. geschuffelte Rhythmen (einzelne leicht aus dem 16tel Raster versetzte Noten) zu erfassen, werden die im ersten Punkt gewonnenen Zeitintervalle zusätzlich noch in Paaren und Dreiergruppen durch Addition ihrer Zeitwerte gruppiert bevor sie oktaviert werden. Durch dieses Verfahren wird die rhythmische Struktur zwischen den Takten aus den Zeitintervallen herausgerechnet.Around also triplets, or ruffled rhythms (single easily from the In the first Point gained time intervals additionally in pairs and triples grouped by adding their time values before they are octaved. Through this procedure, the rhythmic structure between the Clocks out of the time intervals.

Die so gewonnene Menge an Daten wird auf Häufungspunkte untersucht. Es entstehen dabei in der Regel drei Häufungsmaxima bedingt durch die Oktavierungs- und Gruppierungsverfahren, deren Wert in rationalen Verhältnis (2/3, 5/4, 4/5 oder 3/2) zueinander stehen. Sollte aus der Stärke eines der Maxima nicht deutlich genug hervorgehen, das dieses das tatsächliche Tempo des Musikstückes angibt, lässt sich das korrekte Maximum aus dem rationalen Verhältnissen der Maxima untereinander ermitteln.The The amount of data collected is examined for accumulation points. It As a rule, three accumulation maxima arise as a result of this the octaving and grouping methods whose value is rational relationship (2/3, 5/4, 4/5 or 3/2) to each other. Should be out of the strength of a the maxima do not emerge clearly enough that this is the actual Tempo of the piece of music indicates lets the correct maximum from the rational conditions determine the maxima among each other.

Zur näherungsweisen Ermittlung der Phase wird ein Referenz-Oszillator verwendet. Dieser schwingt mit dem zuvor ermittelten Tempo. Seine Phase wird vorteilhaft so gewählt, dass sich die beste Übereinstimmung zwischen Beat-Ereignisse des Audiomaterials und Nulldurchgängen des Oszillators ergibt.to approximate Determining the phase, a reference oscillator is used. This resonates the previously determined pace. Its phase is advantageously chosen so that the best match between beat events of the audio material and zero crossings of the audio Oscillator results.

Anschließend erfolgt eine sukzessive Verbesserung der Tempo- und Phasenermittlung. Durch die natürliche Unzulänglichkeit der ersten näherungsweisen Tempoermittlung wird sich zunächst nach einigen Sekunden die Phase des Referenz-Oszillators relativ zum Audiotrack verschieben. Diese systematische Phasenverschiebung gibt Auskunft darüber, um welche Menge das Tempo des Referenz-Oszillators verändert werden muss. Eine Korrektur des Tempos und der Phase erfolgt vorteilhaft in regelmäßigen Abständen, um unterhalb der Hörbarkeitsgrenze der Verschiebungen und der Korrekturbewegungen zu bleiben.Then done a gradual improvement of the speed and phase determination. By the natural inadequacy the first approximation Tempo determination will be first after a few seconds, the phase of the reference oscillator relative move to the audio track. This systematic phase shift gives information about by what amount the tempo of the reference oscillator has to be changed. A correction of the tempo and the phase is advantageously carried out at regular intervals to below the audibility limit the shifts and corrective movements.

Sämtliche Phasenkorrekturen, die ab der näherungsweisen Phasenkorrelation erfolgt sind, werden über die Zeit akkumuliert, so dass die Berechnung des Tempos und der Phase auf einem ständig wachsenden Zeitintervall basiert. Dadurch werden die Tempo- und Phasen-Werte zunehmend präziser und verlieren den eingangs erwähnten Makel der näherungsweisen Echtzeitmessung. Nach kurzer Zeit (ca. 1 min) sinkt der Fehler des mit diesem Verfahren ermittelten Tempo-Wertes unterhalb 0.1%, ein Maß an Genauigkeit, das Vorraussetzung für die Berechnung von Loop-Längen ist.All Phase corrections starting from the approximations Phase correlation are done, are accumulated over time, so that the calculation of tempo and phase on an ever-increasing time interval based. As a result, the tempo and phase values are increasingly precise and lose the aforementioned Blemish of approximation Real-time measurement. After a short time (about 1 min) the error of the with this method determined tempo value below 0.1% Measure Accuracy, which is a prerequisite for the calculation of loop lengths.

Die Darstellung gemäß 1 zeigt eine mögliche technische Realisierung der beschriebenen näherungsweisen Tempo- und Phsenerkennung eines Musikdatenstroms in Echtzeit anhand eines Blockschaltbildes. Die gezeigte Struktur kann auch als ,Beat Detector' bezeichnet werden.The representation according to 1 shows a possible technical realization of the described approximate tempo and Phsenerkennung a music data stream in real time using a block diagram. The structure shown can also be called a 'Beat Detector'.

Als Input liegen zwei Ströme von Audio-Events bzw. Audio-Ereignissen Ei mit Wert 1 vor, welche den Peaks in den Frequenzbändern F1 bei 150 Hz und F2 bei 4000Hz oder 9000 Hz entsprechen. Diese beiden Eventströme werden vorerst getrennt behandelt, indem diese durch jeweilige Bandpassfilter mit jeweiliger Grenzfrequenz F1 und F2 gefiltert werden.As input are two streams of audio events and audio events E i with value 1 before meeting the peaks in the frequency bands F1 and F2 at 150 Hz or 9000 Hz tsprechen at 4000Hz s. These two event streams are initially treated separately by filtering them through respective bandpass filters having respective cutoff frequencies F1 and F2.

Folgt ein Event innerhalb von 50 ms dem vorhergehenden, wird das zweite Event nicht berücksichtigt. Eine Zeit von 50 ms entspricht der Dauer eines 16tels bei 300 bpm, liegt also weit unter der Dauer des kürzesten Intervalls, in dem die Musikstücke üblicherweise angesiedelt sind.follows an event within 50 ms of the previous one will become the second Event not considered. A Time of 50 ms equals the duration of a 16tels at 300 bpm well below the duration of the shortest Intervals in which the music pieces usually are settled.

Aus dem Strom der gefilterten Events Ei wird nun in jeweiligen Verarbeitungseinheiten BD1 und BD2 ein Strom aus den einfachen Zeitintervallen Ti zwischen den Events gebildet.From the stream of filtered events E i , a stream of the simple time intervals T i between the events is formed in respective processing units BD1 and BD2.

Aus dem Strom der einfachen Zeitintervalle Tli werden in gleichen Verarbeitungseinheiten BPM_C1 und BPM_C2 jeweils zusätzlich zwei weitere Ströme der bandbegrenzten Zeitintervalle gebildet, nämlich mit Zeitintervallen T2i, den Summen von jeweils zwei aufeinanderfolgenden Zeitintervallen, und mit Zeitintervallen T3i, den Summen von jeweils drei aufeinanderfolgenden Zeitintervallen. Die dazu herangezogenen Events dürfen sich auch überlappen.Two further streams of the band-limited time intervals are additionally formed from the stream of simple time intervals T li in identical processing units BPM_C1 and BPM_C2, namely with time intervals T 2i , the sums of two successive time intervals, and with time intervals T 3i , the sums of three in each case successive time intervals. The events used may also overlap.

Dadurch werden aus dem Strom: t1, t2, t3, t4, t5, t6, ... zusätzlich folgende zwei Ströme erzeugt:
T2i: (t1+t2), (t2+t3), (t3+t4), (t4+t5), (t5+t6), ... und
T3i: (t1+t2+t3), (t2+t3+t4), (t3+t9+t5), (t4+t5+t6), ...
As a result, the following two currents are additionally generated from the current: t 1 , t 2 , t 3 , t 4 , t 5 , t 6 ,.
T 2i : (t 1 + t 2 ), (t 2 + t 3 ), (t 3 + t 4 ), (t 4 + t 5 ), (t 5 + t 6 ), ... and
T 3i : (t 1 + t 2 + t 3 ), (t 2 + t 3 + t 4 ), (t 3 + t 9 + t 5 ), (t 4 + t 5 + t 6 ), ...

Die drei Ströme T1i, T2i, T3i, werden nun zeit-oktaviert in entsprechenden Verarbeitungseinheiten OKT. Die Zeit-Oktavierung OKT erfolgt derart, dass die einzelnen Zeitintervalle jedes Stroms so oft verdoppelt werden, bis sie in einem vorgegebenen Intervall BPM_REF liegen. Auf diese Weise erhält man drei Datenströme T1io, T2io, T3io, ... Die obere Grenze des Intervalls berechnet sich aus der unteren bpm-Grenze nach der Formel: thi [ms] = 60000/bpmlow The three streams T 1i , T 2i , T 3i are now time-octaved in corresponding processing units OKT. The time octave OKT is performed such that the individual time intervals of each current are doubled until they lie in a predetermined interval BPM_REF. In this way one obtains three data streams T 1io , T 2io , T 3io , ... The upper limit of the interval is calculated from the lower bpm limit according to the formula: t hi [ms] = 60000 / bpm low

Die untere Grenze des Intervalls liegt bei 0.5* thi.The lower limit of the interval is 0.5 * t hi .

Jeder der so erhaltenen drei Ströme wir nun für beide Frequenzbänder F1, F2 in jeweiligen weiteren Verarbeitungseinheiten CHK auf seine Konsistenz überprüft. Damit wird ermittelt, ob jeweils eine gewisse Anzahl aufeinanderfolgender, zeit-oktavierter Intervallwerte innerhalb einer vorgegebenen Fehlergrenze liegen. Dazu überprüft man beispielsweise im einzelnen mit folgenden Werten:
Für T1i überprüft man dessen letzte 4 Events t11o, t12o, t13o, t14o daraufhin, ob gilt:

  • a) [t11o – t12o)2 + (t11o – t13o)2 + (t11o – t14o)2 < 20
Each of the three streams thus obtained is now stored for both frequency bands F1, F2 in respective others Processing units CHK checked for consistency. This is used to determine whether a certain number of consecutive, time-octaved interval values are within a predetermined error limit. For example, the following values are checked in detail:
For T 1i check its last 4 events t 11o , t 12o , t 13o , t 14o then whether
  • a) [t 11o - t 12o ) 2 + ( t11o - t 13o ) 2 + (t 11o - t 14o ) 2 <20

Ist dies der Fall, wird der Wert t11o als gültiges Zeitintervall ausgegeben.If this is the case, the value t 11o is output as a valid time interval.

Für T2i überprüft man dessen letzte 4 Events t21o, t22o, t23o, t24o daraufhin, ob gilt:

  • b) (t21o – t22o)2 + (t21o – t23o)2 + (t21o – t24o)2 < 20
For T 2i, check its last 4 events t 21o , t 22o , t 23o , t 24o to see if:
  • b) (t 21o - t 22o ) 2 + (t 21o - t 23o ) 2 + (t 21o - t 24o ) 2 <20

Ist dies der Fall, wird der Wert t11o als gültiges Zeitintervall ausgegeben.If this is the case, the value t 11o is output as a valid time interval.

Für T3i überprüft man dessen letzte 3 Events t31o, t32o, t33o, daraufhin, ob gilt:

  • C) (t31o – t32o)2 + (t31o – t33o)2 < 20
For T 3i check its last 3 events t 31o , t 32o , t 33o , then, if:
  • C) (t 31o - t 32o ) 2 + (t 31o - t 33o ) 2 <20

Ist dies der Fall, wird der Wert t31o als gültiges Zeitintervall ausgegeben.If this is the case, the value t 31o is output as a valid time interval.

Hierbei hat die Konsistenzprüfung a) Vorrang vor b) und b) hat Vorrang vor c). Wird also bei a) ein Wert ausgegeben, werden b) und c) nicht mehr untersucht. Wird bei a) kein Wert ausgegeben, so wird b) untersucht, usw. Wird hingegen weder bei a) noch bei b) noch bei c) ein konsistenter Wert gefunden, so wird die Summe der letzten 4 nicht oktavierten Einzelintervalle (t1+t2+t3+t4) ausgegeben.In this case, the consistency check a) takes precedence over b) and b) takes precedence over c). If a value is output at a), b) and c) are no longer examined. If no value is output at a), b) is examined, etc. If, however, neither a) nor b) nor c) finds a consistent value, the sum of the last 4 non-octave individual intervals (t 1 + t 2 + t 3 + t 4 ).

Der so aus den drei Strömen ermittelte Wertestrom konsistenter Zeitintervalle wird wiederum in einer nachgeschalteten Verarbeitungseinheit OKT in das vorgegebene Zeit-Intervall BPM_REF oktaviert. Anschließend wird das oktavierte Zeit-Intervall in einen BPM Wert umgerechnet.Of the so out of the three streams The determined value stream of consistent time intervals will turn in a downstream processing unit OKT in the specified Time interval BPM_REF octaved. Then the octave time interval becomes one BPM value converted.

Als Resultat liegen jetzt zwei Ströme BPM1 und BPM2 von bpm-Werten vor – einer für jeden der beiden Frequenzbereiche F1 und F2. In einem Prototyp werden diese Ströme mit einer festen Frequenz von 5 Hz abgefragt und die jeweils letzten acht Events aus beiden Strömen für die statistische Auswertung herangezogen. Man kann an dieser Stelle jedoch durchaus auch eine variable (eventgesteuerte) Abtastrate verwenden und man kann auch mehr als nur die letzten 8 Events verwenden, beispielsweise 16 oder 32 Events.When Result is now two streams BPM1 and BPM2 of bpm values before - one for each the two frequency ranges F1 and F2. Be in a prototype these streams queried with a fixed frequency of 5 Hz and the last one eight events from both streams for the statistical evaluation. You can at this point but certainly also a variable (event-driven) sampling rate and you can also use more than just the last 8 events, for example, 16 or 32 events.

Diese letzten 8, 16 oder 32 Events aus jedem Frequenzband F1, F2 werden zusammengeführt und in einer nachgeschalteten Verarbeitungseinheit STAT auf Häufungsmaxima N betrachtet. In der Prototyp-Version wird ein Fehlerintervall von 1,5 bpm verwendet, d.h. solange Events weniger als 1,5 bpm voneinander differieren, werden sie als zusammengehörig betrachtet und addieren sich in der Gewichtung. Die Verarbeitungseinheit STAT ermittelt hierbei, bei welchen BPM-Werten Häufungen auftreten und wie viele Events den jeweiligen Häufungspunkten zuzuordnen sind. Der am stärksten gewichtete Häufungspunkt kann als die lokale BPM-Messung gelten und liefert den gewünschten Tempowert A.These last 8, 16 or 32 events from each frequency band F1, F2 become together and in a downstream processing unit STAT on accumulation maxima N considered. In the prototype version, an error interval of 1.5 bpm, i. as long as events are less than 1.5 bpm from each other differ, they are considered as belonging together and add in weighting. The processing unit STAT determines Here, at which BPM values accumulations occur and how many Events the respective accumulation points are assigned. The strongest weighted accumulation point can be considered as the local BPM measurement and delivers the desired Tempo value A.

In einer ersten Weiterbildung dieses Verfahrens erfolgt zusätzlich zu der lokalen BPM-Messung eine globale Messung, indem man die Zahl, der verwendeten Events auf 64, 128 etc. ausweitet. Bei alternierenden Rhythmus-Patterns, in welchen nur jeden 4. Takt das Tempo klar durchkommt, kann häufig eine Eventzahl von mindestens 128 nötig sein. Solch eine Messung ist zuverlässiger, benötigt jedoch auch mehr Zeit.In A first development of this method is in addition to the local BPM measurement a global measurement by taking the number, the used events on 64, 128 etc. expands. For alternating rhythm patterns, in which only every 4th bar the tempo gets through clearly, can often one Event number of at least 128 required be. Such a measurement is more reliable, but also takes more time.

Eine weitere entscheidende Verbesserung kann durch folgende Maßnahme erzielt werden:
In Betracht gezogen wird nicht nur das erste Häufungsmaximum, sondern auch das zweite. Dieses zweite Maximum entsteht fast immer durch vorhandene Triolen und kann sogar stärker als das erste Maximum sein. Das Tempo der Triolen hat jedoch ein klar definiertes Verhältnis zum Tempo der Viertel Noten, so dass sich aus dem Verhältnis der Tempi der beiden ersten Maxima ermitteln lässt, welches Häufungsmaximum den Vierteln und welches den Triolen zuzuordnen ist.
Another crucial improvement can be achieved by:
Not only the first accumulation maximum is taken into consideration, but also the second accumulation maximum. This second maximum is almost always due to triplets present and may even be stronger than the first maximum. However, the tempo of the triplets has a clearly defined relationship to the tempo of the quarter notes, so that it can be determined from the ratio of the tempi of the first two maxima, which accumulation maximum is assigned to the quarters and which to the triplets.

Nimmt man T1 als das Tempo des ersten Maximums in bpm und T2 als das des zweiten Maximums an, so gelten folgende Regeln Wenn T2 = 2/3·T1, dann ist T2 das Tempo.
Wenn T2 = 4/3·T1, dann ist T2 das Tempo.
Wenn T2 = 2/5·T1, dann ist T2 das Tempo.
Wenn T2 = 4/5·T1, dann ist T2 das Tempo.
Wenn T2 = 3/2·T1, dann ist T1 das Tempo.
Wenn T2 = 3/4·T1, dann ist T1 das Tempo.
Wenn T2 = 5/2·T1, dann ist T1 das Tempo.
Wenn T2 = 5/4·T1, dann ist T1 das Tempo.
Taking T1 as the tempo of the first maximum in bpm and T2 as that of the second maximum The following rules apply if T2 = 2/3 · T1, then T2 is the tempo.
If T2 = 4/3 · T1, then T2 is the tempo.
If T2 = 2/5 · T1 then T2 is the tempo.
If T2 = 4/5 * T1 then T2 is the tempo.
If T2 = 3/2 * T1 then T1 is the tempo.
If T2 = 3/4 * T1 then T1 is the tempo.
If T2 = 5/2 * T1 then T1 is the tempo.
If T2 = 5/4 * T1 then T1 is the tempo.

Ein näherungsweiser Phasenwert P wird anhand einer der beiden gefilterten einfachen Zeitintervalle Ti zwischen den Events ermittelt, vorzugsweise anhand derjenigen Werte, die mit der niedrigeren Frequenz F1 gefiltert sind. Diese dienen zur groben Bestimmung der Frequenz des Referenz-Oszillators.An approximate phase value P is determined from one of the two filtered simple time intervals T i between the events, preferably from those values filtered at the lower frequency F1. These are used to roughly determine the frequency of the reference oscillator.

Die Darstellung nach 2 zeigt ein mögliches Blockschaltbild zur sukzessiven Korrektur von ermitteltem Tempo A und Phase P, im folgenden als ,CLOCK CONTROL' bezeichnet.The representation after 2 shows a possible block diagram for the successive correction of the detected tempo A and phase P, hereinafter referred to as, CLOCK CONTROL '.

Zunächst wird der Referenz-Oszillator bzw. die Referenz-Clock MCLK in einem ersten Schritt 1 mit den groben Phasenwerten P und Tempowerten A aus der Beat-Detection gestartet, was quasi einem Reset des in 2 gezeigten Regelkreises gleichkommt. Anschließend werden in einem weiteren Schritt 2 die Zeitintervalle zwischen Beat-Events des eingehenden Audiosignals und der Referenz-Clock MCLK ermittelt. Dazu werden die näherungsweisen Phasenwerte P mit einem Referenzsignal CLICK, welches die Frequenz des Referenz-Oszillators MCLK aufweist, in einem Komparator V verglichen.First, the reference oscillator or the reference clock MCLK is started in a first step 1 with the coarse phase values P and tempo values A from the beat detection, which is virtually a reset of the in 2 equal to the control loop shown. Subsequently, in a further step 2, the time intervals between beat events of the incoming audio signal and the reference clock MCLK are determined. For this purpose, the approximate phase values P are compared with a reference signal CLICK, which has the frequency of the reference oscillator MCLK, in a comparator V.

Bei systematischem Überschreiten (+) einer „kritischen" Abweichung bei mehreren aufeinanderfolgenden Ereignissen mit einem Wert von beispielsweise über 30ms wird in einem weiteren Verarbeitungsschritt 3 die Referenz-Clock MCLK durch eine kurzzeitige Tempoänderung A(i+1) = A(i) + q oder A(i+1) = A(i) – qentgegen der Abweichung (wieder) an das Audio-Signal angepasst, wobei q die verwendete Absenkung oder Anhebung des Tempos darstellt. Andernfalls (–) wird das Tempo konstant gehalten.In the case of systematic exceeding (+) of a "critical" deviation in the case of several consecutive events having a value of, for example, more than 30 ms, in a further processing step 3 the reference clock MCLK is changed by a brief change in tempo A (i + 1) = A (i) + q or A (i + 1) = A (i) - q against the deviation (again) adapted to the audio signal, where q represents the used lowering or raising the tempo. Otherwise (-) the tempo is kept constant.

Im weiteren Verlauf erfolgt in einem weiteren Schritt 4 eine Summierung aller Korrektur-Ereignisse aus Schritt 3 und der seit dem letzten „Reset" verstrichenen Zeit in eigenen Speichern (nicht gezeigt). Bei ungefähr jedem 5. bis 10. Ereignis einer annähernd akkuraten Synchronisierung (Differenz zwischen den Audiodaten und der Referenz-Clock MCLK etwa unterhalb 5 ms) wird der Tempo-Wert auf der Basis des bisherigen Tempo-Wertes, der bis dahin akkumulierten Korrektur-Ereig nisse und der seit dem verstrichenen Zeit in einem weiteren Schritt 5 wie folgt neu errechnet.in the further course takes place in a further step 4 a summation all correction events from step 3 and the time elapsed since the last "reset" in own memories (not shown). At about every 5th to 10th event one approximate accurate synchronization (difference between the audio data and the reference clock MCLK is below about 5 ms) becomes the tempo value on the basis of the previous tempo value, which accumulated until then Correction events and since the elapsed time in one recalculate step 5 as follows.

Mit

  • – q als der in Schritt 3 verwendeten Absenkung oder Anhebung des Tempos (beispielsweise um den Wert 0.1),
  • – dt als der Summe der Zeit, für welche das Tempo insgesamt abgesenkt oder angehoben wurde (Anhebung positiv, Absenkung negativ),
  • – T als dem seit dem letzten Reset (Schritt 1) verstrichenen Zeitintervall, und
  • – bpm als dem in Schritt 1 verwendeten Tempowert A errechnet sich das neue, verbesserte Tempo nach folgender einfachen Formel: bpm_neu = bpm·(1+(q·dt)/T)
With
  • - q than the decrease or increase in the tempo used in step 3 (for example by the value 0.1),
  • - dt as the sum of the time for which the tempo has been lowered or raised altogether (increase positive, decrease negative),
  • T as the time interval elapsed since the last reset (step 1), and
  • - bpm as the tempo value A used in step 1, the new, improved tempo is calculated according to the following simple formula: bpm_new = bpm * (1+ (q * dt) / T)

Weiter wird geprüft, ob die Korrekturen in Schritt 3 über einen gewissen Zeitraum hinweg immer jeweils negativ oder positiv sind. In solch einem Fall liegt wahrscheinlich eine Tempo-Änderung im Audiomaterial vor, die mit obigem Verfahren nicht korrigiert werden kann. Dieser Status wird erkannt und bei Erreichen des nächsten annähernd perfekten Synchronisations-Ereignisses (Schritt 5) werden der Zeit- und der Korrekturspeicher in einem Schritt 6 gelöscht, um den Ausgangspunkt in Phase und Tempo neu zu setzten. Nach diesem „Reset" beginnt die Prozedur erneut mit einem Aufsetzen auf Schritt 2 das Tempo zu optimieren.Further is checked, whether the corrections in step 3 over always negative or positive for a certain period of time are. In such a case, there is probably a tempo change in the audio that is not corrected by the above procedure can be. This status is recognized and almost perfect when the next one is reached Synchronization event (step 5) will be the time and the Correction memory cleared in a step 6 to the starting point to reset in phase and pace. After this "reset", the procedure starts again with a Put on step 2 to optimize the tempo.

Eine Synchronisierung eines zweiten Musikstückes erfolgt nun durch Anpassung von dessen Tempo und Phase. Die Anpassung des zweiten Musikstückes erfolgt indirekt über den Referenz-Oszillator. Nach der oben beschriebenen näherungsweisen Tempo- und Phasenermittlung des Musikstückes werden diese Werte sukzessive nach obigem Verfahren an den Referenz-Oszillator angepasst, nur wird diesmal die Abspielphase und die Abspielgeschwindigkeit des Tracks selbst verändert. Das originale Tempo des Tracks lässt sich rückwärts leicht aus der notwendigen Veränderung seiner Abspielgeschwindigkeit gegenüber der Original-Abspielgeschwindigkeit errechnen.A synchronization of a second piece of music is now done by adjusting its tempo and phase. The adaptation of the second piece of music is done indirectly via the reference oscillator. After the above-described approximate tempo and phase determination of the piece of music, these values are successively adapted to the reference oscillator according to the above method, only this time the playback phase and the playback speed of the track itself is changed. The original tempo of the track can be easily calculated backwards from the necessary change in its playback speed compared to the original playback speed.

Zum Abspielen von vorproduzierter Musik werden herkömmlicherweise verschiedenartige Geräte für verschiedene Speichermedien wie Schallplatte, Compakt Disk oder Cassette verwendet. Diese Formate wurden nicht dafür entwickelt, in den Abspielprozess einzugreifen, um die Musik damit auf kreative Art zu bearbeiten. Diese Möglichkeit ist aber wünschenswert, und wird heutzutage trotz der gegebenen Einschränkungen von den genannten DJ's praktiziert. Dabei werden bevorzugt Vinyl-Schallplatten verwendet, weil man dort am leichtesten mit der Hand die Abspielgeschwindigkeit und -position beeinflussen kann.To the Playing pre-produced music is traditionally diverse equipment for different Storage media such as vinyl, compact disk or cassette used. These formats were not for that designed to intervene in the playback process to the music with it to work in a creative way. This possibility is desirable, and is practiced these days, despite the limitations of the said DJ's. there are preferred vinyl records used because it is easiest to play with the speed of play and position.

Heute werden aber überwiegend digitale Formate wie Audio CD und MP3 zum Speichern von Musik verwendet. Bei MP3 handelt es sich um ein Kompressionsverfahren für digitale Audiodaten nach dem MPEG-Standard (MPEG 1 Layer 3). Das Verfahren ist asymmetrisch, d.h. die Codierung ist sehr viel aufwendiger als die Decodierung. Ferner handelt es sich um ein verlustbehaftetes Verfahren. Die vorliegende Erfindung ermöglicht nun den genannten kreativen Umgang mit Musik auf beliebigen digitalen Formaten durch einen geeigneten interaktiven Musik-Abspieler, der von den durch die vorangehend dargestellten erfindungsgemäßen Maßnahmen geschaffenen neuen Möglichkeiten Gebrauch macht.today but are predominantly Digital formats like Audio CD and MP3 are used to store music. MP3 is a digital compression method Audio data according to the MPEG standard (MPEG 1 Layer 3). The procedure is asymmetric, i. the coding is much more complicated than the decoding. Furthermore, it is a lossy one Method. The present invention now allows said creative Handling music on any digital formats through a suitable interactive music player, that of the measures according to the invention shown above created new possibilities Use.

Um gezielt Eingreifen zu können, ist es wichtig, eine grafische Repräsentation der Musik zu haben, in der man die aktuelle Abspielposition erkennt und auch einen gewissen Zeitraum in der Zukunft und in der Vergangenheit erkennt. Dazu stellt man üblicherweise die Amplitudenhüllkurve der Klangwellenform über einen Zeitraum von mehreren Sekunden vor und nach der Abspielposition dar. Die Darstellung verschiebt sich in Echtzeit in der Geschwindigkeit, in der die Musik spielt.Around to be able to intervene in a targeted manner, is it important to have a graphical representation of the music in which one recognizes the current play position and also a certain one Recognizes period in the future and in the past. Adds to this usually the amplitude envelope the sound waveform over a period of several seconds before and after the playhead position The display shifts in real time in speed, in which the music plays.

Prinzipiell möchte man möglichst viel hilfreiche Information in der grafischen Darstellung haben, um gezielt eingreifen zu können. Außerdem möchte man möglichst ergonomisch in den Abspielvorgang eingreifen können, auf vergleichbare Art zum sogenannten "Scratching" auf Vinylplattenspielern, worunter man das Anhalten und vorwärts oder rückwärts Bewegen des Plattentellers während der Wiedergabe versteht.in principle would like to if possible have much helpful information in the graph, to intervene in a targeted manner. Furthermore would like to if possible ergonomically can intervene in the playback process, in a comparable way for so-called "scratching" on vinyl record players, including stopping and moving the turntable forwards or backwards while understand the playback.

Bei dem durch die Erfindung geschaffenen interaktiven Musik-Abspieler können nun musikalisch relevante Zeitpunkte, insbesondere die Taktschläge, mit der vorangehend (1 und 2) erläuterten Takterkennungsfunktion aus dem Audiosignal extrahiert und als Markierungen in der grafischen Darstellung angezeigt werden, z.B. auf einem Display oder auf einem Bildschirm eines digitalen Computers, auf dem der Musik-Abspieler durch eine geeignete Programmierung realisiert ist.In the interactive music player created by the invention, musically relevant times, in particular the beats, can now be used with the above ( 1 and 2 ) extracted from the audio signal and displayed as markers in the graphical representation, for example on a display or on a screen of a digital computer on which the music player is realized by an appropriate programming.

Weiter ist ein Hardware-Steuerelement R1 vorgesehen, z.B. ein Knopf, insbesondere der Mausknopf, mit dem man zwischen zwei Betriebsarten umschaltet:

  • a) Musik läuft frei, mit konstantem Tempo,
  • b) Abspielposition und -geschwindigkeit wird vom Anwender direkt beeinflusst.
Furthermore, a hardware control element R1 is provided, eg a button, in particular the mouse button, with which one switches over between two operating modes:
  • a) music is free, with a constant tempo,
  • b) Playback position and speed are directly influenced by the user.

Der Modus a) entspricht einer Vinylplatte, die man nicht anfasst und deren Geschwindigkeit gleich der des Plattentellers ist. Der Modus b) hingegen entspricht einer Vinylplatte, die man mit der Hand anhält und hin- und herschiebt.Of the Mode a) corresponds to a vinyl record that you do not touch and whose speed is equal to that of the turntable. The mode b) on the other hand corresponds to a vinyl record, which one stops by hand and back and forth pushes.

In einer vorteilhaften Ausführungsform eines interaktiven Musik-Abspielers wird die Abspielgeschwindigkeit in Modus a) weiter beeinflusst durch die automatische Steuerung zur Synchronisierung des Takts der abgespielten Musik zu einem anderen Takt (vgl. 1 und 2). Der andere Takt kann synthe tisch erzeugt oder von einer anderen gleichzeitig spielenden Musik gegeben sein.In an advantageous embodiment of an interactive music player, the playback speed in mode a) is further influenced by the automatic control for synchronizing the clock of the music being played to another clock (cf. 1 and 2 ). The other clock may be generated synthetically or given by another concurrently playing music.

Außerdem ist ein weiteres Hardware-Steuerelement R2 vorgesehen, mit dem man im Betriebsmodus b) quasi die Plattenposition bestimmt. Dies kann ein kontinuierlicher Regler, oder auch die Computermaus sein.Besides that is another hardware control R2 is provided, with which one in the Operating mode b) quasi determines the plate position. This can be one continuous regulator, or even the computer mouse.

Die Darstellung nach 4 zeigt ein Blockschaltbild einer solchen Anordnung mit den im folgenden erläuterten Signalverarbeitungsmitteln, mit denen ein interaktiver Musik-Abspieler gemäß der Erfindung mit Eingriffsmöglichkeit in eine aktuelle Abspielposition geschaffen wird.The representation after 4 shows a block diagram of such an arrangement with the signal processing means explained below, with which an interactive music player according to the invention is provided with the possibility of intervention in a current play position.

Die mit diesem weiteren Steuerelement R2 vorgegebenen Positionsdaten haben üblicherweise eine begrenzte zeitliche Auflösung, d.h. es wird nur in regelmäßigen oder unregelmäßigen Abständen eine Nachricht geschickt, die die aktuelle Position übermittelt. Die Abspielposition des gespeicherten Audiosignals soll sich aber gleichmäßig ändern, mit einer zeitlichen Auflösung, die der Audio-Abtastrate entspricht. Deshalb verwendet die Erfindung an dieser Stelle eine Glättungsfunktion, die aus dem mit dem Steuerelement R2 vorgegebenen stufigen Signal ein hochaufgelöstes, gleichmäßig sich änderndes Signal erzeugt.The with this further control R2 predetermined position data usually have a limited temporal resolution, i.e. it will only be in regular or irregular intervals one Message sent, which transmits the current position. The playhead the stored audio signal but should change evenly, with a temporal resolution, which corresponds to the audio sample rate. Therefore, the invention uses at this point a smoothing function, from the given with the control R2 stage signal a high resolution, changing evenly Signal generated.

Eine Methode hierzu besteht darin, mit jeder vorgegebenen Positionsnachricht eine Rampe mit konstanter Steigung auszulösen, die in einer vorgegebenen Zeit das geglättete Signal von seinem alten Wert auf den Wert der Positionsnachricht fährt. Eine weitere Möglichkeit ist, die stufige Wellenform in einen linearen digitalen Tiefpaß-Filter LP zu schicken, dessen Ausgang das gewünschte geglättete Signal darstellt. Dafür eignet sich besonders ein 2-Pol Resonanzfilter. Eine Kombination (Reihenschaltung) der beiden Glättungen ist auch möglich und vorteilhaft und ermöglicht folgende vorteilhafte Signalverarbeitungskette:
vorgegebenes Stufensignal -> Rampenglättung -> Tiefpassfilter -> exakte Abspielposition
oder
vorgegebenes Stufensignal -> Tiefpassfilter -> Rampenglättung -> exakte Abspielposition
One method for doing this is to trigger a ramp with a constant slope with each given position message, which moves the smoothed signal from its old value to the value of the position message in a predetermined time. Another possibility is to send the stepped waveform into a linear digital low-pass filter LP whose output represents the desired smoothed signal. For this purpose, a 2-pole resonance filter is particularly suitable. A combination (series connection) of the two smoothings is also possible and advantageous and allows the following advantageous signal processing chain:
preset step signal -> ramp smoothing -> lowpass filter -> exact playback position
or
preset step signal -> low pass filter -> ramp smoothing -> exact playback position

Das Blockschaltbild nach 4 veranschaulicht die an einem vorteilhaften Ausführungsbeispiel in Form einer Prinzipskizze. Das Steuerelement R1 (hier ein Taster) dient zum Wechsel der Betriebsmodi a) und b), indem dieser einen Schalter SW1 triggert. Der Regler R2 (hier ein kontinuierlicher Schieberegler) liefert die Positionsinformation mit zeitlich begrenzter Auflösung. Diese dient einem Tiefpaß-Filter LP zur Glättung als Eingangssignal. Das geglättete Positionssignal wird nun differenziert (DIFF) und liefert die Abspielgeschwindigkeit. Der Schalter SW1 wird mit diesem Signal an einem ersten Eingang IN1 angesteuert (Modus b). Der andere Eingang IN2 wird mit dem Tempowert A, der wie in 1 und 2 beschrieben ermittelt werden kann, beaufschlagt (Modus a). Über das Steuerelement R1 erfolgt der Wechsel zwischen den Eingangssignalen.The block diagram after 4 illustrates the in an advantageous embodiment in the form of a schematic diagram. The control element R1 (here a button) serves to change the operating modes a) and b) by triggering a switch SW1. The controller R2 (here a continuous slider) supplies the position information with temporally limited resolution. This serves as a low-pass filter LP for smoothing as an input signal. The smoothed position signal is now differentiated (DIFF) and provides the playback speed. The switch SW1 is driven with this signal at a first input IN1 (mode b). The other input IN2 is connected to the tempo value A, as in 1 and 2 can be determined described (mode a). The control element R1 is used to change between the input signals.

Wenn man vom einen in den anderen Modus wechselt (entspricht dem Festhalten und Loslassen des Plattentellers), darf die Position nicht springen. Aus diesem Grund übernimmt der vorgeschlagene interaktive Musik-Abspieler die im vorhergehenden Modus erreichte Position als Ausgangsposition im neuen Modus. Ebenso soll die Abspielgeschwindigkeit (1. Ableitung der Position) sich nicht Sprunghaft ändern. Deswegen übernimmt man auch die aktuelle Geschwindigkeit und führt sie durch eine Glättungsfunktion, wie oben beschrieben, zu der Geschwindigkeit, die dem neuen Modus entspricht. Nach 4 erfolgt dies durch einen Slew Limiter SL, der eine Rampe mit konstanter Steigung auslöst, die in einer vorgegebenen Zeit das Signal von seinem alten Wert auf den neuen Wert fährt. Dieses posi tions- bzw. geschwindigkeitsabhängige Signal steuert dann die eigentliche Abspieleinheit PLAY zur Wiedergabe des Audiotracks an, indem es die Abspielgeschwindigkeit beeinflusst.When changing from one to the other mode (equivalent to holding and releasing the turntable), the position must not jump. For this reason, the proposed interactive music player assumes the position reached in the previous mode as the home position in the new mode. Likewise, the playback speed (1st derivative of the position) should not change rapidly. Therefore, you also take the current speed and guide you through a smoothing function, as described above, to the speed that corresponds to the new mode. To 4 This is done by a Slew Limiter SL, which triggers a ramp with a constant slope, which moves the signal from its old value to the new value in a given time. This posi tion or speed-dependent signal then controls the actual PLAY playback unit for playback of the audio track by it affects the playback speed.

Beim "Scratching" mit Vinyl-Platten, also dem Abspielen mit sich stark und schnell ändernder Geschwindigkeit, ändert sich die Tonwellenform auf charakteristische Art, aufgrund der Eigenheiten des Aufzeichnungsverfahrens, das standardmäßig für Schallplatten verwendet wird. Beim Erstellen des Press-Masters für die Schallplatte im Aufnahmestudio durchläuft das Tonsignal ein Pre-Emphase-Filter (Vorverzerrungs-Filter) nach RIAA-Norm, der die Höhen anhebt (sogenannte „Schneidekennlinie"). In jeder Anlage, die zum Abspielen von Schallplatten verwendet wird, befindet sich ein entsprechendes De-Emphase-Filter (Rückentzerrungs-Filter), das die Wirkung umkehrt, so dass man näherungsweise das ursprüngliche Signal erhält.When "scratching" with vinyl records, So playing with fast and fast changing speed changes the sound waveform in a characteristic way, due to the peculiarities the recording method used by default for vinyl records. When creating the Press Master for the Record in the recording studio, the sound signal goes through a pre-emphasis filter (Predistortion filter) according to RIAA standard, which raises the heights (so-called "cutting characteristic"). In each plant, which is used to play records, is located a corresponding de-emphasis filter (Back equalization filter) that reverses the effect so that one approximates the original one Receives signal.

Wenn nun aber die Abspielgeschwindigkeit nicht mehr dieselbe ist, wie bei der Aufnahme, was u.a. beim "Scratching" auftritt, so werden alle Frequenzanteile des Signals auf der Schallplatte entsprechend verschoben und deswegen vom De-Emphase-Filter unterschiedlich bedämpft. Dadurch ergibt sich ein charakteristischer Klang.If but now the playback speed is not the same as when recording what u.a. when "scratching" occurs, so all frequency components of the signal on the record accordingly shifted and therefore from the de-emphasis filter damped differently. This results in a characteristic sound.

Nach einer weiteren vorteilhaften Ausgestaltung eines erfindungsgemäßen interaktiven Musik-Abspielers nach der Erfindung mit einem Aufbau entsprechend 4 ist ein Scratch-Audio-Filter zur Simulation des beschriebenen charakteristischen Effekts vorgesehen. Dazu wird, insbesondere für eine digitale Simulation dieses Vorgangs, das Audiosignal innerhalb der Abspieleinheit PLAY aus 4 einer weiteren Signalverarbeitung unterzogen, wie diese in 5 dargestellt ist. Dazu wird das Audiosignal, nachdem die digitalen Audiodaten des wiederzugebenden Musikstücks von einem Medium D bzw. Tonträger (z.B. CD oder MP3) gelesen und (vor allem im Fall des MP3-Formats) dekodiert DEC wurde, einer entsprechenden Pre-Emphase-Filterung PEF unterzogen. Das so vorgefilterte Signal wird dann in einem Pufferspeicher B abgelegt, aus dem es in einer weiteren Verarbeitungseinheit R je nach Betriebsmodus a) oder b), wie in 4 beschrieben, entsprechend dem Ausgangssignal von SL mit variierender Geschwindigkeit ausgelesen wird. Das ausgelesene Signal wird dann mit einem De-Emphase-Filter DEF behandelt und dann wiedergegeben (AUDIO_OUT).According to a further advantageous embodiment of an inventive interactive music player according to the invention with a structure accordingly 4 a scratch audio filter is provided to simulate the described characteristic effect. For this purpose, in particular for a digital simulation of this process, the audio signal within the playback unit PLAY 4 subjected to another signal processing, like this in 5 is shown. For this purpose, after the digital audio data of the music piece to be played has been read from a medium D or sound carrier (eg CD or MP3) and DEC decoded (especially in the case of the MP3 format), the audio signal is subjected to a corresponding pre-emphasis filtering PEF , The signal prefiltered in this way is then stored in a buffer memory B, from which it is stored in a further processing unit R depending on the operating mode a) or b), as in 4 is read out according to the output signal of SL with varying speed. The read signal becomes then treated with a de-emphasis filter DEF and then played back (AUDIO_OUT).

Für das Pre- und De-Emphase Filter PEF und DEF, die den gleichen Frequenzgang wie in der RIAA-Norm festgelegt haben sollten, verwendet man günstigerweise jeweils ein digitales IIR-Filter 2.Ordnung, d.h. mit zwei günstig gewählten Polstellen und zwei günstig gewählten Nullstellen. Wenn die Polstellen des einen Filters gleich den Nullstellen des anderen Filters sind, heben sich, wie gewünscht, die beiden Filter in ihrer Wirkung genau auf, wenn das Audiosignal mit Originalgeschwindigkeit abgespielt wird. In allen anderen Fällen erzeugen die genannten Filter den charakteristischen Toneffekt beim "Scratching". Selbstverständlich kann das beschriebene Scratch-Audio-Filter auch im Zusammenhang mit beliebigen anderen Arten von Musik-Abspielgeräten mit „Scratching"-Funktion eingesetzt werden.For the Pre- and de-emphasis filters PEF and DEF, which have the same frequency response As stated in the RIAA standard, it is conveniently used one digital IIR filter each 2nd order, i. with two cheap selected Poles and two cheap selected Zeropoint. If the poles of the one filter are equal to the zeros of the other filter, lift the two filters in as desired their effect exactly when the audio signal is at original speed is played. In all other cases, the mentioned generate Filter the characteristic sound effect of "scratching". Of course, the described Scratch audio filters also related to any other Types of music players be used with "scratching" function.

In Kombination mit dem vorgeschlagenen CD-Grabbing-Verfahren ergibt sich unter anderem auch die vorteilhafte Möglichkeit, ein und denselben Titel zweimal in den interaktiven Musik-Abspieler zu laden und über das Automix-Verfahren mit sich selbst zu mischen bzw. zu ,remixen' oder als Ein-Song-Dauer-Mix laufen zu lassen, ohne jemals aus dem Takt zu kommen. Sehr kurze Titel können dadurch vom DJ beliebig verlängert werden.In Combination with the proposed CD grabbing method yields Among other things, the advantageous possibility, one and the same Load tracks twice into the interactive music player and over that Mix automix techniques with themselves, remix them or run them as a one-song duration mix without ever getting out of step. Very short titles can thereby be extended by the DJ as desired.

Das Tempo eines Mix kann darüber hinaus über eine gezielte Frequenzänderung an der Master-Clock MCLK (dem Referenz-Oszillator aus 2) allmählich im Verlauf eines mehrstündigen Sets automatisch angehoben oder abgesenkt werden, um gezielte Effekte der Steigerung oder der Beruhigung beim Publikum zu erzeugen.In addition, the tempo of a mix can be adjusted via a specific frequency change to the master clock MCLK (the reference oscillator) 2 ) are gradually raised or lowered gradually over a multi-hour set to produce targeted effects of enhancement or reassurance to the audience.

Wie bereits eingangs erwähnt, werden herkömmlicherweise beim Mischen mehrerer Musikstücke die Audioquellen von Tonträgern auf mehreren Abspielgeräten abgespielt und über ein Mischpult abgemischt. Bei dieser Vorgehensweise beschränkt sich eine Audioaufnahme auf eine Aufzeichnung des Endresultats. Eine Reproduktion des Mischvorganges oder ein Aufsetzen zu einem späteren Zeitpunkt exakt an einer vorgebbaren Position innerhalb eines Musikstückes ist damit nicht möglich.As already mentioned at the beginning, become conventional when mixing several pieces of music the audio sources of phonograms on several players played and over mixed a mixer. This procedure is limited an audio recording on a recording of the final result. A reproduction the mixing process or a touchdown at a later time is exactly at a predeterminable position within a piece of music not possible.

Genau dies erreicht nun die vorliegende Erfindung, indem ein Dateiformat für digitale Steuerinformationen vorgeschlagen wird, welches die Möglichkeit biete, den Vorgang des interaktiven Mischens und eine eventuelle Effektbearbeitung von Audioquellen aufzuzeichnen und akkurat wiederzugeben. Dies ist insbesondere mit einem wie vorangehend beschriebenen Musik-Abspieler möglich.Exactly This now achieves the present invention by providing a file format for digital Tax information is proposed which the possibility offer, the process of interactive mixing and a possible Record and accurately reproduce effect processing from audio sources. This is especially true with a music player as described above possible.

Die Aufzeichnung gliedert sich in eine Beschreibung der verwendeten Audioquellen und einen zeitlichen Ablauf von Steuerinformationen des Mischvorgangs und zusätzlicher Effektbearbeitung.The Record is divided into a description of the used Audio sources and timing of control information of the mixing process and additional Effects Editing.

Es werden nur die Information über den eigentlichen Mischvorgang und über die Ursprungsaudioquellen benötigt, um das Resultat des Mischvorgangs wiederzugeben. Die eigentlichen digitalen Audiodaten werden extern zur Verfügung gestellt. Dies vermeidet urheberrechtlich problematische Kopiervorgänge von geschützten Musikstücken. Es können durch das Abspeichern von digitalen Steuerinformationen somit Mischvorgänge von mehreren Audiostücken im Hinblick auf Abspielpositionen, Synchronisationsinformationen, Echtzeiteingriffe mit Audio-Signalverarbeitungsmitteln etc. als ein Mix der Audioquellen und deren Effektbearbeitung als neues Gesamtwerk mit vergleichsweise langer Abspieldauer realisiert werden.It only the information about the actual mixing process and the original audio sources needed to reflect the result of the mixing process. The actual Digital audio data is provided externally. This avoids Copyright problematic copying of protected music pieces. It can by storing digital control information thus mixing operations of several audio pieces with regard to play positions, synchronization information, Real-time interventions with audio signal processing means etc. as a mix of audio sources and their effect processing as a new complete work be realized with a comparatively long playing time.

Dies bietet den Vorteil, dass die Beschreibung der Bearbeitung der Audioquellen im Vergleich zu den erzeugten Audiodaten des Mischvorgangs gering sind, der Mischvorgang an beliebigen Stellen editiert und wiederaufgesetzt werden kann. Außerdem können vorhandene Audiostücke in verschiedenen Zusammenfassungen oder als längere zusammenhängende Interpretationen wiedergegeben werden.This has the advantage that the description of editing the audio sources low compared to the generated audio data of the mixing process are edited, the mixing process at any point and restarted can be. Furthermore can existing audio tracks in various summaries or as longer coherent interpretations be reproduced.

Mit bisherigen Tonträgern und Musik-Abspielgeräten war es hingegen nicht möglich, die Interaktion eines Anwenders aufzuzeichnen und wiederzugeben, da den bekannten Abspielgeräten die technischen Voraussetzungen fehlen, diese genau genug zu steuern. Dies wird erst durch die vorliegende Erfindung ermöglicht, indem mehrere digitale Audioquellen wiedergegeben und deren Abspielpositionen bestimmt und gesteuert werden können. Dadurch wird es möglich, den gesamten Vorgang digital zu verarbeiten und entsprechende Steuerdaten in einer Datei zu speichern. Diese digitalen Steuerinformationen werden vorzugsweise in einer Auflösung abgelegt, die der Abtastrate der verarbeiteten digitalen Audiodaten entspricht.With previous recordings and music players whereas it was not possible to record and reproduce a user's interaction since the known players The technical prerequisites are lacking to control these precisely enough. This is made possible only by the present invention, by playing multiple digital audio sources and their playing positions can be determined and controlled. This will make it possible to process the entire process digitally and corresponding control data to save in a file. This digital control information are preferably stored in a resolution that is the sampling rate corresponds to the processed digital audio data.

Die Aufzeichnung gliedert sich im wesentlichen in 2 Teile:

  • – eine Liste der verwendeten Audioquellen z.B. digitale Aufgezeichnete Audiodaten in komprimierter und unkomprimierter Form wie z.B. WRV, MPEG, AIFF und digitale Tonträger wie etwa eine Compact Disk und
  • – den zeitlichen Ablauf der Steuerinformation.
The recording is essentially divided into 2 parts:
  • A list of the audio sources used, eg digital recorded audio data in compressed and uncompressed form such as WRV, MPEG, AIFF and digital audio recordings such as a compact disk and
  • - The timing of the control information.

Die Liste der Verwendeten Audioquellen enthält u.a.:

  • – Informationen zur Identifizierung der Audioquelle
  • – zusätzlich berechnete Information, die Charakteristiken der Audioquelle beschreibt (z.B. Abspiellänge und Tempoinformationen)
  • – beschreibende Information zur Herkunft und Urheberinformation der Audioquelle (z.B. Künstler, Album, Verlag etc.)
  • – Metainformation, z.B. Zusatzinformation die über den Hintergrund der Audioquelle informiert (z.B. Musikgenre, Information zum Künstler und Verlag)
The list of audio sources used includes:
  • - Information for identifying the audio source
  • - additionally calculated information describing the characteristics of the audio source (eg playing time and tempo information)
  • - descriptive information on the origin and copyright information of the audio source (eg artist, album, publisher etc.)
  • - Metainformation, eg additional information informing about the background of the audio source (eg music genre, information about the artist and publisher)

Die Steuerinformation speichert u.a.:

  • – die zeitliche Abfolge von Steuerdaten
  • – die zeitliche Abfolge von exakten Abspielpositionen in der Audioquelle
  • – Intervalle mit kompletter Zustandsinformation aller Stellglieder, um als Wiederaufsetzpunkte der Wiedergabe zu dienen
The control information stores, inter alia:
  • The timing of control data
  • The timing of exact playback positions in the audio source
  • Intervals with complete state information of all the actuators to serve as re-points of the replay

Im Folgenden ist ein mögliches Beispiel der Verwaltung der Liste von Audiostücken in einer Ausprägung des XML Formats dargestellt. Dabei steht XML als Abkürzung für Extensible Markup Language. Dies ist eine Bezeichnung für eine Metasprache zur Beschreibung von Seiten im WWW (World Wide Web). Dabei ist es im Gegensatz zu HTML (Hypertext Markup Language) möglich, dass der Autor eines XML-Dokumentes im Dokument selbst bestimmte Erweiterungen von XML im Document-Type-Definition-Teil des Dokumentes definiert und im gleichen Dokument auch nutzt.in the Following is a possible Example of the management of the list of audio pieces in one form of the XML formats. XML stands for Extensible Markup Language. This is a name for a metalanguage describing pages in the WWW (World Wide Web). It is in contrast to HTML (Hypertext Markup Language) possible, that the author of an XML document in the document itself Extensions of XML defined in the Document Type Definition part of the document and in the same document also uses.

Figure 00310001
Figure 00310001

Figure 00320001
Figure 00320001

Figure 00330001
Figure 00330001

Die Steuerinformationsdaten, referenziert durch die Liste von Audiostücken, werden vorzugsweise im Binärformat gespeichert. Der prinzipielle Aufbau der abgespeicherten Steuerinformationen in einer Datei lässt sich beispielhaft wie folgt beschreiben:

Figure 00330002
The control information data referenced by the list of audio pieces is preferably stored in binary format. The basic structure of the stored control information in a file can be described as an example as follows:
Figure 00330002

Mit [Kennung des Controllers] ist ein Wert bezeichnet, der ein Steuerglied (z.B. Lautstärke, Geschwindigkeit, Position) des interaktiven Musik-Abspielers identifiziert. Solchen Steuergliedern können mehrere Unterkanäle [controller Kanal], z.B. Nummer des Abspielmoduls, zugeordnet sein. Ein eindeuti ger Steuerpunkt M wird durch [Kennung des Controllers], [Controller Kanal] adressiert.With [Identifier of the controller] is a value denoting a control member (e.g., volume, Speed, position) of the interactive music player. Such control members can several subchannels [controller channel], e.g. Number of the playback module to be assigned. A unique control point M is defined by [identifier of the controller], [Controller channel] addressed.

Als Resultat entsteht eine digitale Aufzeichnung des Mischvorgangs, der gespeichert, nicht-destruktiv im Bezug auf das Audiomaterial reproduziert, vervielfältigt und übertragen werden kann, z.B. über das Internet.When The result is a digital record of the mixing process, the stored, non-destructive with respect to the audio material reproduced, duplicated and transfer can be, e.g. above the Internet.

Eine vorteilhafte Ausführung mit solchen Steuerdateien stellt ein Datenträger D dar, wie dieser anhand von 6 veranschaulicht ist. Dieser weist eine Kombination einer normalen Audio-CD mit digitalen Audiodaten AUDIO_DATA eines ersten Datenbereichs D1 mit einem auf einem weiteren Datenteil D2 der CD untergebrachten Programm PRG_DATA zum Abspielen solcher ebenfalls vorhandener Mixdateien MIX_DATA auf, die unmittelbar auf die auf der CD abgelegten Audio-Daten AUDIO_DATA zugreifen. Dabei muss die Abspiel- bzw. Mix-Applikation PRG_DATR nicht zwingend Bestandteil eines solchen Datenträgers sein. Auch eine Kombination aus einem ersten Datenbereich D1 mit digitalen Audioinformationen AUDIO_DATA und einem zweiten Datenbereich mit einer oder mehreren Dateien mit den genannten digitalen Steuerdaten MIX_DATA ist vorteilhaft, denn ein solcher Datenträger beinhaltet in Verbindung mit einem Musik-Abspieler der Erfindung alle erforderlichen Informationen zur Reproduktion eines zu einem früheren Zeitpunkt erstellten neuen Gesamtwerkes aus den vorhandenen digitalen Audioquellen.An advantageous embodiment with such control files is a disk D, as this is based on 6 is illustrated. The latter has a combination of a normal audio CD with digital audio data AUDIO_DATA of a first data area D1 with a program PRG_DATA accommodated on a further data part D2 of the CD for playing such likewise existing mix files MIX_DATA, which directly affect the audio data AUDIO_DATA stored on the CD access. The playback or mix application PRG_DATR does not necessarily have to be part of such a data carrier. A combination of a first data area D1 with digital audio information AUDIO_DATA and a second data area with one or more files with the mentioned digital control data MIX_DATA is also advantageous, since such a data carrier, in conjunction with a music player of the invention, contains all necessary information for the reproduction of a previously created new complete works from the existing digital audio sources.

Besonders vorteilhaft jedoch lässt sich die Erfindung auf einem geeignet programmierten digitalen Computer mit entsprechenden Audio-Schnittstellen realisieren, indem ein Softwareprogramm die im vorangehenden dargestellten Verfahrensschritte auf dem Computersystem durchführt (z.B. die Abspiel- bzw. Mix-Applikation PRG_DATA). Der beschriebene Datenträger in Verbindung mit dem auf einem Standard-CD-Rom-Laufwerk durchgeführten vorteilhaften CD-Grabbing-Verfahren ermöglicht dann die komplette Funktionalität der Erfindung.Particularly advantageous, however, the invention can be implemented on a suitably programmed digital computer with corresponding audio interfaces by a software program performing the method steps illustrated above in the computer system (eg the playback or mixing application PRG_DATA). The disk described in conjunction with the performed on a standard CD-ROM drive advantageous CD grabbing method then allows the complete Functionality of the invention.

Alle in der vorstehenden Beschreibung erwähnten bzw. in den Figuren dargestellten Merkmale sollen, sofern der bekannte Stand der Technik dies zulässt, für sich allein oder in Kombination als unter die Erfindung fallend angesehen werden.All mentioned in the above description or in the figures Features should, if the known state of the art allows, on their own or in combination as falling within the scope of the invention.

Claims (31)

Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes mit den folgenden Verfahrensschritten: – näherungsweise Ermittlung des Tempos (A) des Musikstückes durch eine statistische Auswertung (STAT) der zeitlichen Abstände (Ti) rhythmusrelevanter Beat-Informationen in den digitalen Audiodaten (Ei), – näherungsweise Ermittlung der Phase (P) des Musikstückes anhand der Lage der Takte in den digitalen Audiodaten im Zeitraster eines mit einer dem ermittelten Tempo proportionalen Frequenz schwingenden Referenz-Oszillators (MCLK), – sukzessive Korrektur von ermitteltem Tempo (A) und Phase (P) des Musikstückes anhand einer Phasenverschiebung des Referenz-Oszillators (MCLK) relativ zu den digitalen Audiodaten durch Auswertung der resultierenden systematischen Phasenverschiebung und Regulierung der Frequenz des Referenz-Oszillators proportional zur ermittelten Phasenverschiebung.Procedure for detecting the pace and phase of a digital in Format present piece of music with the following process steps: - Approximate determination of the Tempo (A) of the piece of music by a statistical evaluation (STAT) of the time intervals (Ti) rhythm-relevant beat information in the digital audio data (Egg), - approximately Determination of the phase (P) of the piece of music based on the position of the bars in the digital audio data in the time frame one with the one determined Tempo proportional frequency oscillating reference oscillator (MCLK), - successively Correction of the determined tempo (A) and phase (P) of the piece of music based on a phase shift of the reference oscillator (MCLK) relative to the digital audio data by evaluation of the resulting systematic phase shift and regulation of the frequency of the Reference oscillator proportional to the determined phase shift. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach Anspruch 1, wobei rhythmusrelevante Beat-Informationen (Ti) durch Bandpassfilterung (F1, F2) der zugrunde liegenden digitalen Audiodaten in verschiedenen Frequenzbereichen gewonnen werden.Procedure for detecting the pace and phase of a digital in Format present piece of music after Claim 1, wherein rhythm-relevant beat information (Ti) by Bandpass filtering (F1, F2) of the underlying digital audio data be obtained in different frequency ranges. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach Anspruch 1 oder 2, wobei die aus den Audiodaten ermittelten Rhythmusintervalle im Bedarfsfall durch Multiplikation ihrer Frequenz mit 2er-Potenzen (OKT) in eine vordefinierte Frequenz-Oktave in die Werte(T1io...T3io) transformiert werden, welche in der Folge zur Tempoermittlung dienen.Procedure for detecting the pace and phase of a digital in Format present piece of music after Claim 1 or 2, wherein the rhythm intervals determined from the audio data if necessary by multiplying their frequency by powers of 2 (OCT) into a predefined frequency octave in the values (T1io ... T3io) be transformed, which serve in the sequence for speeding up. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach Anspruch 3, wobei in der Frequenz-Transformation (OKT) neben den einzelnen Rhytmusintervallen des Audiomaterials (Ti,T1i) auch die durch Addition der Zeitwerte von zwei (T2i), drei (T3i) oder weiteren aufeinanderfolgenden dieser Rhythmusintervalle gebildeten Zeitintervalle verwendet werden.Procedure for detecting the pace and phase of a digital in Format present piece of music after Claim 3, wherein in the frequency transformation (OKT) in addition to the individual rhythm intervals of the audio material (Ti, T1i) also the by adding the time values of two (T2i), three (T3i) or more successive time intervals formed by these rhythm intervals be used. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach einem der vorangehenden Ansprüche 2 bis 4, wobei die gewonnene Menge an Daten von Zeitintervallen (BPM1, BPM2) der rhythmusrelevanten Beat-Informationen auf Häufungspunkte (N) untersucht wird und die näherungsweise Tempoermittlung anhand der Informationen eines Häufungsmaximums erfolgt.Procedure for detecting the pace and phase of a digital in Format present piece of music after one of the preceding claims 2 to 4, wherein the obtained amount of data of time intervals (BPM1, BPM2) of the rhythm-relevant beat information on accumulation points (N) is examined and the approximate Tempo determination based on the information of a cumulative maximum takes place. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach einem der vorangehenden Ansprüche, wobei zur näherungsweisen Ermittlung der Phase (P) des Musikstückes die Phase des Referenz-Oszillators (MCLK) derart gewählt wird, dass sich die größtmögliche Übereinstimmung zwischen den rhythmusrelevanten Beat-Informationen in den digitalen Audiodaten und den Nulldurchgängen des Referenz-Oszillators (MCLK) einstellt.Procedure for detecting the pace and phase of a digital in Format present piece of music after one of the preceding claims, being to the nearer Determining the phase (P) of the piece of music the phase of the reference oscillator (MCLK) chosen such that will be the greatest possible match between the rhythm-relevant beat information in the digital Audio data and the zero crossings of the reference oscillator (MCLK). Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach einem der vorangehenden Ansprüche, wobei eine sukzessive Korrektur (2, 3, 4, 5) von ermitteltem Tempo und Phase des Musikstückes in regelmäßigen Abständen in so kurzen Zeitintervallen erfolgt, dass resultierende Korrekturbewegungen und/oder Korrekturverschiebungen unterhalb der Hörbarkeitsgrenze bleiben.Procedure for detecting the pace and phase of a digital in Format present piece of music after one of the preceding claims, wherein a successive correction (2, 3, 4, 5) of the determined tempo and phase of the piece of music at regular intervals in such short time intervals occurs that resulting correction movements and / or correction shifts remain below the audibility limit. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach einem der vorangehenden Ansprüche, wobei alle sukzessiven Korrekturen von ermitteltem Tempo und Phase des Musikstückes über die Zeit akkumuliert (4) werden und darauf aufbauend weitere Korrekturen mit stetig steigender Präzision erfolgen.Procedure for detecting the pace and phase of a digital in Format present piece of music after one of the preceding claims, with all successive corrections of determined tempo and phase of the piece of music about the Time accumulates (4) and building on this further corrections with steadily increasing precision respectively. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach Anspruch 8, wobei sukzessive Korrekturen solange erfolgen, bis ein vorgegebener tolerierbarer Fehlergrenzwert unterschritten wird,.Procedure for detecting the pace and phase of a digital in Format present piece of music after Claim 8, wherein successive corrections take place until a is fallen below predetermined tolerable error limit. Verfahren zur Erkennung von Tempo und Phase eines in digitalem Format vorliegenden Musikstückes nach einem der vorangehenden Ansprüche, wobei für den Fall, dass die Korrekturen über einen vorgebbaren Zeitraum hinweg immer jeweils negativ oder positiv sind (6), eine erneute (RESET) näherungsweise Ermittlung von Tempo (A) und Phase (P) mit anschließender sukzessiver Korrektur (2, 3, 4, 5) erfolgt.Method for detecting the tempo and phase of a piece of music in digital format according to one of the preceding claims, wherein in the event that the corrections over a predeterminable period are always always negative or positive (6), a renewed (RESET) approximately determination of tempo (A) and phase (P) with subsequent successive correction (2, 3, 4, 5) takes place. Verfahren zur Synchronisierung von mindestens zwei in digitalem Format vorliegenden Musikstücken mit folgenden Verfahrensschritten: – vollständige Ermittlung von Tempo und Phase des ersten Musikstückes nach einem der vorangehenden Ansprüche, – näherungsweise Ermittlung von Tempo und Phase des weiteren Musikstückes nach einem der vorangehenden Ansprüche, – Anpassung der Abspielgeschwindigkeit und der Abspielphase dieses weiteren Musikstückes durch sukzessive Anpassung der Frequenz und der Phase des diesem weiteren Musikstück zugeordneten Referenz-Oszillators an die Frequenz und die Phase des dem anderen Musikstück zugeordneten Referenz-Oszillators.Method for synchronizing at least two in digital Format present pieces of music with following process steps: - full determination of pace and phase of the first piece of music according to one of the preceding claims, - approximate determination of Tempo and phase of the further piece of music after one of the preceding ones Claims, - Adaptation the playback speed and the playback phase of this further piece of music by successively adjusting the frequency and phase of this another piece of music associated reference oscillator to the frequency and the phase of the other piece of music associated reference oscillator. Verfahren zur Synchronisierung von mindestens zwei in digitalem Format vorliegenden Musikstücken nach Anspruch 11, wobei zur Anpassung der Abspielgeschwindigkeit und der Abspielphase des weiteren Musikstückes anhand einer Phasenverschiebung des diesem weiteren Musikstück zugeordneten Referenz-Oszillators relativ zu dem Referenz-Oszillator des anderen Musikstückes eine Auswertung der resultierenden systematischen Phasenverschiebung und eine Regulierung der Frequenz des dem weiteren Musikstück zugeordneten Referenz-Oszillators proportional der ermittelten Phasenverschiebung erfolgt.Method for synchronizing at least two in digital Format present music pieces after Claim 11, wherein for adapting the playback speed and the playback phase of the other piece of music based on a phase shift of this further piece of music associated reference oscillator relative to the reference oscillator of the other piece of music an evaluation of the resulting systematic phase shift and a regulation of the frequency of the further piece of music assigned Reference oscillator proportional to the determined phase shift takes place. Musik-Abspieler, bei dem mindestens zwei in digitalem Format vorliegende Musikstücke gemäß Anspruch 11 oder 12 in Echtzeit synchronisierbar sind.Music player with at least two in digital format present music pieces according to claim 11 or 12 can be synchronized in real time. Musik-Abspieler nach Anspruch 13, wobei jeweils rhythmusrelevante Beat-Informationen (Ti) eines vorgegebenen zurückliegenden Zeitraums ausgehend von einer aktuellen Abspielposition des Musikstückes als Grundlage zur Tempoermittlung in Echtzeit dienen.Music player according to claim 13, wherein each rhythm-relevant Based on beat information (Ti) from a given past period from a current play position of the piece of music as a basis for tempo determination serve in real time. Musik-Abspieler nach einem der vorangehenden Ansprüche 13 oder 14, wobei synchronisierte Musikstücke automatisch zu einem Gesamtwerk mit einheitlichem Rhythmus arrangierbar und abspielbar sind.Music player according to one of the preceding claims 13 or 14, with synchronized pieces of music automatically becoming a complete work can be arranged and played with a uniform rhythm. Interaktiver Musik-Abspieler, der – ein Mittel zur graphischen Darstellung von mit einer Tempo- und Phasenerkennungsfunktion, bestimmten Taktgrenzen eines in der Wiedergabe befindlichen Musikstückes in Echtzeit, – ein erstes Steuerelement (R1) zum Wechsel zwischen einem ersten Betriebsmodus (a), in dem das Musikstück mit einem konstanten Tempo abgespielt wird, und einem zweiten Betriebsmodus (b), in dem die Abspielposition und/oder Abspielgeschwindigkeit vom Anwender direkt beeinflussbar in Echtzeit ist, und – ein zweites Steuerelement (R2) zur Manipulation der Abspielposition in Echtzeit umfasst.Interactive music player who - a means of graphic Presentation of with a tempo and Phase detection function, certain clock limits of one in the playback located piece of music Real time, - one first control element (R1) for switching between a first operating mode (a) in which the piece of music is played at a constant tempo, and a second mode of operation (b) in which the playing position and / or playing speed directly influenceable by the user in real time, and - a second Control (R2) for manipulating the playhead in real time includes. Interaktiver Musik-Abspieler nach Anspruch 16, mit – einem Mittel zur graphischen Darstellung der aktuellen Abspielposition, mit dem eine Amplitudenhüllkurve der Klangwellenform des wiedergegebenen Musikstückes über einen vorgebbaren Zeitraum vor und nach der aktuellen Abspielposition darstellbar ist, wobei sich die Darstellung in Echtzeit mit dem Tempo der Wiedergabe des Musikstückes verschiebt, und mit – einem Mittel zur Glättung (LP, SL) eines stufigen Verlaufs zeitlich begrenzter, mit dem zweiten Steuerelement (R2) vorgegebener Abspiel-Positionsdaten zu einem sich gleichmäßig mit einer der Audio-Abtastrate entsprechenden zeitlichen Auflösung ändernden Signal.Interactive music player according to claim 16, with - one Means for graphically displaying the current playhead position, with an amplitude envelope of the Sound waveform of the reproduced piece of music over a predetermined period of time before and after the current play position can be displayed, wherein the presentation in real time with the tempo of the playback of the piece of music shifts, and with - one Means of smoothing (LP, SL) of a gradual course of time limited, with the second Control (R2) predetermined play position data to a evenly with one of the audio sampling rate corresponding temporal resolution changing Signal. Interaktiver Musik-Abspieler nach Anspruch 17, wobei zur Glättung eines stufigen Verlaufs zeitlich begrenzter Abspiel-Positionsdaten ein Mittel zur Rampenglättung (SL) vorgesehen ist, durch das mit jeder vorgegebenen Abspiel-Positionsnachricht eine Rampe mit konstanter Steigung auslösbar ist, die in einem vorgebbaren Zeitintervall das geglättete Signal von seinem bisherigen Wert auf den Wert der Abspiel-Positionsnachricht fährt.The interactive music player of claim 17, wherein for smoothing a leveled timed play position data ramp smoothing (SL) is provided by the with each predetermined play position message a ramp with a constant slope can be triggered, which is in a predefinable Time interval the smoothed Signal from its previous value to the value of the play position message moves. Interaktiver Musik-Abspieler nach Anspruch 17, wobei ein lineares digitales Tiefpaß-Filter (LP),, zur Glättung eines stufigen Verlaufs zeitlich begrenzter vorgegebener Abspiel-Positionsdaten dient.An interactive music player according to claim 17, wherein a linear digital low-pass filter (LP) ,, for smoothing a stage history of temporally limited predetermined play position data is used. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 16 bis 19, wobei im Fall eines Wechsels zwischen den Betriebsmodi (a, b) die im vorhergehenden Modus erreichte Position als Ausgangsposition im neuen Modus dient.Interactive music player according to one of the preceding claims 16 to 19, wherein in the case of a change between the operating modes (a, b) the position reached in the previous mode as the starting position in the new mode. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 16 bis 20, wobei im Fall eines Wechsels zwischen den Betriebsmodi (a, b) die im vorhergehenden Modus erreichte aktuelle Abspielgeschwindigkeit (DIFF) durch eine Glättungsfunktion, auf die dem neuen Betriebsmodus entsprechende Abspielgeschwindigkeit führbar ist.Interactive music player according to one of the preceding claims 16 to 20, wherein in the case of a change between the operating modes (a, b) the current playback speed reached in the previous mode (DIFF) by a smoothing function, on the new operating mode corresponding playback speed feasible is. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 16 bis 21, wobei ein Audiosignal ein Scratch-Audio-Filter durchläuft, indem das Audiosignal einer Pre-Emphase-Filterung (PEF) unterzogen und in einem Pufferspeicher (B) abgelegt wird, aus dem es in Abhängigkeit von der jeweiligen Abspielgeschwindigkeit mit variablem Tempo auslesbar (R) ist, um anschließend einer De-Emphase-Filterung (DE F) unterzogen und wiedergegeben zu werden.Interactive music player according to one of the preceding claims 16 to 21, wherein an audio signal passes through a scratch audio filter by the audio signal a pre-emphasis filtering (PEF) and stored in a buffer memory (B), out of it depending from the respective playback speed with variable tempo readable (R) is to be followed subjected to de-emphasis filtering (DE F) and reproduced become. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 22, wobei für eines oder mehrere der synchronisierten Musikstücke anhand der ermittelten Tempoinformation des jeweiligen Musikstückes die Länge einer über einen oder mehrere Takte dieses Musikstückes reichenden Wiedergabe-Schleife in Echtzeit taktsynchron definierbar und abspielbar ist.Interactive music player according to one of the preceding claims 13 to 22, where for one or more of the synchronized pieces of music based on the determined Tempo information of the respective piece of music the length of a one or more bars this piece of music reaching playback loop can be defined and played in isochronous mode in real time. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 23, wobei für eines oder mehrere der synchronisierten Musikstücke anhand der ermittelten Phaseninformation des jeweiligen Musikstückes in Echtzeit taktsynchrone Sprungmarken definierbar und innerhalb dieses Musikstückes um ganzzahlige Vielfache von Takten verschiebbar sind.Interactive music player according to one of the preceding claims 13 to 23, where for one or more of the synchronized pieces of music based on the determined Phase information of the respective piece of music in real time isochronous Jump labels definable and within this piece of music integer multiples of bars are displaceable. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 24, wobei jeder wiedergegebene Audiodatenstrom durch Signalverarbeitungsmittel in Echtzeit manipulierbar ist.Interactive music player according to one of the preceding claims 13 to 24, wherein each reproduced audio data stream by signal processing means can be manipulated in real time. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 25, wobei Echtzeiteingriffe über den zeitlichen Ablauf als digitale Steuerinformationen (MIX_DATA) speicherbar sind.Interactive music player according to one of the preceding claims 13 to 25, where real-time interventions over the timing as digital control information (MIX_DATA) are storable. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 26, wobei Mischvorgänge von Musikstücken und/oder interaktive Eingriffe in Musikstücke mit Audiosignalverarbeitungsmitteln als ein neues Gesamtwerk unabhängig von digitalen Audioinformationen von Musikstücken in Form digitaler Steuerinformationen (MIX_DATA speicherbar sind.Interactive music player according to one of the preceding claims 13 to 26, with mixing operations of music pieces and / or interactive interventions in pieces of music with audio signal processing means independent as a new complete work of digital audio information of pieces of music in the form of digital control information (MIX_DATA are storable. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 26 oder 27, wobei gespeicherte digitale Steuerinformationen ein Format aufweisen, das Informationen zur Identifikation der verarbeiteten Musikstücke und eine jeweilige diesen zugeordnete zeitliche Abfolge von Abspielpositionen und Zustandsinformationen der Stellglieder des Musik-Abspielers umfasst.Interactive music player according to one of the preceding claims 26 or 27, wherein stored digital control information has a format, the information for the identification of the processed pieces of music and a respective temporal sequence of playheads associated therewith and state information of the actuators of the music player. Interaktiver Musik-Abspieler nach einem der vorangehenden Ansprüche 13 bis 28, der durch ein geeignet programmiertes mit Audioschnittstellen ausgestattetes Computersystem realisiert ist.Interactive music player according to one of the preceding claims 13 to 28, by a suitably programmed with audio interfaces equipped computer system is realized. Computerprogrammprodukt, das direkt in den internen Speicher eines digitalen Computers geladen werden kann und Softwareabschnitte umfasst, mit denen die Verfahrensschritte gemäß einem der Ansprüche 1 bis 12 ausgeführt werden, wenn das Programmprodukt auf einem Computer ausgeführt wird.Computer program product directly into the internal memory a digital computer can be loaded and software sections comprising, with which the method steps according to one of claims 1 to 12 executed when the program product is running on a computer. Datenträger (D), der – einen ersten Datenbereich (D1) mit digitalen Audiodaten (AUDIO_DATA) eines oder mehrerer Musikstücke (TR1...TRn) und – einen zweiten Datenbereich (D2) mit einer Steuerdatei (MIX_DATA) mit digitalen Steuerinformationen zur Ansteuerung eines Musik-Abspielers umfasst, wobei – die Steuerdaten (MIX_DATA) des zweiten Datenbereichs (D2) auf Audiodaten (AUDIO_DATA) des ersten Datenbereichs (D1) Bezug nehmen.disk (D), the - one first data area (D1) with digital audio data (AUDIO_DATA) of a or several pieces of music (TR1 ... TRn) and - one second data area (D2) with a control file (MIX_DATA) with digital Includes control information for controlling a music player, in which - the Control data (MIX_DATA) of the second data area (D2) on audio data (AUDIO_DATA) of the first data area (D1).
DE2001101473 2001-01-13 2001-01-13 Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them Expired - Lifetime DE10101473B4 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
DE10164686A DE10164686B4 (en) 2001-01-13 2001-01-13 Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them
JP2002556874A JP2004527786A (en) 2001-01-13 2002-01-07 Automatic melody tempo and phase detection method and harmony method, and interactive music playback device using them
US10/251,000 US7615702B2 (en) 2001-01-13 2002-01-07 Automatic recognition and matching of tempo and phase of pieces of music, and an interactive music player based thereon
EP02712804A EP1380026A2 (en) 2001-01-13 2002-01-07 Automatic recognition and matching of tempo and phase of pieces of music, and an interactive music player based thereon
AU2002244636A AU2002244636A1 (en) 2001-01-13 2002-01-07 Automatic recognition and matching of tempo and phase of pieces of music, and an interactive music player based thereon
PCT/EP2002/000074 WO2002056292A2 (en) 2001-01-13 2002-01-07 Automatic recognition and matching of tempo and phase of pieces of music, and an interactive music player based thereon
US12/565,766 US8680388B2 (en) 2001-01-13 2009-09-24 Automatic recognition and matching of tempo and phase of pieces of music, and an interactive music player

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE10164686A DE10164686B4 (en) 2001-01-13 2001-01-13 Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them

Publications (2)

Publication Number Publication Date
DE10101473A1 DE10101473A1 (en) 2002-07-25
DE10101473B4 true DE10101473B4 (en) 2007-03-08

Family

ID=7711271

Family Applications (1)

Application Number Title Priority Date Filing Date
DE2001101473 Expired - Lifetime DE10101473B4 (en) 2001-01-13 2001-01-13 Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them

Country Status (1)

Country Link
DE (1) DE10101473B4 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2420998A1 (en) 2010-08-16 2012-02-22 Klaus Dzida Playing analysis device for an instrument with keys

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ITMI20111375A1 (en) * 2011-07-25 2013-01-26 Diachronic Media Ltd EQUIPMENT FOR PROCESSING AUDIO / VIDEO FILES

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5256832A (en) * 1991-06-27 1993-10-26 Casio Computer Co., Ltd. Beat detector and synchronization control device using the beat position detected thereby
US5512704A (en) * 1992-10-12 1996-04-30 Yamaha Corporation Electronic sound signal generator achieving scratch sound effect using scratch readout from waveform memory
WO1997001168A1 (en) * 1995-06-20 1997-01-09 Rickli Andre Digital processing device for audio signal
US5793739A (en) * 1994-07-15 1998-08-11 Yamaha Corporation Disk recording and sound reproducing device using pitch change and timing adjustment
US5869783A (en) * 1997-06-25 1999-02-09 Industrial Technology Research Institute Method and apparatus for interactive music accompaniment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5256832A (en) * 1991-06-27 1993-10-26 Casio Computer Co., Ltd. Beat detector and synchronization control device using the beat position detected thereby
US5512704A (en) * 1992-10-12 1996-04-30 Yamaha Corporation Electronic sound signal generator achieving scratch sound effect using scratch readout from waveform memory
US5793739A (en) * 1994-07-15 1998-08-11 Yamaha Corporation Disk recording and sound reproducing device using pitch change and timing adjustment
WO1997001168A1 (en) * 1995-06-20 1997-01-09 Rickli Andre Digital processing device for audio signal
US5869783A (en) * 1997-06-25 1999-02-09 Industrial Technology Research Institute Method and apparatus for interactive music accompaniment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2420998A1 (en) 2010-08-16 2012-02-22 Klaus Dzida Playing analysis device for an instrument with keys

Also Published As

Publication number Publication date
DE10101473A1 (en) 2002-07-25

Similar Documents

Publication Publication Date Title
DE10164686B4 (en) Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them
EP1415297B1 (en) Automatic generation of musical scratching effects
DE69623318T2 (en) METHOD AND DEVICE FOR THE INTERACTIVE FORMATION OF NEW PROCESSES OF MUSIC PIECES
DE69930787T2 (en) Multimedia system and method for the automatic selection of a scene
DE69922284T2 (en) Apparatus and method for playing music together with beat information
DE69836393T2 (en) Method, device and machine-readable storage medium for sound synthesis
DE60225348T2 (en) Selecting a piece of music based on metadata and an external tempo input
DE102007034774A1 (en) Apparatus for the determination of chord names and program for the determination of chord names
DE202020005830U1 (en) Device for splitting, recombining and playing back audio data
DE69724919T2 (en) Process for generating musical tones
DE4313177A1 (en) Mini-disc record-play system using magneto=optical recording - includes error correction and data buffering allowing uninterrupted multi-disc use
DE60024157T2 (en) Device and method for entering a style of a presentation
DE60026189T2 (en) Method and apparatus for waveform compression and generation
DE69632695T2 (en) Method and apparatus for generating musical music
DE202014100553U1 (en) Apparatus for the reproduction control of digital multimedia data and a corresponding computer-readable storage medium
DE3023581A1 (en) METHOD FOR DIGITAL CURVE CURVE CONTROL OF A POLYPHONE MUSIC SYNTHESIS INSTRUMENT AND CIRCUIT ARRANGEMENT FOR IMPLEMENTING THE METHOD
DE60033098T2 (en) Method and device for recording / reproducing or generating waveforms by means of timing information
DE10101473B4 (en) Automatic detection and adjustment of tempo and phase of pieces of music and interactive music players based on them
DE69921048T2 (en) Automatic presentation device with changeable arpeggio theme
DE69732797T2 (en) METHOD AND DEVICE FOR STORING TONSES IN CYCLIC LOOPS
DE10153673B4 (en) Automatic generation of musical scratch effects
DE3905623C2 (en) Device for editing PCM signals
DE60032085T2 (en) A method and apparatus for generating a waveform with improved transition between successive file modules
DE19544785B4 (en) Device for recording a constant silence interval
DE4190031B4 (en) Data compression of decaying musical instrument sounds for a digital scanning system

Legal Events

Date Code Title Description
AH Division in

Ref document number: 10164686

Country of ref document: DE

OP8 Request for examination as to paragraph 44 patent law
AH Division in

Ref document number: 10164686

Country of ref document: DE

8364 No opposition during term of opposition
R071 Expiry of right