DE102015225476A1 - Method for the automated generation of signal sounds from pieces of music - Google Patents
Method for the automated generation of signal sounds from pieces of music Download PDFInfo
- Publication number
- DE102015225476A1 DE102015225476A1 DE102015225476.3A DE102015225476A DE102015225476A1 DE 102015225476 A1 DE102015225476 A1 DE 102015225476A1 DE 102015225476 A DE102015225476 A DE 102015225476A DE 102015225476 A1 DE102015225476 A1 DE 102015225476A1
- Authority
- DE
- Germany
- Prior art keywords
- music
- elements
- sound
- database
- representation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
Abstract
Die Anmeldung betrifft ein Verfahren zur Erstellung und/oder Extraktion von Musikelementen aus einer Musikdatenbank (206). Es wird eine digitale Klangspezifikation, die eine Klangrepräsentation (A) in einem musikbezogenen Parameterraum umfasst, aus einer Menge von Klangspezifikationen einer Spezifikationsdatenbank (204) ausgewählt und/oder geladen. Außerdem wird eine Musikstückmenge mit mindestens einem digitalen Musikstück (300) aus der Musikdatenbank (206) ausgewählt und/oder geladen. Weiterhin werden ein oder mehrere zusammenhängende Musikelemente aus der Musikstückmenge ermittelt, wobei jedem der ermittelten Musikelemente eine Elementrepräsentation (B1, B2) in dem musikbezogenen Parameterraum zugeordnet wird und die Klangrepräsentation (A) und die Elementrepräsentation (B1, B2) bezüglich einer Ähnlichkeitsrelation (401), die Repräsentationen des musikbezogenen Parameterraums vergleicht, ähnlich sind. Weiterhin wird eine Teilmenge der zusammenhängenden Musikelemente ausgewählt und die ausgewählten Musikelemente werden in einer Musikelementedatenbank (205) gespeichert.The application relates to a method for creating and / or extracting musical elements from a music database (206). A digital sound specification comprising a sound representation (A) in a music-related parameter space is selected and / or loaded from a set of sound specifications of a specification database (204). In addition, a music piece set having at least one digital music piece (300) is selected and / or loaded from the music database (206). Furthermore, one or more contiguous music elements are determined from the music piece set, wherein each of the determined music elements is assigned an element representation (B1, B2) in the music-related parameter space and the sound representation (A) and the element representation (B1, B2) are related to a similarity relation (401). , which compares representations of the music-related parameter space, are similar. Further, a subset of the contiguous musical elements are selected and the selected musical elements are stored in a music elements database (205).
Description
Die vorliegende Schutzrechtsanmeldung betrifft ein Verfahren zur automatisierten Erzeugung von Signalklängen, wie beispielsweise Earcons, aus Musikstücken.The present patent application relates to a method for the automated generation of signal sounds, such as earcons, from pieces of music.
Heute werden in vielen Bereichen digitale Audiosignale, so genannte Earcons, eingesetzt, die die Aufmerksamkeit eines Benutzers erregen bzw. dem Benutzer eine Information mitteilen sollen. Diese Audiosignale oder Earcons haben im Allgemeinen keinen Umweltbezug und ihre Bedeutung muss von dem Benutzer erlernt werden. Hierbei ist eine Personalisierung der Audiosignale oft wünschenswert, damit die Audiosignale dem Benutzer angenehm sind und er zugleich erkennt, dass ein bestimmtes Audiosignal an ihn adressiert ist. Today, digital audio signals, so-called earcons, are used in many areas to attract the attention of a user or to inform the user. These audio signals or earcons generally have no environmental relevance and their meaning must be learned by the user. In this case, a personalization of the audio signals is often desirable so that the audio signals are pleasant to the user and he also recognizes that a particular audio signal is addressed to him.
Zusätzlich ist in bestimmten Bereichen, beispielsweise bei Warntönen, gefordert, dass ein Audiosignal in Abhängigkeit von seiner Verwendung vorgegebene Charakteristika erfüllt um dem Benutzer eine bestimmte Dringlichkeit zu vermitteln, oder dass ein neues Audiosignal welches ein anderes ersetzen soll dem ersetzten Audiosignal ähnlich klingt, um den Lernprozess zu beschleunigen. Somit eignet sich nicht jeder Klang für jede Art von Audiosignal.In addition, in certain areas, such as warning tones, it is required that an audio signal, depending on its use, fulfill predetermined characteristics to give the user a certain urgency, or that a new audio signal which should replace another should sound similar to the replaced audio signal Accelerate learning process. Thus, not every sound is suitable for every type of audio signal.
Bei verschiedenen Systemen, wie Mobiltelefonen, Computerprogrammen, Betriebssystemen für PCs, Fahrerassistenzsystemen usw. sind oft bereits vom Hersteller verschiedene Audiosignale hinterlegt oder zum Download bereitgestellt, die durch den Benutzer ausgewählt werden können. Hierbei sind die verschiedenen Audiosignale unter Umständen in verschiedene Anwendungsgruppen unterteilt, wie beispielsweise Klingeltöne, Warntöne oder Nachrichtensignale. In various systems, such as mobile phones, computer programs, operating systems for PCs, driver assistance systems, etc. are often already deposited by the manufacturer various audio signals or made available for download, which can be selected by the user. In this case, the various audio signals may be subdivided into different application groups, such as ringtones, warning tones or message signals.
Hierdurch ist jedoch nur ein geringes Maß an Individualisierung gegeben, da der Benutzer nur aus den vorgegebenen Signalklängen auswählen kann und eine freie Gestaltung der Signalklänge durch den Benutzer, beispielsweise aus Sicherheitsgründen, nicht für alle Signalklänge vorgesehen ist.As a result, however, given only a small degree of customization, since the user can only select from the predetermined signal sounds and a free design of the signal sounds by the user, for example, for security reasons, not provided for all signal sounds.
Es ist somit eine Aufgabe der vorliegenden Schutzrechtsanmeldung, ein verbessertes Verfahren zur Personalisierung von Signalklängen bereitzustellen.It is thus an object of the present patent application to provide an improved method of personalization of signal sounds.
Das beanspruchte Verfahren dient, insbesondere in einem Kraftfahrzeug, der automatisierten Erstellung und/oder Extraktion von vorzugsweise kurzen Musikelementen, die bestimmten Bedingungen genügen, aus einer Musikdatenbank, wie zum Beispiel einer Musiksammlung des Benutzers. Die Musiksammlung ist hierbei als eine Sammlung von, vorzugsweise digitalen, Audiodaten im weiteren Sinne zu verstehen und kann beispielsweise Musik, Hörbücher sowie natürliche oder künstlich erzeugte Geräusche umfassen. The claimed method is used, in particular in a motor vehicle, for the automated production and / or extraction of preferably short music elements which satisfy certain conditions from a music database, such as a user's music collection. The music collection is here to be understood as a collection of, preferably digital, audio data in a broader sense and may include, for example, music, audiobooks and natural or artificially generated sounds.
Dazu wird zunächst eine digitale Klangspezifikation aus einer Spezifikationsdatenbank ausgewählt und/oder geladen, wobei die digitale Klangspezifikation eine Klangrepräsentation in einem musikbezogenen Parameterraum umfasst. Die digitale Klangspezifikation kann der Beschreibung von Klängen mit ähnlichem Klang oder ähnlichem Verwendungszweck dienen und gibt Merkmale vor, die ein Klang, Audiosignale, Earcon oder Musikelemente haben muss, um der Klangspezifikation zu genügen. For this purpose, first a digital sound specification is selected from a specification database and / or loaded, the digital sound specification comprising a sound representation in a music-related parameter space. The digital sound specification can be used to describe sounds with a similar sound or similar purpose and provides features that sound, audio, earphone or musical elements must have in order to meet the sound specification.
Die Merkmale der digitalen Klangspezifikation können beispielsweise vorgegebene Größen oder Intervalle für Länge, Tonart, Tempo, Transienten (beispielsweise schnelle, impulshafte, elektrische, akustische und/oder einzelne Anschläge und/oder Einschwingvorgänge eines Instruments), Melodie (beispielsweise aufsteigend oder absteigend), Rhythmus, Pitch, Tonhöhe und/oder Frequenz eines Klangs oder Musiksnippets umfassen. So können psychoakustische Eigenschaften von Signalklängen beschrieben werden, so dass die ermittelten und/oder ausgewählten Musikelemente gewissen Vorgaben genügen, was beispielsweise die an einen Benutzer übermittelte Dringlichkeit eines Signalklangs oder Musikelements betrifft.The features of the digital sound specification may include, for example, predetermined sizes or intervals for length, key, tempo, transients (eg, fast, impulsive, electrical, acoustic, and / or individual strokes and / or transients of an instrument), melody (eg, ascending or descending), rhythm , Pitch, pitch and / or frequency of a sound or musical nippet. Thus, psychoacoustic properties of signal sounds can be described, so that the determined and / or selected music elements meet certain specifications, which for example relates to the urgency of a signal sound or music element transmitted to a user.
Die Merkmale der Klangspezifikation können durch Parameter des musikbezogenen Parameterraums repräsentiert werden, beispielsweise kann jedes Merkmal durch eine eigene Dimension in einem mehrdimensionalen Vektorraum dargestellt werden und die Klangspezifikation einen Punkt, ein Intervall oder einen Unterraum innerhalb dieses Parameterraums darstellen. The characteristics of the sound specification can be represented by parameters of the music-related parameter space, for example each feature can be represented by its own dimension in a multi-dimensional vector space and the sound specification can represent a point, an interval or a subspace within this parameter space.
Eine Klangrepräsentation in einem derartigen Parameterraum kann anhand bekannter psychoakustischer Wirkungen von Klangeigenschaften, beispielsweise durch einen Administrator, spezifiziert werden. Somit können verschiedene Klangeigenschaften wie Tonart, Tempo, Rhythmus, Pitch usw. die beispielsweise einen Warnklang beschreiben explizit und einzeln angegeben werden. A sound representation in such a parameter space may be specified by known psychoacoustic effects of sound characteristics, such as by an administrator. Thus, various sound characteristics such as key, tempo, rhythm, pitch, etc. that describe, for example, a warning sound can be explicitly and individually specified.
Alternativ kann die Klangspezifikation beispielsweise als eine spektrale Leitungsdichte (auch als Power Spectrum bezeichnet) in einem entsprechenden Parameterraum, beispielsweise einem Parameterraum zur Darstellung verschiedener Frequenzen und/oder deren Häufigkeiten oder einem Fourierraum dargestellt werden. Eine derartige Repräsentation kann aus einem digitalen Audiosignal oder Musikstück automatisiert durch bekannte Programme zur Sprach- oder Audioanalyse erstellt werden. Eine Klangrepräsentation als spektrale Leistungsdichte könnte beispielsweise aus den spektralen Leistungsdichten mehrerer Audiosignale, die einer bestimmten Anwendungsgruppe, beispielsweise Warntöne, zugeordnet sind, mittels eines Verfahrens zum maschinellen Lernen durch ein Computerprogramm automatisiert erlernt werden.Alternatively, the sound specification can be represented, for example, as a spectral line density (also referred to as power spectrum) in a corresponding parameter space, for example a parameter space for representing different frequencies and / or their frequencies or a Fourier space. Such a representation can be automatically generated from a digital audio signal or piece of music by known programs for voice or audio analysis. A sound representation as spectral For example, power density could be learned automatically from the spectral power densities of multiple audio signals associated with a particular application group, such as alert tones, by a computer program using a machine learning method.
Weiterhin umfasst das Verfahren zur Erstellung und/oder Extraktion von Musikelementen aus einer Musikdatenbank das Auswählen und/oder Laden einer Musikstückmenge mit mindestens einem digitalen Musikstück aus der Musikdatenbank. Das Auswählen kann hierbei automatisiert durch ein Computerprogramm anhand von vorgegebenen Kriterien erfolgen, wie beispielsweise einer Auswahl des oder der zuletzt abgespielten Musiktitel aus der Musikdatenbank. Alternativ ist es möglich, dass über ein Benutzerinterface eine durch den Benutzer erfolgte Auswahl von Musikstücken empfangen wird, oder dass die Musikstücke automatisiert anhand von über das Benutzerinterface von dem Benutzer empfangenen Suchkriterien ausgewählt werden. Furthermore, the method for creating and / or extracting musical elements from a music database comprises selecting and / or loading a piece of music with at least one digital piece of music from the music database. The selection can be done automatically by a computer program based on predetermined criteria, such as a selection of the last or played music tracks from the music database. Alternatively, it is possible that a selection of pieces of music by the user is received via a user interface, or that the pieces of music are automatically selected on the basis of search criteria received by the user via the user interface.
Eine derartige anhand von Benutzereingaben individualisierte Auswahl der Musikstücke kann die Benutzerakzeptanz der ermittelten Musikelemente erhöhen.Such an individualized selection of the pieces of music based on user input can increase the user acceptance of the determined music elements.
Weiterhin umfasst das Verfahren zur Erstellung und/oder Extraktion der Musikelemente aus der Musikdatenbank das Ermitteln von einem oder mehreren zusammenhängenden Musikelementen aus der Musikstückmenge, wobei jedem der ermittelten Musikelemente eine Elementrepräsentation in dem musikbezogenen Parameterraum zugeordnet ist und die Klangrepräsentation und die Elementrepräsentation bezüglich einer Ähnlichkeitsrelation, die Repräsentationen des musikbezogenen Parameterraums vergleicht, ähnlich sind.Furthermore, the method for creating and / or extracting the music elements from the music database comprises determining one or more contiguous music elements from the music piece set, wherein each of the determined music elements is associated with an element representation in the music-related parameter space and the sound representation and the element representation with respect to a similarity relation, the representations of the music-related parameter space compare, are similar.
Hierbei können zuerst anhand eines vorgegebenen Intervalls Musiksnippets bzw. Teilmusikstücke von kurzer Dauer, beispielsweise weniger als 10 Sekunden, 5 Sekunden oder 2 Sekunden, aus den ausgewählten Musikstücken der Musikstückmenge ermittelt werden, für die dann jeweils eine Repräsentation im musikbezogenen Parameterraum ermittelt wird. Wenn die Repräsentation eines Musiksnippets bezüglich der Ähnlichkeitsrelation ähnlich zu der Klangrepräsentation ist, so kann dieses Musiksnippet als Musikelement im Sinne dieser Anmeldung betrachtet und weiterverarbeitet werden.In this case, music snippets or partial music pieces of short duration, for example less than 10 seconds, 5 seconds or 2 seconds, from the selected pieces of music of the piece of music can first be determined based on a predetermined interval, for each of which then a representation in the music-related parameter space is determined. If the representation of a music snippet with respect to the similarity relation is similar to the sound representation, then this music snippet can be considered and further processed as a musical element in the sense of this application.
Alternativ ist es auch möglich, zunächst eine Vorverarbeitung eines Musikstücks durchzuführen und dann Musiksnippets und/oder Repräsentationen im musikbezogenen Parameterraum aus dem vorverarbeiteten Musikstück zu ermitteln. Im Falle einer Ähnlichkeit einer auf diese Art ermittelten Repräsentation mit der Klangrepräsentation, kann dann das zugehörige Musikelement zwecks Weiterverarbeitung, beispielsweise aus der Repräsentation, ermittelt werden.Alternatively, it is also possible first to perform a preprocessing of a piece of music and then to determine music snippets and / or representations in the music-related parameter space from the preprocessed piece of music. In the case of a similarity of a representation determined in this way with the sound representation, the associated music element can then be determined for further processing, for example from the representation.
Die Ähnlichkeitsrelation kann hierbei vorgegeben sein oder sie kann dynamisch aus ermittelten und/oder eingegebenen Werten erzeugt werden und dient dem Vergleich von zwei Repräsentationen des musikbezogenen Parameterraums. Ein Vergleich kann beispielsweise erfolgen indem ein Abstand der beiden zu vergleichenden Repräsentationen berechnet wird, beispielsweise anhand einer Abstandsmetrik, wie einem euklidschen Abstand, Manhattan-Abstand oder einem verallgemeinerten Abstandsmaß im Parameterraum. Dann können zwei Repräsentationen als ähnlich erachtet werden, wenn ihr Abstand sich unterhalb einer vorgegebenen Schranke befindet.The similarity relation can be predetermined or it can be generated dynamically from ascertained and / or entered values and serves to compare two representations of the music-related parameter space. A comparison can be made, for example, by calculating a distance of the two representations to be compared, for example using a distance metric, such as a Euclidean distance, Manhattan distance or a generalized distance measure in the parameter space. Then two representations may be considered similar if their distance is below a given bound.
Alternativ können andere Größen, wie beispielsweise ein Produkt der zu vergleichenden Repräsentationen, zur Bewertung der Ähnlichkeit herangezogen werden. Im Falle eines mehrdimensionalen musikbezogenen Parameterraums können weiterhin einzelne Dimensionen oder Parameter für die Bestimmung der Ähnlichkeit stärker gewichtet werden. Somit ist es möglich, durch die Ähnlichkeitsrelation die Wichtigkeit einzelner Parameter des Parameterraums hervorzuheben.Alternatively, other quantities, such as a product of the representations to be compared, may be used to evaluate similarity. In the case of a multi-dimensional music-related parameter space, individual dimensions or parameters for determining the similarity can be given more weight. Thus, it is possible to emphasize the importance of individual parameters of the parameter space through the similarity relation.
Das Verfahren zur Erstellung und/oder Extraktion der Musikelemente aus der Musikdatenbank umfasst weiterhin ein Auswählen einer Teilmenge der zusammenhängenden Musikelemente und ein Speichern der ausgewählten Musikelemente in einer Musikelementedatenbank. Somit kann später automatisiert durch ein Computerprogramm oder durch einen Benutzer über das Benutzerinterface auf die ermittelten und extrahierten Snippets oder Signalklänge zugegriffen werden.The method for creating and / or extracting the music elements from the music database further comprises selecting a subset of the contiguous music elements and storing the selected music elements in a music elements database. Thus, later on automatically by a computer program or by a user via the user interface to the detected and extracted snippets or signal sounds are accessed.
Die Teilmenge der zusammenhängenden Musikelemente kann beispielsweise alle ermittelten Musikelemente umfassen oder alternativ auf eine vorgegebene Anzahl beschränkt sein, so dass zum Beispiel die Anzahl durch ein Computerprogramm reduziert wird oder nur die ersten der ermittelten Musikelemente ausgewählt werden bis die vorgegebene Anzahl erreicht ist. Auch kann die vorgegebene Anzahl aus den ermittelten Musikelementen zufällig oder anhand einer Benutzereingabe ausgewählt werden.The subset of the coherent music elements may, for example, comprise all detected music elements or alternatively be limited to a predetermined number, so that, for example, the number is reduced by a computer program or only the first of the determined music elements are selected until the predetermined number is reached. Also, the predetermined number of the detected music elements can be selected randomly or by user input.
Beispielsweise können die ermittelten Musikelemente zunächst temporär gespeichert werden und lediglich die ausgewählte Teilmenge wird nach der Ermittlung der Musikelemente und nach der Auswahl der Teilmenge in der Musikelementedatenbank gespeichert.For example, the determined music elements can first be temporarily stored and only the selected subset is stored after the determination of the music elements and after the selection of the subset in the music elements database.
Alternativ können auch zunächst alle ermittelten Musikelemente in der Musikelementedatenbank gespeichert werden, und es kann dann durch eine nachfolgende Auswahl ein Teil der Musikelemente wieder aus der Datenbank gelöscht werden. Alternatively, all detected music elements can first be stored in the music element database, and then a part of the music elements can be deleted from the database by a subsequent selection.
Durch eine automatisierte Reduktion der zusammenhängenden Musikelemente kann eine unübersichtliche Auswahl von zu vielen Musikelementen bzw. Signalklängen vermieden werden.By an automated reduction of the coherent music elements a confusing selection of too many music elements or signal sounds can be avoided.
Weiterhin ist es möglich, dass zur Auswahl der Teilmenge der zusammenhängenden Musikelemente ein Ranking der Musikelemente erstellt wird, wobei das Ranking anhand eines Vergleichs der jeweiligen Elementrepräsentationen der Musikelemente untereinander und/oder mit der Klangrepräsentation erfolgt, und das Auswählen der Teilmenge der zusammenhängenden Musikelemente anhand der erstellten Rankings erfolgt. Furthermore, it is possible that a ranking of the music elements is created for selecting the subset of the contiguous music elements, wherein the ranking is based on a comparison of the respective element representations of the music elements with each other and / or with the sound representation, and selecting the subset of the contiguous music elements on the basis of created rankings.
Das Ranking wird vorzugsweise automatisiert durch ein Computerprogramm erstellt, wobei das Computerprogramm zum Erstellen des Rankings Benutzereingaben berücksichtigen kann. Weiterhin kann das Ranking auf der Ähnlichkeitsrelation beruhen, beispielsweise kann eine vorgegebene Anzahl von Musikelementen, deren Elementrepräsentation der Klangrepräsentation am ähnlichsten sind, ausgewählt werden. The ranking is preferably created automatically by a computer program, whereby the computer program for creating the ranking can take into account user input. Furthermore, the ranking may be based on the similarity relation, for example, a predetermined number of music elements whose element representations are most similar to the sound representation may be selected.
Alternativ ist es auch möglich, dass das Ranking unabhängig von der Ähnlichkeitsrelation, beispielsweise auf Grundlage von über das Benutzerinterface empfangenen Benutzereingaben durchgeführt wird. Der Benutzer könnte hierbei Präferenzen angeben, beispielsweise, dass er Musikelemente aus einem bestimmten Musikstück, von einem bestimmten Interpreten und/oder einer bestimmten Länge bevorzugt. Alternatively, it is also possible for the ranking to be performed independently of the similarity relation, for example on the basis of user inputs received via the user interface. The user could specify preferences, for example, that he prefers music elements from a particular piece of music, from a particular artist and / or a certain length.
Durch das Ranking kann eine höhere Benutzerakzeptanz der erstellten Musikelemente und/oder Signalklänge erreicht werden. The ranking allows a higher user acceptance of the created music elements and / or signal sounds to be achieved.
Weiterhin können die durch das beanspruchte Verfahren ermittelten und/oder extrahierten Musikelemente vorzugsweise als Signalklänge zur Verwendung in einem Fahrzeug, insbesondere Kraftfahrzeug, geeignet sein. Beispielsweise werden in einem Fahrzeug Signalklänge ausgegeben, um den Fahrer auf unterschiedliche Gefahrenquellen aufmerksam zu machen, wie eine bestimmte Außentemperatur oder einen kritischen Zustand von verschiedenen Fahrzeugflüssigkeiten oder anderen Komponenten. Auch können im Zusammenhang mit einem Fahrerassistenzsystem verschiedene Signalklänge verwendet werden, um den Fahrer auf eine kritische Verkehrssituation aufmerksam zu machen.Furthermore, the music elements determined and / or extracted by the claimed method may preferably be suitable as signal sounds for use in a vehicle, in particular a motor vehicle. For example, in a vehicle, signal sounds are output to alert the driver to various hazards, such as a particular outside temperature or a critical condition of various vehicle fluids or other components. Also, in connection with a driver assistance system different signal sounds can be used to make the driver aware of a critical traffic situation.
Bei der Auswahl von Signalklängen zur Verwendung in einem Fahrzeug ist es aus Sicherheitsgründen besonders wichtig, dass die Signalklänge die vorgegebenen psychoakustischen Eigenschaften erfüllen. Auch kann es bei der Verwendung in einem Fahrzeug von besonderer Wichtigkeit sein, einen Signalklang durch einen ähnlichen Signalklang zu ersetzen, um den Lernprozess des Benutzers zu beschleunigen oder um die Bedeutung des ersetzten Signalklangs auch für weitere Benutzer interpretierbar zu halten. When selecting signal sounds for use in a vehicle, it is particularly important for security reasons that the signal sounds fulfill the predetermined psychoacoustic characteristics. Also, when used in a vehicle, it may be of particular importance to replace a signal sound with a similar signal sound to speed up the user's learning process or to make the meaning of the replaced signal sound interpretable to other users as well.
Alternativ können bei mehreren Benutzern bzw. Fahrern verschiedene Benutzerkonten angelegt werden, mit denen jeweils unterschiedliche Signalklängen bzw. Earcons assoziiert sind.Alternatively, several users or drivers can be created with different user accounts, with each of which different signal sounds or earcons are associated.
Weiterhin ist es möglich, dass das beschriebene Verfahren weiterhin ein automatisiertes Nachbearbeiten mindestens eines der ausgewählten Musikelemente und das Speichern des mindestens einen nachbearbeiteten Musikelements in der Musikelementedatenbank umfasst. Die Nachbearbeitung kann hierbei insbesondere eine psychoakustische Anpassung des gefundenen Musikelements umfassen, beispielsweise eine, vorzugsweise geringfügige, Anpassung der Tonhöhe, der Geschwindigkeit oder der Länge. Ein jeweiliges Anpassungsverfahren kann bevorzugt als ein Computerprogramm in Bezug zu der Klangspezifikation definiert sein. Furthermore, it is possible that the described method further comprises an automated reworking of at least one of the selected music elements and the storage of the at least one reworked music element in the music elements database. The post-processing may in this case in particular include a psychoacoustic adaptation of the music element found, for example a, preferably slight, adaptation of the pitch, the speed or the length. A respective adaptation method may preferably be defined as a computer program in relation to the sound specification.
Es ist weiterhin auch möglich, dass vor dem Auswählen und/oder Laden der digitalen Klangspezifikation einen Signalklang, der einer Funktion oder Aktion einer Maschine oder eines Benutzerinterfaces einer Maschine zugeordnet ist, aus einer Signalklangdatenbank ausgewählt wird und aus der Spezifikationsdatenbank eine dem Signalklang zugeordnete digitale Klangspezifikation ausgewählt und/oder geladen wird. Alternativ kann die Klangspezifikation auch automatisiert aus dem ausgewählten Signalklang erzeugt werden, beispielsweise als eine spektrale Leistungsdichte, wie oben beschrieben.It is also possible that prior to selecting and / or loading the digital sound specification, a signal sound associated with a function or action of a machine or user interface of a machine is selected from a signal sound database, and from the specification database a digital sound specification associated with the signal sound is selected and / or loaded. Alternatively, the sound specification may also be generated automatically from the selected signal sound, for example as a spectral power density, as described above.
Somit ist es möglich, einen konkreten Signalklang, beispielsweise einen Warnton, auszuwählen, für den ähnliche Signalklänge aus der Musikdatenbank ermittelt werden sollen. Die Auswahl des Signaltons kann hierbei durch den Benutzer erfolgen, oder alternativ durch ein Computerprogramm, beispielsweise bei einer Systeminitialisierung angestoßen werden. Somit wäre es beispielsweise auch möglich, für mehrere oder sogar alle in einem System vorhandenen Signalklänge in regelmäßigen oder unregelmäßigen Zeitabständen zugeordnete Musikelemente aus der Musikdatenbank des Benutzers zu ermitteln, wodurch sich wiederum die Benutzerakzeptanz der Musikelemente erhöht.It is thus possible to select a specific signal sound, for example a warning tone, for which similar signal sounds from the music database are to be determined. The selection of the beep can be done by the user, or alternatively be triggered by a computer program, for example, in a Systeminitialisierung. Thus, for example, it would also be possible to determine for individual or even all of the signal sounds present in a system at regular or irregular time intervals from the user's music database, which in turn increases the user acceptance of the music elements.
Auch ist es möglich, alle Signalklänge eines Systems durch jeweilige ähnliche Musikelemente aus einem gegebenen Musikstück oder einer gegebenen Auswahl von Musikstücken zu ersetzen. It is also possible to replace all the signal sounds of a system with respective similar music elements from a given piece of music or a given selection of pieces of music.
Es ist dann zusätzlich möglich, eines der anhand des ausgewählten Signaltons und der ihm zugeordneten Klangrepräsentation ermittelten Musikelemente der dem Signalklang zugeordneten Funktion oder Aktion zuzuordnen, so dass der Signalklang funktionell durch dieses Musikelement ersetzt wird. It is then additionally possible to assign one of the music elements determined by the selected signal tone and its associated sound representation to the function or action assigned to the signal sound, so that the signal sound is functionally replaced by this music element.
Der ursprüngliche Signalklang bleibt vorzugsweise im System erhalten, aber er wird nicht mehr im Zusammenhang mit der Funktion oder Aktion verwendet. Bei einer Rücksetzung des Systems könnte somit wieder der ursprüngliche Signalklang der Funktion bzw. Aktion zugeordnet werden. The original signal sound preferably remains in the system, but it is no longer used in conjunction with the function or action. When resetting the system, the original signal sound could thus be assigned to the function or action again.
Die Signalklangdatenbank kann hierbei identisch mit der Musikelementedatenbank sein, oder die beiden Datenbanken können verschieden sein. Es besteht weiterhin die Möglichkeit, dass die vom System bereitgestellte Signalklangdatenbank schreibgeschützt ist, so dass der Benutzer oder auch ein Computerprogramm diese Datenbank nicht verändern kann. The signal sound database may be identical to the music element database, or the two databases may be different. There is also the possibility that the signal sound database provided by the system is read-only, so that the user or even a computer program can not change this database.
Weiterhin ist es möglich, dass vor dem Auswählen und/oder Laden des mindestens einen Musikstücks aus der Musikdatenbank eine Musikauswahlinformation von einem Benutzer über ein Benutzerinterface empfangen wird und das Auswählen und/oder Laden des mindestens einen Musikstücks aus der Musikdatenbank anhand der Musikauswahlinformation erfolgt. Furthermore, before selecting and / or loading the at least one piece of music from the music database, it is possible to receive music selection information from a user via a user interface and to select and / or load the at least one piece of music from the music database on the basis of the music selection information.
Somit kann der Benutzer eine Möglichkeit erhalten, die Musikstücke, aus denen die Musikelemente bzw. Signalklänge ermittelt werden sollen, selber auszuwählen bzw. Kriterien für deren Auswahl zu definieren. Möglich wäre es z. B., die von dem Benutzer bereitgestellte Musikdatenbank, die sich zum Beispiel auf einem externen Hardwarespeicher oder bei einem entfernten Streamingdienst befinden kann, nach einem Auswahlmuster des Benutzers, welches beispielsweise Präferenzen bezüglich des Musikgenre, Interpreten, häufig angehörte Titel und/oder verwendete Instrumente beinhalten kann, zu durchsuchen und Musikstücke, die den vorgegebenen Kriterien entsprechen, auszuwählen.Thus, the user can obtain a possibility, the pieces of music from which the music elements or signal sounds are to be determined to select themselves or to define criteria for their selection. It would be possible z. For example, the music database provided by the user, which may be, for example, an external hardware store or a remote streaming service, may include a user's selection pattern including, for example, preferences relating to the music genre, performers, frequently heard titles, and / or instruments used can browse and select pieces of music that meet the given criteria.
Beispielsweise auch können Lieblingslieder des Benutzers automatisch anhand der zuletzt oder besonders häufig gespielten Musiktitel oder anhand von gespeicherten Playlisten, beispielsweise durch einen Streamingdienst, ausgewählt werden.For example, favorite songs of the user can be automatically selected based on the last or most frequently played songs or on the basis of stored playlists, for example by a streaming service.
Die verschiedenen Verfahrensschritte und oben beschriebenen Varianten vorzugsweise werden automatisiert durch ein oder mehrere Computerprogramme umgesetzt, wobei die Computerprogramme in einem digitalen Speicher auf einer Steuereinheit mit einem Prozessor als Folge von Instruktionen zur automatischen Ausführung hinterlegt sind. Weiterhin verfügen die Computerprogramme und/oder die Steuereinheit über lesenden und/oder schreibenden Zugriff auf eine oder mehrere der oben beschriebenen Datenbanken.The various method steps and variants described above are preferably implemented automatically by one or more computer programs, wherein the computer programs are stored in a digital memory on a control unit with a processor as a result of instructions for automatic execution. Furthermore, the computer programs and / or the control unit have read and / or write access to one or more of the databases described above.
Weiterhin umfasst die vorliegende Schutzrechtsanmeldung ein System zur Durchführung des zuvor beschriebenen Verfahrens. Ein solches System umfasst zumindest eine Steuereinheit mit einem Prozessor sowie ein Computerprogramm implementiert als eine Folge von Instruktionen zur automatischen Ausführung durch den Prozessor. Der Prozessor kann hierbei Teil eines Fahrzeugbediensystems sein. Weiterhin umfasst das System mindestens einen digitalen Datenspeicher, vorzugsweise mehrere Datenspeicher, darunter eine Signalklangdatenbank, eine Musikelementedatenbank und eine Spezifikationsdatenbank.Furthermore, the present patent application comprises a system for carrying out the method described above. Such a system comprises at least one control unit having a processor and a computer program implemented as a sequence of instructions for automatic execution by the processor. The processor can be part of a vehicle operating system. Furthermore, the system comprises at least one digital data memory, preferably a plurality of data memories, including a signal sound database, a music elements database and a specification database.
Weiterhin kann das System eine Schnittstelle zur Kopplung mit einem externen Datenspeicher und/oder ein Benutzerinterface zum Empfangen von Eingaben des Benutzers sowie zur Ausgabe von Ergebnissen des beanspruchten Verfahrens an den Benutzer. Further, the system may interface with an external data store and / or a user interface to receive input from the user and output results of the claimed method to the user.
Der externe Datenspeicher kann beispielsweise eine externen Festplatte, ein mobiles Endgerät oder ein entfernter Datenspeicher wie ein Streamingdienst oder eine Cloud sein und umfasst vorzugsweise die Musikdatenbank. Die Benutzerschnittstelle kann vorzugsweise ein Display zur visuellen Ausgabe an den Benutzer und einen Lautsprecher umfassen. Weiterhin kann das Benutzerinterface mindestens ein Eingabeelement umfassen, beispielsweise ein Touchscreendisplay, einen oder mehrere Taster und/oder ein Mikrofon zur Spracheingabe.The external data storage may be, for example, an external hard drive, a mobile terminal or a remote data storage such as a streaming service or a cloud, and preferably includes the music database. The user interface may preferably include a display for visual output to the user and a speaker. Furthermore, the user interface may comprise at least one input element, for example a touchscreen display, one or more buttons and / or a microphone for voice input.
Somit kann die Musikdatenbank beispielsweise innerhalb des Systems oder auf einem externen oder entfernten Speicher, beispielsweise bei einem Streamingdienst, gespeichert sein, wobei der externe oder entfernte Speicher vorzugsweise nur temporär mit dem System verbunden ist. Thus, the music database may be stored, for example, within the system or on an external or remote storage such as a streaming service, preferably with the external or remote storage only temporarily connected to the system.
Zur Auswahl der Musikstücke im oben beschriebenen Verfahren kann beispielsweise durch einen Streamingdienst erfasst und analysiert werden, welche Musikstücke wann und durch wen ausgewählt, abgespielt und/oder zu einer Playlist hinzugefügt wurden.For selecting the pieces of music in the method described above, for example, it can be detected and analyzed by a streaming service which pieces of music were selected, played back and / or added to a playlist when and by whom.
Vorzugsweise ist das System zur Durchführung des beschriebenen Verfahrens zumindest teilweise in einem Fahrzeug, insbesondere Kraftfahrzeug, angeordnet. Bevorzugt befinden sich vor allem die Steuereinheit, die Signalklangdatenbank, die Musikelementedatenbank und/oder die Spezifikationsdatenbank sowie das Benutzerinterface im Fahrzeug, damit eine zuverlässige Ausgabe der Signalklänge jederzeit und unabhängig von Funkverbindungen gewährleistet ist.Preferably, the system for performing the method described is at least partially in a vehicle, in particular Motor vehicle, arranged. The control unit, the signal sound database, the music element database and / or the specification database and the user interface in the vehicle are preferably located, so that a reliable output of the signal sounds is ensured at all times and independently of radio connections.
Weitere Ausführungsbeispiele sind nachfolgend anhand der Figuren erläutert. Es zeigen:Further embodiments are explained below with reference to the figures. Show it:
Das Verfahren
Die Klangspezifikation wird als ein mehrdimensionaler Vektor in einem mehrdimensionalen Vektorraum repräsentiert, wobei die Dimensionen beispielsweise Länge, Tonart, Tempo, Transienten (beispielsweise schnelle, impulshafte, elektrische, akustische und/oder einzelne Anschläge und/oder Einschwingvorgänge eines Instruments), Melodie (beispielsweise aufsteigend oder absteigend), Rhythmus, Pitch, Tonhöhe und/oder Frequenz umfassen.The sound specification is represented as a multi-dimensional vector in a multi-dimensional vector space, the dimensions being for example length, key, tempo, transients (eg fast, impulsive, electrical, acoustic and / or individual strokes and / or transients of an instrument), melody (ascending, for example or descending), rhythm, pitch, pitch, and / or frequency.
In einem weiteren Verfahrensschritt wird eine Musikstückmenge aus einer in einem externen Speicher angeordneten digitalen Musikdatenbank ermittelt, ausgewählt und/oder geladen (Schritt
Nachfolgend wird ein Musikstück aus der Musikstückmenge ausgewählt (Schritt
Aus diesem Musikstück wird in einem nächsten Verfahrensschritt ein Musiksnippet ermittelt (Schritt
Dann wird eine Repräsentation des Musiksnippets im musikbezogenen Parameterraum der Klangrepräsentation ermittelt (Schritt
Liegt der anhand des Abstandsmaßes ermittelte Abstand der beiden Repräsentationen unterhalb der Schranke, so werden die Repräsentationen als ähnlich erachtet und das Musiksnippet wird als Musikelement in einer Musikelementedatenbank gespeichert (Schritt
Nachdem das Musiksnippet als Musikelement gespeichert wurde, oder wenn die Elementrepräsentation anhand des Abstandsmaßes und der vorgegebenen Schranke nicht ähnlich zu der Klangrepräsentation ist, so wird geprüft, ob es noch weitere Musiksnippets in dem Musikstück gibt (Schritt
Falls es keine weiteren Musiksnippets im Musikstück gibt, so ist die Bearbeitung des Musikstücks beendet und es wird in Schritt
Das anhand von
Ein solches System
Weiterhin umfasst das System
Das System
In der Musikelementedatenbank werden die anhand des Abstandmaßes als ähnlich zu der vorgegebenen Klangrepräsentation ermittelten und extrahierten Musikelemente gespeichert. Die gespeicherten Musikelemente können dann über das Benutzerinterface an den Benutzer ausgegeben bzw. dem Benutzer zur Auswahl angezeigt werden. Bei Empfang der Auswahl eines Musikelements über das Benutzerinterface kann dann ein Signalklang der durch die Steuereinheit einer bestimmten Funktion oder Aktion des Fahrzeugs zugeordnet war funktionell durch eines der ermittelten Musikelemente ersetzt werden, so dass bei Auftreten der Funktion oder Aktion des Fahrzeugs das Musikelement abgespielt wird und nicht mehr der ursprüngliche Signalklang.In the music-element database, the music elements determined and extracted on the basis of the distance measure are recorded and extracted as being similar to the given sound representation. The stored music elements can then be output via the user interface to the user or displayed to the user for selection. Upon receipt of the selection of a musical element via the user interface, a signal sound associated with the control unit of a particular function or action of the vehicle may then be functionally replaced by one of the determined music elements such that when the function or action of the vehicle occurs, the music element is played back no longer the original signal sound.
Beispielsweise kann ein Warnton, der durch ein schrilles kurzes Piepen auf eine niedrige Außentemperatur hinweist, bei entsprechender Benutzerauswahl durch ein ähnlich schrill klingendes Musikelement ersetzt werden. Hierbei verbleibt der ursprüngliche Warnton in der Signaltondatenbank, so dass die Änderung, beispielsweise durch ein Zurücksetzen einzelner oder aller Signaltöne wieder rückgängig gemacht werden kann.For example, a warning sound, which indicates a low outside temperature by a high-pitched short beep, can be replaced by a similarly shrill-sounding music element with appropriate user selection. In this case, the original warning sound remains in the signal tone database, so that the change can be reversed, for example, by resetting any or all beeps back.
Die Musikelemente und die Signalklänge können alternativ auch in ein und derselben Datenbank gespeichert werden, wobei es dann möglich ist die vom System bereitgestellten Signalklänge besonders zu kennzeichnen, beispielsweise durch einen Schreibschutz, um sie vor dem versehentlichen Löschen zu schützen.The music elements and the signal sounds can alternatively also be stored in one and the same database, wherein it is then possible to specially mark the signal sounds provided by the system, for example by a write protection, in order to protect them from accidental deletion.
Weiterhin umfasst die Steuereinheit
Zumindest ein Teilsystem
In jeder der
Hierbei ist die Klangrepräsentation A durch die Klangspezifikation vorgegeben und die Repräsentationen B1, B2 und B3 entsprechen jeweils einem, aus einem Musikstück ermittelten, Musiksnippet. In this case, the sound representation A is predetermined by the sound specification and the representations B1, B2 and B3 respectively correspond to a music snippet determined from a music piece.
In den
In
Die in
Die Musiksnippets, deren Repräsentationen der Klangrepräsentation bezüglich der jeweiligen Ähnlichkeitsrelation
Weiterhin ist es möglich die Elementrepräsentationen anhand des jeweiligen Abstandsmaßes zu der Klangrepräsentation zu ordnen und somit ein Ranking zu erstellen. Es wird dann nur eine vorgegebene Zahl der Musikelemente deren Elementrepräsentationen den geringsten Abstand zu der Klangrepräsentation aufweisen in der Musikelementedatenbank gespeichert. Beispielsweise kann so die Anzahl der gespeicherten Musikelemente auf nur zwei oder drei Musikelemente beschränkt werden, die dann dem Benutzer zwecks Auswahl über das Benutzerinterface abgespielt werden.Furthermore, it is possible to arrange the element representations on the basis of the respective distance measure to the sound representation and thus to create a ranking. Only a predetermined number of the music elements whose element representations have the smallest distance to the sound representation are then stored in the music elements database. For example, so the number of stored music elements can be limited to only two or three music elements, which are then played to the user for selection via the user interface.
Claims (11)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015225476.3A DE102015225476A1 (en) | 2015-12-16 | 2015-12-16 | Method for the automated generation of signal sounds from pieces of music |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015225476.3A DE102015225476A1 (en) | 2015-12-16 | 2015-12-16 | Method for the automated generation of signal sounds from pieces of music |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102015225476A1 true DE102015225476A1 (en) | 2017-06-22 |
Family
ID=58994041
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102015225476.3A Withdrawn DE102015225476A1 (en) | 2015-12-16 | 2015-12-16 | Method for the automated generation of signal sounds from pieces of music |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102015225476A1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6784354B1 (en) * | 2003-03-13 | 2004-08-31 | Microsoft Corporation | Generating a music snippet |
US8588794B2 (en) * | 2007-02-02 | 2013-11-19 | At&T Mobility Ii Llc | Devices and methods for creating a snippet from a media file |
-
2015
- 2015-12-16 DE DE102015225476.3A patent/DE102015225476A1/en not_active Withdrawn
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6784354B1 (en) * | 2003-03-13 | 2004-08-31 | Microsoft Corporation | Generating a music snippet |
US8588794B2 (en) * | 2007-02-02 | 2013-11-19 | At&T Mobility Ii Llc | Devices and methods for creating a snippet from a media file |
Non-Patent Citations (3)
Title |
---|
BREWSTER, Stephen A. Using nonspeech sounds to provide navigation cues. ACM Transactions on Computer-Human Interaction (TOCHI), 1998, 5. Jg., Nr. 3, S. 224-259. doi: 10.1145/292834.292839 * |
BREWSTER, Stephen. The design of sonically-enhanced widgets. Interacting with computers, 1998, 11. Jg., Nr. 2, S. 211-235. doi: 10.1016/S0953-5438(98)00028-9 * |
KUMAR, R. Christopher Praveen; CHANDY, D. Abraham. Audio retrieval using timbral feature. In: Emerging Trends in Computing, Communication and Nanotechnology (ICE-CCN), 2013 International Conference on. IEEE, 2013. S. 222-226. doi: 10.1109/ICE-CCN.2013.6528497 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE10232916B4 (en) | Apparatus and method for characterizing an information signal | |
EP1407446B1 (en) | Method and device for characterising a signal and for producing an indexed signal | |
DE112007001774T5 (en) | Method and system for searching for music | |
DE10058811A1 (en) | Method for identifying pieces of music e.g. for discotheques, department stores etc., involves determining agreement of melodies and/or lyrics with music pieces known by analysis device | |
DE112020004052T5 (en) | SEQUENCE MODELS FOR AUDIO SCENE RECOGNITION | |
WO2003007185A1 (en) | Method and device for producing a fingerprint and method and device for identifying an audio signal | |
WO2002073592A2 (en) | Method and device for characterising a signal and method and device for producing an indexed signal | |
DE102014118075A1 (en) | Audio and video synchronizing perception model | |
DE102010007992A1 (en) | Methods and systems for merging media | |
DE102013213047A1 (en) | System, method and computer program product for testing device parameters | |
DE60225190T2 (en) | FEATURE-BASED AUDIO CONTENT IDENTIFICATION | |
DE602004004345T2 (en) | Information search device, information search method and recording medium for storing the information search program | |
DE202016000083U1 (en) | Device for improving the sound quality of an audio file | |
DE102015015814A1 (en) | Setup procedure and device for offline audio database and associated server audio database | |
DE102015225476A1 (en) | Method for the automated generation of signal sounds from pieces of music | |
EP2792165A1 (en) | Adaptation of a classification of an audio signal in a hearing aid | |
EP1939768A2 (en) | Method and device for selecting characterisable data records | |
EP1377924B1 (en) | Method and device for extracting a signal identifier, method and device for creating a database from signal identifiers and method and device for referencing a search time signal | |
DE102008032116A1 (en) | Sound generator, electronic device with a sound generator, and method for controlling a sound generator | |
DE102006016298A1 (en) | Auxiliary operating system for portable electrical appliances | |
DE112005000741T5 (en) | Program table generation method, program table generation device, and program table generation system | |
WO2009013144A1 (en) | Method for determining a similarity, device, and the use thereof | |
DE102016226042B4 (en) | Device, means of transportation and method for designing a transition between two audio files | |
DE112016002070T5 (en) | ALGORITHMIC RADIO FOR ANY TEXT QUESTIONS | |
EP3190700B1 (en) | Method and device for processing audio signals |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified | ||
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: G06F0017300000 Ipc: G06F0016000000 |
|
R081 | Change of applicant/patentee |
Owner name: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, DE Free format text: FORMER OWNER: CONTINENTAL AUTOMOTIVE GMBH, 30165 HANNOVER, DE |
|
R005 | Application deemed withdrawn due to failure to request examination |