EP2503799A1

EP2503799A1 - Method and system for calculating synthetic head related transfer functions by means of virtual local sound field synthesis

Info

Publication number: EP2503799A1
Application number: EP11159001A
Authority: EP
Inventors: Jens Ahrens; Sascha Spors
Original assignee: Technische Universitaet Berlin; Deutsche Telekom AG
Current assignee: Deutsche Telekom AG
Priority date: 2011-03-21
Filing date: 2011-03-21
Publication date: 2012-09-26
Anticipated expiration: 2031-03-21
Also published as: EP2503799B1; ES2812503T3

Abstract

The method involves providing a database of pairs of outer ear transfer functions for multiple source positions, where each pair of outer ear transfer function is determined for one of the source positions by a measurement. Each pair of outer ear transfer function is interpreted as a respective virtual loudspeaker (6) which is arranged at the source position. An independent claim is also included for a system for executing a method for calculating synthetic outer ear transfer functions.

Description

Technisches GebietTechnical area

Die beanspruchte Erfindung bezieht sich auf ein Verfahren und System zur Berechnung synthetischer Außenohrübertragungsfunktionen durch virtuelle Schallfeldsynthese, vorzugsweise lokale Schallfeldsynthese. Die Erfindung bezieht sich im Besonderen auf ein derartiges Verfahren und System zum Einsatz in dynamischen virtuellen binauralen auditorischen Umgebungen.The claimed invention relates to a method and system for calculating synthetic outer ear transmission functions by virtual sound field synthesis, preferably local sound field synthesis. The invention more particularly relates to such a method and system for use in dynamic virtual binaural auditory environments.

Stand der TechnikState of the art

Die räumliche auditorische Wahrnehmung des Menschen beruht wesentlich auf der Auswertung der Unterschiede zwischen den akustischen Signalen beider Ohren. Die Unterschiede entstehen unter anderen durch die akustischen Eigenschaften der Außenohren in Bezug auf eine gegebene Quellenposition. Die Außenohren umfassen im Wesentlichen den Oberkörper, Kopf und die Ohrmuscheln. Das Signal einer akustischen Quelle wird durch Reflexion, Beugung und Brechung am Außenohr modifiziert. Die akustischen Eigenschaften der Außenohren können durch die Messung des Übertragungsweges von einer Quelle zu den Ohrkanälen gut charakterisiert werden. Dazu wird meist die Übertragungsfunktion von einem Lautsprecher zu in den Ohrkanälen platzierten Mikrofonen gemessen. Diese Übertragungsfunktionen werden als Außenohrübertragungsfunktionen (englisch "Head-Related Transfer Function(s)") bezeichnet. Sie spielen eine wichtige Rolle bei der Erforschung des menschlichen Gehörs und für die virtuelle Akustik. Im Allgemeinen sind die Außenohrübertragungsfunktionen von Mensch zu Mensch verschieden. Weiterhin hängen sie von der Position und Charakteristik der Quelle ab die zur Messung verwendet wurde.The spatial auditory perception of humans is essentially based on the evaluation of the differences between the acoustic signals of both ears. The differences arise, among other things, from the acoustic properties of the outer ears with respect to a given source location. The outer ears essentially comprise the upper body, head and ears. The signal from an acoustic source is modified by reflection, diffraction and refraction at the outer ear. The acoustic properties of the outer ears can be well characterized by measuring the transmission path from a source to the ear canals. For this purpose, the transfer function is usually measured from a loudspeaker to microphones placed in the ear canals. These transfer functions are referred to as outer-ear transfer functions ("Head-Related Transfer Function (s)"). They play an important role in the study of human hearing and virtual acoustics. In general, the outer ear transmission functions are different from person to person. Furthermore, they depend on the position and characteristics of the source used for the measurement.

Die Messung der Außenohrübertragungsfunktionen wird meist mittels einem oder mehreren Lautsprecher(n) durchgeführt. Diese befinden sich typischerweise auf einer Kreisbahn oder Kugeloberfläche mit dem Kopf im Mittelpunkt. Die Messungen werden dann sequentiell für jede Lautsprecherposition durchgeführt. Dieses Vorgehen resultiert in einem Satz von Außenohrübertragungsfunktionen für verschiede Winkel bei einem festen Abstand der Quelle. Die Messungen werden typischerweise für einen fixierten Kopf durchgeführt. Aktuell verfügbare Datensätze beinhalten meist nur einen einzigen Quellenabstand. Oft befindet sich dieser im Bereich von 1.5-3 m von der Kopfmitte aus gemessen. Allein diese einfachen Messungen für einen Abstand sind meist schon recht zeit- und resourcenaufwendig. Von besonderem Interesse sind kurze Distanzen zur Quelle (Nahfeld) da die Außenohrübertragungsfunktion hier ihre Eigenschaften wesentlich verändern.The measurement of the outer ear transmission functions is usually carried out by means of one or more loudspeaker (s). These are typically centered on a circular path or spherical surface with the head. The measurements are then performed sequentially for each speaker position. This procedure results in a set of outer ear transfer functions for different angles at a fixed distance of the source. The measurements are typically performed for a fixed head. Current available data sets usually contain only a single source distance. Often this is measured in the range of 1.5-3 m from the center of the head. But these simple measurements for a distance are usually quite time and resource consuming. Of particular interest are short distances to the source (near field) because the outer ear transfer function significantly changes their properties here.

Außenohrübertragungsfunktionen spielen eine wichtige Rolle bei der virtuellen Akustik. Bei der binauralen Wiedergabe können virtuelle Schallquellen durch die Filterung eines Quellsignals x(t) mit der linken/rechten Außenohrübertragungsfunktion (H_L und H_R) und Darbietung der gefilterten Signale mittels Kopfhörer erzeugt werden. Die Außenohrübertragungsfunktionen werden dabei aus einer Datenbank entsprechend der gewünschten Position der virtuellen Quelle ausgewählt. Dabei ist es wichtig die aktuelle Position des Kopfes zu berücksichtigen, z.B. durch einen Head-Tracker, damit die virtuellen Quellen auch bei Rotation des Kopfes eine stabile Position im Raum haben. Durch sogenannte Übersprechkompensation können die Signale auch mittels Lautsprechern wiedergegeben werden.External ear transmission functions play an important role in virtual acoustics. In binaural reproduction, virtual sound sources can be generated by filtering a source signal x (t) with the left / right outer ear transmission function (H _L and H _R ) and presenting the filtered signals by means of headphones. The outer ear transmission functions are thereby selected from a database according to the desired position of the virtual source. It is important to consider the current position of the head, eg by a head tracker, so that the virtual sources have a stable position in the room even when the head is rotated. Through so-called crosstalk compensation, the signals can also be reproduced by means of speakers.

Die Positionen der virtuellen Quellen sind prinzipbedingt auf die Positionen beschränkt die in der Datenbank der Außenahrübertragungsfuuktionen zur Verfügung stehen. Aufgrund des Aufwandes wird meist nur in einem fixen Abstand aber für eine Vielzahl von Winkeln auf einer Kreisbahn/Kugeloberfläche gemessen. Um die daraus resultierenden Beschränkungen bezüglich der möglichen Positionen virtueller Schallquellen zu überwinden, wurde eine Reihe von Ansätzen entwickelt, um die gemessene Distanz nachträglich zu modifizieren (siehe Abschnitt weiter unten). Neben der oben beschriebenen binauralen Wiedergabe, die auf der Verwendung von Außenollrübertragungsfunktionen basiert, gibt es noch eine Reihe von Lautsprecher basierter Ansätzen in der virtuellen Akustik, die im Folgenden kurz vorgestellt werden.The positions of the virtual sources are limited in principle to the positions that are available in the database of the external vehicle transmission functions. Due to the effort is usually measured only at a fixed distance but for a variety of angles on a circular path / spherical surface. In order to overcome the resulting limitations on the potential positions of virtual sound sources, a number of approaches have been developed to retroactively modify the measured distance (see section below). In addition to the binaural rendering described above, which is based on the use of external toll transfer functions, there are a number of speaker based approaches in virtual acoustics, which are briefly presented below.

[1] und [2] betreffen Verfahren zur Wellenfeldsynthese. Die Wellenfeldsynthese ermöglicht die physikalische Rekonstruktion eines Schallfeldes über einen ausgedehnten Bereich. Es können beliebige konvexe oder gerade Lautsprecheranordnungen verwendet werden, die nicht zwingend geschlossen sein müssen. In dem potentiellen Hörbereich, z.B. innerhalb einer Lautsprecheranordnung, gibt es keinen ausgeprägten "Sweet Spot" über den gesamten hörbaren Frequenzbereich, wo die Rekonstruktion des gewünschten Schallfeldes signifikant genauer ist als im Rest des Hörbereiches. Bei praktischen Realisierungen sind große Abweichungen vom gewünschten Schallfeld über den gesamten potentiellen Hörerbereich vorhanden. Die Lautsprecheransteuerungssignale können analytisch berechnet werden. Eine wesentliche Eigenschaft der Wellenfeldsynthese ist die Möglichkeit sogenannte fokussierte Quellen zu erzeugen. Dies ist die Imitation des Schallfeldes einer Schallquelle, die sich zwischen dem Zuhörer und den Lautsprechern befindet. [5] betrifft fokussierte Schallquellen.[1] and [2] relate to wave field synthesis methods. Wave field synthesis allows the physical reconstruction of a sound field over a wide range. It can be used any convex or straight speaker arrangements, which need not necessarily be closed. In the potential listening area, eg within a loudspeaker arrangement, there is no pronounced "sweet spot" over the entire audible frequency range, where the reconstruction of the desired sound field is significantly more accurate than in the rest of the listening area. In practical realizations are great Deviations from the desired sound field over the entire potential listener area available. The loudspeaker drive signals can be calculated analytically. An essential feature of wave field synthesis is the ability to create so-called focused sources. This is the imitation of the sound field of a sound source located between the listener and the speakers. [5] concerns focused sound sources.

Ein weiteres Verfahren der virtuellen Akustik ist Ambisonics. [3] betrifft die traditionelle Formulierung von Ambisonics, wobei dieses Verfahren kreisförmige bzw. kugelförmige Anordnungen von Lautsprechern erfordert. Mit Hilfe von numerischen Algorithmen werden die Lautsprechersignale generiert, die zur Wiedergabe des gewünschten Schallfeldes führen. Die im Rechenweg notwendige Beschränkung der räumlichen Bandbreite der Ansteuerungsfunktion bewirkt, dass die Rekonstruktion des gewünschten Schallfeldes im Zentrum der Lautsprecheranordnung am genauesten ist ("Sweet Spot"). Je weiter der betrachtete Ort von Zentrum entfernt ist, desto größer werden die Abweichungen.Another method of virtual acoustics is Ambisonics. [3] relates to the traditional formulation of Ambisonics, which method requires circular or spherical arrangements of loudspeakers. With the help of numerical algorithms, the loudspeaker signals are generated, which lead to the reproduction of the desired sound field. The limitation of the spatial bandwidth of the drive function necessary in the calculation path has the effect that the reconstruction of the desired sound field in the center of the loudspeaker arrangement is most accurate ("sweet spot"). The further the considered place is from the center, the larger the deviations become.

[4] betrifft Erweiterungen der traditionellen Formulierung von Ambisonics. Diese ermöglichen die analytische Berechnung der Lautsprecheransteuerungssignale, die um ein Vielfaches effizienter ist als numerische Verfahren. Jedoch besteht weiterhin die Restriktion, dass der "Sweet Spot" sich im Zentrum der Lautsprecheranordnung befindet, und dass lediglich kreisförmige oder kugelförmige Lautsprecheraufbauten verwendet werden können.[4] concerns extensions of the traditional formulation of Ambisonics. These allow the analytical calculation of loudspeaker drive signals, which is many times more efficient than numerical methods. However, there is still the restriction that the sweet spot is at the center of the speaker assembly, and that only circular or spherical speaker assemblies can be used.

Beide Verfahren, die Wellenfeldsynthese und erweitertes Ambisonics, streben die physikalisch akkurate Wiedergabe in einem möglichst großen Zuhörerbereich an. In der praktischen Realisierung beider Verfahren sind der erreichbaren Genauigkeit allerdings Grenzen gesetzt. Die endliche Anzahl von Lautsprechern führt zu einer Reihe von Artefakten, die zum Teil im gesamten Zuhörerbereich auftreten. Dies hat zu der Entwicklung einer Reihe von Ansätzen geführt, die eine höhere Genauigkeit in einem begrenzten Zuhörerbereich ermöglichen als Wellenfeldsynthese oder Ambisonics.Both methods, wavefield synthesis and advanced ambisonics, aim for physically accurate playback in the widest possible audience. In the practical implementation of both methods, the achievable accuracy, however, limits. The finite number of speakers results in a number of artifacts, some of which occur throughout the listening area. This has led to the development of a number of approaches that allow for higher accuracy in a limited audience than wavefield synthesis or ambisonics.

EP 2182744 betrifft ein Verfahren des Ambisonics, wobei Sweet Spots bzw. die Sweet Area innerhalb einer geschlossenen Lautsprecheranordnung frei platziert werden kann. Die Lautsprecheransteuerungssignale können analytisch berechnet werden. Das Verfahren ist signifikant effizienter als andere Ansätze aber limitiert auf geschlossene (z.B. kreisförmige) Anordnungen. EP 2182744 relates to a method of ambisonics wherein sweet spots or the sweet area can be freely placed within a closed speaker assembly. The loudspeaker drive signals can be calculated analytically. The method is significantly more efficient than other approaches but limited to closed (eg, circular) arrangements.

Der in [6] vorgestellte Ansatz basiert auf dem Konzept räumlich dicht angeordneter virtueller Sekundärquellen um die Genauigkeit der Synthese zu Verbessern. Die virtuellen Quellen werden dabei durch fokussierte Schallquellen realisiert. Dieser Ansatz lässt sich besonders Effizient durch die Wellenfeldsynthese realisieren.The approach presented in [6] is based on the concept of spatially dense virtual secondary sources to improve the accuracy of the synthesis. The virtual sources are realized by focused sound sources. This approach can be realized particularly efficiently by the wave field synthesis.

Der in [7] vorgestellte Ansatz beruht auf einer räumlichen Bandbegrenzung der Allsteuerungssignale der Lautsprecher. Damit wird ein begrenzter Bereich mit erhöhter Genauigkeit der Synthese erreicht, der frei im Hörerbereich platziert werden kann.The approach presented in [7] is based on a spatial band limitation of the control signals of the loudspeakers. Thus, a limited range with increased accuracy of synthesis is achieved, which can be placed freely in the handset area.

DE 10 2007 032 272 und DE 10 2005 003 431 beschreiben die technische Realisierung eines virtuellen Kopfhörers, die auch als Binaural Sky bezeichnet wird. Dabei werden jeweils eine oder mehrere virtuelle Schallquellen in der Nähe der Ohren des Hörers erzeugt, um einen Kopfhörer zu simulieren. Diese virtuellen Schallquellen werden durch akustische Fokussierung realisiert. Diese virtuellen Schallquellen werden mittels einer so genannten Übersprechkompensation betrieben, die das Übersprechen der Signale zu den abgewandten Ohren hin kompensiert. Dies ist eine übliche Technik bei der Wiedergabe von binauralen Signalen über Lautsprecher. Die virtuellen Quellen werden der Kopfbewegung nachgeführt, dadurch kann die Übersprechkompensation bei Kopfbewegungen konstant gehalten werden. Die Synthese von Außenohrübertragungsfunktionen, um andere Eigenschaften zu realisieren als in der Datenbank vorhanden sind, wird nicht betrachtet. Weiterhin wird die Schallfeldsynthese in dem Verfahren nur zur Erzeugung der Quellen für den virtuellen Kopfhörer genutzt und nicht für die Synthese eines Schallfeldes in einem lokalen Bereich. DE 10 2007 032 272 and DE 10 2005 003 431 describe the technical realization of a virtual headphone, which is also referred to as Binaural Sky. In each case, one or more virtual sound sources are generated in the vicinity of the ears of the listener to simulate a headphone. These virtual sound sources are realized by acoustic focusing. These virtual sound sources are operated by means of a so-called crosstalk compensation, which compensates for the crosstalk of the signals to the opposite ears out. This is a common technique when playing binaural signals through speakers. The virtual sources are tracked the head movement, thereby the crosstalk compensation can be kept constant during head movements. The synthesis of outer ear transfer functions to realize other properties than exist in the database is not considered. Furthermore, the sound field synthesis in the method is only used for generating the sources for the virtual headphone and not for the synthesis of a sound field in a local area.

[11] betrifft ein Verfahren des virtuellen Ambisonics, bei dem eine binaurale Repräsentation eines Ambisonics Systems höherer Ordnung realisiert wird. Hierbei werden virtuelle Lautsprecher durch Verwendung der entsprechenden Außenohrübertragungsfunktionen binaural wiedergegeben. Die Ansteuerungssignale der virtuellen Lautsprecher werden mittels Ambisonics höherer Ordnung berechnet. Dabei wird bei den virtuellen Lautsprechern und der virtuellen Quelle vereinfacht von dem Modell der ebenen Welle ausgegangen. Die Distanz einer virtuellen Quelle wird durch eine einfache Zeitverzögerung realisiert. Das Verfahren beinhaltet zudem ein einfaches Raummodell. Die Synthese von Außenohrübertragungsfunktionen wird hier nicht betrachtet. Weiterhin erlaubt das verwendete Modell für die virtuelle Quelle keine physikalische Berücksichtigung der Distanz z.B. durch eine Krümmung der Wellenfronten und ist damit für die Synthese naher Quellen nicht gut geeignet.[11] relates to a method of virtual ambisonics in which a binaural representation of a higher order Ambisonics system is realized. In this case, virtual speakers are binaurally reproduced by using the corresponding outer ear transmission functions. The driving signals of the virtual speakers are calculated by Ambisonics of higher order. In this case, the virtual loudspeakers and the virtual source are based on the simplified model of the plane wave. The distance of a virtual source is realized by a simple time delay. The method also includes a simple space model. The synthesis of outer ear transfer functions is not considered here. Furthermore, the model used for the virtual source does not allow physical consideration of the distance For example, by a curvature of the wavefronts and is therefore not well suited for the synthesis of close sources.

Die bekannten Ansätze zur Modifikation der (wahrgenommenen) Quellendistanz bei Außenohrübertragungsfunktionen lassen sich in drei Klassen einteilen: (1) Gewichtung der Amplitude, (2) Modifikation des Frequenzganges und (3) Extrapolation der gemessenen Daten.
Bei der ersten Klasse wird die jeweilige Außenohrübertragungsfunktion frequenzunabhängig gewichtet um die zunehmende Lautstärke einer Quelle mit abnehmender Distanz zum Zuhörer zu modellieren. Bei diesem Ansatz werden die spektralen Änderungen der Außenohrübertragungsfunktionen, speziell für nahe Quellen, ignoriert.
In der zweiten Klasse von Ansätzen werden genau diese spektralen Änderungen durch geeignete Filter modelliert. So ist zum Beispiel bekannt, dass sehr nahe Quellen eine Anhebung des Frequenzganges bei tiefen Frequenzen verursachen.
Die erste und zweite Klasse beruhen im Allgemeinen auf psychoakustischen Überlegungen, im Gegensatz zur dritten Klasse, der physikalische Überlegungen zugrunde liegen. In dem Kontext dieser Erfindung ist die dritte Klasse von Ansätzen von besonderem Interesse. Aus der zu Grunde liegenden physikalischen Beschreibung der Schallausbreitung ist bekannt, dass der Schalldruck und dessen Gradient auf dem Rand einer Kontur ausreichen, um das Schallfeld innerhalb dieser Kontur eindeutig zu bestimmen. Das Verfahren wird als Extrapolation eines Schallfeldes bezeichnet. Dieses Grundprinzip wurde auf das Problem der Generierung von synthetischen Außenohrübertragungsfunktionen angewendet. Aufgrund der zu Grunde liegenden sphärischen Geometrie ist es dabei vorteilhaft, die Schallfelder bezüglich sogenannter sphärischer Harmonische zu zerlegen. In [8,9] sind zwei Verfahren dargestellt, welche die Extrapolation von gemessenen Außenohrilbertragungsfunktionen von einem gemessenen Abstand auf einen anderen Abstand ermöglichen. Die Verfahren haben drei entscheidende Nachteile: (i) Aufgrund des physikalischen Modells ist der minimale Abstand der virtuellen Quellen durch den Kopf und Oberkörper des Zuhörers begrenzt und (ii) die numerische Komplexität ist relativ hoch und (iii) das Verfahren ist inhärent numerisch instabil. Dies gilt besonders für nahe virtuelle Quellen.The known approaches for modifying the (perceived) source distance in outer ear transmission functions can be divided into three classes: (1) weighting of the amplitude, (2) modification of the frequency response, and (3) extrapolation of the measured data.
In the first class, the respective outer ear transmission function is frequency independent weighted to model the increasing volume of a source with decreasing distance to the listener. In this approach, the spectral changes in the outer ear transfer functions, especially for near sources, are ignored.
In the second class of approaches, exactly these spectral changes are modeled by suitable filters. For example, it is known that very close sources cause an increase in frequency response at low frequencies.
The first and second classes are generally based on psychoacoustic considerations, in contrast to the third class, which are based on physical considerations. In the context of this invention, the third class of approaches is of particular interest. It is known from the underlying physical description of the sound propagation that the sound pressure and its gradient on the edge of a contour are sufficient to unambiguously determine the sound field within this contour. The method is called extrapolation of a sound field. This basic principle has been applied to the problem of generating synthetic outer ear transmission functions. Due to the underlying spherical geometry, it is advantageous to disassemble the sound fields with respect to so-called spherical harmonics. In [8,9] two methods are shown, which allow the extrapolation of measured outer ear transfer functions from one measured distance to another distance. The methods have three major disadvantages: (i) Due to the physical model, the minimum distance of the virtual sources through the head and upper body of the listener is limited and (ii) the numerical complexity is relatively high and (iii) the method is inherently numerically unstable. This is especially true for near virtual sources.

Um das Problem der inhärenten Instabilität bei virtuellen Quellen mit geringem Abstand zu lösen, wurde ein Ansatz in [10] vorgeschlagen. Dieser basiert auf der Verwendung von Multipolmodellen löst das Problem der Komplexität und Instabilität nur teilweise.To solve the problem of inherent instability in virtual sources at close range, an approach was proposed in [10]. This is based on the use of multipole models solves the problem of complexity and instability only partially.

References:

[1] AJ Berkhout, D. de Vries, and P. Vogel. Acoustic control by wave field synthesis. Journal of the Acoustical Society of America, Volume 93 (5): 2764-2778, May 1993 ,
[2] S. Spors, R. Rabenstein, and J. Ahrens. The Theory of Wave Field Synthesis Revisited. In proceedings of 124th Convention of the Audio Engineering Society, May 17-20, Amsterdam, The Netherlands, 2008
[3] J. Daniel, Representation of Acoustics Acoustics, Application for the Transmission and Playback of Matters in Multimedia, PhD thesis, Université Paris 6, 2001
[4] J. Ahrens and S. Spors. Analytical driving functions for higher order Ambisonics. In IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP), Las Vegas, Nevada, March 30th-April 4th, 2008 ,
[5] S. Spors, H. Wierstorf, M. Geier, and J. Ahrens. Physical and perceptual properties of focused sources in wave field synthesis. In 127th AES Convention. Audio Engineering Society (AES), October 2009 ,
[6] S. Spors and J. Ahrens. Local sound reproduction by virtual secondary sources. AES 40th International Conference on Spatial Audio, Tokyo, Japan, October 2010. Audio Engineering Society (AES) ,
[7] J. Ahrens, "The single-layer potential approach applied to sound field synthesis and its extension to non-closing distributions of secondary sources," Ph.D. Dissertation, Technische Universität Berlin, 2010 ,
[8th] R. Duraiswami, D. Zotkin, and N. Gumerov, "Interpolation and Range Extrapolation of Hrtfs," in the IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP), Montreal, Canada, May 2004 ,
[9] W. Zhang, T. Abhayapala, and R. Kennedy, "Modal Expansion of HRTFs: Continuous Representation in Frequency Range Angle," in the IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP), Taipei, Japan, 2009 ,
[10] D. Menzies, "Calculation of near-field head-related transfer functions using point source representations," in Ambisonics Symposium, Graz, Austria, June 2009 ,
[11] M. Noisternig, A. Sontacchi, T. Musil, and R. H¨richrich, "A 3D Ambisonics based binaural sound reproduction system," in AES 24th International Conference on Multichannel Audio. Banff, Canada: Audio Engineering Society (AES), June 2003 ,
[12] J. Ahrens and S. Spors. Implementation of directional sources in wave field synthesis. In IEEE Workshop on Signal Processing to Audio and Acoustics, New Paltz, USA, October 2007 ,

Offenbarung der ErfindungDisclosure of the invention

Es ist daher Aufgabe der Erfindung, ein Verfahren und ein System zur Berechung synthetischer Außenohrübertragungsfunktionen bereitzustellen.It is therefore an object of the invention to provide a method and system for calculating synthetic outer ear transmission functions.

Diese Aufgabe wird durch ein Verfahren und System gemäß den unabhängigen Ansprüchen 1 und 10 gelöst. Die abhängigen Ansprüche 2 bis 9 betreffen besondere Ausführungsformen.This object is achieved by a method and system according to independent claims 1 and 10. The dependent claims 2 to 9 relate to particular embodiments.

Das Konzept der Erfindung betrifft die Nutzung von Verfahren der Schallfeldsynthese zur Berechnung oder Generierung von synthetischen Außenohrübertragungsfunktionen.The concept of the invention relates to the use of methods of sound field synthesis for the calculation or generation of synthetic outer ear transmission functions.

Diese Berechnung erfolgt gemäß einem Aspekt der Erfindung durch Bereitstellen einer Datenbank von Paaren von Außenohrübertragungsfunktionen für eine Vielzahl von ersten Quellenpositionen, wobei jeweils mindestens ein Paar Außenübertragungsfunktion für eine erste Quellenposition durch eine Messung ermittelt wird. Ein jedes dieser Paare von Außenohrübertragungsfunktionen wird als virtueller Lautsprecher an der entsprechenden ersten Quellenposition interpretiert. Unter Verwendung der virtuellen Lautsprecher werden mittels eines Verfahrens der Schallfeldsynthese für mindestens eine virtuelle Schallquelle an einer weiteren Quellenposition mindestens ein Paar von synthetischen Außenohrübertragungsfunktionen berechnet.This calculation is made in accordance with an aspect of the invention by providing a database of pairs of outer ear transmission functions for a plurality of first source positions, each determining at least one pair of outer transmission functions for a first source position by a measurement. Each of these pairs of outer ear transmission functions is interpreted as a virtual speaker at the corresponding first source position. Using the virtual speakers, a method of sound field synthesis for at least one virtual sound source at another source position computes at least one pair of synthetic outer ear transmission functions.

Die virtuellen Lautsprecher lassen sich als Elementarschallquellen zur Generierung eines beliebigen Schallfeldes durch ein Verfahren der Wellenfeldsynthese verwenden. Mittels eines solchen Verfahrens lassen sich die Ansteuersignale für die virtuellen Lautsprecher hinsichtlich Betrag und Phase so berechnen, dass eine gewichtete Superposition des von jedem virtuellen Lautsprecher hervorgerufenen Elementarschallfeldes das gewünschte Schallfeld in seiner Gesamtheit ergibt. Das gewünschte Schallfeld ist hierbei ein Schallfeld, das sich von einer beliebigen virtuellen Schallquelle, die an einem beliebigen Ort im Raum platziert sein kann, ergibt. Dadurch ist es möglich, eine Übertragungsfunktion, welche der Schallausbreitung von einer beliebigen virtuellen Schallquelle entspricht, zu synthetisieren. Es handelt sich mithin um eine synthetische Außenohrübertragungsfunktion. Die Berechnungsmethode lässt sich zur Erstellung einer Datenbank mit apriori berechneten synthetischen Außenohrübertragungsfunktionen für eine Vielzahl von Positionen der virtuellen Schallquelle verwenden. Auf eine solche Datenbank kann zur Modellierung beliebiger Klangwelten zurückgegriffen werden.The virtual speakers can be used as elementary sound sources for generating any sound field by a method of wave field synthesis. By means of such a method, the drive signals for the virtual loudspeakers with respect to magnitude and phase can be calculated such that a weighted superposition of the elementary sound field produced by each virtual loudspeaker yields the desired sound field in its entirety. The desired sound field here is a sound field that results from any virtual sound source that may be placed anywhere in the room. This makes it possible to synthesize a transfer function corresponding to the sound propagation from any virtual sound source. It is therefore a synthetic outer ear transfer function. The calculation method can be used to create a database of afore-calculated synthetic outer ear transmission functions for a variety of positions of the virtual sound source. Such a database can be used to model any sound world.

Gemäß einem weiteren Aspekt der Erfindung wird ein Raummodell bereitgestellt, wobei Ausbreitungswege und ―eigenschaften simuliert werden. Bevorzugt wird mindestens eine Spiegelquelle synthetisiert, die zu einer virtuellen Schallquelle gehört. Dazu kann ein Verfahren zur normalen Schallfeldsynthese eingesetzt werden. Allgemein ist die Berechnung durch virtuelle lokale Schallfeldsynthese oder andere Verfahren der Wellenfeldsynthese durchführbar.According to another aspect of the invention, a space model is provided that simulates propagation paths and properties. Preferably, at least one mirror source is synthesized which belongs to a virtual sound source. For this purpose, a method for normal sound field synthesis can be used. In general, the calculation can be carried out by virtual local sound field synthesis or other wave field synthesis methods.

Ein weiterer Aspekt der Erfindung betrifft ein System zum Durchführen eines Verfahrens für die Berechnung der Generierung synthetischer Außenohrübertragungsfunktionen.Another aspect of the invention relates to a system for performing a method for computing the generation of synthetic outer ear transmission functions.

Außenohrübertragungsfunktionen charakterisieren die Schallausbreitung von der bei der Messung verwendeten Schallquelle zu den Ohren des Zuhörers. Wird jetzt ein gesamter Datensatz von Außenohrübcrtragungsfunktion für eine Vielzahl von möglichen Quellpositionen gemessen, so können diese Quellpositionen als virtuelle Lautsprecher interpretiert werden. Durch die gewichtete Superposition der Lautsprechersignale kann dann der Einfluss des gesamten Ensembles dieser virtuellen Lautsprecher am Ohr des Zuhörers simuliert werden. Steuert man nun diese virtuellen Lautsprecher mit einem Verfahren der Schallfeldsynthese an, so können die Ohrsignale für nahezu beliebige virtuelle Quellenpositionen synthetisiert werden. Kopfdrehungen können durch das dynamische Austauschen der verwendeten Außenohrübertragungsfunktionen berücksichtigt werden.External ear transmission functions characterize the sound propagation from the sound source used in the measurement to the ears of the listener. If an entire data set of outer ear transfer function is now measured for a multiplicity of possible source positions, these source positions can be interpreted as virtual loudspeakers. The weighted superposition of the loudspeaker signals then simulates the influence of the entire ensemble of these virtual loudspeakers on the ear of the listener. If one now controls these virtual speakers with a method of sound field synthesis, the ear signals can be synthesized for virtually any virtual source positions. Head turns can be accounted for by dynamically exchanging the outer ear transfer functions used.

Mit diesem erfindungsgemäßen Verfahren lassen sich Außenohrübertragungsfunktionen inter-und extrapolieren und Datensätze von synthetischen Außenohrübertragungsfunktionen können mit anderen Distanzen der Quelle als denen bei der Messung vorliegenden bereitgestellt werden. Zusätzlich lassen sich die synthetischen Außenohrübertragungsfunktionen für komplexe Quellenmodelle aus Messungen einfacher Quellen berechnen.With this inventive method, outer ear transmission functions can be interpolated and extrapolated, and data sets of synthetic outer ear transmission functions can be provided at different distances from the source than those present in the measurement. In addition, the synthetic outer ear transfer functions for complex source models can be calculated from simple source measurements.

Kurzbesehreibung der FigurenBrief description of the figures

Das Verfahren und das zugeordnete System der Erfindung werden detaillierter im Folgenden anhand von Ausführungsbeispielen und den Zeichnungen beschrieben.The method and the associated system of the invention will be described in more detail below with reference to exemplary embodiments and the drawings.

Es zeigen:

Figur 1 eine schematische Darstellung für die Messung einer linken/rechten Außenohrübertragungsfunktion und Nutzung dieser für die virtuelle Akustik,
Figur 2 einen schematischen Aufbau für die Beschreibung des Wirkprinzips eines Verfahrens der Schallfeldsynthese für die Generierung synthetischer Außenohrübertragungsfunktionen einer Ausführungsform,
Figur 3 ein Blockschaltbild einer Ausführungsform eines Systems für die Berechung synthetischer Außenohrübertragungsfunktionen mittels der lokalen Wellenfeldsynthese einer Ausführungsform,
Figur 4 ein Diagramm mit einen gemessenen Datensatz von linken Außenohrübertragungsfunktionen,
Figur 5 ein Diagramm mit einer Datenbank von synthetischen linken Außenohrübertragungsfunktionen, welche durch Wellenfeldsynthese berechnet wurden, und
Figur 6 ein Diagramm mit einer Datenbank von synthetischen linken Außenohrübertragungsfunktionen, welche durch lokale Wellenfeldsynthese berechnet wurden.

Show it:

FIG. 1 a schematic representation for the measurement of a left / right outer ear transmission function and use of this for the virtual acoustics,
FIG. 2 1 shows a schematic structure for the description of the operating principle of a method of sound field synthesis for the generation of synthetic outer ear transmission functions of an embodiment,
FIG. 3 3 is a block diagram of an embodiment of a system for calculating synthetic outer ear transmission functions by means of the local wave field synthesis of an embodiment,
FIG. 4 a diagram with a measured data set of left outer ear transmission functions,
FIG. 5 a diagram with a database of synthetic left outer ear transfer functions, which were calculated by wave field synthesis, and
FIG. 6 a diagram with a database of synthetic left outer ear transfer functions, which were calculated by local wave field synthesis.

Detaillierte Beschreibung der AusführungsformenDetailed description of the embodiments

In Figur 1 ist eine schematische Darstellung für die Messung einer linken bzw. rechten Außenohrübertragungsfunktion gezeigt (linke Hälfte von Figur 1) und ein Blockschaltbild für die Nutzung dieser Außenohrübertragungsfunktionen für die virtuelle Akustik (rechte Hälfte von Figur 1). Wie schematisch in der linken Hälfte von Figur 1 dargestellt, wird zur Messung der Außenohrübertragungsfunktionen ein Lautsprecher, der an einer bestimmten Quellenposition angeordnet ist, verwendet, wobei dieser Lautsprecher ein Quellsignal x(t) ausstrahlt. Die sich ausbreitenden Schallwellen sind schematisch dargestellt und erreichen das linke bzw. rechte Ohr eines Hörers, der in dem Raum in einer bestimmten relativen Position zu dem Lautsprecher positioniert ist. Die relative Position kann beschrieben werden durch einen bestimmten Abstand zwischen Lautsprecher und Position des Hörers und einer bestimmten Richtung bezogen auf ein Raumkoordinatensystem. Zudem kann die relative Position Informationen über die Drehposition des Kopfes des Hörers relativ zu dem Raumkoordinatensystem umfassen. Bei der Messung werden Mikrofone eingesetzt, die an der Position des linken Ohrs bzw. rechten Ohrs des Hörers angeordnet werden. Dabei wird das mit dem Mikrofon an der Position des linken Ohrs erfasste Signal X_L(t) bestimmt durch eine Übertragungsfunktion h_L(t). In gleicher Weise wird das mit dem rechten Mikrofon an der Position des rechten Ohres des Hörers aufgenommene Signal X_R(t) bestimmt durch die Übertragungsfunktion h_R(t).In FIG. 1 is a schematic representation for the measurement of a left and right outer ear transfer function shown (left half of FIG. 1 ) and a block diagram for the use of these outer ear transfer functions for virtual acoustics (right half of FIG. 1 ). As shown schematically in the left half of FIG. 1 For the measurement of the outer ear transmission functions, a loudspeaker located at a certain source position is used, this loudspeaker emitting a source signal x (t). The propagating sound waves are shown schematically and reach the left and right ear of a listener, which is positioned in the room in a certain relative position to the speaker. The relative position can be described by a specific distance between the loudspeaker and the position of the listener and a specific direction with respect to a spatial coordinate system. In addition, the relative Position information about the rotational position of the head of the listener relative to the spatial coordinate system include. The measurement uses microphones that are placed at the left ear or right ear position of the listener. In this case, the signal X _L (t) detected by the microphone at the position of the left ear is determined by a transfer function h _L (t). In the same way, the signal X _R (t) recorded with the right microphone at the position of the right ear of the listener is determined by the transfer function h _R (t).

Diese Messung kann für eine Vielzahl von ersten Quellenpositionen durchgeführt werden. Beispielsweise kann ein Lautsprecher an ersten Quellenpositionen auf einer kreisförmigen Kontur 7 wie in Figur 2 gezeigt angeordnet werden. Dazu wird der Lautsprecher nacheinander an jeder der ersten Quellenpositionen angeordnet und die Messung durchgeführt und die jeweiligen Übertragungsfunktionen werden mit den Angaben über die jeweilige Quellenposition und die Drehposition des Kopfes in einer Datenbank gespeichert. Alternativ kann zum Bestimmen der Übertragungsfunktionen eine Vielzahl von Lautsprechern eingesetzt werden, die in einem Raum an jeweils zugehörigen ersten Quellenpositionen angeordnet sind. Dabei können die einzelnen Lautsprecher nacheinander betrieben werden und das jeweilige Quellsignal x(t) abgegeben und per Schallausbreitung zu dem im Raum vorhandenen Hörer ausgesendet werden.This measurement can be performed for a variety of first source positions. For example, a speaker at first source positions on a circular contour 7 as in FIG. 2 be arranged shown. For this purpose, the loudspeaker is successively arranged at each of the first source positions and the measurement is carried out and the respective transfer functions are stored with the information about the respective source position and the rotational position of the head in a database. Alternatively, to determine the transfer functions, a plurality of loudspeakers arranged in a space at respectively associated first source positions may be employed. In this case, the individual loudspeakers can be operated in succession and the respective source signal x (t) can be emitted and transmitted by sound propagation to the handset present in the room.

Die für die Berechnung von synthetischen Außenohrübertragungsfunktionen verwendeten gemessenen Außenohrübertragungsfunktionen von ersten Quellpositionen werden in einer Datenbank bereitgestellt. In der rechten Hälfte von Figur 1 ist das Prinzip zur Verwendung von Außenohrübertragungsfunktionen in der virtuellen Akustik gezeigt. Bei der binauralen Wiedergabe können virtuelle Schallquellen durch die Filterung eines Quellsignals x(t) mit der linken/rechten Außenohrübertragungsfunktion (H_L(ω) und H_R(ω) und Darbietung der gefilterten Signale mittels Kopfhörer erzeugt werden. Im Einzelnen wird ein Eingangssignal x(t), das einem bestimmten Quellsignal entspricht, über zwei Fütereinrichtungen an die beiden Lautsprecher eines Kopfhörers geleitet. Abhängig von der Position der virtuellen Quelle und der Position des Kopfes des Hörers werden die entsprechenden Außenohrübertragungsfünktionen von einer HRTF-Datenbank an die Filtereinrichtungen für das linke Ohr und das rechte Ohr übertragen. Im Einzelnen wird die Filtereinrichtung für das linke Ohr so eingerichtet, dass sie die Übertragungsfunktionen H_L(ω) für das linke Ohr nachbildet. In gleicher Weise wird die Filtereinrichtung für das rechte Ohr entsprechend der Außenohrübertragungsfunktionen für das rechte Ohr H_R(ω) eingerichtet. Das Eingangssignal wird mit der linken/rechten Filtereinrihtung gefiltert und an den linken/rechten Lautsprecher des Kopfhörers geleitet.The measured outer ear transmission functions from first source positions used for the calculation of synthetic outer ear transmission functions are provided in a database. In the right half of FIG. 1 the principle for using outer ear transmission functions in virtual acoustics is shown. In binaural reproduction, virtual sound sources can be generated by filtering a source signal x (t) with the left / right outer ear transfer function (H _L (ω) and H _R (ω) and presentation of the filtered signals by headphones.) In detail, an input signal x Depending on the position of the virtual source and the position of the head of the listener, the corresponding outer ear transmission functions are transferred from one HRTF database to the filter devices for the left one (s) corresponding to a particular source signal via two feeders More specifically, the left-ear filter device is adapted to emulate the left-ear transmission functions H _L (ω). Similarly, the right-ear filter device is adapted to the right ear External ear transmission functions for the right ear H _R (ω) established. The input signal is filtered with the left / right filter unit and directed to the left / right speaker of the headphone.

Eine Ausführungsform zur Berechnung von synthetischen Außenohrübertragungsfunktionen ist in Figur 2 dargestellt. Aus dem Signal 1 einer virtuellen Schallquelle 8 werden durch einen Algorithmus der Schallfeldsynthese 2 vorzugsweise einer lokalen Schallfeldsynthese Ansteuersignale 5 für die Wiedergabe der virtuellen Schallquelle 8 durch die virtuellen Lautsprecher 6 im lokalen Bereich berechnet. Die virtuellen Lautsprecher 6 sind in diesem Beispiel auf einer kreisförmigen Kontur 7 angeordnet, wobei alle Lautsprecher in die Mitte eines Kreises gerichtet sind, wo schematisch ein lokaler Bereich 14 in der Mitte dargestellt ist. In dem lokalen Bereich 14 befindet sich ein Zuhörer. Für den Algorithmus der Schallfeldsynthese werden zum Beispiel der Quellentyp 3 und die Quellenposition 4 und gegebenenfalls die Position des lokalen Bereichs 14 als zusätzliche Information verwendet. Die Schallausbreitung von einem virtuellen Lautsprecher 8 zu den. Ohren ist durch eine linke/rechte Außenohrübertragungsfunktion 10, 11 charakterisiert. Datenbanken von Außenohrübertragungsfunktion werden typischerweise auf kreis-/kugelfönnigen Konturen 7 gemessen. Das linke/rechte Ohrsignal für die virtuelle Schallquelle 8 wird durch die Superposition aller virtueller Lautsprechersignale 5, die mit den jeweiligen Außenohrübertragungsfunktion 12, 13 gefiltert worden sind, gewonnen. Kopfdrehungen und Positionsänderungen des Zuhörers können durch den dynamischen Austausch der Außenohrübertragungsfunktionen 12, 13 berücksichtigt werden.One embodiment for calculating synthetic outer ear transmission functions is in FIG FIG. 2 shown. From the signal 1 of a virtual sound source 8, control signals 5 for the reproduction of the virtual sound source 8 by the virtual loudspeakers 6 in the local area are calculated by an algorithm of the sound field synthesis 2, preferably a local sound field synthesis. The virtual speakers 6 are arranged in this example on a circular contour 7, wherein all speakers are directed in the middle of a circle, where schematically a local area 14 is shown in the middle. In the local area 14 is a listener. For the sound field synthesis algorithm, for example, the source type 3 and the source position 4 and, if necessary, the position of the local area 14 are used as additional information. The sound propagation from a virtual speaker 8 to the. Ears are characterized by a left / right outer ear transmission function 10,11. External ear transfer function databases are typically measured on circular / spherical contours 7. The left / right ear signal for the virtual sound source 8 is obtained by the superposition of all the virtual speaker signals 5 filtered with the respective outer ear transmission function 12, 13. Head turns and position changes of the listener may be accounted for by the dynamic replacement of the outer ear transmission functions 12, 13.

Mit dem beschriebenen Verfahren können auch Datenbanken von synthetischen Außenohrübertragungsfunktionen berechnet werden. Dazu wird als Quellsignal 1 einer virtuellen Quelle ein Impuls genommen und die gesamte Inpulsantwort von der virtuellen Schallquelle 8 zu den Ohren berechnet. Durch Variation der Quellenposition, z.B. auf einer kreis- bzw. kugelförmigen Kontur 9 kann ein synthetischer Datensatz von Außenohrübertragungsfunktionen berechnet werden.With the described method, databases of synthetic outer ear transmission functions can also be calculated. For this purpose, an impulse is taken as the source signal 1 of a virtual source and the total impulse response is calculated from the virtual sound source 8 to the ears. By varying the source position, e.g. on a circular or spherical contour 9, a synthetic data set of outer ear transmission functions can be calculated.

Prinzipiell geeignete Verfahren der Schallfeldsynthese sind, aufgrund der zugrundeliegenden zirkulären/sphärischen Geometrie gemessener Außenohrübertragungsfunktionen, zum Beispiel die Wellenfeldsynthese und Ambisonics höherer Ordnung. In ihrer theoretischen Grundlage gehen beide Verfahren von eine räumlich kontinuierlichen Verteilung von Lautsprechern (Sekundärquellen) aus. In der Praxis sind die Außenohrdbertragungsfunktionen allerdings nur an räumlich diskreten Positionen verfügbar. Dies führt zu Artefakten in den synthetisierten Ohrsignalen bzw. den synthetisierten Außenohrübertragungsfünktionen aufgrund der räumlichen Diskretisierung. Dies ist selbst dann der Fall wenn die Außenohrübertragungsfunctionen relativ fein abgetastet werden. Zum Beispiel treten in einer synthetischen Außenohrübertragungsfunktion ab einer Frequenz von ca. 10 kHz Artefakte auf, wenn die verwendeten Außenobrübertragungsfünktionen in 1 Grad Schritten bei einer Distanz der bei der Messung verwendeten Quelle von 2-3 Meter gemessen wurden. Dies wird nachstehend anhand von Figur 5 näher erläutert.In principle, suitable methods of sound field synthesis are, based on the underlying circular / spherical geometry of measured outer ear transmission functions, for example wave field synthesis and ambisonics of higher order. In their theoretical basis, both methods assume a spatially continuous distribution of Speakers (secondary sources) off. However, in practice, the outer ear transfer functions are only available at spatially discrete positions. This leads to artifacts in the synthesized ear signals and the synthesized outer ear transmission functions due to spatial discretization. This is the case even if the outer ear transmission functions are relatively finely scanned. For example, artifacts occur in a synthetic outer ear transmission function from a frequency of about 10 kHz when the used external transmission functions were measured in 1 degree increments at a distance of the source used in the measurement of 2-3 meters. This will be explained below with reference to FIG. 5 explained in more detail.

Eine Ausführungsform der Erfindung basiert auf Verwendung der lokalen Schallfeldsynthese zur Berechnung synthetischer Ohrsignale bzw. Außenohrübertraguugsfunktionen, um die Artefakte der räumlichen Diskretisierung zu vermeiden bzw. zu verringern. Durch die lokale Schallfeldsynthese kann ein Bereich höherer Genauigkeit um den Kopf des Zuhörers gelegt werden. Dadurch werden werde die Artefakte verringert und bessere Ergebnisse erzielt. Dies wird nachstehend anhand von Figur 6 erläutert.One embodiment of the invention is based on the use of local sound field synthesis for the calculation of synthetic ear signals or outer ear transmission functions in order to avoid or reduce the artifacts of spatial discretization. Local sound field synthesis allows a region of higher accuracy to be placed around the listener's head. This will reduce artifacts for better results. This will be explained below with reference to FIG. 6 explained.

Prinzipiell kann jeder Algorithmus zur lokalen Schallfeldsynthese genutzt werden, so finden in verschiedenen bevorzugten Ausfühmngsformen die in EP 2182744 , [6] und [7] beschriebenen Algorithmen Anwendung. In weiteren bevorzugten Ausführungsformen werden die in EP 2182744 und [6] beschriebenen Algorithmen zur lokalen Schallfeldsynthese verwendet. Diese sind aufgrund der zugrundeliegenden Geometrie typischer Datensätze von Außenohrübertragungsfunktionen vorteilhaft.In principle, any algorithm can be used for local sound field synthesis, as found in various preferred Ausfühmngsformen in EP 2182744 , [6] and [7] algorithms described application. In further preferred embodiments, the in EP 2182744 and [6] described algorithms for local sound field synthesis. These are advantageous because of the underlying geometry of typical data sets of outer ear transmission functions.

Aufgrund einer typischerweise kleinen Apertur von beispielsweise etwa 20 cm der lokalen Zone 14 ist es nicht erforderlich, ein Verfahren zur lokalen Schaltfeldsynthese wie es in EP 2182744 und [6] beschrieben ist, zu verwenden. In einer Ausführungsform werden daher für tiefe Frequenzen normale Verfahren anstatt lokale Verfahren zur Schallfeldsynthese verwendet, da hier die typische räumliche Abtastung im Allgemeinen ausreichend ist. Das Überblenden zwischen den beiden Verfahren geschieht vorzugsweise durch eine Fensterfunktion im Frequenzbereich.Due to a typically small aperture of, for example, about 20 cm of the local zone 14, it is not necessary to have a method for local switching field synthesis as described in US Pat EP 2182744 and [6] is described. In one embodiment, therefore, normal methods are used for low frequencies rather than local methods for sound field synthesis, since the typical spatial sampling is generally sufficient here. The crossfading between the two methods is preferably done by a window function in the frequency domain.

In einer Ausführungsform wird durch das Nachführen der virtuellen Quellposition mit der Kopfposition des Zuhörers eine dynamische binaurale Synthese, die Kopforientierung und - position berücksichtigt, realisiert. Das dynamische Nachführen ist für die Qualität virtueller akustischer Umgebungen ein entscheidender Faktor. Der Vorteil dieser Ausführungsform liegt in einer effizienten Berücksichtigung der Hörerposition im Vergleich zu Lösungen, wo lediglich die Orientierung des Kopfes berücksichtigt wird. Für eine Berücksichtigung der Kopfposition wäre eine Datenbank von Außenohrübertragungsfunktionen nötig, die für viele nahe beieinander liegende Quellenpositionen gemessen wurde.In one embodiment, by tracking the virtual source position with the listener's head position, a dynamic binaural synthesis, head orientation, and taken into account, realized. Dynamic tracking is a key factor in the quality of virtual acoustic environments. The advantage of this embodiment lies in an efficient consideration of the listener position compared to solutions, where only the orientation of the head is taken into account. Considering the head position would require a database of outer ear transmission functions measured for many nearby source locations.

Das Verfahren kann durch die Simulation eines Raummodells ergänzt werden. Zum Beispiel können die zur virtuellen Quelle gehörigen Spiegelquellen mit hoher Auflösung durch Verwendung der lokalen Schallfeldsynthese synthetisiert werden. Die vorliegende Erfindung ermöglicht eine effiziente Berücksichtigung der Hörerposition.The method can be supplemented by the simulation of a room model. For example, the high resolution mirror sources associated with the virtual source may be synthesized using local sound field synthesis. The present invention enables efficient consideration of the listener position.

In einer Ausführungsform wird die virtuelle Quelle neben dem typischen Punktquellenmodell auch als Quelle mit komplexer Richtcharakteristik modelliert, vorzugsweise mit dem in [12] beschriebenen Verfahren. Auch hier bietet die Kombination mit der lokalen Schallfeldsynthese einen wesentlichen Vorteil, da die gewünschte Richtcharakteristik nicht durch die Artefakte der räumlichen Abtastung verfälscht wird.In one embodiment, in addition to the typical point source model, the virtual source is also modeled as a complex directional source, preferably with the method described in [12]. Again, the combination with the local sound field synthesis offers a significant advantage, since the desired directional characteristic is not distorted by the artifacts of the spatial sampling.

Eine bevorzugte Ausführungsform beinhaltet inhärent eine Interpolation der Außenohrübertragungsfunktionen bezüglich des Winkels. Die Position der virtuellen Quelle kann bezüglich der Winkelauflösung beliebig gewählt werden. Dies ermöglicht eine Interpolation eines gemessenen Datensatzes.A preferred embodiment inherently involves interpolation of the outer ear transmission functions with respect to the angle. The position of the virtual source can be arbitrarily selected with respect to the angular resolution. This allows interpolation of a measured data set.

In einer Ausführungsform wird der verwendete Datensatz von Außenohrübertragungsfunktionen nicht lediglich auf einer zirkulären oder sphärischen Kontur, sondern auf einer Kontur beliebiger Gestalt gemessen. Der Vorteil dieser Ausführungsform ist die effiziente Messung von Außenohmbertragungsfünktionen ohne geometrische Einschränkungen.In one embodiment, the data set of outer ear transfer functions used is measured not only on a circular or spherical contour, but on a contour of any shape. The advantage of this embodiment is the efficient measurement of outer ohm transfer functions without geometric constraints.

Ein weiteres Ausführungsbeispiel wird anhand von Figur 3 beschrieben. Es betrifft die Anwendung der lokalen Wellenfeldsynthese zur Berechnung einer Datenbank von synthetischen Außenohrübertragungsfunktionen aus einer Datenbank gemessener Außenohrübertragungsmnktionen. Die lokale Wellenfeldsynthese erlaubt dabei eine besonders effiziente Realisierung, da die Ansteuerungssignale der virtuellen Lautsprecher durch einfache Gewichtung und Verzögerung des Signals der virtuellen Quelle gewonnen werden können. Figur 3 illustriert die Verarbeitungsschritte. Aus dem Quellensignal 31, welches im Allgemeinen für die Berechnung synthetischer Außenohrübertragungsfunktionen ein Dirac Puls ist, werden mittels der Wellenfeldsynthese 35 Signale 44 für die virtuellen Sekundärquellen generiert. Als Zusatzinfonnationen werden dazu das Quellenmodell 32, die Positionen 33 und Abstrahlrichtungen 34 der virtuellen Sekundärquellen verwendet. Die virtuellen Sekundärquellen werden durch fokussierte Quellen wieder durch die Wellenfeldsynthese realisiert. Dazu werden für jedes der Signale 44 durch akustische Fokussierung 40 die Signale 45 für die Sekundärquellen berechnet. Verwendet werden dazu die Positionen 36 und Abstrahlrichtungen 37 der virtuellen Sekundärquellen, sowie die Positionen 38 und Abstrahlrichtungen 39 der Sekundärquellen. Die Signale der Sekundärquellen 45 werden dann mit dem Datensatz der Außenohrübertragungsfunktionen 41 gefiltert und dann aufsummiert. Das wird jeweils mit den linken/rechten Außenohrübertragungsfunktionen getrennt durchgeführt und resultiert dann in der linken/rechten synthetischen Außenohrübertragungsfunktion 42/43. Durch Variation der Position der virtuellen Quelle in 35 kann ein Datensatz von Außenohrübertragungsfunktionen berechnet werden.Another embodiment is based on FIG. 3 described. It concerns the application of local wave field synthesis to compute a database of synthetic outer ear transmission functions from a database of measured outer ear transmission functions. The local wave field synthesis thereby allows a particularly efficient realization, since the drive signals of the virtual loudspeakers can be obtained by simple weighting and delay of the signal of the virtual source. FIG. 3 illustrates the processing steps. From the source signal 31, which is generally a Dirac pulse for the calculation of synthetic outer ear transmission functions, 35 signals 44 for the virtual secondary sources are generated by wave field synthesis. As additional information, the source model 32, the positions 33 and emission directions 34 of the virtual secondary sources are used for this purpose. The virtual secondary sources are realized by focused sources again by the wave field synthesis. For this purpose, the signals 45 for the secondary sources are calculated for each of the signals 44 by means of acoustic focusing 40. For this purpose, the positions 36 and emission directions 37 of the virtual secondary sources, as well as the positions 38 and emission directions 39 of the secondary sources are used. The signals from the secondary sources 45 are then filtered with the data set of the outer ear transfer functions 41 and then summed up. This is done separately with the left / right outer ear transfer functions and then results in the left / right synthetic outer ear transfer function 42/43. By varying the position of the virtual source in FIG. 35, a data set of outer ear transmission functions can be calculated.

In Figur 4 ist ein Diagramm gezeigt, das einem gemessenen Datensatz von linken Außenohrübertragungsfunktionen entspricht. Bei der Messung hatte die Schallquelle einen Abstand von 2,5 m und es wurden 288 Winkelschritte auf einem Vollkreis gemessen. Dargestellt ist die gemessene kopfbezogene Übertragungsfunktion (HRTF, head related transfer function). Entlang der Abszisse ist der Winkel in Grad aufgetragen. Entlang der Ordinate ist die Zeit in Sekunden aufgetragen.In FIG. 4 a diagram is shown corresponding to a measured set of left outer ear transfer functions. For the measurement, the sound source had a distance of 2.5 m and 288 angular steps were measured on a full circle. Shown is the measured head related transfer function (HRTF). Along the abscissa the angle is plotted in degrees. Along the ordinate, the time is plotted in seconds.

Figur 5 zeigt ein Diagramm, das der Datenbank von synthetischen linken Außenohrübertragungsfunktionen entspricht, welche durch Wellenfeldsynthese berechnet wurden. Dargestellt ist die berechnete binaurale Raumimpulsantwort (BRIR, binaural room impuls response). An der Abszisse ist der Winkel in Grad und an der Ordinate ist die Zeit in Sekunden aufgetragen. Die Berechnung mittels der Wellenfeldsynthese erfolgte für einen Abstand der virtuellen Quelle von drei Metern von dem Zuhörer. Die durch Anwendung der Wellenfeldsynthese zur Berechnung eines Datensatzes von synthetischen Außenohrübertragungsfunktionen gezeigten Ergebnisse sind hier dargestellt. Die Artefakte der räumlichen Abtastung sind deutlich sichtbar als zusätzliche Wellenfronten nach der ersten Wellenfront. FIG. 5 Figure 12 is a diagram corresponding to the database of synthetic left outer ear transfer functions calculated by wave field synthesis. Shown is the calculated binaural room impulse response (BRIR, binaural room impulse response). The abscissa represents the angle in degrees and the ordinate the time in seconds. The calculation by wave field synthesis was made for a distance of the virtual source of three meters from the listener. The results shown by using Wave Field Synthesis to compute a data set of synthetic outer ear transmission functions are shown here. The spatial sampling artifacts are clearly visible as extra wavefronts after the first wavefront.

Figur 6 zeigt ein Diagramm mit einer Datenbank von synthetischen linken Außenohräbertragungsfunktionen, welche durch lokale Wellenfeldsynthese berechnet wurden. Auch hier erfolgte die Berechnung für einen Abstand der virtuellen Quelle von drei Metern. Figur 6 zeigt somit die gleiche Situation wie Figur 5, allerdings wurde hier die lokale Wellenfeldsynthese zur Berechnung der synthetischen Außenohrübertragungsfunktionen verwendet. Die Zone mit erhöhter Genauigkeit wurde als ein Kreis mit einem Radius von 30 cm um den Kopf gewählt. Es ist deutlich zu erkennen, dass die Artefakte der räumlichen Abtastung im Vergleich zur Figur 5 nicht mehr vorhanden sind bzw. deutlich verringert sind. FIG. 6 shows a diagram with a database of synthetic left outer ear transmission functions, which were calculated by local wave field synthesis. Again, the calculation was made for a distance of the virtual source of three meters. FIG. 6 thus shows the same situation as FIG. 5 however, local wave field synthesis was used to calculate the synthetic outer ear transmission functions. The zone of increased accuracy was chosen as a circle with a radius of 30 cm around the head. It can be clearly seen that the artifacts of spatial scanning compared to FIG. 5 are no longer available or are significantly reduced.

Die Erfindung wurde anhand von Beispielen und der Figuren näher erläutert, wobei diese Darstellung die Erfindung nicht einschränken soll. Es versteht sich, dass Fachleute Änderungen und Abwandlungen machen können, ohne den Umfang der folgenden Ansprüche zu verlassen. Insbesondere umfasst die Erfindung Ausführungsformen mit jeglicher Kombination von Merkmalen der verschiedenen Ausführungsformen, die hier beschrieben sind.The invention has been explained in more detail with reference to examples and the figures, this representation is not intended to limit the invention. It is understood that those skilled in the art can make changes and modifications without departing from the scope of the following claims. In particular, the invention includes embodiments with any combination of features of the various embodiments described herein.

Claims

Method of calculating synthetic outer ear transmission functions, comprising the following steps: a) providing a database of pairs of outer ear transmission functions for a plurality of first source positions, each having at least one pair of outer ear transmission functions for a first source position determined by a measurement,

b) interpreting each pair of the outer ear transmission functions as a respective virtual loudspeaker located at the respective first source position,

c) calculating at least one pair of synthetic outer ear transmission functions for at least one virtual sound source at a further source position using the virtual speakers by a method of sound field synthesis.

The method of claim 1, wherein the at least one pair of synthetic outer ear transmission functions are calculated for a plurality of further source positions and are preferably stored in at least one further database of pairs of synthetic outer ear transmission functions.

The method of claim 1 or 2, wherein the respective at least one pair of synthetic outer ear transmission functions are calculated by weighted superposition of all virtual loudspeaker signals from the virtual loudspeakers filtered with the respective measured pairs of outer ear transmission functions, preferably one source type and / or one Source position to be considered.

The method of any one of claims 1 to 3, wherein the plurality of first source locations at which each of the at least one pair of outer tube transfer functions is measured are disposed on a first circular contour or a first spherical contour, and
wherein the plurality of further source positions at which the respective at least one pair of synthetic outer ear transfer functions is calculated are arranged on a further circular contour or spherical contour, wherein the further circular contour or spherical contour is preferably different from the first one circular contour or the first spherical contour, and particularly preferably a first distance from the position of a listener to the first circular contour or first spherical contour is different from a further distance from the position of the listener to another circular contour or other spherical contour.

The method of claim 4, wherein each of at least one pair of synthetic outer ear transmission functions is calculated depending on the position of the listener and / or dependent on a head rotation of the listener, preferably in response to a change in position of the listener and / or head rotation of the listener External ear transfer functions are exchanged dynamically.

Method according to one of claims 1 to 5, with the further steps: Calculating at least one pair of synthetic outer ear transmission functions for low frequency sound signals by a normal sound field synthesis method and method

Calculating at least one pair of synthetic outer ear transmission functions for sound signals having frequencies different from the low frequencies by means of local sound field synthesis methods, wherein

Preferably, a crossfading between the normal method for sound field synthesis and the method for local sound field synthesis by means of a window function in the frequency domain.

A method according to any one of claims 1 to 6, wherein as a source signal for a virtual sound source at the further source position a pulse is used and the respective total impulse response is calculated from the virtual sound source to a left and right ear of a listener and stored as a pair of synthetic outer ear transmission functions become.

Method according to one of claims 1 to 7, wherein as a virtual sound source, a point source is modeled or preferably as a virtual sound source, a source with complex directional pattern is modeled.

Method according to one of claims 1 to 8, with the further steps: Providing a spatial model simulating propagation paths and propagation characteristics of sound signals within the spatial model and preferably synthesizing at least one mirror source associated with a virtual sound source by a normal sound field synthesis method or a local sound field synthesis method.

A system, in particular for carrying out a method for calculating synthetic outer ear transmission functions according to one of claims 1 to 9, comprising: a) database of pairs of outer ear transmission functions for a plurality of first source positions, each having at least one pair of outer ear transmission functions for a first source position determined by a measurement,

b) virtual loudspeakers, preferably in the form of filter banks, arranged at the respective first source position, which concretize as a result of an interpretation of each pair of outer ear transmission functions,

c) calculating means, preferably in the form of microprocessors, for calculating at least one pair of synthetic outer ear transmission functions for at least one virtual sound source at a further source position using the virtual loudspeakers by a sound field synthesis method.