EP1143416A2 - Geräuschunterdrückung im Zeitbereich - Google Patents

Geräuschunterdrückung im Zeitbereich Download PDF

Info

Publication number
EP1143416A2
EP1143416A2 EP01440083A EP01440083A EP1143416A2 EP 1143416 A2 EP1143416 A2 EP 1143416A2 EP 01440083 A EP01440083 A EP 01440083A EP 01440083 A EP01440083 A EP 01440083A EP 1143416 A2 EP1143416 A2 EP 1143416A2
Authority
EP
European Patent Office
Prior art keywords
signal
frequency
noise
frequency spectrum
noise signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP01440083A
Other languages
English (en)
French (fr)
Other versions
EP1143416B1 (de
EP1143416A3 (de
Inventor
Michael Walker
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alcatel CIT SA
Alcatel Lucent SAS
Original Assignee
Alcatel CIT SA
Alcatel SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alcatel CIT SA, Alcatel SA filed Critical Alcatel CIT SA
Publication of EP1143416A2 publication Critical patent/EP1143416A2/de
Publication of EP1143416A3 publication Critical patent/EP1143416A3/de
Application granted granted Critical
Publication of EP1143416B1 publication Critical patent/EP1143416B1/de
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02168—Noise filtering characterised by the method used for estimating noise the estimation exclusively taking place during speech pauses

Definitions

  • a known method for noise reduction is the so-called “spectral Subtraction”, for example in the publication”
  • a new approach to noise reduction based on auditory masking effects "by S. Gustafsson and P. Jax, ITG conference, Dresden, 1998. It is about a spectral noise reduction method in which an acoustic Masking threshold (e.g. according to the MPEG standard) is taken into account.
  • Noise problems in newer applications are particularly severe of communication systems such as cell phones which the end devices are designed so small that an immediate spatial proximity between loudspeaker and microphone cannot be avoided is. Because of the direct sound transmission, especially through structure-borne noise The acoustic interference signal can be between the loudspeaker and the microphone come in the same order of magnitude as the speaker's useful signal on respective terminal or even exceed in amplitude. Such a thing Noise problem also occurs with several spatially adjacent Devices, for example in an office or conference room with many Telephone connections to a not inconsiderable extent, since a coupling of every loudspeaker signal on every microphone.
  • interference signals like unwanted background noise (Street noise, factory noise, office noise, canteen noise, aircraft noise etc.) or completely suppress.
  • the Compander thus consists of two sub-functions, a compressor for Speech signal levels that are greater than or equal to a normal level and one Expander for signal levels that are lower than the normal level.
  • the spectral subtraction mentioned above is used for this purpose first measured the noise during the pauses in the speech and in the form of a Power density spectrum continuously stored in a memory.
  • the power density spectrum is obtained via a Fourier transformation.
  • the stored noise spectrum is "the best current estimate "subtracted from the current disturbed speech spectrum, then transformed back into the time domain to create a Get noise reduction for the disturbed signal.
  • a disadvantage of such methods is the complex determination of these acoustic Concealment threshold and the execution of all with this procedure associated arithmetic operations.
  • Another disadvantage of spectral subtraction consists in the fact that the process is fundamentally not exact spectral noise estimation and subsequent subtraction also errors in the Output signal occur that make themselves felt as "musical tones”.
  • a spectral acoustic masking threshold R T (f) for the human ear is then calculated using, for example, the rules from the MPEG standard.
  • a filter pass curve H (f) is calculated according to a simple rule, which is designed in such a way that essential spectral parts of the speech are passed through as unchanged as possible and spectral parts of the noise are reduced as much as possible.
  • the object of the present invention is to develop a method as far as possible to introduce less complexity with the features described at the beginning, in which a noise reduction in a technically uncomplicated manner or noise suppression is achieved, and at which the original signal remains intact until the actual noise is extracted.
  • the procedure should be simple, especially with less computation than previously possible, one for the human ear if possible to create a pleasant overall acoustic impression, depending on your taste can be adapted to individual needs.
  • the new method is completely independent of the requirements for speech signal processing can be carried out and thus a simple optimization to the requirements of spectral processing of noise signals enable.
  • the method according to the invention enables the separate replication of the noise signal in the frequency domain regardless of processing a direct deduction of the simulated one from the original speech signal Noise signal from the original, unadulterated input signal, which neither a Fourier transform nor an inverse Fourier transform is subjected. With a corresponding phase correction in the frequency domain is even a noise subtraction from the original signal with no time delay possible.
  • the method according to the invention is less complex than the known methods from the prior art described above, requires less computing power and leads to better frequency resolution.
  • step (d) By separating the noise simulation from the transmission of the original signal enables the inventive method in a particularly preferred Variant that in step (d) only a selected part of the generated Frequency spectrum used to generate the simulated noise signal becomes. This can be used to carry out the method according to the invention further minimizes required computing power or the process itself be done even faster.
  • a further development of this method variant is characterized in that the selection of the to generate the simulated noise signal used part of the frequency spectrum according to criteria of psychoacoustics according to the mean values of the perceptual spectrum of the human Hearing.
  • the value for the noise signal to be simulated is not only derived from the current power value of an original signal in speech pauses alone, but also from a weighted spectral curve of the corresponding signal determined and overall an aurally correct, i.e. achieves a psychoacoustically pleasant sound reduction.
  • Step (c) or before step (d) takes place By choosing a specific frequency Differences in signal energy from a frequency group are special easy to detect.
  • a variant of the method is also advantageous in which the frequency spectrum in step (b) of the branched TK signal only in a predetermined frequency range is produced. If the source of interference is only a limited frequency spectrum has significant computing power be saved. For example, in motor vehicles with sources of interference in a frequency range up to a maximum of 1 KHz, since the Interference signal mainly due to low-frequency sound generation (engine, Gear, rolling noise etc.) is formed.
  • a method variant is particularly simple, which is characterized in that a discrete Fourier transformation or an inverse discrete Fourier transformation is used in step (b) and / or in step (d), with discrete-time amplitude values of the incoming TK signal a sampling frequency f T can be sampled.
  • FFT fast Fourier transform
  • IDFT inverse discrete Fourier transform
  • the IDFT can therefore be advantageous for a defined frequency range be applied.
  • the distribution of frequencies can be individual respectively. From a frequency resolution of less than 128 frequency lines it is possible to save computing power compared to the FFT.
  • An alternative to the last-mentioned method variant is an embodiment in which only the part of the frequency spectrum generated that is below half the sampling frequency f T / 2 is selected. This in turn saves computing power, but also saves storage space.
  • a variant of the method according to the invention is also particularly advantageous, in which a frequency spectrum is temporarily stored in step (c) by averaging the frequency spectrum currently generated in step (b) previously generated frequency spectra is obtained. By averaging Spectral lines with high energy found and random values or sporadic Systematically suppressed errors.
  • the averaging has different relative values Weighting the currently generated frequency spectrum in different Frequency ranges.
  • Weighting the natural settling behavior of interferers are taken into account. For example, the speed of an engine in a motor vehicle usually do not change abruptly. Low-frequency interferers have one higher settling time than high-frequency.
  • the suggested weighting helps making the adaptivity of a system stable and fast.
  • step (e) one according to predetermined criteria with a weighting factor a ⁇ 1 weighted simulated noise signal from the currently arriving TK signal subtracted.
  • the weighting factor a is one of TK system-dependent constant value selected. This makes possible an inexpensive and simple optimization of the invention Procedure to the errors of the respective telecommunications system. The errors will be automatic recorded, the weighting can also take place during operation.
  • the weighting factor a can be used as a by the user of the TK-Systems selectable quality measure, adjustable value can be selected.
  • a weighting factor defined by the user enables an individual, User-defined adaptation of the method according to the invention to the individual Needs.
  • the system according to the invention in an existing integrated overall concept can be provided by the user statistical value, such as the probability of error or detection rate can be used to control the weighting factor.
  • the weighting factor can also be derived from the speed or speed.
  • weighting factor a adaptive is adapted to the current incoming TC signal.
  • the adaptive weighting allows automatic optimization of noise reduction during of the company.
  • the weighting factor can depend on statistical values such as the probability of errors, Average, changes in state, etc. can be derived. Adaptive weighting makes it particularly easy and quick to make adjustments the inventive method to individual circumstances in the acoustic environment of the telecommunications terminal possible.
  • Another advantageous variant of the method according to the invention is distinguished is characterized in that the simulated noise signal generated in step (d) a synthetic noise signal is added before step (e).
  • the Adding an artificial noise signal with constant power density can be used to mask dynamic, non-stationary interferers in the output signal serve.
  • TK signal currently arriving before step (e) of a defined time delay is subjected, which is preferably designed so that the phase position of the incoming TK signal with the phase position of the simulated noise signal before deduction.
  • the currently arriving TK signal is immediately supplied to the deduction in step (e), and that the simulated noise signal is in phase before step (e) the phase position of the currently arriving TC signal is adjusted.
  • the Phase position of the reproduced noise signal in the frequency range before Corrected back transformation, the subtraction from the undelayed signal done in the time domain.
  • Annoying signal delays can thus be eliminated.
  • a variant of the method according to the invention is particularly preferred for which is present in addition to the detection and reduction of noise signals of echo signals is detected and / or predicted and the echo signals suppressed or reduced.
  • An additional echo cancellation is however only possible if the received original signal from a distant TC subscriber is involved in the echo calculation. This means that the sound reproduction also includes an echo production, which is associated with a incoming signal from the remote TC subscriber is connected.
  • This method variant can be improved in that the control the reduction of noise signals and the reduction of echo signals done separately.
  • the artificial noise signal can be a previously during the current TK connection include recorded sound signal that the current can reproduce the acoustic surrounding situation particularly "lifelike".
  • a server unit also falls within the scope of the present invention Processor assembly and a gate array assembly to support the The inventive method described above and a computer program to carry out the procedure.
  • the method can be used as a hardware circuit, as well as in the form of a computer program.
  • software programming for powerful DSP's preferred because new insights and additional functions are made easier by a Software changes can be implemented on existing hardware basis are.
  • methods can also be used as hardware components, for example in telecommunications end devices or telephone systems can be implemented.
  • FIG. 1 shows how an incoming original signal x, which contains a speech component s and a noise component n, is simulated on the one hand in a device 1 in the frequency domain in a device 1 and on the other hand the original signal X s + n is separated from the noise replication one Noise subtraction is supplied, with a time delay ⁇ optionally being possible.
  • the noise-reduced signal y s is then forwarded in the telecommunications system.
  • a speech pause detector which is practically always required for the simulation of noise 2 is provided, with which it is determined when the incoming Signal may contain voice signals or when there is a pause in speech.
  • the incoming TK signal of a Fourier transform FT subjected to the generation of a frequency spectrum and each of them resulting frequency spectrum is stored in a buffer 3.
  • the frequency spectra stored one after the other can be used with the help a device 4 are subjected to averaging.
  • the speech pause detector 2 determines that a speech pause has ended is and voice signals may also be present in the incoming original signal, becomes the last frequency spectrum stored in the buffer 3 (possibly averaged with previously recorded spectra) of an inverse Fourier transformation IFT subjected and in a subtractor 5 from Subtracted original signal, which was possibly subjected to a time delay ⁇ , to get a noise-free or at least noise-reduced signal.
  • IFT subjected and forwarded as a noise-reduced TC signal in the time domain. It takes place in the known methods in the prior art basically always a change in the original signal even before actual noise extraction instead.
  • FIG. 4 shows a further embodiment of the invention, in which the original signal x s + n, which is initially received in the time domain, is processed in blocks in the device 1b for noise simulation.
  • the time signal is subjected to a windowing (for example according to Hamming) in a corresponding upstream device 4 ′ or 4 ′′ before the transformation into the frequency range
  • Parallel processing is carried out in a further path with the same fenestration, only the signal being offset by half the window length and otherwise the noise signal to be simulated is calculated using the same means, as a result of which the errors generated by the fenestration can be compensated for.
  • the windowing is carried out in a device 4 'in the first path, then the time signal is subjected to a fast Fourier transformation FFT and the spectrum which arises is stored in a buffer 3'.
  • FFT fast Fourier transformation
  • An inverse fast Fourier transform IFFT follows each of the intermediate memories 3 ', 3 ", and the resulting spectra in the time domain are combined in an overlap device 6 to form a simulated noise signal Yn.
  • the simulated noise signal is then in turn subtracted by 5 optionally subtracted from the original signal X s + n by a time ⁇ in order to obtain the noise-corrected output signal y s .
  • the subtraction of the noise signal from the original signal in the subtraction element 5 can be phase-adjusted.
  • FIG. 5 Another embodiment is shown in Fig. 5, where the branched incoming TC signal x s + n + e contains echo signals in addition to voice and noise signals.
  • an echo signal e is also input, which is further processed in a processing path parallel to the noise simulation path.
  • the incoming original signal x s + n + e is first subjected to a windowing in a device 4a, then a fast Fourier transform FFT and the frequency spectrum obtained is buffered in a buffer 3a.
  • the echo signal e is also subjected to a windowing in a device 4b and then Fourier transformed.
  • the frequency spectra of both paths are temporarily stored in a buffer 3b and possibly subjected to averaging.
  • a fast inverse Fourier transformation IFFT then takes place separately on each of the two paths.
  • the simulated noise signal and the simulated echo signal overlap to form an overall signal y n + e to be subtracted, which is subtracted in the subtraction device 5 from the unchanged or delayed original signal x s + n + e by the noise - And to obtain echo-reduced TK signal y s .
  • the figures 6a to 6c finally show examples of noise signals in the frequency domain calculated by the method according to the invention.
  • the noise signal to be simulated was obtained from a fast Fourier transform FFT. You can see the typical mirror symmetry around half the frequency value f s / 2.
  • 6c finally shows the result of using a modified discrete Fourier transform with higher resolution, again only half of the frequency spectrum being processed up to the frequency f s / 2.

Abstract

Ein Verfahren zur Geräuschreduktion bei der Übertragung von akustischen Nutzsignalen umfasst folgende Schritte: (a) Feststellen, wann eine Sprachpause vorliegt; (b) Abzweigen des ankommenden TK-Signals von Hauptsignalpfad und Anwenden einer Fourier-Transformation zur Erzeugung eines Frequenzspektrums; (c) Speichern des letzten während der letzten Sprachpause aufgenommenen Frequenzspektrums in einem Zwischenspeicher (3); (d) Anwenden einer inversen Fourier-Transformation auf das jeweils letzte aufgenommenen Frequenzspektrum zur Erzeugung eines nachgebildeten Geräuschsignals; (e) Abziehen des nachgebildeten Geräuschsignals im Zeitbereich vom aktuell ankommenden TK-Signal. Dadurch bleibt das Originalsignal bis zum eigentlichen Geräuschabzug unverfälscht erhalten. Das Verfahren ermöglicht mit einfachen Mitteln und geringerem Rechenaufwand als bisher, einen für das menschliche Ohr möglichst angenehmen akustischen Gesamteindruck zu erzeugen, der an individuelle Bedürfnisse angepasst werden kann. Unabhängig von den Anforderungen für eine Sprachsignalverarbeitung kann eine einfache Optimierung auf die Erfordernisse der Spektralverarbeitung von Geräuschsignalen durchgeführt werden. <IMAGE>

Description

Die Erfindung betrifft ein Verfahren zur Reduktion von Geräuschsignalen bei Telekommunikations(=TK)-Systemen für die Übertragung von akustischen Nutzsignalen, insbesondere menschlicher Sprache.
Ein bekanntes Verfahren zur Geräuschreduktion ist die sogenannte "spektrale Subtraktion", die beispielsweise in der Veröffentlichung "A new approach to noise reduction based on auditory masking effects" von S. Gustafsson und P. Jax, ITG-Fachtagung, Dresden, 1998, beschrieben ist. Dabei handelt es sich um ein spektrales Geräuschabsenkungsverfahren, bei dem eine akustische Verdeckungsschwelle (beispielsweise nach dem MPEG-Standard) berücksichtigt wird.
Während einer natürlichen Kommunikation zwischen Menschen passt man in der Regel die Amplitude der gesprochenen Sprache automatisch an die akustische Umgebung an. Bei einer Sprachkommunikation zwischen entfernten Orten jedoch befinden sich die Gesprächspartner nicht im selben akustischen Umfeld und sind sich daher jeweils nicht der akustischen Situation am Ort des anderen Gesprächspartners bewusst. Verstärkt tritt daher ein Problem auf, wenn einer der Partner aufgrund seiner akustischen Umgebung gezwungen ist, sehr laut zu sprechen, während der andere Partner in einer leisen akustischen Umgebung Sprachsignale mit geringer Amplitude erzeugt.
Besonders verschärft ergeben sich Geräuschprobleme bei neueren Anwendungen von Kommunikationssystemen, wie beispielsweise Mobiltelefone, bei denen die Endgeräte derart klein gestaltet werden, dass eine unmittelbare räumliche Nachbarschaft zwischen Lautsprecher und Mikrofon nicht zu vermeiden ist. Aufgrund der direkten Schallübertragung, insbesondere durch Körperschall zwischen Lautsprecher und Mikrofon kann das akustische Störsignal in die gleiche Größenordnung kommen wie das Nutzsignal des Sprechers am jeweiligen Endgerät oder dieses sogar in der Amplitude übertreffen. Ein derartiges Geräuschproblem tritt auch bei mehreren räumlich benachbart angeordneten Endgeräten, beispielsweise in einem Büro- oder Konferenzraum mit vielen Telefonanschlüssen in nicht unerheblichem Umfang auf, da eine Kopplung von jedem Lautsprechersignal auf jedes Mikrofon erfolgt.
Hinzu kommt das Problem, dass auf einem TK-Kanal auch ein "elektronisch erzeugtes" Geräusch entsteht und als Hintergrund zum Nutzsignal mitübertragen wird. Um den Komfort beim Telefonieren zu erhöhen, ist man deshalb bestrebt, jede Art von Geräusch im Verhältnis zum Nutzsignal möglichst gering zu halten.
Schließlich ist man auch bestrebt, Störsignale wie unerwünschten Hintergrundlärm (Straßenlärm, Fabriklärm, Bürolärm, Kantinenlärm, Fluglärm etc.) zu reduzieren oder ganz zu unterdrücken.
Bei dem bekannten Kompander-Verfahren, wie es beispielsweise in der DE 42 29 912 A1 beschrieben ist, wird der Grad der Geräuschabsenkung gemäß einer fest vorgegebenen Transferfunktion festgelegt. Der Kompander hat zunächst die Eigenschaft, Sprachsignale mit einem bestimmten (vorab eingestellten) "normalen Sprachsignalpegel" (ggf. normale Lautstärke genannt) praktisch unverändert von seinem Eingang zum Ausgang zu übertragen. Wird nun aber das Eingangssignal einmal zu laut, z.B. weil ein Sprecher zu dicht an sein Mikrofon kommt, so begrenzt ein Dynamik-Kompressor den Ausgangspegel auf nahezu den gleichen Wert wie im Normalfall, indem die aktuelle Verstärkung im Kompander mit zunehmender Eingangslautstärke linear abgesenkt wird. Durch diese Eigenschaft bleibt die Sprache am Ausgang des Kompandersystems etwa gleich laut - unabhängig davon wie stark die Eingangslautstärke schwankt. Wird nun andererseits ein Signal mit einem Pegel, der kleiner als der Normalpegel ist, auf den Eingang des Kompanders gegeben, so wird das Signal zusätzlich gedämpft, indem die Verstärkung zurückgeregelt wird, um Hintergrundgeräusche möglichst nur abgeschwächt zu übertragen. Der Kompander besteht somit aus zwei Teilfunktionen, einem Kompressor für Sprachsignalpegel, die größer oder gleich einem Normalpegel sind und einem Expander für Signalpegel, die kleiner als der Normalpegel sind.
Bei der oben angesprochenen spektralen Subtraktion wird zu diesem Zweck zunächst das Geräusch in den Sprachpausen gemessen und in Form eines Leistungsdichtespektrums fortlaufend in einem Speicher abgelegt. Das Leistungsdichtespektrum wird über eine Fourier Transformation gewonnen. Beim Auftreten von Sprache wird das gespeicherte Geräuschspektrum "als bester aktueller Schätzwert" vom aktuellen gestörten Sprachspektrum subtrahiert, sodann in den Zeitbereich zurücktransformiert, um auf diese Weise eine Geräuschreduktion für das gestörte Signal zu erhalten.
Nachteilig bei derartigen Verfahren ist die aufwendige Bestimmung dieser akustischen Verdeckungsschwelle und die Ausführung aller mit diesem Verfahren verbundenen Rechenoperationen. Ein weiterer Nachteil der spektralen Subtraktion besteht darin, dass durch den Vorgang einer prinzipiell nicht genauen spektralen Geräuschschätzung und nachfolgender Subtraktion auch Fehler im Ausgangssignal auftreten, die sich als "musical tones" bemerkbar machen.
Bei der erweiterten spektralen Signalbearbeitung, die ebenfalls in dem eingangs genannten Zitat beschrieben ist, werden zunächst mit Hilfe einer spektralen Subtraktion die Leistungsdichtespektren für das Geräusch und für die Sprache selbst geschätzt. Aus der Kenntnis dieser Teilspektren wird sodann mit Hilfe z.B. der Regeln aus dem MPEG Standard eine spektrale akustische Verdeckungsschwelle RT(f) für das menschliche Ohr berechnet. Mit Hilfe dieser Verdeckungsschwelle und den geschätzten Spektren für Geräusch und Sprache wird nach einer einfachen Regel eine Filterdurchlasskurve H(f) berechnet, die so gestaltet ist, dass wesentliche spektrale Teile der Sprache möglichst unverändert durchgelassen und spektrale Teile des Geräusches möglichst abgesenkt werden.
Sodann wird das originale gestörte Sprachsignal nur durch dieses Filter gegeben, um auf diese Weise eine Geräuschreduktion für das gestörte Signal zu erhalten. Der Vorteil dieses Verfahrens besteht nun darin, dass vom gestörten Signal "Nichts addiert oder subtrahiert" wird und daher Fehler in den Schätzungen weniger bis kaum wahrnehmbar sind. Nachteilig ist wieder der erheblich größere Rechenaufwand.
Von besonderem Nachteil bei allen diesen bekannten Verfahren ist die Tatsache, dass das eingehende Originalsignal bereits vor der eigentlichen Subtraktion eines wie auch immer nachgebildeten Geräuschsignals einem Signalbearbeitungsprozess unterworfen und damit prinzipiell verfälscht wird.
Aufgabe der vorliegenden Erfindung ist es demgegenüber, ein Verfahren möglichst geringer Komplexität mit den eingangs beschriebenen Merkmalen vorzustellen, bei dem in technisch unaufwendiger Art und Weise eine Geräuschabsenkung bzw. Geräuschunterdrückung erreicht wird, und bei der das Originalsignal bis zum eigentlichen Geräuschabzug unverfälscht erhalten bleibt. Dabei sollte das Verfahren mit einfachen Mitteln, insbesondere mit geringerem Rechenaufwand als bisher ermöglichen, einen für das menschliche Ohr möglichst angenehmen akustischen Gesamteindruck zu erzeugen, der je nach Geschmack an individuelle Bedürfnisse angepasst werden kann. Schließlich sollte das neue Verfahren völlig unabhängig von den Anforderungen für eine Sprachsignalverarbeitung durchgeführt werden können und damit eine einfache Optimierung auf die Erfordernisse der Spektralverarbeitung von Geräuschsignalen ermöglichen.
Erfindungsgemäß wird diese Aufgabe auf ebenso einfache wie wirkungsvolle Art und Weise durch folgende Verfahrensschritte gelöst:
  • (a) Feststellen mittels Sprach-Pausen-Detektion, wann in der zu übertragenden Mischung aus Nutzsignalen und Störsignalen ein Sprachsignal enthalten ist oder wann eine Sprachpause vorliegt;
  • (b) Abzweigen des ankommenden TK-Signals von Hauptsignalpfad und Anwenden einer Fourier-Transformation auf das abgezweigte TK-Signal zur Erzeugung eines Frequenzspektrums des abgezweigten TK-Signals;
  • (c) Speichern des letzten während der letzten Sprachpause aufgenommenen Frequenzspektrums in einem Zwischenspeicher;
  • (d) Anwenden einer inversen Fourier-Transformation auf das jeweils letzte aufgenommenen Frequenzspektrum zur Erzeugung eines nachgebildeten Geräuschsignals;
  • (e) Abziehen des nachgebildeten Geräuschsignals im Zeitbereich vom aktuell ankommenden TK-Signal.
    • Das erfindungsgemäße Verfahren ermöglicht durch die getrennte Nachbildung des Geräuschsignals im Frequenzbereich unabhängig von einer Verarbeitung des originalen Sprachsignals einen direkten Abzug des nachgebildeten Geräuschsignals vom originalen, unverfälschten Eingangssignal, welches weder einer Fourier-Transformation noch einer inversen Fourier-Transformation unterworfen wird. Bei einer entsprechenden Phasenkorrektur im Frequenzbereich ist sogar eine Geräuschsubtraktion vom Originalsignal ohne Zeitverzögerung möglich. Dabei ist das erfindungsgemäße Verfahren weniger komplex als die oben geschilderten bekannten Verfahren aus dem Stand der Technik, erfordert geringere Rechenleistungen und führt zu einer besseren Frequenzauflösung.
    Durch die Abtrennung der Geräuschnachbildung von der Weitergabe des Originalsignals ermöglicht das erfindungsgemäße Verfahren in einer besonders bevorzugten Variante, dass in Schritt (d) nur ein ausgewählter Teil des erzeugten Frequenzspektrums zur Erzeugung des nachgebildeten Geräuschsignals verwendet wird. Damit kann die zur Durchführung des erfindungsgemäßen Verfahrens erforderliche Rechenleistung weiter minimiert bzw. das Verfahren selbst noch schneller durchgeführt werden.
    Eine Weiterbildung dieser Verfahrensvariante zeichnet sich dadurch aus, dass die Auswahl des zur Erzeugung des nachgebildeten Geräuschsignals verwendeten Teils des Frequenzspektrums nach Kriterien der Psychoakustik gemäß den Mittelwerten des Wahrnehmungs-spektrums des menschlichen Gehörs erfolgt.
    Dabei wird der Wert für das nachzubildende Geräuschsignal nicht nur aus dem momentanen Leistungswert eines Originalsignals in Sprachpausen alleine, sondern auch aus einem gewichteten spektralen Verlauf des entsprechenden Signals bestimmt und insgesamt über die so gewonnene Funktion eine gehörrichtige, d.h. eine psychoakustisch angenehm klingende Geräuschreduktion erzielt.
    Da es kein einfach darstellbares Maß für eine akustisch angenehm klingende Geräuschreduktion gibt, sind alle Qualitätsbeurteilungen auf umfangreiche Gehörtests angewiesen, die anschließend mittels dafür optimierter statistischer Methoden ausgewertet werden, um einen Bewertungsmaßstab, (ähnlich wie bei Sprachcodecs) zu erhalten.
    Die grundlegenden Vorgehensweisen hierzu sind beispielsweise dem Lehrbuch von E. Zwicker, "Psychoakustik", Springer-Verlag Berlin, 1982, insbesondere Seiten 51-53 zu entnehmen.
    Durch die psychoakustische Bewertung kann nicht nur die wahrnehmbare Qualität des Gesamtsignals optimiert werden, sondern es sind zudem auch noch weitere Einsparungen in der erforderlichen Rechenleistung möglich, wenn beispielsweise Maskiereffekte ausgenützt werden oder nur diejenigen Frequenzen Berücksichtigung finden, die eindeutig durch Geräusch- oder Störquellen verursacht wurden.
    In einer alternativen Weiterbildung der obigen Verfahrensvariante erfolgt die Auswahl des zur Erzeugung des nachgebildeten Geräuschsignals verwendeten Teiles des Frequenzspektrums derart, dass nur diskrete Frequenzen des Spektrums betrachtet werden, und dass der Abstand der diskreten Frequenzen in Richtung höherer Frequenzen stetig größer, vorzugsweise nach einer logarithmischen Funktion gewählt wird. Damit ist die Frequenzauflösung an die Wahrnehmung des menschlichen Ohres besser angepasst.
    Weiter verbessert werden können diese Weiterbildungen dadurch, dass der ausgewählte Teil des Frequenzspektrums in vorher festgelegte Frequenzgruppen aufgeteilt wird, und dass in jeder Frequenzgruppe nur die Frequenz bzw. das Frequenzband mit der größten Signalenergie innerhalb der Frequenzgruppe selektiert und zur Erzeugung des nachgebildeten Geräuschsignals weiterverwendet wird. Mit dieser Selektion wird eine starke Reduzierung der zu berechnenden Frequenzen bei gleichbleibender hörbarer oder wahrnehmbarer Qualität erreicht, wodurch die Rechenleistung für das Verfahren weiter verringert und die Qualität des Ausgangssignals noch weiter erhöht wird.
    Besonders vorteilhaft ist es, wenn die Selektion der Frequenz bzw. des Frequenzbandes mit der größten Signalenergie innerhalb der Frequenzgruppe vor Schritt (c) bzw. vor Schritt (d) erfolgt. Durch die Auswahl einer bestimmten Frequenz aus einer Frequenzgruppe sind Unterschiede in der Signalenergie besonders einfach detektierbar.
    Vorteilhaft ist auch eine Verfahrensvariante, bei der in Schritt (b) das Frequenzspektrum des abgezweigten TK-Signals nur in einem vorgegebenen Frequenzbereich erzeugt wird. Sofern die Störquelle nur ein eingeschränktes Frequenzspektrum aufweist, kann mit dieser Maßnahme wiederum erhebliche Rechenleistung eingespart werden. Beispielsweise ist in Kraftfahrzeugen mit Störquellen in einem Frequenzbereich nur bis zu maximal 1 KHz zu rechnen, da das Störsignal in der Hauptsache durch niederfrequente Schallerzeugung (Motor, Getriebe, Rollgeräusche etc.) gebildet wird.
    Besonders einfach ist eine Verfahrensvariante, die sich dadurch auszeichnet, dass in Schritt (b) und/oder in Schritt (d) eine diskrete Fourier-Transformation bzw. eine inverse diskrete Fourier-Transformation angewandt wird, wobei vom ankommenden TK-Signal zeitdiskrete Amplitudenwerte mit einer Abtastfrequenz fT abgetastet werden.
    In einer bevorzugten Weiterbildung der Verfahrensvariante wird in Schritt (b) eine schnelle Fourier-Transformation (= FFT) angewandt. Wenn ein großes Frequenzgebiet bei gleichzeitiger hoher Frequenzauflösung abgedeckt werden soll, lässt sich mit dieser Vorgehensweise die Analyse mit der geringsten Rechenleistung ausführen. Die FFT ist besonders dann sinnvoll, wenn beispielsweise mit mehr als 128 Frequenzlinien gerechnet werden muss.
    Vorteilhafterweise kann in Schritt (d) eine inverse diskrete Fourier-Transformation (= IDFT) angewandt werden. Hierdurch lässt sich eine Signalsynthese mit der geringsten Rechenleistung ausführen, wenn ein ausgewähltes Spektrum bearbeitet wird, da der Nachteil einer äquidistanten Frequenzaufteilung bei der FFT vermieden wird. Die IDFT kann daher vorteilhaft für einen definierten Frequenzbereich angewendet werden. Die Verteilung der Frequenzen kann individuell erfolgen. Ab einer Frequenzauflösung von weniger als 128 Frequenzlinien ist eine Einsparung der Rechenleistung gegenüber der FFT möglich.
    In der Applikation sind auch Einsparungen in der Rechenleistung oder Qualitätsverbesserungen erreichbar, wenn in Schritt (d) eine inverse schnelle Fourier-Transformation (=IFFT) angewandt wird. In Kombination mit einer FFT in Schritt (b) können breitbandige Störer besonders wirtschaftlich bearbeitet werden.
    Alternativ zur letztgenannten Verfahrensvariante ist eine Ausführungsform, bei der nur der Teil des erzeugten Frequenzspektrums ausgewählt wird, der unterhalb der halben Abtastfrequenz fT/2 liegt. Damit lassen sich wiederum Einsparungen in der Rechenleistung, aber auch im Speicherplatzaufwand erzielen.
    Besonders vorteilhaft ist auch eine Variante des erfindungsgemäßen Verfahrens, bei der in Schritt (c) ein Frequenzspektrum zwischengespeichert wird, das durch eine Mittelung des aktuell in Schritt (b) erzeugten Frequenzspektrums mit vorher erzeugten Frequenzspektren gewonnen wird. Durch die Mittelung werden Spektrallinien mit großer Energie gefunden und Zufallswerte oder sporadische Fehler systematisch unterdrückt.
    Dabei ist es besonders günstig, wenn die Mittelung mit unterschiedlicher relativer Wichtung des aktuell erzeugten Frequenzspektrums in unterschiedlichen Frequenzbereichen erfolgt. Allgemein kann mit derartigen unterschiedlichen Richtungen das natürliche Einschwingverhalten von Störern berücksichtigt werden. Beispielsweise kann sich die Drehzahl eines Motors in einem Kraftfahrzeug in der Regel nicht schlagartig ändern. Niederfrequente Störer haben eine höhere Einschwingzeit als hochfrequente. Die vorgeschlagene Wichtung hilft dabei, die Adaptivität eines Systems stabil und schnell zu machen.
    Dabei ist es wiederum besonders vorteilhaft, wenn die Wichtung nach Kriterien der Psychoakustik gemäß den Mittelwerten des Wahrnehmungsspektrums des menschlichen Gehörs erfolgt. Wie bereits oben diskutiert, werden bei der psychoakustischen Wichtung die frequenzabhängigen Einschwingzeiten dem menschlichen Hörempfinden angepasst. Dadurch erreicht man eine Optimierung des Systems hinsichtlich Natürlichkeit, Stabilität und Adaptionszeit.
    Um eine Überkompensation bei der Geräuschbehandlung zu vermeiden, wird bei einer besonders bevorzugten Variante des erfindungsgemäßen Verfahrens in Schritt (e) ein nach vorgegebenen Kriterien mit einem Wichtungsfaktor a < 1 gewichtetes nachgebildetes Geräuschsignal vom vom aktuell ankommenden TK-Signal abgezogen.
    Bei einer vorteilhaften Weiterbildung wird der Wichtungsfaktor a als ein von Fehlern des TK-Systems abhängiger konstanter Wert gewählt. Dies ermöglicht eine kostengünstige und einfache Optimierung des erfindungsgemäßen Verfahrens an die Fehler des jeweiligen TK-Systems. Werden die Fehler automatisch erfasst, so kann die Wichtung auch während des Betriebs erfolgen.
    Alternativ kann der Wichtungsfaktor a als ein nach einem vom Benutzer des TK-Systems wählbaren Qualitätsmaß einstellbarerer Wert gewählt werden. Ein derartiger vom Benutzer definierter Wichtungsfaktor ermöglicht eine individuelle, benutzerdefinierte Anpassung des erfindungsgemäßen Verfahrens an die individuellen Bedürfnisse. Wird das erfindungsgemäße System in ein vorhandenes übergeordnetes Konzept integriert, kann ein vom Benutzer bereitgestellter statistischer Wert, wie beispielsweise die Fehlerwahrscheinlichkeit oder Erkennungsrate zur Steuerung des Wichtungsfaktors herangezogen werden. Bei Anwendungen im Kraftfahrzeugbereich kann der Wichtungsfaktor beispielsweise auch aus der Drehzahl oder Geschwindigkeit abgeleitet werden.
    Dies lässt sich dadurch weiterverbessern, dass der Wichtungsfaktor a adaptiv an das aktuelle ankommende TK-Signal angepasst wird. Die adaptive Gewichtung erlaubt eine automatische Optimierung der Geräuschminderung während des Betriebes. Der Gewichtungsfaktor kann von statistischen Werten wie Fehlerwahrscheinlichkeit, Mittelwert, Zustandsänderungen etc. abgeleitet werden. Mit der adaptiven Wichtung sind besonders einfache und schnelle Anpassungen des erfindungsgemäßen Verfahrens an individuelle Gegebenheiten in der akustischen Umgebung des TK-Endgeräts möglich.
    Eine weitere vorteilhafte Variante des erfindungsgemäßen Verfahrens zeichnet sich dadurch aus, dass dem in Schritt (d) erzeugten nachgebildeten Geräuschsignal vor Schritt (e) ein synthetisches Geräuschsignal beigemischt wird. Die Beimischung eines künstlichen Rauschsignals mit konstanter Leistungsdichte kann zur Maskierung von dynamischen, nicht-stationären Störern im Ausgangssignal dienen.
    Eine weitere Variante des erfindungsgemäßen Verfahrens sieht vor, dass das aktuell ankommende TK-Signal vor Schritt (e) einer definierten Zeitverzögerung unterworfen wird, die vorzugsweise so ausgelegt ist, dass die Phasenlage des ankommenden TK-Signals mit der Phasenlage des nachgebildeten Geräuschsignals vor dem Abzug übereinstimmt.
    Bei einer alternativen Verfahrensvariante ist vorgesehen, dass das aktuell ankommende TK-Signal unverzögert dem Abzug in Schritt (e) zugeführt wird, und dass das nachgebildete Geräuschsignal in seiner Phasenlage vor Schritt (e) an die Phasenlage des aktuell ankommenden TK-Signals angepasst wird. Wird die Phasenlage des reproduzierten Geräuschsignals im Frequenzbereich vor der Rücktransformation korrigiert, kann die Subtraktion vom unverzögerten Signal im Zeitbereich erfolgen. Störende Signalverzögerungen können somit entfallen. Diese treten zwangsläufig bei allen Verfahren auf, bei denen das Nutzsignal (Sprache) den Umweg über zwei Transformationen macht, wie beispielsweise bei der oben diskutierten bekannten spektralen Subtraktion.
    Besonders bevorzugt ist eine Variante des erfindungsgemäßen Verfahrens, bei der zusätzlich zur Erkennung und Reduktion von Geräuschsignalen das Vorliegen von Echosignalen detektiert und/oder vorhergesagt wird und die Echosignale unterdrückt oder reduziert werden. Eine zusätzliche Echounterdrückung ist allerdings nur dann möglich, wenn das empfangene Originalsignal vom fernen TK-Teilnehmer zur Echoberechnung miteinbezogen wird. Dies bedeutet, dass die Geräuschreproduktion auch eine Echoreproduktion beinhaltet, die mit einem vom fernen TK-Teilnehmer ankommenden Signal verbunden ist.
    Diese Verfahrensvariante kann dadurch verbessert werden, dass die Steuerung der Reduktion von Geräuschsignalen und der Reduktion von Echosignalen getrennt erfolgt.
    Vorteilhaft ist es auch, wenn während der Zeitdauer einer Echo-Reduktion zum Nutzsignal zusätzlich ein künstliches Geräuschsignal addiert wird, wie es bereits oben näher diskutiert wurde, um den subjektiven Eindruck einer "toten Leitung" zu vermeiden.
    Insbesondere kann das künstliche Geräuschsignal eine psychoakustisch als angenehm empfundene akustische Signalsequenz (=comfort noise) umfassen.
    Alternativ kann das künstliche Geräuschsignal ein zuvor während der aktuellen TK-Verbindung aufgezeichnetes Geräuschsignal umfassen, das die aktuelle akustische Umgebungssituation besonders "lebensecht" nachzubilden vermag.
    In den Rahmen der vorliegenden Erfindung fällt auch eine Servereineit, eine Prozessor-Baugruppe sowie eine Gate-Array-Baugruppe zur Unterstützung des oben beschriebenen erfindungsgemäßen Verfahrens sowie ein Computerprogramm zur Durchführung des Verfahrens. Das Verfahren kann sowohl als Hardwareschaltung, als auch in Form eines Computerprogramms realisiert werden. Heutzutage wird eine Software-Programmierung für leistungsstarke DSP's bevorzugt, da neue Erkenntnisse und Zusatzfunktionen leichter durch eine Veränderung der Software auf bestehender Hardwarebasis implementierbar sind. Verfahren können aber auch als Hardwarebausteine beispielsweise in TK-Endgeräten oder Telefonanlagen implementiert werden.
    Weitere Vorteile der Erfindung ergeben sich aus der Beschreibung und der Zeichnung. Ebenso können die vorstehend genannten und die noch weiter aufgeführten Merkmale erfindungsgemäß jeweils einzeln für sich oder zu mehreren in beliebigen Kombinationen Verwendung finden. Die gezeigten und beschriebenen Ausführungsformen sind nicht als abschließende Aufzählung zu verstehen, sondern haben vielmehr beispielhaften Charakter für die Schilderung der Erfindung.
    Die Erfindung ist in der Zeichnung dargestellt und wird anhand von Ausführungsbeispielen näher erläutert. Es zeigen:
    Fig. 1
    ein stark schematisiertes Diagramm der Funktionsweise einer Einrichtung zur Durchführung des erfindungsgemäßen Verfahrens;
    Fig. 2
    eine detailliertere schematische Darstellung einer Einrichtung zur Durchführung des erfindungsgemäßen Verfahrens;
    Fig. 3
    ein Schema für ein spektrales Subtraktionsverfahren nach dem Stand der Technik;
    Fig. 4
    eine Ausführungsform der Erfindung mit schneller Fourier-Transformation und schneller Rücktransformation sowie blockweise überlappender Bearbeitung des eingegebenen Zeitsignals im Frequenzbereich;
    Fig. 5
    Ein Schema einer Ausführungsform mit gleichzeitiger Echo-reduktion;
    Fig. 6a
    ein Beispiel eines mit FFT berechneten Geräuschsignals im Frequenzraum;
    Fig. 6b
    ein mit einer diskreten Fourier-Transformation und nur bis fs/2 berechneten Geräuschsignals; und
    Fig. 6c
    ein Geräuschsignal im Frequenzbereich bis fS/2 als Ergebnis einer modifizierten Fourier-Transformation mit höherer Auflösung.
    In Fig. 1 ist gezeigt, wie aus einem ankommenden Originalsignal x, welches einen Sprachanteil s sowie einen Geräuschanteil n enthält, einerseits in einer Einrichtung 1 ein Geräuschsignal yn im Frequenzbereich nachgebildet wird und andererseits das Originalsignal Xs+n getrennt von der Geräuschnachbildung einer Geräuschsubtraktion zugeführt wird, wobei wahlweise eine Zeitverzögerung τ vorgenommen werden kann. Das geräuschreduzierte Signal ys wird dann im TK-System weitergeleitet.
    In Fig. 2 ist eine einfache Ausführungsform gezeigt, bei der in der Einrichtung 1a zur Geräuschnachbildung ein praktisch immer erforderlicher Sprachpausendetektor 2 vorgesehen ist, mit dem ermittelt wird, wann das eingehende Signal Sprachsignale enthalten kann oder wann eine Sprachpause vorliegt. Parallel dazu wird das eingehende TK-Signal einer Fourier-Transformation FT zur Erzeugung eines Frequenzsprektrums unterworfen und das jeweils daraus entstehende Frequenzspektrum in einem Zwischenspeicher 3 abgespeichert. Die zeitlich nacheinander abgespeicherten Frequenzspektren können mit Hilfe einer Einrichtung 4 einer Mittelwertbildung unterzogen werden.
    Sobald der Sprachpausendetektor 2 feststellt, dass eine Sprachpause beendet ist und im eingehenden Originalsignal auch Sprachsignale vorhanden sein können, wird das letzte im Zwischenspeicher 3 abgespeicherte Frequenzspektrum (ggf. gemittelt mit vorher aufgenommenen Spektren) einer inversen Fourier-Transformation IFT unterworfen und in einem Subtraktionsglied 5 vom Originalsignal, das ggf. einer Zeitverzögerung τ unterworfen wurde, abgezogen, um ein geräuschbefreites oder zumindest geräuschreduziertes Signal zu erhalten.
    Im Gegensatz dazu wird bei bekannten Verfahren der spektralen Subtraktion das eingehende Originalsignal, wie in Fig. 3 dargestellt, direkt einer Fourier-Transformation FT unterzogen, ein nachgebildetes Geräuschsignal im Frequenzbereich in einem Subtraktionsglied 5' vom Fourier-transformierten Originalsignal abgezogen und das daraus entstehende neue, geräuschreduzierte Signal im Frequenzbereich einer inversen Fourier-Transformation
    IFT unterzogen und als geräuschreduziertes TK-Signal im Zeitbereich weitergeleitet. Es findet also bei den bekannten Verfahren im Stand der Technik grundsätzlich immer eine Veränderung des Originalsignals auch schon vor dem eigentlichen Geräuschabzug statt.
    In Fig. 4 ist eine weitere Ausführungsform der Erfindung dargestellt, bei der das zunächst im Zeitbereich eingehende Originalsignal xs+n in der Einrichtung 1b zur Geräuschnachbildung blockweise verarbeitet wird. Hierbei wird das Zeitsignal vor der Transformation in den Frequenzbereich einer Fensterung (z.B. nach Hamming) in einer entsprechend vorgeschalteten Vorrichtung 4' bzw. 4" unterzogen. Um bei der Rücktransformation die durch die Fensterung entstandenen Fehler zu kompensieren, wird neben der Verarbeitung in einem ersten Pfad eine parallele Verarbeitung in einem weiteren Pfad mit der gleichen Fensterung vorgenommen, wobei lediglich das Signal um die halbe Fensterlänge versetzt ist und ansonsten das nachzubildende Geräuschsignal mit den gleichen Mitteln berechnet wird, wodurch eine Kompensation der durch die Fensterung erzeugten Fehler erreicht werden kann.
    Im Einzelnen wird bei dem gezeigten Beispiel im ersten Pfad die Fensterung in einer Vorrichtung 4' vorgenommen, danach das Zeitsignal einer schneller Fourier-Transformation FFT unterworfen und das entstehende Spektrum in einem Zwischenspeicher 3' gespeichert. Das Gleiche geschieht im zweiten Pfad über eine Fenstervorrichtung 4" und eine Zwischenspeicherung des Fourier-transformierten Signals in einem Zwischenspeicher 3". An die Zwischenspeicher 3', 3" schließt sich eine inverse schnelle Fourier-Transformation IFFT jeweils an, und die daraus hervorgehenden Spektren im Zeitbereich werden in einer Überlappeinrichtung 6 zu einem nachgebildeten Geräuschsignal Yn zusammengeführt. Anschließend wird das nachgebildete Geräuschsignal wiederum im Subtraktionsglied 5 von einem wahlweise um eine Zeit τ zeitversetzten Originalsignal Xs+n abgezogen, um das geräuschbereinigte Ausgangssignal ys zu erhalten. Die Subtraktion des Geräuschsignals vom Originalsignal im Subtraktionsglied 5 kann phasenangepasst erfolgen.
    Ein weiteres Ausführungsbeispiel ist in Fig. 5 dargestellt, wo das abgezweigte eingehende TK-Signal xs+n+e neben Sprach- und Geräuschsignalen auch Echosignale enthält. In einer Einrichtung 1c zur Geräusch- und Echonachbildung wird außerdem ein Echosignal e eingegeben, welches in einem zum Geräuschnachbildungspfad parallelen Verarbeitungspfad weiterbehandelt wird.
    Das eingehende Originalsignal xs+n+e wird zunächst einer Fensterung in einer Vorrichtung 4a unterzogen, danach einer schnellen Fourier-Transformation FFT und das erhaltene Frequenzspektrum in einem Zwischenspeicher 3a zwischengespeichert. Parallel dazu wird das Echosignal e in einer Vorrichtung 4b ebenfalls einer Fensterung unterzogen und danach Fourier-transformiert. Die Frequenzspektren beider Pfade werden in einen Zwischenspeicher 3b zwischengespeichert und evtl. einer Mittelung unterzogen. Danach erfolgt auf beiden Pfaden jeweils getrennt eine schnelle inverse Fourier-Transformation IFFT. In einer Einrichtung 6a schließlich werden das nachgebildete Geräuschsignal und das nachgebildete Echosignal zu einem abzuziehenden Gesamtsignal yn+e überlappt, welches in der Subtraktionseinrichtung 5 von dem unveränderten oder um eine Zeit τ verzögerten Originalsignal xs+n+e abgezogen wird, um das geräusch- und echoreduzierte TK-Signal ys zu erhalten.
    Die Fign. 6a bis 6c schließlich zeigen Beispiele für nach dem erfindungsgemäßen Verfahren berechnete Geräuschsignale im Frequenzraum. Dabei ist bei dem Beispiel nach Fig. 6a das nachzubildende Geräuschsignal aus einer schnellen Fourier-Transformation FFT gewonnen worden. Man sieht die typische Spiegelsymmetrie um den halben Frequenzwert fs/2.
    Es reicht aber auch schon aus, wenn nur die erste Hälfte des nachgebildeten Geräuschsignals im Frequenzraum bis zur Frequenz fs/2 verwendet wird, was in Fig. 6b anhand eines Beispieles dargestellt ist, dessen Ergebnis mit Hilfe einer diskreten Fourier-Transformation erhalten wurde.
    Fig. 6c schließlich zeigt das Ergebnis der Anwendung einer modifizierten diskreten Fourier-Transformation mit höherer Auflösung, wobei wiederum nur die Hälfte des Frequenzspektrums bis zur Frequenz fs/2 verarbeitet wird.

    Claims (14)

    1. Verfahren zur Reduktion von Geräuschsignalen bei Telekommunikations(=TK)-Systemen für die Übertragung von akustischen Nutzsignalen, insbesondere menschlicher Sprache, mit folgenden Schritten:
      (a) Feststellen mittels Sprach-Pausen-Detektion, wann in der zu übertragenden Mischung aus Nutzsignalen und Störsignalen ein Sprachsignal enthalten ist oder wann eine Sprachpause vorliegt;
      (b) Abzweigen des ankommenden TK-Signals von Hauptsignalpfad und Anwenden einer Fourier-Transformation auf das abgezweigte TK-Signal zur Erzeugung eines Frequenzspektrums des abgezweigten TK-Signals;
      (c) Speichern des letzten während der letzten Sprachpause aufgenommenen Frequenzspektrums in einem Zwischenspeicher (3);
      (d) Anwenden einer inversen Fourier-Transformation auf das jeweils letzte aufgenommenen Frequenzspektrum zur Erzeugung eines nachgebildeten Geräuschsignals;
      (e) Abziehen des nachgebildeten Geräuschsignals im Zeitbereich vom aktuell ankommenden TK-Signal.
    2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass in Schritt (d) nur ein ausgewählter Teil des erzeugten Frequenzspektrums zur Erzeugung des nachgebildeten Geräuschsignals verwendet wird.
    3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Auswahl des zur Erzeugung des nachgebildeten Geräuschsignals verwendeten Teils des Frequenzspektrums nach Kriterien der Psychoakustik gemäß den Mittelwerten des Wahrnehmungs-spektrums des menschlichen Gehörs erfolgt.
    4. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Auswahl des zur Erzeugung des nachgebildeten Geräuschsignals verwendeten Teiles des Frequenzspektrums derart erfolgt, dass nur diskrete Frequenzen des Spektrums betrachtet werden, und dass der Abstand der diskreten Frequenzen in Richtung höherer Frequenzen stetig größer, vorzugsweise nach einer logarithmischen Funktion gewählt wird.
    5. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass der ausgewählte Teil des Frequenzspektrums in vorher festgelegte Frequenzgruppen aufgeteilt wird, und dass in jeder Frequenzgruppe nur die Frequenz bzw. das Frequenzband mit der größten Signalenergie innerhalb der Frequenzgruppe selektiert und zur Erzeugung des nachgebildeten Geräuschsignals weiterverwendet wird.
    6. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass die Selektion der Frequenz bzw. des Frequenzbandes mit der größten Signalenergie innerhalb der Frequenzgruppe vor Schritt (c) bzw. vor Schritt (d) erfolgt.
    7. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass in Schritt (b) das Frequenzspektrum des abgezweigten TK-Signals nur in einem vorgegebenen Frequenzbereich erzeugt wird.
    8. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass in Schritt (c) ein Frequenzspektrum zwischengespeichert wird, das durch eine Mittelung des aktuell in Schritt (b) erzeugten Frequenzspektrums mit vorher erzeugten Frequenzspektren gewonnen wird.
    9. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass die Mittelung mit unterschiedlicher relativer Wichtung des aktuell erzeugten Frequenzspektrums in unterschiedlichen Frequenzbereichen erfolgt.
    10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, dass die Wichtung nach Kriterien der Psychoakustik gemäß den Mittelwerten des Wahrnehmungsspektrums des menschlichen Gehörs erfolgt.
    11. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass in Schritt (e) ein nach vorgegebenen Kriterien mit einem Wichtungsfaktor a < 1 gewichtetes nachgebildetes Geräuschsignal vom vom aktuell ankommenden TK-Signal abgezogen wird.
    12. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass dem in Schritt (d) erzeugten nachgebildeten Geräuschsignal vor Schritt (e) ein synthetisches Geräuschsignal beigemischt wird.
    13. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass das aktuell ankommende TK-Signal vor Schritt (e) einer definierten Zeitverzögerung unterworfen wird, die vorzugsweise so ausgelegt ist, dass die Phasenlage des ankommenden TK-Signals mit der Phasenlage des nachgebildeten Geräuschsignals vor dem Abzug übereinstimmt.
    14. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass das aktuell ankommende TK-Signal unverzögert dem Abzug in Schritt (e) zugeführt wird, und dass das nachgebildete Geräuschsignal in seiner Phasenlage vor Schritt (e) an die Phasenlage des aktuell ankommenden TK-Signals angepasst wird.
    EP01440083A 2000-04-08 2001-03-22 Geräuschunterdrückung im Zeitbereich Expired - Lifetime EP1143416B1 (de)

    Applications Claiming Priority (2)

    Application Number Priority Date Filing Date Title
    DE10017646A DE10017646A1 (de) 2000-04-08 2000-04-08 Geräuschunterdrückung im Zeitbereich
    DE10017646 2000-04-08

    Publications (3)

    Publication Number Publication Date
    EP1143416A2 true EP1143416A2 (de) 2001-10-10
    EP1143416A3 EP1143416A3 (de) 2004-04-21
    EP1143416B1 EP1143416B1 (de) 2005-11-16

    Family

    ID=7638139

    Family Applications (1)

    Application Number Title Priority Date Filing Date
    EP01440083A Expired - Lifetime EP1143416B1 (de) 2000-04-08 2001-03-22 Geräuschunterdrückung im Zeitbereich

    Country Status (8)

    Country Link
    US (1) US6801889B2 (de)
    EP (1) EP1143416B1 (de)
    JP (1) JP2001350498A (de)
    CN (1) CN1225104C (de)
    AT (1) ATE310305T1 (de)
    AU (1) AU3336101A (de)
    DE (2) DE10017646A1 (de)
    HU (1) HUP0101288A2 (de)

    Cited By (1)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    WO2013140070A1 (fr) * 2012-03-22 2013-09-26 Bodysens Procédé, terminal et casque de communication vocale full-duplex sans fil avec auto-synchronisation sans maître ni base

    Families Citing this family (49)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    US7117149B1 (en) * 1999-08-30 2006-10-03 Harman Becker Automotive Systems-Wavemakers, Inc. Sound source classification
    US8019091B2 (en) 2000-07-19 2011-09-13 Aliphcom, Inc. Voice activity detector (VAD) -based multiple-microphone acoustic noise suppression
    US20030179888A1 (en) * 2002-03-05 2003-09-25 Burnett Gregory C. Voice activity detection (VAD) devices and methods for use with noise suppression systems
    US9066186B2 (en) 2003-01-30 2015-06-23 Aliphcom Light-based detection for acoustic applications
    US7885420B2 (en) 2003-02-21 2011-02-08 Qnx Software Systems Co. Wind noise suppression system
    US7895036B2 (en) * 2003-02-21 2011-02-22 Qnx Software Systems Co. System for suppressing wind noise
    US7725315B2 (en) * 2003-02-21 2010-05-25 Qnx Software Systems (Wavemakers), Inc. Minimization of transient noises in a voice signal
    US7949522B2 (en) 2003-02-21 2011-05-24 Qnx Software Systems Co. System for suppressing rain noise
    US8271279B2 (en) 2003-02-21 2012-09-18 Qnx Software Systems Limited Signature noise removal
    US8326621B2 (en) 2003-02-21 2012-12-04 Qnx Software Systems Limited Repetitive transient noise removal
    US8073689B2 (en) * 2003-02-21 2011-12-06 Qnx Software Systems Co. Repetitive transient noise removal
    US7340397B2 (en) * 2003-03-03 2008-03-04 International Business Machines Corporation Speech recognition optimization tool
    US9099094B2 (en) 2003-03-27 2015-08-04 Aliphcom Microphone array with rear venting
    DE10330286B4 (de) * 2003-07-04 2005-08-18 Infineon Technologies Ag Verfahren und Vorrichtung zum Übertragen von Sprachsignalen über ein Datenübertragungsnetzwerk
    JP4340686B2 (ja) * 2004-03-31 2009-10-07 パイオニア株式会社 音声認識装置及び音声認識方法
    US20050254629A1 (en) * 2004-05-14 2005-11-17 China Zhu X Measurement noise reduction for signal quality evaluation
    DE102004036154B3 (de) * 2004-07-26 2005-12-22 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur robusten Klassifizierung von Audiosignalen sowie Verfahren zu Einrichtung und Betrieb einer Audiosignal-Datenbank sowie Computer-Programm
    US8543390B2 (en) 2004-10-26 2013-09-24 Qnx Software Systems Limited Multi-channel periodic signal enhancement system
    US7610196B2 (en) * 2004-10-26 2009-10-27 Qnx Software Systems (Wavemakers), Inc. Periodic signal enhancement system
    US8306821B2 (en) * 2004-10-26 2012-11-06 Qnx Software Systems Limited Sub-band periodic signal enhancement system
    US7716046B2 (en) * 2004-10-26 2010-05-11 Qnx Software Systems (Wavemakers), Inc. Advanced periodic signal enhancement
    US8170879B2 (en) 2004-10-26 2012-05-01 Qnx Software Systems Limited Periodic signal enhancement system
    US7680652B2 (en) 2004-10-26 2010-03-16 Qnx Software Systems (Wavemakers), Inc. Periodic signal enhancement system
    US7949520B2 (en) 2004-10-26 2011-05-24 QNX Software Sytems Co. Adaptive filter pitch extraction
    US8284947B2 (en) * 2004-12-01 2012-10-09 Qnx Software Systems Limited Reverberation estimation and suppression system
    US8027833B2 (en) * 2005-05-09 2011-09-27 Qnx Software Systems Co. System for suppressing passing tire hiss
    US7676046B1 (en) 2005-06-09 2010-03-09 The United States Of America As Represented By The Director Of The National Security Agency Method of removing noise and interference from signal
    US7492814B1 (en) 2005-06-09 2009-02-17 The U.S. Government As Represented By The Director Of The National Security Agency Method of removing noise and interference from signal using peak picking
    US8311819B2 (en) * 2005-06-15 2012-11-13 Qnx Software Systems Limited System for detecting speech with background voice estimates and noise estimates
    US8170875B2 (en) * 2005-06-15 2012-05-01 Qnx Software Systems Limited Speech end-pointer
    EP1930880B1 (de) 2005-09-02 2019-09-25 NEC Corporation Verfahren und vorrichtung zur rauschunterdrückung und computerprogramm
    US7599430B1 (en) * 2006-02-10 2009-10-06 Xilinx, Inc. Fading channel modeling
    FR2899372B1 (fr) * 2006-04-03 2008-07-18 Adeunis Rf Sa Systeme de communication audio sans fil
    US7844453B2 (en) 2006-05-12 2010-11-30 Qnx Software Systems Co. Robust noise estimation
    US8335685B2 (en) 2006-12-22 2012-12-18 Qnx Software Systems Limited Ambient noise compensation system robust to high excitation noise
    US8326620B2 (en) 2008-04-30 2012-12-04 Qnx Software Systems Limited Robust downlink speech and noise detector
    US8850154B2 (en) 2007-09-11 2014-09-30 2236008 Ontario Inc. Processing system having memory partitioning
    US8904400B2 (en) 2007-09-11 2014-12-02 2236008 Ontario Inc. Processing system having a partitioning component for resource partitioning
    US8694310B2 (en) 2007-09-17 2014-04-08 Qnx Software Systems Limited Remote control server protocol system
    US8209514B2 (en) 2008-02-04 2012-06-26 Qnx Software Systems Limited Media processing system having resource partitioning
    WO2009140792A1 (zh) * 2008-05-21 2009-11-26 Lin Han 降低音频干扰的方法及其装置
    US8543061B2 (en) 2011-05-03 2013-09-24 Suhami Associates Ltd Cellphone managed hearing eyeglasses
    JP5752324B2 (ja) 2011-07-07 2015-07-22 ニュアンス コミュニケーションズ， インコーポレイテッド 雑音の入った音声信号中のインパルス性干渉の単一チャネル抑制
    CA2995482C (en) 2013-09-12 2018-07-24 Saudi Arabian Oil Company Dynamic threshold methods, systems, computer readable media, and program code for filtering noise and restoring attenuated high-frequency components of acoustic signals
    CN110265058B (zh) 2013-12-19 2023-01-17 瑞典爱立信有限公司 估计音频信号中的背景噪声
    US9691378B1 (en) * 2015-11-05 2017-06-27 Amazon Technologies, Inc. Methods and devices for selectively ignoring captured audio data
    DE102017203469A1 (de) * 2017-03-03 2018-09-06 Robert Bosch Gmbh Verfahren und eine Einrichtung zur Störbefreiung von Audio-Signalen sowie eine Sprachsteuerung von Geräten mit dieser Störbefreiung
    CN110136733B (zh) * 2018-02-02 2021-05-25 腾讯科技（深圳）有限公司 一种音频信号的解混响方法和装置
    US10957342B2 (en) * 2019-01-16 2021-03-23 Cirrus Logic, Inc. Noise cancellation

    Citations (2)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    US5903819A (en) * 1996-03-13 1999-05-11 Ericsson Inc. Noise suppressor circuit and associated method for suppressing periodic interference component portions of a communication signal
    US6038532A (en) * 1990-01-18 2000-03-14 Matsushita Electric Industrial Co., Ltd. Signal processing device for cancelling noise in a signal

    Family Cites Families (6)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    DE4229912A1 (de) 1992-09-08 1994-03-10 Sel Alcatel Ag Verfahren zum Verbessern der Übertragungseigenschaften einer elektroakustischen Anlage
    US5960389A (en) * 1996-11-15 1999-09-28 Nokia Mobile Phones Limited Methods for generating comfort noise during discontinuous transmission
    US6175602B1 (en) * 1998-05-27 2001-01-16 Telefonaktiebolaget Lm Ericsson (Publ) Signal noise reduction by spectral subtraction using linear convolution and casual filtering
    US6122610A (en) * 1998-09-23 2000-09-19 Verance Corporation Noise suppression for low bitrate speech coder
    US6507623B1 (en) * 1999-04-12 2003-01-14 Telefonaktiebolaget Lm Ericsson (Publ) Signal noise reduction by time-domain spectral subtraction
    US6523003B1 (en) * 2000-03-28 2003-02-18 Tellabs Operations, Inc. Spectrally interdependent gain adjustment techniques

    Patent Citations (2)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    US6038532A (en) * 1990-01-18 2000-03-14 Matsushita Electric Industrial Co., Ltd. Signal processing device for cancelling noise in a signal
    US5903819A (en) * 1996-03-13 1999-05-11 Ericsson Inc. Noise suppressor circuit and associated method for suppressing periodic interference component portions of a communication signal

    Non-Patent Citations (1)

    * Cited by examiner, † Cited by third party
    Title
    LIM J S ET AL: "ENHANCEMENT AND BANDWIDTH COMPRESSION OF NOISY SPEECH" PROCEEDINGS OF THE IEEE, IEEE. NEW YORK, US, Bd. 67, Nr. 12, Dezember 1979 (1979-12), Seiten 1586-1604, XP000891496 ISSN: 0018-9219 *

    Cited By (3)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    WO2013140070A1 (fr) * 2012-03-22 2013-09-26 Bodysens Procédé, terminal et casque de communication vocale full-duplex sans fil avec auto-synchronisation sans maître ni base
    FR2988549A1 (fr) * 2012-03-22 2013-09-27 Bodysens Procede, terminal et casque de communication vocale sans fil avec auto-synchronisation
    US9479278B2 (en) 2012-03-22 2016-10-25 Bodysens Method, terminal and headset for wireless full-duplex voice communication with auto-sync without base or sync-master

    Also Published As

    Publication number Publication date
    ATE310305T1 (de) 2005-12-15
    EP1143416B1 (de) 2005-11-16
    AU3336101A (en) 2001-10-11
    EP1143416A3 (de) 2004-04-21
    CN1325222A (zh) 2001-12-05
    US6801889B2 (en) 2004-10-05
    HU0101288D0 (en) 2001-06-28
    JP2001350498A (ja) 2001-12-21
    DE10017646A1 (de) 2001-10-11
    DE50108051D1 (de) 2005-12-22
    HUP0101288A2 (hu) 2001-12-28
    CN1225104C (zh) 2005-10-26
    US20010028713A1 (en) 2001-10-11

    Similar Documents

    Publication Publication Date Title
    EP1143416B1 (de) Geräuschunterdrückung im Zeitbereich
    DE69827911T2 (de) Verfahren und einrichtung zur mehrkanaligen kompensation eines akustischen echos
    DE69931580T2 (de) Identifikation einer akustischer Anordnung mittels akustischer Maskierung
    DE602004004242T2 (de) System und Verfahren zur Verbesserung eines Audiosignals
    DE60222813T2 (de) Hörgerät und methode für das erhöhen von redeverständlichkeit
    EP0912974B1 (de) Verfahren zur verringerung von störungen eines sprachsignals
    DE112016006218B4 (de) Schallsignal-Verbesserungsvorrichtung
    EP2158588B1 (de) Spektralglättungsverfahren von verrauschten signalen
    EP1103956B1 (de) Exponentielle Echo- und Geräuschabsenkung in Sprachpausen
    DE112007003625T5 (de) Echounterdrückungsvorrichtung, echounterdrückungssystem, Echounterdrückungsverfahren und Computerprogramm
    DE102008031150B3 (de) Verfahren zur Störgeräuschunterdrückung und zugehöriges Hörgerät
    EP3197181B1 (de) Verfahren zur reduktion der latenzzeit einer filterbank zur filterung eines audiosignals sowie verfahren zum latenzarmen betrieb eines hörsystems
    EP3454572A1 (de) Verfahren zum erkennen eines defektes in einem hörinstrument
    EP3393143B1 (de) Verfahren zum betrieb eines hörgerätes
    DE10043064B4 (de) Verfahren und Vorrichtung zur Elimination von Lautsprecherinterferenzen aus Mikrofonsignalen
    EP1155561B1 (de) Vorrichtung und verfahren zur geräuschunterdrückung in fernsprecheinrichtungen
    EP3065417B1 (de) Verfahren zur unterdrückung eines störgeräusches in einem akustischen system
    EP1239455A2 (de) Verfahren und Anordnung zur Durchführung einer an die Übertragungsfunktion menschilcher Sinnesorgane angepassten Fourier Transformation sowie darauf basierende Vorrichtungen zur Geräuschreduktion und Spracherkennung
    DE602004006912T2 (de) Verfahren zur Verarbeitung eines akustischen Signals und ein Hörgerät
    DE60033039T2 (de) Vorrichtung und verfahren zur unterdrückung von zischlauten unter verwendung von adaptiven filteralgorithmen
    DE102019102414B4 (de) Verfahren und System zur Detektion von Reibelauten in Sprachsignalen
    DE10137348A1 (de) Verfahren und Schaltungsanordnung zur Geräuschreduktion bei der Sprachübertragung in Kommunikationssystemen
    EP1351550B1 (de) Verfahren zur Anpassung einer Signalverstärkung in einem Hörgerät sowie ein Hörgerät
    DE10016619A1 (de) Verfahren zur Herabsetzung von Störkomponenten in Sprachsignalen
    DE102018131687B4 (de) Verfahren und vorrichtungen zur reduzierung von ploppgeräuschen

    Legal Events

    Date Code Title Description
    PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

    Free format text: ORIGINAL CODE: 0009012

    AK Designated contracting states

    Kind code of ref document: A2

    Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

    AX Request for extension of the european patent

    Free format text: AL;LT;LV;MK;RO;SI

    PUAL Search report despatched

    Free format text: ORIGINAL CODE: 0009013

    AK Designated contracting states

    Kind code of ref document: A3

    Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

    AX Request for extension of the european patent

    Extension state: AL LT LV MK RO SI

    17P Request for examination filed

    Effective date: 20040323

    AKX Designation fees paid

    Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

    GRAP Despatch of communication of intention to grant a patent

    Free format text: ORIGINAL CODE: EPIDOSNIGR1

    GRAS Grant fee paid

    Free format text: ORIGINAL CODE: EPIDOSNIGR3

    GRAA (expected) grant

    Free format text: ORIGINAL CODE: 0009210

    AK Designated contracting states

    Kind code of ref document: B1

    Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: IE

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20051116

    Ref country code: NL

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20051116

    Ref country code: FI

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20051116

    REG Reference to a national code

    Ref country code: GB

    Ref legal event code: FG4D

    Free format text: NOT ENGLISH

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: EP

    GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)
    REG Reference to a national code

    Ref country code: IE

    Ref legal event code: FG4D

    Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

    REF Corresponds to:

    Ref document number: 50108051

    Country of ref document: DE

    Date of ref document: 20051222

    Kind code of ref document: P

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: GR

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20060216

    Ref country code: SE

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20060216

    Ref country code: DK

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20060216

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: ES

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20060227

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: AT

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060322

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: CH

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060331

    Ref country code: BE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060331

    Ref country code: MC

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060331

    Ref country code: LU

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060331

    Ref country code: LI

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20060331

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: PT

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20060417

    NLV1 Nl: lapsed or annulled due to failure to fulfill the requirements of art. 29p and 29m of the patents act
    ET Fr: translation filed
    REG Reference to a national code

    Ref country code: IE

    Ref legal event code: FD4D

    PLBE No opposition filed within time limit

    Free format text: ORIGINAL CODE: 0009261

    STAA Information on the status of an ep patent application or granted ep patent

    Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

    26N No opposition filed

    Effective date: 20060817

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PL

    BERE Be: lapsed

    Owner name: ALCATEL

    Effective date: 20060331

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: TR

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20051116

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: CY

    Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

    Effective date: 20051116

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: IT

    Payment date: 20110325

    Year of fee payment: 11

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: IT

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20120322

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: GC

    Effective date: 20140717

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: RG

    Effective date: 20141016

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 15

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 16

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: PLFP

    Year of fee payment: 17

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: FR

    Payment date: 20170322

    Year of fee payment: 17

    Ref country code: DE

    Payment date: 20170322

    Year of fee payment: 17

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: GB

    Payment date: 20170322

    Year of fee payment: 17

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R119

    Ref document number: 50108051

    Country of ref document: DE

    GBPC Gb: european patent ceased through non-payment of renewal fee

    Effective date: 20180322

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: DE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20181002

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: GB

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20180322

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: FR

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20180331

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R082

    Ref document number: 50108051

    Country of ref document: DE

    Representative=s name: BARKHOFF REIMANN VOSSIUS, DE

    Ref country code: DE

    Ref legal event code: R081

    Ref document number: 50108051

    Country of ref document: DE

    Owner name: WSOU INVESTMENTS, LLC, LOS ANGELES, US

    Free format text: FORMER OWNER: ALCATEL LUCENT, PARIS, FR