EP0689191A2 - Mobile transceiver - Google Patents

Mobile transceiver Download PDF

Info

Publication number
EP0689191A2
EP0689191A2 EP95201578A EP95201578A EP0689191A2 EP 0689191 A2 EP0689191 A2 EP 0689191A2 EP 95201578 A EP95201578 A EP 95201578A EP 95201578 A EP95201578 A EP 95201578A EP 0689191 A2 EP0689191 A2 EP 0689191A2
Authority
EP
European Patent Office
Prior art keywords
values
speech
delay
speech signal
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP95201578A
Other languages
German (de)
French (fr)
Other versions
EP0689191B1 (en
EP0689191A3 (en
Inventor
Martin Dipl.-Ing. C/O Philips Rainer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Philips Intellectual Property and Standards GmbH
Koninklijke Philips NV
Original Assignee
Philips Corporate Intellectual Property GmbH
Philips Patentverwaltung GmbH
Koninklijke Philips Electronics NV
Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Philips Corporate Intellectual Property GmbH, Philips Patentverwaltung GmbH, Koninklijke Philips Electronics NV, Philips Electronics NV filed Critical Philips Corporate Intellectual Property GmbH
Publication of EP0689191A2 publication Critical patent/EP0689191A2/en
Publication of EP0689191A3 publication Critical patent/EP0689191A3/en
Application granted granted Critical
Publication of EP0689191B1 publication Critical patent/EP0689191B1/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166Microphone arrays; Beamforming

Definitions

  • the invention relates to a mobile radio terminal with a speech processing device.
  • noise signals are often contained in speech signals to be processed, which leads to a reduction in speech quality and thus, in particular, to poor speech intelligibility.
  • This problem occurs, for example, in the case of mobile radio terminals which are used in motor vehicles and have a hands-free device.
  • Speech signals that are received by microphones of the hands-free system arranged in the motor vehicle contain, on the one hand, speech signal components that are generated by the respective user (voice source) of the mobile radio terminal within the motor vehicle, and, on the other hand, noise signal components that result from other ambient noises and while driving, essentially from the engine and Driving noises exist.
  • the difference between two samples of two mutually time-shifted signals is formed to form the error values, one of the signals being delayed.
  • the corresponding delay value is rounded to an integer multiple of a sampling interval of the signals. Convergence problems occur in such a way that strong oscillations of the rounded delay values occur when very small error values are reached.
  • the delay values oscillate between two rounded delay values at a sampling interval.
  • the invention has for its object to improve the speech quality of the speech signals to be processed and to reduce convergence problems.
  • the gradient estimates serve to estimate the respective gradient of the performance of the error values or, in other words, the squared error values.
  • the control means determine the delay estimates so that the performance of the error values is reduced.
  • the convergence of the delay values determined from the delay estimated values is considerably improved since the delay estimated values have a higher resolution than the delay values due to the rounding. In this way, oscillations of the delay values are essentially avoided.
  • the resolution of the delay values is chosen to be lower than the resolution of the delay estimated values in order to keep the technical effort involved in delaying the speech signals as low as possible.
  • the signal / noise power ratio and the speech quality of a sum signal present at the output of the adding device are improved compared to the signal / noise power ratio and the speech quality of the individual speech signals.
  • the digital filter is a digital Hilbert transformer.
  • a digital Hilbert transformer which causes a phase shift of 90 degrees for all frequencies, has the transfer function of a low pass in terms of amount, so that the rounded delay values converge well, particularly for the low frequencies that are essential for a speech signal.
  • the Hilbert transformer can also be replaced by a differentiator, for example, which also causes a phase shift of 90 degrees.
  • a differentiator has a linearly increasing transfer function in terms of amount, so that in particular the low frequencies of a speech signal are suppressed, so that there is no convergence as good as that of a Hilbert transformer.
  • means for smoothing the gradient estimates are provided.
  • the speech processing device is provided for processing three speech signals.
  • the signal / noise power ratio and the speech quality of the sum signal present at the output of the adding device can be improved in this way.
  • the invention can also be designed in such a way that the use of a linear combination of error values is provided for determining a delay estimate for the further speech signal.
  • delay means are provided for delaying the first speech signal with a fixed delay time.
  • the speech processing device is integrated in a hands-free device.
  • the speech processing device shown in FIG. 1 contains two microphones M1 and M2. These are used to convert acoustic to electrical voice signals, which are made up of speech and noise signal components.
  • the speech signal components come from a single speech source (speaker), which as a rule has different distances from the two microphones M1 and M2.
  • the speech signal components are thus highly correlated.
  • the noise signal components of the two speech signals received by the microphones M1 and M2 are ambient noises generated by the individual speech source, which can be assumed to be uncorrelated or only slightly correlated with suitable microphone spacings in the range from 10 to 60 cm if the microphones reverberated in a so-called Environment such as in the car or in an office. If the speech source and speech processing device are located in a motor vehicle, for example, the noise signal components are caused in particular by engine and driving noises.
  • the microphone signals generated by the microphones M1 and M2 are digitized by analog-digital converters 1 and 2.
  • the resulting digitized and thus present as samples x1 (i) and x2 (i) microphone signals are evaluated by a control device 3, which is used to control and set a delay element 4.
  • the sampled microphone signals x1 (i) and x2 (i) are referred to below as microphone or speech signals.
  • the delay element 4 delays the microphone signal x1 with delay values T1 that can be set by the control device 3.
  • An adding device 5 adds the microphone signal x1 (i) delayed by the delay element 4 and the microphone signal x2 (i) delayed by a delay element 16 with a constant time delay T max .
  • the delay element 16 is provided in order to be able to set both a leading and a lagging of the microphone signal x1 (i) relative to the microphone signal x2 (i).
  • a sum signal X (i) present at the output of the adding device 5 is a sampled speech signal, the signal / noise power ratio of which is increased compared to the signal / noise power ratios of the speech signals x1 (i) and x2 (i).
  • the addition by the adder 5 increases the power of the voice signal components of the two voice signals x1 (i) and x2 (i) by approximately a factor of 4 and increases the power of the noise signal components only approximately caused by a factor of 2. This results in an improvement in the power-related signal / noise power ratio of approximately 3 dB.
  • Fig. 2 the operation of the control device 3 is explained in more detail using a block diagram.
  • the speech signal estimates x1 int (i) are values that result from an interpolation of samples of the speech signal x1 (i). The determination of the speech signal estimates x1 int (i) will be explained later.
  • i is a variable which can take integer values and with which, on the one hand, sampling times of the speech signals x1 (i) and x2 (i) and, on the other hand, also program cycles of the programmable control device 3 having control means 3, are indicated, with one new sample value per speech signal in each program cycle is processed.
  • a digital filter 6 carries out a Hilbert transformation of the sample values x2 (i):
  • the digital filter 6 supplying the values x2 H (i) of x2 (i) is an FIR filter of the order K, which has coefficients h (0), h (1), ..., h (K).
  • K is sixteen, so that the digital filter 6 has seventeen coefficients.
  • the amount of the digital filter 6 has the transfer function of a low pass. It continues to produce a 90 degree phase shift.
  • the fixed phase shift of 90 degrees is the decisive property of the digital filter 6, the course of the amount of the transfer function is not decisive for the functioning of the speech processing device.
  • the digital filter 6 can thus also be implemented with the aid of a differentiator, which would, however, lead to a suppression of low-frequency components of x2 (i) and thus to a reduced performance of the speech processing device.
  • N indicates the number of samples of x1 used in the calculation. N is, for example, equal to 65.
  • the multiplication by 1 / P x2 (i) serves to avoid instabilities in the control device 3 when the delay element 4 is controlled an estimated on the short-term power P x2 (i) graded gradient degree (i) of the squares or the power of the error values e12 (i) in the program cycle i.
  • a function block 7 continuously forms estimated values SNR (i) of the associated signal / noise power ratio from the samples of the speech signal x2 (i), which are evaluated by a function block 8.
  • An evaluation of the speech signal x1 (i) instead of the speech signal x2 (i) is also possible without the functionality of the speech processing device being restricted.
  • the functioning of the function block 7 will be explained in more detail later with reference to FIGS. 6 to 8.
  • Function block 8 carries out a threshold decision regarding the estimated values SNR (i). Only if the estimated values SNR (i) lie above a predefinable threshold is an intermediate memory 9 overwritten with the newly determined gradient estimated value grad (i). This case is symbolized by the closed position of a switch 11 which is controlled by the function block 8.
  • the memory content (degree (i)) of the intermediate memory 9 is further processed by a functional unit 10.
  • a functional unit 10 In the event that an estimated value SNR (i) lies below the predefinable threshold value, the buffer 9 is not overwritten with the newly determined gradient estimated value grad (i) and it retains its old memory content, which is symbolized by the open position of the switch 11 .
  • the predefinable threshold, on which the opening and closing of the switch 11 by the function block 8 depends, is preferably between 0 and 10 dB.
  • the intermediate memory 9 supplies the gradient estimated values grad (i) stored in it to the functional unit 10, to which sample values of the speech signal x1 (i) are also supplied and which is used both for supplying the speech signal estimated values x1 int (i) and for setting the delay element 4.
  • is a constant that has the value 0.95 in the exemplary embodiment.
  • Delay estimated values T1 '(i) are thus determined recursively.
  • is a constant factor or convergence parameter and is in the range R x2x2 denotes an autocorrelation function of the speech signal x2 (i) at the zero position.
  • a particularly advantageous value range of ⁇ in the present exemplary embodiment is 1.5 ⁇ ⁇ 3.
  • the delay estimated values T1 '(i) can also be non-integer values, ie non-integer multiples of a sampling interval.
  • a function block 14 rounds the delay estimated values T1 '(i) to integer delay values T1 (i) with which the delay device 4 is set. The rounding operation by function block 14 is necessary since values of the speech signal x1 (i) to be delayed by the delay element 4 are only available at the corresponding sampling times.
  • Function block 15 is thus able to use the speech signal estimate x1 int (i) in program cycle i to form or interpolate a value of speech signal x1 at time i + T1 (i), ie at a time between two sampling times.
  • the described interpolation by function block 15 can be replaced by function block 15 performing low-pass filtering of the sample values x1 (i) for the interpolation of values between the sample times.
  • the corresponding true time delay between the speech signal components which is determined by the different distances from the speaker to the microphones M1 and M2, would lie between these two delay values.
  • such oscillations are avoided by using speech signal estimates x1 int (i) when the error values are formed, by which the values of the speech signal x1 (i) are also used for delays by non-integer numbers Multiples of a sampling interval are available, ie also at times other than the sampling times i of the speech signal x1 (i).
  • the function block 12 used to smooth the gradient estimated values grad (i) brings about an improved determination of the delay estimated values T1 '(i).
  • the control device 3 adapts the delay estimates T1 '(i) or the delay values T1 (i) so that the square or the power of the error values e 1 (i) is reduced from one program cycle to the next. The convergence of T1 '(i) or T1 (i) is thus ensured.
  • FIG. 3 shows a speech processing device which works in principle like the speech processing device from FIG. 1 and now has three microphones M1, M2 and M3 for the delivery of microphone or speech signals.
  • the microphone signals are fed to analog-to-digital converters 20, 21 and 22, which deliver digitized and thus sampled speech signals x1 (i), x2 (i) and x3 (i), which consist of speech and noise signal components.
  • the speech signals x1 (i) and x3 (i) are supplied to adjustable delay elements 23 and 24.
  • the speech signal x2 (i) is fed to a delay element 27 with a fixed delay time T max.
  • the output values of the delay elements 23, 24 and 27 are added to the sum signal X (i) by an adding device 25.
  • a control device 26 evaluates the sample values of the speech signals x1 (i), x2 (i) and x3 (i) and derives rounded integer delay values T1 (i) and T3 () from these sample values analogously to the mode of operation of the control device 3 from FIGS. i) ab, which correspond to the integer multiples of a sampling interval of the sampled speech signals x1 (i), x2 (i) and x3 (i) and with which the delay elements 23 and 24 are set, so that an expansion from two to three microphone to be processed or voice signals is enabled.
  • FIG. 4 shows a first embodiment of the control device 26 from FIG. 3.
  • Two functional units 10 are provided, the structure of which is identical to the structure of the functional unit 10 from FIG. 2 and which are used to set the delay elements 23 and 24 with the rounded time delay values T1 (i) and T3 (i).
  • the upper functional unit 10 provides speech signal estimates x1 int (i).
  • the lower functional unit 10 supplies speech signal estimates x3 int (i). From a difference x1 int (i) - x2 (i) and from a difference x3 int (i) - x2 (i) error values e12 (i) and e32 (i) are formed.
  • a digital filter 6 which has already been described in more detail in the explanations relating to FIG. 2, and which serves to receive the sample values x2 (i) and to supply values x2 H (i) which are obtained by a Hilbert transformation of the Samples x2 (i) are generated.
  • the values x2 H (i) are multiplied on the one hand by the error values e12 (i) and on the other hand by the error values e32 (i).
  • the first product x2 H (i) * e12 (i) is the upper, the second product x2 H (i) * e32 (i) is fed to the lower functional unit 10.
  • the arrangement of the function blocks 7 and 8, the buffer 9 and the switch 11 is carried out analogously to FIG. 2 and is not shown in FIG. 4 for reasons of clarity.
  • FIG. 5 shows a version of the control device 26 that is expanded compared to FIG. 4.
  • three digital filters 6 are now arranged instead of just one digital filter 6. These form the values x1 H (i), x2 H (i) and x3 H (i) from the speech signal samples x1 (i), x2 (i) and x3 (i) by Hilbert transformation.
  • error values e31 (i) and e32 (i) are formed in the lower half of the block diagram shown in FIG. 5.
  • the error values e31 (i) result from the difference x3 int (i) -x1 (i) .
  • the error values e32 (i) are the difference x3 int (i) -x2 (i) educated.
  • a third product 0.3 * e31 (i) * x1 H (i) and a fourth product 0.7 * e32 (i) * x2 H (i) are added up and the resulting sum is fed to the lower functional unit 10.
  • a sum signal X (i) which is improved compared to the speech processing device with two microphones according to FIG. 1 can be generated.
  • the signal / noise power ratio and thus the speech quality of the sum signal X (i) of the speech processing device according to FIG. 3 is further increased compared to the sum signal X (i) generated by the speech processing device according to FIG. 1.
  • the control device according to FIG. 5 has an increased stability compared to the control device according to FIG. 4 when used in the speech processing device according to FIG. 3.
  • the invention can be designed in such a way that the delay estimated values T1 '(i) and T3' (i) (e.g., floating point numbers) to form the delay values T1 (i) and T3 (i) are not rounded to values which correspond to an integer multiple of a sampling interval (here: integers), but to values which correspond to a multiple of a fraction of a sampling interval .
  • integers integer multiple of a sampling interval
  • rounding the delay estimated values to multiples of a value which corresponds to a quarter or half of a sampling interval is advantageous.
  • the resolution of the delay values is increased, which can thus be adjusted more precisely, so that the speech quality of the sum signals X (i) is further increased, since time differences from the speech source producing the speech signal components to the microphones M1, M2 and M3 are more precisely compensated can.
  • interpolation or low pass filtering of speech signal samples is provided to produce speech signal values that lie between two speech signal samples.
  • the interpolation or low-pass filtering can in particular be integrated into the delay means 4, 23 and 24.
  • the scheme is explained, on the basis of which the function block 7 from a sampled speech signal x (i), which consists of noise and speech signal components, the associated estimated values SNR (i) of the signal / noise power ratio, that is Ratio of the power of the speech signal components to the power of the noise signal components, determined.
  • the sample values x2 (i) correspond to the sample values x (i).
  • the function block 7 is shown in FIG. 6 on the basis of a block diagram.
  • a functional block 30 is used to form power values P x (i) of the samples x (i) by squaring the samples. Function block 30 also smoothes these power values P x (i).
  • the resulting smoothed power values P x, s (i) are supplied to both function block 31 and function block 32.
  • Function block 31 continuously determines estimated values P n (i) for estimating the power of the noise signal component of the sampled values x (i), ie the power of the noise signal components of the sampled values x (i) is determined.
  • the function block 32 continuously determines estimated values SNR (i) of the signal / noise power ratio of the sampled values x (i).
  • FIG. 7 shows a flow chart which explains the function of the function block 7 in more detail.
  • the flow chart shows how estimated values SNR (i) of the corresponding signal / noise power ratio are formed from the sampled values x (i) of the speech signal x by a computer program.
  • a counter variable Z is set to 0 and a variable P Mmin is set to a value P max .
  • P max is chosen so large that the smoothed power values P x, s (i) are always smaller than P max .
  • P max can, for example, be set to the maximum representable numerical value of a computer used to implement the program.
  • a new sample value x (i) is read in in block 34.
  • a short-term power value P x (i) of a group of N successive sample values x (i) is determined using formula (1). N here is 128, for example.
  • Equation (2) The value ⁇ from equation (2) is between 0.95 and 0.98.
  • the determination of smoothed power values P x, s (i) can also only be carried out using equation (2), in which case however the value ⁇ should be increased approximately to the value 0.99 and P x (i) by x2 (i) is replace.
  • a branch 37 queries whether the smoothed power value P x, s (i) that has just been determined is less than P Mmin . If this question is answered in the affirmative, ie P x, s (i) is less than P Mmin , block 38 sets P Mmin to the value of P x, s (i). If the question of branch 37 is answered in the negative, block 38 is skipped. This means that the minimum of M smoothed power values P x, s is in P Mmin after M program cycles . Then the branch 39 is used to query whether the counter variable Z has a value greater than or equal to a value M. In this way it is determined whether M smoothed power values have already been processed.
  • SNR (i) [P x, p (i) - min ⁇ c * P n (i), P x, p (i) ⁇ ] / [c * P n (i)] a current estimate SNR (i) of the signal / noise power ratio of the speech signal x (i) is determined.
  • the product c * P n (i) is used to estimate the current power of the noise signal component
  • the difference P x, p (i) -c * P n (i) is used to estimate the current power of the speech signal component of the speech signal x (i).
  • the current power of the speech signal is estimated by the smoothed power value P x, s (i).
  • the weighting with a scaling factor c prevents P n (i) from estimating the noise signal power with a value that is too small.
  • the scaling factor c is typically in the range from 1.3 to 2.
  • the minimum formation in block 41 or equation (4) ensures that the non-logarithmic signal / noise power ratio SNR (i) is also positive if in exceptional cases c * P n (i) is greater than P x, s (i). Then the power of the noise signal component of the voice signal is set equal to the power of the voice signal estimated by P x, s (i).
  • the power of the speech signal component of the speech signal estimated by P x, s (i) -P x, s (i) is then equal to zero, as is the non-logarithmic signal / noise power ratio.
  • the program continues with the reading in of a new speech signal sample value x (i) by block 34.
  • P n (i) is set equal to P Mmin in block 45, so that an adaptation of the estimation of the noise signal component is accelerated takes place since P n (i) is determined at the minimum of the last (M ⁇ L) values. Then in block 46 the counter variable Z is reset to 0 and P Mmin again receives the value P max .
  • M successive smoothed P x, s (i) samples x (i) of the speech signal x are combined into a subgroup.
  • the minimum of the smoothed power values P x, s (i) is determined by the operations carried out with branch 37 and block 38.
  • the W minima determined last are stored in the components of the vector minvec. If the last W minima are not monotonically increasing (see branch 43), then a preliminary estimate P n (i) of the power of the noise signal component is determined from the minimum of the minima of the last W subgroups, ie from the minimum of a group, according to block 44.
  • the minimum of the last subgroup with M smoothed power values P x is determined by block 45 to estimate the current estimated value P n (i) of the power of the noise signal component . s (i) used. This shortens the time period with which monotonically increasing smoothed power values P x, s (i) also cause a change in the estimated values SNR (i).
  • the value P n (i) is determined from the minimum of the last W subgroup minima or the last L smoothed power values P x, s (i), which is used to estimate the noise signal power.
  • a realization with adjacent, ie non-overlapping groups is also conceivable. However, the time span between two estimated values SNR (i) is then increased with a reduced computing effort, so that the reaction time to changing SNR of the speech signal x (i) is increased.
  • the described speech processing device thus has an estimation device which is suitable for the continuous formation of estimated values SNR (i) of the signal / noise power ratio of noisy speech signals x (i). In particular, no speech pauses are required to estimate the noise signal power.
  • the estimation device described uses the special time profile of smoothed power values of the speech signal x (i), which is characterized by peaks and intermediate areas with smaller smoothed power values P x, s (i), their temporal expansion from the respective speech source, ie the respective speaker , depends. The areas between the peaks are used to estimate the power of the noise signal component.
  • the groups with L smoothed power values P x, s (i) must follow one another without gaps, ie they must either adjoin or overlap.
  • each group must contain so many smoothed power values P x, s (i) that at least all values belonging to any peak can be recorded. Since the most extended peaks can be estimated by the most extended phonemes of a speech signal, ie the vowels, the number L describing the group size can be derived from this. For a sampling rate of the speech signal of 8 kHz, a useful value of L is in the range between 3000 and 8000. An advantageous value for W is 4. With such a dimensioning, there is a good compromise between the computational effort and the speed of reaction of the function block 7.
  • FIG. 9 shows a use of the voice processing device from FIG. 3 in a mobile radio terminal 50.
  • the language processing means 20 to 26 are combined in a function block 51, which forms the sum signal values X (i) from the microphone or speech signals generated by the microphones M1, M2 and M3.
  • the microphones M1, M2 and M3 advantageously have a distance of 10 to 60 cm, so that in a so-called "reverberated" environment (eg car, office) the interference signal components of the speech signals supplied by the microphones M1, M2 and M3 are largely uncorrelated. This also applies when only two microphones are used as in FIG. 1.
  • a function block 52 which processes the sum signal values X (i) combines all the other means of the mobile radio terminal 50 for receiving, processing and transmitting signals which are used for communication with a base station (not shown) serve, the transmission and reception of signals via an antenna 54 coupled to the function block 52. Furthermore, a loudspeaker 53 coupled to the function block 52 is provided. A user (speaker, listener) communicates acoustically with the mobile radio terminal 50 via the microphones M1 to M3 and the loudspeaker 53, which are part of a hands-free device integrated in the mobile radio terminal 50.
  • the use of such a mobile radio terminal 50 is particularly advantageous in motor vehicles, since there the hands-free communication via the mobile radio terminal is particularly disturbed by engine or driving noise (noise).

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Noise Elimination (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

The terminal has an estimator continuously forming estimated values (SNR(i)) of the signal-to-noise ratio of the speech signal. Power values, Px(i), of sample values of the speech signal (x(i)) are derived and smoothed. The minimus of a group of L successive smoothed power values is derived. The groups follow on successively without any gap. Each group contains at least as many smoothed power values as needed so that all power values belonging to any phoneme of the speech signal can be detected from any group. An actual value of the signal to noise ratio is then formed from the smoothed power values and the derived minimus. <IMAGE>

Description

Die Erfindung betrifft ein Mobilfunkendgerät mit einer Sprachverarbeitungsvorrichtung.The invention relates to a mobile radio terminal with a speech processing device.

Auf dem Gebiet der Sprachverarbeitung sind häufig in zu verarbeitenden Sprachsignalen Rauschsignalanteile enthalten, was zur Verringerung der Sprachqualität und damit insbesondere zu einer verschlechterten Sprachverstandlichkeit fuhrt. Dieses Problem tritt beispielsweise bei Mobilfunkendgeräten auf, die in Kraftfahrzeugen verwendet werden und eine Freisprecheinrichtung aufweisen. Sprachsignale, die von im Kraftfahrzeug angeordneten Mikrophonen der Freisprecheinrichtung empfangen werden, enthalten einerseits Sprachsignalanteile, die vom jeweiligen Benutzer (Sprachquelle) des Mobilfunkendgerätes innerhalb des Kraftfahrzeuges erzeugt werden, und andererseits Rauschsignalanteile, die aus sonstigen Umgebungsgeräuschen und während einer Fahrt im wesentlichen aus Motor- und Fahrgeräuschen bestehen.In the field of speech processing, noise signals are often contained in speech signals to be processed, which leads to a reduction in speech quality and thus, in particular, to poor speech intelligibility. This problem occurs, for example, in the case of mobile radio terminals which are used in motor vehicles and have a hands-free device. Speech signals that are received by microphones of the hands-free system arranged in the motor vehicle contain, on the one hand, speech signal components that are generated by the respective user (voice source) of the mobile radio terminal within the motor vehicle, and, on the other hand, noise signal components that result from other ambient noises and while driving, essentially from the engine and Driving noises exist.

Aus "IEEE Transactions on Acoustics, Speech, and Signal Processing, VOL. ASSP-29, No. 3, June 1981, pp. 582-587" ist eine Anordnung zur adaptiven Schätzung von Zeitverzögerungen von zwei stark korrelierten Signalen in digitalen Systemen beschrieben. Eines der beiden Signale wird von einem steuerbaren Verzögerungsglied verzögert. Die Verzögerungswerte des Verzögerungsgliedes werden adaptiv an die korrelierten Signale angepaßt. Die Bestimmung der Verzögerungswerte erfolgt mit Hilfe eines Algorithmus, der mittlerweile von der Fachwelt als LMS-Algorithmus (Least Mean Square) bezeichnet wird. Dieser Algorithmus beruht auf der Minimierung der Leistung bzw. des Quadrates von Fehlerwerten, die sich durch Bildung der Differenz von dem verzögerten und dem nicht verzögerten Signal ergeben. Kern des LMS-Algorithmus ist die rekursive Berechnung der Verzögerungswerte mit Hilfe von Schätzwerten für den Gradienten der Leistung der Fehlerwerte."IEEE Transactions on Acoustics, Speech, and Signal Processing, VOL. ASSP-29, No. 3, June 1981, pp. 582-587" describes an arrangement for the adaptive estimation of time delays of two strongly correlated signals in digital systems. One of the two signals is delayed by a controllable delay element. The delay values of the delay element are adaptively adapted to the correlated signals. The delay values are determined with the help of an algorithm, which is now referred to by experts as the LMS algorithm (Least Mean Square). This algorithm is based on minimizing the power or the square of error values which result from the formation of the difference between the delayed and the non-delayed signal. The core of the LMS algorithm is the recursive calculation of the Delay values using estimates for the gradient of the performance of the error values.

Im oben zitierten Stand der Technik wird zur Bildung der Fehlerwerte jeweils die Differenz zweier Abtastwerte von zwei gegeneinander zeitversetzten Signalen gebildet, wobei eines der Signale verzögert wird. Der entsprechende Verzögerungswert ist auf ein ganzzahliges Vielfaches eines Abtastintervalls der Signale gerundet. Dabei treten Konvergenzprobleme derart auf, daß beim Erreichen sehr kleiner Fehlerwerte starke Oszillationen der gerundeten Verzögerungswerte auftreten. Die Verzögerungswerte oszillieren dabei zwischen zwei gerundeten Verzögerungswerten im Abstand eines Abtastintervalls.In the prior art cited above, the difference between two samples of two mutually time-shifted signals is formed to form the error values, one of the signals being delayed. The corresponding delay value is rounded to an integer multiple of a sampling interval of the signals. Convergence problems occur in such a way that strong oscillations of the rounded delay values occur when very small error values are reached. The delay values oscillate between two rounded delay values at a sampling interval.

Der Erfindung liegt die Aufgabe zugrunde, die Sprachqualität der zu verarbeitenden Sprachsignale zu verbessern und Konvergenzprobleme zu verringern.The invention has for its object to improve the speech quality of the speech signals to be processed and to reduce convergence problems.

Die Aufgabe wird dadurch gelöst, daß die Sprachverarbeitungsvorrichtung zur Verarbeitung eines ersten und mindestens eines weiteren aus Rausch- und Sprachsignalanteilen bestehenden und als Abtastwerte vorliegenden Sprachsignals vorgesehen ist, daß Verzögerungsmittel zur Verzögerung des abgetasteten weiteren Sprachsignals vorgesehen sind, daß Steuermittel

  • zur Bildung von Gradientenschätzwerten durch Multiplikation von Fehlerwerten für zwei Sprachsignale mit den Ausgangswerten eines Digitalfilters, das eine Phasenverschiebung von 90 Grad bewirkt und zur Filterung eines der zwei Sprachsignale dient,
  • zur rekursiven Ermittlung von Verzögerungsschätzwerten aus den Gradientenschätzwerten, wobei aus den Verzögerungsschätzwerten durch Rundung die Verzögerungswerte gebildet werden, die zur Einstellung der Verzögerungsmittel dienen und
  • zur Bildung jeweils wenigstens eines Fehlerwertes für einen bestimmten Abtastzeitpunkt aus der Differenz zwischen einem Sprachsignalschätzwert, der zur Abschätzung des weiteren Sprachsignals zu einem gegenüber dem bestimmten Abtastzeitpunkt um den Verzögerungsschätzwert verschobenen Zeitpunkt dient und durch Interpolation von Abtastwerten des weiteren Sprachsignals gebildet wird, und dem Abtastwert eines anderen der zu verarbeitenden Sprachsignale zu dem bestimmten Abtastzeitpunkt
vorgesehen sind und daß eine Addiervorrichtung zum Addieren der gegeneinander zeitversetzten Sprachsignale vorgesehen ist.The object is achieved in that the speech processing device is provided for processing a first and at least one further speech signal consisting of noise and speech signal components and present as samples, that delay means are provided for delaying the sampled further speech signal, that control means
  • to form gradient estimates by multiplying error values for two speech signals by the output values of a digital filter which causes a phase shift of 90 degrees and is used to filter one of the two speech signals,
  • for the recursive determination of delay estimated values from the gradient estimated values, the delay estimated values which are used for setting the delay means being formed from the delay estimated values by rounding
  • to form at least one error value for a specific sampling time from the difference between a speech signal estimate, which is used to estimate the further speech signal at a point in time shifted by the delay estimated value from the determined sampling time and is formed by interpolation of samples of the further speech signal, and the sampling value of another of the speech signals to be processed at the determined sampling time
are provided and that an adder for adding the mutually time-shifted speech signals is provided.

Die Gradientenschätzwerte dienen zur Abschätzung des jeweiligen Gradienten der Leistung der Fehlerwerte oder anders ausgedrückt der quadierten Fehlerwerte. Die Steuermittel bestimmen die Verzögerungsschätzwerte derart, daß die Leistung der Fehlerwerte verringert wird. Dabei wird die Konvergenz der aus den Verzögerungsschätzwerten ermittelten Verzögerungswerte erheblich verbessert, da die Verzögerungsschätzwerte gegenüber den Verzögerungswerten aufgrund der Rundung eine höhere Auflösung aufweisen. Oszillationen der Verzögerungswerte werden so im wesentlichen vermieden. Die Auflösung der Verzögerungswerte ist gegenüber der Auflösung der Verzögerungsschätzwerte geringer gewählt, um den technischen Aufwand beim Verzögern der Sprachsignale möglichst gering zu halten. Das Signal-/ Rauschleistungsverhältnis und die Sprachqualität eines am Ausgang der Addiervorrichtung anliegenden Summensignals sind gegenüber dem Signal-/ Rauschleistungsverhältnis und der Sprachqualität der einzelnen Sprachsignale verbessert.The gradient estimates serve to estimate the respective gradient of the performance of the error values or, in other words, the squared error values. The control means determine the delay estimates so that the performance of the error values is reduced. The convergence of the delay values determined from the delay estimated values is considerably improved since the delay estimated values have a higher resolution than the delay values due to the rounding. In this way, oscillations of the delay values are essentially avoided. The resolution of the delay values is chosen to be lower than the resolution of the delay estimated values in order to keep the technical effort involved in delaying the speech signals as low as possible. The signal / noise power ratio and the speech quality of a sum signal present at the output of the adding device are improved compared to the signal / noise power ratio and the speech quality of the individual speech signals.

In einer Ausgestaltung der Erfindung ist das Digitalfilter ein digitaler Hilbert-Transformator.In one embodiment of the invention, the digital filter is a digital Hilbert transformer.

Ein digitaler Hilbert-Transformator, der eine Phasenverschiebung von 90 Grad für alle Frequenzen bewirkt, besitzt betragsmäßig die Übertragungsfunktion eines Tiefpasses, so daß insbesondere für die tiefen und für ein Sprachsignal wesentlichen Frequenzen die gerundeten Verzögerungswerte gut konvergieren. Der Hilbert-Transformator kann beispielsweise auch durch einen Differenzierer ersetzt werden, der ebenfalls eine Phasenverschiebung von 90 Grad bewirkt. Allerdings hat ein Differenzierer betragsmaßig eine linear ansteigende Übertragungsfunktion, so daß insbesondere die tiefen Frequenzen eines Sprachsignals unterdrückt werden, so daß sich keine so gute Konvergenz wie bei einem Hilbert-Transformator ergibt.A digital Hilbert transformer, which causes a phase shift of 90 degrees for all frequencies, has the transfer function of a low pass in terms of amount, so that the rounded delay values converge well, particularly for the low frequencies that are essential for a speech signal. The Hilbert transformer can also be replaced by a differentiator, for example, which also causes a phase shift of 90 degrees. However, a differentiator has a linearly increasing transfer function in terms of amount, so that in particular the low frequencies of a speech signal are suppressed, so that there is no convergence as good as that of a Hilbert transformer.

In einer anderen Ausgestaltung sind Mittel zur Glättung der Gradientenschätzwerte vorgesehen.In another embodiment, means for smoothing the gradient estimates are provided.

Damit ergibt sich eine verbesserte Schätzung der Verzögerungsschätzwerte.This results in an improved estimate of the delay estimated values.

In einer weiteren Ausgestaltung ist die Sprachverarbeitungsvorrichtung zur Verarbeitung von drei Sprachsignalen vorgesehen.In a further embodiment, the speech processing device is provided for processing three speech signals.

Gegenüber einer Sprachverarbeitungsvorrichtung zur Verarbeitung von nur zwei Sprachsignalen läßt sich auf diese Weise das Signal-/ Rauschleistungsverhältnis und die Sprachqualitat des am Ausgang der Addiervorrichtung anliegenden Summensignals verbessern.Compared to a speech processing device for processing only two speech signals, the signal / noise power ratio and the speech quality of the sum signal present at the output of the adding device can be improved in this way.

Die Erfindung kann weiterhin dadurch ausgestaltet werden, daß zur Ermittlung eines Verzögerungsschätzwertes für das weitere Sprachsignal die Verwendung einer Linearkombination von Fehlerwerten vorgesehen ist.The invention can also be designed in such a way that the use of a linear combination of error values is provided for determining a delay estimate for the further speech signal.

Auf diese Weise wird die Stabilität der Sprachverarbeitungvorrichtung erhöht.In this way, the stability of the speech processing device is increased.

Für eine andere Ausgestaltung der Erfindung sind Verzögerungsmittel zur Verzögerung des ersten Sprachsignals mit einer festen Verzögerungszeit vorgesehen.For another embodiment of the invention, delay means are provided for delaying the first speech signal with a fixed delay time.

Ohne die eine feste Verzögerung bewirkenden Verzögerungsmittel sind nur Zeitversätze zwischen dem erstem und dem/den weiteren Sprachsignal(en) einstellbar, mit denen ein Vorlaufen des ersten Sprachsignals bewirkt wird. Je nach Position einer die Sprachsignalanteile erzeugenden Sprachquelle gegenüber Mikrophonen der Sprachverarbeitungsvorrichtung, die zur Umwandlung der von der Sprachquelle erzeugten akustischen Sprachsignale in elektrische Sprachsignale dienen, muß allerdings auch ein Nacheilen des ersten Sprachsignal einstellbar sein, was mit Hilfe dieser Ausgestaltung auf einfache Weise realisierbar ist.Without the delay means causing a fixed delay, there are only time offsets between the first and the further speech signal (s) adjustable, with which a leading of the first speech signal is effected. Depending on the position of a speech source generating the speech signal components in relation to microphones of the speech processing device that are used to convert the acoustic speech signals generated by the speech source into electrical speech signals, it must also be possible to set a lag of the first speech signal, which can be implemented in a simple manner with the aid of this configuration.

Zur weiteren Ausgestaltung der Erfindung ist die Sprachverarbeitungsvorrichtung in eine Freisprecheinrichtung integriert.To further develop the invention, the speech processing device is integrated in a hands-free device.

Insbesondere bei Freisprecheinrichtungen besteht das Problem, daß empfangene Sprachsignale störende Rauschsignalanteile aufweisen, die das Signal-/ Rauschleistungsverhältnis und die Sprachqualität der Sprachsignale verschlechtern. Gerade bei Mobilfunkendgeräten tritt dieses Problem auf, wenn diese in einer stark verrauschten Umgebung eingesetzt werden, wie z.B. in einem Automobil. Die Verwendung der beschriebenen Erfindung bewirkt deshalb gerade beim Einsatz in Freisprecheinrichtungen eine verbesserte Kommunikation zwischen den Gesprächsteilnehmern.In the case of hands-free devices in particular, there is the problem that received speech signals have disturbing noise signal components which impair the signal / noise power ratio and the speech quality of the speech signals. This problem occurs especially with mobile radio terminals if they are used in a very noisy environment, such as in an automobile. The use of the described invention therefore results in improved communication between the call participants, especially when used in hands-free devices.

Ausführungsbeispiele werden nachstehend anhand der Zeichnungen näher erläutert.Exemplary embodiments are explained in more detail below with reference to the drawings.

Es zeigen:

Fig. 1
eine Sprachverarbeitungsvorrichtung für zwei Sprachsignale,
Fig. 2
eine Steuervorrichtung zur Einstellung eines Zeitversatzes zwischen den beiden Sprachsignalen nach Fig. 1,
Fig. 3
eine Sprachverarbeitungsvorrichtung für drei Sprachsignale,
Fig. 4 und 5
Blockschaltbilder mit Steuervorrichtungen zur Einstellung von Zeitversätzen zwischen den drei Sprachsignalen nach Fig. 3,
Fig. 6 und 7
ein Blockschaltbild und ein Flußdiagramm zur Bestimmung des Signal-/ Rauschleistungsverhältnisses eines Sprachsignals,
Fig. 8
eine Einteilung von geglätteten Leistungswerten eines Sprachsignals in Gruppen und Untergruppen und
Fig. 9
ein Mobilfunkendgerät mit einer Sprachverarbeitungsvorrichtung nach Fig. 1 bis 8.
Show it:
Fig. 1
a speech processing device for two speech signals,
Fig. 2
1 a control device for setting a time offset between the two voice signals according to FIG. 1,
Fig. 3
a speech processing device for three speech signals,
4 and 5
3 block diagrams with control devices for setting time offsets between the three speech signals,
6 and 7
2 shows a block diagram and a flowchart for determining the signal / noise power ratio of a speech signal,
Fig. 8
a division of smoothed power values of a speech signal into groups and subgroups and
Fig. 9
a mobile radio terminal with a voice processing device according to FIGS. 1 to 8.

Die in Fig. 1 dargestellte Sprachverarbeitungsvorrichtung enthält zwei Mikrophone M1 und M2. Diese dienen zur Umwandlung von akustischen in elektrische Sprachsignale, die sich aus Sprach- und Rauschsignalanteilen zusammensetzen. Die Sprachsignalanteile stammen von einer einzelnen Sprachquelle (Sprecher), die im Regelfall unterschiedliche Abstände zu den beiden Mikrophonen M1 und M2 aufweist. Die Sprachsignalanteile sind somit in hohem Maße korreliert. Die Rauschsignalanteile der beiden von den Mikrophonen M1 und M2 empfangenen Sprachsignale sind nicht von der einzelnen Sprachquelle erzeugte Umgebungsgeräusche, die bei geeigneten Mikrophonabständen im Bereich von 10 bis 60 cm als unkorreliert oder nur wenig korreliert vorausgesetzt werden können, wenn sich die Mikrophone in einer sogenannten verhallten Umgebung wie beispielsweise im Auto oder in einem Büro befinden. Befinden sich Sprachquelle und Sprachverarbeitungsvorrichtung beispielsweise in einem Kraftfahrzeug, werden die Rauschsignalanteile insbesondere durch Motor- und Fährgeräusche verursacht.The speech processing device shown in FIG. 1 contains two microphones M1 and M2. These are used to convert acoustic to electrical voice signals, which are made up of speech and noise signal components. The speech signal components come from a single speech source (speaker), which as a rule has different distances from the two microphones M1 and M2. The speech signal components are thus highly correlated. The noise signal components of the two speech signals received by the microphones M1 and M2 are ambient noises generated by the individual speech source, which can be assumed to be uncorrelated or only slightly correlated with suitable microphone spacings in the range from 10 to 60 cm if the microphones reverberated in a so-called Environment such as in the car or in an office. If the speech source and speech processing device are located in a motor vehicle, for example, the noise signal components are caused in particular by engine and driving noises.

Die von den Mikrophonen M1 und M2 erzeugten Mikrophonsignale werden von Analog-Digitalumsetzern 1 und 2 digitalisiert. Die sich ergebenden digitalisierten und damit als Abtastwerte x1(i) und x2(i) vorliegenden Mikrophonsignale werden von einer Steuervorrichtung 3 ausgewertet, die zur Steuerung und Einstellung eines Verzögerungsgliedes 4 dient. Die abgetasteten Mikrophonsignale x1(i) und x2(i) werden im folgenden abgekürzt als Mikrophon- oder Sprachsignale bezeichnet. Das Verzögerungsglied 4 verzögert das Mikrophonsignal x1 mit durch die Steuervorrichtung 3 einstellbaren Verzögerungswerten T1. Eine Addiervorrichtung 5 addiert das vom Verzögerungsglied 4 verzögerte Mikrophonsignal x1(i) und das von einem Verzögerungsglied 16 mit einer konstanten Zeitverzögerung Tmax verzögerte Mikrophonsignal x2(i). Das Verzögerungsglied 16 ist vorgesehen, um sowohl ein Vorlaufen als auch ein Nacheilen des Mikrophonsignals x1(i) gegenüber dem Mikrophonsignal x2(i) einstellen zu können. Ein am Ausgang der Addiervorrichtung 5 anliegendes Summensignal X(i) ist ein abgetastes Sprachsignal, dessen Signal-/ Rauschleistungsverhältnis gegenüber den Signal-/ Rauschleistungsverhältnissen der Sprachsignale x1(i) und x2(i) erhöht ist. Durch eine geeignete Einstellung der Verzögerungszeit T1 des Verzögerungsglieds 4 wird bei der Addition durch die Addiervorrichtung 5 eine Verstärkung der Leistung der Sprachsignalanteile der beiden Sprachsignale x1(i) und x2(i) ungefähr um den Faktor 4 und eine Verstärkung der Leistung der Rauschsignalanteile nur ungefähr um den Faktor 2 bewirkt. Damit ergibt sich eine Verbesserung des leistungsbezogenen Signal-/ Rauschleistungsverhältnisses von ungefähr 3 dB.The microphone signals generated by the microphones M1 and M2 are digitized by analog-digital converters 1 and 2. The resulting digitized and thus present as samples x1 (i) and x2 (i) microphone signals are evaluated by a control device 3, which is used to control and set a delay element 4. The sampled microphone signals x1 (i) and x2 (i) are referred to below as microphone or speech signals. The delay element 4 delays the microphone signal x1 with delay values T1 that can be set by the control device 3. An adding device 5 adds the microphone signal x1 (i) delayed by the delay element 4 and the microphone signal x2 (i) delayed by a delay element 16 with a constant time delay T max . The delay element 16 is provided in order to be able to set both a leading and a lagging of the microphone signal x1 (i) relative to the microphone signal x2 (i). A sum signal X (i) present at the output of the adding device 5 is a sampled speech signal, the signal / noise power ratio of which is increased compared to the signal / noise power ratios of the speech signals x1 (i) and x2 (i). Through a suitable setting of the delay time T1 of the delay element 4, the addition by the adder 5 increases the power of the voice signal components of the two voice signals x1 (i) and x2 (i) by approximately a factor of 4 and increases the power of the noise signal components only approximately caused by a factor of 2. This results in an improvement in the power-related signal / noise power ratio of approximately 3 dB.

In Fig. 2 wird die Funktionsweise der Steuerungvorrichtung 3 anhand eines Blockschaltbildes näher erläutert. Aus dem Sprachsignal x2(i) und Sprachsignalschätzwerten x1int(i) ergeben sich Fehlerwerte e₁₂(i) durch Differenzbildung nach e₁₂(i) = x1 int (i) - x2(i)

Figure imgb0001
Die Sprachsignalschätzwerte x1int(i) sind Werte, die sich aus einer Interpolation von Abtastwerten des Sprachsignals x1(i) ergeben. Die Bestimmung der Sprachsignalschätzwerte x1int(i) wird später erläutert. i ist eine Variable, die ganzzahlige Werte annehmen kann und mit der einerseits Abtastzeitpunkte der Sprachsignale x1(i) und x2(i) und andererseits auch Programmzyklen der programmierbaren und Steuermittel aufweisenden Steuervorrichtung 3 indiziert werden, wobei in einem Programmzyklus jeweils ein neuer Abtastwert per Sprachsignal verarbeitet wird.In Fig. 2 the operation of the control device 3 is explained in more detail using a block diagram. From the speech signal x2 (i) and speech signal estimated values x1 int (i), error values e 1 (i) result from difference formation e₁₂ (i) = x1 int (i) - x2 (i)
Figure imgb0001
The speech signal estimates x1 int (i) are values that result from an interpolation of samples of the speech signal x1 (i). The determination of the speech signal estimates x1 int (i) will be explained later. i is a variable which can take integer values and with which, on the one hand, sampling times of the speech signals x1 (i) and x2 (i) and, on the other hand, also program cycles of the programmable control device 3 having control means 3, are indicated, with one new sample value per speech signal in each program cycle is processed.

Ein digitales Filter 6 führt eine Hilbert-Transformation der Abtastwerte x2(i) durch:

Figure imgb0002

Das die Werte x2H(i) von x2(i) liefernde Digitalfilter 6 ist ein FIR-Filter der Ordnung K, das Koeffizienten h(0), h(1), ..., h(K) aufweist. Im vorliegenden Ausführungsbeispiel ist K gleich sechzehn, so daß das Digitalfilter 6 siebzehn Koeffizienten aufweist. Das Digitalfilter 6 besitzt dem Betrage nach die Übertragungsfunktion eines Tiefpasses. Es erzeugt weiterhin eine Phasenverschiebung von 90 Grad. Die feste Phasenverschiebung von 90 Grad ist die entscheidende Eigenschaft des Digitalfilters 6, der Verlauf des Betrages der Übertragungsfunktion ist für das Funktionieren der Sprachverarbeitungsvorrichtung nicht entscheidend. So kann das Digitalfilter 6 auch mit Hilfe eines Differenzierers realisiert werden, was allerdings zu einer Unterdrückung von niederfrequenten Anteilen von x2(i) und damit zu einer verringerten Leistungfähigkeit der Sprachverarbeitungsvorrichtung führen würde.A digital filter 6 carries out a Hilbert transformation of the sample values x2 (i):
Figure imgb0002

The digital filter 6 supplying the values x2 H (i) of x2 (i) is an FIR filter of the order K, which has coefficients h (0), h (1), ..., h (K). In the present exemplary embodiment, K is sixteen, so that the digital filter 6 has seventeen coefficients. The amount of the digital filter 6 has the transfer function of a low pass. It continues to produce a 90 degree phase shift. The fixed phase shift of 90 degrees is the decisive property of the digital filter 6, the course of the amount of the transfer function is not decisive for the functioning of the speech processing device. The digital filter 6 can thus also be implemented with the aid of a differentiator, which would, however, lead to a suppression of low-frequency components of x2 (i) and thus to a reduced performance of the speech processing device.

Die Ausgangswerte x2H(i) werden mit den Fehlerwerten e₁₂(i) und dem Kehrwert 1/Px2(i) einer Kurzzeitleistung Px2(i) multipliziert, wobei die Kurzzeitleistung Px2(i) nach P x2 (i) = P x2 (i-1) + [x2(i)]² - [x2(i-N)]²

Figure imgb0003
gebildet wird. N gibt die Anzahl der in die Berechnung eingehenden Abtastwerte von x1 an. N ist beispielsweise gleich 65. Die Multiplikation mit 1/Px2(i) dient zur Vermeidung von Instabilitäten in der Steuervorrichtung 3 beim Steuern des Verzögerungsgliedes 4. Damit ergibt sich durch
Figure imgb0004

ein auf die Kurzzeitleistung Px2(i) normierter geschätzter Gradient grad(i) der Quadrate bzw. der Leistung der Fehlerwerte e₁₂(i) im Programmzyklus i.The output values x2 H (i) are multiplied by the error values e₁₂ (i) and the reciprocal 1 / P x2 (i) of a short-term power P x2 (i), the short-term power P x2 (i) after P x2 (i) = P x2 (i-1) + [x2 (i)] 2 - [x2 (iN)] 2
Figure imgb0003
is formed. N indicates the number of samples of x1 used in the calculation. N is, for example, equal to 65. The multiplication by 1 / P x2 (i) serves to avoid instabilities in the control device 3 when the delay element 4 is controlled
Figure imgb0004

an estimated on the short-term power P x2 (i) graded gradient degree (i) of the squares or the power of the error values e₁₂ (i) in the program cycle i.

Ein Funktionsblock 7 bildet fortlaufend aus den Abtastwerten des Sprachsignals x2(i) Schätzwerte SNR(i) des zugehörigen Signal-/ Rauschleistungsverhältnisses, die von einem Funktionsblock 8 ausgewertet werden. Auch eine Auswertung des Sprachsignals x1(i) anstelle des Sprachsignals x2(i) ist möglich, ohne daß die Funktionsfähigkeit der Sprachverarbeitungsvorrichtung eingeschränkt wird. Die Funktionsweise des Funktionsblockes 7 wird später anhand der Figuren 6 bis 8 näher erläutert. Der Funktionsblock 8 führt eine Schwellwertentscheidung bezüglich der Schätzwerte SNR(i) durch. Nur wenn die Schätzwerte SNR(i) über einer vorgebbaren Schwelle liegen, wird ein Zwischenspeicher 9 mit dem neu bestimmten Gradientenschätzwert grad(i) überschrieben. Dieser Fall wird durch die geschlossene Stellung eines Schalters 11 symbolisiert, der von dem Funktionsblock 8 gesteuert wird. Der Speicherinhalt (grad(i)) des Zwischenspeichers 9 wird von einer Funktionseinheit 10 weiterverarbeitet. Für den Fall, daß ein Schätzwert SNR(i) unterhalb des vorgebbaren Schwellwerts liegt, wird der Zwischenspeicher 9 nicht mit dem neu ermittelten Gradientenschätzwert grad(i) überschrieben und er behält seinen alten Speicherinhalt bei, was durch die geöffnete Stellung des Schalters 11 symbolisiert wird. Die vorgebbare Schwelle, von der das Öffnen und Schließen des Schalters 11 durch den Funktionsblock 8 abhängt, liegt vorzugsweise zwischen 0 und 10 dB.A function block 7 continuously forms estimated values SNR (i) of the associated signal / noise power ratio from the samples of the speech signal x2 (i), which are evaluated by a function block 8. An evaluation of the speech signal x1 (i) instead of the speech signal x2 (i) is also possible without the functionality of the speech processing device being restricted. The functioning of the function block 7 will be explained in more detail later with reference to FIGS. 6 to 8. Function block 8 carries out a threshold decision regarding the estimated values SNR (i). Only if the estimated values SNR (i) lie above a predefinable threshold is an intermediate memory 9 overwritten with the newly determined gradient estimated value grad (i). This case is symbolized by the closed position of a switch 11 which is controlled by the function block 8. The memory content (degree (i)) of the intermediate memory 9 is further processed by a functional unit 10. In the event that an estimated value SNR (i) lies below the predefinable threshold value, the buffer 9 is not overwritten with the newly determined gradient estimated value grad (i) and it retains its old memory content, which is symbolized by the open position of the switch 11 . The predefinable threshold, on which the opening and closing of the switch 11 by the function block 8 depends, is preferably between 0 and 10 dB.

Der Zwischenspeicher 9 liefert die in ihm gespeicherten Gradientenschätzwerte grad(i) an die Funktionseinheit 10, der auch Abtastwerte des Sprachsignals x1(i) zugeführt werden und die sowohl zur Lieferung der Sprachsignalschätzwerte x1int(i) als auch zur Einstellung des Verzögerungsgliedes 4 dient.The intermediate memory 9 supplies the gradient estimated values grad (i) stored in it to the functional unit 10, to which sample values of the speech signal x1 (i) are also supplied and which is used both for supplying the speech signal estimated values x1 int (i) and for setting the delay element 4.

Die Gradientenschätzwerte grad(i) werden von einem Funktionsblock 12 nach sgrad(i) = α*sgrad(i-1) + (1-α)*grad(i)

Figure imgb0005
zu geglätteten ("smoothed") Gradientenschätzwerten sgrad(i) weiterverarbeitet. α ist eine Konstante, die im Ausführungsbeispiel den Wert 0,95 besitzt. Die Werte sgrad(i) werden von einem Funktionsblock 13 zur Adaption von Verzögerungsschätzwerten T1'(i) nach T1'(i+1) = T1'(i) - µ * sgrad(i)
Figure imgb0006
verwendet. Die Bestimmung von Verzögerungsschätzwerten T1'(i) erfolgt damit rekursiv. µ ist ein konstanter Faktor bzw. Konvergenzparameter und liegt im Bereich
Figure imgb0007

Rx2x2 bezeichnet eine Autokorrelationsfunktion des Sprachsignals x2(i) an der Stelle Null. Ein besonders vorteilhafter Wertebereich von µ ist im vorliegenden Ausführungsbeispiel 1,5 < µ < 3.The gradient estimated values grad (i) are followed by a function block 12 degree (i) = α * degree (i-1) + (1-α) * degree (i)
Figure imgb0005
processed to smoothed gradient estimates sgrad (i). α is a constant that has the value 0.95 in the exemplary embodiment. The values sgrad (i) are followed by a function block 13 for adapting delay estimated values T1 '(i) T1 '(i + 1) = T1' (i) - µ * sgrad (i)
Figure imgb0006
used. Delay estimated values T1 '(i) are thus determined recursively. µ is a constant factor or convergence parameter and is in the range
Figure imgb0007

R x2x2 denotes an autocorrelation function of the speech signal x2 (i) at the zero position. A particularly advantageous value range of μ in the present exemplary embodiment is 1.5 <μ <3.

Die Verzögerungsschätzwerte T1'(i) können auch nicht ganzzahlige Werte d.h nicht ganzzahlige Vielfache eines Abtastintervalls sein. Ein Funktionsblock 14 rundet die Verzögerungsschätzwerte T1'(i) auf ganzzahlige Verzögerungswerte T1(i), mit denen die Verzögerungsvorrichtung 4 eingestellt wird. Die Rundungsoperation durch Funktionsblock 14 ist notwendig, da Werte des durch das Verzögerungsglied 4 zu verzögernden Sprachsignals x1(i) nur zu den entsprechenden Abtastzeitpunkten vorliegen.The delay estimated values T1 '(i) can also be non-integer values, ie non-integer multiples of a sampling interval. A function block 14 rounds the delay estimated values T1 '(i) to integer delay values T1 (i) with which the delay device 4 is set. The rounding operation by function block 14 is necessary since values of the speech signal x1 (i) to be delayed by the delay element 4 are only available at the corresponding sampling times.

Die Funktionseinheit 10 weist weiterhin einen Funktionblock 15 auf, der die Sprachsignalschätzwerte x1int(i) nach x1 int (i) = x1(i+T1(i)) + 0,5 * [T1'(i) - T1(i)] * [x1(i+T1(i)+1)) - x1(i+T1(i)-1)]

Figure imgb0008
durch Interpolation dreier benachbarter Abtastwerte x1(i+T1(i)-1)
Figure imgb0009
, x1(i+T1(i))
Figure imgb0010
und x1(i+T1(i)+1)
Figure imgb0011
des Sprachsignals x1 bildet. Der Funktionsblock 15 ist somit in der Lage, durch den Sprachsignalschätzwert x1int(i) im Programmzyklus i einen Wert des Sprachsignals x1 zum Zeitpunkt i+T1(i), d.h. zu einem Zeitpunkt zwischen zwei Abtastzeitpunkten, zu bilden bzw. zu interpolieren. Die beschriebene Interpolation durch Funktionsblock 15 kann dadurch ersetzt werden, daß Funktionsblock 15 eine Tiefpaßfilterung der Abtastwerte x1(i) zur Interpolation von Werten zwischen den Abtastzeitpunkten durchführt.The functional unit 10 furthermore has a functional block 15 which tracks the speech signal estimated values x1 int (i) x1 int (i) = x1 (i + T1 (i)) + 0.5 * [T1 '(i) - T1 (i)] * [x1 (i + T1 (i) +1)) - x1 (i + T1 (i) -1)]
Figure imgb0008
by interpolating three neighboring samples x1 (i + T1 (i) -1)
Figure imgb0009
, x1 (i + T1 (i))
Figure imgb0010
and x1 (i + T1 (i) +1)
Figure imgb0011
of the speech signal x1. Function block 15 is thus able to use the speech signal estimate x1 int (i) in program cycle i to form or interpolate a value of speech signal x1 at time i + T1 (i), ie at a time between two sampling times. The described interpolation by function block 15 can be replaced by function block 15 performing low-pass filtering of the sample values x1 (i) for the interpolation of values between the sample times.

Würden zur Bestimmung der Fehlerwerte e₁₂(i) anstelle der Sprachsignalschätzwerte x1int(i) die am Ausgang des Verzögerungsgliedes 4 anliegenden verzögerten Abtastwerte des Sprachsignals x1(i) verwendet, wie dies aus "IEEE Transactions on Acoustics, Speech, and Signal Processing, VOL. ASSP-29, Nr.3, Juni 1981, S. 582-587" bekannt ist, würde beim Erreichen von Fehlerwerten e₁₂(i) = 0 die Verzögerungswerte T1(i), mit denen das Verzögerungsglied 4 eingestellt wird, nicht mehr konvergieren. Es ergäben sich starke Oszillationen der gerundeten Verzögerungswerte T1(i). Diese würden zwischen zwei Verzögerungswerten mit dem Abstand eines Abtastintervalls schwanken. Die entsprechende wahre Zeitverzögerung zwischen den Sprachsignalanteilen, die durch die unterschiedlichen Wegstrecken vom Sprecher zu den Mikrophonen M1 und M2 bestimmt ist, würde dabei zwischen diesen zwei Verzögerungswerten liegen. Im vorliegenden Ausführungsbeispiel werden solche Oszillationen dadurch vermieden, daß bei der Bildung der Fehlerwerte Sprachsignalschätzwerte x1int(i) verwendet werden, durch die die Werte des Sprachsignals x1(i) auch für Verzögerungen um nicht ganzzahlige Vielfache eines Abtastintervalls verfügbar sind, also auch an Zeitpunkten ungleich der Abtastzeitpunkte i des Sprachsignals x1(i).Would be used to determine the error values e₁₂ (i) instead of the speech signal estimates x1 int (i) the delayed samples of the speech signal x1 (i) present at the output of the delay element 4, as can be seen from "IEEE Transactions on Acoustics, Speech, and Signal Processing, VOL . ASSP-29, No. 3, June 1981, p. 582-587 "is known, the delay values T1 (i), with which the delay element 4 is set, would no longer converge when error values e 1 (i) = 0 were reached . There would be strong oscillations of the rounded delay values T1 (i). These would fluctuate between two delay values with the interval of a sampling interval. The corresponding true time delay between the speech signal components, which is determined by the different distances from the speaker to the microphones M1 and M2, would lie between these two delay values. In the present exemplary embodiment, such oscillations are avoided by using speech signal estimates x1 int (i) when the error values are formed, by which the values of the speech signal x1 (i) are also used for delays by non-integer numbers Multiples of a sampling interval are available, ie also at times other than the sampling times i of the speech signal x1 (i).

Der zur Glättung der Gradientenschätzwerte grad(i) dienende Funktionsblock 12 bewirkt eine verbesserte Ermittlung der Verzögerungschätzwerte T1'(i).The function block 12 used to smooth the gradient estimated values grad (i) brings about an improved determination of the delay estimated values T1 '(i).

Die Steuervorrichtung 3 adaptiert die Verzögerungsschätzwerte T1'(i) bzw. die Verzögerungswerte T1(i) so, daß von einem Programmzyklus zum nächsten das Quadrat bzw. die Leistung der Fehlerwerte e₁₂(i) verringert wird. Die Konvergenz von T1'(i) bzw. T1(i) ist somit sichergestellt.The control device 3 adapts the delay estimates T1 '(i) or the delay values T1 (i) so that the square or the power of the error values e 1 (i) is reduced from one program cycle to the next. The convergence of T1 '(i) or T1 (i) is thus ensured.

In Fig. 3 ist eine prinzipiell wie die Sprachverarbeitungsvorrichtung aus Fig. 1 arbeitende Sprachverarbeitungsvorrichtung mit nun drei Mikrophonen M1, M2 und M3 zur Lieferung von Mikrophon- bzw. Sprachsignalen dargestellt. Die Mikrophonsignale werden Analog-Digital-Umsetzern 20, 21 und 22 zugeführt, die digitalisierte und damit abgetastete Sprachsignale x1(i), x2(i) und x3(i) liefern, die aus Sprach- und Rauschsignalanteilen bestehen. Die Sprachsignale x1(i) und x3(i) werden einstellbaren Verzögerungsgliedern 23 und 24 zugeführt. Analog zu Fig. 1 wird das Sprachsignal x2(i) einem Verzögerungsglied 27 mit einer festen Verzögerungszeit Tmax zugeführt.Die Ausgangswerte der Verzögerungsglieder 23, 24 und 27 werden von einer Addiervorrichtung 25 zum Summensignal X(i) aufaddiert. Eine Steuervorrichtung 26 wertet die Abtastwerte der Sprachsignale x1(i), x2(i) und x3(i) aus und leitet aus diesen Abtastwerten analog zur Wirkungsweise der Steuervorrichtung 3 aus Fig. 1 und 2 gerundete ganzzahlige Verzögerungswerte T1(i) und T3(i) ab, die ganzzahligen Vielfachen eines Abtastintervalles der abgetasteten Sprachsignale x1(i), x2(i) und x3(i) entsprechen und mit denen die Verzögerungsglieder 23 und 24 eingestellt werden, so daß eine Erweiterung von zwei auf drei zu verarbeitende Mikrophon- bzw. Sprachsignale ermöglicht wird.FIG. 3 shows a speech processing device which works in principle like the speech processing device from FIG. 1 and now has three microphones M1, M2 and M3 for the delivery of microphone or speech signals. The microphone signals are fed to analog-to-digital converters 20, 21 and 22, which deliver digitized and thus sampled speech signals x1 (i), x2 (i) and x3 (i), which consist of speech and noise signal components. The speech signals x1 (i) and x3 (i) are supplied to adjustable delay elements 23 and 24. Analogously to FIG. 1, the speech signal x2 (i) is fed to a delay element 27 with a fixed delay time T max. The output values of the delay elements 23, 24 and 27 are added to the sum signal X (i) by an adding device 25. A control device 26 evaluates the sample values of the speech signals x1 (i), x2 (i) and x3 (i) and derives rounded integer delay values T1 (i) and T3 () from these sample values analogously to the mode of operation of the control device 3 from FIGS. i) ab, which correspond to the integer multiples of a sampling interval of the sampled speech signals x1 (i), x2 (i) and x3 (i) and with which the delay elements 23 and 24 are set, so that an expansion from two to three microphone to be processed or voice signals is enabled.

In Fig. 4 ist eine erste Ausführungsform der Steuervorrichtung 26 aus Fig. 3 dargestellt. Es sind zwei Funktionseinheiten 10 vorgesehen, deren Aufbau gleich dem Aufbau der Funktionseinheit 10 aus Fig. 2 ist und die zur Einstellung der Verzögerungsglieder 23 und 24 mit den gerundeten Zeitverzögerungswerten T1(i) und T3(i) dienen.FIG. 4 shows a first embodiment of the control device 26 from FIG. 3. Two functional units 10 are provided, the structure of which is identical to the structure of the functional unit 10 from FIG. 2 and which are used to set the delay elements 23 and 24 with the rounded time delay values T1 (i) and T3 (i).

Die obere Funktionseinheit 10 liefert Sprachsignalschätzwerte x1int(i). Die untere Funktionseinheit 10 liefert Sprachsignalschätzwerte x3int(i). Aus einer Differenz x1 int (i) - x2(i)

Figure imgb0012
und aus einer Differenz x3 int (i) - x2(i)
Figure imgb0013
werden Fehlerwerte e₁₂(i) und e₃₂(i) gebildet.The upper functional unit 10 provides speech signal estimates x1 int (i). The lower functional unit 10 supplies speech signal estimates x3 int (i). From a difference x1 int (i) - x2 (i)
Figure imgb0012
and from a difference x3 int (i) - x2 (i)
Figure imgb0013
error values e₁₂ (i) and e₃₂ (i) are formed.

Auch hier ist ein Digitalfilter 6 vorgesehen, das in den Ausführungen zu Fig. 2 bereits näher beschrieben ist, und das zum Empfang der Abtastwerte x2(i) und zur Lieferung von Werten x2H(i) dient, die durch eine Hilbert-Transformation der Abtastwerte x2(i) erzeugt werden. Die Werte x2H(i) werden einerseits mit den Fehlerwerten e₁₂(i) und andererseits mit den Fehlerwerten e₃₂(i) multipliziert. Das erste Produkt x2H(i)*e₁₂(i) wird der oberen, das zweite Produkt x2H(i)*e₃₂(i) wird der unteren Funktionseinheit 10 zugeführt. Die Anordnung der Funktionsblöcke 7 und 8, des Zwischenspeichers 9 und des Schalters 11 wird analog zu Fig. 2 durchgeführt und ist aus Gründen der Übersichtlichkeit nicht in Fig. 4 dargestellt.Here too, a digital filter 6 is provided, which has already been described in more detail in the explanations relating to FIG. 2, and which serves to receive the sample values x2 (i) and to supply values x2 H (i) which are obtained by a Hilbert transformation of the Samples x2 (i) are generated. The values x2 H (i) are multiplied on the one hand by the error values e₁₂ (i) and on the other hand by the error values e₃₂ (i). The first product x2 H (i) * e₁₂ (i) is the upper, the second product x2 H (i) * e₃₂ (i) is fed to the lower functional unit 10. The arrangement of the function blocks 7 and 8, the buffer 9 and the switch 11 is carried out analogously to FIG. 2 and is not shown in FIG. 4 for reasons of clarity.

Fig. 5 zeigt eine gegenüber Fig. 4 erweiterte Fassung der Steuervorrichtung 26. Im Gegensatz zu Fig. 4 sind anstelle nur eines Digitalfilters 6 nun drei Digitalfilter 6 angeordnet. Diese bilden aus den Sprachsignalabtastwerten x1(i), x2(i) und x3(i) durch Hilbert-Transformation die Werte x1H(i), x2H(i) und x3H(i).FIG. 5 shows a version of the control device 26 that is expanded compared to FIG. 4. In contrast to FIG. 4, three digital filters 6 are now arranged instead of just one digital filter 6. These form the values x1 H (i), x2 H (i) and x3 H (i) from the speech signal samples x1 (i), x2 (i) and x3 (i) by Hilbert transformation.

In der oberen Hälfte des in Fig. 5 dargestellten Blockdiagramms werden Fehlerwerte e₁₃(i) aus der Differenz x1 int (i)-x2(i)

Figure imgb0014
bebildet, die in ein erstes Produkt 0,3*e₁₃(i)*x3 H (i)
Figure imgb0015
eingehen. Ein zweites Produkt ergibt sich aus 0,7*e₁₂(i)*x2 h (i)
Figure imgb0016
. Die beiden Produkte entsprechen gewichteten Gradientschätzwerten der Quadrate der Fehlerwerte e₁₃(i) und e₁₂(i). Die Summe aus erstem und zweitem Produkt und damit eine Linearkombination der gewichteten Gradientschätzwerten wird der oberen Funktionseinheit 10 zugeführt.In the upper half of the block diagram shown in Fig. 5, error values e₁₃ (i) from the difference x1 int (i) -x2 (i)
Figure imgb0014
illustrated in a first product 0.3 * e₁₃ (i) * x3 H (i)
Figure imgb0015
come in. A second product results from 0.7 * e₁₂ (i) * x2 H (i)
Figure imgb0016
. The two products correspond to weighted gradient estimates of the squares of the Error values e₁₃ (i) and e₁₂ (i). The sum of the first and second product and thus a linear combination of the weighted gradient estimated values is fed to the upper functional unit 10.

Analog dazu werden in der unteren Hälfte des in Fig. 5 dargestellten Blockdiagramms Fehlerwerte e₃₁(i) und e₃₂(i) gebildet. Die Fehlerwerte e₃₁(i) ergeben sich aus der Differenz x3 int (i)-x1(i)

Figure imgb0017
. Die Fehlerwerte e₃₂(i) werden durch die Differenz x3 int (i)-x2(i)
Figure imgb0018
gebildet. Ein drittes Produkt 0,3*e₃₁(i)*x1 H (i)
Figure imgb0019
und ein viertes Produkt 0,7*e₃₂(i)*x2 H (i)
Figure imgb0020
werden aufaddiert und die sich ergebende Summe wird der unteren Funktionseinheit 10 zugeführt.Similarly, error values e₃₁ (i) and e₃₂ (i) are formed in the lower half of the block diagram shown in FIG. 5. The error values e₃₁ (i) result from the difference x3 int (i) -x1 (i)
Figure imgb0017
. The error values e₃₂ (i) are the difference x3 int (i) -x2 (i)
Figure imgb0018
educated. A third product 0.3 * e₃₁ (i) * x1 H (i)
Figure imgb0019
and a fourth product 0.7 * e₃₂ (i) * x2 H (i)
Figure imgb0020
are added up and the resulting sum is fed to the lower functional unit 10.

Mit Hilfe der Sprachverarbeitungsvorrichtung nach Fig. 3, die eine Steuervorrichtung nach Fig. 4 oder 5 enthält, laßt sich ein gegenüber der Sprachverarbeitungsvorrichtung mit zwei Mikrophonen nach Fig. 1 verbessertes Summensignal X(i) erzeugen. Das Signal-/ Rauschleistungsverhältnis und damit die Sprachqualität des Summensignals X(i) der Sprachverarbeitungsvorrichtung nach Fig. 3 ist gegenüber dem von der Sprachverarbeitungsvorrichtung nach Fig. 1 erzeugten Summensignal X(i) weiter erhöht. Die Steuervorrichtung nach Fig. 5 weist gegenüber der Steuervorrichtung nach Fig. 4 beim Einsatz in der Sprachverarbeitungsvorrichtung nach Fig. 3 eine erhöhte Stabilität auf.3, which contains a control device according to FIG. 4 or 5, a sum signal X (i) which is improved compared to the speech processing device with two microphones according to FIG. 1 can be generated. The signal / noise power ratio and thus the speech quality of the sum signal X (i) of the speech processing device according to FIG. 3 is further increased compared to the sum signal X (i) generated by the speech processing device according to FIG. 1. The control device according to FIG. 5 has an increased stability compared to the control device according to FIG. 4 when used in the speech processing device according to FIG. 3.

Sowohl in Fig. 4 als auch in Fig. 5 ist aus Gründen der Übersichtlichkeit auf eine Darstellung von Mitteln (siehe Funktionsblöcke 7 und 8, Zwischenspeicher 9 und Schalter 11 in Fig. 2) verzichtet worden, die eine Abhängigkeit der Sprachverarbeitung von Schätzwerten SNR(i) für eines der Mikrophonsignale x1(i), x2(i) oder x3(i) bewirken. Ebenfalls aus Gründen der Übersichtlichkeit ist die Normierung von Produkten aus Fehlerwerten und der Ausgangswerte der die Hilbert-Transformation durchführenden Digitalfilter 6 auf die Leistung eines zugehörigen Mikrophonsignals (siehe 1/Px2(i) in Fig. 2) nicht dargestellt. Die Erweiterung der Steuervorrichtungen 26 nach Fig. 4 und 5 um diese beiden technischen Merkmale ergibt sich aus ihrer Realisierung in der Steuervorrichung 3 nach Fig. 2.Both in FIG. 4 and in FIG. 5, for the sake of clarity, a representation of means (see function blocks 7 and 8, buffer store 9 and switch 11 in FIG. 2) has been dispensed with, which means that the speech processing is dependent on estimated values SNR ( i) for one of the microphone signals x1 (i), x2 (i) or x3 (i). Also for reasons of clarity, the normalization of products from error values and the output values of the digital filters 6 performing the Hilbert transformation to the power of an associated microphone signal (see 1 / P x2 (i) in FIG. 2) is not shown. The extension of the control devices 26 according to FIGS. 4 and 5 by these two technical features result from their implementation in the control device 3 according to FIG. 2.

Zur Erhöhung der Sprachqualität der Summensignale X(i) am Ausgang der Addiervorrichtungen 5 und 25 in Fig. 1 und Fig. 3 kann die Erfindung so ausgestaltet werden, daß die Verzögerungsschätzwerte T1'(i) und T3'(i) (das sind z. B. Fließkommazahlen) zur Bildung der Verzögerungswerte T1(i) und T3(i) nicht auf Werte gerundet werden, die einem ganzzahligen Vielfachen eines Abtastintervalls entsprechen (hier: ganze Zahlen), sondern auf Werte, die einem Vielfachen eines Bruchteils eines Abtastintervalls entsprechen. Insbesondere ist eine Rundung der Verzögerungsschätzwerte auf Vielfache eines Wertes vorteilhaft, der einem Viertel oder der Hälfte eines Abtastintervalls entspricht. Auf diese Weise wird die Auflösung der Verzögerungswerte erhöht, die somit genauer einstellbar sind, so daß auch die Sprachqualität der Summensignale X(i) weiter erhöht wird, da Laufzeitunterschiede von der die Sprachsignalanteile erzeugenden Sprachquelle zu den Mikrophonen M1, M2 und M3 genauer ausgeglichen werden können. Bei der Verzögerung eines Sprachsignals mit einem Vielfachen eines Bruchteils eines Abtastintervalls wird eine Interpolation oder Tiefpaßfilterung von Sprachsignalabtastwerten vorgesehen, um Sprachsignalwerte zu erzeugen, die zwischen jeweils zwei Sprachsignalabtastwerten liegen. Die Interpolation bzw. Tiefpaßfilterung kann insbesondere in die Verzögerungsmittel 4, 23 und 24 integriert werden.In order to increase the speech quality of the sum signals X (i) at the output of the adding devices 5 and 25 in FIGS. 1 and 3, the invention can be designed in such a way that the delay estimated values T1 '(i) and T3' (i) (e.g. For example, floating point numbers) to form the delay values T1 (i) and T3 (i) are not rounded to values which correspond to an integer multiple of a sampling interval (here: integers), but to values which correspond to a multiple of a fraction of a sampling interval . In particular, rounding the delay estimated values to multiples of a value which corresponds to a quarter or half of a sampling interval is advantageous. In this way, the resolution of the delay values is increased, which can thus be adjusted more precisely, so that the speech quality of the sum signals X (i) is further increased, since time differences from the speech source producing the speech signal components to the microphones M1, M2 and M3 are more precisely compensated can. When a speech signal is delayed by a multiple of a fraction of a sampling interval, interpolation or low pass filtering of speech signal samples is provided to produce speech signal values that lie between two speech signal samples. The interpolation or low-pass filtering can in particular be integrated into the delay means 4, 23 and 24.

Mit Hilfe der Fig. 6 und 7 wird das Schema erläutert, anhand dessen der Funktionsblock 7 aus einem abgetasteten Sprachsignal x(i), das aus Rausch- und Sprachsignalanteilen besteht, die zugehörigen Schätzwerte SNR(i) des Signal-/ Rauschleistungsverhältnisses, d.h. des Verhältnisses der Leistungen der Sprachsignalanteile zur Leistung der Rauschsignalanteile, ermittelt. Den Abtastwerten x(i) entsprechen in Fig. 2 die Abtastwerte x2(i). In Fig. 6 ist der Funktionsblock 7 anhand eines Blockschaltbildes dargestellt. Ein Funktionsblock 30 dient zur Bildung von Leistungswerten Px(i) der Abtastwerte x(i) durch Quadrieren der Abtastwerte. Weiterhin führt der Funktionsblock 30 eine Glättung dieser Leistungswerte Px(i) durch. Die sich so ergebenden geglätteten Leistungswerte Px,s(i) werden sowohl dem Funktionsblock 31 als auch dem Funktionsblock 32 zugeführt. Der Funktionsblock 31 ermittelt fortlaufend Schätzwerte Pn(i) zur Abschätzung der Leistung des Raussignalanteils der Abtastwerte x(i), d.h. es wird die Leistung der Rauschsignalanteile der Abtastwerte x(i) ermittelt. Aus den geglätteten Leistungswerten Px,s(i) und den Schätzwerten Pn(i) bestimmt der Funktionsblock 32 fortlaufend Schätzwerte SNR(i) des Signal-/ Rauschleistungsverhältnisses der Abtastwerte x(i).With the help of FIGS. 6 and 7, the scheme is explained, on the basis of which the function block 7 from a sampled speech signal x (i), which consists of noise and speech signal components, the associated estimated values SNR (i) of the signal / noise power ratio, that is Ratio of the power of the speech signal components to the power of the noise signal components, determined. In FIG. 2, the sample values x2 (i) correspond to the sample values x (i). The function block 7 is shown in FIG. 6 on the basis of a block diagram. A functional block 30 is used to form power values P x (i) of the samples x (i) by squaring the samples. Function block 30 also smoothes these power values P x (i). The resulting smoothed power values P x, s (i) are supplied to both function block 31 and function block 32. Function block 31 continuously determines estimated values P n (i) for estimating the power of the noise signal component of the sampled values x (i), ie the power of the noise signal components of the sampled values x (i) is determined. From the smoothed power values P x, s (i) and the estimated values P n (i), the function block 32 continuously determines estimated values SNR (i) of the signal / noise power ratio of the sampled values x (i).

In Fig. 7 ist ein Flußdiagramm dargestellt, das die Funktionsweise des Funktionsblockes 7 näher erläutert. Anhand des Flußdiagramms wird ersichtlich, wie aus den Abtastwerten x(i) des Sprachsignals x durch ein Computerprogramm Schätzwerte SNR(i) des entsprechenden Signal-/ Rauschleistungsverhältnisses gebildet werden. In einem Initialisierungsblock 33 wird zu Beginn des durch Fig. 7 beschriebenen Programms eine Zählervariable Z auf 0 und eine Variable PMmin auf einen Wert Pmax gesetzt Pmax ist so groß gewählt, daß die geglätteten Leistungswerte Px,s(i) immer kleiner als Pmax sind. Pmax kann beispielsweise auf den maximal darstellbaren Zahlenwert eines zur Realisierung des Programms verwendeten Rechners gesetzt werden. In einem Block 34 wird ein neuer Abtastwert x(i) eingelesen. In Block 35 wird eine Zählervariable Z um den Wert 1 erhöht, wonach in Block 36 ein neuer geglätteter Leistungswert Px,s(i) gebildet wird. Er ergibt sich dadurch, daß zunächst durch P x (i) = P x (i-1) + x²(i) - x²(i-N)

Figure imgb0021
ein Kurzzeitleistungswert Px(i) und dann durch P x,s (i) = α * P x,s (i-1) + (1-α)*P x (i)
Figure imgb0022
ein neuer geglätteter Leistungswert gebildet wird. Mit Formel (1) wird ein Kurzzeitleistungswert Px(i) einer Gruppe von N aufeinanderfolgenden Abtastwerten x(i) ermittelt. N ist hier beispielsweise gleich 128. Der Wert α aus Gleichung (2) liegt zwischen 0,95 und 0,98. Die Ermittlung von geglätteten Leistungswerten Px,s(i) kann auch nur durch Gleichung (2) durchgeführt werden, wobei dann allerdings der Wert α ungefähr auf den Wert 0,99 zu erhöhen und Px(i) durch x²(i) zu ersetzen ist.FIG. 7 shows a flow chart which explains the function of the function block 7 in more detail. The flow chart shows how estimated values SNR (i) of the corresponding signal / noise power ratio are formed from the sampled values x (i) of the speech signal x by a computer program. In an initialization block 33, at the beginning of the program described by FIG. 7, a counter variable Z is set to 0 and a variable P Mmin is set to a value P max . P max is chosen so large that the smoothed power values P x, s (i) are always smaller than P max . P max can, for example, be set to the maximum representable numerical value of a computer used to implement the program. A new sample value x (i) is read in in block 34. In block 35, a counter variable Z is increased by the value 1, after which a new smoothed power value P x, s (i) is formed in block 36. It results from the fact that initially by P x (i) = P x (i-1) + x² (i) - x² (iN)
Figure imgb0021
a short-term power value P x (i) and then through P x, p (i) = α * P x, p (i-1) + (1-α) * P x (i)
Figure imgb0022
a new smoothed power value is formed. A short-term power value P x (i) of a group of N successive sample values x (i) is determined using formula (1). N here is 128, for example. The value α from equation (2) is between 0.95 and 0.98. The determination of smoothed power values P x, s (i) can also only be carried out using equation (2), in which case however the value α should be increased approximately to the value 0.99 and P x (i) by x² (i) is replace.

Durch eine Verzweigung 37 wird danach abgefragt, ob der gerade ermittelte geglättete Leistungswert Px,s(i) kleiner als PMmin ist. Wird diese Frage bejaht, d.h. Px,s(i) ist kleiner als PMmin, wird durch Block 38 PMmin auf den Wert von Px,s(i) gesetzt. Falls die Frage von Verzweigung 37 verneint wird, wird Block 38 übersprungen. Damit steht in PMmin nach M Programmzyklen das Minimum von M geglätteten Leistungswerten Px,s. Danach erfolgt mit der Verzweigung 39 die Abfrage, ob die Zählervariable Z einen Wert größer oder gleich einem Wert M hat. Es wird auf diese Weise festgestellt, ob schon M geglättete Leistungswerte abgearbeitet sind.A branch 37 then queries whether the smoothed power value P x, s (i) that has just been determined is less than P Mmin . If this question is answered in the affirmative, ie P x, s (i) is less than P Mmin , block 38 sets P Mmin to the value of P x, s (i). If the question of branch 37 is answered in the negative, block 38 is skipped. This means that the minimum of M smoothed power values P x, s is in P Mmin after M program cycles . Then the branch 39 is used to query whether the counter variable Z has a value greater than or equal to a value M. In this way it is determined whether M smoothed power values have already been processed.

Wird die Frage von Verzweigung 39 verneint, d.h. es sind noch nicht M geglättete Leistungswerte abgearbeitet, wird das Programm mit Block 40 fortgesetzt. Dort wird ein vorläufiger Schätzwert Pn(i) der Rauschsignalleistung des Sprachsignals x durch P n (i) = min {P x,s (i), P n (i)}

Figure imgb0023
bestimmt. Diese Operation stellt sicher, daß der vorläufige Schätzwert Pn(i) nicht größer als der aktuelle geglättete Leistungswert Px,s(i) sein kann. Danach wird mit Block 41 nach der Formel SNR(i) = [P x,s (i) - min{c*P n (i), P x,s (i)}] / [c*P n (i)]
Figure imgb0024
ein aktueller Schätzwert SNR(i) des Signal-/Rauschleistungsverhältnisses des Sprachsignals x(i) ermittelt. Im Normalfall dient das Produkt c*Pn(i) zur Abschätzung der aktuellen Leistung des Rauschsignalanteils, und die Differenz P x,s (i)-c*P n (i)
Figure imgb0025
dient zur Abschätzung der aktuellen Leistung des Sprachsignalanteils des Sprachsignals x(i). Die aktuelle Leistung des Sprachsignals wird durch den geglätteten Leistungswert Px,s(i) geschätzt. Die Gewichtung mit einem Skalierungsfaktor c verhindert, daß durch Pn(i) die Rauschsignalleistung mit einem zu kleinen Wert abgeschätzt wird. Der Skalierungsfaktor c liegt typisch im Bereich von 1,3 bis 2. Durch die Minimumbildung in Block 41 bzw. Gleichung (4) wird sichergestellt, daß das nicht logarithmierte Signal-/ Rauschleistungsverhältnis SNR(i) auch dann positiv ist, wenn im Ausnahmefall c*Pn(i) größer als Px,s(i) ist. Dann wird die Leistung des Rauschsignalanteils des Sprachsignals gleich der durch Px,s(i) geschätzten Leistung des Sprachsignals gesetzt. Die durch Px,s(i)-Px,s(i) geschätzte Leistung des Sprachsignalanteils des Sprachsignals ist dann wie auch das nicht logarithmische Signal-/ Rauschleistungsverhältnis gleich Null. Das Programm wird nach der Berechnung des Schätzwertes SNR(i) mit dem Einlesen eines neuen Sprachsignalabtastwertes x(i) durch Block 34 fortgesetzt.If the question of branch 39 is answered in the negative, ie M smoothed power values have not yet been processed, the program is continued with block 40. There, a preliminary estimate P n (i) of the noise signal power of the speech signal x is obtained P n (i) = min {P x, p (i), P n (i)}
Figure imgb0023
certainly. This operation ensures that the preliminary estimate P n (i) cannot be greater than the current smoothed power value P x, s (i). Then with block 41 according to the formula SNR (i) = [P x, p (i) - min {c * P n (i), P x, p (i)}] / [c * P n (i)]
Figure imgb0024
a current estimate SNR (i) of the signal / noise power ratio of the speech signal x (i) is determined. In the normal case, the product c * P n (i) is used to estimate the current power of the noise signal component, and the difference P x, p (i) -c * P n (i)
Figure imgb0025
is used to estimate the current power of the speech signal component of the speech signal x (i). The current power of the speech signal is estimated by the smoothed power value P x, s (i). The weighting with a scaling factor c prevents P n (i) from estimating the noise signal power with a value that is too small. The scaling factor c is typically in the range from 1.3 to 2. The minimum formation in block 41 or equation (4) ensures that the non-logarithmic signal / noise power ratio SNR (i) is also positive if in exceptional cases c * P n (i) is greater than P x, s (i). Then the power of the noise signal component of the voice signal is set equal to the power of the voice signal estimated by P x, s (i). The power of the speech signal component of the speech signal estimated by P x, s (i) -P x, s (i) is then equal to zero, as is the non-logarithmic signal / noise power ratio. After the calculation of the estimated value SNR (i), the program continues with the reading in of a new speech signal sample value x (i) by block 34.

Wird die Abfrage von Verzweigung 39 bejaht, d.h. es sind M geglättete Abtastwerte Px,s(i) abgearbeitet, werden in Block 42 durch

Figure imgb0026

die Komponenten eines Vektors minvec der Dimension W aktualisiert. Danach wird durch Verzweigung 43 abgefragt, ob die Komponenten minvec₁ bis minvecw mit ansteigendem Vektorindex ansteigen, d.h. ob gilt: minvec j+1 > minvec j für 1 ≦ j ≦ W-1
Figure imgb0027
Wird die Abfrage von Verzweigung 43 verneint, d.h. die zuletzt ermittelten in den Komponenten des Vektors minvec stehenden zuletzt ermittelten W Minima steigen nicht monoton an, wird durch Block 44 nach P n (i) = min{minvec w , minvec w-1 , ... , minvec₁}
Figure imgb0028
der vorläufige Schätzwert Pn(i) der Rauschsignalleistung aus den Minima der Komponenten des Vektors minvec, d.h aus dem Minimum der letzten L=W*M
Figure imgb0029
aufeinanderfolgenden geglätteten Leistungswerte Px,s(i), bestimmt. Bei einer Bejahung der durch Verzweigung 43 gestellten Frage, d.h. bei einem monotonen Ansteigen der zuletzt ermittelten in den Komponenten des Vektors minvec stehenden W Minima wird in Block 45 Pn(i) gleich PMmin gesetzt, so daß eine Anpassung der Abschätzung des Rauschsignalanteils beschleunigt erfolgt, da Pn(i) an dem Minimum des letzten (M < L) Werte bestimmt wird. Danach wird in Block 46 die Zählervariable Z wieder auf 0 gesetzt und PMmin erhält erneut den Wert Pmax.If the query of branch 39 is answered in the affirmative, ie M smoothed sample values P x, s (i) have been processed, in block 42 by
Figure imgb0026

updated the components of a vector minvec of dimension W. Then it is queried by branch 43 whether the components minvec 1 to minvec w increase with increasing vector index, ie whether: minvec j + 1 > minvec j for 1 ≦ j ≦ W-1
Figure imgb0027
If the query of branch 43 is negated, ie the last W minima determined in the components of the vector minvec do not rise monotonously, block 44 follows P n (i) = min {minvec w , minvec w-1 , ..., minvec₁}
Figure imgb0028
the preliminary estimate P n (i) of the noise signal power from the minima of the components of the vector minvec, ie from the minimum of the last L = W * M
Figure imgb0029
successive smoothed power values P x, s (i). If the question posed by branch 43 is answered in the affirmative, ie if the W minima found last in the components of the vector minvec increases monotonously, P n (i) is set equal to P Mmin in block 45, so that an adaptation of the estimation of the noise signal component is accelerated takes place since P n (i) is determined at the minimum of the last (M <L) values. Then in block 46 the counter variable Z is reset to 0 and P Mmin again receives the value P max .

Durch das beschriebene Programm werden jeweils M aufeinanderfolgende geglättete Px,s(i) Abtastwerte x(i) des Sprachsignals x zu einer Untergruppe zusammengefaßt. Innerhalb einer solchen Untergruppe wird durch die mit Verzweigung 37 und Block 38 durchgeführten Operationen das Minimum der geglätteten Leistungswerte Px,s(i) ermittelt. Die zuletzt ermittelten W Minima werden in den Komponenten des Vektors minvec abgespeichert. Sind die letzten W Minima nicht monoton ansteigend (siehe Verzweigung 43), so wird nach Block 44 ein vorläufiger Schätzwert Pn(i) der Leistung des Rauschsignalanteils aus dem Minimum der Minima der letzten W Untergruppen, d.h. aus dem Minimum einer Gruppe, bestimmt. Es werden jeweils zur Bildung einer Gruppe mit L=W*M

Figure imgb0030
aufeinanderfolgenden geglätteten Leistungswerten Px,s(i) W aufeinanderfolgende Untergruppen zusammengefaßt. Die Gruppen mit jeweils L Werten folgen lückenlos aufeinander und überlappen sich jeweils mit L-M gelätteten Leistungen Px,s(i).Through the described program, M successive smoothed P x, s (i) samples x (i) of the speech signal x are combined into a subgroup. Within such a subgroup, the minimum of the smoothed power values P x, s (i) is determined by the operations carried out with branch 37 and block 38. The W minima determined last are stored in the components of the vector minvec. If the last W minima are not monotonically increasing (see branch 43), then a preliminary estimate P n (i) of the power of the noise signal component is determined from the minimum of the minima of the last W subgroups, ie from the minimum of a group, according to block 44. They are each used to form a group L = W * M
Figure imgb0030
successive smoothed power values P x, s (i) W summarized successive sub-groups. The Groups with L values follow each other without gaps and overlap with LM smoothed powers P x, s (i).

Für den Fall, daß die Minima von W aufeinanderfolgenden Untergruppen monoton ansteigen (siehe Verzweigung 43), wird durch Block 45 zur Abschätzung des aktuellen Schätzwertes Pn(i) der Leistung des Rauschsignalanteils jeweils das Minimum der letzten Untergruppe mit M geglätteten Leistungswerten Px,s(i) verwendet. Die Zeitspanne, mit der monoton ansteigende geglättete Leistungswerten Px,s(i) auch eine Änderung der Schätzwerte SNR(i) bewirken, wird damit verkürzt.In the event that the minima of W successive subgroups increase monotonously (see branch 43), the minimum of the last subgroup with M smoothed power values P x is determined by block 45 to estimate the current estimated value P n (i) of the power of the noise signal component . s (i) used. This shortens the time period with which monotonically increasing smoothed power values P x, s (i) also cause a change in the estimated values SNR (i).

Fig. 8 verdeutlicht, wie die geglätteten Leistungswerte Px,s in Gruppen und Untergruppen zusammengefaßt werden. Es werden jeweils M geglättete Leistungswerte Px,s(i), die jeweils zu Abtastzeitpunkten i vorliegen, zu einer Untergruppe zusammengefaßt. Die Untergruppen grenzen aneinander. Für jede Untergruppe wird das Minimum der geglätteten Leistungswerte Px,s(i) bestimmt. Jeweils W Untergruppenminima werden in dem Vektor minvec abgespeichert. In der Regel, d.h. bei nicht monoton ansteigenden W Untergruppen Minima, werden W Untergruppen zu einer Gruppe mit L = W*M

Figure imgb0031
geglätteten Leistungswerten Px,s(i) zusammengefaßt. Nach jeweils M geglätteten Leistungen Px,s(i) wird aus dem Minimum der letzten W Untergruppenminima bzw. der letzten L geglätteten Leistungswerte Px,s(i) der Wert Pn(i) bestimmt, der zur Abschätzung der Rauschsignalleistung dient. In Fig. 8 sind acht Gruppen mit jeweils L Abtastwerten x(i) dargestellt, die jeweils W = 4 Untergruppen mit M geglätteten Leistungswerten Px,s(i) enthalten. Die acht Gruppen überlappen sich teilweise. So enthalten zwei aufeinanderfolgende Gruppen jeweils L-M gleiche geglättete Leistungswerte Px,s(i). Auf diese Weise wird ein guter Kompromiß zwischen dem erforderlichen Rechenaufwand und der jeweiligen Verzögerungszeit erreicht, mit der eine Aktualisierung eines Schätzwertes Pn(i) der Rauschsignalleistung zur Aktualisierung eines Schätzwertes SNR(i) des Signal/ Rauschleistungsverhältnisses erfolgt. Eine Realisierung mit aneinandergrenzenden, d.h. sich nicht überlappenden Gruppen ist auch denkbar. Allerdings ist dann bei verringertem Rechenaufwand die Zeitspanne zwischen zwei Schätzwerten SNR(i) vergrößert, so daß die Reaktionszeit auf sich ändernde SNR des Sprachsignals x(i) vergrößert ist.8 illustrates how the smoothed power values P x, s are combined in groups and subgroups. In each case, M smoothed power values P x, s (i), which are present at sampling times i, are combined into a subgroup. The subgroups are contiguous. The minimum of the smoothed power values P x, s (i) is determined for each subgroup. W subgroup minima are stored in the vector minvec. As a rule, ie with non-monotonically increasing W subgroups minima, W subgroups become a group with L = W * M
Figure imgb0031
smoothed power values P x, s (i) summarized. After M smoothed powers P x, s (i), the value P n (i) is determined from the minimum of the last W subgroup minima or the last L smoothed power values P x, s (i), which is used to estimate the noise signal power. 8 shows eight groups each with L samples x (i), each of which contains W = 4 subgroups with M smoothed power values P x, s (i). The eight groups partially overlap. Two successive groups each contain the same smoothed power values P x, s (i). In this way, a good compromise is achieved between the required computational effort and the respective delay time with which an update of an estimated value P n (i) of the noise signal power takes place in order to update an estimated value SNR (i) of the signal / noise power ratio. A realization with adjacent, ie non-overlapping groups is also conceivable. However, the time span between two estimated values SNR (i) is then increased with a reduced computing effort, so that the reaction time to changing SNR of the speech signal x (i) is increased.

Die beschriebene Sprachverarbeitungsvorrichtung weist damit eine Schätzvorrichtung auf, die zum fortlaufenden Bilden von Schätzwerten SNR(i) des Signal-/ Rauschleistungsverhältnisses von verrauschten Sprachsignalen x(i) geeignet ist. Insbesondere sind keine Sprachpausen zur Abschätzung der Rauschsignalleistung erforderlich. Die beschriebene Schätzvorrichtung nutzt den besonderen Zeitverlauf von geglätteten Leistungswerten des Sprachsignals x(i) aus, der durch Spitzen und dazwischenliegende Bereiche mit kleineren geglätteten Leistungswerten Px,s(i) gekennzeichnet ist, deren zeitliche Ausdehnung von der jeweiligen Sprachquelle, d.h. dem jeweiligen Sprecher, abhängt. Dabei werden die Bereiche zwischen den Spitzen zur Abschätzung der Leistung des Rauschsignalanteils verwendet. Die Gruppen mit jeweils L geglätteten Leistungswerten Px,s(i) müssen lückenlos aufeinanderfolgen, d.h. sie müssen entweder aneinandergrenzen oder sich überlappen. Weiterhin muß sichergestellt sein, daß mindestens ein Wert eines zwischen zwei Spitzen liegenden Bereichs mit kleineren geglätteten Leistungswerten Px,s(i) von jeder Gruppe erfaßbar ist, d.h. jede Gruppe muß soviele geglättete Leistungswerte Px,s(i) enthalten, daß mindestens alle zu einer beliebigen Spitze gehörenden Werte erfaßbar sind. Da die zeitlich ausgedehntesten Spitzen jeweils durch die zeitlich ausgedehntesten Phoneme eines Sprachsignals, d.h. die Vokale, abschätzbar sind, kann daraus die die Gruppengröße beschreibende Zahl L abgeleitet werden. Für eine Abtastrate des Sprachsignals von 8 kHz liegt ein sinnvoller Wert von L im Bereich zwischen 3000 und 8000. Ein vorteilhafter Wert für W ist 4. Bei einer solchen Dimensionierung ergibt sich ein guter Kompromiß zwischen Rechenaufwand und Reaktionsschnelligkeit des Funktionsblockes 7.The described speech processing device thus has an estimation device which is suitable for the continuous formation of estimated values SNR (i) of the signal / noise power ratio of noisy speech signals x (i). In particular, no speech pauses are required to estimate the noise signal power. The estimation device described uses the special time profile of smoothed power values of the speech signal x (i), which is characterized by peaks and intermediate areas with smaller smoothed power values P x, s (i), their temporal expansion from the respective speech source, ie the respective speaker , depends. The areas between the peaks are used to estimate the power of the noise signal component. The groups with L smoothed power values P x, s (i) must follow one another without gaps, ie they must either adjoin or overlap. Furthermore, it must be ensured that at least one value of an area lying between two peaks with smaller smoothed power values P x, s (i) can be recorded by each group, ie each group must contain so many smoothed power values P x, s (i) that at least all values belonging to any peak can be recorded. Since the most extended peaks can be estimated by the most extended phonemes of a speech signal, ie the vowels, the number L describing the group size can be derived from this. For a sampling rate of the speech signal of 8 kHz, a useful value of L is in the range between 3000 and 8000. An advantageous value for W is 4. With such a dimensioning, there is a good compromise between the computational effort and the speed of reaction of the function block 7.

In Fig. 9 ist eine Verwendung der Sprachverarbeitungsvorrichtung aus Fig. 3 in einem Mobilfunkendgerät 50 dargestellt. Die Sprachverarbeitungsmittel 20 bis 26 sind in einem Funktionsblock 51 zusammengefaßt, der aus den von den Mikrophonen M1, M2 und M3 erzeugten Mikrophon- bzw. Sprachsignalen die Summensignalwerte X(i) bildet. Die Mikrophone M1, M2 und M3 haben vorteilhaft einen Abstand von 10 bis 60 cm, so daß in einer sogenannten "verhallten" Umgebung (z.B. Auto, Büro) die Störsignalanteile der von den Mikrophonen M1, M2 und M3 gelieferten Sprachsignale weitgehend unkorreliert sind. Dies gilt auch beim Einsatz von nur zwei Mikrophonen wie in Fig. 1. Ein die Summensignalwerte X(i) verarbeitender Funktionsblock 52 faßt alle übrigen Mittel des Mobilfunkendgerätes 50 zum Empfang, Verarbeiten und Senden von Signalen zusammen, welche zur Kommunikation mit einer nicht dargestellten Basisstation dienen, wobei das Senden und Empfangen von Signalen über eine an den Funktionsblock 52 gekoppelte Antenne 54 erfolgt. Weiterhin ist ein mit dem Funktionsblock 52 gekoppelter Lautsprecher 53 vorgesehen. Die akustische Kommunikation eines Benutzers (Sprecher, Hörer) mit dem Mobilfunkendgerät 50 erfolgt über die Mikrophone M1 bis M3 und den Lautsprecher 53, die Teile einer in das Mobilfunkendgerät 50 integrierten Freisprecheinrichtung sind. Die Anwendung eines solchen Mobilfunkendgerätes 50 ist insbesondere in Kraftfahrzeugen von Vorteil, da dort das Freisprechen über das Mobilfunkendgerät insbesondere durch Motor- oder Fahrgeräusche (Rauschen) gestört ist.FIG. 9 shows a use of the voice processing device from FIG. 3 in a mobile radio terminal 50. The language processing means 20 to 26 are combined in a function block 51, which forms the sum signal values X (i) from the microphone or speech signals generated by the microphones M1, M2 and M3. The microphones M1, M2 and M3 advantageously have a distance of 10 to 60 cm, so that in a so-called "reverberated" environment (eg car, office) the interference signal components of the speech signals supplied by the microphones M1, M2 and M3 are largely uncorrelated. This also applies when only two microphones are used as in FIG. 1. A function block 52 which processes the sum signal values X (i) combines all the other means of the mobile radio terminal 50 for receiving, processing and transmitting signals which are used for communication with a base station (not shown) serve, the transmission and reception of signals via an antenna 54 coupled to the function block 52. Furthermore, a loudspeaker 53 coupled to the function block 52 is provided. A user (speaker, listener) communicates acoustically with the mobile radio terminal 50 via the microphones M1 to M3 and the loudspeaker 53, which are part of a hands-free device integrated in the mobile radio terminal 50. The use of such a mobile radio terminal 50 is particularly advantageous in motor vehicles, since there the hands-free communication via the mobile radio terminal is particularly disturbed by engine or driving noise (noise).

Claims (8)

Mobilfunkendgerät mit einer Sprachverarbeitungsvorrichtung zur Verarbeitung eines ersten (x2(i)) und mindestens eines weiteren (x1(i), x3(i)) aus Rausch- und Sprachsignalanteilen bestehenden und als Abtastwerte vorliegenden Sprachsignals mit Verzögerungsmitteln (4, 23, 24) zur Verzögerung des abgetasteten weiteren Sprachsignals (x1(i), x3(i)), mit Steuermitteln (3, 26) - zur Bildung von Gradientenschätzwerten (grad(i), sgrad(i)) durch Multiplikation von Fehlerwerten (e₁₂(i), e₃₂(i), e₁₃(i), e₃₁(i)) für zwei Sprachsignale (z.B. x1(i) und x2(i)) mit den Ausgangswerten eines Digitalfilters (6), das eine Phasenverschiebung von 90 Grad bewirkt und zur Filterung eines der zwei Sprachsignale (z.B. x2(i)) dient, - zur rekursiven Ermittlung von Verzögerungsschätzwerten (T1'(i), T3'(i)) aus den Gradientenschätzwerten (grad(i), sgrad(i)), wobei aus den Verzögerungsschätzwerten (T1'(i), T3'(i)) durch Rundung die Verzögerungswerte (T2(i), T3(i)) gebildet werden, die zur Einstellung der Verzögerungsmittel (4, 23, 24) dienen und - zur Bildung jeweils wenigstens eines Fehlerwertes (e₁₂(i), e₃₂(i), e₁₃(i), e₃₁(i)) für einen bestimmten Abtastzeitpunkt (i) aus der Differenz zwischen einem Sprachsignalschätzwert (x1int(i), x3int(i)), der zur Abschätzung des weiteren Sprachsignals (x1(i), x3(i)) zu einem gegenüber dem bestimmten Abtastzeitpunkt (i) um den Verzögerungsschätzwert (T1'(i), T3'(i)) verschobenen Zeitpunkt dient und durch Interpolation von Abtastwerten des weiteren Sprachsignals (x1(i), x3(i)) gebildet wird, und dem Abtastwert eines anderen der zu verarbeitenden Sprachsignale (x1(i), x2(i), x3(i)) zu dem bestimmten Abtastzeitpunkt (i) und mit einer Addiervorrichtung (5, 25) zum Addieren der gegeneinander zeitversetzten Sprachsignale (x1(i), x2(i), x3(i)). Mobile radio terminal with a speech processing device for processing a first (x2 (i)) and at least one further (x1 (i), x3 (i)) speech signals consisting of noise and speech signal components and present as samples with delay means (4, 23, 24) Delay of the sampled further speech signal (x1 (i), x3 (i)), with control means (3, 26) - to form gradient estimates (grad (i), sgrad (i)) by multiplying error values (e₁₂ (i), e₃₂ (i), e₁₃ (i), e₃₁ (i)) for two speech signals (e.g. x1 (i) and x2 (i)) with the output values of a digital filter (6), which causes a phase shift of 90 degrees and is used to filter one of the two speech signals (for example x2 (i)), - For the recursive determination of delay estimated values (T1 '(i), T3' (i)) from the gradient estimated values (grad (i), sgrad (i)), with the delay estimated values (T1 '(i), T3' (i) ) the delay values (T2 (i), T3 (i)) are formed by rounding, which serve to set the delay means (4, 23, 24) and - To form at least one error value (e₁₂ (i), e₃₂ (i), e₁₃ (i), e₃₁ (i)) for a certain sampling time (i) from the difference between a speech signal estimate (x1 int (i), x3 int (i)), which is used to estimate the further speech signal (x1 (i), x3 (i)) at a point in time shifted by the delay estimated value (T1 '(i), T3' (i)) compared to the determined sampling time (i) and is formed by interpolating samples of the further speech signal (x1 (i), x3 (i)) and the sample of another of the speech signals (x1 (i), x2 (i), x3 (i)) to be processed to the determined one Sampling time (i) and with an adding device (5, 25) for adding the mutually time-shifted speech signals (x1 (i), x2 (i), x3 (i)). Mobilfunkendgerät nach Anspruch 1,
dadurch gekennzeichnet,
daß das Digitalfilter (6) ein digitaler Hilbert-Transformator ist.
Mobile radio terminal according to claim 1,
characterized by
that the digital filter (6) is a digital Hilbert transformer.
Mobilfunkendgerät nach Anspruch 2,
dadurch gekennzeichnet,
daß Mittel (12) zur Glättung der Gradientenschätzwerte (grad(i)) vorgesehen sind.
Mobile radio terminal according to claim 2,
characterized by
that means (12) for smoothing the gradient estimates (grad (i)) are provided.
Mobilfunkendgerät nach einem der Ansprüche 1 bis 3,
dadurch gekennzeichnet,
daß die Sprachverarbeitungsvorrichtung zur Verarbeitung von drei Sprachsignalen (x1(i), x2(i), x3(i)) vorgesehen ist.
Mobile radio terminal according to one of claims 1 to 3,
characterized by
that the speech processing device is provided for processing three speech signals (x1 (i), x2 (i), x3 (i)).
Mobilfunkendgerät nach einem der Ansprüche 1 bis 4,
dadurch gekennzeichnet,
daß zur Ermittlung eines Verzögerungsschätzwertes (T1'(i), T3'(i)) für das weitere Sprachsignal (x1(i), x3(i)) die Verwendung einer Linearkombination von Fehlerwerten (e₁₂(i) mit e₁₃(i), e₃₁(i) mit e₃₂(i)) vorgesehen ist.
Mobile radio terminal according to one of claims 1 to 4,
characterized by
that to determine a delay estimate (T1 '(i), T3' (i)) for the further speech signal (x1 (i), x3 (i)) the use of a linear combination of error values (e₁₂ (i) with e₁₃ (i), e₃₁ (i) with e₃₂ (i)) is provided.
Mobilfunkendgerät nach einem der Ansprüche 1 bis 5,
dadurch gekennzeichnet,
daß Verzögerungsmittel (16,27) zur Verzögerung des ersten Sprachsignals (x2(i)) mit einer festen Verzögerungszeit (Tmax) vorgesehen sind.
Mobile radio terminal according to one of claims 1 to 5,
characterized by
that delay means (16, 27) are provided for delaying the first speech signal (x2 (i)) with a fixed delay time (T max ).
Mobilfunkendgerät nach einem der Ansprüche 1 bis 6,
dadurch gekennzeichnet,
daß die Sprachverarbeitungsvorrichtung in eine Freisprecheinrichtung (M1, M2, M3, 51, 52, 53) integriert ist.
Mobile radio terminal according to one of claims 1 to 6,
characterized by
that the speech processing device is integrated into a hands-free device (M1, M2, M3, 51, 52, 53).
Sprachverarbeitungsvorrichtung zur Verarbeitung eines ersten (x2(i)) und mindestens eines weiteren (x1(i), x3(i)) aus Rausch- und Sprachsignalanteilen bestehenden und als Abtastwerte vorliegenden Sprachsignals mit Verzögerungsmitteln (4, 23, 24) zur Verzögerung des abgetasteten weiteren Sprachsignals (x1(i), x3(i)) und mit Steuermitteln (3, 26) - zur Bildung von Gradientenschätzwerten (grad(i), sgrad(i)) durch Multiplikation von Fehlerwerten (e₁₂(i), e₃₂(i), e₁₃(i), e₃₁(i)) für zwei Sprachsignale (z.B. x1(i) und x2(i)) mit den Ausgangswerten eines Digitalfilters (6), das eine Phasenverschiebung von 90 Grad bewirkt und zur Filterung eines der zwei Sprachsignale (z.B. x2(i)) dient, - zur rekursiven Ermittlung von Verzögerungsschätzwerten (T1'(i), T3'(i)) aus den Gradientenschätzwerten (grad(i), sgrad(i)), wobei aus den Verzögerungsschätzwerten (T1'(i), T3'(i)) durch Rundung auf ganzzahlige Vielfache eines Abtastintervalls der Sprachsignalabtastwerte (x1(i), x2(i), x3(i)) die Verzögerungswerte (T2(i), T3(i)) gebildet werden, die zur Einstellung der Verzögerungsmittel (4, 23, 24) dienen und - zur Bildung jeweils wenigstens eines Fehlerwertes (e₁₂(i), e₃₂(i), e₁₃(i), e₃₁(i)) für einen bestimmten Abtastzeitpunkt (i) aus der Differenz zwischen einem Sprachsignalschätzwert (x1int(i), x3int(i)), der zur Abschätzung des weiteren Sprachsignals (x1(i), x3(i)) zu einem gegenüber dem bestimmten Abtastzeitpunkt (i) um den Verzögerungsschätzwert (T1'(i), T3'(i)) verschobenen Zeitpunkt dient und durch Interpolation von Abtastwerten des weiteren Sprachsignals (x1(i), x3(i)) gebildet wird, und dem Abtastwert eines anderen der zu verarbeitenden Sprachsignale (x1(i), x2(i), x3(i)) zu dem bestimmten Abtastzeitpunkt (i) und mit einer Addiervorrichtung (5, 25) zum Addieren der gegeneinander zeitversetzten Sprachsignale (x1(i), x2(i), x3(i)).Speech processing device for processing a first (x2 (i)) and at least one further (x1 (i), x3 (i)) consisting of noise and speech signal components and present as samples speech signals with delay means (4, 23, 24) for delaying the sampled further speech signal (x1 (i), x3 (i)) and with control means (3, 26) - to form gradient estimates (grad (i), sgrad (i)) by multiplying error values (e₁₂ (i), e₃₂ (i), e₁₃ (i), e₃₁ (i)) for two speech signals (e.g. x1 (i) and x2 (i)) with the output values of a digital filter (6), which causes a phase shift of 90 degrees and is used to filter one of the two speech signals (for example x2 (i)), - For the recursive determination of delay estimated values (T1 '(i), T3' (i)) from the gradient estimated values (grad (i), sgrad (i)), with the delay estimated values (T1 '(i), T3' (i) ) by rounding to integer multiples of a sampling interval of the speech signal samples (x1 (i), x2 (i), x3 (i)) the delay values (T2 (i), T3 (i)) are formed, which are used to set the delay means (4, 23, 24) serve and - To form at least one error value (e₁₂ (i), e₃₂ (i), e₁₃ (i), e₃₁ (i)) for a certain sampling time (i) from the difference between a speech signal estimate (x1 int (i), x3 int (i)), which is used to estimate the further speech signal (x1 (i), x3 (i)) compared to the one determined Sampling time (i) serves the time shifted by the delay estimated value (T1 '(i), T3' (i)) and is formed by interpolation of samples of the further speech signal (x1 (i), x3 (i)) and the sample value of another the speech signals to be processed (x1 (i), x2 (i), x3 (i)) at the determined sampling time (i) and with an adding device (5, 25) for adding the mutually time-shifted speech signals (x1 (i), x2 (i), x3 (i)).
EP95201578A 1994-06-22 1995-06-14 Speech processing apparatus and mobile transceiver Expired - Lifetime EP0689191B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE4421853A DE4421853A1 (en) 1994-06-22 1994-06-22 Mobile terminal
DE4421853 1994-06-22

Publications (3)

Publication Number Publication Date
EP0689191A2 true EP0689191A2 (en) 1995-12-27
EP0689191A3 EP0689191A3 (en) 1997-05-28
EP0689191B1 EP0689191B1 (en) 2001-05-23

Family

ID=6521236

Family Applications (1)

Application Number Title Priority Date Filing Date
EP95201578A Expired - Lifetime EP0689191B1 (en) 1994-06-22 1995-06-14 Speech processing apparatus and mobile transceiver

Country Status (4)

Country Link
US (1) US5647006A (en)
EP (1) EP0689191B1 (en)
JP (1) JPH0818473A (en)
DE (2) DE4421853A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6535609B1 (en) * 1997-06-03 2003-03-18 Lear Automotive Dearborn, Inc. Cabin communication system
EP1184676B1 (en) * 2000-09-02 2004-05-06 Nokia Corporation System and method for processing a signal being emitted from a target signal source into a noisy environment
JP5931108B2 (en) * 2014-03-20 2016-06-08 本田技研工業株式会社 Navigation server and program

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3997772A (en) * 1975-09-05 1976-12-14 Bell Telephone Laboratories, Incorporated Digital phase shifter
DE3173306D1 (en) * 1981-09-08 1986-02-06 Ibm Data receiving apparatus with listener echo canceller
JP3268360B2 (en) * 1989-09-01 2002-03-25 モトローラ・インコーポレイテッド Digital speech coder with improved long-term predictor
US5126681A (en) * 1989-10-16 1992-06-30 Noise Cancellation Technologies, Inc. In-wire selective active cancellation system
US5400399A (en) * 1991-04-30 1995-03-21 Kabushiki Kaisha Toshiba Speech communication apparatus equipped with echo canceller
EP0517525A3 (en) * 1991-06-06 1993-12-08 Matsushita Electric Ind Co Ltd Noise suppressor
US5519637A (en) * 1993-08-20 1996-05-21 Mcdonnell Douglas Corporation Wavenumber-adaptive control of sound radiation from structures using a `virtual` microphone array method
US5359663A (en) * 1993-09-02 1994-10-25 The United States Of America As Represented By The Secretary Of The Navy Method and system for suppressing noise induced in a fluid medium by a body moving therethrough
US5473701A (en) * 1993-11-05 1995-12-05 At&T Corp. Adaptive microphone array
NL9302013A (en) * 1993-11-19 1995-06-16 Tno System for rapid convergence of an adaptive filter when generating a time-variant signal to cancel a primary signal.
US5581495A (en) * 1994-09-23 1996-12-03 United States Of America Adaptive signal processing array with unconstrained pole-zero rejection of coherent and non-coherent interfering signals
US5526426A (en) * 1994-11-08 1996-06-11 Signalworks System and method for an efficiently constrained frequency-domain adaptive filter

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
IEEE TRANSACTIONS ON ACOUSTICS, SPEECH, AND SIGNAL PROCESSING, vol. 29, no. 3, June 1981 (1981-06-01), pages 582 - 587

Also Published As

Publication number Publication date
EP0689191B1 (en) 2001-05-23
DE59509271D1 (en) 2001-06-28
EP0689191A3 (en) 1997-05-28
JPH0818473A (en) 1996-01-19
US5647006A (en) 1997-07-08
DE4421853A1 (en) 1996-01-04

Similar Documents

Publication Publication Date Title
EP0948237B1 (en) Method for noise suppression in a microphone signal
DE69822128T2 (en) ARRANGEMENT FOR PROCESSING AUDIO SIGNALS FROM MULTIPLE SOURCES
DE102010023615B4 (en) Signal processing apparatus and signal processing method
EP0668007B1 (en) Mobile radiotelephone set with handsfree device
EP1251493A2 (en) Method for noise reduction with self-adjusting spurious frequency
EP1388147B1 (en) Method for enlarging the band width of a narrow-band filtered voice signal, especially a voice signal emitted by a telecommunication appliance
DE112009001003T5 (en) Noise cancellation system with two microphones
DE2207141C3 (en) Circuit arrangement for suppressing unwanted speech signals by means of a predictive filter
EP0747880B1 (en) System for speech recognition
DE19831320A1 (en) Digital adaptive filter for communications system, e.g. hands free communications in vehicles, has power estimation unit recursively smoothing increasing and decreasing input power asymmetrically
EP1143416A2 (en) Time domain noise reduction
EP0614304A1 (en) Process for improvement of acoustic feedback suppression in electro-acoustic devices
DE102008039330A1 (en) Apparatus and method for calculating filter coefficients for echo cancellation
EP1456839B1 (en) Method and device for the suppression of periodic interference signals
EP1189419B1 (en) Method and device for eliminating the loudspeaker interference on microphone signals
EP1155561B1 (en) Method and device for suppressing noise in telephone devices
DE69817461T2 (en) Method and device for the optimized processing of an interference signal during a sound recording
WO1999041898A1 (en) Method for improving acoustic noise attenuation in hand-free devices
AT504164B1 (en) DEVICE FOR NOISE PRESSURE ON AN AUDIO SIGNAL
EP0689191B1 (en) Speech processing apparatus and mobile transceiver
EP0615226B1 (en) Method for noise reduction in disturbed voice channels
EP0644527B1 (en) Terminal for mobile radio
EP0592787A1 (en) Procedure for improvement of acoustic feedback suppression of electro-acoustic devices
EP2315200B1 (en) Adaptive MIMO filtering in dynamically adjusted transformation areas
EP1282297B1 (en) Method and apparatus for echo and noise suppression

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): DE FR GB

PUAL Search report despatched

Free format text: ORIGINAL CODE: 0009013

AK Designated contracting states

Kind code of ref document: A3

Designated state(s): DE FR GB

17P Request for examination filed

Effective date: 19971128

RAP3 Party data changed (applicant data changed or rights of an application transferred)

Owner name: KONINKLIJKE PHILIPS ELECTRONICS N.V.

Owner name: PHILIPS CORPORATE INTELLECTUAL PROPERTY GMBH

RIC1 Information provided on ipc code assigned before grant

Free format text: 7G 10L 21/02 A

RTI1 Title (correction)

Free format text: SPEECH PROCESSING APPARATUS AND MOBILE TRANSCEIVER

GRAG Despatch of communication of intention to grant

Free format text: ORIGINAL CODE: EPIDOS AGRA

17Q First examination report despatched

Effective date: 20000809

GRAG Despatch of communication of intention to grant

Free format text: ORIGINAL CODE: EPIDOS AGRA

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB

REF Corresponds to:

Ref document number: 59509271

Country of ref document: DE

Date of ref document: 20010628

GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)

Effective date: 20010802

ET Fr: translation filed
REG Reference to a national code

Ref country code: GB

Ref legal event code: IF02

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed
REG Reference to a national code

Ref country code: FR

Ref legal event code: D6

REG Reference to a national code

Ref country code: GB

Ref legal event code: 746

Effective date: 20021111

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20040628

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20040629

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20040813

Year of fee payment: 10

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20050614

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20060103

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20060228

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20050614

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20060228