WO2018211759A1 - ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム - Google Patents

ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム Download PDF

Info

Publication number
WO2018211759A1
WO2018211759A1 PCT/JP2018/005404 JP2018005404W WO2018211759A1 WO 2018211759 A1 WO2018211759 A1 WO 2018211759A1 JP 2018005404 W JP2018005404 W JP 2018005404W WO 2018211759 A1 WO2018211759 A1 WO 2018211759A1
Authority
WO
WIPO (PCT)
Prior art keywords
noise
digital data
data
signal
input
Prior art date
Application number
PCT/JP2018/005404
Other languages
English (en)
French (fr)
Inventor
中村　真巳
Original Assignee
株式会社Ｊｖｃケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｊｖｃケンウッド filed Critical 株式会社Ｊｖｃケンウッド
Priority to CN201880012058.4A priority Critical patent/CN110301140B/zh
Priority to EP18802614.0A priority patent/EP3611936B1/en
Publication of WO2018211759A1 publication Critical patent/WO2018211759A1/ja
Priority to US16/596,818 priority patent/US10796710B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M9/00—Arrangements for interconnection not involving centralised switching
    • H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L21/0232—Processing in the frequency domain
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B3/00—Line transmission systems
    • H04B3/02—Details
    • H04B3/20—Reducing echo effects or singing; Opening or closing transmitting path; Conditioning for transmission in one direction or the other
    • H04B3/23—Reducing echo effects or singing; Opening or closing transmitting path; Conditioning for transmission in one direction or the other using a replica of transmitted signal in the time domain, e.g. echo cancellers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M9/00—Arrangements for interconnection not involving centralised switching
    • H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech

Definitions

  • the present invention relates to a noise removal device, a noise removal method, and a noise removal program.
  • a hands-free system As a system for detecting a user's voice.
  • a driver's voice collected using a microphone is converted into digital data.
  • noise inside the apparatus may be mixed in addition to the originally input audio signal.
  • the converted digital audio data is data including noise.
  • Patent Document 1 is known as a technique for performing noise removal processing on a digitized detection signal in real time.
  • Patent Document 1 an average value of cumulative addition values of recently acquired detection signals is calculated, and the calculation result is used as a detection signal after noise removal processing.
  • acoustic echo may be removed by installing an echo canceller.
  • an echo canceller According to the technique described in Patent Document 1, since it is necessary to calculate an average value by performing cumulative addition processing in order to remove noise, there is room for improvement in application to a hands-free system.
  • the present invention has been made in view of the above, and an object thereof is to provide a noise removing device, a noise removing method, and a noise removing program capable of removing noise mixed in the device.
  • a noise removal apparatus includes a first conversion unit that converts an input signal from a microphone into digital data and generates input digital data, and internal noise.
  • the second conversion unit that converts the signal into digital data, the digital data corresponding to the output signal to the speaker, and the digital data converted by the second conversion unit are used as reference data, and the input digital data is converted into the reference data.
  • a noise removal method includes a step of generating input digital data by converting an input signal from a microphone into digital data by a first conversion unit; The step of converting the internal noise signal into digital data by the second conversion unit, the digital data corresponding to the output signal to the speaker and the digital data converted by the second conversion unit are used as reference data, and the signal processing unit Removing a component corresponding to the reference data from the input digital data.
  • a noise removal program is performed by adding a computer to an addition unit that adds digital data of an internal noise signal to received data from a communication partner.
  • An echo canceling unit for subtracting cancellation data generated by processing the reference data based on the reference data and characteristic information simulating the characteristic of an echo path from the digital data as reference data, It is a noise removal program to function as.
  • noise mixed in the apparatus can be removed together with the echo.
  • FIG. 1 is a diagram illustrating a configuration example of the noise removing device according to the present embodiment.
  • FIG. 2 is a diagram illustrating a configuration example of the signal processing unit in FIG.
  • FIG. 3 is a diagram illustrating a configuration example of the echo canceling unit in FIG.
  • FIG. 4 is a diagram illustrating a configuration of an echo removal apparatus according to a comparative example.
  • FIG. 5 is a diagram illustrating a configuration example of a signal processing unit in the echo removal apparatus of FIG.
  • FIG. 6 is a diagram illustrating a configuration of a noise removing device according to a modification.
  • FIG. 7 is a diagram illustrating a configuration example of a signal processing unit in the noise removal apparatus of FIG.
  • FIG. 8 is a flowchart illustrating an example of an echo removal operation by the signal processing unit.
  • FIG. 1 is a diagram illustrating a configuration example of the noise removing device according to the present embodiment.
  • a noise removing device 10 according to the present embodiment is mounted on a vehicle 1 and used.
  • the vehicle 1 is equipped with a speaker 20 and a microphone (hereinafter abbreviated as a microphone) 30.
  • the speaker 20 outputs sound into the vehicle 1.
  • the speaker 20 converts an input analog audio signal into audio.
  • the microphone 30 acquires sound in the vehicle 1.
  • the microphone 30 converts the acquired sound into an analog sound signal.
  • the noise removal apparatus 10 includes a signal processing unit 100, amplification units (hereinafter referred to as AMP) 11 and 15, analog-digital conversion units (Analog Digital Converter; hereinafter referred to as ADC) 12 and 14, digital analog And a converter 13 (Digital Analog Converter; hereinafter referred to as DAC).
  • AMP amplification units
  • ADC Analog Digital Converter
  • DAC Digital Analog Converter
  • the signal processing unit 100 performs a process for removing other than the target voice such as echo and noise on the digital voice data.
  • the signal processing unit 100 can be realized using, for example, a DSP (Digital Signal Processor).
  • the signal processing unit 100 may be realized by an SOC (System-on-a-chip).
  • the signal processing unit 100 may be realized using both the DSP and the SOC.
  • AMP11 is a microphone amplifier.
  • the AMP 11 amplifies an analog audio signal output from the microphone 30.
  • the ADC 12 is a first conversion unit that converts an input analog audio signal into digital audio data. Digital audio data converted by the ADC 12 is input to the signal processing unit 100.
  • the DAC 13 converts the input digital audio data into an analog audio signal.
  • the analog audio signal converted by the DAC 13 is input to the AMP 15.
  • AMP15 is a speaker amplifier.
  • the AMP 15 amplifies the input analog audio signal.
  • the analog audio signal amplified by the AMP 15 is input to the speaker 20.
  • the ADC 14 is a second conversion unit that converts an input analog signal into digital data.
  • the ADC 14 inputs a noise signal in its own device, that is, the noise removing device 10.
  • the ADC 14 has an input terminal to which a signal to be converted into digital data is input connected to the analog ground 106.
  • the analog ground 106 is an analog ground of the AMP 11, for example.
  • the ADC 14 converts the voltage level of the analog ground 106 into digital data. For this reason, if noise is mixed in the analog ground 106 which should originally be 0 [V], the ADC 14 outputs digital data corresponding to the voltage level of the noise.
  • the digital data converted by the ADC 14 is data corresponding to noise inside the noise removal apparatus 10.
  • noise from the power supply voltage, the ground, and the midpoint voltage connected to the ADC 14 is mixed with the same component as the ADC 12.
  • the noise removing device 10 adds the data converted by the ADC 14 to the reference data as noise inside the device itself, thereby using the echo removal processing of the signal processing unit 100 and not only the echo by the speaker 20 and the microphone 30 but also the inside of the device itself. Are also removed from the input sound to the microphone 30.
  • the noise removal apparatus 10 in order to effectively remove noise, it is preferable to input noise having the same component as possible to the noise mixed in the ADC 12 to the ADC 14. For this reason, it is preferable that the noise removal apparatus 10 implement
  • the noise removal apparatus 10 of this embodiment prepares an ADC integrated circuit having stereo input / output channels, and associates the ADC 12 with one input / output channel and the ADC 14 with the other input / output channel.
  • the noise removing device 10 physically implements the ADC 12 and the ADC 14 using one integrated circuit. By doing so, the ADC 12 and the ADC 14 are similarly affected by the noise component.
  • the ADC 12 and the ADC 14 may be physically different, the influence of noise components on the ADC 12 and the ADC 14 may be different.
  • the ADC 12 and the ADC 14 that are physically provided in one integrated circuit are used, the ADC 12 and the ADC 14 are similarly affected by the noise component, and therefore separate ADC integrated circuits are used for the ADC 12 and the ADC 14.
  • noise can be effectively removed.
  • the ADC 12 and the ADC 14 may be realized by a plurality of conversion units physically included in one integrated circuit.
  • the telephone 40 transmits a voice signal to the call partner side and receives a voice signal from the call partner side.
  • the telephone 40 is, for example, a mobile phone or a smartphone.
  • FIG. 2 is a diagram illustrating a configuration example of the signal processing unit 100 in FIG.
  • the signal processing unit 100 includes an addition unit 101, an echo cancellation unit 102, and a noise suppressor 103.
  • the addition unit 101 adds the digital audio data output to the speaker 20 and the digital data converted by the ADC 14.
  • the addition result of the addition unit 101 is input to the echo cancellation unit 102 as reference data.
  • the signal processing unit 100 may include a delay unit that delays reference data input to the echo cancellation unit 102.
  • the echo cancellation unit 102 inputs digital audio data as reference data.
  • the reference data is audio data before being converted into an analog audio signal output from the speaker 20.
  • the echo cancellation unit 102 performs an echo removal process for removing a component corresponding to the reference data from digital audio data obtained by converting the audio signal input to the microphone 30.
  • the echo removal process is a process of subtracting a component corresponding to reference data from digital audio data obtained by converting an audio signal input to the microphone 30. By performing this echo removal processing, it is possible to prevent the sound output from the speaker 20 from being included in the sound output to the call partner.
  • the noise suppressor 103 processes digital audio data and suppresses noise mixed in the audio.
  • the noise suppressor 103 performs processing for reducing road noise and the like.
  • the adding unit 101, the echo canceling unit 102, and the noise suppressor 103 can be realized using, for example, a DSP.
  • FIG. 3 is a diagram illustrating a configuration example of the echo cancellation unit 102.
  • the echo cancellation unit 102 includes an adaptive filter 1021 and a subtraction unit 1022.
  • the adaptive filter 1021 processes the reference data based on the space from the output of the speaker 20 to the input to the microphone 30, that is, the characteristics of the echo path, and generates cancel data. More specifically, the adaptive filter 1021 generates cancellation data by applying characteristic information simulating the characteristic of the echo path to the reference data. The adaptive filter 1021 performs a convolution process with the adaptive filter coefficient to generate cancel data. The adaptive filter 1021 inputs the generated cancellation data to the subtraction unit 1022.
  • the subtraction unit 1022 subtracts the cancel data from the audio data corresponding to the audio signal input to the microphone 30.
  • the output of the subtraction unit 1022 is input to the adaptive filter 1021 as error data.
  • the adaptive filter 1021 performs an operation of updating the filter coefficient to converge so that the error signal is minimized.
  • the echo cancellation function is used to reduce noise inside the apparatus in addition to echo.
  • the echo cancel unit 102 receives reference data that is input of a sound source of a sound to be erased, and data in which a desired sound such as a microphone input is mixed with an unnecessary sound that is to be erased. Output later data.
  • the echo canceling unit 102 normally removes a component corresponding to the reference data by inputting the output audio data to the speaker 20 as reference data. By eliminating the sound from the speaker 20 input from the microphone 30, a sound without echo can be obtained from the output of the echo canceling unit 102.
  • the route on the sending side to the other party is as follows. That is, the microphone 30 acquires sound in the vehicle 1.
  • the microphone 30 converts the acquired sound into an analog sound signal.
  • the audio signal converted by the microphone 30 is input to the AMP 11.
  • the AMP 11 amplifies the voltage level of the audio signal.
  • the AMP 11 adjusts the voltage level of the audio signal so that it is not clipped in the subsequent stage.
  • the ADC 12 converts the analog audio signal whose level is adjusted by the AMP 11 into digital audio data.
  • Digital audio data converted by the ADC 12 is input to the signal processing unit 100.
  • the signal processing unit 100 performs processing for removing echo on digital audio data.
  • the audio data from which the echo is removed by the signal processing unit 100 is output from the noise removal device 10.
  • the audio data output from the noise removing device 10 is input to the telephone 40.
  • the telephone 40 transmits voice data to a telephone (not shown) on the other party side.
  • the route on the receiving side from the telephone on the other side is as follows. That is, the telephone 40 outputs digital audio data received from the telephone on the other party side.
  • the noise removing device 10 inputs digital audio data output from the telephone 40.
  • the noise removing apparatus 10 performs necessary processing on digital audio data in the signal processing unit 100.
  • the signal processing unit 100 outputs digital audio data.
  • Digital audio data output from the signal processing unit 100 is input to the DAC 13.
  • the DAC 13 converts input digital audio data into an analog audio signal.
  • the analog audio signal converted by the DAC 13 is input to the AMP 15.
  • the AMP 15 amplifies the voltage level of the audio signal.
  • the audio signal whose voltage level is amplified by the AMP 11 is input to the speaker 20.
  • the speaker 20 outputs sound into the vehicle 1.
  • a speaker 20 and a microphone 30 are provided in the vehicle 1. For this reason, the sound output from the speaker 20 into the vehicle 1 is input to the microphone 30. In that case, echo may occur and it may be difficult to hear. Therefore, echo cancellation processing is performed in the echo cancellation unit 102 of the signal processing unit 100.
  • the echo cancellation unit 102 inputs digital audio data as reference data.
  • the digital audio data as reference data is audio data before being converted into an analog audio signal output from the speaker 20.
  • the digital data corresponding to the noise converted by the ADC 14 is added to the reference data by the adding unit 101.
  • the echo cancellation unit 102 performs an echo removal process of subtracting a component corresponding to the reference data from the digital audio data obtained by converting the audio signal input to the microphone 30. By performing this echo removal processing, it is possible to prevent the sound output from the speaker 20 from being included in the sound output to the other party.
  • the data obtained by adding the data of the voice input to the microphone 30 and the data converted by the ADC 14 is used as reference data for the echo cancellation unit 102.
  • Noise enters the ADC 14 from the ground to which the ADC 14 is connected with the same component as the ADC 12.
  • the echo removal apparatus of the comparative example has a configuration in which the ADC 14 is not provided in the noise removal apparatus 10 illustrated in FIG. 1 and the addition unit 101 is not provided in FIG.
  • FIG. 4 is a diagram showing a configuration of an echo removal apparatus 10A according to a comparative example.
  • FIG. 5 is a diagram illustrating a configuration example of the signal processing unit 100A in the echo removal apparatus 10A of FIG.
  • the ADC 14 and the adding unit 101 are not provided, and the output of the ADC 14 is not added to the reference data.
  • the route on the sending side to the other party is as follows. That is, the analog audio signal output from the AMP 11 is converted into digital audio data by the ADC 12 and input to the signal processing unit 100A.
  • the signal processing unit 100A performs processing for removing echo on the digital audio data.
  • the audio data from which the echo is removed by the signal processing unit 100A is output from the echo removing apparatus 10A.
  • the route on the receiving side from the other party is the same as the route described above with reference to FIGS. That is, digital audio data output from the signal processing unit 100A of the echo removal apparatus 10A is converted into an analog audio signal by the DAC 13 and input to the AMP 15. The sound is output from the speaker 20 by the sound signal whose voltage level is amplified by the AMP 15.
  • the echo cancellation unit 102 inputs digital audio data as reference data, and generates cancellation data.
  • the echo cancellation unit 102 performs an echo removal process of subtracting the cancellation data from the digital audio data obtained by converting the audio signal input to the microphone 30.
  • Noises other than sound to the microphone 30 include noise that jumps into the wiring from the microphone 30 to the AMP 11, noise that mixes into the power source and ground of the AMP 11, noise that mixes into the power source, ground, and midpoint voltage of the ADC 12.
  • the noise of the power source of the apparatus and the ground noise affect the noise floor of the signal input to the microphone 30.
  • the AMP 11 adjusts the voltage so as not to clip and lowers the volume, if the sound is amplified to a specified volume, the above-mentioned internal noise may also be amplified. For this reason, it is necessary to reduce the noise of the wiring of the microphone 30. Noise components mixed in the wiring of the microphone 30 can be removed by taking the input side of the AMP 11 as a differential input and taking the difference between the input voltages. However, it is impossible to remove noise mixed in the power supply or ground inside the apparatus.
  • the microphone 30 for the hands-free system requires a high dynamic range.
  • the microphone 30 is designed so that the waveform does not exceed the allowable level of input to the microphone 30 or the ADC 12 even with a loud sound. For this reason, the level of the audio signal obtained from the microphone 30 during normal operation is very small. Therefore, when the level of the mixed noise is large, the audio is buried in the noise and is difficult to hear.
  • the noise removal apparatus 10 includes an ADC 14.
  • the ADC 14 converts noise inside the apparatus into digital data.
  • the digital data converted by the ADC 14 is added to the reference data by the adding unit 101.
  • the echo cancellation unit 102 performs echo removal processing based on reference data including noise inside the apparatus. In this way, noise is removed together with echo components by using the echo removal function of the noise removal apparatus 10. There is no need to perform a separate process for removing noise mixed in the power supply or ground, and the noise can be removed without increasing the processing load of the entire apparatus.
  • the noise inside the device can be removed, the strength of the noise suppressor that reduces road noise and the like can be reduced, so that the quality of the output voice will not deteriorate.
  • the noise since the noise is reduced, the signal-to-noise ratio is improved, and there is an advantage that the voice can be easily heard. Furthermore, since it becomes possible to recognize even a small voice buried in noise inside the apparatus, it is not erased by functions such as a noise suppressor and an echo suppressor.
  • the analog ground is input to the ADC 14.
  • a voltage between the power source and the analog ground may be input to the ADC 14.
  • FIG. 6 is a diagram illustrating a configuration of a noise removing device 10B according to a modification.
  • the noise removal device 10 ⁇ / b> B of this example includes a resistance element 108 and a resistance element 109 provided between a power supply 107 and an analog ground 106.
  • the resistance element 108 and the resistance element 109 are connected in series between the power source 107 and the analog ground 106.
  • a connection point between the resistance element 108 and the resistance element 109 is connected to an input terminal of the ADC 14. For this reason, a voltage value set by resistance voltage division based on a ratio between the resistance value of the resistance element 108 and the resistance value of the resistance element 109 is input to the ADC 14.
  • the ADC 14 is set such that the voltage value of the input terminal to which a signal to be converted into digital data is input is set to a voltage value between the voltage of the power supply 107 and the analog ground 106, and noise in the set voltage value. Convert signals to digital data.
  • the noise component is converted into digital data by the ADC 14.
  • the noise component data converted by the ADC 14 is input to the signal processing unit 100B.
  • FIG. 7 is a diagram illustrating a configuration example of the signal processing unit 100B in the noise removing device 10B of FIG.
  • the signal processing unit 100 ⁇ / b> B of this example includes an addition unit 101, an echo cancellation unit 102, a noise suppressor 103, and a subtraction unit 104.
  • the subtraction unit 104 subtracts the reference data from the noise component data converted by the ADC 14.
  • the reference data is digital data corresponding to the set voltage value.
  • the adding unit 101, the echo canceling unit 102, the noise suppressor 103, and the subtracting unit 104 can be realized using a DSP, for example.
  • the addition result of the addition unit 101 is input to the echo cancellation unit 102 as reference data as described above.
  • the echo cancellation unit 102 performs noise removal together with the echo removal processing.
  • a noise component having a level close to the analog ground 106 or a noise component having a level close to the voltage of the power supply 107 is input to the ADC 14.
  • noise removal can be performed together with the echo removal processing. That is, if the resistance element 108 and the resistance element 109 are set at a level at which noise components are likely to be mixed, noise can be removed more effectively. For example, when the noise mixed in the power supply is large, the resistance value ratio is set so that a voltage value closer to the power supply voltage value is input to the ADC 14 instead of the midpoint voltage.
  • data obtained by adding the input voice data of the microphone 30 and the data converted by the ADC 14 is used as reference data for the echo cancellation unit 102.
  • Noise enters the ADC 14 with the same components as the ADC 12 from the power supply voltage, analog ground, and midpoint voltage to which the input terminal of the ADC 14 is connected.
  • FIG. 8 is a flowchart illustrating an example of the echo removal operation by the signal processing unit 100.
  • the addition unit 101 adds the digital data of the noise signal to the reception data from the communication partner.
  • the adaptive filter 1021 that inputs the added digital data as reference data performs a convolution process with the adaptive filter coefficient to generate cancel data.
  • the subtraction unit 1022 subtracts the cancel data from the digital data transmitted to the communication partner.
  • noise removal method The following noise removing method is realized by the noise removing device. That is, a step of converting an input signal from the microphone into digital data by the first conversion unit to generate input digital data, a step of converting the internal noise signal to digital data by the second conversion unit, and an output signal to the speaker
  • a noise removal method comprising: using corresponding digital data and digital data converted by the second conversion unit as reference data, and removing a component corresponding to the reference data from the input digital data by a signal processing unit. Realized. According to this noise removal method, noise mixed in the apparatus itself can be removed together with the echo.
  • the noise removing device includes a computer, an adder that adds digital data of an internal noise signal to received data from a communication partner, and the added digital data is used as reference data, and the characteristics that simulate the characteristics of the reference data and the echo path You may implement
  • noise is removed together with the echo component by using the echo removal function of the echo cancellation unit. There is no need to perform cumulative addition processing or the like in order to remove noise mixed in the power supply or ground, and noise can be removed without increasing the processing load of the entire apparatus.
  • the noise removal apparatus can be applied to an apparatus having a microphone and a speaker.
  • the present invention can be applied to a hands-free call using a video phone, a mobile phone or a smartphone, a video conference system, and a karaoke apparatus.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Telephone Function (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

スピーカへの出力信号による、マイクロホンからの入力信号へのエコーを除去する際に、装置の内部のノイズを除去する。ノイズ除去装置１０は、マイクロホン３０からの入力信号をデジタルデータに変換し入力デジタルデータを生成する第１変換部であるＡＤＣ１２と、内部のノイズ信号をデジタルデータに変換する第２変換部であるＡＤＣ１４と、スピーカ２０への出力信号に対応するデジタルデータとＡＤＣ１４によって変換されたデジタルデータとを参照データとし、ＡＤＣ１２によって変換された入力デジタルデータから参照データに対応する成分を除去する信号処理部１００とを有する。ノイズ除去装置１０が有しているエコー除去の機能を利用して、エコー成分とともに、ノイズを除去する。

Description

ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム
　本発明は、ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラムに関する。
　カーオーディオには、ユーザーの音声を検出するシステムとして、ハンズフリーと呼ばれるシステム（以下、ハンズフリーシステムと呼ぶ）を有するものがある。ハンズフリーシステムでは、マイクロホンを用いて集音した運転者の音声をデジタルデータに変換する。マイクロホンなどのアナログ信号については、本来入力される音声信号以外に装置内部のノイズが混入することがある。例えば、ハンズフリーシステムに用いられるアナログデジタル変換器に使われている電源やグランドにノイズが混入すると、変換された後の音声のデジタルデータはノイズが含まれたデータとなる。
　ここで、デジタル化された検出信号にリアルタイムにノイズ除去処理を施す技術として、特許文献１が知られている。特許文献１では、最近取得された検出信号の累積加算値の平均値を演算し、その演算結果をノイズ除去処理後の検出信号としている。
特開平１１－１０１６５６号公報
　ハンズフリーシステムでは、エコー除去装置を設けて音響エコーを除去することがある。特許文献１に記載の技術によると、ノイズを除去するために累積加算処理を行って平均値を演算する必要があることから、ハンズフリーシステムに適用するには改善の余地がある。
　本発明は、上記に鑑みてなされたものであって、その目的は、装置内部に混在したノイズを除去できるノイズ除去装置、ノイズ除去方法およびノイズ除去プログラムを提供することである。
　上述した課題を解決し、目的を達成するために、本発明のある態様によるノイズ除去装置は、マイクロホンからの入力信号をデジタルデータに変換し入力デジタルデータを生成する第１変換部と、内部ノイズ信号をデジタルデータに変換する第２変換部と、スピーカへの出力信号に対応するデジタルデータと前記第２変換部によって変換されたデジタルデータとを参照データとし、前記入力デジタルデータから前記参照データに対応する成分を除去する信号処理部と、を有する。
　上述した課題を解決し、目的を達成するために、本発明のある態様によるノイズ除去方法は、マイクロホンからの入力信号を第１変換部によってデジタルデータに変換し入力デジタルデータを生成する工程と、内部ノイズ信号を第２変換部によってデジタルデータに変換する工程と、スピーカへの出力信号に対応するデジタルデータと前記第２変換部によって変換されたデジタルデータとを参照データとし、信号処理部によって前記入力デジタルデータから前記参照データに対応する成分を除去する工程と、を有する。
　上述した課題を解決し、目的を達成するために、本発明のある態様によるノイズ除去プログラムは、コンピュータを、通信相手からの受信データに、内部ノイズ信号のデジタルデータを加算する加算部、加算されたデジタルデータを参照データとし、前記参照データとエコーパスの特性を模擬した特性情報とに基づいて前記参照データを処理して生成したキャンセルデータを前記通信相手への送信信号から減算するエコーキャンセル部、として機能させるためのノイズ除去プログラムである。
　本発明によれば、装置内部に混入したノイズを、エコーとともに除去することができる。
図１は、本実施形態によるノイズ除去装置の構成例を示す図である。 図２は、図１中の信号処理部の構成例を示す図である。 図３は、図２中のエコーキャンセル部の構成例を示す図である。 図４は、比較例によるエコー除去装置の構成を示す図である。 図５は、図４のエコー除去装置における信号処理部の構成例を示す図である。 図６は、変形例によるノイズ除去装置の構成を示す図である。 図７は、図６のノイズ除去装置における信号処理部の構成例を示す図である。 図８は、信号処理部によるエコー除去動作の例を示すフローチャートである。
　以下に、本発明の実施形態を図面に基づいて詳細に説明する。以下の実施形態の説明において、同一又は同等の構成部分については同一の符号を付し、その説明を簡略又は省略する。なお、実施形態により本発明が限定されるものではない。また、実施形態の構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。また、この実施形態に記載された複数の変形例は、当業者自明の範囲内にて任意に組み合わせが可能である。
　[ノイズ除去装置]
　図１は、本実施形態によるノイズ除去装置の構成例を示す図である。図１において、本実施形態によるノイズ除去装置１０は、車両１に搭載されて用いられる。車両１には、スピーカ２０と、マイクロホン（以下、マイクと略称する）３０とが搭載される。スピーカ２０は、車両１内に音声を出力する。スピーカ２０は、入力されるアナログの音声信号を、音声に変換する。マイク３０は、車両１内の音声を取得する。マイク３０は、取得した音声をアナログの音声信号に変換する。
　ノイズ除去装置１０は、信号処理部１００と、増幅部（Amplifier；以下、ＡＭＰと呼ぶ）１１および１５と、アナログデジタル変換部（Analog　Digital　Converter；以下、ＡＤＣと呼ぶ）１２および１４と、デジタルアナログ変換部（Digital　Analog　Converter；以下、ＤＡＣと呼ぶ）１３と、を有する。
　信号処理部１００は、デジタルの音声データに対して、エコーやノイズ等の対象の音声以外を除去する処理を行う。信号処理部１００は、例えば、ＤＳＰ（Digital　Signal　Processor）を利用して実現することができる。信号処理部１００は、ＳＯＣ（System-on-a-chip）によって実現してもよい。信号処理部１００は、ＤＳＰとＳＯＣとの両方を利用して実現してもよい。
　ＡＭＰ１１は、マイクアンプである。ＡＭＰ１１は、マイク３０から出力されるアナログの音声信号を増幅する。
　ＡＤＣ１２は、入力されるアナログの音声信号をデジタルの音声データに変換する第１変換部である。ＡＤＣ１２によって変換されたデジタルの音声データは、信号処理部１００に入力される。
　ＤＡＣ１３は、入力されるデジタルの音声データをアナログの音声信号に変換する。ＤＡＣ１３によって変換されたアナログの音声信号は、ＡＭＰ１５に入力される。
　ＡＭＰ１５は、スピーカアンプである。ＡＭＰ１５は、入力されるアナログの音声信号を増幅する。ＡＭＰ１５が増幅したアナログの音声信号は、スピーカ２０に入力される。
　ＡＤＣ１４は、入力されるアナログの信号をデジタルのデータに変換する第２変換部である。ＡＤＣ１４は、自装置すなわちノイズ除去装置１０内部のノイズ信号を入力する。本実施形態では、ＡＤＣ１４は、デジタルデータに変換すべき信号が入力される入力端子が、アナロググランド１０６に接続されている。アナロググランド１０６は、例えば、ＡＭＰ１１のアナロググランドである。ＡＤＣ１４は、アナロググランド１０６の電圧レベルをデジタルのデータに変換する。このため、本来０[Ｖ]であるはずのアナロググランド１０６にノイズが混在していれば、ＡＤＣ１４はそのノイズの電圧レベルに対応するデジタルデータを出力する。ＡＤＣ１４によって変換されたデジタルのデータは、ノイズ除去装置１０内部のノイズに対応するデータである。
　ＡＤＣ１４の変換結果である音声データには、ＡＤＣ１４に繋がっている電源電圧、グランド、中点電圧からのノイズがＡＤＣ１２と同じ成分で混入している。ノイズ除去装置１０は、ＡＤＣ１４によって変換されたデータを自装置内部のノイズとして参照データに加えることにより、信号処理部１００のエコー除去処理を用いてスピーカ２０およびマイク３０によるエコーだけでなく自装置内部のノイズについてもマイク３０への入力音声から取り除く。
　ところで、ノイズを有効に除去するには、ＡＤＣ１２に混入するノイズとできるだけ同じ成分のノイズをＡＤＣ１４に入力することが好ましい。このため、ノイズ除去装置１０は、複数のＡＤＣを有する１つの集積回路を用いて、ＡＤＣ１２およびＡＤＣ１４を実現することが好ましい。本実施形態のノイズ除去装置１０は、ステレオ入出力チャンネルを有するＡＤＣ集積回路を用意し、一方の入出力チャンネルにＡＤＣ１２を、他方の入出力チャンネルにＡＤＣ１４を対応付ける。ノイズ除去装置１０は、物理的に１つの集積回路を用いてＡＤＣ１２およびＡＤＣ１４を実現する。こうすることで、ＡＤＣ１２およびＡＤＣ１４がノイズ成分の影響を同じように受ける。ＡＤＣ１２を実現する集積回路と、ＡＤＣ１４を実現する集積回路とを物理的に別のものとすると、ＡＤＣ１２およびＡＤＣ１４とが受けるノイズ成分の影響は異なることがある。これに対し、物理的に１つの集積回路に設けられているＡＤＣ１２およびＡＤＣ１４を用いれば、ＡＤＣ１２とＡＤＣ１４とはノイズ成分の影響を同じように受けるので、別々のＡＤＣ集積回路をＡＤＣ１２およびＡＤＣ１４に用いるよりも、ノイズを有効に除去できる。ステレオ入出力チャンネルを有するＡＤＣ集積回路にかぎらず、ＡＤＣ１２とＡＤＣ１４とを、物理的に１つの集積回路に複数含まれている変換部それぞれによって実現すればよい。
　電話機４０は、音声信号を通話相手側に送信すると共に、通話相手側からの音声信号を受信する。電話機４０は、例えば、移動電話機やスマートフォンである。
　[信号処理部]
　図２は、図１中の信号処理部１００の構成例を示す図である。信号処理部１００は、加算部１０１と、エコーキャンセル部１０２と、ノイズサプレッサ１０３とを有する。
　加算部１０１は、スピーカ２０に向けて出力するデジタルの音声データとＡＤＣ１４によって変換されたデジタルデータとを加算する。加算部１０１の加算結果は、参照データとしてエコーキャンセル部１０２に入力される。なお、信号処理部１００は、エコーキャンセル部１０２に入力される参照データを遅延させる遅延部を有していてもよい。
　エコーキャンセル部１０２は、デジタルの音声データを参照データとして入力する。参照データは、スピーカ２０から出力するアナログの音声信号に変換する前の音声データである。エコーキャンセル部１０２は、マイク３０に入力された音声信号を変換したデジタルの音声データから、参照データに対応する成分を除去するエコー除去処理を行う。エコー除去処理とは、マイク３０に入力された音声信号を変換したデジタルの音声データから、参照データに対応する成分を差し引く処理である。このエコー除去処理を行うことにより、スピーカ２０から出力される音声が通話相手に出力する音声に含まれないようにすることができる。
　ノイズサプレッサ１０３は、デジタルの音声データについて処理を行い、音声に混入したノイズを抑制する。特に、ノイズサプレッサ１０３は、ロードノイズなどを小さくする処理を行う。加算部１０１、エコーキャンセル部１０２、および、ノイズサプレッサ１０３は、例えば、ＤＳＰを利用して実現することができる。
　[エコーキャンセル部]
　図３は、エコーキャンセル部１０２の構成例を示す図である。図３に示すように、エコーキャンセル部１０２は、適応フィルタ１０２１と、減算部１０２２とを有する。
　適応フィルタ１０２１は、スピーカ２０の出力からマイク３０への入力までの空間すなわちエコーパスの特性に基づいて参照データを処理してキャンセルデータを生成する。より具体的には、適応フィルタ１０２１は、エコーパスの特性を模擬した特性情報を、参照データに掛けてキャンセルデータを生成する。適応フィルタ１０２１は、適応フィルタ係数で畳み込み処理を行い、キャンセルデータを生成する。適応フィルタ１０２１は、生成したキャンセルデータを減算部１０２２に入力する。
　減算部１０２２は、マイク３０に入力される音声信号に対応する音声データからキャンセルデータを減算する。減算部１０２２の出力は誤差データとして適応フィルタ１０２１に入力される。適応フィルタ１０２１は、フィルタ係数を更新し、誤差信号が最小になるように収束させる動作を行う。
　[動作]
　次に、車両１に搭載されたハンズフリーシステムの動作について説明する。ハンズフリーシステムの動作については、ノイズ除去装置１０の動作を中心に説明する。
　本実施形態では、エコーキャンセル機能を使用して、エコーに加え、装置内部のノイズを減らす。エコーキャンセル部１０２は、消したい音の音源の入力である参照データと、マイク入力のような所望の音と消したい不要な音とが混ざったデータとが入力され、消したい音を消した処理後のデータを出力する。エコーキャンセル部１０２は、通常はスピーカ２０への出力音声データを参照データとして入力することで、参照データに対応する成分を除去する。マイク３０から入力するスピーカ２０からの音声を消すことで、エコーの無い音がエコーキャンセル部１０２の出力から得られる。
　通話相手側への送話側の経路は、以下のようになる。すなわち、マイク３０は、車両１内の音声を取得する。マイク３０は、取得した音声をアナログの音声信号に変換する。マイク３０によって変換された音声信号は、ＡＭＰ１１に入力される。ＡＭＰ１１は、音声信号の電圧レベルを増幅する。ＡＭＰ１１は、後段でクリップしない程度に、音声信号の電圧レベルを調整する。ＡＤＣ１２は、ＡＭＰ１１によってレベルが調整されたアナログの音声信号をデジタルの音声データに変換する。ＡＤＣ１２によって変換されたデジタルの音声データは、信号処理部１００に入力される。信号処理部１００は、デジタルの音声データについて、エコーを除去する処理を行う。信号処理部１００によってエコーが除去された音声データは、ノイズ除去装置１０から出力される。ノイズ除去装置１０から出力された音声データは、電話機４０に入力される。電話機４０は、音声データを通話相手側の図示しない電話機に送信する。
　通話相手側の電話機からの受話側の経路は、以下のようになる。すなわち、電話機４０は、通話相手側の電話機から受信した、デジタルの音声データを出力する。ノイズ除去装置１０は、電話機４０から出力されるデジタルの音声データを入力する。ノイズ除去装置１０は、信号処理部１００においてデジタルの音声データについて必要な処理を行う。信号処理部１００は、デジタルの音声データを出力する。信号処理部１００が出力するデジタルの音声データは、ＤＡＣ１３に入力される。ＤＡＣ１３は、入力されるデジタルの音声データをアナログの音声信号に変換する。ＤＡＣ１３によって変換されたアナログの音声信号は、ＡＭＰ１５に入力される。ＡＭＰ１５は、音声信号の電圧レベルを増幅する。ＡＭＰ１１によって電圧レベルが増幅された音声信号は、スピーカ２０に入力される。スピーカ２０は、車両１内に音声を出力する。
　ここで、車両１内に、スピーカ２０とマイク３０とが設けられている。このため、スピーカ２０が車両１内に出力した音声は、マイク３０に入力される。その場合、エコーが発生し聞き取りづらくなることがある。そこで、信号処理部１００のエコーキャンセル部１０２において、エコー除去処理を行う。
　エコーキャンセル部１０２は、デジタルの音声データを参照データとして入力する。参照データであるデジタルの音声データは、スピーカ２０から出力するアナログの音声信号に変換する前の音声データである。ＡＤＣ１４によって変換された、ノイズに対応するデジタルデータは、加算部１０１によって参照データに加算される。エコーキャンセル部１０２は、マイク３０に入力された音声信号を変換したデジタルの音声データから、参照データに対応する成分を差し引くエコー除去処理を行う。このエコー除去処理を行うことにより、スピーカ２０から出力される音声が、通話相手に出力する音声に含まれないようにすることができる。
　以上説明したように、本実施形態では、マイク３０の入力音声のデータとＡＤＣ１４によって変換されたデータとを加算したデータをエコーキャンセル部１０２の参照データとする。ＡＤＣ１４には、ＡＤＣ１４が繋がっているグランドからノイズがＡＤＣ１２と同じ成分で入ってくる。この装置内部のノイズに対応するデータを参照データに加えることによって、エコーキャンセルの動作を用いてスピーカ２０からマイク３０へのエコーだけでなく自装置内部のノイズも通話相手への音声データから取り除くことができる。
　[比較例]
　次に、比較例として、エコー除去装置について説明する。比較例のエコー除去装置は、図１に示すノイズ除去装置１０においてＡＤＣ１４を設けず、かつ、図２において加算部１０１を設けない構成である。
　図４は、比較例によるエコー除去装置１０Ａの構成を示す図である。図５は、図４のエコー除去装置１０Ａにおける信号処理部１００Ａの構成例を示す図である。比較例は、ＡＤＣ１４と加算部１０１とを設けない構成であり、ＡＤＣ１４の出力を参照データに加えない。
　通話相手側への送話側の経路は、以下のようになる。すなわち、ＡＭＰ１１から出力されるアナログの音声信号は、ＡＤＣ１２でデジタルの音声データに変換されて、信号処理部１００Ａに入力される。信号処理部１００Ａは、デジタルの音声データについて、エコーを除去する処理を行う。信号処理部１００Ａによってエコーが除去された音声データは、エコー除去装置１０Ａから出力される。
　通話相手側からの受話側の経路は、図１および図２を参照して上述した経路と同様である。すなわち、エコー除去装置１０Ａの信号処理部１００Ａが出力するデジタルの音声データは、ＤＡＣ１３によってアナログの音声信号に変換され、ＡＭＰ１５に入力される。ＡＭＰ１５によって電圧レベルが増幅された音声信号により、スピーカ２０から音声が出力される。
　図５において、エコーキャンセル部１０２は、デジタルの音声データを参照データとして入力し、キャンセルデータを生成する。エコーキャンセル部１０２は、マイク３０に入力された音声信号を変換したデジタルの音声データから、キャンセルデータを差し引くエコー除去処理を行う。
　ここで、図４のＡＤＣ１２以降の信号処理部１００Ａにおいては、デジタル処理を行うため、アナログノイズは混入しない。マイク３０への音声以外のノイズとしては、マイク３０からＡＭＰ１１までの配線に飛び込むノイズ、ＡＭＰ１１の電源やグランドに混入するノイズ、ＡＤＣ１２の電源、グランド、中点電圧に混入するノイズなどがある。装置の電源のノイズやグランドノイズは、マイク３０に入力される信号のノイズフロアに影響する。
　ＡＭＰ１１は、クリップしないように電圧を調整して音量を下げているので、音声を規定の音量に増幅すると、上記のような自装置内部のノイズも増幅してしまうことがある。このため、マイク３０の配線のノイズを低減する必要がある。マイク３０の配線に混入するノイズ成分は、ＡＭＰ１１の入力側を差動入力とし、入力電圧同士の差分をとることで除去できる。しかしながら、装置内部の電源やグランドに混入するノイズを除去することはできない。
　また、ハンズフリーシステム用のマイク３０は、高ダイナミックレンジを必要とする。マイク３０は、大きな音でも波形がマイク３０やＡＤＣ１２への入力の許容レベルを超えないように設計されている。このため、通常時にマイク３０から得られる音声信号のレベルはとても小さいので、混入するノイズのレベルが大きい場合、音声がノイズに埋もれて聞き取りにくくなる。
　[比較例に対するメリット]
　一方、図１から図３を参照して説明した本実施形態によるノイズ除去装置１０は、ＡＤＣ１４を有する。ＡＤＣ１４は、装置内部のノイズをデジタルデータに変換する。ＡＤＣ１４によって変換されたデジタルデータは、加算部１０１によって参照データに加算される。エコーキャンセル部１０２は、装置内部のノイズを含む参照データに基づいて、エコー除去処理を行う。このように、ノイズ除去装置１０が有しているエコー除去の機能を利用して、エコー成分とともに、ノイズを除去する。電源やグランドに混入するノイズを除去するための処理を別に行う必要はなく、装置全体の処理負荷が増加せずにノイズを除去することができる。
　装置内部のノイズを除去できれば、ロードノイズなどを小さくさせるノイズサプレッサの強度を弱めることができるので、出力される音声の品質も劣化しなくなる。また、ノイズが下がることで、信号対雑音比（signal-to-noise　ratio）が良くなり、音声が聞き取りやすくなるメリットもある。さらに、装置内部のノイズに埋もれた小さな音声についても認識できるようになるので、ノイズサプレッサやエコーサプレッサなどの機能によってかき消されなくなる。
　[変形例]
　図１から図３を参照して説明したノイズ除去装置１０では、アナロググランドをＡＤＣ１４に入力している。変形例として、電源とアナロググランドとの間の電圧をＡＤＣ１４に入力してもよい。
　図６は、変形例によるノイズ除去装置１０Ｂの構成を示す図である。図６に示すように、本例のノイズ除去装置１０Ｂは、電源１０７とアナロググランド１０６との間に設けられた抵抗素子１０８および抵抗素子１０９を有する。抵抗素子１０８と抵抗素子１０９とは電源１０７とアナロググランド１０６との間に直列に接続されている。抵抗素子１０８と抵抗素子１０９との間の接続点は、ＡＤＣ１４の入力端子に接続される。このため、抵抗素子１０８の抵抗値と抵抗素子１０９の抵抗値との比による抵抗分圧で設定される電圧値がＡＤＣ１４に入力される。例えば、抵抗素子１０８と抵抗素子１０９とを同じ抵抗値に設定しておけば、電源１０７の電圧値とアナロググランド１０６の０[Ｖ]との中点の電圧値がＡＤＣ１４に入力される。つまり、ＡＤＣ１４は、デジタルデータに変換すべき信号が入力される入力端子の電圧値が、電源１０７の電圧とアナロググランド１０６との間の電圧値に設定されており、設定された電圧値におけるノイズ信号をデジタルデータに変換する。
　したがって、抵抗素子１０８と抵抗素子１０９とで設定された電圧値(以下、設定電圧値とよぶ)にノイズが混入していれば、そのノイズ成分がＡＤＣ１４によってデジタルデータに変換される。ＡＤＣ１４によって変換されたノイズ成分のデータは、信号処理部１００Ｂに入力される。
　図７は、図６のノイズ除去装置１０Ｂにおける信号処理部１００Ｂの構成例を示す図である。本例の信号処理部１００Ｂは、加算部１０１と、エコーキャンセル部１０２と、ノイズサプレッサ１０３と、減算部１０４とを有する。減算部１０４は、ＡＤＣ１４によって変換されたノイズ成分のデータから、基準データを減算する。基準データは、設定電圧値に対応するデジタルデータである。加算部１０１、エコーキャンセル部１０２、ノイズサプレッサ１０３、および、減算部１０４は、例えば、ＤＳＰを利用して実現することができる。
　ＡＤＣ１４の入力端子に入力される信号にノイズ成分が混入していなければ、設定電圧値をＡＤＣ１４で変換したデジタルデータが減算部１０４に入力される。ノイズ成分が混入していなければ、減算部１０４に入力されるデジタルデータは、基準データと一致する。このため、減算部１０４によって基準データが減算されると、減算部１０４の出力データは０[Ｖ]に対応するデータとなる。０[Ｖ]に対応するデータは、加算部１０１に入力される。
　一方、ＡＤＣ１４の入力端子に入力される信号にノイズ成分が混入していれば、設定電圧値にノイズ成分を加えた信号をＡＤＣ１４で変換したデジタルデータが減算部１０４に入力される。ノイズ成分が混入していれば、減算部１０４に入力されるデジタルデータは、基準データと一致しない。このため、減算部１０４によって基準データが減算されると、減算部１０４の出力データは０[Ｖ]ではなく、ノイズ成分に対応するデータとなる。ノイズ成分に対応するデータは、加算部１０１に入力される。
　加算部１０１の加算結果は、先述したように、参照データとしてエコーキャンセル部１０２に入力される。エコーキャンセル部１０２は、先述したように、エコー除去処理とともにノイズ除去を行う。
　なお、抵抗素子１０８の抵抗値と抵抗素子１０９の抵抗値との比を予め調整しておけば、アナロググランド１０６に近いレベルのノイズ成分や電源１０７の電圧に近いレベルのノイズ成分をＡＤＣ１４に入力し、エコー除去処理とともにノイズ除去を行うことができる。つまり、抵抗素子１０８と抵抗素子１０９とによって、ノイズ成分が混入しやすいレベルを設定しておけば、より有効にノイズ除去を行うことができる。例えば、電源に混入するノイズが大きい場合は、中点電圧ではなく、電源電圧値により近い電圧値がＡＤＣ１４に入力されるように抵抗値の比を設定しておく。
　以上説明したように、マイク３０の入力音声のデータとＡＤＣ１４によって変換されたデータとを加算したデータをエコーキャンセル部１０２の参照データとする。ＡＤＣ１４には、ＡＤＣ１４の入力端子が繋がっている電源電圧、アナロググランド、中点電圧からノイズがＡＤＣ１２と同じ成分で入ってくる。この装置内部のノイズに対応するデータを参照データに加えることによって、エコーキャンセルの動作を用いてスピーカ２０からマイク３０へのエコーだけでなく自装置内部のノイズも通話相手への音声データから取り除くことができる。
　[エコー除去処理の例]
　図８は、信号処理部１００によるエコー除去動作の例を示すフローチャートである。ステップＳ１０１では、加算部１０１が、通信相手からの受信データに、ノイズ信号のデジタルデータを加算する。ステップＳ１０２では、加算されたデジタルデータを参照データとして入力する適応フィルタ１０２１が、適応フィルタ係数で畳み込み処理を行い、キャンセルデータを生成する。ステップＳ１０３では、減算部１０２２が、通信相手へ送信するデジタルデータからキャンセルデータを減算する。
　[ノイズ除去方法]
　上記ノイズ除去装置により、以下のノイズ除去方法が実現される。すなわち、マイクロホンからの入力信号を第１変換部によってデジタルデータに変換し入力デジタルデータを生成する工程と、内部ノイズ信号を第２変換部によってデジタルデータに変換する工程と、スピーカへの出力信号に対応するデジタルデータと上記第２変換部によって変換されたデジタルデータとを参照データとし、信号処理部によって上記入力デジタルデータから上記参照データに対応する成分を除去する工程と、を有するノイズ除去方法が実現される。このノイズ除去方法によれば、自装置内部に混入したノイズを、エコーとともに除去することができる。
　[ノイズ除去プログラム]
　上記ノイズ除去装置は、コンピュータを、通信相手からの受信データに、内部ノイズ信号のデジタルデータを加算する加算部、加算されたデジタルデータを参照データとし、上記参照データとエコーパスの特性を模擬した特性情報とに基づいて上記参照データを処理して生成したキャンセルデータを上記通信相手への送信信号から減算するエコーキャンセル部、として機能させるためのノイズ除去プログラムを利用して実現してもよい。このノイズ除去プログラムを利用すれば、自装置内部に混入したノイズを、エコーとともに除去することができる。
　[まとめ]
　以上説明したように、本実施形態では、エコーキャンセル部が有しているエコー除去の機能を利用して、エコー成分とともに、ノイズを除去する。電源やグランドに混入するノイズを除去するために累積加算処理などを特別に行う必要はなく、装置全体の処理負荷が増加せずにノイズを除去することができる。
　本実施形態によるノイズ除去装置は、マイクとスピーカとを有する装置について適用することができる。例えば、インカーコミュニケーションをはじめとする自動車内でのハンズフリーシステムの他、テレビ電話、移動電話機やスマートフォンを用いたハンズフリー通話、テレビ会議システム、カラオケ装置について適用できる。
１　車両
１０、１０Ｂ　ノイズ除去装置
１０Ａ　エコー除去装置
１１、１５　増幅部
１２、１４　アナログデジタル変換部
１３　デジタルアナログ変換部
２０　スピーカ
３０　マイクロホン
４０　電話機
１００、１００Ａ、１００Ｂ　信号処理部
１０１　加算部
１０２　エコーキャンセル部
１０３　ノイズサプレッサ
１０４、１０２２　減算部
１０６　アナロググランド
１０７　電源
１０８、１０９　抵抗素子
１０２１　適応フィルタ

Claims (8)

  1. 　マイクロホンからの入力信号をデジタルデータに変換し入力デジタルデータを生成する第１変換部と、
    　内部ノイズ信号をデジタルデータに変換する第２変換部と、
    　スピーカへの出力信号に対応するデジタルデータと前記第２変換部によって変換されたデジタルデータとを参照データとし、前記入力デジタルデータから前記参照データに対応する成分を除去する信号処理部と、を有するノイズ除去装置。
  2. 　前記第２変換部は、デジタルデータに変換すべき信号が入力される入力端子が、アナロググランドに接続されており、前記アナロググランドにおけるノイズ信号をデジタルデータに変換する請求項１に記載のノイズ除去装置。
  3. 　前記第２変換部は、デジタルデータに変換すべき信号が入力される入力端子の電圧値が、電源電圧とアナロググランドとの間の電圧値に設定されており、設定された電圧値におけるノイズ信号をデジタルデータに変換する請求項１に記載のノイズ除去装置。
  4. 　前記信号処理部は、前記スピーカへの出力信号に対応するデジタルデータと前記第２変換部によって変換されたデジタルデータとを加算する加算部を含み、
    前記加算部の出力を前記参照データとする請求項１から請求項３のいずれか１つに記載のノイズ除去装置。
  5. 　前記信号処理部は、前記参照データが入力され、前記スピーカの出力から前記マイクロホンへの入力までの空間の特性に基づいて前記参照データを処理して生成したキャンセルデータを出力する適応フィルタと、
    　前記キャンセルデータを前記入力デジタルデータから減算する減算部と、を含む請求項１から請求項４のいずれか１つに記載のノイズ除去装置。
  6. 　前記第１変換部と前記第２変換部とが、物理的に１つの集積回路に設けられている請求項１から請求項５のいずれか１つに記載のノイズ除去装置。
  7. 　マイクロホンからの入力信号を第１変換部によってデジタルデータに変換し入力デジタルデータを生成する工程と、
    　内部ノイズ信号を第２変換部によってデジタルデータに変換する工程と、
    　スピーカへの出力信号に対応するデジタルデータと前記第２変換部によって変換されたデジタルデータとを参照データとし、信号処理部によって前記入力デジタルデータから前記参照データに対応する成分を除去する工程と、
    を有するノイズ除去方法。
  8. 　コンピュータを、
    　通信相手からの受信データに、内部ノイズ信号のデジタルデータを加算する加算部、
    　加算されたデジタルデータを参照データとし、前記参照データとエコーパスの特性を模擬した特性情報とに基づいて前記参照データを処理して生成したキャンセルデータを前記通信相手への送信信号から減算するエコーキャンセル部、
    として機能させるためのノイズ除去プログラム。
PCT/JP2018/005404 2017-05-19 2018-02-16 ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム WO2018211759A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201880012058.4A CN110301140B (zh) 2017-05-19 2018-02-16 噪声去除装置、噪声去除方法以及记录介质
EP18802614.0A EP3611936B1 (en) 2017-05-19 2018-02-16 Noise elimination device, noise elimination method and noise elimination program
US16/596,818 US10796710B2 (en) 2017-05-19 2019-10-09 Noise elimination device, noise elimination method, and noise elimination program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017099995A JP6821126B2 (ja) 2017-05-19 2017-05-19 ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム
JP2017-099995 2017-05-19

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/596,818 Continuation US10796710B2 (en) 2017-05-19 2019-10-09 Noise elimination device, noise elimination method, and noise elimination program

Publications (1)

Publication Number Publication Date
WO2018211759A1 true WO2018211759A1 (ja) 2018-11-22

Family

ID=64273735

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/005404 WO2018211759A1 (ja) 2017-05-19 2018-02-16 ノイズ除去装置、ノイズ除去方法およびノイズ除去プログラム

Country Status (5)

Country Link
US (1) US10796710B2 (ja)
EP (1) EP3611936B1 (ja)
JP (1) JP6821126B2 (ja)
CN (1) CN110301140B (ja)
WO (1) WO2018211759A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113038345A (zh) * 2019-12-09 2021-06-25 北京君正集成电路股份有限公司 一种在采集音频过程中优化音频信号的系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113035219B (zh) * 2019-12-09 2023-10-31 北京君正集成电路股份有限公司 一种消除回音提高音频质量的方法
CN113035224B (zh) * 2019-12-09 2022-08-26 北京君正集成电路股份有限公司 一种消除回音提高音频质量的设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04108246A (ja) * 1990-08-29 1992-04-09 Oki Electric Ind Co Ltd ハンズフリー電話装置
JPH08288899A (ja) * 1995-04-11 1996-11-01 Saitama Nippon Denki Kk 携帯電話機
JPH11101656A (ja) 1997-09-26 1999-04-13 Nippon Denshi Kogyo Kk 信号処理方法および信号処理装置
JP2011069901A (ja) * 2009-09-24 2011-04-07 Fujitsu Ltd 雑音除去装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3361724B2 (ja) * 1997-06-11 2003-01-07 沖電気工業株式会社 エコーキャンセラ装置
US7003096B2 (en) * 2002-09-12 2006-02-21 Plantronics, Inc. Full duplex telephone set using echo cancellation and side tone management for high gain stability
US7359504B1 (en) * 2002-12-03 2008-04-15 Plantronics, Inc. Method and apparatus for reducing echo and noise
US20060188089A1 (en) * 2005-02-18 2006-08-24 Diethorn Eric J Reduction in acoustic coupling in communication systems and appliances using multiple microphones
US20090003586A1 (en) * 2007-06-28 2009-01-01 Fortemedia, Inc. Signal processor and method for canceling echo in a communication device
US20140133648A1 (en) * 2008-03-06 2014-05-15 Andrzej Czyzewski Method and apparatus for acoustic echo cancellation in voip terminal
CN101667426A (zh) * 2009-09-23 2010-03-10 中兴通讯股份有限公司 一种消除环境噪声的装置及方法
FR2976111B1 (fr) * 2011-06-01 2013-07-05 Parrot Equipement audio comprenant des moyens de debruitage d'un signal de parole par filtrage a delai fractionnaire, notamment pour un systeme de telephonie "mains libres"
US9344050B2 (en) * 2012-10-31 2016-05-17 Maxim Integrated Products, Inc. Dynamic speaker management with echo cancellation
CN203219384U (zh) * 2012-12-26 2013-09-25 深圳市金立通信设备有限公司 一种处理通话环境噪声的装置及移动终端
US20140363008A1 (en) * 2013-06-05 2014-12-11 DSP Group Use of vibration sensor in acoustic echo cancellation
JP2017199949A (ja) * 2016-04-25 2017-11-02 株式会社Ｊｖｃケンウッド エコー除去装置、エコー除去方法およびエコー除去プログラム
US10382092B2 (en) * 2017-11-27 2019-08-13 Verizon Patent And Licensing Inc. Method and system for full duplex enhanced audio

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04108246A (ja) * 1990-08-29 1992-04-09 Oki Electric Ind Co Ltd ハンズフリー電話装置
JPH08288899A (ja) * 1995-04-11 1996-11-01 Saitama Nippon Denki Kk 携帯電話機
JPH11101656A (ja) 1997-09-26 1999-04-13 Nippon Denshi Kogyo Kk 信号処理方法および信号処理装置
JP2011069901A (ja) * 2009-09-24 2011-04-07 Fujitsu Ltd 雑音除去装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3611936A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113038345A (zh) * 2019-12-09 2021-06-25 北京君正集成电路股份有限公司 一种在采集音频过程中优化音频信号的系统
CN113038345B (zh) * 2019-12-09 2023-03-14 北京君正集成电路股份有限公司 一种在采集音频过程中优化音频信号的系统

Also Published As

Publication number Publication date
JP2018196050A (ja) 2018-12-06
CN110301140B (zh) 2021-10-26
CN110301140A (zh) 2019-10-01
EP3611936A4 (en) 2020-04-01
US10796710B2 (en) 2020-10-06
US20200043510A1 (en) 2020-02-06
JP6821126B2 (ja) 2021-01-27
EP3611936B1 (en) 2021-10-27
EP3611936A1 (en) 2020-02-19

Similar Documents

Publication Publication Date Title
US8155302B2 (en) Acoustic echo canceller
JP6311136B2 (ja) 双方向会話補助装置及び双方向会話補助方法
US20090003586A1 (en) Signal processor and method for canceling echo in a communication device
JPH08234766A (ja) ノイズキャンセラ装置
US20080112568A1 (en) Echo Canceller and Communication Audio Processing Apparatus
US20060188089A1 (en) Reduction in acoustic coupling in communication systems and appliances using multiple microphones
JPWO2002095975A1 (ja) エコー処理装置
US10796710B2 (en) Noise elimination device, noise elimination method, and noise elimination program
US20150187348A1 (en) Apparatus and method for cancelling acoustic echo
JP2928130B2 (ja) ハンズフリー通信装置
JP4765117B2 (ja) エコー防止回路、フィルタ係数設定方法、及びプログラム
WO2001054296A1 (fr) Dispositif de communication de sons et processeur d'echo
JP2005247181A (ja) 車載ハンズフリー装置
JP4700673B2 (ja) エコー消去方法、装置、プログラム、および記録媒体
JP2000252891A (ja) 信号処理装置
JP7434845B2 (ja) エコーキャンセル装置、エコーキャンセル方法およびプログラム
JP2009015209A (ja) 音声明瞭度改善システム及び音声明瞭度改善方法
JP2007336132A (ja) エコー抑圧装置
JP2000353989A (ja) エコーキャンセラ
US11122366B2 (en) Method and apparatus for attenuation of audio howling
JP2021097292A (ja) エコーキャンセル装置、エコーキャンセル方法およびエコーキャンセルプログラム
JP5631523B2 (ja) エコー消去装置
JP2019165276A (ja) エコーキャンセル装置、エコーキャンセル方法およびエコーキャンセルプログラム
JP7183119B2 (ja) 音声信号処理装置
JP2021097293A (ja) エコーキャンセル装置、エコーキャンセル方法およびエコーキャンセルプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18802614

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018802614

Country of ref document: EP

Effective date: 20191114