KR102088375B1 - Stereo noise cancellation device and method thereof - Google Patents

Stereo noise cancellation device and method thereof Download PDF

Info

Publication number
KR102088375B1
KR102088375B1 KR1020180100370A KR20180100370A KR102088375B1 KR 102088375 B1 KR102088375 B1 KR 102088375B1 KR 1020180100370 A KR1020180100370 A KR 1020180100370A KR 20180100370 A KR20180100370 A KR 20180100370A KR 102088375 B1 KR102088375 B1 KR 102088375B1
Authority
KR
South Korea
Prior art keywords
far
channel filter
output signal
end channel
signal
Prior art date
Application number
KR1020180100370A
Other languages
Korean (ko)
Other versions
KR20200023890A (en
Inventor
박형민
조병준
Original Assignee
서강대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서강대학교 산학협력단 filed Critical 서강대학교 산학협력단
Priority to KR1020180100370A priority Critical patent/KR102088375B1/en
Priority to US16/265,404 priority patent/US10872594B2/en
Publication of KR20200023890A publication Critical patent/KR20200023890A/en
Application granted granted Critical
Publication of KR102088375B1 publication Critical patent/KR102088375B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Noise Elimination (AREA)

Abstract

본 발명의 실시예에 따른 노이즈 제거 방법에서는 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호 및 제1 파-엔드 신호에 기초하여 제1 추정 출력신호를 제공할 수 있다. 제1 추정 출력신호 및 제1 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 제1 추정 출력신호 및 제1 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 제1 현재 파-엔드 채널필터를 이용하여 입력신호로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공할 수 있다. 이전 프레임에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 제1 출력신호 및 제2 파-엔드 신호에 기초하여 제2 추정 출력신호를 제공할 수 있다. 제2 추정 출력신호 및 제2 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제2 현재 파-엔드 채널필터를 업데이트할 수 있다. 제2 현재 파-엔드 채널필터를 이용하여 제1 출력신호로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공할 수 있다.
본 발명에 따른 노이즈 제거 방법을 사용하면 입력신호(IN_S)로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.In the noise removing method according to an embodiment of the present invention, a first estimated output signal may be provided based on a first previous far-end channel filter, an input signal, and a first far-end signal corresponding to a previous frame. You can. The first current far-end channel filter corresponding to the current frame may be updated according to the first estimated output signal and the first previous far-end channel filter. The first current far-end channel filter corresponding to the current frame may be updated according to the first estimated output signal and the first previous far-end channel filter. A first output signal may be provided by removing the first far-end noise signal from the input signal by using the first current wave-end channel filter. A second estimated output signal may be provided based on the second previous far-end channel filter corresponding to the previous frame, the first output signal, and the second far-end signal. The second current far-end channel filter corresponding to the current frame may be updated according to the second estimated output signal and the second previous far-end channel filter. A second output signal may be provided by removing the second far-end noise signal from the first output signal using the second current wave-end channel filter.
When the noise removing method according to the present invention is used, a stereo echo signal is removed from the input signal IN_S, thereby providing a noise-removed voice signal.

Description

스테레오 노이즈 제거 장치 및 스테레오 노이즈 제거 방법{STEREO NOISE CANCELLATION DEVICE AND METHOD THEREOF}STEREO NOISE CANCELLATION DEVICE AND METHOD THEREOF}

본 발명은 스테레오 노이즈를 제거하는 방법에 관한 것이다.The present invention relates to a method for removing stereo noise.

일정한 공간에서 마이크를 통해 음성을 전달하고 스피커를 이용하여 이를 청취하는 경우, 마이크로 전달된 음성이 스피커를 통해서 다시 마이크로 전달되어 노이즈가 발생할 수 있다. 특히, 복수의 스피커들을 이용하여 음성을 청중에게 전달하는 경우, 마이크로 다시 전달되는 노이즈의 음원은 복수 개일 수 있다. 현재, 스테레오 에코 신호로 인해서 발생하는 노이즈를 제거하기 위한 다양한 연구들이 진행되고 있다.When a voice is transmitted through a microphone in a certain space and is listened to by using a speaker, noise transmitted to the microphone may be transmitted back to the microphone through the speaker to generate noise. In particular, when a voice is transmitted to an audience using a plurality of speakers, a plurality of sound sources of noise transmitted back to the microphone may be provided. Currently, various studies have been conducted to remove noise generated by a stereo echo signal.

(한국등록특허) 제10-1133308호 (등록일자, 2012.3.28)(Korean Registered Patent) No. 10-1133308 (Registration Date, March 28, 2012)

본 발명이 이루고자 하는 기술적 과제는 스테레오 에코 신호를 제거하기 위한 스테레오 노이즈 제거 방법을 제공하는 것이다. The technical problem to be achieved by the present invention is to provide a stereo noise cancellation method for removing a stereo echo signal.

본 발명이 이루고자 하는 기술적 과제는 스테레오 에코 신호를 제거하기 위한 스테레오 노이즈 제거 장치를 제공하는 것이다.Technical problem to be achieved by the present invention is to provide a stereo noise canceling device for removing a stereo echo signal.

이러한 과제를 해결하기 위하여 본 발명의 실시예에 따른 노이즈 제거 방법에서는 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호 및 제1 파-엔드 신호에 기초하여 제1 추정 출력신호를 제공할 수 있다. 상기 제1 추정 출력신호 및 상기 제1 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 상기 제1 현재 파-엔드 채널필터를 이용하여 상기 입력신호로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공할 수 있다. 상기 이전 프레임에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 상기 제1 출력신호 및 제2 파-엔드 신호에 기초하여 제2 추정 출력신호를 제공할 수 있다. 상기 제2 추정 출력신호 및 상기 제2 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제2 현재 파-엔드 채널필터를 업데이트할 수 있다. 상기 제2 현재 파-엔드 채널필터를 이용하여 상기 제1 출력신호로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공할 수 있다. In order to solve this problem, in the noise removal method according to the embodiment of the present invention, the first previous far-end channel filter corresponding to the previous frame, the input signal and the first far-end signal are based on the first An estimated output signal can be provided. The first current far-end channel filter corresponding to the current frame may be updated according to the first estimated output signal and the first previous far-end channel filter. A first output signal obtained by removing the first far-end noise signal from the input signal may be provided using the first current far-end channel filter. A second estimated output signal may be provided based on a second previous far-end channel filter corresponding to the previous frame, the first output signal, and the second far-end signal. The second current far-end channel filter corresponding to the current frame may be updated according to the second estimated output signal and the second previous far-end channel filter. A second output signal obtained by removing a second far-end noise signal from the first output signal may be provided using the second current far-end channel filter.

일 실시예에 있어서, 상기 제1 현재 파-엔드 채널필터를 업데이트하는 단계에서는 상기 제1 추정 출력신호에 기초하여 제1 분산을 추정할 수 있다. 상기 제1 분산에 기초하여 계산되는 제1 역 자기 상관 매트릭스를 생성할 수 있다. In one embodiment, in the step of updating the first current far-end channel filter, a first variance may be estimated based on the first estimated output signal. A first inverse autocorrelation matrix calculated based on the first variance may be generated.

일 실시예에 있어서, 상기 제1 분산은 상기 제1 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제1 추정 출력신호에 의해 결정될 수 있다. In one embodiment, the first variance may be determined by the first estimated output signal provided based on the first previous far-end channel filter.

일 실시예에 있어서, 상기 제1 분산은 상기 제1 추정 출력신호의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정될 수 있다. In one embodiment, the first variance may be determined according to a value obtained by multiplying a square of an absolute value of the first estimated output signal by a first weight.

일 실시예에 있어서, 상기 제1 현재 파-엔드 채널필터는 일정한 값으로 수렴할 수 있다. In one embodiment, the first current far-end channel filter may converge to a constant value.

일 실시예에 있어서, 상기 제2 현재 파-엔드 채널필터를 업데이트하는 단계에서는 상기 제2 추정 출력신호에 기초하여 제2 분산을 추정할 수 있다. 상기 제2 분산에 기초하여 계산되는 제2 역 자기 상관 매트릭스를 생성할 수 있다. In one embodiment, in the step of updating the second current far-end channel filter, a second variance may be estimated based on the second estimated output signal. A second inverse autocorrelation matrix calculated based on the second variance may be generated.

일 실시예에 있어서, 상기 제2 분산은 상기 제2 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제2 추정 출력신호에 의해 결정될 수 있다. In one embodiment, the second variance may be determined by the second estimated output signal provided based on the second previous far-end channel filter.

일 실시예에 있어서, 상기 제2 분산은 상기 제2 추정 출력신호의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정될 수 있다. In one embodiment, the second variance may be determined according to a value obtained by multiplying a square of an absolute value of the second estimated output signal by a second weight.

일 실시예에 있어서, 상기 제2 현재 파-엔드 채널필터는 일정한 값으로 수렴할 수 있다. In one embodiment, the second current far-end channel filter may converge to a constant value.

이러한 과제를 해결하기 위하여 본 발명의 실시예에 따른 스테레오 노이즈 제거 방법에서는 제1 분산(variance)을 초기화할 수 있다. 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호 및 제1 파-엔드 신호에 기초하여 제1 추정 출력신호를 제공하고, 상기 제1 추정 출력신호, 상기 제1 이전 파-엔드 채널필터 및 상기 제1 분산에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 상기 제1 현재 파-엔드 채널필터를 이용하여 상기 입력신호로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공할 수 있다. 제2 분산(variance)을 초기화할 수 있다. 상기 이전 프레임에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 상기 제1 출력신호 및 제2 파-엔드 신호에 기초하여 제2 추정 출력신호를 제공하고, 상기 제2 추정 출력신호, 상기 제2 이전 파-엔드 채널필터 및 상기 제2 분산에 따라 현재 프레임에 상응하는 제2 현재 파-엔드 채널필터를 업데이트할 수 있다. 상기 제2 현재 파-엔드 채널필터를 이용하여 상기 제1 출력신호로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공할 수 있다. In order to solve this problem, the first variance may be initialized in the stereo noise removal method according to the embodiment of the present invention. A first estimated output signal is provided based on a first previous far-end channel filter corresponding to a previous frame, an input signal, and a first far-end signal, and the first estimated output signal and the first The previous far-end channel filter and the first current far-end channel filter corresponding to the current frame may be updated according to the first dispersion. A first output signal obtained by removing the first far-end noise signal from the input signal may be provided using the first current far-end channel filter. The second variance can be initialized. A second estimated output signal is provided based on a second previous far-end channel filter corresponding to the previous frame, the first output signal and the second far-end signal, and the second estimated output signal , The second current far-end channel filter and the second current far-end channel filter corresponding to the current frame may be updated according to the second dispersion. A second output signal obtained by removing a second far-end noise signal from the first output signal may be provided using the second current far-end channel filter.

일 실시예에 있어서, 상기 제1 분산은 상기 제1 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제1 추정 출력신호에 의해 결정되고, 상기 제2 분산은 상기 제2 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제2 추정 출력신호에 의해 결정될 수 있다. In one embodiment, the first variance is determined by the first estimated output signal provided based on the first previous far-end channel filter, and the second variance is the second previous far-end channel filter. It may be determined by the second estimated output signal provided based on.

이러한 과제를 해결하기 위하여 본 발명의 실시예에 따른 노이즈 제거 장치는 제1 추정부, 제1 필터부, 제1 출력부, 제2 추정부, 제2 필터부, 제2 출력부를 포함할 수 있다. 제1 추정부는 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호 및 제1 파-엔드 신호에 기초하여 제1 추정 출력신호를 제공할 수 있다. 제1 필터부는 상기 제1 추정 출력신호 및 상기 제1 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 제1 출력부는 상기 제1 현재 파-엔드 채널필터를 이용하여 상기 입력신호로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공할 수 있다. 제2 추정부는 상기 이전 프레임에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 상기 제1 출력신호 및 제2 파-엔드 신호에 기초하여 제2 추정 출력신호를 제공할 수 있다. 제2 필터부는 상기 제2 추정 출력신호 및 상기 제2 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하는 제2 현재 파-엔드 채널필터를 업데이트할 수 있다. 제2 출력부는 상기 제2 현재 파-엔드 채널필터를 이용하여 상기 제1 출력신호로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공할 수 있다. In order to solve this problem, the noise removing apparatus according to the embodiment of the present invention may include a first estimation unit, a first filter unit, a first output unit, a second estimation unit, a second filter unit, and a second output unit. . The first estimator may provide a first estimated output signal based on a first previous far-end channel filter corresponding to a previous frame, an input signal, and a first far-end signal. The first filter unit may update the first current far-end channel filter corresponding to the current frame according to the first estimated output signal and the first previous far-end channel filter. The first output unit may provide a first output signal obtained by removing a first far-end noise signal from the input signal using the first current far-end channel filter. The second estimator may provide a second estimated output signal based on a second previous far-end channel filter corresponding to the previous frame, the first output signal, and the second far-end signal. The second filter unit may update the second current far-end channel filter corresponding to the current frame according to the second estimated output signal and the second previous far-end channel filter. The second output unit may provide a second output signal by removing the second far-end noise signal from the first output signal by using the second current far-end channel filter.

일 실시예에 있어서, 상기 제1 분산은 상기 제1 추정 출력신호의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정되고, 상기 제2 분산은 상기 제2 추정 출력신호의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정될 수 있다. In one embodiment, the first variance is determined according to a value obtained by multiplying the square of the absolute value of the first estimated output signal by a first weight, and the second variance is the square of the absolute value of the second estimated output signal. It can be determined according to the value multiplied by the second weight.

이러한 과제를 해결하기 위하여 본 발명의 실시예에 따른 스테레오 노이즈 제거 장치는 제1 초기화부, 제1 업데이트부, 제1 출력부, 제2 초기화부, 제2 업데이트부, 제2 출력부를 포함할 수 있다. 제1 초기화부는 제1 분산(variance)을 초기화할 수 있다. 제1 업데이트부는 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호 및 제1 파-엔드 신호에 기초하여 제1 추정 출력신호를 제공하고, 상기 제1 추정 출력신호, 상기 제1 이전 파-엔드 채널필터 및 상기 제1 분산에 따라 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트할 수 있다. 제1 출력부는 상기 제1 현재 파-엔드 채널필터를 이용하여 상기 입력신호로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공할 수 있다. 제2 초기화부는 제2 분산(variance)을 초기화할 수 있다. 제2 업데이트부는 상기 이전 프레임에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 상기 제1 출력신호 및 제2 파-엔드 신호에 기초하여 제2 추정 출력신호를 제공하고, 상기 제2 추정 출력신호, 상기 제2 이전 파-엔드 채널필터 및 상기 제2 분산에 따라 현재 프레임에 상응하는 제2 현재 파-엔드 채널필터를 업데이트할 수 있다. 제2 출력부는 상기 제2 현재 파-엔드 채널필터를 이용하여 상기 제1 출력신호로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공할 수 있다. To solve this problem, the stereo noise canceling apparatus according to an embodiment of the present invention may include a first initialization unit, a first update unit, a first output unit, a second initialization unit, a second update unit, and a second output unit. have. The first initialization unit may initialize the first variance. The first updater provides a first estimated output signal based on a first previous far-end channel filter corresponding to a previous frame, an input signal, and a first far-end signal, and the first estimated output signal , The first current far-end channel filter and the first current far-end channel filter corresponding to the current frame may be updated according to the first dispersion. The first output unit may provide a first output signal obtained by removing a first far-end noise signal from the input signal using the first current far-end channel filter. The second initialization unit may initialize the second variance. The second updater provides a second estimated output signal based on a second previous far-end channel filter corresponding to the previous frame, the first output signal and the second far-end signal, and 2 The estimated current signal, the second previous far-end channel filter, and the second current far-end channel filter corresponding to the current frame may be updated according to the second dispersion. The second output unit may provide a second output signal by removing the second far-end noise signal from the first output signal by using the second current far-end channel filter.

일 실시예에 있어서, 상기 제1 현재 파-엔드 채널필터 및 상기 제2 현재 파-엔드 채널필터는 일정한 값으로 수렴할 수 있다. In one embodiment, the first current far-end channel filter and the second current far-end channel filter may converge to a constant value.

위에서 언급된 본 발명의 기술적 과제 외에도, 본 발명의 다른 특징 및 이점들이 이하에서 기술되거나, 그러한 기술 및 설명으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.In addition to the technical task of the present invention mentioned above, other features and advantages of the present invention will be described below, or from such description and description will be clearly understood by those skilled in the art.

이상과 같은 본 발명에 따르면 다음과 같은 효과가 있다.According to the present invention as described above has the following effects.

본 발명에 따른 노이즈 제거 방법에서는 마이크로 입력되는 입력신호로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다. In the noise removing method according to the present invention, a stereo echo signal is removed from an input signal input to a microphone to provide a voice signal from which noise has been removed.

본 발명에 따른 노이즈 제거 장치에서는 마이크로 입력되는 입력신호로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.In the noise canceling apparatus according to the present invention, by removing the stereo echo signal from the input signal input to the microphone, it is possible to provide a voice signal from which noise has been removed.

이 밖에도, 본 발명의 실시 예들을 통해 본 발명의 또 다른 특징 및 이점들이 새롭게 파악될 수도 있을 것이다.In addition, other features and advantages of the present invention may be newly understood through the embodiments of the present invention.

도 1은 본 발명의 실시예들을 설명하기 위한 도면이다.
도 2는 본 발명의 실시예들에 따른 노이즈 제거 방법을 나타내는 순서도이다.
도 3은 본 발명의 일 실시예에 따른 제1 현재 파-엔드 채널필터의 업데이트 과정을 설명하기 위한 순서도이다.
도 4는 프레임에 따라 변동하는 제1 파-엔드 채널필터를 설명하기 위한 도면이다.
도 5는 본 발명의 실시예들에 포함되는 제1 파-엔드 채널필터를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 제2 현재 파-엔드 채널필터의 업데이트 과정을 설명하기 위한 순서도이다.
도 7은 프레임에 따라 변동하는 제2 파-엔드 채널필터를 설명하기 위한 도면이다.
도 8은 본 발명의 실시예들에 포함되는 제2 파-엔드 채널필터를 설명하기 위한 도면이다.
도 9는 본 발명의 실시예들에 따른 스테레오 노이즈 제거 방법을 나타내는 순서도이다.
도 10은 본 발명의 실시예들에 따른 노이즈 제거 장치를 나타내는 도면이다.
도 11은 본 발명의 실시예들에 따른 스테레오 노이즈 제거 장치를 나타내는 도면이다.
도 12는 본 발명의 실시예들에 따른 모노 노이즈 제거 방법을 나타내는 순서도이다.
도 13은 본 발명의 일 실시예에 따른 현재 파-엔드 채널필터의 업데이트 과정을 설명하기 위한 순서도이다.1 is a view for explaining embodiments of the present invention.
2 is a flowchart illustrating a noise removing method according to embodiments of the present invention.
3 is a flowchart illustrating an update process of a first current far-end channel filter according to an embodiment of the present invention.
4 is a view for explaining a first far-end channel filter that varies depending on the frame.
5 is a diagram for describing a first far-end channel filter included in embodiments of the present invention.
6 is a flowchart illustrating an update process of a second current far-end channel filter according to an embodiment of the present invention.
7 is a view for explaining a second far-end channel filter that varies depending on the frame.
8 is a view for explaining a second far-end channel filter included in embodiments of the present invention.
9 is a flowchart illustrating a method for removing stereo noise according to embodiments of the present invention.
10 is a view showing a noise removing device according to embodiments of the present invention.
11 is a diagram illustrating a stereo noise removing apparatus according to embodiments of the present invention.
12 is a flowchart illustrating a method for removing mono noise according to embodiments of the present invention.
13 is a flowchart illustrating a process of updating a current far-end channel filter according to an embodiment of the present invention.

본 명세서에서 각 도면의 구성 요소들에 참조번호를 부가함에 있어서 동일한 구성 요소들에 한해서는 비록 다른 도면상에 표시되더라도 가능한한 동일한 번호를 가지도록 하고 있음에 유의하여야 한다.It should be noted that in this specification, when adding reference numerals to components of each drawing, the same components have the same number as possible, even if they are displayed on different drawings.

한편, 본 명세서에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.On the other hand, the meaning of the terms described herein will be understood as follows.

단수의 표현은 문맥상 명백하게 다르게 정의하지 않는 한, 복수의 표현을 포함하는 것으로 이해되어야 하는 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다.Singular expressions are to be understood as including plural expressions unless the context clearly defines otherwise, and the scope of rights should not be limited by these terms.

"포함하다" 또는 "가지다" 등의 용어는 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.It should be understood that terms such as “include” or “have” do not preclude the presence or addition possibility of one or more other features or numbers, steps, actions, components, parts or combinations thereof.

이하, 첨부되는 도면을 참고하여 상기 문제점을 해결하기 위해 고안된 본 발명의 바람직한 실시예들에 대해 상세히 설명한다.Hereinafter, preferred embodiments of the present invention designed to solve the above problems will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예들을 설명하기 위한 도면이고, 도 2는 본 발명의 실시예들에 따른 노이즈 제거 방법을 나타내는 순서도이다.1 is a view for explaining embodiments of the present invention, Figure 2 is a flow chart showing a noise removal method according to embodiments of the present invention.

도 1 및 2를 참조하면, 본 발명의 실시예에 따른 노이즈 제거 방법에서는 이전 프레임(PF)에 상응하는 제1 이전 파-엔드(Far-end) 채널필터(PFE_F1), 입력신호(IN_S) 및 제1 파-엔드 신호(FE_S1)에 기초하여 제1 추정 출력신호(EO_S1)를 제공할 수 있다(S100). 입력신호(IN_S)는 니어-엔드(Near-end) 신호(NE_S), 제1 파-엔드 신호(FE_S1) 및 제2 파-엔드 신호(FE_S2)를 포함할 수 있다. 1 and 2, in the method of removing noise according to an embodiment of the present invention, the first previous far-end channel filter PFE_F1, the input signal IN_S corresponding to the previous frame PF, and A first estimated output signal EO_S1 may be provided based on the first far-end signal FE_S1 (S100). The input signal IN_S may include a near-end signal NE_S, a first far-end signal FE_S1 and a second far-end signal FE_S2.

예를들어, 니어-엔드 신호(NE_S)는 스테레오 에코신호(FE_S1, FE_S2)가 포함되지 않은 순수 음성신호일 수 있다. 제1 파-엔드 신호(FE_S1)는 마이크(23)를 기준으로 제1 방향에 배치되는 스피커등의 제1 음원(21)으로부터 제공되는 에코신호일 수 있다. 제1 방향은 마이크(23)를 기준으로 왼쪽을 나타낼 수 있다. 제2 파-엔드 신호(FE_S2)는 마이크(23)를 기준으로 제2 방향에 배치되는 스피커등의 제2 음원(22)으로부터 제공되는 에코신호일 수 있다. 제2 방향은 마이크(23)를 기준으로 오른쪽을 나타낼 수 있다.For example, the near-end signal NE_S may be a pure audio signal without stereo echo signals FE_S1 and FE_S2. The first far-end signal FE_S1 may be an echo signal provided from a first sound source 21 such as a speaker disposed in a first direction based on the microphone 23. The first direction may indicate the left side with respect to the microphone 23. The second far-end signal FE_S2 may be an echo signal provided from a second sound source 22 such as a speaker disposed in a second direction based on the microphone 23. The second direction may indicate the right side with respect to the microphone 23.

예를 들어, 제1 프레임 이후에 제공되는 프레임은 제2 프레임일 수 있다. 여기서, 제2 프레임이 현재 프레임(CF)인 경우, 제1 프레임은 이전 프레임(PF)일 수 있다. 이 경우, 제1 이전 파-엔드 채널필터(PFE_F1)는 제1 프레임에서 제1 방향의 파-엔드 채널필터일 수 있다. For example, a frame provided after the first frame may be a second frame. Here, when the second frame is the current frame CF, the first frame may be the previous frame PF. In this case, the first previous far-end channel filter PFE_F1 may be a far-end channel filter in the first direction in the first frame.

제1 추정 출력신호(EO_S1)는

Figure 112018084721667-pat00001
로 나타낼 수 있고, 제1 추정 출력신호(EO_S1)는 [수학식 1]과 같이 표현될 수 있다. The first estimated output signal (EO_S1)
Figure 112018084721667-pat00001
It can be represented by, and the first estimated output signal EO_S1 can be expressed as [Equation 1].

[수학식 1][Equation 1]

Figure 112018084721667-pat00002
Figure 112018084721667-pat00002

여기서,

Figure 112018084721667-pat00003
는 입력신호(IN_S)이고,
Figure 112018084721667-pat00004
제1 이전 파-엔드 채널필터(PFE_F1)이고,
Figure 112018084721667-pat00005
는 제1 파-엔드 신호(FE_S1)이고, m은 샘플 인덱스이고, k는 주파수 인덱스일 수 있다.here,
Figure 112018084721667-pat00003
Is the input signal (IN_S),
Figure 112018084721667-pat00004
The first pre-end channel filter (PFE_F1),
Figure 112018084721667-pat00005
Is a first far-end signal FE_S1, m is a sample index, and k can be a frequency index.

제1 추정 출력신호(EO_S1) 및 제1 이전 파-엔드 채널필터(PFE_F1)에 따라 현재 프레임(CF)에 상응하는 제1 현재 파-엔드 채널필터(CFE_F1)를 업데이트할 수 있다(S200). 예를 들어, 제1 프레임 이후에 제공되는 프레임은 제2 프레임일 수 있다. 여기서, 제2 프레임이 현재 프레임(CF)인 경우, 제1 프레임은 이전 프레임(PF)일 수 있다. 이 경우, 제1 현재 파-엔드 채널필터(CFE_F1)는 제2 프레임에서 제1 방향의 파-엔드 채널필터일 수 있다.The first current far-end channel filter CFE_F1 corresponding to the current frame CF may be updated according to the first estimated output signal EO_S1 and the first previous far-end channel filter PFE_F1 (S200). For example, a frame provided after the first frame may be a second frame. Here, when the second frame is the current frame CF, the first frame may be the previous frame PF. In this case, the first current far-end channel filter CFE_F1 may be a far-end channel filter in the first direction in the second frame.

제1 현재 파-엔드 채널필터(CFE_F1)는

Figure 112018084721667-pat00006
로 나타낼 수 있고, 제1 현재 파-엔드 채널필터(CFE_F1)는 [수학식 2]와 같이 표현될 수 있다. The first current far-end channel filter (CFE_F1) is
Figure 112018084721667-pat00006
It can be represented by, and the first current far-end channel filter (CFE_F1) can be expressed as [Equation 2].

[수학식 2][Equation 2]

Figure 112018084721667-pat00007
Figure 112018084721667-pat00007

여기서,

Figure 112018084721667-pat00008
는 제1 현재 파-엔드 채널필터(CFE_F1)이고,
Figure 112018084721667-pat00009
는 제1 이전 파-엔드 채널필터(PFE_F1)이고,
Figure 112018084721667-pat00010
는 제1 칼만이득일 수 있다.here,
Figure 112018084721667-pat00008
Is the first current far-end channel filter (CFE_F1),
Figure 112018084721667-pat00009
Is the first pre-end channel filter (PFE_F1),
Figure 112018084721667-pat00010
Can only be the first sword.

제1 현재 파-엔드 채널필터(CFE_F1) 및 제1 이전 파-엔드 채널필터(PFE_F1)는 제1 파-엔드 채널필터(FE_F1)에 포함될 수 있다. The first current far-end channel filter CFE_F1 and the first previous far-end channel filter PFE_F1 may be included in the first far-end channel filter FE_F1.

제1 현재 파-엔드 채널필터(CFE_F1)를 이용하여 입력신호(IN_S)로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호(OUT_S1)를 제공할 수 있다(S300). 제1 출력신호(OUT_S1)는

Figure 112018084721667-pat00011
로 나타낼 수 있고, 제1 출력신호(OUT_S1)는 [수학식 3]과 같이 표현될 수 있다. A first output signal OUT_S1 from which the first far-end noise signal is removed from the input signal IN_S may be provided using the first current far-end channel filter CFE_F1 (S300). The first output signal (OUT_S1)
Figure 112018084721667-pat00011
It may be represented by, and the first output signal OUT_S1 may be expressed as [Equation 3].

[수학식 3][Equation 3]

Figure 112018084721667-pat00012
Figure 112018084721667-pat00012

여기서,

Figure 112018084721667-pat00013
는 입력신호(IN_S)이고,
Figure 112018084721667-pat00014
는 제1 현재 파-엔드 채널필터(CFE_F1)이고,
Figure 112018084721667-pat00015
는 제1 파-엔드 신호(FE_S1)를 나타낼 수 있다. here,
Figure 112018084721667-pat00013
Is the input signal (IN_S),
Figure 112018084721667-pat00014
Is the first current far-end channel filter (CFE_F1),
Figure 112018084721667-pat00015
May represent the first far-end signal FE_S1.

이전 프레임(PF)에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 제1 출력신호(OUT_S1) 및 제2 파-엔드 신호(FE_S2)에 기초하여 제2 추정 출력신호(EO_S2)를 제공할 수 있다(S400). The second estimated output signal EO_S2 based on the second previous far-end channel filter corresponding to the previous frame PF, the first output signal OUT_S1 and the second far-end signal FE_S2 It may provide (S400).

예를 들어, 제1 프레임 이후에 제공되는 프레임은 제2 프레임일 수 있다. 여기서, 제2 프레임이 현재 프레임(CF)인 경우, 제1 프레임은 이전 프레임(PF)일 수 있다. 이 경우, 제2 이전 파-엔드 채널필터(PFE_F2)는 제1 프레임에서 제2 방향의 파-엔드 채널필터일 수 있다.For example, a frame provided after the first frame may be a second frame. Here, when the second frame is the current frame CF, the first frame may be the previous frame PF. In this case, the second previous far-end channel filter PFE_F2 may be a far-end channel filter in the second direction in the first frame.

제2 추정 출력신호(EO_S2)는

Figure 112018084721667-pat00016
로 나타낼 수 있고, 제2 추정 출력신호(EO_S2)는 [수학식 4]와 같이 표현될 수 있다. The second estimated output signal (EO_S2)
Figure 112018084721667-pat00016
It can be represented by, and the second estimated output signal (EO_S2) can be expressed as [Equation 4].

[수학식 4][Equation 4]

Figure 112018084721667-pat00017
Figure 112018084721667-pat00017

여기서,

Figure 112018084721667-pat00018
는 제1 출력신호(OUT_S1)이고,
Figure 112018084721667-pat00019
는 제2 이전 파-엔드 채널필터(PFE_F2)이고,
Figure 112018084721667-pat00020
는 제2 파-엔드 신호(FE_S2)이고, m은 샘플 인덱스이고, k는 주파수 인덱스일 수 있다.here,
Figure 112018084721667-pat00018
Is the first output signal (OUT_S1),
Figure 112018084721667-pat00019
Is the second pre-end channel filter (PFE_F2),
Figure 112018084721667-pat00020
Is a second far-end signal FE_S2, m is a sample index, and k can be a frequency index.

제2 추정 출력신호(EO_S2) 및 제2 이전 파-엔드 채널필터(PFE_F2)에 따라 현재 프레임(CF)에 상응하는 제2 현재 파-엔드 채널필터(CFE_F2)를 업데이트할 수 있다(S500). 예를 들어, 제1 프레임 이후에 제공되는 프레임은 제2 프레임일 수 있다. 여기서, 제2 프레임이 현재 프레임(CF)인 경우, 제1 프레임은 이전 프레임(PF)일 수 있다. 이 경우, 제2 현재 파-엔드 채널필터(CFE_F2)는 제2 프레임에서 제2 방향의 파-엔드 채널필터일 수 있다.The second current far-end channel filter CFE_F2 corresponding to the current frame CF may be updated according to the second estimated output signal EO_S2 and the second previous far-end channel filter PFE_F2 (S500). For example, a frame provided after the first frame may be a second frame. Here, when the second frame is the current frame CF, the first frame may be the previous frame PF. In this case, the second current far-end channel filter CFE_F2 may be a far-end channel filter in the second direction in the second frame.

제2 현재 파-엔드 채널필터(CFE_F2)는

Figure 112018084721667-pat00021
로 나타낼 수 있고, 제2 현재 파-엔드 채널필터(CFE_F2)는 [수학식 5]와 같이 표현될 수 있다. The second current far-end channel filter (CFE_F2) is
Figure 112018084721667-pat00021
It can be represented by, and the second current far-end channel filter (CFE_F2) can be expressed as [Equation 5].

[수학식 5][Equation 5]

Figure 112018084721667-pat00022
Figure 112018084721667-pat00022

여기서,

Figure 112018084721667-pat00023
는 제2 현재 파-엔드 채널필터(CFE_F2)이고,
Figure 112018084721667-pat00024
는 제2 이전 파-엔드 채널필터(PFE_F2)이고,
Figure 112018084721667-pat00025
는 제2 칼만이득일 수 있다. here,
Figure 112018084721667-pat00023
Is the second current far-end channel filter (CFE_F2),
Figure 112018084721667-pat00024
Is the second pre-end channel filter (PFE_F2),
Figure 112018084721667-pat00025
Can only be the second sword.

제2 현재 파-엔드 채널필터(CFE_F2) 및 제2 이전 파-엔드 채널필터(PFE_F2)는 제2 파-엔드 채널필터(FE_F2)에 포함될 수 있다.The second current far-end channel filter CFE_F2 and the second previous far-end channel filter PFE_F2 may be included in the second far-end channel filter FE_F2.

제2 현재 파-엔드 채널필터(CFE_F2)를 이용하여 제1 출력신호(OUT_S1)로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호(OUT_S2)를 제공할 수 있다(S600). 제2 출력신호(OUT_S2)는

Figure 112018084721667-pat00026
로 나타낼 수 있고, 제2 출력신호(OUT_S2)는 [수학식 6]과 같이 표현될 수 있다. A second output signal OUT_S2 from which the second far-end noise signal is removed from the first output signal OUT_S1 may be provided using the second current far-end channel filter CFE_F2 (S600). The second output signal (OUT_S2)
Figure 112018084721667-pat00026
It can be represented by, and the second output signal (OUT_S2) can be expressed as [Equation 6].

[수학식 6][Equation 6]

Figure 112018084721667-pat00027
Figure 112018084721667-pat00027

여기서,

Figure 112018084721667-pat00028
는 제1 출력신호(OUT_S1)이고,
Figure 112018084721667-pat00029
는 제2 현재 파-엔드 채널필터(CFE_F2),
Figure 112018084721667-pat00030
는 제2 파-엔드 신호(FE_S2)일 수 있다. here,
Figure 112018084721667-pat00028
Is the first output signal (OUT_S1),
Figure 112018084721667-pat00029
Is the second current far-end channel filter (CFE_F2),
Figure 112018084721667-pat00030
May be the second far-end signal FE_S2.

본 발명에 따른 노이즈 제거 방법을 사용하면 입력신호(IN_S)로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.When the noise removing method according to the present invention is used, a stereo echo signal is removed from the input signal IN_S, thereby providing a noise-removed voice signal.

또한, 본 발명의 실시 예들은 스테레오 에코신호 제거에 대하여 기술하고 있지만, 본 발명의 실시예들에 따른 기술들은 모노 에코신호 제거를 위해서도 적용될 수 있다.In addition, although the embodiments of the present invention describe stereo echo signal cancellation, the technologies according to embodiments of the present invention can also be applied for mono echo signal cancellation.

도 3은 본 발명의 일 실시예에 따른 제1 현재 파-엔드 채널필터(CFE_F1)의 업데이트 과정을 설명하기 위한 순서도이고, 도 4는 프레임에 따라 변동하는 제1 파-엔드 채널필터를 설명하기 위한 도면이고, 도 5는 본 발명의 실시예들에 포함되는 제1 파-엔드 채널필터를 설명하기 위한 도면이다.3 is a flowchart for explaining an update process of the first current far-end channel filter (CFE_F1) according to an embodiment of the present invention, and FIG. 4 illustrates a first far-end channel filter that varies according to a frame. 5 is a view for explaining a first far-end channel filter included in embodiments of the present invention.

도 3 내지 5를 참조하면, 제1 현재 파-엔드 채널필터(CFE_F1)를 업데이트하는 단계에서는 제1 추정 출력신호(EO_S1)에 기초하여 제1 분산(VAR1)을 추정할 수 있다(S210). 3 to 5, in updating the first current far-end channel filter CFE_F1, the first variance VAR1 may be estimated based on the first estimated output signal EO_S1 (S210).

예를 들어, 제1 분산(VAR1)은

Figure 112018084721667-pat00031
일 수 있고, [수학식 7]과 같이 표현될 수 있다. For example, the first variance (VAR1) is
Figure 112018084721667-pat00031
It can be, and can be expressed as [Equation 7].

[수학식 7][Equation 7]

Figure 112018084721667-pat00032
Figure 112018084721667-pat00032

여기서,

Figure 112018084721667-pat00033
는 분산 추정치일 수 있고, 분산 추정치는 입력신호(IN_S) 및 제1 파-엔드 신호(FE_S1)의 상호상관(Cross-correlation) 및 제1 파-엔드 신호(FE_S1)의 자기상관(Auto-correlation)에 기초하여 생성될 수 있다.here,
Figure 112018084721667-pat00033
May be a variance estimate, and the variance estimate may be a cross-correlation of the input signal IN_S and the first wave-end signal FE_S1 and an auto-correlation of the first wave-end signal FE_S1. ).

일 실시예에 있어서, 제1 분산(VAR1)은 제1 이전 파-엔드 채널필터(PFE_F1)에 기초하여 제공되는 제1 추정 출력신호(EO_S1)에 의해 결정될 수 있다. 또한, 제1 분산(VAR1)은 제1 추정 출력신호(EO_S1)의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정될 수 있다. In one embodiment, the first variance VAR1 may be determined by the first estimated output signal EO_S1 provided based on the first previous far-end channel filter PFE_F1. Also, the first variance VAR1 may be determined according to a value obtained by multiplying the square of the absolute value of the first estimated output signal EO_S1 by a first weight.

제1 분산(VAR1)에 기초하여 계산되는 제1 역 자기 상관 매트릭스(Inverse Autocorrelation Matrix, IACM1)를 생성할 수 있다(S220). A first inverse autocorrelation matrix (IACM1) calculated based on the first variance VAR1 may be generated (S220).

예를 들어, 제1 역 자기 상관 매트릭스(IACM1)는 [수학식 8]과 같이 표현될 수 있다. For example, the first inverse autocorrelation matrix (IACM1) may be expressed as [Equation 8].

[수학식 8][Equation 8]

Figure 112018084721667-pat00034
Figure 112018084721667-pat00034

여기서,

Figure 112018084721667-pat00035
및
Figure 112018084721667-pat00036
는 제1 역 자기 상관 매트릭스(IACM1)에 포함될 수 있다. here,
Figure 112018084721667-pat00035
And
Figure 112018084721667-pat00036
May be included in the first inverse autocorrelation matrix (IACM1).

일 실시예에 있어서, 제1 현재 파-엔드 채널필터(CFE_F1)는 일정한 값으로 수렴할 수 있다.In one embodiment, the first current far-end channel filter CFE_F1 may converge to a constant value.

도 6은 본 발명의 일 실시예에 따른 제2 현재 파-엔드 채널필터(CFE_F2)의 업데이트 과정을 설명하기 위한 순서도이고, 도 7은 프레임에 따라 변동하는 제2 파-엔드 채널필터를 설명하기 위한 도면이고, 도 8은 본 발명의 실시예들에 포함되는 제2 파-엔드 채널필터를 설명하기 위한 도면이다.6 is a flowchart for explaining an update process of a second current far-end channel filter (CFE_F2) according to an embodiment of the present invention, and FIG. 7 illustrates a second far-end channel filter that varies according to a frame 8 is a diagram for explaining a second far-end channel filter included in embodiments of the present invention.

도 6 내지 8을 참조하면, 일 실시예에 있어서, 제2 현재 파-엔드 채널필터(CFE_F2)를 업데이트하는 단계에서는 제2 추정 출력신호(EO_S2)에 기초하여 제2 분산(VAR2)을 추정할 수 있다(S510).  6 to 8, in an embodiment, in the step of updating the second current far-end channel filter CFE_F2, the second variance VAR2 is estimated based on the second estimated output signal EO_S2. It can be (S510).

예를 들어, 제2 분산(VAR2)은

Figure 112018084721667-pat00037
일 수 있고, [수학식 9]와 같이 표현될 수 있다. For example, the second variance (VAR2) is
Figure 112018084721667-pat00037
It can be, and can be expressed as [Equation 9].

[수학식 9] [Equation 9]

Figure 112018084721667-pat00038
Figure 112018084721667-pat00038

여기서,

Figure 112018084721667-pat00039
는 분산 추정치일 수 있고, 분산 추정치는 제1 출력신호(OUT_S1) 및 제2 파-엔드 신호(FE_S2)의 상호상관(Cross-correlation) 및 제2 파-엔드 신호(FE_S2)의 자기상관(Auto-correlation)에 기초하여 생성될 수 있다.here,
Figure 112018084721667-pat00039
May be a variance estimate, and the variance estimate may be a cross-correlation of the first output signal OUT_S1 and the second wave-end signal FE_S2 and auto-correlation of the second wave-end signal FE_S2. -correlation).

일 실시예에 있어서, 제2 분산(VAR2)은 제2 이전 파-엔드 채널필터(PFE_F2)에 기초하여 제공되는 제2 추정 출력신호(EO_S2)에 의해 결정될 수 있다. 또한, 제2 분산(VAR2)은 제2 추정 출력신호(EO_S2)의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정될 수 있다.In one embodiment, the second variance VAR2 may be determined by the second estimated output signal EO_S2 provided based on the second previous far-end channel filter PFE_F2. Also, the second variance VAR2 may be determined according to a value obtained by multiplying the square of the absolute value of the second estimated output signal EO_S2 by the second weight.

제2 분산(VAR2)에 기초하여 계산되는 제2 역 자기 상관 매트릭스(Inverse Autocorrelation Matrix, IACM2)를 생성할 수 있다(S520). A second inverse autocorrelation matrix (IACM2) calculated based on the second variance VAR2 may be generated (S520).

예를 들어, 제2 역 자기 상관 매트릭스(IACM2)는 [수학식 10]과 같이 표현될 수 있다.  For example, the second inverse autocorrelation matrix (IACM2) may be expressed as [Equation 10].

[수학식 10][Equation 10]

Figure 112018084721667-pat00040
Figure 112018084721667-pat00040

여기서,

Figure 112018084721667-pat00041
및
Figure 112018084721667-pat00042
는 제2 역 자기 상관 매트릭스(IACM2)에 포함될 수 있다. here,
Figure 112018084721667-pat00041
And
Figure 112018084721667-pat00042
May be included in the second inverse autocorrelation matrix (IACM2).

일 실시예에 있어서, 제2 현재 파-엔드 채널필터(CFE_F2)는 일정한 값으로 수렴할 수 있다. 본 발명에 따른 노이즈 제거 방법을 사용하면 입력신호(IN_S)로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.In one embodiment, the second current far-end channel filter CFE_F2 may converge to a constant value. When the noise removing method according to the present invention is used, a stereo echo signal is removed from the input signal IN_S, thereby providing a noise-removed voice signal.

도 9는 본 발명의 실시예들에 따른 스테레오 노이즈 제거 방법을 나타내는 순서도이다.9 is a flowchart illustrating a method for removing stereo noise according to embodiments of the present invention.

도 1 내지 9를 참조하면, 본 발명의 실시예에 따른 스테레오 노이즈 제거 방법에서는 제1 분산(variance)을 초기화할 수 있다(S100). 이전 프레임(PF)에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호(IN_S) 및 제1 파-엔드 신호(FE_S1)에 기초하여 제1 추정 출력신호(EO_S1)를 제공하고, 제1 추정 출력신호(EO_S1), 제1 이전 파-엔드 채널필터(PFE_F1) 및 제1 분산(VAR1)에 따라 현재 프레임(CF)에 상응하는 제1 현재 파-엔드 채널필터(CFE_F1)를 업데이트할 수 있다(S200). 제1 현재 파-엔드 채널필터(CFE_F1)를 이용하여 입력신호(IN_S)로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호(OUT_S1)를 제공할 수 있다(S300). 1 to 9, in the stereo noise removal method according to an embodiment of the present invention, the first variance may be initialized (S100). Provides a first estimated output signal EO_S1 based on a first previous far-end channel filter corresponding to the previous frame PF, an input signal IN_S and a first far-end signal FE_S1 And the first current far-end channel filter CFE_F1 corresponding to the current frame CF according to the first estimated output signal EO_S1, the first previous far-end channel filter PFE_F1, and the first variance VAR1. It may be updated (S200). A first output signal OUT_S1 from which the first far-end noise signal is removed from the input signal IN_S may be provided using the first current far-end channel filter CFE_F1 (S300).

제2 분산(variance)을 초기화할 수 있다(S400). 이전 프레임(PF)에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 제1 출력신호(OUT_S1) 및 제2 파-엔드 신호(FE_S2)에 기초하여 제2 추정 출력신호(EO_S2)를 제공하고, 제2 추정 출력신호(EO_S2), 제2 이전 파-엔드 채널필터(PFE_F2) 및 제2 분산(VAR2)에 따라 현재 프레임(CF)에 상응하는 제2 현재 파-엔드 채널필터(CFE_F2)를 업데이트할 수 있다(S500). 제2 현재 파-엔드 채널필터(CFE_F2)를 이용하여 제1 출력신호(OUT_S1)로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호(OUT_S2)를 제공할 수 있다(S600). The second variance may be initialized (S400). The second estimated output signal EO_S2 based on the second previous far-end channel filter corresponding to the previous frame PF, the first output signal OUT_S1 and the second far-end signal FE_S2 And a second current far-end channel filter corresponding to the current frame CF according to the second estimated output signal EO_S2, the second previous far-end channel filter PFE_F2 and the second variance VAR2 ( CFE_F2) may be updated (S500). A second output signal OUT_S2 from which the second far-end noise signal is removed from the first output signal OUT_S1 may be provided using the second current far-end channel filter CFE_F2 (S600).

일 실시예에 있어서, 제1 분산(VAR1)은 제1 이전 파-엔드 채널필터(PFE_F1)에 기초하여 제공되는 제1 추정 출력신호(EO_S1)에 의해 결정되고, 제2 분산(VAR2)은 제2 이전 파-엔드 채널필터(PFE_F2)에 기초하여 제공되는 제2 추정 출력신호(EO_S2)에 의해 결정될 수 있다. 본 발명에 따른 스테레오 노이즈 제거 방법을 사용하면 입력신호(IN_S)로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.In one embodiment, the first variance (VAR1) is determined by the first estimated output signal (EO_S1) provided based on the first previous far-end channel filter (PFE_F1), the second variance (VAR2) is 2 may be determined by the second estimated output signal EO_S2 provided based on the previous far-end channel filter PFE_F2. When the stereo noise removing method according to the present invention is used, a stereo echo signal is removed from the input signal IN_S, thereby providing a noise-removed voice signal.

도 10은 본 발명의 실시예들에 따른 노이즈 제거 장치를 나타내는 도면이다.10 is a view showing a noise removing device according to embodiments of the present invention.

도 1 내지 10을 참조하면, 본 발명의 실시예에 따른 노이즈 제거 장치(10)는 제1 추정부(100), 제1 필터부(200), 제1 출력부(300), 제2 추정부(400), 제2필터부(500), 제2 출력부(600)를 포함할 수 있다. 1 to 10, the noise removing apparatus 10 according to an embodiment of the present invention includes a first estimation unit 100, a first filter unit 200, a first output unit 300, and a second estimation unit 400, a second filter unit 500, and a second output unit 600.

제1 추정부(100)는 이전 프레임(PF)에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호(IN_S) 및 제1 파-엔드 신호(FE_S1)에 기초하여 제1 추정 출력신호(EO_S1)를 제공할 수 있다. 제1 필터부(200)는 제1 추정 출력신호(EO_S1) 및 제1 이전 파-엔드 채널필터(PFE_F1)에 따라 현재 프레임(CF)에 상응하는 제1 현재 파-엔드 채널필터(CFE_F1)를 업데이트할 수 있다. 제1 출력부(300)는 제1 현재 파-엔드 채널필터(CFE_F1)를 이용하여 입력신호(IN_S)로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호(OUT_S1)를 제공할 수 있다. The first estimator 100 is based on a first previous far-end channel filter, an input signal IN_S and a first far-end signal FE_S1 corresponding to the previous frame PF. The estimated output signal EO_S1 may be provided. The first filter unit 200 receives the first current far-end channel filter CFE_F1 corresponding to the current frame CF according to the first estimated output signal EO_S1 and the first previous far-end channel filter PFE_F1. Can be updated. The first output unit 300 may provide a first output signal OUT_S1 by removing the first far-end noise signal from the input signal IN_S using the first current far-end channel filter CFE_F1.

제2 추정부(400)는 이전 프레임(PF)에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 제1 출력신호(OUT_S1) 및 제2 파-엔드 신호(FE_S2)에 기초하여 제2 추정 출력신호(EO_S2)를 제공할 수 있다. 제2필터부(500)는 제2 추정 출력신호(EO_S2) 및 제2 이전 파-엔드 채널필터(PFE_F2)에 따라 현재 프레임(CF)에 상응하는 제2 현재 파-엔드 채널필터(CFE_F2)를 업데이트할 수 있다. 제2 출력부(600)는 제2 현재 파-엔드 채널필터(CFE_F2)를 이용하여 제1 출력신호(OUT_S1)로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호(OUT_S2)를 제공할 수 있다. The second estimator 400 is based on the second previous far-end channel filter corresponding to the previous frame PF, the first output signal OUT_S1 and the second far-end signal FE_S2. A second estimated output signal EO_S2 may be provided. The second filter unit 500 receives the second current far-end channel filter CFE_F2 corresponding to the current frame CF according to the second estimated output signal EO_S2 and the second previous far-end channel filter PFE_F2. Can be updated. The second output unit 600 may provide the second output signal OUT_S2 by removing the second far-end noise signal from the first output signal OUT_S1 using the second current far-end channel filter CFE_F2. have.

일 실시예에 있어서, 제1 분산(VAR1)은 제1 추정 출력신호(EO_S1)의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정되고, 제2 분산(VAR2)은 제2 추정 출력신호(EO_S2)의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정될 수 있다. In one embodiment, the first variance VAR1 is determined according to a value obtained by multiplying the square of the absolute value of the first estimated output signal EO_S1 by the first weight, and the second variance VAR2 is the second estimated output signal. It may be determined according to a value obtained by multiplying the square of the absolute value of (EO_S2) by the second weight.

도 11은 본 발명의 실시예들에 따른 스테레오 노이즈 제거 장치를 나타내는 도면이다.11 is a diagram illustrating a stereo noise removing apparatus according to embodiments of the present invention.

도 1 내지 11을 참조하면, 본 발명의 실시예에 따른 스테레오 노이즈 제거 장치(20)는 제1 초기화부(115), 제1 업데이트부(150), 제1 출력부(300), 제2 초기화부(515), 제2 업데이트부(450), 제2 출력부(600)를 포함할 수 있다. 1 to 11, the stereo noise removing apparatus 20 according to an embodiment of the present invention includes a first initialization unit 115, a first update unit 150, a first output unit 300, and a second initialization The unit 515 may include a second update unit 450 and a second output unit 600.

제1 초기화부(115)는 제1 분산(variance)의 초기값(IV_S1)을 초기화할 수 있다. 제1 업데이트부(150)는 제1 업데이트 부는 제1 추정부(100) 및 제1 필터부(200)를 포함할 수 있다.The first initialization unit 115 may initialize the initial value IV_S1 of the first variance. The first update unit 150 may include a first estimator 100 and a first filter unit 200 for the first update unit.

제1 추정부(100)는 이전 프레임(PF)에 상응하는 제1 이전 파-엔드(Far-end) 채널필터, 입력신호(IN_S) 및 제1 파-엔드 신호(FE_S1)에 기초하여 제1 추정 출력신호(EO_S1)를 제공할 수 있다. 제1 필터부(200)는 제1 추정 출력신호(EO_S1), 제1 이전 파-엔드 채널필터(PFE_F1) 및 제1 분산(VAR1)에 따라 현재 프레임(CF)에 상응하는 제1 현재 파-엔드 채널필터(CFE_F1)를 업데이트할 수 있다. 제1 출력부(300)는 제1 현재 파-엔드 채널필터(CFE_F1)를 이용하여 입력신호(IN_S)로부터 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호(OUT_S1)를 제공할 수 있다. The first estimator 100 is based on a first previous far-end channel filter, an input signal IN_S and a first far-end signal FE_S1 corresponding to the previous frame PF. The estimated output signal EO_S1 may be provided. The first filter unit 200 is the first current wave corresponding to the current frame CF according to the first estimated output signal EO_S1, the first pre-end channel filter PFE_F1, and the first variance VAR1. The end channel filter CFE_F1 may be updated. The first output unit 300 may provide a first output signal OUT_S1 by removing the first far-end noise signal from the input signal IN_S using the first current far-end channel filter CFE_F1.

제2 초기화부(515)는 제2 분산(variance)의 초기값(IV_S2)을 초기화할 수 있다. 제2 업데이트부(450)는 제2 추정부(400) 및 제2필터부(500)를 포함할 수 있다.The second initialization unit 515 may initialize the initial value IV_S2 of the second variance. The second update unit 450 may include a second estimation unit 400 and a second filter unit 500.

제2 추정부(400)는 이전 프레임(PF)에 상응하는 제2 이전 파-엔드(Far-end) 채널필터, 제1 출력신호(OUT_S1) 및 제2 파-엔드 신호(FE_S2)에 기초하여 제2 추정 출력신호(EO_S2)를 제공할 수 있다. 제2필터부(500)는 제2 추정 출력신호(EO_S2), 제2 이전 파-엔드 채널필터(PFE_F2) 및 제2 분산(VAR2)에 따라 현재 프레임(CF)에 상응하는 제2 현재 파-엔드 채널필터(CFE_F2)를 업데이트할 수 있다. 제2 출력부(600)는 제2 현재 파-엔드 채널필터(CFE_F2)를 이용하여 제1 출력신호(OUT_S1)로부터 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호(OUT_S2)를 제공할 수 있다. The second estimator 400 is based on the second previous far-end channel filter corresponding to the previous frame PF, the first output signal OUT_S1 and the second far-end signal FE_S2. A second estimated output signal EO_S2 may be provided. The second filter unit 500 is the second current wave corresponding to the current frame CF according to the second estimated output signal EO_S2, the second previous far-end channel filter PFE_F2, and the second dispersion VAR2. The end channel filter CFE_F2 may be updated. The second output unit 600 may provide the second output signal OUT_S2 by removing the second far-end noise signal from the first output signal OUT_S1 using the second current far-end channel filter CFE_F2. have.

일 실시예에 있어서, 제1 현재 파-엔드 채널필터(CFE_F1) 및 제2 현재 파-엔드 채널필터(CFE_F2)는 일정한 값으로 수렴할 수 있다. 본 발명에 따른 스테레오 노이즈 제거 장치를 사용하면 입력신호(IN_S)로부터 스테레오 에코 신호를 제거함으로써 노이즈가 제거된 음성신호를 제공할 수 있다.In one embodiment, the first current far-end channel filter CFE_F1 and the second current far-end channel filter CFE_F2 may converge to a constant value. When the stereo noise removing apparatus according to the present invention is used, it is possible to provide a voice signal from which noise is removed by removing the stereo echo signal from the input signal IN_S.

도 12는 본 발명의 실시예들에 따른 모노 노이즈 제거 방법을 나타내는 순서도이고, 도 13은 본 발명의 일 실시예에 따른 현재 파-엔드 채널필터의 업데이트 과정을 설명하기 위한 순서도이다.12 is a flowchart illustrating a method for removing mono noise according to embodiments of the present invention, and FIG. 13 is a flowchart illustrating an update process of a current far-end channel filter according to an embodiment of the present invention.

도 12 및 도 13을 참조하면, 이전 프레임에 상응하는 이전 파-엔드(Far-end) 채널필터(PFE_F), 입력신호(IN_S) 및 파-엔드 신호(FE_S)에 기초하여 추정 출력신호(EO_S)를 제공할 수 있다(S1000). 상기 추정 출력신호(EO_S) 및 상기 이전 파-엔드 채널필터(PFE_F)에 따라 현재 프레임에 상응하는 현재 파-엔드 채널필터를 업데이트할 수 있다(S2000). 상기 현재 파-엔드 채널필터(CFE_F)를 이용하여 상기 입력신호로부터 파-엔드 노이즈 신호를 제거한 출력신호(OUT_S)를 제공할 수 있다(S3000). 12 and 13, an estimated output signal EO_S based on a previous far-end channel filter PFE_F, an input signal IN_S, and a far-end signal FE_S corresponding to a previous frame ) May be provided (S1000). The current far-end channel filter corresponding to the current frame may be updated according to the estimated output signal EO_S and the previous far-end channel filter PFE_F (S2000). An output signal OUT_S obtained by removing a far-end noise signal from the input signal may be provided using the current far-end channel filter CFE_F (S3000).

현재 파-엔드 채널필터(CFE_F)를 업데이트하는 단계에서는 추정 출력신호(EO_S)에 기초하여 분산(VAR)을 추정할 수 있다(S2100). 분산에 기초하여 계산되는 역 자기 상관 매트릭스(Inverse Autocorrelation Matrix)를 생성할 수 있다(S2300). In the step of updating the current far-end channel filter CFE_F, the variance VAR may be estimated based on the estimated output signal EO_S (S2100). An inverse autocorrelation matrix calculated based on variance may be generated (S2300).

도 12 및 도 13에서 설명하는 모노 노이즈 제거 방법은 도 1에서 제1 파-엔드 신호 또는 제2 파-엔드 신호가 0인 경우에 적용될 수 있다. 본 발명에서는 모노 또는 스테레오에 대해서만 설명하고 있으나, 본 발명에 따른 실시예들은 3개 이상의 노이즈 소스에 대해서도 적용될 수 있다.The mono-noise removal method illustrated in FIGS. 12 and 13 may be applied when the first wave-end signal or the second wave-end signal in FIG. 1 is 0. In the present invention, only mono or stereo is described, but embodiments according to the present invention can also be applied to three or more noise sources.

21: 제1 음원 22: 제2 음원
23: 마이크 26: 제1 파-엔드 채널필터
27: 제2 파-엔드 채널필터 100: 제1 추정부
200: 제1 필터부 300: 제1 출력부
400: 제2 추정부 500: 제2 필터부
600: 제2 출력부 150: 제1 업데이트부
450: 제2 업데이트부21: first sound source 22: second sound source
23: microphone 26: first far-end channel filter
27: second far-end channel filter 100: first estimation unit
200: first filter unit 300: first output unit
400: second estimation unit 500: second filter unit
600: second output unit 150: first update unit
450: second update unit

Claims (17)

제1 추정부가 입력신호로부터 제1 파-엔드 신호를 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 현재 프레임에 상응하는 제1 추정 출력신호를 제공하는 단계;
제1 필터부가 상기 제1 추정 출력신호 및 상기 제1 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제1 이전 파-엔드 채널필터에 따라 상기 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트하는 단계;
제1 출력부가 상기 입력신호로부터 상기 제1 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제1 현재 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공하는 단계;
제2 추정부가 상기 제1 출력신호로부터 제2 파-엔드 신호를 상기 이전 프레임에 상응하는 제2 이전 파-엔드 채널필터로 필터링한 값을 빼서 상기 현재 프레임에 상응하는 제2 추정 출력신호를 제공하는 단계;
제2 필터부가 상기 제2 추정 출력신호 및 상기 제2 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제2 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하고, 상기 제1 현재 파-엔드 채널필터와 상이한 제2 현재 파-엔드 채널필터를 업데이트하는 단계; 및
제2 출력부가 상기 제1 출력신호로부터 상기 제2 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제2 현재 파-엔드 채널필터로 필터링한 값을 빼서 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공하는 단계를 포함하는 노이즈 제거 방법.The first estimator subtracts the filtered value of the first far-end signal from the input signal with the first previous far-end channel filter corresponding to the previous frame to provide a first estimated output signal corresponding to the current frame To do;
A first current far-end channel filter corresponding to the current frame according to the first previous far-end channel filter corresponding to the first estimated output signal and the previous frame provided from the first filter unit Updating it;
The first output unit subtracts the first wave-end noise signal by subtracting the filtered value of the first wave-end signal from the input signal with the first current far-end channel filter corresponding to the current frame. Providing a removed first output signal;
The second estimator subtracts the value of filtering the second far-end signal from the first output signal with the second previous far-end channel filter corresponding to the previous frame and provides a second estimated output signal corresponding to the current frame. To do;
The second filter unit corresponds to the current frame according to the second estimated output signal and the second previous far-end channel filter corresponding to the previous frame provided from the second filter unit, and the first current far-end channel Updating a second current far-end channel filter different from the filter; And
The second output unit removes a second wave-end noise signal by subtracting a value obtained by filtering the second wave-end signal from the first output signal with the second current wave-end channel filter corresponding to the current frame. A noise removing method comprising providing an output signal. 제1항에 있어서,
상기 제1 현재 파-엔드 채널필터를 업데이트하는 단계는,
상기 제1 추정 출력신호에 기초하여 제1 분산을 추정하는 단계; 및
상기 제1 분산에 기초하여 계산되는 제1 역 자기 상관 매트릭스(Inverse Autocorrelation Matrix)를 생성하는 단계를 포함하는 것을 특징으로 하는 노이즈 제거 방법.According to claim 1,
The updating of the first current far-end channel filter may include:
Estimating a first variance based on the first estimated output signal; And
And generating a first inverse autocorrelation matrix calculated based on the first variance. 제2항에 있어서,
상기 제1 분산은 상기 제1 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제1 추정 출력신호에 의해 결정되는 것을 특징으로 하는 노이즈 제거 방법. According to claim 2,
The first variance is determined by the first estimated output signal provided based on the first previous far-end channel filter. 제3항에 있어서,
상기 제1 분산은 상기 제1 추정 출력신호의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정되는 것을 특징으로 하는 노이즈 제거 방법. The method of claim 3,
The first variance is determined according to a value obtained by multiplying a square of an absolute value of the first estimated output signal by a first weight. 제4항에 있어서,
상기 제1 현재 파-엔드 채널필터는 일정한 값으로 수렴하는 것을 특징으로 하는 노이즈 제거 방법. According to claim 4,
The first current far-end channel filter noise reduction method characterized in that converging to a constant value. 제1항에 있어서,
상기 제2 현재 파-엔드 채널필터를 업데이트하는 단계는,
상기 제2 추정 출력신호에 기초하여 제2 분산을 추정하는 단계; 및
상기 제2 분산에 기초하여 계산되는 제2 역 자기 상관 매트릭스(Inverse Autocorrelation Matrix)를 생성하는 단계를 포함하는 것을 특징으로 하는 노이즈 제거 방법.According to claim 1,
The updating of the second current far-end channel filter may include:
Estimating a second variance based on the second estimated output signal; And
And generating a second inverse autocorrelation matrix that is calculated based on the second variance. 제6항에 있어서,
상기 제2 분산은 상기 제2 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제2 추정 출력신호에 의해 결정되는 것을 특징으로 하는 노이즈 제거 방법.The method of claim 6,
The second variance is determined by the second estimated output signal provided based on the second previous far-end channel filter. 제7항에 있어서,
상기 제2 분산은 상기 제2 추정 출력신호의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정되는 것을 특징으로 하는 노이즈 제거 방법.The method of claim 7,
The second variance is determined according to a value obtained by multiplying a second weight by a square of an absolute value of the second estimated output signal. 제8항에 있어서,
상기 제2 현재 파-엔드 채널필터는 일정한 값으로 수렴하는 것을 특징으로 하는 노이즈 제거 방법.The method of claim 8,
And the second current far-end channel filter converges to a constant value. 제1 초기화부가 제1 분산(variance)을 초기화하는 단계;
제1 추정부가 입력신호로부터 제1 파-엔드 신호를 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 현재 프레임에 상응하는 제1 추정 출력신호를 제공하고, 제1 필터부가 상기 제1 추정 출력신호, 상기 제1 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제1 이전 파-엔드 채널필터 및 상기 제1 분산에 따라 상기 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트하는 단계;
제1 출력부가 상기 입력신호로부터 상기 제1 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제1 현재 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공하는 단계;
제2 초기화부가 제2 분산(variance)을 초기화하는 단계;
제2 추정부가 상기 제1 출력신호로부터 제2 파-엔드 신호를 상기 이전 프레임에 상응하는 제2 이전 파-엔드 채널필터로 필터링한 값을 빼서 상기 현재 프레임에 상응하는 제2 추정 출력신호를 제공하고, 제2 필터부가 상기 제2 추정 출력신호, 상기 제2 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제2 이전 파-엔드 채널필터 및 상기 제2 분산에 따라 상기 현재 프레임에 상응하고, 상기 제1 현재 파-엔드 채널필터와 상이한 제2 현재 파-엔드 채널필터를 업데이트하는 단계; 및
제2 출력부가 상기 제1 출력신호로부터 상기 제2 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제2 현재 파-엔드 채널필터로 필터링한 값을 빼서 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공하는 단계를 포함하는 스테레오 노이즈 제거 방법.The first initialization unit initializes the first variance;
The first estimator subtracts the filtered value of the first far-end signal from the input signal with the first previous far-end channel filter corresponding to the previous frame to provide a first estimated output signal corresponding to the current frame And a first filter unit corresponding to the current frame according to the first estimated output signal, the first previous far-end channel filter corresponding to the previous frame provided from the first filter unit, and the first variance. 1 Updating the current far-end channel filter;
The first output unit subtracts the first wave-end noise signal by subtracting the filtered value of the first wave-end signal from the input signal by the first current far-end channel filter corresponding to the current frame. Providing a removed first output signal;
A second initialization unit initializing the second variance;
The second estimator subtracts the value of filtering the second far-end signal from the first output signal with the second previous far-end channel filter corresponding to the previous frame and provides a second estimated output signal corresponding to the current frame. And a second filter unit corresponds to the second estimated output signal, the second previous far-end channel filter corresponding to the previous frame provided from the second filter unit, and the current frame according to the second dispersion, Updating a second current far-end channel filter different from the first current far-end channel filter; And
The second output unit removes a second wave-end noise signal by subtracting a value obtained by filtering the second wave-end signal from the first output signal with the second current wave-end channel filter corresponding to the current frame. And providing an output signal. 제10항에 있어서,
상기 제1 분산은 상기 제1 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제1 추정 출력신호에 의해 결정되고,
상기 제2 분산은 상기 제2 이전 파-엔드 채널필터에 기초하여 제공되는 상기 제2 추정 출력신호에 의해 결정되는 것을 특징으로 하는 스테레오 노이즈 제거 방법. The method of claim 10,
The first variance is determined by the first estimated output signal provided based on the first previous far-end channel filter,
The second variance is determined by the second estimated output signal provided based on the second previous far-end channel filter. 입력신호로부터 제1 파-엔드 신호를 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 현재 프레임에 상응하는 제1 추정 출력신호를 제공하는 제1 추정부;
상기 제1 추정 출력신호 및 상기 이전 프레임에 상응하는 상기 제1 이전 파-엔드 채널필터에 따라 상기 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트하는 제1 필터부;
상기 입력신호로부터 상기 제1 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제1 현재 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공하는 제1 출력부;
상기 제1 출력신호로부터 제2 파-엔드 신호를 상기 이전 프레임에 상응하는 제2 이전 파-엔드 채널필터로 필터링한 값을 빼서 상기 현재 프레임에 상응하는 제2 추정 출력신호를 제공하는 제2 추정부;
상기 제2 추정 출력신호 및 상기 이전 프레임에 상응하는 상기 제2 이전 파-엔드 채널필터에 따라 현재 프레임에 상응하고, 상기 제1 현재 파-엔드 채널필터와 상이한 제2 현재 파-엔드 채널필터를 업데이트하는 제2 필터부; 및
상기 제1 출력신호로부터 상기 제2 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제2 현재 파-엔드 채널필터로 필터링한 값을 빼서 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공하는 제2 출력부를 포함하는 노이즈 제거 장치.A first weight providing a first estimated output signal corresponding to the current frame by subtracting the filtered value of the first far-end signal from the input signal with the first previous far-end channel filter corresponding to the previous frame. government;
A first filter unit updating a first current far-end channel filter corresponding to the current frame according to the first estimated output signal and the first previous far-end channel filter corresponding to the previous frame;
A first output from which the first wave-end noise signal is removed by subtracting the filtered value of the first wave-end signal from the input signal with the first current far-end channel filter corresponding to the current frame. A first output unit providing a signal;
A second weight providing a second estimated output signal corresponding to the current frame by subtracting a value filtered by the second previous wave-end channel filter corresponding to the previous frame from the first output signal government;
A second current far-end channel filter corresponding to the current frame and different from the first current far-end channel filter according to the second estimated output signal and the second previous far-end channel filter corresponding to the previous frame A second filter unit to update; And
A second output signal is obtained by removing the second wave-end noise signal by subtracting the filtered value of the second wave-end signal from the first output signal with the second current wave-end channel filter corresponding to the current frame. A noise removing device comprising a second output unit. 제12항에 있어서,
제1 분산은 상기 제1 추정 출력신호의 절대값의 제곱에 제1 가중치를 곱한 값에 따라 결정되고,
제2 분산은 상기 제2 추정 출력신호의 절대값의 제곱에 제2 가중치를 곱한 값에 따라 결정되는 것을 특징으로 하는 노이즈 제거 장치. The method of claim 12,
The first variance is determined according to a value obtained by multiplying the square of the absolute value of the first estimated output signal by a first weight,
The second variance is determined according to a value obtained by multiplying a second weight by a square of an absolute value of the second estimated output signal. 제1 분산(variance)을 초기화하는 제1 초기화부;
입력신호로부터 제1 파-엔드 신호를 이전 프레임에 상응하는 제1 이전 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 현재 프레임에 상응하는 제1 추정 출력신호를 제공하고, 상기 제1 추정 출력신호, 제1 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제1 이전 파-엔드 채널필터 및 상기 제1 분산에 따라 상기 현재 프레임에 상응하는 제1 현재 파-엔드 채널필터를 업데이트하는 제1 업데이트부;
상기 입력신호로부터 상기 제1 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제1 현재 파-엔드(Far-end) 채널필터로 필터링한 값을 빼서 제1 파-엔드 노이즈 신호를 제거한 제1 출력신호를 제공하는 제1 출력부;
제2 분산(variance)을 초기화하는 제2 초기화부;
상기 제1 출력신호로부터 제2 파-엔드 신호를 상기 이전 프레임에 상응하는 제2 이전 파-엔드 채널필터로 필터링한 값을 빼서 상기 현재 프레임에 상응하는 제2 추정 출력신호를 제공하고, 상기 제2 추정 출력신호, 제2 필터부로부터 제공되는 상기 이전 프레임에 상응하는 상기 제2 이전 파-엔드 채널필터 및 상기 제2 분산에 따라 상기 현재 프레임에 상응하고, 상기 제1 현재 파-엔드 채널필터와 상이한 제2 현재 파-엔드 채널필터를 업데이트하는 제2 업데이트부; 및
상기 제1 출력신호로부터 상기 제2 파-엔드 신호를 상기 현재 프레임에 상응하는 상기 제2 현재 파-엔드 채널필터로 필터링한 값을 빼서 제2 파-엔드 노이즈 신호를 제거한 제2 출력신호를 제공하는 제2 출력부를 포함하는 스테레오 노이즈 제거 장치.A first initialization unit that initializes the first variance;
The first estimated output signal corresponding to the current frame is provided by subtracting the filtered value of the first far-end signal from the input signal with the first previous far-end channel filter corresponding to the previous frame. 1 Update the estimated output signal, the first previous far-end channel filter corresponding to the previous frame provided from the first filter unit, and the first current far-end channel filter corresponding to the current frame according to the first variance The first update unit;
A first output from which the first wave-end noise signal is removed by subtracting the filtered value of the first wave-end signal from the input signal with the first current far-end channel filter corresponding to the current frame. A first output unit providing a signal;
A second initialization unit that initializes the second variance;
A second estimated output signal corresponding to the current frame is provided by subtracting a value obtained by filtering a second far-end signal from the first output signal with a second previous far-end channel filter corresponding to the previous frame. 2 estimated output signal, the second previous far-end channel filter corresponding to the previous frame provided from the second filter unit, and the first current far-end channel filter corresponding to the current frame according to the second variance A second update unit that updates a second current far-end channel filter different from the one; And
A second output signal is obtained by removing the second wave-end noise signal by subtracting the filtered value of the second wave-end signal from the first output signal with the second current wave-end channel filter corresponding to the current frame. Stereo noise canceling device comprising a second output unit. 제14항에 있어서,
상기 제1 현재 파-엔드 채널필터 및 상기 제2 현재 파-엔드 채널필터는 일정한 값으로 수렴하는 것을 특징으로 하는 스테레오 노이즈 제거 장치. The method of claim 14,
And the first current far-end channel filter and the second current far-end channel filter converge to a constant value. 삭제delete 삭제delete
KR1020180100370A 2018-08-27 2018-08-27 Stereo noise cancellation device and method thereof KR102088375B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180100370A KR102088375B1 (en) 2018-08-27 2018-08-27 Stereo noise cancellation device and method thereof
US16/265,404 US10872594B2 (en) 2018-08-27 2019-02-01 Device and method for stereo noise cancellation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180100370A KR102088375B1 (en) 2018-08-27 2018-08-27 Stereo noise cancellation device and method thereof

Publications (2)

Publication Number Publication Date
KR20200023890A KR20200023890A (en) 2020-03-06
KR102088375B1 true KR102088375B1 (en) 2020-03-12

Family

ID=69802634

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180100370A KR102088375B1 (en) 2018-08-27 2018-08-27 Stereo noise cancellation device and method thereof

Country Status (1)

Country Link
KR (1) KR102088375B1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7352858B2 (en) * 2004-06-30 2008-04-01 Microsoft Corporation Multi-channel echo cancellation with round robin regularization
KR101133308B1 (en) 2011-02-14 2012-04-04 신두식 Microphone with a function of removing an echo
KR101812655B1 (en) * 2011-02-25 2017-12-28 삼성전자주식회사 Apparatus for reproducing sound, method for reproducing sound in the same and method for canceling feedback signal

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
C. Paleologu et al., "Study of the General Kalman Filter for Echo Cancellation," IEEE Trans. Audio, Speech, Lang. Process., Aug. 2013, 국외논문 사본 1부.*

Also Published As

Publication number Publication date
KR20200023890A (en) 2020-03-06

Similar Documents

Publication Publication Date Title
CN109727604B (en) Frequency domain echo cancellation method for speech recognition front end and computer storage medium
US20190222691A1 (en) Data driven echo cancellation and suppression
EP3080975B1 (en) Echo cancellation
JP5501527B2 (en) Echo canceller and echo detector
EP3312839A1 (en) Device for assisting two-way conversation and method for assisting two-way conversation
EP1715669A1 (en) A method for removing echo in an audio signal
JP2004056453A (en) Method and device for suppressing echo
JP2007306553A (en) Multi-channel echo compensation
EP2293595A1 (en) Acoustic echo canceller and acoustic echo cancel method
Rombouts et al. Robust and Efficient Implementation of the PEM—AFROW Algorithm for Acousic Feedback Cancellation
Akhtar et al. Acoustic feedback cancellation in hearing aids using dual adaptive filtering and gain-controlled probe signal
KR101568937B1 (en) Apparatus and method for supressing non-linear echo talker using volterra filter
JP2006313997A (en) Noise level estimating device
JP4897921B2 (en) Method and system for reducing acoustic echo in a multi-channel audio communication system
Pradhan et al. Two microphone acoustic feedback cancellation in digital hearing aids: A step size controlled frequency domain approach
KR102271561B1 (en) Mono noise cancellation device and method thereof
KR102088375B1 (en) Stereo noise cancellation device and method thereof
JP2006262098A (en) Howling canceller
Anand et al. Design and analysis of a BLPC vocoder-based adaptive feedback cancellation with probe noise
Bispo et al. On the use of cepstral analysis in acoustic feedback cancellation
Rombouts et al. Generalized sidelobe canceller based combined acoustic feedback-and noise cancellation
KR102088355B1 (en) Stereo noise cancellation device and method thereof
Shusina et al. Unbiased adaptive feedback cancellation in hearing aids by closed-loop identification
Kalamani et al. Modified least mean square adaptive filter for speech enhancement
KR100848789B1 (en) Postprocessing method for removing cross talk

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right