따라서, 스피치 섹션에서 스피치의 왜곡을 감소시키면서 동시에 노이즈 섹션에서 충분한 노이즈 억제를 제공할 수 있는 노이즈 억제 방법 및 장치를 제공하는 것이 본 발명의 목적이다.
본 발명의 제 1 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 스피치-대-노이즈 관계를 결정하는 단계, 결정된 스피치-대-노이즈 관계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 노이즈 억제 계수에 기초하여 사후-억제 계수의 벡터를 결정하는 단계, 및 사후-억제 계수의 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 단계를 포함하는, 스피치 신호에서 노이즈를 억제하는 방법이 제공된다.
본 발명의 제 2 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 스피치-대-노이즈 관계를 결정하는 단계, 결정된 스피치-대-노이즈 관계에 기초하여 노이즈 억제 계수의 복수의 하한값을 결정하는 단계, 노이즈 억제 계수의 하한값과 노이즈 억제 계수와 비교하여 그 비교 결과에 의존하여 사후-억제 계수의 벡터를 발생시키는 단계, 및 사후-억제 계수의 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 단계를 포함하는, 스피치신호에서 노이즈를 억제하는 방법을 본 발명은 제공한다.
제 3 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 단계, 노이즈 억제 계수의 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터를 웨이팅하는 단계, 주파수 스펙트럼 스피치 컴포넌트의 웨이팅된 제 1 벡터 및 노이즈 억제 계수의 벡터에 기초하여 보정 팩터의 벡터를 결정하고 보정 팩터의 그 벡터에 의해 노이즈 억제 계수의 벡터를 웨이팅하는 단계, 및 노이즈 억제 계수의 그 웨이팅된 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 단계를 포함하는, 스피치 신호에서 노이즈를 억제하는 방법을 본 발명은 제공한다.
제 4 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 컨버터, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 노이즈 억제 계수 계산기, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터에 기초하여 스피치-대-노이즈 관계를 결정하는 스피치-대-노이즈 관계 계산기, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터와 노이즈 억제 계수의 벡터인, 스피치-대-노이즈 관계에 기초하여 사후-억제 계수의 벡터를 결정하는 사후-억제 계수 계산기, 및 사후-억제 계수의 그 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 웨이팅 회로를 포함하는, 스피치 신호에서 노이즈를 억제하는 장치를 본 발명은 제공한다.
제 5 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 컨버터, 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 노이즈 억제 계수 계산기, 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터에 기초하여 스피치-대-노이즈 관계를 결정하는 스피치-대-노이즈 관계 계산기, 그 스피치-대-노이즈 관계에 기초하여 노이즈 억제 계수의 복수의 하한값을 결정하고, 노이즈 억제 계수의 그 하한값과 노이즈 억제 계수의 벡터를 비교하며, 그 비교의 결과에 의존하여 사후-억제 계수의 벡터를 생성하는 사후-억제 계수 계산기, 및 사수-억제 계수의 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 웨이팅 회로를 포함하는, 스피치 신호에서 노이즈를 억제하는 장치를 본 발명은 제공한다.
제 6 양태에 의하면, 주파수 스펙트럼 스피치 컴포넌트의 제 1 벡터 및 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터와 동일한 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터로 스피치 신호를 변환하는 컨버터; 주파수 스펙트럼 스피치 컴포넌트의 그 제 1 벡터에 기초하여 노이즈 억제 계수의 벡터를 결정하는 노이즈 억제 계수 계산기; 노이즈 억제 계수의 벡터에 의해 주파수 스펙트럼 컴포넌트의 제 1 벡터를 웨이팅하는 계산기; 주파수 스펙트럼 컴포넌트의 웨이팅된 제 1 벡터에 따라 제 1 섹션 보정 팩터의 벡터를 계산하고, 결합된 보정 팩터의 벡터를 생성하기 위해 제 2 섹션 보정 팩터의 벡터와 제 1 섹션 보정 팩터를 결합하여, 억제 보정 팩터의 벡터를 생성하기 위해 결합된 보정 팩터에 의해 노이즈 억제 계수의 벡터를 웨이팅하는 억제 계수 보정기; 및 억제 보정 팩터의 벡터에 의해 주파수 스펙트럼 스피치 컴포넌트의 제 2 벡터를 웨이팅하는 웨이팅 회로를 포함하는, 스피치 신호에서 노이즈를 억제하는 장치를 본 발명은 제공한다.
본 발명은 도면을 참조하여 상세히 설명될 것이다.
이제, 도 7을 참조하면, 본 발명의 제 1 실시형태에 따른 노이즈 억제기가 도시된다. 도 7에서, 도 1에서 그것들과 대응하는 엘리먼트는 동일한 참조 부호로 표시되고 그의 설명은 생략된다. 본 발명의 노이즈 억제기는 스피치 진폭 스펙트럼 보정기 (20) 의 제공에 의해 종래의 기술과는 상이하다. 진폭 스펙트럼 보정기 (20) 은 노이즈 억제 계수 보정기 (9) 와 승산기 (11) 에 연결되고 승산기 (10) 로부터 강화된 스피치 진폭 스펙트럼 컴포넌트
및 노이즈 추정 회로 (5) 로부터 노이즈 컴포넌트
를 수신한다. 이들 입력 컴포넌트들은, 아래에 상술된 바와 같이, 결합 계수 F를 생성하기 위해 넌스피치 (nonspeech) 섹션용 보정 계수 및 스피치 섹션용 보정 계수를 발생시키기 위한 스피치 진폭 스펙트럼 보정기 (20) 의 주요한 신호이다. 결합 계수 F는, 사후-억제 계수의 벡터
를 생성하기 위해 노이즈 억제 계수
를 변형하도록 사용된다. 스피치 진폭 컴포넌트
는, 노이즈 억제의 양이 스피치 섹션에서는 낮고 노이즈 섹션에서는 높도록 사후-억제 계수와 승산된다. 그 결과는 스피치 섹션에서의 작은 스피치 왜곡이고 노이즈 섹션에서의 작은 잔류 노이즈이다. 스피치 진폭 스펙트럼 보정기 (20) 의 세부사항은 도 8에서 도시된다.
도 8에서 도시된 바와 같이, 스피치 진폭 스펙트럼 보정기 (20) 는, K개의 강화된 스피치 파워 스펙트럼 컴포넌트의 벡터
를 생성하기 위해 승산기 (10) 로부터의 강화된 스피치 진폭 스펙트럼 컴포넌트
를 스퀘어링하기 위한 스퀘어링 회로 (21) 를 포함한다. 이들 파워 스펙트럼 컴포넌트들은, 정수 K로 스펙트럼 컴포넌트 크기의 총합을 제산함으로써 평균화 회로 (22) 에서 평균되고, 스피치 존재 확률 계산기 (24) 및 사후-억제 계수 계산기 (25) 에 제공된다. 또한, 노이즈 추정 회로 (5) 로부터의 노이즈 컴포넌트
는, 평균화 회로 (23) 에서 정수 K로 그들의 총합을 제산함으로써 평균되고, 계산기 (24 및 25) 에 제공된다.
스피치 존재 확률 계산기 (24) 는, 스피치와 노이즈 사이의 상호 관계를 표시하는 출력을 생성하기 위해, 평균화 회로 (22) 로부터의 강화된 스피치 파워 및 평균화 회로 (23) 로부터의 추정된 노이즈 파워를 사용한다. 바람직하게, 이 스피치-대-노이즈 관계는 스피치 존재의 확률에 의해 표현된다.
스피치 존재 확률 계산기 (24) 는, 평균된 스피치 파워를 로그로 변환하기 위해 평균화 회로 (22) 의 출력을 변환하는 로그 컨버터 (240) 를 포함하며, 그 로그는 10배-승산 회로 (241) 에서 정수 10과 스케일된다. 이 방식에서, n번째 프레임의 강화된 스피치 파워 En 은
삭제
로서 표현된다.
반대로, 평균화 회로 (23) 의 출력은,
으로서, n번째 프레임의 추정된 노이즈 파워 Nn을 표현하는 출력을 생성하기 위해 로그 컨버터 (243) 에서 로그로 변환되고, 10배-승산 회로 (244) 에서 정수 10과 스케일된다.
강화된 스피치 파워 En 와 추정된 노이즈 파워 Nn 사이의 관계가 결정되고, 이 관계에 기초하여, 입력 신호에 포함된 스피치 파워의 양을 표현하는 인덱스가 결정된다. 스피치 파워 En 가 노이즈 파워 Nn 보다 크다면, 인덱스는 스피치 존재의 확률 "p" 이 높다는 것을 표시하는 값이라 가정한다. 추정된 노이즈 파워 Nn 및 추정된 스피치 파워 En 가, 대부분의 경우, 넌스테이션너리 신호이므로, 노이즈 파워 Nn 가 스피치 파워 En 보다 큰 인스턴스 (instance) 가, 스피치 섹션에서 발생하는 것이 가능하다. 또한, 이러한 예시가 노이즈 섹션에서 발생할 수도 있다. 따라서, 그 En 및 Nn 값이 인덱스 계산에 있어서 직접 사용된다면, 스피치 섹션의 확률 "p" 은 에러를 포함할 가능성이 있다. 정확한 인덱스 계산을 수행하기 위해, En 및 Nn 을 적절한 방식으로 변형하는 것이 바람직하다.
이 목적을 위해, 강화된 스피치 파워 E
n 는, 유사한 구성의 평활화 회로 (242a 및 242b) 의 쌍에 제공된다. 평활화 회로 (242a) 에서, 강화된 스피치 파워 En 는, 승산기 (24a) 에서 스케일 팩터
와 승산됨으로써 평활화되고, 출력
을 생성하며, 여기서,
는 제 1 평활 계수를 나타낸다. 후자는, 평활 강화된 스피치 파워를 평활 계수
와 승산하는 승산기 (24c) 의 출력과 가산기 (24b) 에서 합산되며, 이 강화된 스피치 파워는 가산기 (24b) 에 의해 생성되었고 지연 엘리먼트 (24d) 에 의해 프레임 간격 지연되는 것이다. 그에 따라, 평활화 회로 (242a) 는 가산기 (24b) 로부터의 결과
를 생성한다. 유사한 방식으로, 평활화 회로 (242b) 는 결과
를 생성하며, 여기서
는, 제 1 평활 계수
보다 큰 제 2 평활 계수이다. 평활 계수
의 값이
보다 작기 때문에, 스피치 파워 E
n 에 대한 평활화 회로 (242a) 의 평활 효과는 평활화 회로 (242b) 의 것보다 작다. 평활화 회로 (242a 및 242b) 의 출력은, 각각, 순시 인덱스 계산기 (246a) 및 평균 인덱스 계산기 (246b) 에 제공된다.
한편, 추정된 노이즈 파워 N
n 은, 각각, 동적 범위 압축 또는 확장용으로 사용되는 선형 또는 비선형 함수 또는 분산을 감소시키도록 사용되는 평활함수에 기초하여, 제 1 함수값
및 제 2 함수값
을 생성하도록 함수값 계산기 (245a 및 245b) 의 쌍에 제공된다. 함수값 계산은, 계산의 양을 감소시키기 위해 필요하지 않을 수 있다. 계산기 (245a 및 245b) 에서 사용되는 함수의 전형적인 예는
이고, 여기서 afc, bfc, cfc, dfc 는 실수이다.
함수값 계산기 (245a 및 245b) 의 출력들은, 각각, 순시 인덱스 계산기 (246a) 및 평균 인덱스 계산기 (246b) 에 제공되며, 또한 평활 강화된 스피치 파워
및
도, 평활화 회로 (242a 및 242b) 로부터 제공되어,
인 관계에 따라 인덱스들
및
를 생성하며, 여기서 a
idx, b
idx, θ
idx 는 실수이고, a
idx 는 b
idx 보다 크다. 일부 상수 값을 상기 식의 분모에 가산함으로써, 분산이 회피될 수 있다. 다른 방법으로, 또한, E
n 과 N
n 사이의 차이 또는 차이의 정규화된 (normalized) 값이 사용될 수 있다. 상술된 바와 같이, 스피치 파워 En 에 대한 평활화 회로 (242a) 의 평활효과가 평활화 회로 (242b) 의 것보다 작으므로, 평활화 회로 (242a) 의 덜 평활된 출력
이 순시 인덱스
를 계산하는데 적합하며, 평활화 회로 (242b) 의 더 평활된 출력
이 평균 인덱스
를 계산하는데 적합하다.
인덱스 계산기 (246a 및 246b) 의 출력들은, 스피치 존재의 확률 "p" 로서 출력을 생성하도록 가산기 (247) 에서 합산된다. 가산기 (247) 를 사용하는 것 대신, 웨이팅된 합산 또는 승산이 동일하게 사용될 수 있다.
사후-억제 계수 계산기 (25) 의 기능은, 계산기 (24) 로부터 제공된 스피치 존재의 확률 "p" 에 따라 사후-억제 계수의 벡터를 계산하는 것이다. 아래에 설명되는 바와 같이, 확률 "p" 가 낮은 경우, 사후-억제 계수 계산기 (25) 는, 낮은 사후-억제 계수의 벡터를 생성하기 위해 넌스피치-섹션 보정 팩터의 더 높은 비를 포함하는 웨이팅 팩터를 사용한다. 그 결과, 노이즈 섹션에서의 잔류 노이즈는 더 감소될 수 있다. 반면, 확률 "p" 가 높은 경우, 사후-억제 계수 계산기 (25) 는, 억제 계수 보정기 (9) 로부터 제공되는 보정된 노이즈-억제 계수의 벡터
와 동일 또는 약간 더 큰 높은 사후-억제 계수의 벡터를 생성하기 위해 스피치-섹션 보정 팩터의 더 높은 비를 포함하는 웨이팅 팩터를 사용한다. 이러한 방식으로, 스피치 존재 확률 "p" 이 높은 경우, 스피치의 초과-억제는 피할 수 있다.
상세하게, 사후-억제 계수 계산기 (25) 는, 평균화 회로 (22 및 23) 의 출력 및 스피치 존재 확률 계산기 (24) 로부터 제공된 스피치 존재 확률 "p" 을 사용하여 넌스피치 섹션 보정 팩터
를 생성하는 넌스피치 섹션 보정 팩터 계산기 (250) 를 포함한다.
넌스피치 섹션 보정 팩터 계산기 (250) 는, 스피치 존재 확률 "p" 에 의해 결정된 비율로, 평균화 회로 (22) 로부터의 강화된 스피치 파워를 메모리 (25b) 에 저장된 평균된 스피치 파워와 혼합하는 혼합기 (25a) 를 포함한다. 저장된 스피치 파워는 이전 프레임의 혼합기 (25a) 의 출력이고, 외부적으로 적용된 평활 계수를 사용하여 평활화 회로 (25c) 에서 평활화된다.
혼합기 (25a) 에서, 스피치 존재 확률 "p" 이 비교적 높다면, 더 큰 비율의 평균화된 스피치의 현재 프레임은, 더 작은 비율의 평활화된 스피치의 이전 프레임과 혼합된다. 스피치 존재 확률 "p" 이 비교적 낮다면, 더 큰 비율의 평활화된 스피치의 이전 플레임은, 더 작은 비율의 평균된 스피치의 현재 플레임과 혼합기 (25a) 에서 혼합된다.
따라서, 확률 "p" 가 비교적 낮다면, 평활화 회로 (25c) 의 입력 신호는 평활화된 이전 프레임의 더 높은 콘텐츠를 갖고, 따라서, 그것의 출력 신호는 실질적으로 업데이트되지 않는다. 그 결과, 평활화 회로 (25c) 는, 스피치 섹션중에 계산되는 것과 같이 노이즈 섹션중에 동일한 강화된 스피치 파워를 생성한다. 반대로, 확률 "p" 이 비교적 높다면, 평활화 회로 (25c) 는, 혼합기 (25a) 의 출력에 대한 그 평활 동작을 수행하기 위해 평균 강화된 스피치 파워의 더 큰 양을 포함하는 신호를 사용하며, 따라서, 그것의 출력은 업데이트된다.
평활화 회로 (25c) 가 넌스피치 섹션중에 그것의 출력을 업데이트하는 것이 아니라 스피치 섹션중에 그것의 출력을 업데이트하는 것에 대한 이유는, 입력 스피치 신호가 낮은 음성으로부터 높은 음성까지 변동하는 스피커의 볼륨의 관점에서 측정되는 것이다. 스피커가 조용한 환경에서 큰 소리를 낸다면, 계산된 스피치 존재 확률 "p" 의 신뢰도는 높고, 스피커의 음성이 노이즈 있는 환경에서 낮다면, 확률 "p" 의 신뢰도는 낮다.
평활화 회로 (25c) 로부터의 평활 강화된 스피치 파워는, 신호-대-노이즈 비를 생성하기 위해 추정된 노이즈 컴포넌트
의 평균 파워로 제산 회로 (25d) 에서 제산되며, 그 신호-대-노이즈 비는 로그 컨버터 (25e) 에서 로그로 변환된다. 상술된 혼합기 (25a) 의 기능으로부터 알 수 있는 바와 같이, 스피치 존재 확률 "p" 가 낮다면, 평활화 회로 (25c) 는, 현재 프레임의 평활 강화된 스피치 파워를 계산하기 위해, 이전 프레임의 평활 강화된 스피치 파워의 더 큰 양을 포함하는 신호를 사용한다. 따라서, 확률 "p" 이 낮은 경우, 평활 강화된 스피치 파워는 실질적으로 업데이트되지 않는다. 그 결과, 노이즈 섹션중에서, 평활화 회로 (25c) 는, 스피치 섹션중에 계산된 동일한 강화된 스피치 파워를 발생시킨다. 반면, 스피치 존재 확률 "p" 이 높은 섹션중에, 평활화 회로 (25c) 는, 평활 강화된 스피치 파워를 계산하기 위해 강화된 평균 스피치 파워의 더 큰 양을 포함하는 신호를 사용한다.
또한, 제산 회로 (25d) 의 출력은, 강화된 평균 스피치 파워와 추정된 노이즈 파워의 비, 즉 강화된 평균 스피치 파워의 신호-대-노이즈 비를 표현한다. 로그 컨버터 (25e) 의 출력은 10배-승산 회로 (25f) 에서 정수 "10" 과 스케일되고 웨이팅 계산기 (25g) 에 제공된다.
또한, 위에서 획득되는 강화된 평균 스피치 파워의 SNR 에 기초하여, 웨이팅 계산기 (25g) 는, 스피치 존재의 확률 "p" 의 신뢰도를 계산에 포함함으로써 넌스피치 섹션에 부과되는 억제의 양을 표현하는 보정 팩터를 계산한다. 강화된 평균 스피치 파워의 SNR이 높은 경우 (즉, 확률 "p" 의 신뢰도가 높은 경우), 에러로 스피치 섹션이 억제될 가능성이 낮다. 따라서, 이 경우, 보정 팩터는, 억제의 양을 증가시키기 위해 낮은 값으로 설정된다. 반면, 강화된 평균 스피치 파워의 SNR 이 낮은 경우 (즉, 확률 "p" 의 신뢰도가 낮은 경우), 에러 y 로 스피치 섹션이 억제될 가능성은 높다. 따라서, 강화된 평균 스피치 파워의 SNR 이 낮은 경우, 에러로 스피치 섹션이 억제되는 것을 방지하기 위해, 보정 팩터는 억제의 양을 감소시키기 위해 높은 값으로 설정된다.
이러한 넌스피치 존재 SNR 값의 계산은 스피치 존재 확률의 신뢰도를 무음 억제 계수에 통합시키는 효과를 갖는다. 넌스피치 존재 SNR 값이 높은 경우, 즉, 스피치 존재 확률 "p" 의 신뢰도가 높은 경우, 스피치 섹션을 틀리게 억제할 가능성이 낮다. 이 경우, 웨이팅 계산기 (25g) 의 출력은 억제의 정도를 증가시키도록 낮다. 반면, 넌스피치 존재 SNR 값이 낮은 경우, 즉 스피치 존재 확률 "p" 의 신뢰도가 낮은 경우, 웨이팅 계산기 (25g) 의 출력은, 스피치 섹션이 잘못 억제되는 것을 방지하기 위해 억제의 정도를 감소시키도록 높다. 도 9는 무음 억제 계수를 계산하기 위해 사용될 수 있는 비선형 함수의 통상적인 예를 나타낸 그래프이다. 도 9에서,
fcm 은 입력값을 나타내고, gcm 은 출력을 나타내며, 위 식에서 acm, bcm, ccm, dcm 은 양의 실수이다. 도 9에서 도시된 비선형 함수는 입력값이 증가함에 따라 출력값은 감소하는 것을 표시한다.
상술된 바와 같은 방식으로 획득된 무음 억제 계수는, 10-으로-제산 회로 (25h) 에서 정수 "10" 으로 제산되며, 10-으로-제산 회로 (25h) 의 출력이 넌스피치 존재 보정 팩터
를 나타내는 지수값으로 변환되는 지수 계산기 (25i) 에 제공된다.
사후-억제 계수 계산기 (25) 는, 넌스피치 섹션 보정 팩터
및 확률 "p" 및 스피치 섹션 보정 팩터
를 수신하고,
로서 표현된 결합 계수 F를 생성하는 결합 계수 계산기 (251) 를 포함한다. 확률 "p" 의 값이 크다면, 스피치 존재 보정 팩터
는 결합 계수 F의 더 큰 부분이 된다는 것을 볼 수 있다. 또한, 결합 계수 F는,
로서의 식에 따라 획득될 수 있으며, 여기서, FSFC 및 GSFC 는 상이한 함수값이다.
승산기 (252) 에서, 노이즈 억제 계수 보정기 (9) 로부터 제공된 노이즈 억제 계수
는, 사후-억제 계수의 벡터
를 생성하기 위해 사후-억제 계수 F에 의해 웨이팅된다.
스피치 진폭 컴포넌트들
은, 각각, 스펙트럼 승산기 (26) 에서 사후-억제 계수에 의해 웨이팅되고, 스펙트럼 승산기 (26) 의 출력 벡터는 승산기 (11) 에 제공된다.
사후-억제 계수
로 스피치 진폭 컴포넌트들
을 웨이팅하는 이점은, 노이즈 억제가 스피치 섹션에서 비교적 낮은 레벨에서 및 노이즈 섹션에서 비교적 높은 레벨에서 제공될 수 있는 것이다. 그 결과는 스피치 섹션에서의 작은 스피치 왜곡이고 노이즈 섹션에서의 작은 잔류 노이즈이다.
도 7의 제 1 변형이 도 10에 도시되고, 여기서 사후-억제 계수 계산기 (25A) 는 도 8의 사후-억제 계수 계산기 (25) 의 변형된 형태이다. 변형된 계산기 (25A) 는, 평균화 회로 (22 및 23) 의 출력을 수신하고, 추정된 노이즈 파워를 강화된 스피치 파워와 비교함으로써 결합 계수 계산기 (251) 로의 출력값
을 생성하는, 스피치 존재 계수 계산기 (253) 를 포함한다.
추정된 노이즈 파워가 강화된 스피치 파워보다 큰 경우 (즉, SNR이 낮은 경우),
는, 1.0 에서부터, 추정된 노이즈 파워와 강화된 스피치 파워의 비의 함수로서 결정되는 어떠한 더 큰 수까지의 범위에서의 값을 가정한다. 보정된 노이즈 억제 계수
가 최적값보다 작아질 가능성이 존재하므로, 1.0 보다 큰 값으로
값을 설정하는 것은 노이즈 억제 계수
가 스피치 섹션상에서 과도-억제의 수행하는 것을 방지한다. 이 경우, 1-보다-큰 출력값은, 추정된 노이즈 파워와 강화된 스피치 파워의 비에 의존하여 가변한다. 반면, 추정된 노이즈 파워가 강화된 스피치 파워보다 작은 경우 (즉, SNR이 높은 경우), 과도-억제가 스피치 섹션중에 발생할 가능성은 적다. 이 경우,
는 1.0 보다 큰 상수값을 가정하고, 그 값은 추정된 노이즈 파워와 강화된 스피치 파워의 비와 관계없이 적절하게 결정된다.
본 발명의 제 2 실시형태가 도 11에 도시되고, 여기서 도 8의 사후-억제 계수 계산기 (25) 는 사후-억제 계수 계산기 (25B) 로서 변형된다. 이 실시형태에서, 계산기 (25B) 는 동일한 구성의 복수의 스펙트럼 사후-억제 계수 계산기들 (254
0 내지 254
K-1) 를 포함한다. 각각의 스펙트럼 사후-억제 계수 계산기 (254) 는 하한 계산기 (255) 및 최대 선택기 (256) 를 포함한다. 하한 계산기 (255) 는, 스피치 섹션 보정 팩터 하한 (SCLL) 값 및 넌스피치 섹션 보정 팩터 하한 (NCLL) 값을 제공받고, 계산기 (255) 의 출력값에 기여하는 SCLL 값의 일부가 스피치 존재 확률 값 "p" 와 같이 증가하도록, 스피치 존재 확률 계산기 (24) 로부터 제공된 확률값 "p" 에 따라 노이즈 억제 계수의 하한값을 계산한다. 수학식 (7) 및 (8) 은 음성화된 팩터 하한의 기여 팩터를 결정하도록 사용될 수 있다. 음성화된 소리의 왜곡을 방지하기 위해, 스피치 섹션 보정 팩터 하한 (SCLL) 값은 넌스피치 섹션 보정 팩터 하한 (NCLL) 값보다 크게 설정된다. 하한 계산기 (255) 의 출력은, 스펙트럼 사후-억제 계수 계산기 (254
K) 에 대응하는 보정된 노이즈 억제 계수
중 하나가 또한 적용되는 최대 선택기 (256) 에 제공된다. 최대 선택기 (256) 는 2개의 입력값 중 더 큰 것을 선택하고 선택된 값을 스펙트럼 승산기 (27) 에 공급한다.
그 결과, 스펙트럼 사후-억제 계수
는, 스피치 섹션 존재 확률 "p" 에 의해 확립된 하한값보다 큰 한에서는, 승산기 (26) 에 제공된다. 이 방법에서, 스피치 존재 확률 "p" 가 높은 경우 확립된 하한값이 크므로, 초과-억제로 인해 스피치 섹션에서 발생할 수 있는 스피치 왜곡은 방지될 수 있다. 반면, 스피치 존재 확률 "p" 가 낮은 경우, 하한값은 작다. 따라서, 노이즈 섹션에 부과된 노이즈 억제의 양을 최적화하는 것이 가능하다.
도 12에서, 제 2 실시형태의 변형이 도시되고, 도 8의 사후-억제 계수 계산기 (25) 가 사후-억제 계수 계산기 (25C) 로서 변형된다. 이 변형에서, 계산기 (25C) 는 동일한 구성의 복수의 스펙트럼 사후-억제 계수 계산기들 (257
0 내지 257
K-1) 을 포함한다. 각각의 스펙트럼 사후-억제 계수 계산기 (257) 는, 스피치 섹션 보정 팩터 하한 (SCLL) 계산기 (258) 및 넌스피치 섹션 보정 팩터 하한 (NCLL) 계산기 (259) 를 부가적으로 포함한다는 점에서 도 11의 계산기 (254) 의 그것과는 상이하다. 계산기들 (258 및 259) 은, 노이즈 추정 회로 (5) 로부터의 추정된 노이즈 파워 스펙트럼 컴포넌트들
내지
중 대응하는 하나 및 그들의 스펙트럼 수에 대응하는 스퀘어링 회로 (21) 로부터의 강화된 스피치 파워 스펙트럼 컴포넌트들
내지
중 대응하는 하나를 수신한다. 음성화된 팩터 하한 계산기 (258) 는, 강화된 스피치 컴포넌트
와 추정된 노이즈 스펙트럼 샘플
(여기서, k 는 0, 1, ..., K-1 중 하나) 의 신호-대-노이즈 비에 의존하여 음성화된 팩터 하한값을 계산한다. 또한, 무음화된 팩터 하한 계산기 (259) 는, 동일한 신호-대-노이즈 비에 의존하여 무음화된 팩터 하한값을 계산한다. 계산된 스피치 섹션 보정 팩터 하한 (SCLL) 및 넌스피치 섹션 보정 팩터 하한 (NCLL) 값은 하한 계산기 (255) 에 제공된다.
스피치 섹션에서 스피치 왜곡을 감소시키기 위해, 스피치 섹션 보정 팩터 하한 (SCLL) 값은 SNR 값에 반대로 변화하도록 결정된다. 넌스피치 섹션에서 잔류 노이즈를 감소시키고 스피치 섹션에서 초과-억제를 방지하기 위해, 넌스피치 섹션 보정 팩터 하한 (NCLL) 은 스피치 섹션 보정 팩터 하한 (SCLL) 값보다 낮은 값에 설정된다. 계산기들 (258 및 259) 은, SNR 이 비교적 낮은 경우, 그들 하한값 사이의 차이가 일부 임계값 (critical value) 을 초과하지 않도록 설계되는 것이 바람직하다. 이러한 차이가 임계값보다 크다면, 잔류 노이즈에서 음성화 및 넌스피치 섹션 사이의 차이가 증가하며, 이는 왜곡된 소리가 스피치 섹션에서 감지되는 것을 야기한다. 반대로, SNR이 높은 경우, 스피치 섹션에서 잔류 노이즈 는, 음성화된 소리의 마스킹 (masking) 효과로 인해 감지될 가능성이 적다. 낮은 SNR 값의 경우로서, 음성화된 및 넌스피치 섹션에서의 구별적 잔류 노이즈는, 스피치 섹션에서 스피치 왜곡의 기여하는 팩터로 되지 않는다. 이 이유에 대해, SNR 이 높다면, 계산기들 (258 및 259) 은, 넌스피치 섹션의 잔류 노이즈가 충분히 감소하기 위해 그들의 출력값 사이의 차이가 비교적 크게 유지하도록 설계된다. 넌스피치 섹션 보정 팩터 하한 (NCLL) 값은 스피치 섹션 보정 팩터 하한 (SCLL) 값에 의존하여 결정된다. 기본적으로, 스피치 섹션 보정 팩터 하한 (SCLL) 값의 경우와 같이, SNR이 감소하는 경우, 넌스피치 섹션 보정 팩터 하한 (NCLL) 값은 증가한다.
도 13에서 도시된 바와 같이, 본 발명의 제 2 실시형태의 변형에서처럼, 계산기들 (258 및 259) 이, SNR 값을 계산하기 위해 추정된 노이즈 파워 스펙트럼 컴포넌트와 강화된 스피치 파워 컴포넌트의 평균된 값을 사용하는 것이 바람직하다. 이 변형에서, 사후-억제 계수 계산기 (25d) 는 스피치 섹션 보정 팩터 하한 (SCLL) 계산기 (258), 넌스피치 섹션 보정 팩터 하한 (NCLL) 계산기 (259) 및 하한 계산기 (255) 중 하나의 벡터만 포함한다. 평균화 회로들 (22 및 23) 의 출력은 계산기들 (258 및 259) 에 제공되고, 하한 계산기 (255) 의 출력은 최대 선택기들 (2560 내지 256K-1) 에 제공된다. 스피치 존재 확률 계산기 (24) 는 모든 최대 선택기들 (256) 에 연결된다.
도 14에서, 본 발명의 노이즈 억제기의 제 3 실시형태가 도시되고, 도 7의 그것들과 대응하는 엘리먼트들은 동일한 참조 부호를 가진다. 제 3 실시형태는, 사전 SNR 계산기 (7a) 및 노이즈 억제 계수 보정기 (9a) 가 도 7의 진폭 스펙트럼 조정기 (20), 그리고 도 1의 사전SNR 계산기 (7) 및 억제 계수 보정기 (9) 대신에 사용된다는 점에서 제 1 실시형태와는 상이하다. 사전 SNR 계산기 (7a) 는, 스퀘어링 회로 (3) 및 노이즈 추정 회로 (5) 의 출력을 부가적으로 수신한다는 점에서 종래의 계산기 (7) 과는 상이하다.
도 15에서 상세히 도시된 바와 같이, 일반적으로, 사전 SNR 계산기 (7a) 는, 지연 엘리먼트 (78), 승산기 (79), 스피치 존재 확률 계산기 (710) 및 지연 엘리먼트 (711) 를 부가적으로 포함한다는 것을 제외하고 구성에서 도 1의 종래의 계산기 (7) 와 유사하다. 스퀘어링 회로 (3) 로부터의 스피치 파워 스펙트럼 컴포넌트들
은 지연 엘리먼트 (78) 에서 프레임 간격동안 지연되고, 승산기 (79) 에 제공되며, 그곳에서 그들은, 각각, 스퀘어링 회로 (74) 로부터 제공된 이전 프레임의 보정된 노이즈 억제 계수
와 승산된다. 또한, 승산기 (79) 는 결과
를 생성하며, 그것은 현재 프레임 "n" 의 강화된 스피치 파워 컴포넌트의 추정치로서 스피치 존재 확률 계산기 (710) 에 제공된다.
노이즈 추정 회로 (5) 로부터의 추정된 노이즈 파워 컴포넌트
는 지연 엘리먼트 (711) 에서 프레임 간격동안 지연되고 스피치 존재 확률 계산기 (710) 에 제공된다. 이 방법에서, 스피치 존재 확률 계산기 (710) 의 입력 스펙트럼 신 호는 프레임에서 서로 정렬된다. 스피치 존재 확률 계산기 (710) 는, 스피치 존재 확률 "p" 를 생성하고 노이즈 억제 계수 보정기 (9a) 에 그것을 전송하기 위해 스피치 존재 확률 계산기 (24; 도 8) 와 구성에서 동일하다.
도 16에서 도시된 바와 같이, 노이즈 억제 계수 보정기 (9a) 는, 동일한 구성의 스펙트럼 (노이즈) 억제 계수 계산기들 (190
0 내지 190
K-1) 을 포함한다. 계산기들 (190
K) 의 각각은 확률 "p" 및 노이즈 억제 계수 계산기 (8) 로부터의 대응하는 노이즈 억제 계수
및 계산기 (7a) 로부터의 대응하는 사전 SNR
를 수신한다. 각각의 계산기들 (190
0 내지 190
K-1) 은, 스펙트럼 사후-억제 계수 계산기 (254
0 내지 254
K-1; 도 11) 를 참조하여 상술된 것과 동일한 방식으로, 확률 "p" 에 따라 스피치 섹션 보정 팩터 하한 (SCLL) 값 및 넌스피치 섹션 보정 팩터 하한 (NCLL) 값으로부터의 하한값을 계산하는 하한 계산기 (191) 를 포함한다. 계산기 (191) 의 출력은, 선택기 (194) 가 상위 위치로 스위칭되는 경우 선택기 (194) 를 통해 직접 제공되는 억제 계수
, 또는 스위치 (194)가 하위 위치에 있는 경우 승산기에서 보정값과 스케일되는 억제 계수
와 최대 선택기 (192) 에서 비교된다. 비교기 (193) 는 사전 SNR
을 임계값과 비교하고, 그 SNR
가 임계값보다 큰 경우 선택기 (194) 를 상위 위치로 스위칭하고 그 SNR 이 임계값보다 낮은 경우 선택기 (194) 를 하위 위치로 스위칭하는 제어 신호를 생성한다. 최대 선택기 (192) 는 2개의 입력값들 중 더 큰 것을 선택하고 그 선택한 값을 승산기 (10; 도 14) 및 사후 SNR 계산기 (7a; 도 15) 의 메모리 (73) 에 전송한다.
그 결과, 스펙트럼 사후-억제 계수
는, 스피치 존재 확률 "p" 에 의해 확립된 하한값보다 큰 한에서는 승산기 (10) 에 제공되며, 초과-억제로 인해 스피치 섹션에서 발생할 수 있는 스피치 왜곡이 방지될 수 있다.
도 17에서, 도 14의 제 3 실시형태의 변형이 도시되고, 사전 SNR 계산기 (7b) 및 억제 계수 보정기 (9b) 가 제공된다. 도 18에서 도시된 바와 같이, 사전 SNR 계산기 (7b) 는, 현재 프레임 "n" 의 강화된 스피치 파워 컴포넌트의 추정치로서 승산기 (79) 의 출력
을 억제 계수 보정기 (9b) 에 제공한다는 것을 제외하고, 도 15의 계산기 (7a) 와 동일하다. 억제 계수 보정기 (9b) 는, 스피치 존재 확률값 "p" 및 노이즈 억제 계수
에 더하여, 노이즈 추정 회로 (5) 로부터의 추정된 노이즈 파워 스펙트럼 컴포넌트
및 사전 SNR 계산기 (7b) 로부터의 강화된 스피치 파워 추정치
을 수신한다.
도 19에서 도시된 바와 같이, 억제 계수 보정기 (9b) 는, 도 16의 하한 계산기 (191) 및 최대 선택기 (192) 대신 넌스피치 섹션 보정 팩터 계산기 (196), 결합 계수 계산기 (197) 및 승산기 (198) 를 포함한다는 것을 제외하고, 도 16의 억제 계수 보정기 (9a) 와 동일하다.
넌스피치 섹션 보정 팩터 계산기 (196) 는, 평균화 회로 (22) 로부터의 강화된 스피치 파워 스펙트럼 컴포넌트
의 평균값을 사용한 도 8의 넌스피치 섹션 보정 팩터 계산기 (250) 와 유사한 방식으로, 넌스피치 섹션 보정 팩터
를 계산하기 위해 확률값 "p", 추정된 노이즈 파워 스펙트럼 컴포넌트
, 및 강화된 스피치 파워 샘플의 추정치
를 사용한다. 특히, 넌스피치 섹션 보정 팩터 계산기 (196) 는, 넌스피치 섹션 보정 팩터
를 결정하기 위해 강화된 스피치 파워 추정치
를 주요한 팩터로서 다룬다.
이 방식에서 계산된 넌스피치 섹션 보정 팩터
는, 스피치 섹션 보정 팩터
가 또한 적용되는 결합 계수 계산기 (197) 에 제공된다. 계산기 (197) 는, 보정 팩터
,
, 확률 "p" 를 사용하여 결합 계수 F를 계산하기 위한 도 8의 계산기 (251) 와 동일하다. 승산기 (198) 는 계산기 (197) 의 출력을 선택기 (194) 를 통해 직접 제공되는 비-보정 노이즈 억제 계수
또는 승산기 (195) 를 통해 제공되는 보정된 노이즈 억제 계수
로 승산한다.
노이즈 억제 계수
가, 스피치 섹션 확률 "p" 에 따라 계산된 보정 팩터에 의해 승산기 (198) 에서 보정되고, 스피치 파워 스펙트럼 컴포넌트의 추정치가, 보정된 억제 계수
를 사용한 피드백 루프를 통해 사전 SNR 계산기 (7b) 에서 업데이트되므로, 노이즈 섹션에서 잔류 노이즈는 효과적으로 더 억제될 수 있다.
도 20은, 도 11의 진폭 스펙트럼 보정기 (20) 가 스피치 존재 확률값 "p" 를 추출하기 위해 도 7에 도시된 바와 같은 진폭 스펙트럼 보정기 (20a) 로서 변형된, 도 7의 제 1 실시형태의 추가적인 변형을 도시한 것이다. 이 실시형태의 노이즈 억제기에 프레임-지연 엘리먼트 (14) 및 가산기 (15) 가 더 제공된다. 진폭 스펙트럼 보정기 (20a) 로부터 추출된 확률 "p" 는, 지연 엘리먼트 (14) 에서 프레임 간격동안 지연되고, 스피치 부재 확률 q = 1 - p 을 생성하기 위해 "1" 을 감산하며, 그 부재 확률은 노이즈 억제 계수 계산기 (8; 도5) 에 제공된다.
도 22에서 도시된 바와 같이, 본 발명은 더 변형할 수 있고, 스피치 존재 확률 "p" 는, 계산기 (7) 의 사전 SNR 값
에 의해 스피치 존재 확률 계산기 (16) 에서 계산된다. 스피치 존재 확률 계산기 (16) 의 출력은, 스피치 부재 확률 "q" 을 발생시키기 위해 확률 "p" 이 "1" 만큼 감산되는 가산기 (15) 및 진폭 스펙트럼 보정기 (20b) 와 커플링되며, 그 부재 확률은 억제 계수 계산기 (8) 에 제공된다.
도 23에서 도시된 바와 같이, 스피치 존재 확률 계산기 (16) 는, 사전 SNR 값들을 합산하고 그 합을 정수 K로 제산함으로써 사전 SNR 값
의 평균값을 생성하는 평균화 회로 (160) 를 포함한다. 사전 SNR 값의 평균값은,
인, 풀-밴드 (full-band) 사전 SNR
을 생성하기 위해, 로그 컨버터 (161) 에서 로그로 변환되고 승산기 (162) 에서 정수 "10" 과 승산된다.
풀-밴드 사전 SNR
는, 식 (3a) 및 (3b) 에 따라 도 8의 평활화 회로 (242a 및 242b) 를 참조하여 상술된 것과 유사한 방식으로, 제 1 및 제 2 평활화된 사전 SNR 값들
및
의 쌍을 생성하기 위해 평활화 회로들 (163 및 164) 의 쌍에서 평활화된다. 제 1 및 제 2 평활화된 사전 SNR 값들
및
는,
인, 인덱스 신호
및
를 생성하기 위해,각각, 순시 인덱스 계산기 (165) 및 평균 인덱스 계산기 (166) 에 제공되며, 여기서 θ
idx2, a
idx2, b
idx2 는 실수이고 a
idx2 는 b
idx2 보다 크다. 인덱스 신호는, 평활화된 사전 SNR의 값에 의존하여 현저하게 변한다. 인덱스 계산기들 (165 및 166) 은, 스피치 존재의 확률 "p" 로서 출력을 생성하도록 가산기 (167) 에서 합산된다. 계산기 (16) 의 출력 "p" 는, 노이즈 억제 계수 계산기 (8; 도 5) 로의 애플리케이션에 대해 스피치 부재 확률 "q" 를 생성하기 위해 "1" 만큼 감산될 가산기 (15) 에 제공된다. 또한, 스피치 존재 확률 계산기 (16) 의 출력 신호는 진폭 스펙트럼 보정기 (20b; 도 24) 로 전송된다.
도 24에서 나타낸 바와 같이, 진폭 스펙트럼 보정기 (20b) 는, 사후-억제 계수 계산기 (25) 및 승산기 (26) 만을 포함한다는 점을 제외하고, 도 21의 진폭 스펙트럼 보정기 (20a) 와 유사하다. 확률 "p" 는 모든 스펙트럼 사후-억제 계수 계산기 (2540 내지 254K-1) 에 제공된다.
도 25에 도시된 바와 같이, 도 22의 노이즈 억제기는 변형될 수 있고, 사후 SNR 값
은 사전 SNR 값
에 부가하여 스피치 존재 확률 계산기 (16a) 에 제공된다.
도 26에서, 스피치 존재 확률 계산기 (16a) 는, 부가적으로, 사후 SNR 값
의 평균값을 계산하는 평균화 회로 (168) 를 포함한다. 사전 SNR의 평균값
및 사후 SNR의 평균값
은,
인, 식 (11) 에 따라 출력
을 생성하기 위해 SNR 혼합기 (169) 에서 함께 결합되며, 여기서, Fmix 는 사전 SNR 평균값
의 함수이고,
에 의존하여 0과 1사이의 범위에서의 실수로 가정한다. SNR 혼합기 (169) 의 출력은 로그 컨버터 (169) 에 제공된다.
식 (11) 은, 입력 신호가 노이즈에 대해 더 적게 열화되는 경우, 사후 SNR 의 평균값
은 SNR 혼합기 (169) 의 출력에서 우세하다는 것을 표시한다. 입력 신호의 신호-대-노이즈 비가 높은 경우 사후 SNR 값
의 정확도가 사전 SNR 값
의 그것보다 높으므로, 혼합기 (169) 의 출력은, 신호-대-노이즈의 상 이한 값에 대해 사후 SNR 값의 평균값보다 더 정확도를 갖는다. 그러므로, 이 방법에서 획득된 스피치 섹션 확률 "p" 는, 도 23의 스피치 존재 확률 계산기 (16) 의 그것보다 더 정확하다.
MMSE-STSA (최소 평균 시퀀스 에러 짧은 시간 스펙트럼 진폭) 로서 공지된 기술이 사용된 실시형태를 설명하였지만, 위너 (Wiener) 필터링 및 스펙트럼 감산과 같은 다른 기술이 또한 동등하게 사용될 수 있다.