KR101390433B1 - 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 - Google Patents
신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 Download PDFInfo
- Publication number
- KR101390433B1 KR101390433B1 KR1020117024686A KR20117024686A KR101390433B1 KR 101390433 B1 KR101390433 B1 KR 101390433B1 KR 1020117024686 A KR1020117024686 A KR 1020117024686A KR 20117024686 A KR20117024686 A KR 20117024686A KR 101390433 B1 KR101390433 B1 KR 101390433B1
- Authority
- KR
- South Korea
- Prior art keywords
- spectral coefficients
- adjusted
- frame
- spectral
- weighting
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
Abstract
오디오 인코딩/디코딩 기술 분야에서, 신호 잡음제거 방법이 제공된다. 상기 방법은 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관(inter-frame correlation)의 정도에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하는 단계; 두 개 이상의 선택된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대한 가중화(weighting)를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득하는 단계; 및 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하는 단계를 포함한다. 신호 잡음제거 방법에 상응하는 신호 잡음제거 장치 및 신호 잡음제거 장치를 사용한 오디오 디코딩 시스템 또한 제공된다.
Description
본 발명은 오디오 인코딩/디코딩 기술 분야, 세부적으로는, 신호 잡음제거 방법, 신호 잡음제거 장치. 및 오디오 디코딩 시스템에 관한 것이다.
삭제
많은 광대역 또는 초광대역 오디오 코덱에서, 부호율(code rate)이 낮은 때에는, 광대역 부분 또는 초광대역 부분의 스펙트럼에 대해 대역 확장 기법(Band Width Extension, BWE) 파라미터 인코딩이 사용되고, 상기 BWE 파라미터 인코딩은 소수의 비트가 사용되고, 대역폭이 보장되며, 품질은 허용될만한 정도인 특징을 가진다. 반면, 부호율이 높은 때에는, 광대역 또는 초광대역 부분의 스펙트럼에 대하여 양자화 인코딩이 수행되고, 상기 양자화 인코딩은 다수의 비트가 사용되고, 정밀도가 높으며, 품질이 좋은 특징을 가진다.
종래 기술에서 광대역 또는 초광대역을 지원하는 오디오 인코딩/디코딩 시스템의 구조도로서, 도 1 및 도 2를 참조할 수 있다. 도 1은 종래 기술에서 광대역 또는 초광대역을 지원하는 오디오 인코딩 시스템의 구조도이다. 도 1에 도시된 바와 같이, 인코딩 시스템은 계층 구조를 채택하고 있다. 코어 인코더(core encoder)는 저주파 정보를 인코딩하여, 제1 계층 코드 스트림을 출력한다. BWE 인코더는 소수의 비트를 사용하여 고주파 대역 스펙트럼을 인코딩하여, 제2 계층 코드 스트림을 출력한다. 양자화 인코더는 나머지 비트를 사용하여 고주파 대역 스펙트럼을 양자화하고 인코딩하여, 제3 계층 코드 스트림을 출력한다.
도 2는 종래 기술에서 광대역 또는 초광대역을 지원하는 오디오 디코딩 시스템의 구조도이다. 도 2에 도시된 바와 같이, 디코딩 시스템 또한 계층 구조를 채택하고 있다. 코어 디코더(core decoder)는 제1 계층 코드 스트림의 저주파 정보를 디코딩하도록 구성된다. BWE 디코더는 제2 계층 코드 스트림의 BWE 정보를 디코딩하도록 구성된다. 역양자화 디코더는 나머지 비트의 제3 계층 코드 스트림의 고주파 대역 정보를 디코딩하고 역양자화하도록 구성된다. 최종적으로, 디코딩 시스템은 코드 스트림의 세 계층의 주파수 대역을 합성하여 대역 합성(band-synthesized) 오디오 신호를 출력한다. 일반적으로, 코어 디코더에 의한 신호 출력은 시간 도메인(time-domain) 신호이고, BWE 디코더 및 역양자화 디코더에 의한 신호 출력은 주파수 도메인(frequency-domain) 신호이므로, 주파수 대역이 합성될 때 제2 및 제3 계층 코드 스트림의 주파수 도메인 신호는 시간 도메인 신호로 변환되어서, 대역 합성 시간 도메인 오디오 신호를 출력한다.
디코딩 과정에서, 고주파 대역 스펙트럼 신호에 대하여, 부호율이 낮은 때에는, 디코딩 시스템은 오로지 제2 계층 코드 스트림만을 디코딩하여, BWE 인코딩된 정보를 획득하고, 그렇게 함으로써 기본적인 고주파 대역 품질을 보장한다. 반면, 부호율이 높은 때에는, 디코딩 시스템은 제3 계층 코드 스트림을 추가적으로 디코딩하여 더 나은 고주파 대역 품질을 얻는다.
이러한 계층 구조에서, 많은 경우에, 스펙트럼 양자화 인코딩를 위하여 남겨 둔 제3 계층 코드 스트림의 비트만으로는 불충분하기 때문에, 양자화기(quantizer)는 비트 할당을 수행한다. 양자화기는 높은 정밀도의 양자화를 수행하기 위한 일부 중요한 주파수 대역에 다수의 비트를 할당하는 반면, 낮은 정밀도의 양자화를 수행하는 일부 덜 중요한 주파수 대역에는 소수의 비트를 할당하며, 일부 가장 중요하지 않은 주파수 대역에는 전혀 비트를 할당하지 않기도 한다. 즉, 양자화기는 가장 중요하지 않은 주파수 대역을 양자화하지 않는다.
종래 기술에서, 양자화되지 않은 주파수 대역의 스펙트럼에 대하여 수 개의 처리 방법이 수행된다: 1. BWE 스펙트럼을 유지한다; 2. 역양자화를 통하여 획득한 스펙트럼의 일부를 복제하고, 스펙트럼 일부의 에너지를 조정하고, 그 후 양자화되지 않은 주파수 대역의 스펙트럼 일부를 채운다(fill); 3. 양자화되지 않은 스펙트럼을 0으로 설정하거나, 또는 양자화되지 않은 스펙트럼을 직접 잡음으로 채운다.
본 발명의 구현 과정에서, 발명자는 하나 이상의 다음의 이유 때문에 종래 기술이 명백한 잡음과 나쁜 음향 효과를 유발함을 발견하였다.
1. 양자화되지 않은 주파수 대역의 스펙트럼에 대하여 BWE 스펙트럼이 유지되면, 양자화된 스펙트럼 및 양자화되지 않은 주파수 대역의 스펙트럼에 대하여 유지된 BWE 스펙트럼은 위치 정보 및/또는 에너지 정보에서 불일치(mismatch)되고, 그로 인해 잡음이 발생한다. 2. 많은 스펙트럼이 양자화되지 않고 0으로 설정되거나 잡음으로 채워지면, 양자화되지 않은 주파수 대역의 스펙트럼에 잡음이 직접적으로 발생한다. 불일치되거나 0으로 설정되고 잡음으로 채워지는 것으로 인해 디코딩 이후의 주파수 대역 합성 동안에 잡음이 발생하고, 그로 인해 오디오 신호의 음향 효과는 악화된다.
본 발명의 구현예는, 디코딩 이후의 주파수 대역 합성에 의하여 발생한 잡음을 감소시키고 음향 효과를 향상시킬 수 있는, 신호 잡음제거 방법, 신호 잡음제거 장치, 및 오디오 디코딩 시스템을 제공한다.
구체적으로, 본 발명의 일 구현예는 신호 잡음제거 방법을 제공하며, 상기 방법은, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관(inter-frame correlation)의 정도에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하는 단계; 두 개 이상의 선택된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대하여 가중화(weighting)를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득하는 단계; 및 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하는 단계를 포함한다.
본 발명의 일 구현예는 신호 잡음제거 장치를 제공하며, 상기 장치는, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관의 정도에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하도록 구성된, 선택 유닛; 선택 유닛에 의하여 선택된 두 개 이상의 선택된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대하여 가중화를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득하도록 구성된, 가중화 유닛; 및 가중화 유닛에 의하여 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하도록 구성된, 조정 및 출력 유닛을 포함한다.
본 발명의 일 구현예는 오디오 디코딩 시스템을 제공하며, 상기 오디오 시스템은 코어 디코더, BWE 디코더, 역양자화 디코더, 및 신호 잡음제거 장치를 포함하고, 코어 디코더는 제1 계층 코드 스트림의 저주파 정보를 디코딩하도록 구성되고; BWE 디코더는 제2 계층 코드 스트림의 BWE 정보를 디코딩하도록 구성되고; 역양자화 디코더는 나머지 비트의 제3 계층 코드 스트림의 고주파 대역 정보를 디코딩하고 역양자화하도록 구성되고; 신호 잡음제거 장치는 BWE 디코더 및 역양자화 디코더에 의하여 출력된 디코딩한 정보를 수신하고, 디코딩한 정보에서 조정될 스펙트럼 계수를 결정하고, 조정될 스펙트럼 계수의 획득한 예측 값에 따라 디코딩한 정보에서 스펙트럼 계수를 조정하도록 구성된다.
본 발명의 구현예에 따른 기술 방안으로부터, 조정될 스펙트럼 계수는 두 개 이상의 관련된 스펙트럼 계수로 가중화되어 조정될 스펙트럼 계수의 예측 값을 획득하게 되고, 디코딩한 신호의 스펙트럼은 조정될 스펙트럼 계수에 따라 조정되어, 예측된 스펙트럼 계수(즉, 조정될 스펙트럼 계수의 예측 값) 및 기타 관련된 스펙트럼 계수는 서로 적응가능하고(adaptable), 따라서 상이한 양자화 정밀도에 따라 획득한 스펙트럼 계수는 서로 적응가능하며, 그로 인해 디코딩한 신호의 스펙트럼의 평활성(smoothness)이 증가하고, 디코딩 이후의 주파수 대역 합성에 의하여 발생된 잡음이 감소하고, 대역 합성 오디오 신호가 가능하게 되어 더 나은 음향 효과를 달성할 수 있다는 것을 알 수 있다.
본 발명의 구현예에 따르거나 종래 기술의 기술 방안을 더욱 명확하게 설명하기 위하여, 구현예 또는 종래 기술을 설명하기 위해 필요한 첨부된 도면을 이하 간단하게 설명한다. 명백하게, 이하 설명에 첨부된 도면은 본 발명의 일부 구현예만을 나타내고, 해당 기술분야의 당업자는 창조적인 노력 없이도 첨부된 도면에 따라 다른 도면을 얻을 수 있다.
도 1은 기존의 오디오 인코딩 시스템의 구조도이다.
도 2는 기존의 오디오 디코딩 시스템의 구조도이다.
도 3은 본 발명의 제1 구현예에 따른 신호 잡음제거 방법의 도식 흐름도이다.
도 4는 본 발명의 제2 구현예에 따른 신호 잡음제거 방법의 도식 흐름도이다.
도 5는 본 발명의 제4 구현예에 따른 신호 잡음제거 장치의 도식 구조도이다.
도 6은 본 발명의 제5 구현예에 따른 오디오 디코딩 시스템의 구조도이다.
도 1은 기존의 오디오 인코딩 시스템의 구조도이다.
도 2는 기존의 오디오 디코딩 시스템의 구조도이다.
도 3은 본 발명의 제1 구현예에 따른 신호 잡음제거 방법의 도식 흐름도이다.
도 4는 본 발명의 제2 구현예에 따른 신호 잡음제거 방법의 도식 흐름도이다.
도 5는 본 발명의 제4 구현예에 따른 신호 잡음제거 장치의 도식 구조도이다.
도 6은 본 발명의 제5 구현예에 따른 오디오 디코딩 시스템의 구조도이다.
첨부 도면을 참조하여 이하에서 본 발명의 구현예의 기술 방안을 명확하게 설명한다. 설명한 구현예는 본 발명의 전부가 아닌 일부 구현예일 뿐임은 분명하다. 창조적 노력 없이 본 발명의 구현예에 기초하여 해당 기술분야의 당업자에 의하여 얻어진 모든 기타 구현예는 본 발명의 보호 범위 내에 든다.
[제1 구현예]
도 3을 참조하면, 본 발명의 구현예는 신호 잡음제거 방법을 제공한다. 상기 방법은 다음 단계를 포함한다:
단계 31: 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관(inter-frame correlation)의 정도에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택한다.
단계 32: 두 개 이상의 선택된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대한 가중화(weighting)를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득한다.
단계 33: 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력한다.
본 발명의 구현예에 따른 신호 잡음제거 방법에서, 조정될 스펙트럼 계수는 두 개 이상의 관련된 스펙트럼 계수로 가중화되어 조정될 스펙트럼 계수의 예측 값을 획득하고, 디코딩한 신호의 스펙트럼은 조정될 스펙트럼 계수의 예측 값에 따라 조정되어, 예측된 스펙트럼 계수(즉, 조정될 스펙트럼 계수의 예측 값) 및 기타 관련된 스펙트럼 계수는 서로 적응가능하고(adaptable), 따라서 상이한 양자화 정밀도에 따라 획득한 스펙트럼 계수는 서로 적응가능하고, 그로 인해 디코딩한 신호의 스펙트럼의 평활성(smoothness)이 증가하고, 디코딩 이후의 주파수 대역 합성에 의하여 발생된 잡음이 감소하고, 대역 합성 오디오 신호가 가능하게 되어 더 나은 음향 효과를 달성할 수 있다.
[제2 구현예]
도 4를 참조하면, 본 발명의 구현예는 신호 잡음제거 방법을 제공한다. 상기 방법은 다음 단계를 포함한다:
단계 41: 스펙트럼 계수의 양자화 정밀도에 따라 디코딩한 신호에서 조정될 스펙트럼 계수를 결정한다.
디코딩 엔드(decoding end)에서, 코어 디코더, BWE 디코더, 및 역양자화 디코더는 각각 수신한 인코딩된 신호를 디코딩한 후 디코딩한 신호를 출력한다. 디코딩한 신호는 코어 디코더에 의한 저주파 신호 출력, BWE 디코더에 의한 BWE 고주파 신호 출력, 및 역양자화 디코더에 의한 기타 고주파 신호 출력으로 형성된다. BWE 디코더에 의한 BWE 고주파 신호 출력 및 역양자화 디코더에 의한 기타 고주파 신호 출력은 주파수 도메인(frequency-domain) 신호이다. 결정된 조정될 스펙트럼 계수는 양자화되지 않은 스펙트럼 계수 및/또는 양자화 정밀도 임계값보다 낮은 양자화 정밀도를 가지는 스펙트럼 계수를 포함할 수 있다. 여기에서, 양자화 정밀도 임계값은 요구사항에 따라 설정될 수 있다.
예를 들면, 스칼라 양자화를 위하여, 디코딩한 신호의 가장 작은 비트율(bit rate)이 1 비트/주파수샘플이면, 하나의 주파수샘플이 단지 하나의 비트의 스펙트럼 계수에 상응할 때(즉, 주파수샘플의 비트율이 1 비트/주파수샘플인 경우), 여기서 하나의 비트는 단지 주파수샘플의 부호 정보만을 나타낼 수 있고, 비트가 없는 위치(no bit position)(즉, 0 비트)는 주파수샘플의 진폭 정보를 나타내어, 1 비트/주파수샘플의 비트율을 가지는 주파수샘플은 진폭 정보를 가지고 있지 않으며(주파수샘플의 양자화 정밀도가 0이라고 생각할 수 있음), 주파수샘플은 양자화되어 있지 않고, 따라서 1 비트/주파수샘플의 비트율을 가지는 주파수샘플은 조정될 주파수샘플로 결정될 수 있다. 벡터 양자화를 위하여, 주파수샘플을 가지는 벡터의 평균 양자화 정밀도가 처음으로 결정될 수 있다. 예를 들면 0.5 비트/주파수샘플과 같이, 양자화 정밀도가 하한 임계값보다 작다면, 벡터의 모든 주파수샘플이 조정될 필요가 있는 것으로 결정된다. 예를 들면 2 비트/주파수샘플과 같이, 평균 양자화 정밀도가 상한 임계값보다 크다면, 벡터의 어떤 주파수샘플도 조정될 필요가 없는 것으로 결정된다. 예를 들면 0.5 비트/주파수샘플과 2 비트/주파수샘플 사이와 같이, 평균 양자화 정밀도가 하한 임계값 및 상한 임계값 사이에 있다면, 벡터 양자화(vector-quantized)되지 않은 벡터에 주파수샘플이 있는지 여부가 추가적으로 결정되며; 벡터에 그러한 주파수샘플이 있다면, 벡터 양자화되지 않은 주파수샘플은 조정될 필요가 있는 반면; 벡터에 그러한 주파수샘플이 없다면, 어떤 주파수샘플도 조정될 필요가 없는 것으로 결정된다.
단계 42: 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관의 정도에 따라, 세 개의 가중화 모드: 높은 인터 프레임 상관 가중화 모드(high inter-frame correlation weighting mode), 낮은 인터 프레임 상관 가중화 모드(low inter-frame correlation weighting mode), 및 중간 인터 프레임 상관 가중화 모드(intermediate inter-frame correlation weighting mode) 중 하나의 가중화 모드를 선택한다.
인터 프레임 상관의 정도는, 예를 들면, BWE 알고리즘과 같이, 상관에 관련된 파라미터에 따라 판단될 수 있다. 상기 알고리즘은 인터 프레임 상관의 정도를 나타내기 위한 프레임 유형을 사용한다. 과도(transient) 유형의 프레임은 인터 프레임 상관이 낮음을 나타내고; 고조파(harmonic) 유형의 프레임은 인터 프레임 상관이 높음을 나타내며; 일반적인 유형의 프레임은 인터 프레임 상관이 중간임을 표시한다. BWE 알고리즘에서, 프레임 유형은 상관과 관련된 파라미터이다. 인터 프레임 상관의 정도는 프레임 유형에 따라 결정될 수 있고, 이에 따라 가중화 모드가 결정된다.
분명히, 인터 프레임 상관의 정도는 또한 계산을 통하여도 결정될 수 있다. 예를 들면, 조정될 스펙트럼 계수가 존재하는 프레임과 인접한 프레임 사이의 상관은 처음에는 상관 계산법을 사용하여 계산된다. 상관이 상한 임계값보다 크다면, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관은 높다. 상관이 하한 임계값보다 작다면, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관은 낮다. 다른 상황에서, 예를 들면, 상관이 상한 임계값과 하한 임계값 사이라면, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관은 중간이다.
단계 42에서, 인터 프레임 상관의 정도에 따라 상이한 가중화 모드가 선택된다. 인터 프레임 상관이 높은 때에, 높은 인터 프레임 상관 가중화 모드가 선택된다. 인터 프레임 상관이 낮은 때에, 낮은 인터 프레임 상관 가중화 모드가 선택된다. 인터 프레임 상관이 중간인 때에, 중간 인터 프레임 상관 가중화 모드가 선택된다. 상이한 가중화 모드는 상이한 가중치에 상응하며, 인터 프레임 스펙트럼 계수 및 인트라 프레임(intra-frame) 스펙트럼 계수를 가중화하기 위하여 사용된다. 일반적으로, 인터 프레임 상관이 높을수록, 인터 프레임 스펙트럼 계수의 가중치는 더 높고, 인트라 프레임 스펙트럼 계수의 가중치는 더 낮으며; 인터 프레임 상관이 낮을수록, 인터 프레임 스펙트럼 계수의 가중치는 더 낮고, 인트라 프레임 스펙트럼 계수의 가중치는 더 높다.
즉, 인터 프레임 스펙트럼 계수의 가중치는 인터 프레임 상관과 정비례하고, 인트라 프레임 스펙트럼 정보의 가중치는 인터 프레임 상관과 반비례한다. 높은 인터 프레임 상관을 가지는 프레임에 대하여, 인터 프레임 스펙트럼 계수의 가중치는 크고, 인트라 프레임 스펙트럼 계수의 가중치는 작거나 0으로 설정된다. 낮은 인터 프레임 상관을 가지는 프레임에 대하여, 인트라 프레임 스펙트럼 계수의 가중치는 크고, 인터 프레임 스펙트럼 계수의 가중치는 작거나 0으로 설정된다. 중간의 인터 프레임 상관을 가지는 프레임에 대하여, 인트라 프레임 스펙트럼 계수 및 인터 프레임 스펙트럼 계수의 가중치의 크기는 인터 프레임 상관 및 인트라 프레임 상관의 정도를 비교함으로써 결정될 수 있다.
단계 43: 선택된 가중화 모드에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 결정한다.
단계 42에서 가중화 모드가 선택된 때에, 가중화 모드에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 결정하는 단계는 다음과 같다: 인터 프레임 상관이 높음을 나타내는, 높은 인터 프레임 상관 가중화 모드가 선택된 때에는, 두 개 이상의 스펙트럼 계수는 조정될 스펙트럼 계수가 존재하는 프레임에 인접한 프레임에서 결정될 수 있다. 인터 프레임 상관이 낮음을 나타내는, 낮은 인터 프레임 상관 가중화 모드가 선택된 때에는, 두 개 이상의 스펙트럼 계수는 조정될 스펙트럼 계수가 존재하는 프레임에서 결정될 수 있다. 인터 프레임 상관이 중간임을 나타내는, 중간 인터 프레임 상관 가중화 모드가 선택된 때에는, 두 개 이상의 스펙트럼 계수는 조정될 스펙트럼 계수가 존재하는 프레임 및 조정될 스펙트럼 계수가 존재하는 프레임에 인접한 프레임 모두에서 결정될 수 있다.
단계 44: 두 개 이상의 결정된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대한 가중화를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득한다.
두 개 이상의 결정된 스펙트럼 계수 및 조정될 스펙트럼 계수에 대한 가중화를 수행하는 방법은 예측이 다음 정보의 하나 이상의 유형의 가중화 값을 사용함으로써 수행될 수 있는 것일 수 있다: 1. 역양자화 디코더에 의한 양자화된 스펙트럼 계수 출력; 2. BWE 디코더에 의한 BWE 스펙트럼 계수 출력; 및 3. 예측을 통하여 획득되는 스펙트럼 계수의 기존의 예측 값. 스펙트럼 계수 및 상기 스펙트럼 계수에 상응하는 가중치의 곱은 상기 스펙트럼 계수의 가중화 값이다. 조정될 스펙트럼 계수는 양자화되지 않은 주파수샘플에 상응하는 스펙트럼 계수일 수 있으므로, 단계 44에서 두 개 이상의 스펙트럼 계수 및 조정될 스펙트럼 계수에 대해 가중화가 수행될 때, 조정될 스펙트럼 계수의 가중화 값은 0일 수 있고, 즉, 두 개 이상의 결정된 스펙트럼 계수의 가중화 값만이 채택되어 조정될 스펙트럼 계수의 예측 값을 획득한다.
구체적으로, 높은 인터 프레임 상관 가중화 모드에 대하여, 스펙트럼 계수는 다음 정보의 하나 이상의 유형의 가중화 값에 따라 예측된다: (1) 선행 프레임(former frame)의 예측 값; (2) 선행 프레임의 양자화된 스펙트럼 계수; 및 (3) 선행 프레임의 BWE 스펙트럼 계수.
낮은 인터 프레임 상관 가중화 모드에 대하여, 스펙트럼 계수는 다음 정보의 하나 이상의 유형의 가중화 값에 따라 예측된다: (1) 현재 프레임의 양자화된 스펙트럼 계수; (2) 현재 프레임의 BWE 스펙트럼 계수; 및 (3) 현재 프레임의 기존의 예측 값.
중간 인터 프레임 상관 가중화 모드에 대하여, 스펙트럼 계수는 다음 정보의 하나 이상의 유형의 가중화 값에 따라 예측된다: (1) 선행 프레임 또는 현재 프레임의 기존의 예측 값; (2) 선행 프레임 또는 현재 프레임의 양자화된 스펙트럼 계수; (3) 선행 프레임 또는 현재 프레임의 BWE 스펙트럼 계수.
스펙트럼 정보의 각각의 유형의 가중치는 또한 조정될 주파수샘플의 양자화 정밀도에 따라 그에 맞추어 조정될 수 있음을 유의하여야 한다. 가중치 예측(weighting prediction) 동안에, 조정될 스펙트럼 계수가 양자화 결과를 가진다면, 가중치 예측은 양자화 결과에 대하여 여전히 수행될 수 있고, 가중치는 스펙트럼 계수의 양자화 정밀도에 정비례한다.
단계 45: 획득한 예측 값의 에너지를 제어하고, 디코딩한 신호의 스펙트럼을 조정한다.
본 단계에서, 조정될 스펙트럼 계수의 에너지의 상한 임계값이 처음으로 결정되고, 그 후 조정된 스펙트럼 계수의 에너지는 상한 임계값보다 작거나 같은 범위에 있도록 제어된다. 상한 임계값은 양자화 오류 또는 조정될 스펙트럼 계수의 범위 내의 최소의 0이 아닌 양자화 값에 따라 결정될 수 있고, 상기 양자화 에러 또는 상기 최소의 0이 아닌 양자화 값은 종래 기술을 통하여 획득할 수 있으며, 그 내용은 여기에서 다시 설명되지 않는다.
획득한 예측 값의 에너지를 제어하고 디코딩한 신호의 스펙트럼을 조정하는 단계는: 상한 임계값에 따라, 조정될 스펙트럼 계수의 예측 값을 수정하여 조정될 스펙트럼 계수의 수정 값을 획득하는 단계(여기서, 상기 수정 값의 에너지는 상한 임계값보다 작거나 값은 범위에 있음); 및 상기 수정 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하는 단계(여기서, 예측 값이 상한 임계값보다 작거나 같은 때 상기 수정 값은 예측 값과 같고, 예측 값이 상한 임계값보다 큰 때 상기 수정 값은 상한 임계값과 같음)일 수 있다.
구체적으로, 예측 이후의 주파수샘플의 스펙트럼 계수의 에너지가 조정될 스펙트럼 계수의 에너지의 상한 임계값보다 크면, 주파수샘플의 최소 양자화 값 min_Q(0 지점을 제외한 양자화된 스펙트럼 계수의 최소 진폭 값) 또는 양자화 오류 크기 min_D는 상한 임계값 thr로 추출(또는 측정)되고, 실제의 상황에 따라 임계 계수 a(a<=1)가 결정된다. 조정될 스펙트럼 계수의 예측 값의 에너지가 a×thr보다 크다면, 예측 값의 에너지는 a×thr보다 작거나 같게 되도록 조정된다. 여기서, 임계 계수는 실험 통계에 따라 획득한 실험 값(empirical value)을 사용하여 결정될 수 있고, 또는 a의 크기는 또한 양자화 정밀도에 따라 제어될 수 있다.
양자화 정밀도가 낮을수록, 임계 계수 a의 값은 더 크다. 양자화 정밀도가 주파수샘플보다 높은 때에, 임계 계수 a의 값은 1부터 1보다 작은 수치의 값이 되도록 제어된다. 예를 들면, 양자화 정밀도가 1.5 비트/주파수샘플보다 높은 때에는 thr=min_D 및 a=0.7로 설정되고; 양자화 정밀도가 0.5 비트/주파수샘플보다 낮은 때에는 thr=min_Q 및 a=1로 설정되며; 양자화 정밀도가 0.5 비트/주파수샘플보다 높고 1.5 비트/주파수샘플보다 낮은 때에는 thr=min_D 및 a=1로 설정된다.
본 발명의 구현예에 따른 신호 잡음제거 방법에서, 조정될 스펙트럼 계수는 스펙트럼 계수의 양자화 정밀도에 따라 결정되고, 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관의 정도에 따라 상이한 가중화 모드가 선택되고, 선택된 가중화 모드에 따라 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수가 결정되고, 조정될 스펙트럼 계수는 가중화되어 조정될 스펙트럼 계수의 예측 값을 획득하게 되고, 획득한 예측 값의 에너지는 제어되고, 디코딩한 신호의 스펙트럼이 조정되어, 예측된 스펙트럼 계수(즉, 조정될 스펙트럼 계수의 예측 값) 및 기타 관련된 스펙트럼 계수는 서로 적응가능하고(adaptable), 따라서 상이한 양자화 정밀도에 따라 획득한 스펙트럼 계수는 서로 적응가능하며, 그로 인해 디코딩한 신호의 스펙트럼의 평활성이 증가하고, 디코딩 이후의 주파수 대역 합성에 의하여 발생된 잡음이 감소하고, 대역 합성 오디오 신호가 가능하게 되어, 더 나은 음향 효과를 달성할 수 있다.
[제3 구현예]
본 구현예는 조정될 스펙트럼 계수에 대하여 가중화 예측을 수행하기 위한 방법을 제공하며, 상이한 가중화 모드에 적용가능한 스펙트럼 정보를 설명한다. 스펙트럼 정보는 다음의 정보를 포함한다.
인트라 프레임 스펙트럼 정보는 f_inner[n], 인트라 프레임 가중치는 w_inner[n], 인터 프레임 스펙트럼 정보는 f_inter[n], 및 인터 프레임 가중치는 w_inter[n](0≤n≤N이고, N은 프레임에 포함된 주파수샘플의 최대 개수)으로 가정하자. 주파수샘플 n의 스펙트럼 계수가 조정될 스펙트럼 계수이면, 주파수샘플 n의 스펙트럼 계수의 예측 값 f[n]은 제1 식으로 표현된다:
f[n] = w_inner[0]×f_inner[0] + w_inner[1]×f_inner[1] + … + w_inner[N]×f_inner[N] + w_inter[0]×f_inter[0] + w_inter[1]×f_inter[1] + … + w_inter[N]×f_inter[N](제1 식)
인트라 프레임 가중치 w_inner[n]은 인트라 프레임 상관과 정비례한다. 인터 프레임 가중치 w_inner[n]은 인터 프레임 상관과 정비례한다. 모든 가중치의 총합은 1이다.
조정될 스펙트럼 계수에 대하여 가중치 예측을 수행하는 방법은 다음의 구체적 예를 통하여 설명한다.
현재 프레임에서 주파수샘플 n의 양자화된 스펙트럼 계수 fQ[n]은 조정될 스펙트럼 계수로 결정되고, 현재 프레임에서 주파수샘플 n의 BWE 스펙트럼 계수가 fB[n]이고, 현재 프레임 이전의 프레임에서 주파수샘플 n의 양자화된 스펙트럼 계수는 fS[1][n]으로 나타내고, 이전 프레임의 이전의 프레임에서 주파수샘플 n의 양자화된 스펙트럼 계수는 fS[0][n]으로 나타내고, 현재 프레임에서 주파수샘플 n의 양자화된 스펙트럼 계수의 예측은 f[n]이라고 가정하자. 스펙트럼 계수 및 예측 값 모두는 0 또는 0이 아닌 값일 수 있다. fQ[n]이 0인 경우는, 주파수샘플 n이 양자화되지 않았음을 나타낸다.
제2 구현예의 단계 41에 따라, 주파수샘플 17이 조정될 필요가 있다고 결정되면, 단계 42에 따른 주파수샘플을 가지는 프레임에 대해 상이한 가중화 모드가 선택되고, 상이한 가중화 모드에 대하여 다음의 처리가 수행될 수 있으며, 주파수샘플 16 및 주파수샘플 18은 주파수샘플 17의 인접한 주파수샘플이다.
A. 낮은 인터 프레임 상관 가중화 모드의 경우
fQ[17]이 양자화되지 않았다면, f[17] = (fB[17]+fQ[16]+fQ[18])/3이다. 이 경우에서, fB[17], fQ[16], 및 fQ[18]은 조정될 스펙트럼 계수와 높은 상관을 가지는 스펙트럼 계수이고, B[17], fQ[16], 및 fQ[18]의 가중치는 각각 1/3, 1/3, 및 1/3이다. 다음의 기타 가중화 예측 식의 의미는 그것과 유사하고 여기서 다시 설명하지는 않는다.
fQ[17]의 양자화 정밀도가 매우 낮다면, f[17] = (0.4×fB[17]+fQ[17]+0.8×fQ[16]+0.8×fQ[18])/3이다.
B. 높은 인터 프레임 상관 가중화 모드의 경우
fQ[17]이 양자화되지 않았다면, f[17] = (fS[0][17]+fS[1][17])/2이다.
fQ[17]의 양자화 정밀도가 매우 낮다면, f[17] = (0.3×fS[0][17]+0.7×fS[1][17]+fQ[17])/2이다.
C. 중간 인터 프레임 상관 가중화 모드의 경우
fQ[17]이 양자화되지 않았다면, f[17] = (fB[17]+fQ[16]+fQ[18]+ fS[1][16]+ fS[1][17]+ fS[1][18])/6이다.
fQ[17]의 양자화 정밀도가 매우 낮다면, f[17] = (2.5×fB[17]+fQ[16]+fQ[18]+0.5×fS[1][16]+0.5×fS[1][17]+0.5×fS[1][18])/6이다.
앞선 예에서, 계산된(valued) 주파수샘플의 범위 및 가중치 모두는 실험 결과, 즉, 실험 값으로부터 도출된다. 상이한 시나리오의 실제 응용에서, 가중치 및 계산된 주파수샘플은 상이한 시나리오에 따라 다르게 선택된다. 예를 들면, 상이한 코어 인코더는 상이한 BWE 범위를 가진다. 따라서, 인터 프레임 스펙트럼 정보 및 인트라 프레임 스펙트럼 정보의 값의 범위 및 가중치의 구체적 수치는 상이한 시나리오에서의 실험에 따라 결정될 수 있다.
제3 구현예에 따라 조정될 스펙트럼 계수에 대하여 가중화 예측을 수행하기 위한 방법에서, 구체적인 가중치, 스펙트럼 계수, 및 계산 식은 설명을 위하여 채택되었다. 구체적인 가중치, 스펙트럼 계수, 및 계산 식은 실험 값에 따라 획득한 더 나은 구현일 뿐이며, 본 발명의 보호 범위를 제한하는 것은 아니다. 실제로, 구체적인 가중치, 스펙트럼 계수, 및 계산 식은 구체적인 상황에 따라 유연하게 조정될 수 있고, 이러한 확장과 변형은 본 발명을 벗어나지 않고 본 발명의 보호 범위 내에 있다. 제3 구현예에 따라 조정될 스펙트럼 계수에 대하여 가중화 예측을 수행하기 위한 방법은 본 발명의 구현예에 적용가능할 수 있어서, 조정될 스펙트럼 계수에 대해 가중화 예측을 수행하고, 조정될 스펙트럼 계수의 예측 값을 획득한다.
본 발명의 다른 구현예에서, 신호 잡음제거 방법이 제공된다. 여기에서, 설명을 위한 예로서 8차원 격자 모양(grid-shaped) 벡터 양자화에 대한 BWE 알고리즘의 적응을 들었지만, 본 발명은 그것에 제한되지 않으며, 본 발명의 구현예에 따른 방법은 또한, 4차원 양자화와 같은, 기타 벡터 양자화 방법에 적용가능할 수 있다.
처음으로, 8차원 벡터에서 조정될 스펙트럼 계수의 진폭의 상한 임계값 thr[i]이 계산되고, 여기서 i는 i번째 8차원 벡터임을 나타낸다. i번째 8차원 벡터가 올제로(all-zero) 벡터이면, thr[i]는 가중치에 주파수 대역의 주파수 도메인 포락선 값(frequency-domain envelope value)을 곱하여 얻은 값과 동일하다. 주파수 도메인 포락선 값은 두 개 이상의 연이은 주파수 도메인 계수의 진폭 값의 가중화된 합(weighted sum) 또는 가중화된 평균(weighted average) 값일 수 있다. 가중화 계수는 윈도우 함수(window function) 또는 기타 산술 식에 따라 계산될 수 있다. i번째 8차원 벡터가 올제로 벡터가 아니면, thr[i]는 가중치에 벡터의 최소의 0이 아닌 양자화 값을 곱하여 얻은 값과 동일하다. 여기에서, 두 가중치는 실험을 통해 얻은 실험 값일 수 있다.
설명의 편의상, 조정될 스펙트럼 계수가 존재하는 프레임을 현재 프레임이라고 호칭하도록 한다.
현재 프레임 및 상기 프레임의 이전 프레임 모두가 고조파 프레임이면, 현재 프레임은 높은 인터 프레임 상관을 가진다. 이전 프레임의 벡터의 스펙트럼 계수가 디코딩되고 현재 프레임의 상응하는 주파수 대역의 벡터의 어떤 스펙트럼 계수도 디코딩되지 않은 때에, 조정될 스펙트럼 계수를 복원하기 위한 방법은 다음과 같다: 이전 프레임 이전의 프레임의 양자화된 스펙트럼 계수의 진폭이 이전의 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭보다 미리 주어진 배율(예를 들면, 두 배)보다 크다면, 조정될 스펙트럼 계수의 진폭은, 현재 프레임의 BWE 스펙트럼 계수의 진폭과 이전 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭의 가중화된 합이고, 조정될 스펙트럼 계수의 부호는 현재 프레임의 BWE 스펙트럼 계수의 부호이다. 그렇지 않으면, 즉, 이전 프레임 이전의 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭이 이전 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭보다 미리 주어진 배율보다 크지 않다면, 조정될 스펙트럼 계수의 진폭은, 이전 프레임 이전의 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭, 이전 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭, 및 현재 프레임의 BWE 스펙트럼 계수의 진폭의 가중화된 합이고, 조정될 스펙트럼 계수의 부호는 현재 프레임의 BWE 스펙트럼 계수의 부호이다.
현재 프레임 또는 이전 프레임이 과도 프레임이면, 현재 프레임은 낮은 인터 프레임 상관을 가진다. 주파수샘플의 스펙트럼 계수가 디코딩되지 않았다면, 주파수샘플의 조정될 스펙트럼 계수를 복원하기 위한 방법은 다음과 같다: 현재 주파수샘플의 BWE 스펙트럼 계수의 진폭 및 인접한 주파수샘플의 양자화된 스펙트럼 계수의 진폭의 가중화된 평균값 En은 조정될 스펙트럼 계수의 진폭으로 계산된다. 여기에서, 현재 주파수샘플은 조정될 스펙트럼 계수를 가지는 주파수샘플이고, 조정될 주파수샘플이라고 호칭될 수 있다. 인접한 주파수샘플은 조정될 주파수샘플의 주파수보다 높거나 낮은 주파수를 가지는 동일한 프레임의 주파수샘플일 수 있다. 하나 이상의 인접한 주파수샘플이 있을 수 있다. En이 임계값 thr[i]보다 크면, En은 thr[i]로 설정, 즉, 조정될 스펙트럼 계수의 진폭이 thr[i]로 설정된다. 조정될 스펙트럼 계수의 부호는 주파수샘플의 BWE 스펙트럼 계수의 부호이다. 조정될 스펙트럼 계수의 진폭에 조정될 스펙트럼 계수의 부호를 곱하여 얻은 값은 주파수샘플의 조정 결과(adjustment result)로써 사용된다.
현재 프레임의 유형이 앞의 두 가지 유형에 속하지 않으면, 현재 프레임은 중간 인터 프레임 상관을 가진다. 주파수샘플의 스펙트럼 계수가 디코딩되지 않았다면, 주파수샘플의 조정될 스펙트럼 계수를 복원하기 위한 방법은 다음과 같다: 현재 주파수샘플의 BWE 스펙트럼 계수의 진폭, 현재 프레임에서의 현재 주파수샘플에 인접한 주파수샘플의 BWE 스펙트럼 계수의 진폭, 현재 프레임 이전의 프레임에 상응하는 주파수샘플의 양자화된 스펙트럼 계수의 진폭, 및 이전 프레임에 상응하는 주파수샘플의 인접한 주파수샘플의 양자화된 스펙트럼 계수의 진폭의 가중화된 평균값 En은 조정될 스펙트럼 계수의 진폭으로 계산된다. 여기에서, 현재 주파수샘플은 조정될 스펙트럼 계수를 가지는 주파수샘플이고, 조정될 주파수샘플이라고 호칭될 수 있다. 인접한 주파수샘플은 조정될 주파수샘플의 주파수보다 높거나 낮은 주파수를 가지는 동일한 프레임의 주파수샘플일 수 있다. 하나 이상의 인접한 주파수샘플이 있을 수 있다. En이 임계값 thr[i]보다 크면, En은 thr[i]로 설정, 즉, 조정될 스펙트럼 계수의 진폭이 thr[i]로 설정된다. 조정될 스펙트럼 계수의 부호는 주파수샘플의 BWE 스펙트럼 계수의 부호이다. 조정될 스펙트럼 계수의 진폭에 조정될 스펙트럼 계수의 부호를 곱하여 얻은 값은 주파수샘플의 조정 결과로써 사용된다.
올제로 벡터 및 올제로가 아닌 벡터의 0 지점에 대해, 스펙트럼 계수를 조정하는 정도를 제어하기 위해서, 가중화 작업 동안 사용되는 가중화 계수는 상이할 수 있고, 양자화된 스펙트럼 계수의 음향 해상도(acoustic resolution)는 영향받지 않으며, 추가적인 잡음 또한 발생하지 않는다.
[제4 구현예]
상기 방법 구현예에 기초하여, 본 발명은 신호 잡음제거 장치의 구현예를 추가로 제공한다. 도 5를 참조하면, 상기 장치는: 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관의 정도에 따라, 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하도록 구성된, 선택 유닛(51); 선택 유닛(51)에 의하여 선택된 두 개 이상의 스펙트럼 계수 및 조정될 스펙트럼 계수에 대한 가중화를 수행하여 조정될 스펙트럼 계수의 예측 값을 획득하도록 구성된, 가중화 유닛(52); 및 가중화 유닛(52)에 의하여 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하도록 구성된, 조정 및 출력 유닛(53)을 포함한다.
조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관 정도에 따라, 상기 선택 유닛(51)이 조정될 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하기 이전에, 조정될 스펙트럼 계수는 추가적으로 스펙트럼 계수의 양자화 인코딩 정밀도에 따라 결정될 필요가 있다. 따라서 상기 장치는: 스펙트럼 계수의 양자화 인코딩 정밀도에 따라, 조정될 스펙트럼 계수를 결정하도록 구성된, 예측 지점 결정 유닛(50)을 더 포함하고, 결정된 조정될 스펙트럼 계수는 양자화되지 않은 스펙트럼 계수 및/또는 양자화 정밀도 임계값보다 낮은 양자화 정밀도를 가지는 스펙트럼 계수를 포함한다.
일 구현 모드에서, 상기 선택 유닛(51)은: 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관의 정도에 따라, 세 개의 가중화 모드: 높은 인터 프레임 상관 가중화 모드, 낮은 인터 프레임 상관 가중화 모드, 및 중간 인터 프레임 상관 가중화 모드 중 하나의 가중화 모드를 선택하도록 구성된, 가중화 모드 선택 모듈(511); 및 가중화 모드 선택 모듈(511)에 의하여 선택된 가중화 모드에 따라, 조정될 상기 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 결정하도록 구성된, 관련 스펙트럼 선택 모듈(512)을 포함한다.
상기 가중화 유닛(52)은 다음의 모듈: 높은 인터 프레임 상관 가중화 모드에서, 다음 정보: (1) 선행 프레임의 예측 값, (2) 선행 프레임의 양자화된 스펙트럼 계수, 및 (3) 선행 프레임의 BWE 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 스펙트럼 계수의 예측 값을 획득하도록 구성된, 높은 상관 가중화 모듈(521); 낮은 인터 프레임 상관 가중화 모드에서, 다음 정보: (1) 현재 프레임의 양자화된 스펙트럼 계수, (2) 현재 프레임의 BWE 스펙트럼 계수, 및 (3) 현재 프레임의 기존의 예측 값의 하나 이상의 유형의 가중화 값에 따라 조정될 스펙트럼 계수의 예측 값을 획득하도록 구성된, 낮은 상관 가중치 모듈(522); 및 중간 인터 프레임 상관 가중화 모드(523)에서, 다음 정보: (1) 선행 프레임 또는 현재 프레임의 예측 값, (2) 선행 프레임 또는 현재 프레임의 양자화된 스펙트럼 계수, 및 (3) 선행 프레임 또는 현재 프레임의 BWE 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 스펙트럼 계수의 예측 값을 획득하도록 구성된, 중간 상관 가중화 모듈(523) 중 어느 하나를 포함한다.
관련된 가중화 모드에 사용되는 스펙트럼 정보의 가중치는 조정될 스펙트럼 계수의 양자화 정밀도에 따라 제어됨을 유의해야 한다. 스펙트럼 정보의 양자화 정밀도가 높을수록, 스펙트럼 정보의 상응하는 가중치는 더 크다. 또한, 가중치는 스펙트럼 계수의 양자화 정밀도에 정비례한다. 스펙트럼 계수 및 스펙트럼 계수에 상응하는 가중치의 곱은 스펙트럼 계수의 가중화 값이다.
따라서, 상기 가중화 유닛(52)은: 조정될 스펙트럼 계수의 양자화 정밀도에 따라 스펙트럼 정보의 가중치를 제어하도록 구성된, 가중치 제어 모듈(520)을 더 포함하고, 스펙트럼 정보의 양자화 정밀도가 높을수록, 스펙트럼 정보의 상응하는 가중치는 더 크다.
예측 이후의 주파수샘플의 스펙트럼 계수의 에너지가 조정될 스펙트럼 계수의 에너지의 상한 임계값보다 크면, 조정된 스펙트럼 계수의 에너지는 상한 임계값보다 작거나 같은 범위에 있도록 제어될 필요가 있다. 따라서, 조정 및 출력 유닛(53)은: 조정될 스펙트럼 계수의 에너지의 상한 임계값 및 획득한 예측 값에 따라, 조정될 스펙트럼 계수의 수정 값을 생성하고, 수정 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하도록 구성된, 수정 모듈(530)을 더 포함하고, 조정될 스펙트럼 계수의 수정 값의 에너지는 조정될 스펙트럼 계수의 에너지의 상한 임계값보다 작거나 같다.
본 발명의 구현예에 따른 신호 잡음제거 장치에서, 가중화 유닛은 조정될 스펙트럼 계수를 선택 유닛에 의하여 선택된 두 개 이상의 관련된 스펙트럼 계수로 가중화하여 조정될 스펙트럼 계수의 예측 값을 획득하고, 조정 및 출력 유닛은 조정될 스펙트럼 계수의 예측 값에 따라 디코딩한 신호의 스펙트럼을 조정하고 그 후 조정된 디코딩한 신호를 출력하여, 예측된 스펙트럼 계수(즉, 조정될 스펙트럼 계수의 예측 값) 및 기타 관련된 스펙트럼 계수는 서로 적응가능하고, 따라서 상이한 양자화 정밀도에 따라 획득한 스펙트럼 계수는 서로 적응가능하며, 그로 인해 디코딩한 신호의 스펙트럼의 평활성이 증가하고, 디코딩 이후의 주파수 대역 합성에 의하여 발생된 잡음이 감소하고, 대역 합성 오디오 신호가 가능하게 되어, 더 나은 음향 효과를 달성할 수 있다.
[제5 구현예]
상기 장치 구현예에 기초하여, 본 발명의 구현예는 오디오 디코딩 시스템을 제공한다. 도 6을 참조하면, 상기 오디오 디코딩 시스템은 코어 디코더(61), BWE 디코더(62), 역양자화 디코더(63), 및 신호 잡음제거 장치(60)를 포함한다. 상기 코어 디코더(61)는 제1 계층 코드 스트림의 저주파 정보를 디코딩하도록 구성된다. 상기 BWE 디코더(62)는 제2 계층 코드 스트림의 BWE 정보를 디코딩하도록 구성된다. 상기 역양자화 디코더(63)는 나머지 비트의 제3 계층 코드 스트림의 고주파 대역 정보를 디코딩하고 역양자화하도록 구성된다.
상기 신호 잡음제거 장치(60)는 본 발명의 앞선 구현예에 따른 신호 잡음제거 장치일 수 있고, BWE 디코더 및 역양자화 디코더에 의하여 출력된 디코딩한 정보를 수신하고, 제2 계층 코드 스트림 및 제3 계층 코드 스트림의 디코딩한 정보에 따라, 조정될 스펙트럼 계수를 결정하고, 조정될 스펙트럼 계수의 획득한 예측 값에 따라 제3 계층 코드 스트림의 디코딩한 정보에서의 스펙트럼 계수를 조정하도록 구성된다. 더 구체적으로, 앞선 장치 구현예를 참조할 수 있고, 여기에서 다시 구체적으로 설명하지 않는다.
본 발명의 구현예의 방법은 또한 소프트웨어 기능 모듈(software functional module)을 통해 구현될 수 있고, 소프트웨어 기능 모듈이 별도의 제품으로 판매되거나 사용될 때, 소프트웨어 기능 모듈은 또한 컴퓨터가 판독 가능한 저장 매체에 저장되어 있을 수 있음을 유의해야 한다. 상기 저장 매체는 읽기 전용 메모리(Read-Only Memory, ROM), 자기 디스크, 또는 광학 디스크일 수 있다.
본 발명의 각각의 구현예에 따라 다양한 기능적 유닛은 하나의 프로세싱 모듈에 집적될 수 있거나, 또는 다양한 별도의 물리적 유닛으로 존재할 수 있고, 또는 두 개 이상의 유닛이 하나의 모듈에 집적될 수 있다. 집적 모듈은 하드웨어를 통하여 구현될 수 있고, 또한 소프트웨어 기능 모듈을 통해 구현될 수도 있다. 집적 모듈이 소프트웨어 기능 모듈을 통하여 구현되고 별도의 제품으로 판매되거나 사용되는 때에, 집적 모듈은 컴퓨터가 판독 가능한 저장 매체에 저장되어 있을 수 있다. 상기 저장 매체는 ROM, 자기 디스크, 또는 광학 디스크일 수 있다.
앞에서 설명한 구현예는 본 발명의 범위를 제한하기 위한 것이 아니다. 해당 기술 분야의 당업자에게 있어서, 본 발명의 원칙을 벗어나지 않는 임의의 변경, 동등한 치환, 및 개선은 본 발명의 보호 범위 내에 있다.
50: 예측 지점 결정 유닛 51: 선택 유닛
52: 가중화 유닛 53: 조정 및 출력 유닛
511: 가중화 모드 선택 모듈 512: 관련 스펙트럼 선택 모듈
520: 가중치 제어 모듈 521: 높은 상관 가중화 모듈
522: 낮은 상관 가중화 모듈 523: 중간 상관 가중화 모듈
530: 수정 모듈
60: 신호 잡음제거 장치 61: 코어 디코더
62: BWE 디코더 63: 역양자화 디코더
52: 가중화 유닛 53: 조정 및 출력 유닛
511: 가중화 모드 선택 모듈 512: 관련 스펙트럼 선택 모듈
520: 가중치 제어 모듈 521: 높은 상관 가중화 모듈
522: 낮은 상관 가중화 모듈 523: 중간 상관 가중화 모듈
530: 수정 모듈
60: 신호 잡음제거 장치 61: 코어 디코더
62: BWE 디코더 63: 역양자화 디코더
Claims (16)
- 신호 잡음제거 방법으로서,
스펙트럼 계수의 양자화 인코딩 정밀도에 따라, 조정될 스펙트럼 계수를 결정하는 단계;
상기 조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관(inter-frame correlation)에 따라, 세 개의 가중화 모드: 높은 인터 프레임 상관 가중화 모드(high inter-frame correlation weighting mode), 낮은 인터 프레임 상관 가중화 모드(low inter-frame correlation weighting mode), 및 중간 인터 프레임 상관 가중화 모드(intermediate inter-frame correlation weighting mode) 중 하나의 가중화 모드를 선택하는 단계;
상기 선택된 가중화 모드에 따라, 조정될 상기 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 결정하는 단계;
두 개 이상의 선택된 상기 스펙트럼 계수 및 조정될 상기 스펙트럼 계수에 대한 가중화(weighting)를 수행하여 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계; 및
상기 획득한 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하는 단계
를 포함하고,
상기 결정된 조정될 스펙트럼 계수는 양자화되지 않은 스펙트럼 계수 및/또는 양자화 정밀도 임계값보다 낮은 양자화 정밀도를 가지는 스펙트럼 계수를 포함하는, 신호 잡음제거 방법. - 제1항에 있어서,
상기 두 개 이상의 선택된 스펙트럼 계수 및 조정될 상기 스펙트럼 계수에 대한 가중화를 수행하여 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계는,
상기 높은 인터 프레임 상관 가중화 모드에서, 다음 정보: 선행 프레임(former frame)의 예측 값, 상기 선행 프레임의 양자화된 스펙트럼 계수, 및 상기 선행 프레임의 대역 확장 기법(Band Width Extension, BWE) 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계;
상기 낮은 인터 프레임 상관 가중화 모드에서, 다음 정보: 현재 프레임의 양자화된 스펙트럼 계수, 상기 현재 프레임의 BWE 스펙트럼 계수, 및 상기 현재 프레임의 기존의 예측 값의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계; 및
상기 중간 인터 프레임 상관 가중화 모드에서, 다음 정보: 상기 선행 프레임 또는 상기 현재 프레임의 상기 예측 값, 상기 선행 프레임 또는 상기 현재 프레임의 상기 양자화된 스펙트럼 계수, 및 상기 선행 프레임 또는 상기 현재 프레임의 BWE 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계
를 포함하는,
신호 잡음제거 방법. - 제2항에 있어서,
상기 두 개 이상의 선택된 스펙트럼 계수 및 조정될 상기 스펙트럼 계수에 대한 가중화를 수행하여 조정될 상기 스펙트럼 계수의 예측 값을 획득하는 단계는,
조정될 상기 스펙트럼 계수의 양자화 정밀도에 따라 스펙트럼 정보의 가중치를 제어하는 단계를 더 포함하고, 상기 스펙트럼 정보의 양자화 정밀도가 높을수록, 상기 스펙트럼 정보의 상응하는 가중치가 더 크게 되도록 된,
신호 잡음제거 방법. - 제2항에 있어서,
조정될 상기 스펙트럼 계수가 존재하는 프레임 및 상기 프레임의 이전 프레임 모두가 고조파 프레임(harmonic frame)이면, 조정될 상기 스펙트럼 계수가 존재하는 프레임은 높은 인터 프레임 상관을 가지고;
상기 이전 프레임의 이전의 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭이 상기 이전 프레임에 상응하는 양자화된 스펙트럼 계수의 진폭보다 미리 주어진 배율보다 크다면, 조정될 상기 스펙트럼 계수의 진폭은, 조정될 상기 스펙트럼 계수가 존재하는 프레임의 BWE 스펙트럼 계수의 진폭과 상기 이전 프레임에 상응하는 상기 양자화된 스펙트럼 계수의 진폭의 가중화된 합(weighted sum)이고, 조정될 상기 스펙트럼 계수의 부호는 조정될 상기 스펙트럼 계수가 존재하는 프레임의 상기 BWE 스펙트럼 계수의 부호이며;
상기 이전 프레임의 이전의 프레임에 상응하는 상기 양자화된 스펙트럼 계수의 진폭이 상기 이전 프레임에 상응하는 상기 양자화된 스펙트럼 계수의 상기 진폭보다 주어진 배율보다 크지 않다면, 조정될 상기 스펙트럼 계수의 진폭은, 상기 이전 프레임의 이전의 상기 프레임에 상응하는 상기 양자화된 스펙트럼 계수의 진폭, 상기 이전 프레임에 상응하는 상기 양자화된 스펙트럼 계수의 진폭, 및 조정될 상기 스펙트럼 계수가 존재하는 프레임의 상기 BWE 스펙트럼 계수의 진폭의 가중화된 합이고, 조정될 상기 스펙트럼 계수의 부호는 조정될 상기 스펙트럼 계수가 존재하는 프레임의 상기 BWE 스펙트럼 계수의 부호인,
신호 잡음제거 방법. - 제2항에 있어서,
조정될 상기 스펙트럼 계수가 존재하는 프레임 또는 상기 프레임의 이전 프레임이 과도 프레임(transient frame)이면, 조정될 상기 스펙트럼 계수가 존재하는 프레임은 낮은 인터 프레임 상관을 가지고;
조정될 상기 스펙트럼 계수의 진폭은 조정될 주파수샘플의 BWE 스펙트럼 계수의 진폭 및 인접한 주파수샘플의 양자화된 스펙트럼 계수의 진폭의 가중화된 평균(weighted average) 값이고; 상기 가중화된 평균 값이 조정될 상기 스펙트럼 계수의 진폭의 상한 임계값보다 크다면, 조정될 상기 스펙트럼 계수의 진폭은 상기 상한 임계값으로 설정되며; 및
조정될 상기 스펙트럼 계수의 부호는 조정될 상기 주파수샘플의 상기 BWE 스펙트럼 계수의 부호인,
신호 잡음제거 방법. - 제2항에 있어서,
조정될 상기 스펙트럼 계수가 존재하는 프레임 및 상기 프레임의 이전 프레임 모두가 고조파 프레임(harmonic frame)이고 조정될 상기 스펙트럼 계수가 존재하는 프레임 또는 상기 프레임의 이전 프레임이 과도 프레임(transient frame)인 경우에 속하지 않는 경우에는, 조정될 상기 스펙트럼 계수가 존재하는 프레임은 중간의 인터 프레임 상관을 가지고;
조정될 상기 스펙트럼 계수의 진폭은 조정될 주파수샘플의 BWE 스펙트럼 계수의 진폭의 가중화된 평균 값, 조정될 상기 주파수샘플의 인접한 주파수샘플의 BWE 스펙트럼 계수의 진폭, 조정될 상기 주파수 지점을 가지는 상기 프레임의 이전의 프레임에 상응하는 주파수샘플의 양자화된 스펙트럼 계수의 진폭 및 상기 이전 프레임에 상응하는 상기 주파수샘플의 인접한 주파수샘플의 양자화된 스펙트럼 계수의 진폭이고; 상기 가중화된 평균 값이 조정될 상기 스펙트럼 계수의 상기 진폭의 상한 임계값보다 크다면, 조정될 상기 스펙트럼 계수의 상기 진폭은 상기 상한 임계값으로 설정되며; 및
조정될 상기 스펙트럼 계수의 부호는 조정될 상기 주파수샘플의 상기 BWE 스펙트럼 계수의 부호인,
신호 잡음제거 방법. - 제1항에 있어서, 상기 획득한 예측 값을 사용하여 상기 디코딩한 신호의 상기 스펙트럼을 조정하는 단계는,
조정될 상기 스펙트럼 계수의 에너지의 상한 임계값 및 상기 획득한 예측 값에 따라, 조정될 상기 스펙트럼 계수의 수정 값을 생성하고, 상기 수정 값을 사용하여 상기 디코딩한 신호의 상기 스펙트럼을 조정하는 단계를 포함하고, 조정될 상기 스펙트럼 계수의 상기 수정 값의 에너지는 조정될 상기 스펙트럼 계수의 상기 에너지의 상기 상한 임계값보다 작거나 같은,
신호 잡음제거 방법. - 신호 잡음제거 장치로서,
스펙트럼 계수의 양자화 인코딩 정밀도에 따라, 조정될 스펙트럼 계수를 결정하도록 구성된 예측 지점 결정 유닛;
조정될 스펙트럼 계수가 존재하는 프레임의 인터 프레임 상관에 따라, 조정될 상기 스펙트럼 계수와 높은 상관을 가지는 두 개 이상의 스펙트럼 계수를 선택하도록 구성된, 선택 유닛;
상기 선택 유닛에 의하여 선택된 상기 두 개 이상의 스펙트럼 계수 및 조정될 상기 스펙트럼 계수에 대한 가중화를 수행하여 조정될 상기 스펙트럼 계수의 예측 값을 획득하도록 구성된, 가중화 유닛; 및
상기 가중화 유닛에 의하여 획득한 상기 예측 값을 사용하여 디코딩한 신호의 스펙트럼을 조정하고, 조정된 디코딩한 신호를 출력하도록 구성된, 조정 및 출력 유닛
을 포함하고,
상기 선택 유닛은,
상기 조정될 스펙트럼 계수가 존재하는 프레임의 상기 인터 프레임 상관에 따라, 세 개의 가중화 모드: 높은 인터 프레임 상관 가중화 모드, 낮은 인터 프레임 상관 가중화 모드, 및 중간 인터 프레임 상관 가중화 모드 중 하나의 가중화 모드를 선택하도록 구성된, 가중화 모드 선택 모듈; 및
상기 가중화 모드 선택 모듈에 의하여 선택된 상기 가중화 모드에 따라, 조정될 상기 스펙트럼 계수와 높은 상관을 가지는 상기 두 개 이상의 스펙트럼 계수를 결정하도록 구성된, 관련 스펙트럼 선택 모듈
을 포함하며,
상기 결정된 조정될 스펙트럼 계수는 양자화되지 않은 스펙트럼 계수 및/또는 양자화 정밀도 임계값보다 낮은 양자화 정밀도를 가지는 스펙트럼 계수를 포함하는, 신호 잡음제거 장치. - 제8항에 있어서,
상기 가중화 유닛은,
상기 높은 인터 프레임 상관 가중화 모드에서, 다음 정보: (1) 선행 프레임의 예측 값, (2) 상기 선행 프레임의 양자화된 스펙트럼 계수, 및 (3) 상기 선행 프레임의 대역 확장 기법(BWE) 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하도록 구성된, 높은 상관 가중화 모듈;
상기 낮은 인터 프레임 상관 가중화 모드에서, 다음 정보: (1) 현재 프레임의 양자화된 스펙트럼 계수, (2) 상기 현재 프레임의 BWE 스펙트럼 계수, 및 (3) 상기 현재 프레임의 기존의 예측 값의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하도록 구성된, 낮은 상관 가중치 모듈; 또는
상기 중간 인터 프레임 상관 가중화 모드에서, 다음 정보: (1) 상기 선행 프레임 또는 상기 현재 프레임의 상기 예측 값, (2) 상기 선행 프레임 또는 상기 현재 프레임의 상기 양자화된 스펙트럼 계수, 및 (3) 상기 선행 프레임 또는 상기 현재 프레임의 BWE 스펙트럼 계수의 하나 이상의 유형의 가중화 값에 따라 조정될 상기 스펙트럼 계수의 예측 값을 획득하도록 구성된, 중간 상관 가중화 모듈
중 어느 하나를 포함하는,
신호 잡음제거 장치. - 제8항에 있어서,
상기 조정 및 출력 유닛은,
조정될 상기 스펙트럼 계수의 에너지의 상한 임계값 및 상기 획득한 예측 값에 따라, 조정될 상기 스펙트럼 계수의 수정 값을 생성하고, 상기 수정 값을 사용하여 상기 디코딩한 신호의 상기 스펙트럼을 조정하도록 구성된, 수정 모듈을 포함하고, 조정될 상기 스펙트럼 계수의 상기 수정 값의 에너지는 조정될 상기 스펙트럼 계수의 상기 에너지의 상기 상한 임계값보다 작거나 같은,
신호 잡음제거 장치. - 코어 디코더, 대역 확장 기법(BWE) 디코더, 역양자화 디코더, 및 제8항 내지 제10항 중 어느 한 항에 따른 신호 잡음제거 장치를 포함하고,
상기 코어 디코더는 제1 계층 코드 스트림의 저주파 정보를 디코딩하도록 구성되고;
상기 BWE 디코더는 제2 계층 코드 스트림의 BWE 정보를 디코딩하도록 구성되고;
상기 역양자화 디코더는 나머지 비트의 제3 계층 코드 스트림의 고주파 대역 정보를 디코딩하고 역양자화하도록 구성되고; 및
상기 신호 잡음제거 장치는 상기 BWE 디코더 및 상기 역양자화 디코더에 의하여 출력된 상기 디코딩한 정보를 수신하고, 상기 디코딩한 정보에서 조정될 스펙트럼 계수를 결정하고, 조정될 상기 스펙트럼 계수의 획득한 예측 값에 따라 상기 디코딩한 정보에서 스펙트럼 계수를 조정하도록 구성된,
오디오 디코딩 시스템. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910133808.6 | 2009-03-31 | ||
| CN200910133808 | 2009-03-31 | ||
| PCT/CN2009/076155 WO2010111876A1 (zh) | 2009-03-31 | 2009-12-28 | 一种信号去噪的方法和装置及音频解码系统 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020137015052A Division KR101320963B1 (ko) | 2009-03-31 | 2009-12-28 | 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20120000091A KR20120000091A (ko) | 2012-01-03 |
| KR101390433B1 true KR101390433B1 (ko) | 2014-04-29 |
Family
ID=42827479
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020117024686A KR101390433B1 (ko) | 2009-03-31 | 2009-12-28 | 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 |
| KR1020137015052A KR101320963B1 (ko) | 2009-03-31 | 2009-12-28 | 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020137015052A KR101320963B1 (ko) | 2009-03-31 | 2009-12-28 | 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US8965758B2 (ko) |
| EP (2) | EP2407965B1 (ko) |
| JP (1) | JP5459688B2 (ko) |
| KR (2) | KR101390433B1 (ko) |
| WO (1) | WO2010111876A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020180090A1 (ko) * | 2019-03-06 | 2020-09-10 | 삼성전자 주식회사 | 간소화된 상관을 위한 전자 장치, 방법, 및 컴퓨터 판독가능 매체 |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5997592B2 (ja) * | 2012-04-27 | 2016-09-28 | 株式会社Ｎｔｔドコモ | 音声復号装置 |
| EP2720222A1 (en) | 2012-10-10 | 2014-04-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for efficient synthesis of sinusoids and sweeps by employing spectral patterns |
| US9602841B2 (en) * | 2012-10-30 | 2017-03-21 | Texas Instruments Incorporated | System and method for decoding scalable video coding |
| CN105976824B (zh) * | 2012-12-06 | 2021-06-08 | 华为技术有限公司 | 信号解码的方法和设备 |
| US10410645B2 (en) * | 2014-03-03 | 2019-09-10 | Samsung Electronics Co., Ltd. | Method and apparatus for high frequency decoding for bandwidth extension |
| KR102400016B1 (ko) | 2014-03-24 | 2022-05-19 | 삼성전자주식회사 | 고대역 부호화방법 및 장치와 고대역 복호화 방법 및 장치 |
| EP2980792A1 (en) * | 2014-07-28 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for generating an enhanced signal using independent noise-filling |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100843522B1 (ko) * | 2005-05-31 | 2008-07-03 | 닛본 덴끼 가부시끼가이샤 | 노이즈 억제를 위한 방법 및 장치 |
| KR101143792B1 (ko) * | 2004-06-28 | 2012-05-15 | 소니 주식회사 | 신호 부호화 장치 및 방법, 및 신호 복호 장치 및 방법 |
Family Cites Families (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6014544A (ja) | 1983-07-05 | 1985-01-25 | Omron Tateisi Electronics Co | スペクトラム拡散通信の受信回路 |
| US5237587A (en) | 1992-11-20 | 1993-08-17 | Magnavox Electronic Systems Company | Pseudo-noise modem and related digital correlation method |
| JPH09261065A (ja) * | 1996-03-25 | 1997-10-03 | Mitsubishi Electric Corp | 量子化装置及び逆量子化装置及び量子化逆量子化システム |
| JPH1020011A (ja) | 1996-07-02 | 1998-01-23 | Oki Electric Ind Co Ltd | 方位分析方法及び装置 |
| JP3613303B2 (ja) * | 1996-08-08 | 2005-01-26 | 富士通株式会社 | 音声情報圧縮蓄積方法及び装置 |
| KR20030096444A (ko) | 1996-11-07 | 2003-12-31 | 마쯔시다덴기산교 가부시키가이샤 | 음원 벡터 생성 장치 및 방법 |
| US5940435A (en) | 1996-11-21 | 1999-08-17 | Dsp Group, Inc. | Method for compensating filtering delays in a spread-spectrum receiver |
| EP0878790A1 (en) * | 1997-05-15 | 1998-11-18 | Hewlett-Packard Company | Voice coding system and method |
| FR2768546B1 (fr) * | 1997-09-18 | 2000-07-21 | Matra Communication | Procede de debruitage d'un signal de parole numerique |
| US6548465B2 (en) | 2000-03-10 | 2003-04-15 | General Electric Company | Siloxane dry cleaning composition and process |
| US6931373B1 (en) * | 2001-02-13 | 2005-08-16 | Hughes Electronics Corporation | Prototype waveform phase modeling for a frequency domain interpolative speech codec system |
| JP3457293B2 (ja) * | 2001-06-06 | 2003-10-14 | 三菱電機株式会社 | 雑音抑圧装置及び雑音抑圧方法 |
| US7447631B2 (en) * | 2002-06-17 | 2008-11-04 | Dolby Laboratories Licensing Corporation | Audio coding system using spectral hole filling |
| KR100524065B1 (ko) | 2002-12-23 | 2005-10-26 | 삼성전자주식회사 | 시간-주파수 상관성을 이용한 개선된 오디오 부호화및/또는 복호화 방법과 그 장치 |
| JP4311034B2 (ja) * | 2003-02-14 | 2009-08-12 | 沖電気工業株式会社 | 帯域復元装置及び電話機 |
| KR100608062B1 (ko) * | 2004-08-04 | 2006-08-02 | 삼성전자주식회사 | 오디오 데이터의 고주파수 복원 방법 및 그 장치 |
| US8229749B2 (en) * | 2004-12-10 | 2012-07-24 | Panasonic Corporation | Wide-band encoding device, wide-band LSP prediction device, band scalable encoding device, wide-band encoding method |
| WO2006107833A1 (en) * | 2005-04-01 | 2006-10-12 | Qualcomm Incorporated | Method and apparatus for vector quantizing of a spectral envelope representation |
| WO2007052612A1 (ja) * | 2005-10-31 | 2007-05-10 | Matsushita Electric Industrial Co., Ltd. | ステレオ符号化装置およびステレオ信号予測方法 |
| FR2898209B1 (fr) * | 2006-03-01 | 2008-12-12 | Parrot Sa | Procede de debruitage d'un signal audio |
| JP2008033269A (ja) * | 2006-06-26 | 2008-02-14 | Sony Corp | デジタル信号処理装置、デジタル信号処理方法およびデジタル信号の再生装置 |
| JP4769673B2 (ja) * | 2006-09-20 | 2011-09-07 | 富士通株式会社 | オーディオ信号補間方法及びオーディオ信号補間装置 |
| WO2008105263A1 (ja) * | 2007-02-28 | 2008-09-04 | Nec Corporation | 重み係数学習システム及び音声認識システム |
| CN101046964B (zh) * | 2007-04-13 | 2011-09-14 | 清华大学 | 基于重叠变换压缩编码的错误隐藏帧重建方法 |
| CN101067650A (zh) * | 2007-06-08 | 2007-11-07 | 骆建华 | 基于部分频谱数据信号重构的信号去噪方法 |
| JP2009047831A (ja) | 2007-08-17 | 2009-03-05 | Toshiba Corp | 特徴量抽出装置、プログラムおよび特徴量抽出方法 |
| DK3401907T3 (da) * | 2007-08-27 | 2020-03-02 | Ericsson Telefon Ab L M | Fremgangsmåde og indretning til perceptuel spektral afkodning af et audiosignal omfattende udfyldning af spektrale huller |
-
2009
- 2009-12-28 WO PCT/CN2009/076155 patent/WO2010111876A1/zh active Application Filing
- 2009-12-28 KR KR1020117024686A patent/KR101390433B1/ko active IP Right Grant
- 2009-12-28 JP JP2012502425A patent/JP5459688B2/ja active Active
- 2009-12-28 EP EP09842532A patent/EP2407965B1/en active Active
- 2009-12-28 EP EP12190501A patent/EP2555191A1/en not_active Withdrawn
- 2009-12-28 KR KR1020137015052A patent/KR101320963B1/ko active IP Right Grant
-
2011
- 2011-09-29 US US13/248,725 patent/US8965758B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101143792B1 (ko) * | 2004-06-28 | 2012-05-15 | 소니 주식회사 | 신호 부호화 장치 및 방법, 및 신호 복호 장치 및 방법 |
| KR100843522B1 (ko) * | 2005-05-31 | 2008-07-03 | 닛본 덴끼 가부시끼가이샤 | 노이즈 억제를 위한 방법 및 장치 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020180090A1 (ko) * | 2019-03-06 | 2020-09-10 | 삼성전자 주식회사 | 간소화된 상관을 위한 전자 장치, 방법, 및 컴퓨터 판독가능 매체 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2407965A1 (en) | 2012-01-18 |
| US20120022878A1 (en) | 2012-01-26 |
| JP5459688B2 (ja) | 2014-04-02 |
| KR20130086634A (ko) | 2013-08-02 |
| EP2555191A1 (en) | 2013-02-06 |
| JP2012522272A (ja) | 2012-09-20 |
| EP2407965B1 (en) | 2012-12-12 |
| KR20120000091A (ko) | 2012-01-03 |
| EP2407965A4 (en) | 2012-01-18 |
| WO2010111876A1 (zh) | 2010-10-07 |
| KR101320963B1 (ko) | 2013-10-23 |
| US8965758B2 (en) | 2015-02-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101390433B1 (ko) | 신호 잡음 제거 방법, 신호 잡음 제거 장치, 및 오디오 디코딩 시스템 | |
| US10096323B2 (en) | Frame error concealment method and apparatus and decoding method and apparatus using the same | |
| AU2020281040B2 (en) | Audio encoder and decoder | |
| JP4546464B2 (ja) | スケーラブル符号化装置、スケーラブル復号化装置、およびこれらの方法 | |
| JP6158421B2 (ja) | 先進量子化器 | |
| RU2707144C2 (ru) | Аудиокодер и способ для кодирования аудиосигнала |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| A107 | Divisional application of patent | ||
| E90F | Notification of reason for final refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20170322 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20180403 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20190328 Year of fee payment: 6 |