KR101381513B1 - 음성/음악 통합 신호의 부호화/복호화 장치 - Google Patents
음성/음악 통합 신호의 부호화/복호화 장치 Download PDFInfo
- Publication number
- KR101381513B1 KR101381513B1 KR1020090061608A KR20090061608A KR101381513B1 KR 101381513 B1 KR101381513 B1 KR 101381513B1 KR 1020090061608 A KR1020090061608 A KR 1020090061608A KR 20090061608 A KR20090061608 A KR 20090061608A KR 101381513 B1 KR101381513 B1 KR 101381513B1
- Authority
- KR
- South Korea
- Prior art keywords
- signal
- input signal
- music
- encoding
- frequency band
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
- G10L19/12—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters the excitation function being a code excitation, e.g. in code excited linear prediction [CELP] vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
Abstract
음성/음악 통합 신호의 부호화/복호화 장치가 개시된다. 음성/음악 통합 신호의 부호화 장치는, 입력 신호의 특성을 분석하는 입력 신호 분석부, 상기 입력 신호가 스트레오 신호인 경우 모노 신호로 다운믹스하고, 스테레오 음상 정보를 추출하는 스테레오 부호화부, 상기 입력 신호를 고주파 대역신호로 확장하는 주파수 대역 확장부, 상기 주파수 대역 확장부의 출력 신호에 대한 샘플링율을 변환하는 샘플링율 변환부, 상기 입력 신호가 음성 특성을 가지는 신호인 경우, 음성 부호화 모듈을 사용하여 상기 입력 신호를 부호화하는 음성 신호 부호화부, 상기 입력 신호가 음악 특성을 가지는 신호인 경우, 음악 부호화 모듈을 사용하여 상기 입력 신호를 부호화하는 음악 신호 부호화부 및 상기 음성 신호 부호화부의 출력 신호 및 상기 음악 신호 부호화부의 출력 신호를 이용하여 비트스트림을 생성하는 비트스트림 생성부를 포함한다.
음성, 음악, 복호화, 부호화, 샘플링율 변환
Description
음성/음악 통합 신호의 부호화/복호화 장치에 관한 것으로 특히, 음성과 음악 신호에 대해 서로 다른 구조로 동작하는 부/복호화 모듈을 가지고 입력 신호의 특성에 따라 내부 모듈을 효과적으로 선택하여, 음성/음악 모든 신호에 대해 효과적으로 부호화하는 방법 및 장치에 관한 것이다.
본 발명은 지식경제부 및 정보통신연구진흥원의 IT원천기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2008-F-011-01, 과제명: 차세대 DTV 핵심기술개발].
음성 신호와 음악 신호는 서로 다른 특성을 가지며, 각 신호의 고유 특성을 활용하여 각 신호에 특화된 음성 코덱과 음악 코덱이 독립적으로 연구되고 각각의 표준 코덱이 개발되었다. 현재 널리 사용되는 음성 코덱(AMR-WB+)은 CELP 구조를 가지며, 음성의 발성 모델에 따라 LPC 기반으로 음성 파라미터를 추출하고 양자화 하는 구조를 가진다. 반면, 현재 널리 사용되는 음악 코덱(HE-AAC V2)은 주파수 영역에서 인간의 청각 특성을 고려하여 심리음향 측면에서 최적으로 주파수 계수를 양자화 하는 구조를 가지고 있다.
따라서, 음악 신호 부호화기 및 음성 신호 부호화기를 통합함과 동시에 신호의 특성 및 비트율에 따라 적절한 부호화 방식을 선택하여 보다 효과적으로 부호화/복호화를 수행할 수 있는 코덱이 요구된다.
본 발명은 입력 신호의 특성에 따라 내부 모듈을 효과적으로 선택함으로써, 다양한 비트율에서 음성 신호 및 음악 신호 모두에 대해 우수한 음질을 제공하는 부호화/복호화 장치 및 방법을 제공한다.
본 발명은 샘플링율 변환 이전에 주파수 대역을 확장함으로써, 더 넓은 대역으로 주파수 확장 가능한 부호화/복호화 장치 및 방법을 제공한다.
본 발명의 일실시예에 따른 음성/음악 통합 신호의 부호화 장치는, 입력 신호의 특성을 분석하는 입력 신호 분석부, 상기 입력 신호가 스트레오 신호인 경우 모노 신호로 다운믹스하고, 스테레오 음상 정보를 추출하는 스테레오 부호화부, 상기 입력 신호를 고주파 대역신호로 확장하는 주파수 대역 확장부, 상기 주파수 대역 확장부의 출력 신호에 대한 샘플링율을 변환하는 샘플링율 변환부, 상기 입력 신호가 음성 특성을 가지는 신호인 경우, 음성 부호화 모듈을 사용하여 상기 입력 신호를 부호화하는 음성 신호 부호화부, 상기 입력 신호가 음악 특성을 가지는 신호인 경우, 음악 부호화 모듈을 사용하여 상기 입력 신호를 부호화하는 음악 신호 부호화부 및 상기 음성 신호 부호화부의 출력 신호 및 상기 음악 신호 부호화부의 출력 신호를 이용하여 비트스트림을 생성하는 비트스트림 생성부를 포함할 수 있다.
본 발명의 일측면에 따르면, 상기 입력 신호 분석부는, 상기 입력 신호의 ZCR(Zero Crossing Rate), 상관관계, 및 프레임 단위의 에너지 중 적어도 하나를 이용하여 상기 입력 신호를 분석할 수 있다.
본 발명의 일측면에 따르면, 상기 스테레오 음상 정보는, 좌/우 채널의 상관관계 및 좌/우 채널의 레벨 차이 중 적어도 하나를 포함할 수 있다.
본 발명의 일측면에 따르면, 상기 주파수 대역 확장부는, 상기 샘플링율의 변환에 앞서 상기 입력 신호를 고주파 대역신호로 확장할 수 있다.
본 발명의 일측면에 따르면, 상기 샘플링율 변환부는, 상기 음성 신호 부호화부 또는 음악 신호 부호화부에서 요구하는 샘플링율로 상기 입력 신호의 샘플링율을 변환할 수 있다.
본 발명의 일측면에 따르면, 상기 샘플링율 변환부는, 입력 신호를 1/2로 다운 샘플링하는 제1 다운샘플링부, 상기 제1 다운샘플링부의 출력 신호를 1/2로 다운 샘플링하는 제2 다운샘플링부를 포함할 수 있다.
본 발명의 일측면에 따르면, 상기 비트스트림 생성부는, 상기 입력 신호가 음성 특성 신호와 음악 특성 신호 사이에서 변화하는 경우, 프레임 단위의 변화를 보상하는 정보를 비트스트림에 저장할 수 있다.
본 발명의 일측면에 따르면, 상기 프레임 단위의 변화를 보상하는 정보는, 입력 신호의 특성에 따른 시간/주파수 변환 방법 및 시간/주파수 변환 크기 중 적어도 하나를 포함할 수 있다.
본 발명의 일실시예에 따른 음성/음악 통합 신호의 복호화 장치는, 입력된 비트스트림 신호를 분석하는 비트스트림 분석부, 상기 비트스트림 신호가 음성 특 성 신호에 대한 비트스트림인 경우, 음성 복호화 모듈을 사용하여 상기 비트스트림 신호를 복호화하는 음성 신호 복호화부, 상기 비트스트림 신호가 음악 특성 신호에 대한 비트스트림인 경우, 음악 복호화 모듈을 사용하여 상기 비트스트림 신호를 복호화하는 음악 신호 복호화부, 상기 음악 특성 신호와 상기 음성 특성 신호 사이의 변환시 변환 처리를 수행하는 신호 보상부, 상기 비트스트림 신호의 샘플링율을 변환하는 샘플링율 변환부, 복호화된 저주파 대역 신호를 이용하여 고주파 대역 신호를 생성하는 주파수 대역 확장부 및 스트레오 확장 파라미터를 이용하여 스트레오 신호를 생성하는 스테레오 복호화부를 포함할 수 있다.
본 발명의 일실시예에 따르면, 입력 신호의 특성에 따라 내부 모듈을 효과적으로 선택함으로써, 다양한 비트율에서 음성 신호 및 음악 신호 모두에 대해 우수한 음질을 제공하는 부호화/복호화 장치 및 방법이 제공된다.
본 발명의 일실시예에 따르면, 샘플링율 변환 이전에 주파수 대역을 확장함으로써, 더 넓은 대역으로 주파수 확장 가능한 부호화/복호화 장치 및 방법이 제공된다.
이하, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다. 다만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 있어서, 음성/음악 통합 신호의 부호화 장치 를 도시한 도면이다.
도 1을 참고하면, 음성/음악 통합 신호의 부호화 장치(100)는 입력 신호 분석부(110), 스테레오 부호화부(120), 주파수 대역 확장부(130), 샘플링율 변환부(140), 음성 신호 부호화부(150), 음악 신호 부호화부(160), 및 비트스트림 생성부(170)를 포함할 수 있다.
입력 신호 분석부(110)는 입력 신호의 특성을 분석할 수 있다. 즉, 입력 신호 분석부(110)는 입력 신호의 특성을 분석하여 음성 특성을 갖는 신호인지, 음악 특성을 갖는 신호인지를 분리할 수 있다. 이때, 입력신호 분석을 위해 입력 신호의 ZCR(Zero Crossing Rate), 상관관계, 및 프레임 단위의 에너지 중 적어도 하나를 이용할 수 있다.
스테레오 부호화부(120)는 입력 신호를 모노 신호로 다운믹스하고, 스테레오 음상 정보를 추출할 수 있다. 이때, 스테레오 음상 정보는, 좌/우 채널의 상관관계 및 좌/우 채널의 레벨 차이 중 적어도 하나를 포함할 수 있다.
주파수 대역 확장부(130)는 입력 신호를 고주파 대역신호로 확장할 수 있다. 이때, 샘플링율의 변환에 앞서 상기 입력 신호를 고주파 대역신호로 확장할 수 있다. 여기서, 주파수 대역 확장부(130)의 동작은 도 3을 참고하여 이하에서 더욱 상세하게 설명한다.
도 3은 본 발명의 일실시예에 있어서, 주파수 대역 확장부의 시작 및 끝 주파수 대역을 도시한 도면이다.
도 3의 표(300)를 참고하면, 주파수 대역 확장부(130)는 모노 다운믹스 신 호가 음악 특성 신호인 경우, 도 3에 예시된 바와 같이, 비트율에 따른 고주파 대역신호를 생성하기 위한 정보를 추출할 수 있다. 한편, 음성 특성 신호는 일예로, 입력 오디오 신호의 샘플링 율이 48kHz인 경우, start 주파수 대역을 6kHz로 고정하고, Stop 주파수 대역은 음악 특성 신호와 동일한 값을 이용하도록 할 수 있다. 여기서, 음성 특성 신호의 start 주파수 대역은 음성 특성 신호 부호화 모듈에서 사용하는 부호화 모듈의 설정에 따라 다양한 값을 가질 수 있다. 또한, 주파수 대역 확장부(130)에서 사용하는 Stop 주파수 대역은 입력 신호의 샘플링 율이나 설정한 비트율에 따라 다양한 값으로 설정될 수 있다. 주파수 대역 확장부(130)는 조성(tonality), 블록 단위의 에너지 값 등의 정보를 사용하여 동작될 수 있다. 또한, 음성 특성 신호와 음악 특성 신호에 따라 주파수 대역 확장에 관한 정보가 달라지는데, 상기 주파수 대역 확장에 관한 정보를 음성 특성 신호와 음악 특성 신호 사이에 변환이 발생할 때 비트스트림에 저장하도록 할 수 있다.
다시 도 1을 참고하면, 샘플링율 변환부(140)는 입력 신호의 샘플링율을 변환할 수 있다. 여기서, 샘플링율 변환부(140)는 입력신호를 부호화하기 전에 입력신호를 전처리하는 과정에 해당한다. 따라서, 샘플링율 변환부(140)는 입력 비트율에 따라 코어(core) 대역의 주파수대역을 변경하기 위해, 입력 오디오 신호의 샘플링 율을 변환할 수 있다. 이때, 샘플링 율 변환을 주파수 대역 확장 다음에 수행함으로써, 주파수 대역 확장에서의 주파수 대역 설정이 코어 대역에서 사용하는 샘플링 율에 고정되지 않고 더 넓은 대역으로 확장이 가능할 수 있다.
여기서, 샘플링율 변환부(140)는 도 2를 참고하여 이하에서 더욱 상세하게 설명한다.
도 2는 도 2에 도시된 샘플링율 변환부의 일례를 도시한 도면이다.
도 2를 참고하면, 샘플링율 변환부(140)는 제1 다운샘플링부(210) 및 제2 다운샘플링부(220)를 포함할 수 있다.
제1 다운샘플링부(210)는 입력 신호를 1/2로 다운 샘플링할 수 있다. 예를 들어, 제1 다운샘플링부(210)는 음악 부호화 모듈이 AAC(advanced audio coding) 기반의 부호화 모듈을 사용하는 경우, 1/2 다운샘플링을 수행할 수 있다.
제2 다운샘플링부(220)는 제1 다운샘플링부의 출력 신호를 1/2로 다운 샘플링할 수 있다. 예를 들어, 제2 다운샘플링부(220)는 음성 부호화 모듈이 AMR-WB+(Adaptive Multi-Rate Wideband Plus) 기반의 부호화 모듈을 사용하는 경우, 상기 제1 다운샘플링부의 출력 신호를 1/2 다운샘플링할 수 있다.
따라서, 음악 신호 부호화부(160)에서 AAC 기반의 부호화 모듈을 사용하는 경우, 샘플링 율 변환부(140)에서는 1/2로 다운 샘플링 한 신호를 생성하고, 음성 신호 부호화부(150)에서 AMR-WB+ 기반의 부호화 모듈을 사용하는 경우 1/4로 다운 샘플링을 수행할 수 있다. 따라서, 샘플링 변환부(140)를 음성 신호 부호화부(150) 및 음악 신호 부호화부(160) 앞에 두어, 음성/음악 신호 부호화 모듈이 처리하는 샘플링 율이 다를 때, 이를 미리 고려하여, 샘플링 변환부(140)에서 처리한 후 음성 신호 부호화 모듈 또는 음악 신호 부호화 모듈에 입력할 수 있도록 한다.
또한, 샘플링율 변환부(140)는 상기 음성 신호 부호화부 또는 음악 신호 부호화부에서 요구하는 샘플링율로 상기 입력 신호의 샘플링율을 변환할 수 있다.
다시 도 1을 참고하면, 음성 신호 부호화부(150)는 입력 신호가 음성 특성을 가지는 신호인 경우, 음성 부호화 모듈을 사용하여 상기 입력 신호를 부호화할 수 있다. 여기서, 입력 신호가 음성 특성을 가지는 신호인 경우, 주파수 대역 확장을 하지 않는 코어(core) 대역에 대해 음성 특성 신호 부호화 모듈에서 부호화를 수행할 수 있다. 한편, 음성 신호 부호화부(150)는 CELP(Code Excitation Linear Prediction) 기반의 음성 부호화 모듈을 사용할 수 있다.
음악 신호 부호화부(160)는 입력 신호가 음악 특성을 가지는 신호인 경우, 음악 부호화 모듈을 사용하여 상기 입력 신호를 부호화할 수 있다. 여기서, 입력 신호가 음악 특성을 가지는 신호인 경우, 주파수 대역 확장을 하지 않는 코어 대역에 대해 음악 특성 신호 부호화 모듈에서 부호화를 수행할 수 있다.
한편, 음악 신호 부호화부(160)는 시간/주파수 기반의 음성 부호화 모듈을 사용할 수 있다.
비트스트림 생성부(170)는 음성 신호 부호화부의 출력 신호 및 음악 신호 부호화부의 출력 신호를 이용하여 비트스트림을 생성할 수 있다. 이때, 비트스트림 생성부(170)는 상기 입력 신호가 음성 특성 신호와 음악 특성 신호 사이에서 변화하는 경우, 프레임 단위의 변화를 보상하는 정보를 비트스트림에 저장할 수 있다. 여기서, 상기 프레임 단위의 변화를 보상하는 정보는, 입력 신호의 특성에 따른 시간/주파수 변환 방법 및 시간/주파수 변환 크기 중 적어도 하나를 포함할 수 있다. 상기 프레임 단위의 변화를 보상하는 정보를 이용하여 복호화기에서 음성 특성 신호 프레임과 음악 특성 신호 프레임 사이의 변환을 수행하도록 할 수 있다.
한편, 타겟(target) 비트율에 따른 음성/음악 통합 신호의 부호화 장치(100)의 동작은 도 4를 참고하여 이하에서 상세하게 설명한다.
도 4는 본 발명의 일실시예에 있어서, 비트율에 따른 모듈 별 동작을 도시한 도면이다.
도 4의 표(400)를 참고하면, 입력 신호가 모노인 경우, 스테레오 부호화 모듈을 모두 OFF로 하고, 비트율이 12kbps, 16kbps인 경우 음악 특성 신호 부호화 모듈을 OFF로 할 수 있다. 여기서, 비트율 12kbps, 16kbps에서 음악 특성 신호 부호화 모듈을 OFF 하는 이유는 낮은 비트율에서는 CELP 기반의 음성 부호화 모듈을 이용하여 음악 특성 신호를 부호화 하는 것이 음악 부호화 모듈을 이용하여 부호화하는 것보다 우수한 음질을 보여주기 때문이다. 따라서, 비트율 12kbps, 16kbps에서 모노 입력 신호에 대한 부호화는 음악 부호화 모듈, 스테레오 부호화 모듈, 입력 신호 분석 모듈을 OFF한 다음, 음성 신호 부호화 모듈과 주파수 대역 확장 모듈만을 이용할 수 있다.
비트율 20kbps, 24kbps, 32kbps에서는 음성 특성 신호와 음악 특성 신호에 따라 음성 신호 부호화 모듈과 음악 신호 부호화 모듈을 번갈아 가면서 사용할 수 있다. 즉, 입력 신호 분석 모듈에서 입력 신호를 분석하여 음성 특성 신호인 경우, 음성 부호화 모듈을 통해 부호화 하고, 음악 특성 신호인 경우, 음악 부호화 모듈을 이용하여 부호화할 수 있다.
비트율 64kbps에서는 사용 가능한 비트가 충분하기 때문에, 시간/주파수 변환 기반의 음악 부호화 모듈의 성능이 향상된다. 따라서 64kbps에서는 음성 부호 화 모듈과 입력 신호 분석 모듈을 OFF하고, 입력 신호를 모두 음악 부호화 모듈 및 주파수 대역 확장 모듈을 이용하여 부호화 할 수 있다.
입력 신호가 스테레오인 경우, 스테레오 부호화 모듈을 동작 시킬 수 있다. 비트율 12kbps, 16kbps, 20kbps로 부호화 하는 경우, 음악 부호화 모듈과 입력 신호 분석 모듈을 모두 OFF로 한 후, 모든 입력 신호를 스테레오 부호화 모듈, 주파수 대역 확장 모듈 및 음성 부호화 모듈을 통해 부호화 할 수 있다. 일반적으로 스테레오 부호화 모듈에서 사용하는 비트는 4kbps 이하이기 때문에, 20kbps로 스테레오 입력 신호를 부호화하는 경우, 16kbps로 다운믹스한 모노 신호를 부호화 해야 한다. 이 대역은 음성 부호화 모듈이 음악 부호화 모듈 보다 우수한 성능을 보이므로, 입력 신호 분석 모듈을 OFF 하고 모든 입력 신호에 대해 음성 부호화 모듈을 이용하여 부호화를 수행할 수 있다.
입력 스테레오 신호에 대해 비트율 24kbps, 32kbps로 부호화 하는 경우, 입력 신호 분석 모듈의 결과에 따라 음성 특성 신호는 음성 부호화 모듈을 이용하여 부호화 하고, 음악 특성 신호는 음악 부호화 모듈을 이용하여 부호화를 수행할 수 있다.
스테레오 신호를 비트율 64kbps로 부호화 하는 경우, 가용 비트가 많기 때문에, 음악 특성 신호 부호화 모듈만을 이용하여 입력 신호를 부호화 할 수 있다.
예를 들면, 음성 부호화기인 AMR-WB+와 음악 부호화기인 HE-AAC V2(High-Efficiency Advanced Audio Coding version 2)를 이용하여 통합 음성/음악 통합 신호의 부호화 장치(100)를 구성하는 경우, AMR-WB+의 스테레오 모듈과 주파수 대역 확장 모듈의 성능이 우수하지 않기 때문에, HE-AAC V2의 PS(Parametric Stereo) 모듈과 SBR(Spectral Band Replication) 모듈을 이용하여 스테레오 신호에 대한 처리와 주파수 대역 확장을 수행할 수 있다.
12kbps, 16kbps 모노 신호에 대해서는 CELP 기반의 AMR-WB+의 성능이 우수하기 때문에, 코어 대역의 부호화는 AMR-WB+의 ACELP(Algebraic Code Excited Linear Prediction)/TCX(Transform Coded Excitation) 모듈을 이용하고, 주파수 대역의 확장에는 HE-AAC V2의 SBR(Spectral Band Replication) 모듈을 이용할 수 있다.
20kbps, 24kbps, 32kbps에서는 입력 신호를 분석하여 음성 특성 신호인 경우, AMR-WB+의 ACELP/TCX 모듈, 음악 특성 신호인 경우, HE-AAC V2의 AAC 모듈을 이용하여 코어 대역을 부호화 하고, HE-AAC V2의 SBR을 이용하여 주파수 대역 확장을 수행할 수 있다.
64kbps에서는 코어 대역의 부호화에 HE-AAC V2의 AAC 모듈만을 이용하여 부호화를 수행할 수 있다.
스테레오 입력에 대해서는 HE-AAC V2의 PS모듈을 이용하여 스테레오 부호화를 수행하고, 모드에 따라 적절하게 ARM-WB+의 ACELP/TCX 모듈과 HE-AAC V2의 AAC 모듈을 선택하여 코어 대역에 대한 부호화를 수행할 수 있다.
상기와 같이, 입력 신호의 특성에 따라 내부 모듈을 효과적으로 선택함으로써, 다양한 비트율에서 음성 신호 및 음악 신호 모두에 대해 우수한 음질을 제공하고, 샘플링율 변환 이전에 주파수 대역을 확장함으로써, 더 넓은 대역으로 주파수 확장이 가능할 수 있다.
도 5는 본 발명의 일실시예에 있어서, 음성/음악 통합 신호의 복호화 장치를 도시한 도면이다.
도 5를 참고하면, 음성/음악 통합 신호의 복호화 장치(500)는 비트스트림 분석부(510), 음성 신호 복호화부(520), 음악 신호 복호화부(530), 신호 보상부(540), 샘플링율 변환부(550), 주파수 대역 확장부(560), 및 스테레오 복호화부(570)를 포함할 수 있다.
비트스트림 분석부(510)는 입력된 비트스트림 신호를 분석할 수 있다.
음성 신호 복호화부(520)는 비트스트림 신호가 음성 특성 신호에 대한 비트스트림인 경우, 음성 복호화 모듈을 사용하여 상기 비트스트림 신호를 복호화할 수 있다.
음악 신호 복호화부(530)는 비트스트림 신호가 음악 특성 신호에 대한 비트스트림인 경우, 음악 복호화 모듈을 사용하여 상기 비트스트림 신호를 복호화할 수 있다.
신호 보상부(540)는 음악 특성 신호와 음성 특성 신호 사이의 변환시 변환 처리를 수행할 수 있다. 즉, 음성 특성 신호와 음악 특성 신호 사이의 변환 시, artifact가 발생하지 않도록 각각의 특성에 따른 변환 정보를 이용하여 부드럽게 음성 특성 신호와 음악 특성 신호 사이를 변환하도록 처리할 수 있다.
샘플링율 변환부(550)는 비트스트림 신호의 샘플링율을 변환할 수 있다. 따라서, 샘플링율 변환부(550)는 코어 대역에서 사용한 샘플링 율을 원 샘플링 율 로 변환하여 주파수 대역 확장 모듈이나 스테레오 부호화 모듈에서 사용하기 위한 신호를 생성할 수 있다. 즉, 코어 대역에서 변환하여 사용한 샘플링 율을 변환전 샘플링 율로 재변환하여 주파수 대역 확장 모듈이나 스테레오 부호화 모듈에서 사용하기 위한 신호를 생성할 수 있다.
주파수 대역 확장부(560)는 복호화된 저주파 대역 신호를 이용하여 고주파 대역 신호를 생성할 수 있다.
스테레오 복호화부(570)는 스트레오 확장 파라미터를 이용하여 스트레오 신호를 생성할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.
도 1은 본 발명의 일실시예에 있어서, 음성/음악 통합 신호의 부호화 장치를 도시한 도면이다.
도 2는 도 1에 도시된 샘플링율 변환부의 일례를 도시한 도면이다.
도 3은 본 발명의 일실시예에 있어서, 주파수 대역 확장부의 시작 및 끝 주파수 대역을 도시한 도면이다.
도 4는 본 발명의 일실시예에 있어서, 비트율에 따른 모듈 별 동작을 도시한 도면이다.
도 5는 본 발명의 일실시예에 있어서, 음성/음악 통합 신호의 복호화 장치를 도시한 도면이다.
Claims (14)
- 입력 신호의 특성을 분석하는 입력 신호 분석부;상기 입력 신호가 스테레오 신호인 경우 모노 신호로 다운믹스하고, 스테레오 음상 정보를 추출하는 스테레오 부호화부;상기 입력 신호의 주파수 대역을 확장하는 주파수 대역 확장부;상기 주파수 대역 확장부의 출력 신호에 대한 샘플링율을 변환하는 샘플링율 변환부;상기 입력 신호가 음성 특성 신호인 경우, 음성 부호화 모듈을 사용하여 상기 입력 신호의 주파수 대역이 확장되지 않은 코어 대역을 부호화하는 음성 신호 부호화부;상기 입력 신호가 음악 특성 신호인 경우, 음악 부호화 모듈을 사용하여 상기 입력 신호의 주파수 대역이 확장되지 않은 코어 대역을 부호화하는 음악 신호 부호화부; 및상기 음성 신호 부호화부의 출력 신호 및 상기 음악 신호 부호화부의 출력 신호를 이용하여 비트스트림을 생성하는 비트스트림 생성부를 포함하고,상기 주파수 대역 확장부의 출력 결과는, 입력 신호의 특성에 따라 음성 신호 부호화부 및 음악 신호 부호화부 중 어느 하나로 입력되고,상기 샘플링율 변환부는,상기 입력 신호의 입력 비트율에 따라 상기 입력 신호의 주파수 대역이 확장되지 않은 코어(core) 대역의 주파수대역을 변경하기 위해 입력 신호의 샘플링율을 가변적으로 변환하고,상기 샘플링율 변환부는,상기 입력 신호를 1/2로 다운 샘플링하는 제1 다운샘플링부; 및상기 제1 다운샘플링부의 출력 신호를 1/2로 다운 샘플링하는 제2 다운샘플링부를 포함하고,상기 샘플링율 변환부는,상기 제1 다운샘플링부를 이용하여 입력 신호를 1/2 다운샘플링하거나, 또는 상기 제1 다운샘플링부 및 제2 다운샘플링부를 이용하여 입력 신호를 1/4 다운샘플링하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 입력 신호 분석부는,상기 입력 신호의 ZCR(Zero Crossing Rate), 상관관계, 및 프레임 단위의 에너지 중 적어도 하나를 이용하여 상기 입력 신호를 분석하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 스테레오 음상 정보는,좌/우 채널의 상관관계 및 좌/우 채널의 레벨 차이 중 적어도 하나를 포함하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 주파수 대역 확장부는,상기 샘플링율의 변환에 앞서 상기 입력 신호를 고주파 대역신호로 확장하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 샘플링율 변환부는,상기 음성 신호 부호화부 또는 음악 신호 부호화부에서 요구하는 샘플링율로 상기 입력 신호의 샘플링율을 변환하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 삭제
- 제1항에 있어서,상기 제1 다운샘플링부는,상기 음악 부호화 모듈이 AAC(advanced audio coding) 기반의 부호화 모듈인 경우, 1/2 다운샘플링을 수행하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 제2 다운샘플링부는,상기 음성 부호화 모듈이 AMR-WB+(Adaptive Multi-Rate Wideband Plus) 기반의 부호화 모듈인 경우, 상기 제1 다운샘플링부의 출력 신호를 1/2 다운샘플링하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 음성 신호 부호화부는,CELP(Code Excitation Linear Prediction) 기반의 음성 부호화 모듈을 사용 하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 음악 신호 부호화부는,시간/주파수 기반의 음성 부호화 모듈을 사용하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제1항에 있어서,상기 비트스트림 생성부는,상기 입력 신호가 음성 특성 신호와 음악 특성 신호 사이에서 변화하는 경우, 프레임 단위의 변화를 보상하는 정보를 비트스트림에 저장하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 제11항에 있어서,상기 프레임 단위의 변화를 보상하는 정보는,입력 신호의 특성에 따른 시간/주파수 변환 방법 및 시간/주파수 변환 크기 중 적어도 하나를 포함하는 것을 특징으로 하는 음성/음악 통합 신호의 부호화 장치.
- 입력된 비트스트림에 포함된 입력 신호를 분석하는 비트스트림 분석부;상기 입력 신호가 음성 특성 신호인 경우, 음성 복호화 모듈을 사용하여 상기 입력 신호의 주파수 대역이 확장되지 않은 코어 대역을 복호화하는 음성 신호 복호화부;상기 입력 신호가 음악 특성 신호인 경우, 음악 복호화 모듈을 사용하여 상기 입력 신호의 주파수 대역이 확장되지 않은 코어 대역을 복호화하는 음악 신호 복호화부;상기 음악 특성 신호와 상기 음성 특성 신호 사이의 변환시 변환 처리를 수행하는 신호 보상부;상기 입력 신호의 샘플링율을 변환하는 샘플링율 변환부;복호화된 저주파 대역인 코어 대역의 입력 신호를 이용하여 고주파 대역의 입력 신호를 생성하는 주파수 대역 확장부; 및스테레오 확장 파라미터를 이용하여 스테레오 신호를 생성하는 스테레오 복호화부를 포함하고,상기 비트스트림 분석부의 출력 결과는, 상기 입력 신호의 특성에 따라 음성 신호 복호화부 및 음악 신호 복호화부 중 어느 하나로 입력되고,상기 샘플링율 변환부는,상기 입력 신호의 입력 비트율에 따라 상기 입력 신호의 주파수 대역이 확장되지 않은 코어(core) 대역의 주파수대역을 변경하기 위해 입력 신호의 샘플링율을 가변적으로 변환하고,1/2로 다운샘플링된 코어 대역이나, 1/2로 다운샘플링된 결과에 대해 추가적으로 1/2로 다운샘플링된 코어 대역에서 사용된 샘플링율을 변환전 샘플링율로 재변환하는 음성/음악 통합 신호의 복호화 장치.
- 삭제
Priority Applications (14)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/003,979 US8903720B2 (en) | 2008-07-14 | 2009-07-14 | Apparatus for encoding and decoding of integrated speech and audio |
EP09798079.1A EP2302624B1 (en) | 2008-07-14 | 2009-07-14 | Apparatus for encoding and decoding of integrated speech and audio |
PCT/KR2009/003855 WO2010008176A1 (ko) | 2008-07-14 | 2009-07-14 | 음성/음악 통합 신호의 부호화/복호화 장치 |
CN200980135678.8A CN102150204B (zh) | 2008-07-14 | 2009-07-14 | 编码和解码语音与音频统合信号的设备 |
EP18215268.6A EP3493204B1 (en) | 2008-07-14 | 2009-07-14 | Method for encoding of integrated speech and audio |
CN201310487746.5A CN103531203B (zh) | 2008-07-14 | 2009-07-14 | 编码和解码语音与音频统合信号的方法 |
JP2011517359A JP2011527032A (ja) | 2008-07-14 | 2009-07-14 | 音声/音楽統合信号の符号化/復号化装置 |
JP2013152997A JP2013232007A (ja) | 2008-07-14 | 2013-07-23 | 音声/音楽統合信号の符号化/復号化装置 |
JP2014023744A JP6067601B2 (ja) | 2008-07-14 | 2014-02-10 | 音声/音楽統合信号の符号化/復号化装置 |
US14/534,781 US9818411B2 (en) | 2008-07-14 | 2014-11-06 | Apparatus for encoding and decoding of integrated speech and audio |
US15/810,732 US10403293B2 (en) | 2008-07-14 | 2017-11-13 | Apparatus for encoding and decoding of integrated speech and audio |
US16/557,238 US10714103B2 (en) | 2008-07-14 | 2019-08-30 | Apparatus for encoding and decoding of integrated speech and audio |
US16/925,946 US11705137B2 (en) | 2008-07-14 | 2020-07-10 | Apparatus for encoding and decoding of integrated speech and audio |
US18/212,364 US20240119948A1 (en) | 2008-07-14 | 2023-06-21 | Apparatus for encoding and decoding of integrated speech and audio |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080068369 | 2008-07-14 | ||
KR20080068369 | 2008-07-14 | ||
KR20080134297 | 2008-12-26 | ||
KR1020080134297 | 2008-12-26 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120076635A Division KR101565634B1 (ko) | 2008-07-14 | 2012-07-13 | 음성/음악 통합 신호의 부호화/복호화 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100007739A KR20100007739A (ko) | 2010-01-22 |
KR101381513B1 true KR101381513B1 (ko) | 2014-04-07 |
Family
ID=41816651
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090061608A KR101381513B1 (ko) | 2008-07-14 | 2009-07-07 | 음성/음악 통합 신호의 부호화/복호화 장치 |
KR1020120076635A KR101565634B1 (ko) | 2008-07-14 | 2012-07-13 | 음성/음악 통합 신호의 부호화/복호화 장치 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120076635A KR101565634B1 (ko) | 2008-07-14 | 2012-07-13 | 음성/음악 통합 신호의 부호화/복호화 장치 |
Country Status (6)
Country | Link |
---|---|
US (6) | US8903720B2 (ko) |
EP (2) | EP2302624B1 (ko) |
JP (3) | JP2011527032A (ko) |
KR (2) | KR101381513B1 (ko) |
CN (2) | CN102150204B (ko) |
WO (1) | WO2010008176A1 (ko) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101381513B1 (ko) | 2008-07-14 | 2014-04-07 | 광운대학교 산학협력단 | 음성/음악 통합 신호의 부호화/복호화 장치 |
US20110027559A1 (en) | 2009-07-31 | 2011-02-03 | Glen Harold Kirby | Water based environmental barrier coatings for high temperature ceramic components |
US9062564B2 (en) | 2009-07-31 | 2015-06-23 | General Electric Company | Solvent based slurry compositions for making environmental barrier coatings and environmental barrier coatings comprising the same |
JP5565405B2 (ja) * | 2011-12-21 | 2014-08-06 | ヤマハ株式会社 | 音響処理装置および音響処理方法 |
JP2014074782A (ja) * | 2012-10-03 | 2014-04-24 | Sony Corp | 音声送信装置、音声送信方法、音声受信装置および音声受信方法 |
CN109509478B (zh) | 2013-04-05 | 2023-09-05 | 杜比国际公司 | 音频处理装置 |
CN110890101B (zh) * | 2013-08-28 | 2024-01-12 | 杜比实验室特许公司 | 用于基于语音增强元数据进行解码的方法和设备 |
EP4297026A3 (en) | 2013-09-12 | 2024-03-06 | Dolby International AB | Method for decoding and decoder. |
FR3017484A1 (fr) * | 2014-02-07 | 2015-08-14 | Orange | Extension amelioree de bande de frequence dans un decodeur de signaux audiofrequences |
US10090004B2 (en) | 2014-02-24 | 2018-10-02 | Samsung Electronics Co., Ltd. | Signal classifying method and device, and audio encoding method and device using same |
CN105023577B (zh) * | 2014-04-17 | 2019-07-05 | 腾讯科技(深圳)有限公司 | 混音处理方法、装置和系统 |
WO2015163750A2 (ko) * | 2014-04-21 | 2015-10-29 | 삼성전자 주식회사 | 무선 통신 시스템에서 음성 데이터를 송신 및 수신하기 위한 장치 및 방법 |
KR102244612B1 (ko) | 2014-04-21 | 2021-04-26 | 삼성전자주식회사 | 무선 통신 시스템에서 음성 데이터를 송신 및 수신하기 위한 장치 및 방법 |
CN107452391B (zh) | 2014-04-29 | 2020-08-25 | 华为技术有限公司 | 音频编码方法及相关装置 |
WO2016108655A1 (ko) | 2014-12-31 | 2016-07-07 | 한국전자통신연구원 | 다채널 오디오 신호의 인코딩 방법 및 상기 인코딩 방법을 수행하는 인코딩 장치, 그리고, 다채널 오디오 신호의 디코딩 방법 및 상기 디코딩 방법을 수행하는 디코딩 장치 |
KR20160081844A (ko) | 2014-12-31 | 2016-07-08 | 한국전자통신연구원 | 다채널 오디오 신호의 인코딩 방법 및 상기 인코딩 방법을 수행하는 인코딩 장치, 그리고, 다채널 오디오 신호의 디코딩 방법 및 상기 디코딩 방법을 수행하는 디코딩 장치 |
EP3107096A1 (en) * | 2015-06-16 | 2016-12-21 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Downscaled decoding |
GB2549922A (en) | 2016-01-27 | 2017-11-08 | Nokia Technologies Oy | Apparatus, methods and computer computer programs for encoding and decoding audio signals |
EP3288031A1 (en) * | 2016-08-23 | 2018-02-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for encoding an audio signal using a compensation value |
CN108269577B (zh) | 2016-12-30 | 2019-10-22 | 华为技术有限公司 | 立体声编码方法及立体声编码器 |
RU2744362C1 (ru) * | 2017-09-20 | 2021-03-05 | Войсэйдж Корпорейшн | Способ и устройство для эффективного распределения битового бюджета в celp-кодеке |
CN112509591A (zh) * | 2020-12-04 | 2021-03-16 | 北京百瑞互联技术有限公司 | 一种音频编解码方法及系统 |
CN112599138A (zh) * | 2020-12-08 | 2021-04-02 | 北京百瑞互联技术有限公司 | 一种lc3音频编码器的多pcm信号编码方法、装置及介质 |
KR20220117019A (ko) | 2021-02-16 | 2022-08-23 | 한국전자통신연구원 | 학습 모델을 이용한 오디오 신호의 부호화 및 복호화 방법과 그 학습 모델의 트레이닝 방법 및 이를 수행하는 부호화기 및 복호화기 |
KR20220158395A (ko) | 2021-05-24 | 2022-12-01 | 한국전자통신연구원 | 오디오 신호의 부호화 및 복호화 방법과 그 방법을 수행하는 부호화기 및 복호화기 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11175098A (ja) * | 1997-12-12 | 1999-07-02 | Nec Corp | 音声及び音楽符号化方式 |
WO2007083934A1 (en) * | 2006-01-18 | 2007-07-26 | Lg Electronics Inc. | Apparatus and method for encoding and decoding signal |
US20080114608A1 (en) * | 2006-11-13 | 2008-05-15 | Rene Bastien | System and method for rating performance |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5459814A (en) * | 1993-03-26 | 1995-10-17 | Hughes Aircraft Company | Voice activity detector for speech signals in variable background noise |
JPH0738437A (ja) * | 1993-07-19 | 1995-02-07 | Sharp Corp | コーデック装置 |
JPH0897726A (ja) | 1994-09-28 | 1996-04-12 | Victor Co Of Japan Ltd | サブバンド帯域分割/合成方法およびその装置 |
US6134518A (en) * | 1997-03-04 | 2000-10-17 | International Business Machines Corporation | Digital audio signal coding using a CELP coder and a transform coder |
JP3017715B2 (ja) * | 1997-10-31 | 2000-03-13 | 松下電器産業株式会社 | 音声再生装置 |
ES2247741T3 (es) * | 1998-01-22 | 2006-03-01 | Deutsche Telekom Ag | Metodo para conmutacion controlada por señales entre esquemas de codificacion de audio. |
JP3327240B2 (ja) | 1999-02-10 | 2002-09-24 | 日本電気株式会社 | 画像・音声符号化装置 |
US7222070B1 (en) * | 1999-09-22 | 2007-05-22 | Texas Instruments Incorporated | Hybrid speech coding and system |
US7266501B2 (en) * | 2000-03-02 | 2007-09-04 | Akiba Electronics Institute Llc | Method and apparatus for accommodating primary content audio and secondary content remaining audio capability in the digital audio production process |
US6351733B1 (en) * | 2000-03-02 | 2002-02-26 | Hearing Enhancement Company, Llc | Method and apparatus for accommodating primary content audio and secondary content remaining audio capability in the digital audio production process |
DE60204038T2 (de) * | 2001-11-02 | 2006-01-19 | Matsushita Electric Industrial Co., Ltd., Kadoma | Vorrichtung zum codieren bzw. decodieren eines audiosignals |
US6785645B2 (en) * | 2001-11-29 | 2004-08-31 | Microsoft Corporation | Real-time speech and music classifier |
US7337108B2 (en) * | 2003-09-10 | 2008-02-26 | Microsoft Corporation | System and method for providing high-quality stretching and compression of a digital audio signal |
JP2005099243A (ja) | 2003-09-24 | 2005-04-14 | Konica Minolta Medical & Graphic Inc | 銀塩光熱写真ドライイメージング材料及び画像形成方法 |
JP4679049B2 (ja) * | 2003-09-30 | 2011-04-27 | パナソニック株式会社 | スケーラブル復号化装置 |
KR100614496B1 (ko) | 2003-11-13 | 2006-08-22 | 한국전자통신연구원 | 가변 비트율의 광대역 음성 및 오디오 부호화 장치 및방법 |
CA2457988A1 (en) * | 2004-02-18 | 2005-08-18 | Voiceage Corporation | Methods and devices for audio compression based on acelp/tcx coding and multi-rate lattice vector quantization |
ATE527654T1 (de) * | 2004-03-01 | 2011-10-15 | Dolby Lab Licensing Corp | Mehrkanal-audiodecodierung |
RU2381571C2 (ru) * | 2004-03-12 | 2010-02-10 | Нокиа Корпорейшн | Синтезирование монофонического звукового сигнала на основе кодированного многоканального звукового сигнала |
EP1742455A1 (en) * | 2004-04-09 | 2007-01-10 | NEC Corporation | Audio communication method and device |
SE0400998D0 (sv) | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Method for representing multi-channel audio signals |
JP2006325162A (ja) | 2005-05-20 | 2006-11-30 | Matsushita Electric Ind Co Ltd | バイノーラルキューを用いてマルチチャネル空間音声符号化を行うための装置 |
US7953605B2 (en) * | 2005-10-07 | 2011-05-31 | Deepen Sinha | Method and apparatus for audio encoding and decoding using wideband psychoacoustic modeling and bandwidth extension |
KR100647336B1 (ko) * | 2005-11-08 | 2006-11-23 | 삼성전자주식회사 | 적응적 시간/주파수 기반 오디오 부호화/복호화 장치 및방법 |
US7953604B2 (en) * | 2006-01-20 | 2011-05-31 | Microsoft Corporation | Shape and scale parameters for extended-band frequency coding |
KR20070077652A (ko) | 2006-01-24 | 2007-07-27 | 삼성전자주식회사 | 적응적 시간/주파수 기반 부호화 모드 결정 장치 및 이를위한 부호화 모드 결정 방법 |
US20080004883A1 (en) * | 2006-06-30 | 2008-01-03 | Nokia Corporation | Scalable audio coding |
KR101393298B1 (ko) | 2006-07-08 | 2014-05-12 | 삼성전자주식회사 | 적응적 부호화/복호화 방법 및 장치 |
WO2008035949A1 (en) * | 2006-09-22 | 2008-03-27 | Samsung Electronics Co., Ltd. | Method, medium, and system encoding and/or decoding audio signals by using bandwidth extension and stereo coding |
US9009032B2 (en) * | 2006-11-09 | 2015-04-14 | Broadcom Corporation | Method and system for performing sample rate conversion |
KR101434198B1 (ko) * | 2006-11-17 | 2014-08-26 | 삼성전자주식회사 | 신호 복호화 방법 |
KR100964402B1 (ko) | 2006-12-14 | 2010-06-17 | 삼성전자주식회사 | 오디오 신호의 부호화 모드 결정 방법 및 장치와 이를 이용한 오디오 신호의 부호화/복호화 방법 및 장치 |
KR100883656B1 (ko) * | 2006-12-28 | 2009-02-18 | 삼성전자주식회사 | 오디오 신호의 분류 방법 및 장치와 이를 이용한 오디오신호의 부호화/복호화 방법 및 장치 |
US9653088B2 (en) * | 2007-06-13 | 2017-05-16 | Qualcomm Incorporated | Systems, methods, and apparatus for signal encoding using pitch-regularizing and non-pitch-regularizing coding |
US8046214B2 (en) * | 2007-06-22 | 2011-10-25 | Microsoft Corporation | Low complexity decoder for complex transform coding of multi-channel sound |
US8781843B2 (en) * | 2007-10-15 | 2014-07-15 | Intellectual Discovery Co., Ltd. | Method and an apparatus for processing speech, audio, and speech/audio signal using mode information |
US20090164223A1 (en) * | 2007-12-19 | 2009-06-25 | Dts, Inc. | Lossless multi-channel audio codec |
KR101381513B1 (ko) * | 2008-07-14 | 2014-04-07 | 광운대학교 산학협력단 | 음성/음악 통합 신호의 부호화/복호화 장치 |
-
2009
- 2009-07-07 KR KR1020090061608A patent/KR101381513B1/ko active IP Right Grant
- 2009-07-14 EP EP09798079.1A patent/EP2302624B1/en active Active
- 2009-07-14 CN CN200980135678.8A patent/CN102150204B/zh active Active
- 2009-07-14 WO PCT/KR2009/003855 patent/WO2010008176A1/ko active Application Filing
- 2009-07-14 EP EP18215268.6A patent/EP3493204B1/en active Active
- 2009-07-14 CN CN201310487746.5A patent/CN103531203B/zh active Active
- 2009-07-14 US US13/003,979 patent/US8903720B2/en active Active
- 2009-07-14 JP JP2011517359A patent/JP2011527032A/ja active Pending
-
2012
- 2012-07-13 KR KR1020120076635A patent/KR101565634B1/ko active IP Right Grant
-
2013
- 2013-07-23 JP JP2013152997A patent/JP2013232007A/ja active Pending
-
2014
- 2014-02-10 JP JP2014023744A patent/JP6067601B2/ja active Active
- 2014-11-06 US US14/534,781 patent/US9818411B2/en active Active
-
2017
- 2017-11-13 US US15/810,732 patent/US10403293B2/en active Active
-
2019
- 2019-08-30 US US16/557,238 patent/US10714103B2/en active Active
-
2020
- 2020-07-10 US US16/925,946 patent/US11705137B2/en active Active
-
2023
- 2023-06-21 US US18/212,364 patent/US20240119948A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11175098A (ja) * | 1997-12-12 | 1999-07-02 | Nec Corp | 音声及び音楽符号化方式 |
WO2007083934A1 (en) * | 2006-01-18 | 2007-07-26 | Lg Electronics Inc. | Apparatus and method for encoding and decoding signal |
US20080114608A1 (en) * | 2006-11-13 | 2008-05-15 | Rene Bastien | System and method for rating performance |
Non-Patent Citations (1)
Title |
---|
SHIN, S. W. et al. DESIGNING A UNIFIED SPEECH/AUDIO CODEC BY ADOPTING A SINGLE CHANNEL HARMONIC SOURCE SEPARATION MODULE. IEEE International Conference on ICASSP 2008. 2008.03.31. (제185면 내지 제188면) * |
Also Published As
Publication number | Publication date |
---|---|
US20150095023A1 (en) | 2015-04-02 |
KR20100007739A (ko) | 2010-01-22 |
WO2010008176A1 (ko) | 2010-01-21 |
CN102150204B (zh) | 2015-03-11 |
EP2302624A1 (en) | 2011-03-30 |
JP2014139674A (ja) | 2014-07-31 |
US11705137B2 (en) | 2023-07-18 |
JP2013232007A (ja) | 2013-11-14 |
CN103531203B (zh) | 2018-04-20 |
EP3493204A1 (en) | 2019-06-05 |
EP2302624A4 (en) | 2012-10-31 |
US10714103B2 (en) | 2020-07-14 |
KR20120089222A (ko) | 2012-08-09 |
US20180068667A1 (en) | 2018-03-08 |
US20190385621A1 (en) | 2019-12-19 |
CN102150204A (zh) | 2011-08-10 |
EP3493204B1 (en) | 2023-11-01 |
US20200349958A1 (en) | 2020-11-05 |
US20110119055A1 (en) | 2011-05-19 |
KR101565634B1 (ko) | 2015-11-04 |
CN103531203A (zh) | 2014-01-22 |
US10403293B2 (en) | 2019-09-03 |
JP2011527032A (ja) | 2011-10-20 |
JP6067601B2 (ja) | 2017-01-25 |
US9818411B2 (en) | 2017-11-14 |
EP2302624B1 (en) | 2018-12-26 |
US20240119948A1 (en) | 2024-04-11 |
US8903720B2 (en) | 2014-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101381513B1 (ko) | 음성/음악 통합 신호의 부호화/복호화 장치 | |
US11456002B2 (en) | Apparatus and method for encoding and decoding of integrated speech and audio utilizing a band expander with a spectral band replication (SBR) to output the SBR to either time or transform domain encoding according to the input signal | |
KR101224884B1 (ko) | 스위치 가능한 바이패스를 가진 오디오 인코딩/디코딩 기법 | |
CN105679327B (zh) | 用于对音频信号进行编码和解码的方法及设备 | |
EP2849180B1 (en) | Hybrid audio signal encoder, hybrid audio signal decoder, method for encoding audio signal, and method for decoding audio signal | |
Quackenbush | MPEG Audio Compression Future | |
KR20090043352A (ko) | 상호 운용성을 지원하는 오디오/스피치 신호의부호화/복호화 방법 및 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
A302 | Request for accelerated examination | ||
A107 | Divisional application of patent | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
X091 | Application refused [patent] | ||
AMND | Amendment | ||
E801 | Decision on dismissal of amendment | ||
J201 | Request for trial against refusal decision | ||
J301 | Trial decision |
Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20130529 Effective date: 20131010 |
|
S901 | Examination by remand of revocation | ||
E902 | Notification of reason for refusal | ||
GRNO | Decision to grant (after opposition) | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170224 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20180226 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20190304 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20200224 Year of fee payment: 7 |