KR101169596B1 - 오디오 신호 합성 - Google Patents

오디오 신호 합성 Download PDF

Info

Publication number
KR101169596B1
KR101169596B1 KR1020057019770A KR20057019770A KR101169596B1 KR 101169596 B1 KR101169596 B1 KR 101169596B1 KR 1020057019770 A KR1020057019770 A KR 1020057019770A KR 20057019770 A KR20057019770 A KR 20057019770A KR 101169596 B1 KR101169596 B1 KR 101169596B1
Authority
KR
South Korea
Prior art keywords
sub
band
audio signal
band signals
signal
Prior art date
Application number
KR1020057019770A
Other languages
English (en)
Other versions
KR20050122267A (ko
Inventor
피. 스취저스 에릭 지.
티. 클레인 미드링크 마크 더블유.
제이. 우멘 아놀더스 더블유.
엠. 반 드 커크호프 레온
Original Assignee
코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=33300979&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR101169596(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 코닌클리케 필립스 일렉트로닉스 엔.브이. filed Critical 코닌클리케 필립스 일렉트로닉스 엔.브이.
Publication of KR20050122267A publication Critical patent/KR20050122267A/ko
Application granted granted Critical
Publication of KR101169596B1 publication Critical patent/KR101169596B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03—Application of parametric coding in stereophonic audio systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Stereophonic System (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)

Abstract

출력 오디오 신호에 기초하여 출력 오디오 신호를 합성하는 방법이 제공되고, 입력 오디오 신호는 복수의 입력 서브-대역(sub-band) 신호들을 포함하고, 방법은 적어도 하나의 각각 변환된 신호를 얻기 위해 적어도 하나의 입력 서브-대역 신호를 서브-대역 도메인으로부터 주파수 도메인으로 변환(T)하는 단계와, 적어도 하나의 각각 변환되고 지연된 신호(at least one respective transformed delayed signal)를 얻기 위해 적어도 하나의 입력 서브-대역 신호를 지연(D0...n)시키고 변환하는 단계와, 적어도 하나의 변환된 신호 및 적어도 하나의 변환되고 지연된 신호로부터 적어도 두 개의 프로세싱된 신호들을 유도(P)하는 단계와, 각각의 프로세싱된 서브-대역 신호들을 얻기 위해 프로세싱된 신호들을 주파수 도메인으로부터 서브-대역 도메인으로 역변환(T-1)하는 단계와, 프로세싱된 서브-대역 신호들로부터 출력 오디오 신호를 합성하는 단계를 포함한다.
주파수 도메인, 오디오 신호, 서브-대역 도메인, 역변환, 합성

Description

오디오 신호 합성{Audio signal synthesis}
본 발명은 일반적으로 오디오 신호의 합성에 관한 것으로서, 특히 출력 오디오 신호를 공급하는 장치에 관한 것이다.
2003년 3월 22-25일, 네덜란드 암스테르담 114 AES 컨벤션 프리프린트 5852, Erik Schuijers, Werner Oomen, Bert den Brinker 및 Jeroen Breebaart에 의한, 논문 "고품질 오디오를 위한 파라메트릭 코딩의 향상"은 스테레오 이미지를 위한 효과적인 파라메트릭 표현을 이용한 파라메트릭 코딩 방식을 개시한다. 두 개의 입력 신호들은 하나의 모노 오디오 신호에 병합된다. 지각적으로 관련된 공간적 큐들(perceptually relevant spatial cues)은 명시적으로 모델화된다. 병합된 신호는 모노-파라메트릭 인코더를 이용하여 인코딩된다. 채널간 세기 차이(IID, Interchannel Intensity Difference), 채널간 시간 차이(ITD, Interchannel Time Difference), 및 채널간 상호 상관(ICC, Interchannel Cross-Correlation)의 스테레오 파라미터들은 양자화, 인코딩되고, 양자화되고 인코딩된 모노 오디오 신호와 함께 비트 스트림으로 멀티플렉싱된다. 디코더측에서는, 비트 스트림은 인코딩된 모노 신호 및 스테레오 파라미터들로 디멀티플렉싱된다. 인코딩된 모노 오디오 신호는 디코딩된 모노 오디오 신호 m'(도 1 참조)를 얻기 위해 디코딩된다. 모노 타임 도메인 신호로부터, 비-상관된 신호(de-correlated signal)는 최적의 지각적 비-상관을 산출하는 필터(D)를 이용함으로써 계산된다. 모노 타임 도메인 신호(m') 및 비-상관된 신호(d)는 주파수 도메인으로 변환된다. 이후, 주파수 도메인 스테레오 신호는, 디코딩된 스테레오 쌍(l' 및 r')을 얻기 위해 파라미터 프로세싱 유닛(11)에서, 스케일링, 위상 변경들, 및 믹싱 각각에 의해 IID, ITD 및 ICC 파라미터들로 프로세싱된다. 결과 주파수 도메인 표현은 타임 도메인으로 다시 변환된다.
본 발명의 목적은 입력 오디오 신호에 기초하여 출력 오디오 신호를 유리하게 합성하는 것이다. 결국, 본 발명은 독립항에 정의된 바와 같은 방법, 디바이스, 장치, 및 컴퓨터 프로그램 제품을 제공한다. 유익한 실시예들이 종속항에 정의된다.
본 발명의 제 1 특징에 따라, 출력 오디오 신호를 합성하는 단계는 입력 오디오 신호에 기초하여 제공된다. 입력 오디오 신호는 복수의 입력 서브-대역 신호들(input sub-band signals)을 포함하고, 방법은 적어도 하나의 각각 변환된 신호를 얻기 위해, 적어도 하나의 입력 서브-대역 신호를 서브-대역 도메인으로부터 주파수 도메인으로 변환하는 단계와, 적어도 하나의 각각 변환되고 지연된 신호(at least one respective transformed delayed signal)를 얻기 위해 적어도 하나의 입력 서브-대역 신호를 지연시키고 변환하는 단계와, 적어도 하나의 변환된 신호 및 적어도 하나의 변환되고 지연된 신호로부터 적어도 두 개의 프로세싱된 신호들을 유도하는 단계와, 각각 프로세싱된 서브-대역 신호들을 얻기 위해 상기 프로세싱된 신호들을 주파수 도메인으로부터 서브-대역 도메인으로 역변환하는 단계와, 상기 프로세싱된 서브-대역 신호들로부터 상기 출력 오디오 신호를 합성하는 단계를 포함한다. 서브-대역내 주파수 변환을 위한 서브-대역을 제공함으로써, 주파수 해상도(frequency resolution)가 증가한다. 이러한 증가된 주파수 해상도는 (약간의 대역들만이 변환되기 때문에) 효율적인 구현으로 고품질의 오디오(단일 서브-대역 신호의 대역폭은 사람의 청각 시스템의 중요한 대역들의 대역폭보다 일반적으로 매우 높다)를 달성할 수 있는 점에서 유익하다. 서브-대역 내 스테레오 신호를 합성하는 것은 기존의 서브-대역 오디오 코더들을 쉽게 조합할 수 있다는 점에서 더 유리하다. 필터 뱅크들은 오디오 코딩의 콘텍스트에서 공통적으로 사용된다. 모든 MPEG-1/2 층들 Ⅰ, Ⅱ, 및 Ⅲ은 중요하게 샘플링된 서브-대역 필터인 32-대역을 이용한다.
본 발명의 실시예들은 스펙트럴 대역 복제("SBR") 기술들을 이용하여, 보다 낮은 서브-대역들의 주파수 해상도를 증가시키는 특별한 이용이다.
효과적인 실시예에서, 직교 미러 필터(Quadrature Mirror Filter("QMF")) 뱅크가 이용된다. 이러한 필터 뱅크는 2002년 11월 15일 벨기움(Belgium), 레우벤(Leuven), pp. 55-58, 오디오 코딩의 프로세싱 및 코딩에 기초한 모델에 관한 제 1 IEEE 베네룩스 워크숍, Per Ekstrand의, "스펙트럴 대역폭 복제에 의한 오디오 신호들의 대역폭 확장" 논문 그 자체로 알려진다. 합성 QMF 필터 뱅크는 입력으로서 N개의 복소 서브-대역 신호들을 취하고 실수값의 PCM 출력 신호를 생성한다. SBR 배후의 아이디어는, 보다 높은 주파수들은 매우 적은 헬퍼 정보를 이용함으로써 보다 낮은 주파수들로부터 재구성될 수 있다는 것이다. 실제로, 이 재구성은 복소 직교 미러 필터(QMF) 뱅크에 의해 완료된다. 서브-대역 도메인에서 비-상관된 신호에 효과적으로 이르기 위해, 본 발명의 실시예들은 서브-대역 도메인내 주파수 (또는 서브-대역 인덱스)-종속 지연을 이용하며, 이는 유럽 특허 출원으로 2003년 4월 17일에 출원된, 제목 "오디오 신호 생성"(대리인의 일람표 PHNL030447)에 보다 자세히 개시된 바와 같다. 복소 QMF 필터 뱅크가 중요하게 샘플링되지 않기 때문에, 에일리어싱(aliasing)을 카운팅하기 위해 여분의 공급들을 취할 필요는 없다. Ekstrand에 의해 개시된 바와 같이 SBR 디코더에서, 코어 디코더(core decoder)는 전체 오디오 디코더와 비교하여 샘플링 주파수의 절반에서 수행하기 때문에, 합성 QMF 뱅크는 64 대역으로 구성된 반면, 분석 QMF 뱅크는 32 대역만으로 구성됨을 주목한다. 그러나, 대응하는 인코더에서, 64-대역 분석 QMF 뱅크는 전체 주파수 범위를 커버하도록 이용된다.
도 2는, MPGE-4 표준 ISO/IEC 14496-3:2001/FDAM1, JTC1/SC29/WG11, 동영상 및 오디오의 코딩, 대역폭 연장에 개시된 바와 같은 스펙트럴 대역폭 복제(SBR) 기술을 이용한 대역폭 강화 (BWE) 디코더의 블록도이다. 비트 스트림의 핵심 부분은 코어 디코더를 이용함으로써 디코딩되고, 이는 예를 들어, MPEG-1 층 Ⅲ(mp3) 또는 AAC 디코더일 수 있다. 전형적으로, 이러한 디코더는 출력 샘플링 주파수(fs/2)의 절반에서 실행한다. SBR 데이터를 코어 데이터와 동기화하기 위해, 지연 "D"가 도입된다(MPEG-4 표준내 288 PCM 샘플들). 결과 신호는 32-대역 복소 직교 미러 필터(QMF)로 공급된다. 이 필터는 32 실수 입력 샘플들 당 32 복소 샘플들을 출력하고 따라서, 2의 계수에 의해 오버 샘플링된다. 고주파(HF) 생성기(도 1 참조)에서, 코어 코더로 커버되지 않는 보다 높은 주파수들은 보다 낮은 주파수들(의 일정 부분들)을 복제함으로써 생성된다. 고주파 생성기의 출력과 보다 낮은 32 서브-대역들은 64 복소 서브-대역 신호들로 조합된다. 결과적으로, 포락선 조정자(envelope adjuster)는 복제된 고주파 서브-대역 신호들을 원하는 포락선으로 조정하고 비트 스트림의 SBR 파트에 의해 표시된 바와 같이 부가적인 사인파 및 잡음 요소들을 부가한다. 64 서브-대역 신호들의 총 수는 (실수) PCM 출력 신호를 형성하기 위해 64-대역 복소 합성 필터를 통해 공급된다.
서브-대역 채널의 부가적인 변환들의 적용은 일정한 지연을 도입한다. 변환 및 역변환을 포함하지 않는 서브-대역들에서, 지연들은 서브-대역 신호들의 배열을 유지하도록 도입될 수 있다. 특별한 측정들 없이, 도입된 서브-대역 신호들내 여분의 지연은, SBR 데이터 또는 파라메트릭 스테레오 데이터와 같은 코어 및 사이드 또는 헬퍼 데이터의 잘못된 배열(misalignment)(즉, 동조하지 않음)이 된다. 부가적인 변환/역변환을 갖는 서브-대역들과 부가적인 변환이 없는 서브-대역들의 경우에, 부가적인 지연은 변환없이 대역들에 부가된다. SBR내에서, 동작의 변환 및 역변환에 의한 여분의 지연은 지연(D)에서 공제될 수 있다.
본 발명의 이들 및 다른 특징들은 이후에 설명되는 실시예들을 참조함으로써 명백하다.
도 1은 파라메트릭 스테레오 디코더의 블록도.
도 2는 SBR 기술을 이용한 오디오 디코더의 블록도.
도 3은 본 발명에 따른 서브-대역 도메인의 파라메트릭 스테레오 프로세싱을 도시한 도면.
도 4는 도 3의 변환-역변환(TT-1)에 의한 지연을 도시한 블록도.
도 5는 파라메트릭 스테레오를 제공하는, 본 발명에 따른 유익한 오디오 디코더를 도시한 도면.
도 6은 파라메트릭 스테레오를 SBR과 조합하는, 본 발명의 실시예에 따른 유익한 오디오 디코더를 도시한 도면.
삭제
도면들은 본 발명을 이해하는데 필수적인 요소들을 도시하기 위함이다.
도 3은 본 발명에 따른 서브-대역내 파라메트릭 스테레오 프로세싱을 도시한다. 입력 신호는 N 입력 서브-대역 신호들로 구성된다. 실제 실시예들에서, N은 32 또는 64이다. 보다 낮은 주파수들은, 보다 높은 주파수 해상도를 얻기 위해, 변환(T)을 이용하여 변환되고, 보다 높은 주파수들은, 변환에 의해 도입된 지연을 보상하기 위해 지연(DT)을 이용하여 지연된다. 각각의 서브-대역 신호로부터, 또한, 비-상관된 서브-대역 신호는 x가 서브-대역 인덱스일 때 지연-시퀀스(DX)에 의해 생성된다. 블록들(P)은 하나의 입력 서브-대역 신호로부터 두 개의 서브-대역들로의 프로세싱을 나타내고, 프로세싱은 입력 서브-대역 신호의 하나의 변환된 버전과 입력 서브-대역 신호의 하나의 지연 및 변환된 버전상에서 수행된다. 프로세싱은 예를 들어, 매트릭싱 및/또는 로테이팅에 의해 변환된 버전과 변환되고 지연된 버전을 믹싱하는 단계를 포함할 수 있다. 변환(T-1)은 역변환을 표시한다. DT는 블록(P)의 이전 및 이후의 조각(split)일 수 있다. 변환들(T)은 상이한 길이일 수 있으며, 전형적으로 낮은 주파수는 보다 긴 변환을 갖는데, 이는 부가적으로, 변환이 가장 긴 변환보다 짧을 때, 지연이 경로들에서 또한 도입됨을 의미한다. 필터 뱅크 전면의 지연(D)은 필터 뱅크 이후 쉬프트될 수 있다. 이것이 필터 뱅크 이후 위치할 때, 변환들이 이미 지연을 포함하기 때문에 부분적으로 제거될 수 있다. 바람직하게, 변환은 변경된 이산 코사인 변환 ("MDCT") 타입이고, 또한, 고속 푸리에 변환과 같은 다른 변환들이 사용될 수 있다. 프로세싱(P)은 일반적으로 부가적인 지연의 상승을 가져오지 않는다.
도 4는 도 3의 변환-역변환(TT-1)에 의한 지연을 도시한 블록도이다. 도 4에서, 18 복소 서브-대역 샘플들이 윈도우 h[n]에 의해 윈도윙된다. 이후, 변환된 복소 신호들은 실수 및 허수 부분으로 나누어져, 둘 다는 MDCT를 이용하여 두 배의 9 실수값들로 변환된다. 다시, 9 값들 세트들의 역변환은, 이전의 18 복소 서브-대역 샘플들과 함께 윈도윙되고 오버랩 부가된 18 복소 서브-대역 샘플들이 된다. 이 도면에 도시된 바와 같이, 최종 9 복소 서브-대역 샘플들은 전적으로 프로세싱되지 않고(즉, 오버랩이 부가됨), 절반의 변환 길이, 즉, 9 (서브-대역) 샘플들의 실효 지연(effective delay)을 초래한다. 결과적으로, 단일 서브-대역 필터내 지연은 변환이 적용되지 않는 때 모든 다른 서브-대역들에서 보상되어야 한다. 그러나, SBR 프로세싱(즉, HF 생성 및 포락선 조정)) 이전에 서브-대역 신호들에 대한 추가 지연을 도입하는 것은 코어 및 SBR 데이터의 잘못된 배열을 초래한다. 이 배열을 유지하기 위해, 도 2에 도시된 바와 같은 PCM 지연(D)은 M 대역 복소 분석 QMF 직후에 위치될 수 있어, 각각의 서브-대역에서 D/M의 지연을 유효하게 초래한다. 따라서, 코어 및 SBR 데이터의 배열을 위한 요구는, 모든 서브-대역들내 지연은 D/M에 달하는 것이다. 따라서, 부가된 변환의 지연 DT가 D/M 이하이면, 동기화가 유지될 수 있다. 서브-대역내 지연 요소들이 복소 타입이 됨을 주목한다. 실제의 SBR 실시예들에서, M=32이다. 또한, M은 N과 동일하다.
실제 실시예들에서, 상기 설명된 바와 같이 각각의 변환(T)은 두 개의 MDCT들을 포함하고 각각의 역변환(T-1)은 두 개의 IMDCT들을 포함함을 주목한다.
변환(T)가 도입되는 보다 낮은 서브-대역들은 코어 디코더에 의해 커버된다. 그러나, 그들이 SBR 툴의 포락선 조정자에 의해 프로세싱되지 않을지라도, SBR 툴의 고주파 생성기는 복제 프로세스에서 그들의 샘플들을 요구할 수 있다. 따라서, 또한, 이러한 보다 낮은 서브-대역들의 샘플들은 '비-변환된' 것으로서 이용 가능할 필요가 있다. 이것은 이러한 서브-대역들내 DT 서브-대역 샘플들의 추가 (및 복소) 지연을 요구한다. 복소 샘플들의 실수 값들 및 복소 값들상에서 수행된 믹싱 작업은 동일할 수 있다.
도 5는 파라메트릭 스테레오를 제공하는, 본 발명의 실시예에 따른 유익한 오디오 디코더를 도시한다. 비트 스트림은 모노 파라미터들/계수들 및 스테레오 파라미터들로 나누어진다. 먼저, 관용의 모노 디코더는 (후방 호환 가능(backwards compatible)) 모노 신호를 얻기 위해 이용된다. 이 신호는 신호들을 다수의 서브-대역 신호들로 나누는 서브-대역 필터 뱅크에 의해 분석된다. 스테레오 파라미터들은, 하나는 좌측 그리고 하나는 우측 채널용의 두 개의 세트들의 서브-대역 신호들에 대한 서브-대역 신호들을 처리하는데 이용될 수 있다. 두 개의 서브-대역 합성 필터들을 이용하여, 이러한 신호들은 스테레오(좌측 및 우측) 신호가 되는 타임 도메인으로 변환된다. 스테레오 프로세싱 블록이 도 3에 도시된다.
도 6은 파라메트릭 스테레오와 SBR을 조합하는, 본 발명에 따른 유익한 오디오 디코더를 도시한다. 비트 스트림은 모터 파라미터들/계수들, SBR 파라미터들 및 스테레오 파라미터들로 나누어진다. 먼저, 관용의 모노 디코더는 (후방 호환 가능(backwards compatible)) 모노 신호를 얻기 위해 이용된다. 이 신호는 신호들을 다수의 서브-대역 신호들로 나누는 서브-대역 필터 뱅크에 의해 분석된다. SBR 파라미터들을 이용함으로써, 보다 많은 HF 콘텐트가 생성되는데, 분석 필터 뱅크보다 많은 서브-대역들의 이용도 가능하다. 스테레오 파라미터들은, 하나는 좌측 그리고 하나는 우측 채널용의 두 개의 세트들의 서브-대역 신호들에 대한 서브-대역 신호들을 처리하는데 이용될 수 있다. 두 개의 서브-대역 합성 필터들을 이용하여, 이러한 신호들은 스테레오(좌측 및 우측) 신호를 초래하는 타임 도메인으로 변환된다. 스테레오 프로세싱 블록이 도 3의 블록도에 도시되어 있다.
상술된 실시예들은 본 발명을 제한하기 위한 설명한 것이 아니며, 본 기술의 숙련된 기술자들은 첨부된 청구 범위에 벗어남 없이 많은 대안적인 실시예들을 설계할 수 있음을 주목한다. 청구범위에서, 괄호 사이에 위치한 임의의 참조 기호들은 청구범위를 제한하는 것으로서 이해되어서는 않된다. 동사 "포함하다" 및 그의 접속사들은 청구항에 언급된 것 이외의 다른 요소 또는 단계들의 존재를 배재하지 않는다. 본 발명은 여러 별개의 요소들을 포함하는 하드웨어와 적절히 프로그래밍된 컴퓨터에 의해 수행될 수 있다. 여러 수단을 열거하는 디바이스 청구항에서, 이러한 여러 수단은 하드웨어 및 이와 동일한 아이템에 의해 실현될 수 있다. 일정한 방법들(certain measures)이 상호 상이한 종속항들에서 반복되는 단순한 사실이 이러한 방법들의 조합이 유리하게 이용될 수 없음을 나타내지 않는다.

Claims (22)

  1. 광대역 타임 도메인 입력 오디오 신호로부터 좌측 오디오 신호 성분 및 우측 오디오 신호 성분을 포함하는 광대역 타임 도메인 출력 오디오 신호를 생성하는 방법에 있어서:
    상기 광대역 타임 도메인 입력 오디오 신호를 복수의 입력 서브-대역 신호들을 포함하는 서브-대역 도메인 입력 신호로 변환하는 단계로서, 상기 광대역 주파수 영역의 제 1 주파수 영역에서의 상기 입력 서브-대역 신호들은 상기 광대역 주파수 영역의 제 2 주파수 영역에서의 상기 입력 서브-대역 신호들보다 더 좁은 주파수 대역을 가지는, 상기 변환 단계;
    지연된 서브-대역 신호들을 얻기 위해서 상기 서브-대역 신호들을 지연시키는 단계;
    서브-대역 신호 및 대응하는 지연된 서브-대역 신호를 믹싱함으로써 제 1 및 제 2 프로세싱된 서브-대역 신호를 유도하는 단계; 및
    상기 광대역 타임 도메인 출력 오디오 신호의 상기 좌측 오디오 신호 성분을 얻기 위해서 상기 제 1 프로세싱된 서브-대역 신호들을 역변환하고, 상기 광대역 타임 도메인 출력 오디오 신호의 상기 우측 오디오 신호 성분을 얻기 위해서 상기 제 2 프로세싱된 서브-대역 신호들을 역변환하는 단계를 포함하는, 출력 오디오 신호 생성 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 광대역 타임 도메인 입력 오디오 신호로부터 좌측 오디오 신호 성분 및 우측 오디오 신호 성분을 포함하는 광대역 타임 도메인 출력 오디오 신호를 생성하는 디바이스에 있어서:
    상기 광대역 타임 도메인 입력 오디오 신호를 복수의 입력 서브-대역 신호들을 포함하는 서브-대역 도메인 입력 신호로 변환하는 변환 유닛으로서, 상기 광대역 주파수 영역의 제 1 주파수 영역에서의 상기 입력 서브-대역 신호들은 상기 광대역 주파수 영역의 제 2 주파수 영역에서의 상기 입력 서브-대역 신호들보다 더 좁은 주파수 대역을 가지는, 상기 변환 유닛;
    지연된 서브-대역 신호들을 얻기 위해서 상기 서브-대역 신호들을 지연시키는 지연 유닛;
    서브-대역 신호 및 대응하는 지연된 서브-대역 신호를 믹싱함으로써 제 1 및 제 2 프로세싱된 서브-대역 신호를 유도하는 믹싱 유닛; 및
    상기 광대역 타임 도메인 출력 오디오 신호의 상기 좌측 오디오 신호 성분을 얻기 위해서 상기 제 1 프로세싱된 서브-대역 신호들을 역변환하고, 상기 광대역 타임 도메인 출력 오디오 신호의 상기 우측 오디오 신호 성분을 얻기 위해서 상기 제 2 프로세싱된 서브-대역 신호들을 역변환하는 역변환 유닛을 포함하는, 출력 오디오 신호 생성 디바이스.
  17. 출력 오디오 신호를 공급하는 장치에 있어서:
    인코딩된 오디오 신호를 얻기 위한 입력 유닛;
    복수의 서브-대역 신호들을 포함하는 디코딩된 신호를 얻기 위해 상기 인코딩된 오디오 신호를 디코딩하는 디코더;
    상기 디코딩된 신호에 기초하여 상기 출력 오디오 신호를 얻기 위한 제 16 항에 청구된 디바이스; 및
    상기 출력 오디오 신호를 공급하기 위한 출력 유닛을 포함하는, 출력 오디오 신호 공급 장치.
  18. 광대역 타임 도메인 입력 오디오 신호로부터 좌측 오디오 신호 성분 및 우측 오디오 신호 성분을 포함하는 광대역 타임 도메인 출력 오디오 신호를 생성하는 컴퓨터에서 실행가능한 컴퓨터 프로그램을 저장하는 저장 매체에 있어서, 상기 컴퓨터 프로그램은:
    상기 광대역 타임 도메인 입력 오디오 신호를 복수의 입력 서브-대역 신호들을 포함하는 서브-대역 도메인 입력 신호로 변환하는 단계로서, 상기 광대역 주파수 영역의 제 1 주파수 영역에서의 상기 입력 서브-대역 신호들은 상기 광대역 주파수 영역의 제 2 주파수 영역에서의 상기 입력 서브-대역 신호들보다 더 좁은 주파수 대역을 가지는, 상기 변환 단계;
    지연된 서브-대역 신호들을 얻기 위해서 상기 서브-대역 신호들을 지연시키는 단계;
    서브-대역 신호 및 대응하는 지연된 서브-대역 신호를 믹싱함으로써 제 1 및 제 2 프로세싱된 서브-대역 신호를 유도하는 단계; 및
    상기 광대역 타임 도메인 출력 오디오 신호의 상기 좌측 오디오 신호 성분을 얻기 위해서 상기 제 1 프로세싱된 서브-대역 신호들을 역변환하고, 상기 광대역 타임 도메인 출력 오디오 신호의 상기 우측 오디오 신호 성분을 얻기 위해서 상기 제 2 프로세싱된 서브-대역 신호들을 역변환하는 단계를 수행하는, 컴퓨터 프로그램 저장 매체.
  19. 제 16 항에 있어서,
    상기 제 1 주파수 영역은 상기 광대역 주파수 영역의 낮은 주파수 부분이고, 상기 제 2 주파수 영역은 상기 광대역 주파수 영역의 높은 주파수 영역인, 출력 오디오 신호 생성 디바이스.
  20. 제 19 항에 있어서,
    상기 변환 유닛은:
    상기 광대역 타임 도메인 입력 오디오 신호를 상기 제 1 및 제 2 주파수 영역에서의 복수의 협대역 서브-대역 신호들로 변환하는 제 1 변환 블록;
    상기 제 1 주파수 영역에서의 상기 협대역 서브-대역 신호들을 상기 제 1 주파수 영역에서의 상기 입력 서브-대역 신호들로 변환하는 제 2 변환 블록으로서, 상기 제 1 주파수 영역에서의 상기 입력 서브-대역 신호들의 대역폭은 상기 제 1 주파수 영역에서의 상기 협대역 서브-대역 신호들의 대역폭보다 작은, 상기 제 2 변환 블록; 및
    상기 제 2 주파수 영역에서의 상기 입력 서브-대역 신호들을 얻기 위한 상기 제 2 주파수 영역에서의 상기 협대역 서브-대역 신호들을 지연시키는 지연 블록을 포함하고,
    상기 역변환 유닛은:
    상기 제 1 주파수 영역에서의 상기 제 1 프로세싱된 서브-대역 신호들을 상기 제 1 주파수 영역에서의 제 1 프로세싱된 협대역 서브-대역 신호들로 역변환하는 제 1 역변환 블록으로서, 상기 제 1 프로세싱된 협대역 서브-대역 신호들의 대역폭은 상기 제 1 프로세싱된 서브-대역 신호들의 대역폭보다 큰, 상기 제 1 역변환 블록;
    상기 제 1 주파수 영역에서의 상기 제 2 프로세싱된 서브-대역 신호들을 상기 제 1 주파수 영역에서의 제 2 프로세싱된 협대역 서브-대역 신호들로 역변환하는 제 2 역변환 블록으로서, 상기 제 2 프로세싱된 협대역 서브-대역 신호들의 대역폭은 상기 제 2 프로세싱된 서브-대역 신호들의 대역폭보다 큰, 상기 제 2 역변환 블록;
    상기 제 1 주파수 영역에서의 상기 제 1 프로세싱된 협대역 서브-대역 신호들 및 상기 제 2 주파수 영역에서의 상기 제 1 프로세싱된 서브-대역 신호들을 상기 광대역 타임 도메인 출력 오디오 신호의 상기 좌측 오디오 신호 성분으로 역변환하는 제 3 역변환 블록; 및
    상기 제 1 주파수 영역에서의 상기 제 2 프로세싱된 협대역 서브-대역 신호들 및 상기 제 2 주파수 영역에서의 상기 제 2 프로세싱된 서브-대역 신호들을 상기 광대역 타임 도메인 출력 오디오 신호의 상기 우측 오디오 신호 성분으로 역변환하는 제 4 역변환 블록을 포함하는, 출력 오디오 신호 생성 디바이스.
  21. 제 16 항에 있어서,
    상기 믹싱 유닛은 파라미터 신호들의 영향 하에서 상기 서브-대역 신호 및 상기 대응하는 지연된 서브-대역 신호로부터 상기 제 1 및 제 2 프로세싱된 서브-대역 신호를 유도하는, 출력 오디오 신호 생성 디바이스.
  22. 제 21 항에 있어서,
    상기 믹싱 유닛은, 제 1 결합 단계에서, 상기 파라미터 신호들의 영향 하에서 상기 서브-대역 신호와 상기 대응하는 지연된 서브-대역 신호를 결합함으로써 상기 제 1 프로세싱된 서브-대역 신호를 유도하고, 제 2 결합 단계에서, 상기 파라미터 신호들의 영향 하에서 상기 서브-대역 신호와 상기 대응하는 지연된 서브-대역 신호를 결합함으로써 상기 제 2 프로세싱된 서브-대역 신호를 유도하며, 상기 결합 단계들은 상기 서브-대역 신호와 상기 대응하는 지연된 서브-대역 신호를 스케일링 및 위상 변경 중 적어도 하나를 수행하는 단계를 포함하는, 출력 오디오 신호 생성 디바이스.
KR1020057019770A 2003-04-17 2004-04-14 오디오 신호 합성 KR101169596B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP03076134 2003-04-17
EP03076134.0 2003-04-17
EP03076166 2003-04-18
EP03076166.2 2003-04-18
PCT/IB2004/050436 WO2004093495A1 (en) 2003-04-17 2004-04-14 Audio signal synthesis

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020117005550A Division KR101200776B1 (ko) 2003-04-17 2004-04-14 오디오 신호 합성

Publications (2)

Publication Number Publication Date
KR20050122267A KR20050122267A (ko) 2005-12-28
KR101169596B1 true KR101169596B1 (ko) 2012-07-30

Family

ID=33300979

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020117005550A KR101200776B1 (ko) 2003-04-17 2004-04-14 오디오 신호 합성
KR1020057019770A KR101169596B1 (ko) 2003-04-17 2004-04-14 오디오 신호 합성

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020117005550A KR101200776B1 (ko) 2003-04-17 2004-04-14 오디오 신호 합성

Country Status (12)

Country Link
US (1) US8311809B2 (ko)
EP (1) EP1618763B1 (ko)
JP (1) JP4834539B2 (ko)
KR (2) KR101200776B1 (ko)
CN (2) CN1774956B (ko)
AT (1) ATE355590T1 (ko)
BR (1) BRPI0409337A (ko)
DE (1) DE602004005020T2 (ko)
ES (1) ES2281795T3 (ko)
PL (1) PL1618763T3 (ko)
RU (1) RU2005135650A (ko)
WO (1) WO2004093495A1 (ko)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7240001B2 (en) * 2001-12-14 2007-07-03 Microsoft Corporation Quality improvement techniques in an audio encoder
US6934677B2 (en) 2001-12-14 2005-08-23 Microsoft Corporation Quantization matrices based on critical band pattern information for digital audio wherein quantization bands differ from critical bands
US7502743B2 (en) 2002-09-04 2009-03-10 Microsoft Corporation Multi-channel audio encoding and decoding with multi-channel transform selection
US8311809B2 (en) 2003-04-17 2012-11-13 Koninklijke Philips Electronics N.V. Converting decoded sub-band signal into a stereo signal
US7460990B2 (en) * 2004-01-23 2008-12-02 Microsoft Corporation Efficient coding of digital media spectral data using wide-sense perceptual similarity
KR100707177B1 (ko) * 2005-01-19 2007-04-13 삼성전자주식회사 디지털 신호 부호화/복호화 방법 및 장치
WO2006090852A1 (ja) * 2005-02-24 2006-08-31 Matsushita Electric Industrial Co., Ltd. データ再生装置
AU2006266655B2 (en) 2005-06-30 2009-08-20 Lg Electronics Inc. Apparatus for encoding and decoding audio signal and method thereof
JP2009500656A (ja) 2005-06-30 2009-01-08 エルジー エレクトロニクス インコーポレイティド オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
US8443026B2 (en) 2005-09-16 2013-05-14 Dolby International Ab Partially complex modulated filter bank
US7917561B2 (en) * 2005-09-16 2011-03-29 Coding Technologies Ab Partially complex modulated filter bank
US20070092086A1 (en) * 2005-10-24 2007-04-26 Pang Hee S Removing time delays in signal paths
US7953604B2 (en) * 2006-01-20 2011-05-31 Microsoft Corporation Shape and scale parameters for extended-band frequency coding
US7831434B2 (en) * 2006-01-20 2010-11-09 Microsoft Corporation Complex-transform channel coding with extended-band frequency coding
US8190425B2 (en) * 2006-01-20 2012-05-29 Microsoft Corporation Complex cross-correlation parameters for multi-channel audio
JP2007221445A (ja) * 2006-02-16 2007-08-30 Sharp Corp サラウンドシステム
KR100754220B1 (ko) 2006-03-07 2007-09-03 삼성전자주식회사 Ｍｐｅｇ 서라운드를 위한 바이노럴 디코더 및 그 디코딩방법
CN101589623B (zh) 2006-12-12 2013-03-13 弗劳恩霍夫应用研究促进协会 对表示时域数据流的数据段进行编码和解码的编码器、解码器以及方法
FR2910752B1 (fr) * 2006-12-22 2009-03-20 Commissariat Energie Atomique Procede de codage spatio-temporel pour systeme de communication multi-antenne de type uwb impulsionnel
KR101312470B1 (ko) 2007-04-26 2013-09-27 돌비 인터네셔널 에이비 출력 신호 합성 장치 및 방법
KR101411900B1 (ko) * 2007-05-08 2014-06-26 삼성전자주식회사 오디오 신호의 부호화 및 복호화 방법 및 장치
KR101411901B1 (ko) * 2007-06-12 2014-06-26 삼성전자주식회사 오디오 신호의 부호화/복호화 방법 및 장치
US7885819B2 (en) 2007-06-29 2011-02-08 Microsoft Corporation Bitstream syntax for multi-process audio decoding
CA2697920C (en) * 2007-08-27 2018-01-02 Telefonaktiebolaget L M Ericsson (Publ) Transient detector and method for supporting encoding of an audio signal
GB2453117B (en) * 2007-09-25 2012-05-23 Motorola Mobility Inc Apparatus and method for encoding a multi channel audio signal
DE102007048973B4 (de) * 2007-10-12 2010-11-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals mit einer Sprachsignalverarbeitung
CA2705968C (en) 2007-11-21 2016-01-26 Lg Electronics Inc. A method and an apparatus for processing a signal
EP2212883B1 (en) * 2007-11-27 2012-06-06 Nokia Corporation An encoder
AU2008339211B2 (en) 2007-12-18 2011-06-23 Lg Electronics Inc. A method and an apparatus for processing an audio signal
EP2260487B1 (en) * 2008-03-04 2019-08-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Mixing of input data streams and generation of an output data stream therefrom
EP2124486A1 (de) * 2008-05-13 2009-11-25 Clemens Par Winkelabhängig operierende Vorrichtung oder Methodik zur Gewinnung eines pseudostereophonen Audiosignals
EP2144230A1 (en) 2008-07-11 2010-01-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Low bitrate audio encoding/decoding scheme having cascaded switches
MX2011000369A (es) * 2008-07-11 2011-07-29 Ten Forschung Ev Fraunhofer Codificador y decodificador de audio para codificar marcos de señales de audio muestreadas.
MY152252A (en) * 2008-07-11 2014-09-15 Fraunhofer Ges Forschung Apparatus and method for encoding/decoding an audio signal using an aliasing switch scheme
EP2154911A1 (en) * 2008-08-13 2010-02-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. An apparatus for determining a spatial output multi-channel audio signal
TWI419148B (zh) * 2008-10-08 2013-12-11 Fraunhofer Ges Forschung 多解析度切換音訊編碼／解碼方案
US9275650B2 (en) 2010-06-14 2016-03-01 Panasonic Corporation Hybrid audio encoder and hybrid audio decoder which perform coding or decoding while switching between different codecs
US8762158B2 (en) * 2010-08-06 2014-06-24 Samsung Electronics Co., Ltd. Decoding method and decoding apparatus therefor
BR122021003887B1 (pt) 2010-08-12 2021-08-24 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E. V. Reamostrar sinais de saída de codecs de áudio com base em qmf
EP2523473A1 (en) * 2011-05-11 2012-11-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating an output signal employing a decomposer
BR112014009700A2 (pt) * 2011-10-28 2017-05-09 Koninklijke Philips Nv dispositivo para o processamento de um sinal representativo dos sons cardíacos, e método para o processamento de um sinal sonoro cardíaco de um indivíduo campo da invenção
EP2704142B1 (en) * 2012-08-27 2015-09-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for reproducing an audio signal, apparatus and method for generating a coded audio signal, computer program and coded audio signal
WO2014161996A2 (en) * 2013-04-05 2014-10-09 Dolby International Ab Audio processing system
EP2830061A1 (en) 2013-07-22 2015-01-28 Fraunhofer Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding and decoding an encoded audio signal using temporal noise/patch shaping
KR102329309B1 (ko) 2013-09-12 2021-11-19 돌비 인터네셔널 에이비 Qmf 기반 처리 데이터의 시간 정렬
WO2015041477A1 (ko) * 2013-09-17 2015-03-26 주식회사 윌러스표준기술연구소 오디오 신호 처리 방법 및 장치
MX354832B (es) 2013-10-21 2018-03-21 Dolby Int Ab Estructura de decorrelador para la reconstruccion parametrica de señales de audio.
KR102144332B1 (ko) * 2014-07-01 2020-08-13 한국전자통신연구원 다채널 오디오 신호 처리 방법 및 장치

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5235646A (en) * 1990-06-15 1993-08-10 Wilde Martin D Method and apparatus for creating de-correlated audio output signals and audio recordings made thereby
GB9107011D0 (en) * 1991-04-04 1991-05-22 Gerzon Michael A Illusory sound distance control method
JP3127600B2 (ja) * 1992-09-11 2001-01-29 ソニー株式会社 ディジタル信号復号化装置及び方法
US5774844A (en) * 1993-11-09 1998-06-30 Sony Corporation Methods and apparatus for quantizing, encoding and decoding and recording media therefor
JP2953347B2 (ja) * 1995-06-06 1999-09-27 日本ビクター株式会社 サラウンド信号処理装置
US5956674A (en) * 1995-12-01 1999-09-21 Digital Theater Systems, Inc. Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels
US5835375A (en) * 1996-01-02 1998-11-10 Ati Technologies Inc. Integrated MPEG audio decoder and signal processor
DE19632734A1 (de) * 1996-08-14 1998-02-19 Thomson Brandt Gmbh Verfahren und Vorrichtung zum Generieren eines Mehrton-Signals aus einem Mono-Signal
SE512719C2 (sv) 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
US6199039B1 (en) * 1998-08-03 2001-03-06 National Science Council Synthesis subband filter in MPEG-II audio decoding
TW390104B (en) * 1998-08-10 2000-05-11 Acer Labs Inc Method and device for down mixing of multi-sound-track compression audio frequency bit stream
DE19900819A1 (de) * 1999-01-12 2000-07-13 Bosch Gmbh Robert Verfahren zum Dekodieren gestörter Funksignale von Mehrkanal-Audiosendungen
US6487574B1 (en) * 1999-02-26 2002-11-26 Microsoft Corp. System and method for producing modulated complex lapped transforms
US6175631B1 (en) * 1999-07-09 2001-01-16 Stephen A. Davis Method and apparatus for decorrelating audio signals
US7006636B2 (en) * 2002-05-24 2006-02-28 Agere Systems Inc. Coherence-based audio coding and synthesis
JP3776004B2 (ja) * 2001-05-28 2006-05-17 シャープ株式会社 ディジタルデータの符号化方法
SE0202159D0 (sv) * 2001-07-10 2002-07-09 Coding Technologies Sweden Ab Efficientand scalable parametric stereo coding for low bitrate applications
US8311809B2 (en) 2003-04-17 2012-11-13 Koninklijke Philips Electronics N.V. Converting decoded sub-band signal into a stereo signal

Also Published As

Publication number Publication date
DE602004005020D1 (de) 2007-04-12
JP2006523859A (ja) 2006-10-19
CN1774956A (zh) 2006-05-17
KR101200776B1 (ko) 2012-11-13
CN1774956B (zh) 2011-10-05
CN1774957A (zh) 2006-05-17
EP1618763B1 (en) 2007-02-28
JP4834539B2 (ja) 2011-12-14
US20070112559A1 (en) 2007-05-17
RU2005135650A (ru) 2006-03-20
EP1618763A1 (en) 2006-01-25
KR20050122267A (ko) 2005-12-28
BRPI0409337A (pt) 2006-04-25
ES2281795T3 (es) 2007-10-01
PL1618763T3 (pl) 2007-07-31
US8311809B2 (en) 2012-11-13
ATE355590T1 (de) 2006-03-15
DE602004005020T2 (de) 2007-10-31
KR20110044281A (ko) 2011-04-28
WO2004093495A1 (en) 2004-10-28

Similar Documents

Publication Publication Date Title
KR101169596B1 (ko) 오디오 신호 합성
US7058571B2 (en) Audio decoding apparatus and method for band expansion with aliasing suppression
JP4597967B2 (ja) オーディオ信号生成
RU2381569C2 (ru) Способ и устройство масштабирования сигнала по времени
EP1999997B1 (en) Enhanced method for signal shaping in multi-channel audio reconstruction
AU2007300813B2 (en) Methods and apparatuses for encoding and decoding object-based audio signals
Purnhagen Low complexity parametric stereo coding in MPEG-4
MX2007002854A (es) Metodo y dispositivo para generar senal de multicanal o conjunto de datos de parametros.
KR20150073180A (ko) 후방 호환성 다중 해상도 공간적 오디오 오브젝트 코딩을 위한 인코더, 디코더 및 방법
MX2014010098A (es) Control de coherencia de fase para señales armonicas en codecs de audio perceptual.
JP5232791B2 (ja) ミックス信号処理装置及びその方法
RU2420026C2 (ru) Способы и устройства для кодирования и декодирования аудиосигналов на основе объектов
JP2004053940A (ja) オーディオ復号化装置およびオーディオ復号化方法
Härmä et al. Spatial decomposition of time-frequency regions: subbands or sinusoids

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150716

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160712

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170712

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190716

Year of fee payment: 8