KR20070003544A - 아비트러리다운믹스게인을 이용한 클리핑복원 - Google Patents

아비트러리다운믹스게인을 이용한 클리핑복원 Download PDF

Info

Publication number
KR20070003544A
KR20070003544A KR1020060030653A KR20060030653A KR20070003544A KR 20070003544 A KR20070003544 A KR 20070003544A KR 1020060030653 A KR1020060030653 A KR 1020060030653A KR 20060030653 A KR20060030653 A KR 20060030653A KR 20070003544 A KR20070003544 A KR 20070003544A
Authority
KR
South Korea
Prior art keywords
audio signal
downmix
information
bitstream
gain value
Prior art date
Application number
KR1020060030653A
Other languages
English (en)
Inventor
방희석
오현오
김동수
임재현
정양원
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US11/994,311 priority Critical patent/US8073702B2/en
Priority to TW95124113A priority patent/TWI319868B/zh
Priority to MYPI20063141 priority patent/MY149615A/en
Priority to EP06757751A priority patent/EP1913576A2/en
Priority to JP2008519180A priority patent/JP5227794B2/ja
Priority to MYPI20063145A priority patent/MY157901A/en
Priority to TW95124111A priority patent/TWI376107B/zh
Priority to TW098105155A priority patent/TWI409803B/zh
Priority to CA2613731A priority patent/CA2613731C/en
Priority to CN2006800293985A priority patent/CN101243488B/zh
Priority to US11/994,315 priority patent/US8494667B2/en
Priority to CN200680029607.6A priority patent/CN101243491B/zh
Priority to AU2006266655A priority patent/AU2006266655B2/en
Priority to US11/994,317 priority patent/US8082157B2/en
Priority to MYPI20063144 priority patent/MY145249A/en
Priority to RU2008103325/09A priority patent/RU2393550C2/ru
Priority to PCT/KR2006/002579 priority patent/WO2007004830A1/en
Priority to PCT/KR2006/002578 priority patent/WO2007004829A2/en
Priority to PCT/KR2006/002575 priority patent/WO2007004828A2/en
Priority to EP06757752.8A priority patent/EP1913577B1/en
Priority to EP06757748A priority patent/EP1946294A2/en
Priority to TW95124112A priority patent/TWI314722B/zh
Priority to JP2008519178A priority patent/JP2009500656A/ja
Priority to JP2008519179A priority patent/JP2009500657A/ja
Priority to CN2006800292910A priority patent/CN101297352B/zh
Publication of KR20070003544A publication Critical patent/KR20070003544A/ko
Priority to HK09101392.3A priority patent/HK1123623A1/xx
Priority to HK09103907.7A priority patent/HK1127664A1/xx

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Stereophonic System (AREA)

Abstract

본 발명은 멀티채널 오디오 신호의 공간 정보에 대한 부호-복호화(encoding-decoding)방법에 관한 것으로서, 더욱 상세하게는 아비트러리다운믹스게인 값을 이용한 클리핑 복원방법을 갖는 멀티채널 오디오 신호의 부호화-복호화 방법에 대한 것이다. 본 발명은 외부에서 직접 입력되는 다운믹스 오디오신호와 멀티채널을 직접 다운믹스하여 생성된 다운믹스 오디오신호를 비교하여 생성된 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키고, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 클리핑복원정보를 이용하여 다운믹스 오디오신호의 클리핑된 부분을 복원함으로써 멀티채널 오디오 신호를 다운믹스하는 과정에서 발생되는 클리핑 문제를 효과적으로 방지할 수 있는 방법 및 장치를 제공한다. 또한, 본 발명은 상기 아비트러리다운믹스게인 값을 클리핑복원을 위한 정보로 구성하거나, 또는 다운믹스 오디오신호를 복원하기 위한 정보로 구성하고, 상기 아비트러리다운믹스게인 값의 데이터구조에 관한 정보를 상기 공간 정보 비트스트림내에 포함시킴으로써, 상기 아비트러리다운믹스게인 값을 효율적으로 이용할 수 있는 방법 및 장치를 제공한다.
공간 정보, 멀티채널, 클리핑.

Description

아비트러리다운믹스게인을 이용한 클리핑복원{CLIPPING RESTORATION BY ARBITRARY DOWNMIX GAIN}
도 1은 본 발명에서의 오디오 신호에 대한 공간 정보를 인간이 인식하는 방법을 나타내는 도면.
도 2는 클리핑 발생과정을 나타내는 도면.
도 3은 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 인코딩 방법에 대한 도면.
도 4는 본 발명에 따른 아비트러리다운믹스게인 값에 대한 데이터 구조를 선택할 수 있는 인코딩 방법에 대한 도면.
도 5는 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 디코딩 방법에 대한 도면.
도 6은 본 발명에 따른 아비트러리다운믹스게인 값에 대한 데이터 구조를 선택할 수 있는 디코딩 방법에 대한 도면.
도 7은 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 인코딩 방법에 대한 흐름도.
도 8은 본 발명에 따른 아비트러리다운믹스게인 값에 대한 데이터 구조를 선택할 수 있는 인코딩 방법에 대한 흐름도.
도 9는 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 디코딩 방법에 대한 흐름도.
도 10은 본 발명에 따른 아비트러리다운믹스게인 값에 대한 데이터 구조를 선택할 수 있는 디코딩 방법에 대한 흐름도.
*도면의 주요부분에 대한 부호의 설명
101.원거리 음원 102.직접적인 음파
104.반사된 음파 301.멀티채널 오디오 신호
302.다운믹스부 303.외부 다운믹스오디오신호입력부
304.공간정보발생부 305.아비트러리다운믹스게인생성부
306.클리핑복원정보삽입부 307.비트스트림포맷터
309.공간 인코더 406.클리핑복원정보삽입부
502.비트스트림수신부 503.아비트러리다운믹스게인추출부
504.클리핑복원부 505.멀티채널생성부
507.공간디코더 603.데이터구조정보독출부
604.아비트러리다운믹스게인적용부
본 발명은 멀티채널 오디오 신호의 공간 정보에 대한 부호-복호화(encoding-decoding)방법에 관한 것으로서, 더욱 상세하게는 아비트러리다운믹스게인 값를 이 용한 클리핑 복원방법을 갖는 멀티채널 오디오 신호의 부호화-복호화 방법에 대한 것이다.
최근에 디지털 오디오 신호에 대한 다양한 코딩기술 및 방법들이 개발되고 있으며, 이와 관련된 제품들이 생산되고 있다. 또한 심리음향 모델(Psychoacoustic model)을 이용한 멀티채널 오디오 신호(multi-channel audio signal)의 코딩방법들이 개발되고 있으며, 이에 대한 표준화 작업이 진행되고 있다. 상기 심리음향 모델은 인간이 소리를 인식하는 방식, 예를 들면 큰 소리 다음에 오는 작은 소리는 들리지 않으며, 20Hz 내지 20000Hz의 주파수에 해당되는 소리만 들을 수 있다는 사실을 이용하여, 코딩과정에서 불필요한 부분에 대한 오디오 신호를 제거함으로써 필요한 데이터의 양을 효과적으로 줄일 수 있는 것이다.
현재 MPEG-1 오디오(MEPG-1 레이어 Ⅲ), MPEG-4 AAC(Advanced Audio Coding) 및 MPEG-4 HE-AAC(High-Efficiency AAC)와 같은 오디오 표준 기술이 개발되어 상용화되고 있다. 또한 공간 정보를 이용하는 멀티채널 오디오 신호의 코딩방법이 개발되고 있다. 상기 멀티채널 오디오 신호의 코딩방법은 압축된 오디오 신호(예를 들면, 모노 또는 스테레오 오디오 신호) 및 낮은 비트-레이트의 부가정보(low-rate side information)(예를 들면, 공간 정보) 채널을 이용하여 멀티채널 오디오 신호의 전송 효율을 매우 효과적으로 향상시키는 것이다.
그러나, 상기 멀티채널 오디오 신호의 비트스트림을 구성하는데 있어서, 종래에는 멀티채널을 모노 또는 스테레오 오디오 신호로 다운믹스하면 클리핑(Clipping) 문제가 발생하였었다. 특히 부호화된 신호는 16비트 등으로 크기가 제한되어야하므로, 상기 부호화된 신호는 코어 코덱 인코딩 이후에도 클리핑이 지속된다. 상기 클리핑은 오디오 신호의 출력에도 영향을 주며, 음질 저하의 원인이 되었었다.
따라서 상기와 같은 문제점을 해결하기 위해 제안된 본 발명은, 멀티채널 오디오 신호를 코딩하는데 있어서, 아비트러리다운믹스게인 값을 이용하여 클리핑된 부분을 복원함으로써, 멀티채널 오디오 신호에서 일어나는 클리핑 문제를 해결하는 방법 및 장치를 제공하는데 그 목적이 있다. 또한, 본 발명은 상기 아비트러리다운믹스게인 값을 클리핑복원 또는 외부에서 공급된 다운믹스 오디오신호의 복원에 선택적으로 이용할 수 있는 방법 및 장치를 제공하는데 그 목적이 있다.
상기의 목적을 달성하기 위하여, 본 발명은 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 단계와; 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 단계와; 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(Arbitrary Downmix Gain, ADG)정보를 생성하는 단계와; 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하되, 상기 아비트러리다운믹스게인 값에 클리핑이 일어나는 부분의 클리핑복원정보를 포함시키고, 상기 클리핑복원정보가 포함된 아비트러리다운믹스게인 값을 상기 공간 정보 비트스트림에 포함시키는 단계;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호의 인코딩 방법을 제공한다.
상기 아비트러리다운믹스게인 값은 상기 제1 다운믹스 오디오신호와 상기 제2 다운믹스 오디오신호의 차이값을 이용하여 생성되거나, 또는 저주파 부분은 상기 제1 다운믹스 오디오신호의 저주파 부분을 이용하고, 고주파 부분은 상기 제1 다운믹스 오디오 신호와 상기 제2 다운믹스 오디오신호의 차이값을 이용하여 생성될 수 있다. 상기 저주파 부분은 상기 제1 다운믹스 오디오신호의 저주파 부분을 직접 레지듀얼 코딩하여 이용하거나, 또는 상기 제1 다운믹스 오디오신호 중 상기 제2 다운믹스 오디오신호와 차이에 해당되는 값을 레지듀얼 코딩하여 이용할 수 있다. 본 발명은 또한 상기 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키되, 상기 제2 다운믹스 오디오신호의 복원 및 클리핑복원을 모두 할 수 있는 클리핑복원정보를 포함시키는 것을 포함한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 단계와; 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 단계와; 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인 값을 생성하는 단계와; 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하되, 상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함시키는 단계;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호의 인코딩 방법을 제공한다. 상기 데이터 구조에 관한 정보는, 상기 아비트러리다운믹스게 인 값이 상기 제2 다운믹스 오디오신호의 복원을 위한 구조로 생성되었음을 나타내거나, 또는 상기 아비트러리다운믹스게인 값이 클리핑복원을 위한 구조로 생성되었음을 나타낼 수 있다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 단계와; 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩하는 단계와; 상기 디코딩을 통해 얻어진 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원하는 단계;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호로 디코딩하는 방법을 제공한다. 본 발명은 상기 공간 정보 비트스트림으로부터 상기 아비트러리다운믹스게인 값에 클리핑복원정보가 포함되었음을 나타내는 식별정보를 독출하는 단계를 포함할 수 있다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 단계와; 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 독출하는 단계와; 추출된 상기 데이터 구조에 관한 정보에 따라, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 정보를 상기 다운믹스 오디오 신호에 적용하는 단계;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호로 디코딩하는 방법을 제공한다. 상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 클리핑복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다 운믹스게인 값을 디코딩하여 얻은 클리핑복원정보를 이용하여 상기 외부에서 공급된 다운믹스 오디오신호의 클리핑복원을 수행할 수 있다. 상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 다운믹스오디오신호복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 다운믹스오디오신호복원정보를 이용하여 상기 외부에서 공급된 다운믹스오디오신호의 복원을 수행할 수 있다. 상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 클리핑복원정보 및 다운믹스오디오신호복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 클리핑복원정보 및 다운믹스 오디오신호 복원정보를 이용하여, 상기 외부에서 공급된 다운믹스 오디오신호의 클리핑복원 및 다운믹스오디오신호복원을 수행할 수 있다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 오디오 신호가 외부에서 공급되는 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하도록 생성하되, 상기 공간 정보 비트스트림내에 포함되는 아비트레리다운믹스게인정보에 클리핑복원정보를 포함하도록 생성되는 것을 특징으로 하는 오디오 신호의 생성방법을 제공한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 오디오 신호가 외부에서 공급되는 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하도록 생성하되, 상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함하도록 생성되는 것을 특징으로 하는 오디오 신호의 생성방법을 제공한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 다운믹스부; 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 공간정보발생부; 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(Arbitrary Downmix Gain, ADG)정보를 생성하는 아비트러리다운믹스게인생성부; 생성된 상기 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키는 클리핑복원정보삽입부; 및 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하는 비트스트림포맷터;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호의 인코딩 장치를 제공한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 다운믹스부; 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 공간정보발생부; 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인 값을 생성하는 아비트러리다운믹스게인생성부; 상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함시키는 데이터구조선택부; 및 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하는 비트스트림포맷터;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호의 인코딩 장치를 제공한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 비트스트림수신부; 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩하는 아비트러리다운믹스게인추출부; 및 상기 디코딩을 통해 얻어진 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원하는 클리핑복원부;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호로 디코딩 장치를 제공한다.
또한, 상기의 목적을 달성하기 위하여, 본 발명은 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 비트스트림수신부; 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 독출하는 데이터구조독출부; 및 추출된 상기 데이터 구조에 관한 정보에 따라, 상기 아비트러리다운믹스게인 값을 디코딩하고, 상기 디코딩을 통해 얻은 정보를 상기 다운믹스 오디오 신호에 적용하는 아비트러리다운믹스게인적용부;를 포함하는 것을 특징으로 하는 멀티채널 오디오 신호의 디코딩 장치를 제공한다.
이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다.
도 1 은 본 발명에서의 오디오 신호에 대한 공간 정보를 인간이 인식하는 방법을 도시한다. 멀티채널 오디오 신호에 대한 코딩방법은 인간이 오디오 신호를 3차원적 공간으로 인지한다는 사실을 바탕으로, 복수의 파라미터 세트(parameter sets)를 통하여 상기 오디오 신호를 3차원적 공간 정보로 표현할 수 있다는 것을 이용한다. 멀티채널 오디오 신호의 공간 정보를 표시하기 위한 "공간 파라미터"라고 불리는 상기 파라미터에는 ICLD(Inter Channel level differences), ICC(Inter Channel Coherences) 및 ICTD(Inter Channel Time Difference)등이 있다. 상기 ICLD는 두 채널간의 에너지 차이를 의미하고, 상기 ICC는 두 채널 간의 상관관계(correlation)를 의미하며, ICTD는 두 채널간의 시간 차이를 의미한다.
인간이 오디오 신호를 어떻게 공간적으로 인식하며, 상기 공간 파라미터의 개념이 어떻게 생성되는지가 도 1에 도시된다. 원거리에 있는 음원(105)으로부터의 직접적인 음파(direct sound wave)(103)가 인간의 왼쪽 귀(107)에 도달하고, 또 다른 직접적인 음파(102)는 머리 주위에서 회절되어 오른쪽 귀(106)에 도달하게 된다. 상기 두 음파(102 및 103)는 도달시간 및 에너지 레벨에서 차이를 보이게 되며, 이와 같은 차이가 상기 CLD, CPC 및 CTD 파라미터를 생성하게 된다.
또한 만일 반사된 음파(104 및 105)가 양 귀에 도달되거나, 또는 상기 음원(105)이 분산되어 있다면, 서로 상관관계가 없는 음파가 양 귀에 도달될 것이고, 이것이 상기 ICC 파라미터를 생성하게 된다. 상기와 같이 원리로 생성된 공간 파라미터들은 멀티채널 오디오 신호를 모노 또는 스테레오 신호로 전송한 후 다시 멀티채널로 출력하는데 있어서, 강력한 비트 수 감소를 가능하게 한다는 것이 알려져 있다. 본 발명은 상기 공간 정보를 이용하는 멀티채널 오디오 신호에 있어서, 멀티채널을 다운믹스하여 코딩하는 과정에서 발생할 수 있는 클리핑(Clipping) 현상을 방지하기 위한 방법을 제시한다.
도 2는 클리핑 발생과정을 도시한다. 클리핑은 주로 두 가지 원인으로 발생한다. 첫 번째는 원래 신호(original signal)의 음량(sound level)이 높은 경우에 발생한다. 두 번째는 다운믹스 과정 중에 입력 채널(input channel)의 수가 많은 경우에 발생한다. 예를 들면, 3개의 채널을 1개의 채널로 다운믹스하는 경우보다, 7개의 채널을 1개의 채널로 다운믹스하는 경우에 클리핑이 더 자주 발생한다. 도 2의 클리핑 발생과정은 5개 채널을 1개의 채널로 다운믹스하는 경우를 도시하나, 본 발명은 이 경우에만 한정되지는 않는다.
도 2의 (a)는 5개의 채널로 구성된 원래 신호의 음량을 도시한다. 각각의 채널은 제한된 크기(예를 들면, 16비트)의 거의 전 범위를 사용할 수 있다. 도 2의 (b)는 상기 5개의 채널을 다운믹스하여 생성된 다운믹스 오디오 신호를 도시한다. 도시된 것처럼, 상기 다운믹스 오디오 신호는 많은 클리핑 지점들을 가질 수 있다. 도 2의 (c)는 상기 다운믹스 오디오 신호를 코어 코덱(예를 들면, AAC 코덱)을 이용하여 인코딩/디코딩한 오디오 신호를 도시한다. 상기 코어 코덱을 이용하여 인코딩/디코딩된 오디오 신호도 제한된 크기(예를 들면, 16비트)로 표현되므로, 클리핑이 지속될 수 있다. 상기 클리핑은 멀티채널 오디오 신호의 재생부에서의 출력에도 영향을 주며, 음질 저하의 원인이 될 수 있다.
도 3은 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 인코딩 방법을 도시한다. 도시된 것처럼, 멀티채널 오디오 신호(301)가 공간 인코더(309)에 입력된 후에, 다운믹스부(302)에서 다운믹스되어 다운믹스 오디오 신호(이하, "제1 다운믹스 오디오신호"라 한다)를 생성한다. 도면에서 n은 상기 공간 인코더(309)에 입력되는 입력 채널의 수를 의미한다. 또한, 공간정보발생부(304)에서 상기 멀티채널 오디오 신호(301)로부터 공간 정보를 추출하고, 추출된 상기 공간 정보를 이용하여 공간 정보 비트스트림을 생성한다. 그 다음에 외부에서 직접 입력되는 외부 다운믹스 오디오신호(이하, "제2 다운믹스 오디오신호"라 한다)가 외부다운믹스오디오신호입력부(303)에 입력되고, 아비트러리다운믹스게인생성부(305)에서 상기 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(Arbitrary Downmix Gain, ADG) 정보를 결정한다. 이때, 상기 아비트러리다운믹스게인 값은 상기 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오 신호의 차이정보을 이용하여 생성될 수 있다. 본 발명에서 "아비트러리다운믹스게인" 값은 외부에서 직접 입력되는 다운믹스 오디오신호를 다운믹스부에서 멀티채널을 다운믹스하여 생성되는 다운믹스 오디오신호와 근접하게 만들어주는 정보를 말한다.
또한, 본 발명은 상기 ADG 값을 생성함에 있어서, 보다 향상된 성능을 위해 저주파 부분은 게인(gain)이 아니고, 상기 제1 다운믹스 오디오 신호의 저주파 부분을 레지듀얼 코딩하여 생성하고, 고주파 부분은 기존과 마찬가지로 상기 ADG를 상기 제2 다운믹스 오디오신호의 고주파 부분에 적용하여 멀티채널 오디오신호의 복호화를 위한 다운믹스 오디오신호의 고주파 부분을 생성할 수 있다. 본 발명에서 "레지듀얼 코딩"이란 공간 인코더(309)에서 생성된 다운믹스 오디오신호의 일부를 그대로 코딩하는 것을 말한다. 이 경우에, 상기 제1 다운믹스 오디오 신호의 저주파 부분에 대한 레지듀얼 코딩을 수행할 때, 상기 제1 다운믹스 오디오신호의 저주 파 부분 값을 직접 레지듀얼 코딩하여 상기 ADG 값의 저주파 부분을 생성할 수도 있고, 또는 상기 제2 다운믹스 오디오신호와의 차이에 해당하는 값만을 레지듀얼 코딩하여 상기 ADG 값의 저주파 부분을 생성할 수 있다.
상기와 같이 생성된 ADG 및 제1 다운믹스 오디오 신호의 저주파 부분을 레지듀얼 코딩하여 생성된 ADG 값에 클리핑이 일어나는 지점의 클리핑복원정보를 포함하거나 덧붙여 보냄으로써 디코더에서 클리핑복원을 수행할 수 있다. 예를 들면, 클리핑이 일어나는 지점이 존재할 경우, 상기 지점에서의 위치와 크기정보를 상기 ADG 값에 포함하여 전송하거나, 상기 제1 다운믹스 오디오신호의 저주파 부분을 레지듀얼 코딩하여 생성된 ADG 값에 포함하여 전송할 수 있다. 또한, 본 발명에서는 상기 ADG 값들에 클리핑복원 및 다운믹스 오디오신호 복원을 동시에 할 수 있는 정보를 포함하여 전송할 수 있다. 상기와 같이 생성된 ADG값들은 공간 정보 비트스트림내에 포함될 수 있다. 이때, 상기 공간 정보 비트스트림내에 클리핑복원정보가 포함되었음을 나타내는 식별정보가 포함될 수 있다. 그 다음에 비트스트림포맷터(307)에서 상기 제2 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림(308)을 생성하여 전송한다.
도 4는 본 발명에 따른 아비트러리다운믹스게인 값의 데이터 구조를 선택할 수 있는 인코딩 방법을 도시한다. 도시된 것처럼, 멀티채널 오디오신호(401)가 공간 인코더(409)에 입력된 후에, 다운믹스부(402)에서 다운믹스 오디오신호를 생성한다. 또한, 공간정보발생부(404)에서 상기 멀티채널 오디오신호(401)로부터 공간 정보를 추출하고, 추출된 상기 공간 정보를 이용하여 공간 정보 비트스트림을 생성 한다. 그 다음에 외부에서 직접 입력되는 제2 다운믹스 오디오신호가 외부다운믹스오디오신호입력부(403)에 입력되고, 아비트러리다운믹스게인생성부(405)에서 상기 제2 다운믹스 오디오신호와 상기 다운믹스부(402)에서 생성된 제1 다운믹스 오디오 신호를 비교하여 아비트러리다운믹스게인 값을 결정한다.
상기 아비트러리다운믹스게인 값은 클리핑복원정보를 포함하는 구조로 생성되거나, 또는 상기 제2 다운믹스 오디오신호를 상기 제1 다운믹스 오디오신호에 근접하게 복원하는데 이용되는 다운믹스오디오신호복원정보를 포함하는 구조로 생성될 수 있다. 데이터구조선택부(406)는 각각의 경우에 대한 식별정보(즉, 데이터 구조에 관한 정보)를 상기 공간 정보 비트스트림내에 포함할 수 있다. 예를 들면, 만일 상기 ADG 값이 클리핑복원을 위한 정보로 생성된 경우, 상기 데이터 구조에 관한 정보는 상기 아비트러리다운믹스게인 값에 클리핑복원정보가 포함되었음을 나타낼 수 있다. 만일 상기 ADG 값이 다운믹스 오디오신호의 복원을 위한 정보로 생성된 경우, 상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 다운믹스오디오신호복원정보가 포함되었음을 나타낼 수 있다. 그 다음에 비트스트림포맷터(407)에서 상기 제2 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림(408)을 생성하여 전송한다. 상기 전체 비트스트림에는 상기 ADG 값의 데이터 구조에 대한 정보가 포함될 수 있다.
도 5는 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 디코딩 방법을 도시한다. 도시된 것처럼, 공간 디코더(507)를 구성하는 비트스트림수신부(502)는 아비트러리다운믹스게인 값을 포함하는 전체 비트스트 림(501)을 수신한다. 상기 전체 비트스트림에는 외부에서 직접 입력된 제2 다운믹스 오디오신호를 포함할 수 있다. 또한, 상기 전체 비트스트림에는 클리핑복원정보 및 상기 클리핑복원정보에 대한 식별정보 등이 포함될 수 있다. 상기 비트스트림수신부(502)는 상기 제2 다운믹스 오디오신호와 상기 공간 정보 비트스트림을 분리할 수 있다. 그 다음에 아비트러리다운믹스게인추출부(503)는 상기 공간 정보 비트스트림으로부터 상기 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩하여 클리핑복원정보를 얻는다. 상기 클리핑복원정보는 다운믹스 오디오신호를 인코딩할 때 잘려진 클리핑된 신호에 해당될 수 있다. 클리핑복원부(504)는 상기 클리핑복원정보를 이용하여 상기 다운믹스 오디오신호의 클리핑된 부분을 복원할 수 있다.
또한, 상기 공간 디코더(507)는 클리핑이 일어난 부분에 상기 ADG 값을 적용하여 게인을 조절함으로써 클리핑이 발생한 부분을 복원하거나, 부호화된 저주파 부분의 정보만을 이용하여 상기 제2 다운믹스 오디오신호를 복원하거나, 또는 상기 두 정보를 동시에 이용하여 클리핑이 일어난 부분을 복원하고, 상기 제2 다운믹스 오디오신호를 상기 제1 다운믹스 오디오 신호에 근접하게 복원할 수 있다. 그 다음에, 멀티채널생성부(505)는 상기 공간 정보 비트스트림을 디코딩하여 얻어진 공간 정보를 이용하여, 상기 클리핑된 부분이 복원된 다운믹스 오디오신호를 멀티채널 오디오 신호(506)로 변환할 수 있다.
도 6은 본 발명에 따른 아비트러리다운믹스게인 값의 데이터 구조를 선택할 수 있는 디코딩 방법을 도시한다. 도시된 것처럼, 공간 디코더(607)를 구성하는 비 트스트림수신부(502)는 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림(601)을 수신한다. 상기 전체 비트스트림에는 외부에서 직접 입력되는 제2 다운믹스 오디오신호를 포함할 수 있다. 또한, 상기 전체 비트스트림에는 아비트러리다운믹스게인(ADG) 값에 대한 데이터구조정보 등이 포함될 수 있다. 상기 비트스트림수신부(602)는 상기 다운믹스 오디오신호와 상기 공간 정보 비트스트림을 분리할 수 있다.
그 다음에 데이터구조정보독출부(603)는 상기 공간 정보 비트스트림으로부터 상기 ADG 값에 관한 데이터구조정보를 독출할 수 있다. 만일, 상기 데이터구조정보가 클리핑복원정보를 위해 상기 ADG 값이 생성되었다는 것을 표시하면, 상기 ADG 값을 디코딩하여 얻어진 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원할 수 있다. 만일, 상기 데이터구조정보가 외부에서 직접 입력된 제2 다운믹스 오디오신호의 복원을 위해 레지듀얼 신호가 생성되었다는 것을 표시하면, 상기 레지듀얼 신호를 디코딩하여 얻은 다운믹스오디오신호복원정보를 이용하여 상기 제2 다운믹스 오디오신호를 상기 제1 다운믹스 오디오신호와 근접하도록 복원할 수 있다. 그 다음에 멀티채널생성부(605)는 상기 공간 정보 비트스트림을 디코딩하여 얻어진 공간 정보를 이용하여 상기와 같이 복원된 다운믹스 오디오 신호를 멀티채널 오디오 신호(606)로 변환할 수 있다.
도 7은 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 인코딩 방법에 대한 흐름도이다. 먼저 멀티채널 오디오 신호(701)를 다운믹스하여 제1 다운믹스 오디오신호를 생성(702)하고, 상기 멀티채널 오디오신 호로부터 공간 정보를 추출(703)한다. 그 다음에 외부에서 직접 입력되는 제2 다운믹스 오디오신호(예를 들면, 아티스틱 다운믹스신호)와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(ADG) 값을 결정(704)한다. 상기 아비트러리다운믹스게인 값에 클리핑이 일어나는 부분에 대한 클리핑복원정보를 포함(705)시키고, 상기 아비트러리다운믹스게인 값을 포함하도록 공간 정보 비트스트림을 생성(706)한다. 이때, 상기 공간 정보 비트스트림내에 상기 ADG 값에 클리핑복원정보가 포함되었음을 표시하는 식별정보가 포함될 수 있다. 그 다음에 상기 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 전송(707)한다.
도 8은 본 발명에 따른 아비트러리다운믹스게인 값의 데이터 구조를 선택할 수 있는 인코딩 방법에 대한 흐름도이다. 먼저 멀티채널 오디오 신호(801)를 다운믹스하여 제1 다운믹스 오디오신호를 생성(802)하고, 상기 멀티채널 오디오신호로부터 공간 정보를 추출(803)한다. 그 다음에 외부에서 직접 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(ADG) 값을 결정(804)한다. 상기 아비트러리다운믹스게인 값은 클리핑복원정보를 포함하거나, 또는 상기 제2 다운믹스 오디오신호를 상기 제1 다운믹스 오디오 신호에 근접하게 복원하는데 사용되는 다운믹스오디오신호복원정보를 포함할 수 있다. 상기 아비트러리다운믹스게인 값의 데이터 구조에 대한 데이터구조정보를 포함(805)하도록 공간 정보 비트스트림을 생성(806)한다. 그 다음에 상기 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 전송(807)한 다.
도 9는 본 발명에 따른 아비트러리다운믹스게인 값을 이용하여 클리핑을 방지하기 위한 디코딩 방법에 대한 흐름도이다. 먼저 다운믹스 오디오 신호 및 공간 정보를 포함하는 전체 비트스트림을 수신(901)하고, 상기 전체 비트스트림으로부터 다운믹스 오디오 신호 및 공간 정보 비트스트림을 추출(902 및 903)한다. 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩(904)한다. 상기 디코딩을 통해 클리핑복원정보를 추출(906)하고, 추출된 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원(905)할 수 있다. 그 다음에 상기 공간 정보 비트스트림을 디코딩하여 얻어진 공간 정보를 이용하여 클리핑된 부분이 복원된 상기 다운믹스 오디오 신호를 멀티채널 오디오 신호로 변환(907)한다.
도 10은 본 발명에 따른 아비트러리다운믹스게인 값의 데이터 구조를 선택할 수 있는 디코딩 방법에 대한 흐름도이다. 먼저 다운믹스 오디오신호 및 공간 정보를 포함하는 전체 비트스트림을 수신(1001)하고, 상기 전체 비트스트림으로부터 다운믹스 오디오신호 및 공간 정보 비트스트림을 추출(1002 및 1003)한다. 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값의 데이터구조에 관한 정보를 독출(1004)한다. 상기 데이터구조에 관한 정보는 상기 아비트러리다운믹스게인 값이 클리핑복원을 위한 구조로 생성되었는지, 또는 외부에서 직접 공급된 제2 다운믹스 오디오신호의 복원을 위한 구조로 생성되었는지에 관한 정보가 될 수 있다. 독출된 상기 데이터구조에 관한 정보에 따라 상기 아비트러리다운믹스게인 값을 디 코딩(1006)하고, 상기 디코딩을 통해 얻은 정보를 이용하여 상기 다운믹스 오디오신호의 클리핑된 부분의 복원 또는 제2 다운믹스 오디오신호를 상기 제1 다운믹스 오디오신호에 근접하도록 복원을 수행(1005)할 수 있다. 그 다음에 상기 공간 정보 비트스트림을 디코딩하여 얻어진 공간 정보를 이용하여 상기 다운믹스 오디오신호를 멀티채널 오디오 신호로 변환(1007)한다.
지금까지 본 발명에 대하여 몇몇 실시예들을 들어 구체적으로 설명하였으나, 상기 실시예들은 본 발명을 이해하기 위한 설명을 위해 제시된 것이며, 본 발명의 범위가 상기 실시예에 제한되는 것은 아니다. 당업자라면 본 발명의 기술적 사상의 범위를 벗어나지 않고도 다양한 변형이 가능함을 이해할 수 있을 것이며, 본 발명의 범위는 첨부된 특허청구범위에 의해서 해석되어야 할 것이다.
이상에서 기술된 것과 같이, 본 발명에 따른 멀티채널 오디오 신호를 코딩하는데 있어서, 외부에서 직접 입력되는 다운믹스 오디오신호와 멀티채널을 직접 다운믹스하여 생성된 다운믹스 오디오신호를 비교하여 생성된 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키고, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 클리핑복원정보를 이용하여 다운믹스 오디오신호의 클리핑된 부분을 복원함으로써 멀티채널 오디오 신호를 다운믹스하는 과정에서 발생되는 클리핑 문제를 효과적으로 방지할 수 있다.
또한, 상기 아비트러리다운믹스게인 값의 데이터구조에 관한 정보를 상기 공간 정보 비트스트림내에 포함시킴으로써, 상기 데이터구조에 관한 정보에 따라 상 기 아비트러리다운믹스게인 값을 클리핑복원을 위한 정보로 구성하거나, 또는 다운믹스 오디오신호를 복원하기 위한 정보로 구성함으로써 아비트러리다운믹스게인 값을 효율적으로 이용할 수 있다.

Claims (23)

  1. 멀티채널 오디오 신호를 인코딩하는 방법에 있어서,
    (a) 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 단계;
    (b) 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 단계;
    (c) 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(Arbitrary Downmix Gain, ADG)정보를 생성하는 단계; 및
    (d) 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하되, 상기 아비트러리다운믹스게인 값에 클리핑이 일어나는 부분에 대한 클리핑복원정보를 포함시키고, 상기 클리핑복원정보가 포함된 아비트러리다운믹스게인 값을 상기 공간 정보 비트스트림에 포함시키는 단계;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  2. 제 1 항에 있어서,
    상기 아비트러리다운믹스게인 값은 상기 제1 다운믹스 오디오신호와 상기 제2 다운믹스 오디오신호의 차이값을 이용하여 생성되는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  3. 제 1 항에 있어서,
    상기 아비트러리다운믹스게인 값은 저주파 부분은 상기 제1 다운믹스 오디오신호의 저주파 부분을 이용하고, 고주파 부분은 상기 제1 다운믹스 오디오 신호와 상기 제2 다운믹스 오디오신호의 차이값을 이용하여 생성되는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  4. 제 3 항에 있어서,
    상기 저주파 부분은 상기 제1 다운믹스 오디오신호의 저주파 부분을 직접 레지듀얼 코딩하여 이용하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  5. 제 3 항에 있어서,
    상기 저주파 부분은 상기 제1 다운믹스 오디오신호 중 상기 제2 다운믹스 오디오신호와 차이에 해당되는 값을 레지듀얼 코딩하여 이용하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  6. 제 1 항에 있어서,
    상기 (d)단계는,
    상기 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키되, 상기 제2 다운믹스 오디오신호의 복원 및 클리핑복원을 모두 할 수 있는 클리핑복원정보를 포함시키는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  7. 제 1 항에 있어서,
    상기 (d)단계는,
    클리핑복원정보가 상기 아비트러리다운믹스게인 값에 포함되었음을 나타내는 식별정보를 상기 공간 정보 비트스트림내에 포함시키는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  8. 멀티채널 오디오 신호를 인코딩하는 방법에 있어서,
    (a) 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 단계;
    (b) 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 단계;
    (c) 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인 값을 생성하는 단계; 및
    (d) 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하되, 상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함시키는 단계;를 포함하는 것을 특징으 로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  9. 제 8 항에 있어서,
    상기 데이터 구조에 관한 정보는, 상기 아비트러리다운믹스게인 값이 상기 제2 다운믹스 오디오신호의 복원을 위한 구조로 생성되었음을 나타내는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  10. 제 8 항에 있어서,
    상기 데이터 구조에 관한 정보는, 상기 아비트러리다운믹스게인 값이 클리핑복원을 위한 구조로 생성되었음을 나타내는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 방법.
  11. 멀티채널 오디오 신호로 디코딩하는 방법에 있어서,
    (a) 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 단계;
    (b) 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩하는 단계; 및
    (c) 상기 디코딩을 통해 얻어진 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원하는 단계;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  12. 제 11 항에 있어서,
    상기 (b)단계는,
    상기 공간 정보 비트스트림으로부터 상기 아비트러리다운믹스게인 값에 클리핑복원정보가 포함되었음을 나타내는 식별정보를 독출하는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  13. 제 11 항에 있어서,
    상기 (c)단계는,
    상기 아비트러리다운믹스게인 값을 디코딩하여 얻어진 다운믹스 오디오신호 복원정보를 이용하여 상기 외부에서 입력된 다운믹스 오디오신호를 복원하는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  14. 멀티채널 오디오 신호로 디코딩하는 방법에 있어서,
    (a) 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 단계;
    (b) 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 독출하는 단계; 및
    (c) 추출된 상기 데이터 구조에 관한 정보에 따라, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 정보를 상기 다운믹스 오디오 신호에 적용하는 단계;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  15. 제 14 항에 있어서,
    상기 (c)단계는,
    상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 클리핑복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 클리핑복원정보를 이용하여 상기 외부에서 공급된 다운믹스 오디오신호의 클리핑복원을 수행하는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  16. 제 14 항에 있어서,
    상기 (c)단계는,
    상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 다운믹스오디오신호복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 다운믹스오디오신호복원정보를 이용하여 상기 외부에서 공급된 다운믹스오디오신호의 복원을 수행하는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  17. 제 14 항에 있어서,
    상기 (c)단계는,
    상기 데이터 구조에 관한 정보가 상기 아비트러리다운믹스게인 값에 클리핑복원정보 및 다운믹스오디오신호복원정보가 포함되었음을 나타내는 경우, 상기 아비트러리다운믹스게인 값을 디코딩하여 얻은 클리핑복원정보 및 다운믹스 오디오신호 복원정보를 이용하여, 상기 외부에서 공급된 다운믹스 오디오신호의 클리핑복원 및 다운믹스오디오신호복원을 수행하는 단계를 더 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호로 디코딩하는 방법.
  18. 오디오 신호의 생성방법에 있어서,
    상기 오디오 신호는 외부에서 공급되는 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하도록 생성하되,
    상기 공간 정보 비트스트림내에 포함되는 아비트러리다운믹스게인정보에 클리핑복원정보를 포함하도록 생성되는 것을 특징으로 하는, 오디오 신호의 생성방법.
  19. 오디오 신호의 생성방법에 있어서,
    상기 오디오 신호는 외부에서 공급되는 다운믹스 오디오 신호 및 공간 정보 비트스트림을 포함하도록 생성하되,
    상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함하도록 생성되는 것을 특징으로 하는, 오디오 신호의 생성방법.
  20. 멀티채널 오디오 신호의 인코딩 장치에 있어서,
    (a) 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 다운믹스부;
    (b) 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 공간정보발생부;
    (c) 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인(Arbitrary Downmix Gain, ADG)정보를 생성하는 아비트러리다운믹스게인생성부;
    (d) 생성된 상기 아비트러리다운믹스게인 값에 클리핑복원정보를 포함시키는 클리핑복원정보삽입부; 및
    (e) 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하는 비트스트림포맷터;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 장치.
  21. 멀티채널 오디오 신호의 인코딩 장치에 있어서,
    (a) 상기 멀티채널 오디오 신호를 다운믹스하여 제1 다운믹스 오디오신호를 생성하는 다운믹스부;
    (b) 상기 멀티채널 오디오 신호로부터 공간 정보를 추출하여 공간 정보 비트스트림을 생성하는 공간정보발생부;
    (c) 외부에서 입력되는 제2 다운믹스 오디오신호와 상기 제1 다운믹스 오디오신호를 비교하여 아비트러리다운믹스게인 값을 생성하는 아비트러리다운믹스게인생성부;
    (d) 상기 공간 정보 비트스트림내에 상기 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 포함시키는 데이터구조선택부; 및
    (e) 상기 공간 정보 비트스트림 및 제2 다운믹스 오디오신호를 포함하는 전체 비트스트림을 생성하는 비트스트림포맷터;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 인코딩 장치.
  22. 멀티채널 오디오 신호의 디코딩 장치에 있어서,
    (a) 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 비트스트림수신부;
    (b) 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값을 추출하고, 추출된 상기 아비트러리다운믹스게인 값을 디코딩하는 아비트러리다운믹스게인추출부; 및
    (c) 상기 디코딩을 통해 얻어진 클리핑복원정보를 이용하여 상기 다운믹스 오디오 신호의 클리핑된 부분을 복원하는 클리핑복원부;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 디코딩 장치.
  23. 멀티채널 오디오 신호의 디코딩 장치에 있어서,
    (a) 외부에서 입력된 다운믹스 오디오신호 및 공간 정보 비트스트림을 포함하는 전체 비트스트림을 수신하는 비트스트림수신부;
    (b) 상기 공간 정보 비트스트림으로부터 아비트러리다운믹스게인 값의 데이터 구조에 관한 정보를 독출하는 데이터구조독출부; 및
    (c) 추출된 상기 데이터 구조에 관한 정보에 따라, 상기 아비트러리다운믹스게인 값을 디코딩하고, 상기 디코딩을 통해 얻은 정보를 상기 다운믹스 오디오 신호에 적용하는 아비트러리다운믹스게인적용부;를 포함하는 것을 특징으로 하는, 멀티채널 오디오 신호의 디코딩 장치.
KR1020060030653A 2005-06-30 2006-04-04 아비트러리다운믹스게인을 이용한 클리핑복원 KR20070003544A (ko)

Priority Applications (27)

Application Number Priority Date Filing Date Title
US11/994,317 US8082157B2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
EP06757752.8A EP1913577B1 (en) 2005-06-30 2006-06-30 Apparatus for encoding an audio signal and method thereof
MYPI20063141 MY149615A (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
EP06757751A EP1913576A2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
JP2008519180A JP5227794B2 (ja) 2005-06-30 2006-06-30 オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
MYPI20063145A MY157901A (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
TW95124111A TWI376107B (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
TW098105155A TWI409803B (zh) 2005-06-30 2006-06-30 音頻訊號之編碼及解碼方法及其裝置
CA2613731A CA2613731C (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
CN2006800293985A CN101243488B (zh) 2005-06-30 2006-06-30 用于编码和解码音频信号的装置及其方法
US11/994,315 US8494667B2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
CN200680029607.6A CN101243491B (zh) 2005-06-30 2006-06-30 用于编码和解码音频信号的装置及其方法
AU2006266655A AU2006266655B2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
US11/994,311 US8073702B2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
PCT/KR2006/002575 WO2007004828A2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
RU2008103325/09A RU2393550C2 (ru) 2005-06-30 2006-06-30 Устройство и способ кодирования и декодирования звукового сигнала
PCT/KR2006/002579 WO2007004830A1 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
PCT/KR2006/002578 WO2007004829A2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
MYPI20063144 MY145249A (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
TW95124113A TWI319868B (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
EP06757748A EP1946294A2 (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
TW95124112A TWI314722B (en) 2005-06-30 2006-06-30 Apparatus for encoding and decoding audio signal and method thereof
JP2008519178A JP2009500656A (ja) 2005-06-30 2006-06-30 オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
JP2008519179A JP2009500657A (ja) 2005-06-30 2006-06-30 オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
CN2006800292910A CN101297352B (zh) 2005-06-30 2006-06-30 用于编码和解码音频信号的装置及其方法
HK09101392.3A HK1123623A1 (en) 2005-06-30 2009-02-13 Apparatus for encoding and decoding audio signal and method thereof
HK09103907.7A HK1127664A1 (en) 2005-06-30 2009-04-28 Apparatus for encoding and decoding audio signal and method thereof

Applications Claiming Priority (14)

Application Number Priority Date Filing Date Title
US69500705P 2005-06-30 2005-06-30
US60/695,007 2005-06-30
US74860805P 2005-12-09 2005-12-09
US60/748,608 2005-12-09
US75700406P 2006-01-09 2006-01-09
US60/757,004 2006-01-09
US75823606P 2006-01-12 2006-01-12
US60/758,236 2006-01-12
US75860906P 2006-01-13 2006-01-13
US60/758,609 2006-01-13
US75962306P 2006-01-18 2006-01-18
US60/759,623 2006-01-18
US76035906P 2006-01-20 2006-01-20
US60/760,359 2006-01-20

Publications (1)

Publication Number Publication Date
KR20070003544A true KR20070003544A (ko) 2007-01-05

Family

ID=37870364

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020060030653A KR20070003544A (ko) 2005-06-30 2006-04-04 아비트러리다운믹스게인을 이용한 클리핑복원
KR1020060030672A KR20070003546A (ko) 2005-06-30 2006-04-04 멀티채널 오디오 코딩에서 클리핑복원정보를 이용한 클리핑복원방법
KR1020060030671A KR20070003545A (ko) 2005-06-30 2006-04-04 멀티채널 오디오 코딩에서 클리핑 복원방법
KR1020060030652A KR20070003543A (ko) 2005-06-30 2006-04-04 레지듀얼 코딩에 의한 클리핑복원
KR1020060030673A KR20070003547A (ko) 2005-06-30 2006-04-04 소프트클리핑에 의한 멀티채널 오디오 코딩에서의 클리핑복원방법

Family Applications After (4)

Application Number Title Priority Date Filing Date
KR1020060030672A KR20070003546A (ko) 2005-06-30 2006-04-04 멀티채널 오디오 코딩에서 클리핑복원정보를 이용한 클리핑복원방법
KR1020060030671A KR20070003545A (ko) 2005-06-30 2006-04-04 멀티채널 오디오 코딩에서 클리핑 복원방법
KR1020060030652A KR20070003543A (ko) 2005-06-30 2006-04-04 레지듀얼 코딩에 의한 클리핑복원
KR1020060030673A KR20070003547A (ko) 2005-06-30 2006-04-04 소프트클리핑에 의한 멀티채널 오디오 코딩에서의 클리핑복원방법

Country Status (1)

Country Link
KR (5) KR20070003544A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9685167B2 (en) 2008-07-16 2017-06-20 Electronics And Telecommunications Research Institute Multi-object audio encoding and decoding apparatus supporting post down-mix signal

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100936126B1 (ko) * 2009-05-25 2010-01-12 주식회사 이머시스 휴대기기의 음향 퀄리티를 향상시키는 장치 및 방법
CN101605111B (zh) * 2009-06-25 2012-07-04 华为技术有限公司 一种削波控制的方法和装置
US9479886B2 (en) * 2012-07-20 2016-10-25 Qualcomm Incorporated Scalable downmix design with feedback for object-based surround codec
US9761229B2 (en) 2012-07-20 2017-09-12 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for audio object clustering
CN103795448B (zh) * 2012-10-31 2017-09-08 中国移动通信集团公司 接口速率的调整方法、数据处理方法、基站设备与系统
CN105074818B (zh) 2013-02-21 2019-08-13 杜比国际公司 音频编码系统、用于产生比特流的方法以及音频解码器
CN104267259B (zh) * 2014-09-30 2017-01-18 广东电网有限责任公司电力科学研究院 电力谐波测量方法和系统
CN104267257B (zh) * 2014-09-30 2017-02-01 广东电网有限责任公司电力科学研究院 基于点频滤波器的信号幅频谱检测方法和系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9685167B2 (en) 2008-07-16 2017-06-20 Electronics And Telecommunications Research Institute Multi-object audio encoding and decoding apparatus supporting post down-mix signal
US10410646B2 (en) 2008-07-16 2019-09-10 Electronics And Telecommunications Research Institute Multi-object audio encoding and decoding apparatus supporting post down-mix signal
US11222645B2 (en) 2008-07-16 2022-01-11 Electronics And Telecommunications Research Institute Multi-object audio encoding and decoding apparatus supporting post down-mix signal

Also Published As

Publication number Publication date
KR20070003546A (ko) 2007-01-05
KR20070003547A (ko) 2007-01-05
KR20070003545A (ko) 2007-01-05
KR20070003543A (ko) 2007-01-05

Similar Documents

Publication Publication Date Title
JP4601669B2 (ja) マルチチャネル信号またはパラメータデータセットを生成する装置および方法
US7916873B2 (en) Stereo compatible multi-channel audio coding
KR100888474B1 (ko) 멀티채널 오디오 신호의 부호화/복호화 장치 및 방법
RU2576476C2 (ru) Декодер аудиосигнала, кодер аудиосигнала, способ формирования представления сигнала повышающего микширования, способ формирования представления сигнала понижающего микширования, компьютерная программа и бистрим, использующий значение общего параметра межобъектной корреляции
CA2697830C (en) A method and an apparatus for processing a signal
US8804967B2 (en) Method for encoding and decoding multi-channel audio signal and apparatus thereof
JP5292498B2 (ja) 周波数領域のウィナーフィルターを用いた空間オーディオコーディングのための時間エンベロープの整形
KR101506837B1 (ko) 다객체 오디오 신호의 부가정보 비트스트림 생성 방법 및 장치
RU2406166C2 (ru) Способы и устройства кодирования и декодирования основывающихся на объектах ориентированных аудиосигналов
KR20070003544A (ko) 아비트러리다운믹스게인을 이용한 클리핑복원
US20080052089A1 (en) Acoustic Signal Encoding Device and Acoustic Signal Decoding Device
KR20070003594A (ko) 멀티채널 오디오 신호에서 클리핑된 신호의 복원방법
US20080201152A1 (en) Apparatus for Encoding and Decoding Audio Signal and Method Thereof
US20080208600A1 (en) Apparatus for Encoding and Decoding Audio Signal and Method Thereof
RU2007142177A (ru) Адаптивное остаточное аудиокодирование
US20080288263A1 (en) Method and Apparatus for Encoding/Decoding
KR20120013884A (ko) 신호 처리 방법, 그에 따른 엔코딩 장치, 디코딩 장치, 및 신호 처리 시스템
US8626515B2 (en) Apparatus for processing media signal and method thereof
KR20060109297A (ko) 오디오 신호의 인코딩/디코딩 방법 및 장치
KR20060122692A (ko) 공간 정보 비트스트림이 임베드된 다운믹스 오디오 신호를인코딩 및 디코딩하는 방법
KR20070076363A (ko) 오디오 신호의 인코딩 및 디코딩 방법
KR20070075237A (ko) 멀티채널 오디오 신호의 인코딩 및 디코딩 방법
KR20080030848A (ko) 오디오 신호 인코딩 및 디코딩 방법 및 장치
KR20070108312A (ko) 오디오 신호의 인코딩/디코딩 방법 및 장치
KR20070074442A (ko) 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체