KR20070037986A - 다채널 오디오 신호의 처리방법 및 그 장치 - Google Patents

다채널 오디오 신호의 처리방법 및 그 장치 Download PDF

Info

Publication number
KR20070037986A
KR20070037986A KR1020060078223A KR20060078223A KR20070037986A KR 20070037986 A KR20070037986 A KR 20070037986A KR 1020060078223 A KR1020060078223 A KR 1020060078223A KR 20060078223 A KR20060078223 A KR 20060078223A KR 20070037986 A KR20070037986 A KR 20070037986A
Authority
KR
South Korea
Prior art keywords
audio signal
time
domain
decoding
channel audio
Prior art date
Application number
KR1020060078223A
Other languages
English (en)
Inventor
방희석
오현오
김동수
임재현
정양원
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US11/541,471 priority Critical patent/US20070092086A1/en
Priority to US11/540,920 priority patent/US7653533B2/en
Priority to US11/541,395 priority patent/US7840401B2/en
Priority to US11/540,919 priority patent/US7761289B2/en
Priority to US11/541,472 priority patent/US7716043B2/en
Priority to US11/541,397 priority patent/US7742913B2/en
Priority to KR1020087007454A priority patent/KR100888974B1/ko
Priority to TW095136563A priority patent/TWI317244B/zh
Priority to TW095136561A priority patent/TWI317243B/zh
Priority to CN2006800395781A priority patent/CN101297598B/zh
Priority to EP06799056A priority patent/EP1952671A4/en
Priority to KR1020087007450A priority patent/KR100888971B1/ko
Priority to CN200680039452.4A priority patent/CN101297594B/zh
Priority to EP06799055A priority patent/EP1952670A4/en
Priority to PCT/KR2006/003975 priority patent/WO2007049864A1/en
Priority to CN2006800395777A priority patent/CN101297597B/zh
Priority to JP2008537579A priority patent/JP5399706B2/ja
Priority to CA2626132A priority patent/CA2626132C/en
Priority to KR1020087007452A priority patent/KR100888972B1/ko
Priority to PCT/KR2006/003980 priority patent/WO2007049866A1/en
Priority to EP06799057.2A priority patent/EP1952672B1/en
Priority to KR1020087007449A priority patent/KR100875428B1/ko
Priority to PCT/KR2006/003973 priority patent/WO2007049862A1/en
Priority to AU2006306942A priority patent/AU2006306942B2/en
Priority to CN2006800395762A priority patent/CN101297596B/zh
Priority to TW095136564A priority patent/TWI317247B/zh
Priority to JP2008537582A priority patent/JP2009513084A/ja
Priority to KR1020087007453A priority patent/KR100888973B1/ko
Priority to PCT/KR2006/003974 priority patent/WO2007049863A2/en
Priority to JP2008537580A priority patent/JP5270357B2/ja
Priority to RU2008120661/09A priority patent/RU2389155C2/ru
Priority to KR1020087030528A priority patent/KR100928268B1/ko
Priority to JP2008537583A priority patent/JP5249039B2/ja
Priority to KR1020087023852A priority patent/KR101186611B1/ko
Priority to PCT/KR2006/003976 priority patent/WO2007049865A1/en
Priority to EP06799061A priority patent/EP1952675A4/en
Priority to CNA2006800395796A priority patent/CN101297599A/zh
Priority to TW095136566A priority patent/TWI310544B/zh
Priority to JP2008537581A priority patent/JP5249038B2/ja
Priority to KR1020087007451A priority patent/KR100875429B1/ko
Priority to EP06799058A priority patent/EP1952673A1/en
Priority to CNA2006800394539A priority patent/CN101297595A/zh
Priority to PCT/KR2006/003972 priority patent/WO2007049861A1/en
Priority to JP2008537584A priority patent/JP5270358B2/ja
Priority to TW095136559A priority patent/TWI317245B/zh
Priority to TW095136562A priority patent/TWI317246B/zh
Priority to EP06799059.8A priority patent/EP1952674B1/en
Priority to TW098104747A priority patent/TWI450603B/zh
Publication of KR20070037986A publication Critical patent/KR20070037986A/ko
Priority to HK09103908.6A priority patent/HK1126071A1/xx
Priority to US12/872,081 priority patent/US8095357B2/en
Priority to US12/872,044 priority patent/US8095358B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03—Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03—Application of parametric coding in stereophonic audio systems

Abstract

본 발명은 다채널 오디오 신호의 처리방법을 제공하기 위한 것으로, 다운믹스 디코딩부에서 신호 처리된 다운믹스 신호를 적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송하는 단계; 전송된 다운믹스 신호를 이용하여 다채널 오디오 신호를 생성하는 단계; 및 생성된 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함한다.

Description

다채널 오디오 신호의 처리방법 및 그 장치{METHOD AND APPARATUS METHOD FOR PROCESSING MULTI-CHANNEL AUDIO SIGNAL}
도 1은 본 발명의 일실시예에 의한 다채널 오디오 신호의 처리방법을 나타내는 흐름도이고,
도 2 내지 도 4는 본 발명의 실시예들에 의한 다채널 오디오 신호의 처리방법을 수행하는 장치를 포함하는 신호처리 장치의 블록 구성도이다.
* 도면의 주요 부분에 대한 부호의 설명 *
10: 시계열 데이터 디코딩부
20, 20a, 20b: 다채널 오디오 신호처리 장치
21, 21a, 21b: 다운믹스 디코딩부 22, 22a, 22b: 다채널 디코딩부
23, 23a, 23b: 시간지연 보상부
본 발명은 다채널 오디오 신호 처리에 관한 것으로, 특히 출력신호에서 발생한 시간지연을 보상하는 다채널 오디오 신호의 처리방법에 관한 것이다.
최근에 디지털 오디오 신호에 대한 다양한 코딩기술 및 방법들이 개발되고 있으며, 이와 관련된 제품들이 생산되고 있다. 또한 멀티채널 오디오 신호의 공간 정보를 이용하여 모노 또는 스테레오 오디오 등의 다운믹스 신호를 디코딩 단계에서 다채널로 바꾸는 코딩방법들이 개발되고 있다.
상기와 같은 코딩방법을 사용하여 다채널 오디오 신호를 복원할 때, 출력신호의 시간지연을 보상해야 할 경우가 있다. 예를 들면, 다채널 오디오 신호가 비디오, 동영상, 텍스트 등의 시계열 데이터 함께 처리되는 경우가 있다.
따라서 출력되는 다채널 오디오 신호의 시간지연을 보상하는 방법들이 대두되고 있다.
본 발명이 이루고자 하는 기술적 과제는 다채널 오디오 복원을 위해서는 여러 신호처리를 과정을 거치게 되는데, 이 때 각 경우의 신호처리 과정마다 달라질 수 있는 출력신호의 시간지연을 보상하여 시간동기를 맞추는 다채널 오디오 신호의 처리방법을 제공하는데 있다.
또한, 본 발명이 이루고자 하는 또 다른 과제는 다채널 오디오 신호의 처리방법을 수행하는 다채널 오디오 신호의 처리장치를 제공하는데 있다.
상기 과제를 이루기 위해, 본 발명은 다운믹스 디코딩부에서 신호 처리된 다운믹스 신호를 적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송하는 단계; 상기 전송된 다운믹스 신호를 이용하여 다채널 오디오 신호를 생성하는 단계; 및 상기 생성된 다채널 오디오 신호의 시간지연을 보상하는 단계를 포 함하는 다채널 오디오 신호의 처리방법을 제공한다.
또한, 상기 과제를 이루기 위해 본 발명은 다운믹스 디코딩부에서 신호 처리된 다운믹스 신호를 적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송하는 단계; 상기 전송된 다운믹스 신호를 이용하여 다채널 오디오 신호를 생성하는 단계; 및 상기 생성된 다채널 오디오 신호를 시계열 데이터와 비교하여 상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 다채널 오디오 신호의 처리방법을 제공한다.
또한, 상기 과제를 이루기 위해 본 발명은 적어도 2개의 디코딩 방식 중 어느 하나의 방식으로 생성된 다채널 오디오 신호의 처리방법에 있어서, 상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 다채널 오디오 신호의 처리방법을 제공한다.
또한, 상기 과제를 이루기 위해 본 발명은 적어도 2개의 디코딩 방식 중 어느 하나의 방식으로 생성된 다채널 오디오 신호의 처리방법에 있어서, 상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 다채널 오디오 신호의 처리방법을 제공한다.
상기 다른 과제를 이루기 위해 본 발명은 부호화된 다운믹스 신호를 디코딩하는 다운믹스 디코딩부; 상기 디코딩된 다운믹스 신호와 공간정보를 이용하여 다채널 오디오 신호를 생성하는 다채널 디코딩부; 및 상기 다채널 오디오 신호의 시간지연을 보상하는 시간지연 보상부를 포함하는 다채널 오디오 신호의 처리장치를 제공한다.
이하, 상기와 같은 본 발명, 다채널 오디오 신호의 처리방법 및 그 장치의 기술적 사상에 따른 일실시예를 도면을 참조하여 설명하면 다음과 같다. 본 명세서에서 언급되는 디코딩은 신호 처리의 일례가 될 수 있다.
도 1은 본 발명의 일실시예에 의한 다채널 오디오 신호의 처리방법을 수행할 수 있는 나타내는 흐름도이다.
이에 도시된 바와 같이, 본 발명의 크게 다운믹스(down-mix) 신호를 복호화하는 단계(S10), 다채널 오디오 신호를 생성하는 단계(S20), 다채널 오디오 신호의 시간지연을 보상하는 단계(S30)로 이루어진다.
S10단계는 다운믹스 신호의 복호화 단계로, 이는 인코더단에서 부호화된 다운믹스 신호를 복호화하여 출력하는 단계이다. 전술한 다운믹스 신호는 여러 변환과정을 거쳐 복호화될 수 있다.
예를 들어, 전술한 부호화된 다운믹스 신호는 시간 도메인 상에서 신호 처리되어 출력될 수도 있고, QMF(Quadrature Mirror Fiilter) 도메인 상에서 또는 MDCT(Modified Discrete Cosine Transform) 계수 변환단계에서 디코딩되어 출력될 수도 있다는 의미이다.
그런 다음 S10단계에서 디코딩되어 출력된 다운믹스 신호와 공간정보를 이용하여 다채널 오디오 신호를 생성하는 단계를 거친다(S20). 여기서 '공간정보'라 함은 다채널 오디오 신호를 다운믹스(Down-mix) 하거나 다채널 오디오 신호를 생성하기 위해 업믹스(Up-mix) 하는 과정에서 필요한 정보를 의미한다.
다채널 오디오 신호의 생성과정 역시 여러 변환단계를 거치게 되고, 특히 디 코딩 방식에 따라 디코딩을 수행하는 방법이 달라진다. 디코딩 방식의 예로는 음질 중심 방식에 기반을 둔 고음질(High Quality) 버전과 저력 중심 방식에 기반을 둔 저전력(Low Power) 버전이 있다. 고음질 버전이라 함은 상대적으로 섬세하고, 정제된 다채널 오디오 신호를 출력하는 디코딩 방식을 말하고, 저전력 버전이라 함은 음질은 상대적으로 고음질 버전보다는 떨어지지만 고음질 버전보다 구성이 덜 복잡하여 전력소모가 상대적으로 적은 것을 말한다. 본 발명의 일실시예에서는 두 개의 디코딩 방식만이 언급되어 있지만, 본 발명은 이에 한정되지 않고, 보다 많은 디코딩 방식 중에서 선택하여 다채널 오디오 신호의 디코딩이 가능하다.
그리고 S30 단계에서는 S20 단계에서 생성된 다채널 오디오 신호의 시간지연을 보상하는 과정을 수행한다. 이는 특히 시계열 데이터와 함께 다채널 오디오 신호를 재생할 때 유용하다. 시계열 데이터라 함은 동영상(video), 이미지, 텍스트 등과 같이 다채널 오디오 신호와 시간 동기화가 필요하거나 시간의 배열이 필요한 데이터를 의미한다.
이하, 본 발명에 따른 다채널 오디오 신호의 처리방법 및 그 처리방법을 수행하는 장치에 대해 참조되는 도면을 이용하여 보다 상세히 설명하기로 하겠다.
도 2는 본 발명의 일실시예에 의한 다채널 오디오 신호의 처리방법을 수행하는 장치를 포함하는 신호처리 장치의 블록 구성도로서, 도시된 신호처리 장치(A1)는 시계열 데이터 디코딩부(10)와 다채널 오디오 신호의 처리장치(20)로 구성된다.
이에 도시된 바와 같이, 다채널 오디오 신호 처리장치(20)는 다운믹스 디코딩부(21)와, 다채널 디코딩부(22)와, 시간지연 보상부(23)로 구성된다. 먼저, 부호 화된 다운믹스 신호의 일례인 다운믹스 비트스트림(IN2)이 다운믹스 디코딩부(21)로 인가되어 디코딩된다. 여기서 다운믹스 비트스트림(IN2)은 2가지의 도메인 상에서 디코딩되어 출력될 수 있다. 출력될 수 있는 도메인은 시간 도메인과 QMF 도메인이다. 참조번호 100은 시간 도메인에서 디코딩되어 출력되는 다운믹스 신호이고, 참조번호 110은 QMF 도메인에서 디코딩되어 출력되는 다운믹스 신호이다. 본 실시예에서는 2가지 경우의 도메인만을 언급했으나, 본 발명은 이에 한정되지 않고 그 이상의 도메인에서 디코딩되어 출력되는 다운믹스 신호도 포함한다.
이 경우 시간 도메인에서 디코딩되어 출력되는 다운믹스 신호(100)는 다채널 디코딩부(22)로 전송되어 공간정보(SI)와 결합된 후, 다채널 오디오 신호(MT)를 생성한다. 또한, QMF 도메인에서 디코딩되어 출력되는 다운믹스 신호(110)는 다채널 디코딩부(22)로 전송되어 공간정보(SI)와 결합된 후, 다채널 오디오 신호(MQ)를 생성한다. 전술한 방법으로 생성된 다채널 오디오 신호(MT, MQ) 중 적어도 하나는 시간지연 보상부(23)에서 시간지연 보상과정을 거친 후에 출력된다(OUT2, OUT3).
본 실시예에서 시간지연 보상과정이라 함은 예를 들어, 시계열 디코딩부(10)에서 디코딩되어 출력되는 시계열 데이터(OUT1)가 전술한 다채널 오디오 신호(MT)와 시간 동기가 맞추어 졌다고 가정할 때, 시간 동기가 어긋난 다채널 오디오 신호(MQ)를 다채널 오디오 신호(MT)와 비교해 시간지연이 발생하지 않도록 하는 것을 의미한다. 즉 다채널 오디오 신호(MT, MQ)를 시계열 데이터(OUT1)와 시간동기를 맞추는 작업을 말한다. 한편, 시계열 데이터(OUT1)와 다채널 오디오 신호(MT, MQ)와 함께 처리되지 않는 경우도 시간지연 보상과정을 수행할 수 있다. 예를 들면, 다채 널 오디오 신호(MT)의 시간지연을 보상하되, 다채널 오디오 신호(MQ)와 비교하여 시간지연이 발생하지 않도록 하는 것이다. 물론 반대의 경우도 포함한다.
도 3은 본 발명의 일실시예에 의한 다채널 오디오 신호의 처리방법을 수행하는 장치를 포함하는 신호처리 장치의 블록 구성도로서, 도시된 신호처리 장치(A2)는 시계열 데이터 디코딩부(10)와 다채널 오디오 신호의 처리장치(20a)로 구성된다.
이에 도시된 바와 같이, 다채널 오디오 신호 처리장치(20a)는 다운믹스 디코딩부(21a)와, 다채널 디코딩부(22a)와, 시간지연 보상부(23a)로 구성된다. 먼저, 부호화된 다운믹스 신호의 일례인 다운믹스 비트스트림(IN2)이 다운믹스 디코딩부(21a)로 인가되어 디코딩된다. 디코딩된 다운믹스 신호(100a)는 다채널 디코딩부(22a)로 전송되어 2가지 디코딩 방식(22aH, 22aL)으로 디코딩된다. 참조번호 22aH는 고음질(High Quality) 버전이고, 참조번호 22aL은 저전력(Low Power) 버전이다. 본 발명의 일실시예에서는 두 개의 디코딩 방식만이 언급되어 있지만, 본 발명은 이에 한정되지 않고, 보다 많은 디코딩 방식 중에서 선택 가능하다.
P1경로를 따라 전송된 다운믹스 신호(100a)는 고음질 버전(22aH) 방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(MH)를 생성하고, P2경로를 따라 전송된 다운믹스 신호(100a)는 저전력 버전(22aL) 방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(ML)를 생성한다.
생성된 다채널 오디오 신호(MH, ML) 중 적어도 하나는 시간지연 보상부(23a)에서 시간지연 보상과정을 거친 후에 출력된다(OUT4, OUT5).
본 실시예에서 시간지연 보상과정이라 함은 예를 들어, 시계열 디코딩부(10)에서 디코딩되어 출력되는 시계열 데이터(OUT1)가 전술한 다채널 오디오 신호(MH)와 시간 동기가 맞추어 졌다고 가정할 때, 시간 동기가 어긋난 다채널 오디오 신호(ML)를 다채널 오디오 신호(MH)와 비교해 시간지연이 발생하지 않도록 하는 것을 의미한다. 즉 다채널 오디오 신호(MH, ML)를 시계열 데이터(OUT1)와 시간동기를 맞추는 작업을 말한다. 한편, 시계열 데이터(OUT1)와 다채널 오디오 신호(MH, ML)와 함께 처리되지 않는 경우도 시간지연 보상과정을 수행할 수 있다. 예를 들면, 다채널 오디오 신호(MH)의 시간지연을 보상하되, 다채널 오디오 신호(ML)와 비교한 결과를 이용하여 시간지연이 발생하지 않도록 하는 것이다. 물론 반대의 경우도 포함한다.
도 4는 본 발명의 일실시예에 의한 다채널 오디오 신호의 처리방법을 수행하는 장치를 포함하는 신호처리 장치의 블록 구성도로서, 도시된 신호처리 장치(A3)는 시계열 데이터 디코딩부(10)와 다채널 오디오 신호의 처리장치(20b)로 구성된다.
이에 도시된 바와 같이, 다채널 오디오 신호 처리장치(20b)는 다운믹스 디코딩부(21b)와, 다채널 디코딩부(22b)와, 시간지연 보상부(23b)로 구성된다. 먼저, 부호화된 다운믹스 신호의 일례인 다운믹스 비트스트림(IN2)이 다운믹스 디코딩부(21b)로 인가되어 디코딩된다. 여기서 다운믹스 비트스트림(IN2)은 2가지의 도메인 상에서 디코딩되어 출력될 수 있다. 출력될 수 있는 도메인은 시간 도메인과 QMF 도메인이다. 참조번호 100b는 시간 도메인에서 디코딩되어 출력되는 다운믹스 신호이고, 참조번호 110b는 QMF 도메인에서 디코딩되어 출력되는 다운믹스 신호이다. 본 실시예에서는 2가지 경우의 도메인만을 언급했으나, 본 발명은 이에 한정되지 않고, 그 이상의 도메인에서 디코딩되어 출력되는 다운믹스 신호도 포함한다. 또한, 상기와 같은 방법으로 디코딩된 다운믹스 신호(100b, 110b)는 다채널 디코딩부(22b)로 전송되어 2가지 디코딩 방식(22bH, 22bL)으로 디코딩된다. 참조번호 22bH는 고음질(High Quality) 버전이고, 참조번호 22bL은 저전력(Low Power) 버전이다. 본 발명의 일실시예에서는 두 개의 디코딩 방식만이 언급되어 있지만, 본 발명은 이에 한정되지 않고, 보다 많은 디코딩 방식 중에서 선택 가능하다.
먼저, 시간 도메인 상에서 디코딩되어 출력되는 다운믹스 신호(100b)는 두 가지 경로(P3, P4)를 선택하여 디코딩될 수 있는데, P3은 고음질 방식(22bH)으로 디코딩되는 경로이고, P4는 저전력 방식(22bL)으로 디코딩되는 경로이다. 따라서 P3경로를 따라 전송된 다운믹스 신호(100b)는 고음질 방식(22bH)방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(MHT)를 생성하고, P4경로를 따라 전송된 다운믹스 신호(100b)는 저전력 방식(22bL)방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(MLT)를 생성한다.
또한, QMF 도메인 상에서 디코딩되어 출력된 다운믹스 신호(110b)는 두 가지 경로(P5, P6)를 선택하여 디코딩될 수 있는데, P5은 고음질 방식(22bH)으로 디코딩되는 경로이고, P6는 저전력 방식(22bL)으로 디코딩되는 경로이다. 따라서 P5경로를 따라 전송된 다운믹스 신호(110b)는 고음질 방식(22bH)방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(MHQ)를 생성하고, P6경로를 따라 전송된 다운믹스 신호(110b)는 저전력 방식(22bL)방식에 따라 공간정보(SI)와 결합된 후 다채널 오디오 신호(MLQ)를 생성한다.
전술한 방법에 의해 생성된 다채널 오디오 신호(MHT, MHQ, MLT, MLQ) 중 적어도 하나는 시간지연 보상부(23a)에서 시간지연 보상과정을 거친 후에 출력된다(OUT6, OUT7, OUT8, OUT9).
본 실시예에서 시간지연 보상과정이라 함은 예를 들어, 시계열 디코딩부(10)에서 디코딩되어 출력되는 시계열 데이터(OUT1)가 전술한 다채널 오디오 신호(MHT)와 시간 동기가 맞추어 졌다고 가정할 때, 시간 동기가 어긋난 다채널 오디오 신호(MHQ, MLT, MLQ)를 다채널 오디오 신호(MHT)와 비교해 시간지연이 발생하지 않도록 하는 것을 의미한다. 물론 시계열 데이터(OUT1)가 전술한 다채널 오디오 신호(MHT)외의 다른 다채널 오디오 신호(MHQ, MLT, MLQ) 중 어느 하나와 시간 동기가 맞추어 졌을 때, 시간 동기가 어긋난 나머지 다른 다채널 오디오 신호의 시간지연을 보상하여 시계열 데이터(OUT1)와의 시간동기를 맞추는 것도 포함된다.
한편, 시계열 데이터(OUT1)와 다채널 오디오 신호(MHT,MHQ,MLT,MLQ)와 함께 처리되지 않는 경우도 시간지연 보상과정을 수행할 수 있다. 예를 들어, 다채널 오디오 신호(MHT)의 시간지연을 보상하되, 다채널 오디오 신호(MLT)와 비교한 결과를 이용하여 시간지연이 발생하지 않도록 하는 것이다. 물론 그 외의 형태로도 다양화될 수 있다.
이상에서 본 발명의 바람직한 실시예를 설명하였으나, 본 발명은 다양한 변화와 변경 및 균등물을 사용할 수 있다. 본 발명은 상기 실시예를 적절히 변형하여 동일하게 응용할 수 있음이 명확하다. 따라서 상기 기재 내용은 하기 특허청구범위의 한계에 의해 정해지는 본 발명의 범위를 한정하는 것이 아니다.
이상에서 살펴본 바와 같이, 본 발명에 의한 다채널 오디오 신호의 처리방법 및 그 장치는 신호처리 과정마다 달라질 수 있는 출력신호의 시간지연을 보상하여 시간동기를 맞추는 효과가 있다.
또한, 다채널 오디오 출력신호의 시간지연을 보상하여 동영상이나, 이미지, 텍스트 등과 같은 시계열 데이터와 시간동기를 맞추는 효과가 있다.

Claims (26)

  1. 다운믹스 디코딩부에서 신호 처리된 다운믹스 신호를 적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송하는 단계;
    상기 전송된 다운믹스 신호를 이용하여 다채널 오디오 신호를 생성하는 단계; 및
    상기 생성된 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  2. 제 1 항에 있어서, 상기 시간지연 보상단계는
    제1도메인 상에서 전송된 다운믹스 신호를 이용하여 생성한 다채널 오디오 신호를 제2도메인 상에서 전송된 다운믹스 신호를 이용하여 생성한 다채널 오디오 신호와 비교한 결과를 이용하여 상기 시간지연을 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  3. 제 2 항에 있어서,
    상기 제1도메인은 QMF 도메인이고, 상기 제2도메인은 시간 도메인인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  4. 제 2 항에 있어서,
    상기 제1도메인은 시간 도메인이고, 상기 제2도메인은 QMF 도메인인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  5. 다운믹스 디코딩부에서 신호 처리된 다운믹스 신호를 적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송하는 단계;
    상기 전송된 다운믹스 신호를 이용하여 다채널 오디오 신호를 생성하는 단계; 및
    상기 생성된 다채널 오디오 신호를 시계열 데이터와 비교하여 상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  6. 제 5 항에 있어서, 상기 시간지연 보상단계는
    상기 시계열 데이터가 제1도메인을 통해 전송된 다운믹스 신호를 이용하여 생성한 다채널 오디오 신호와 시간 동기가 맞추어진 경우, 제2도메인을 통해 전송된 다운믹스 신호를 이용하여 생성한 다채널 오디오 신호와 상기 시계열 데이터와의 시간 동기 차를 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  7. 제 6 항에 있어서,
    상기 제1도메인은 QMF 도메인이고, 상기 제2도메인은 시간 도메인인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  8. 제 6 항에 있어서,
    상기 제1도메인은 시간 도메인이고, 상기 제2도메인은 QMF 도메인인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  9. 제 5 항 내지 제 8 항 중 어느 한 항에 있어서, 상기 시계열 데이터는
    동영상, 이미지, 텍스트 중 적어도 하나인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  10. 적어도 2개의 디코딩 방식 중 어느 하나의 방식으로 생성된 다채널 오디오 신호의 처리방법에 있어서,
    상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  11. 제 10 항에 있어서, 시간지연 보상단계는
    제1디코딩 방식으로 생성된 다채널 오디오 신호를 제2디코딩 방식으로 생성된 다채널 오디오 신호와 비교한 결과를 이용하여 상기 시간지연을 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  12. 제 11 항에 있어서,
    상기 제1디코딩 방식은 음질 중심이고, 상기 제2디코딩 방식은 전력 중심인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  13. 제 11 항에 있어서,
    상기 제1디코딩 방식은 전력 중심이고, 상기 제2디코딩 방식은 음질 중심인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  14. 적어도 2개의 디코딩 방식 중 어느 하나의 방식으로 생성한 다채널 오디오 신호를 시계열 데이터와 함께 처리하는 방법에 있어서,
    상기 생성된 다채널 오디오 신호를 상기 시계열 데이터와 비교하여 상기 다채널 오디오 신호의 시간지연을 보상하는 단계를 포함하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  15. 제 14 항에 있어서, 상기 시간지연 보상단계는
    상기 시계열 데이터가 상기 제1디코딩 방식으로 생성된 다채널 오디오 신호와 시간 동기가 맞추어진 경우, 제2디코딩 방식으로 생성된 다채널 오디오 신호와 상기 시계열 데이터와의 시간 동기 차를 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  16. 제 15 항에 있어서,
    상기 제1디코딩 방식은 음질 중심이고, 상기 제2디코딩 방식은 전력 중심인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  17. 제 15 항에 있어서,
    상기 제1디코딩 방식은 전력 중심이고, 상기 제2디코딩 방식은 음질 중심인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  18. 제 14 항에 있어서, 상기 다채널 오디오 신호는
    적어도 2개의 도메인 중 어느 한 도메인 상에서 다채널 디코딩부로 전송된 다운믹스 신호를 이용하여 생성된 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  19. 제 18 항에 있어서,
    상기 다운믹스 신호는 시간 도메인과 QMF 도메인 중 어느 한 도메인 상에서 상기 다채널 디코딩부로 전송된 신호이고,
    상기 다채널 오디오 신호는 상기 다운믹스 신호를 음질 중심 방식과 전력 중심 방식 중 어느 한 방식으로 디코딩하여 생성한 신호인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  20. 제 19 항에 있어서, 상기 시간지연 보상단계는
    상기 다채널 오디오 신호처리 방법을 수행할 때, 생성될 수 있는 다채널 오디오 신호 중 어느 하나의 신호와 상기 시계열 데이터가 시간 동기가 맞추어진 경우, 상기 시계열 데이터와 시간 동기가 어긋난 다채널 오디오 신호의 시간 동기 차를 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  21. 제 14 항 내지 제 20 항 중 어느 한 항에 있어서, 상기 시계열 데이터는
    동영상, 이미지, 텍스트 중 적어도 하나인 것을 특징으로 하는 다채널 오디오 신호의 처리방법.
  22. 부호화된 다운믹스 신호를 디코딩하는 다운믹스 디코딩부;
    상기 디코딩된 다운믹스 신호와 공간정보를 이용하여 다채널 오디오 신호를 생성하는 다채널 디코딩부; 및
    상기 다채널 오디오 신호의 시간지연을 보상하는 시간지연 보상부를 포함하는 것을 특징으로 하는 다채널 오디오 신호의 처리장치.
  23. 제 22 항에 있어서, 상기 다운믹스 디코딩부는
    적어도 2개의 도메인 중 어느 한 도메인 상에서 신호 처리된 상기 부호화된 다운믹스 신호를 상기 다채널 디코딩부로 전송하는 것을 특징으로 하는 다채널 오디오 신호의 처리장치.
  24. 제 23 항에 있어서, 상기 다채널 디코딩부는
    적어도 2개의 디코딩 방식을 구비하여 어느 한 디코딩 방식에 따라 상기 다채널 오디오 신호를 생성하는 것을 하는 다채널 오디오 신호의 처리장치.
  25. 제 24 항에 있어서, 상기 시간지연 보상부는
    상기 다채널 디코딩부에서 생성될 수 있는 다채널 오디오 신호 중 어느 하나의 신호와 시계열 데이터가 시간 동기가 맞추어진 경우, 상기 시계열 데이터와 시간 동기가 어긋난 다채널 오디오 신호의 시간 동기 차를 보상하는 것을 특징으로 하는 다채널 오디오 신호의 처리장치.
  26. 제 25 항에 있어서, 상기 시계열 데이터는
    동영상, 이미지, 텍스트 중 적어도 하나인 것을 특징으로 하는 다채널 오디오 신호의 처리장치.
KR1020060078223A 2005-10-04 2006-08-18 다채널 오디오 신호의 처리방법 및 그 장치 KR20070037986A (ko)

Priority Applications (51)

Application Number Priority Date Filing Date Title
US11/541,471 US20070092086A1 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/540,920 US7653533B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,395 US7840401B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/540,919 US7761289B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,472 US7716043B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,397 US7742913B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
KR1020087007454A KR100888974B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
TW095136563A TWI317244B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
TW095136561A TWI317243B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395781A CN101297598B (zh) 2005-10-24 2006-10-02 处理音频信号的方法和系统
EP06799056A EP1952671A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
KR1020087007450A KR100888971B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
CN200680039452.4A CN101297594B (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
EP06799055A EP1952670A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
PCT/KR2006/003975 WO2007049864A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395777A CN101297597B (zh) 2005-10-24 2006-10-02 处理音频信号的方法和装置
JP2008537579A JP5399706B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
CA2626132A CA2626132C (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
KR1020087007452A KR100888972B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
PCT/KR2006/003980 WO2007049866A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799057.2A EP1952672B1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
KR1020087007449A KR100875428B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
PCT/KR2006/003973 WO2007049862A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
AU2006306942A AU2006306942B2 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395762A CN101297596B (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
TW095136564A TWI317247B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537582A JP2009513084A (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087007453A KR100888973B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
PCT/KR2006/003974 WO2007049863A2 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537580A JP5270357B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
RU2008120661/09A RU2389155C2 (ru) 2005-10-24 2006-10-02 Устранение задержек по времени на трактах обработки сигнала
KR1020087030528A KR100928268B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
JP2008537583A JP5249039B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087023852A KR101186611B1 (ko) 2005-10-24 2006-10-02 오디오 신호의 처리 방법 및 이의 장치
PCT/KR2006/003976 WO2007049865A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799061A EP1952675A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
CNA2006800395796A CN101297599A (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
TW095136566A TWI310544B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537581A JP5249038B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087007451A KR100875429B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
EP06799058A EP1952673A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CNA2006800394539A CN101297595A (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
PCT/KR2006/003972 WO2007049861A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537584A JP5270358B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
TW095136559A TWI317245B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
TW095136562A TWI317246B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799059.8A EP1952674B1 (en) 2005-10-24 2006-10-02 Compensation of a decoding delay of a multi-channel audio signal
TW098104747A TWI450603B (zh) 2005-10-04 2006-10-02 音頻訊號處理方法及其系統與電腦可讀取媒體
HK09103908.6A HK1126071A1 (en) 2005-10-24 2009-04-28 Method and apparatus for processing audio signal
US12/872,081 US8095357B2 (en) 2005-10-24 2010-08-31 Removing time delays in signal paths
US12/872,044 US8095358B2 (en) 2005-10-24 2010-08-31 Removing time delays in signal paths

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US72922505P 2005-10-24 2005-10-24
US60/729,225 2005-10-24
US78674006P 2006-03-29 2006-03-29
US60/786,740 2006-03-29
US79232906P 2006-04-17 2006-04-17
US60/792,329 2006-04-17

Publications (1)

Publication Number Publication Date
KR20070037986A true KR20070037986A (ko) 2007-04-09

Family

ID=38159536

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020060078221A KR20070037984A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 그 장치
KR1020060078223A KR20070037986A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 처리방법 및 그 장치
KR1020060078222A KR20070037985A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 그 장치
KR1020060078218A KR20070037983A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 부호화된 오디오신호 생성방법
KR1020060078225A KR20070037987A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 장치
KR1020087007451A KR100875429B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020060078221A KR20070037984A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 그 장치

Family Applications After (4)

Application Number Title Priority Date Filing Date
KR1020060078222A KR20070037985A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 그 장치
KR1020060078218A KR20070037983A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 부호화된 오디오신호 생성방법
KR1020060078225A KR20070037987A (ko) 2005-10-04 2006-08-18 다채널 오디오 신호의 디코딩 방법 및 장치
KR1020087007451A KR100875429B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법

Country Status (1)

Country Link
KR (6) KR20070037984A (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2041742B1 (en) * 2006-07-04 2013-03-20 Electronics and Telecommunications Research Institute Apparatus and method for restoring multi-channel audio signal using he-aac decoder and mpeg surround decoder
KR100881312B1 (ko) * 2007-06-28 2009-02-03 엘지전자 주식회사 멀티 채널 오디오 신호의 부호화/복호화 방법 및 장치,그를 이용한 인터넷 프로토콜 디스플레이 장치
KR100958110B1 (ko) 2007-12-17 2010-05-17 한국전자통신연구원 유비쿼터스 서비스 인증 게이트웨이 장치 및 그 방법
CN105229731B (zh) * 2013-05-24 2017-03-15 杜比国际公司 根据下混的音频场景的重构
KR102317416B1 (ko) 2015-04-20 2021-10-25 충남대학교산학협력단 높은 에너지 밀도를 가지는 음극 활물질 및 이를 포함하는 리튬이온2차전지

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992012607A1 (en) 1991-01-08 1992-07-23 Dolby Laboratories Licensing Corporation Encoder/decoder for multidimensional sound fields
DE4209544A1 (de) 1992-03-24 1993-09-30 Inst Rundfunktechnik Gmbh Verfahren zum Übertragen oder Speichern digitalisierter, mehrkanaliger Tonsignale
US5481643A (en) 1993-03-18 1996-01-02 U.S. Philips Corporation Transmitter, receiver and record carrier for transmitting/receiving at least a first and a second signal component

Also Published As

Publication number Publication date
KR20070037985A (ko) 2007-04-09
KR100875429B1 (ko) 2008-12-22
KR20070037984A (ko) 2007-04-09
KR20080040786A (ko) 2008-05-08
KR20070037983A (ko) 2007-04-09
KR20070037987A (ko) 2007-04-09

Similar Documents

Publication Publication Date Title
KR100928268B1 (ko) 신호 처리에서 시간 지연을 보상하는 방법
CA2645910C (en) Methods and apparatuses for encoding and decoding object-based audio signals
US8848926B2 (en) Apparatus and method for restoring multi-channel audio signal using HE-AAC decoder and MPEG surround decoder
KR20070037986A (ko) 다채널 오디오 신호의 처리방법 및 그 장치
RU2406164C2 (ru) Устройство и способ для кодирования/декодирования сигнала
Purnhagen et al. Immersive audio delivery using joint object coding
RU2389155C2 (ru) Устранение задержек по времени на трактах обработки сигнала
Aggrawal et al. New Enhancements for Improved Image Quality and Channel Separation in the Immersive Sound Field Rendition (ISR) Parametric Multichannel Audio Coding System
MX2008009565A (en) Apparatus and method for encoding/decoding signal