KR20070074442A - 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체 - Google Patents

다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체 Download PDF

Info

Publication number
KR20070074442A
KR20070074442A KR1020060078219A KR20060078219A KR20070074442A KR 20070074442 A KR20070074442 A KR 20070074442A KR 1020060078219 A KR1020060078219 A KR 1020060078219A KR 20060078219 A KR20060078219 A KR 20060078219A KR 20070074442 A KR20070074442 A KR 20070074442A
Authority
KR
South Korea
Prior art keywords
delay time
signal
spatial information
codec
delay
Prior art date
Application number
KR1020060078219A
Other languages
English (en)
Inventor
김동수
방희석
임재현
정양원
오현오
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US11/541,471 priority Critical patent/US20070092086A1/en
Priority to US11/540,920 priority patent/US7653533B2/en
Priority to US11/541,395 priority patent/US7840401B2/en
Priority to US11/540,919 priority patent/US7761289B2/en
Priority to US11/541,472 priority patent/US7716043B2/en
Priority to US11/541,397 priority patent/US7742913B2/en
Priority to BRPI0617779-4A priority patent/BRPI0617779A2/pt
Priority to PCT/KR2006/003974 priority patent/WO2007049863A2/en
Priority to TW095136561A priority patent/TWI317243B/zh
Priority to CN2006800395781A priority patent/CN101297598B/zh
Priority to EP06799056A priority patent/EP1952671A4/en
Priority to KR1020087007450A priority patent/KR100888971B1/ko
Priority to CN200680039452.4A priority patent/CN101297594B/zh
Priority to EP06799055A priority patent/EP1952670A4/en
Priority to PCT/KR2006/003975 priority patent/WO2007049864A1/en
Priority to CN2006800395777A priority patent/CN101297597B/zh
Priority to JP2008537579A priority patent/JP5399706B2/ja
Priority to CA2626132A priority patent/CA2626132C/en
Priority to KR1020087007452A priority patent/KR100888972B1/ko
Priority to PCT/KR2006/003980 priority patent/WO2007049866A1/en
Priority to EP06799057.2A priority patent/EP1952672B1/en
Priority to KR1020087007449A priority patent/KR100875428B1/ko
Priority to PCT/KR2006/003973 priority patent/WO2007049862A1/en
Priority to AU2006306942A priority patent/AU2006306942B2/en
Priority to KR1020087007454A priority patent/KR100888974B1/ko
Priority to TW095136564A priority patent/TWI317247B/zh
Priority to CN2006800395762A priority patent/CN101297596B/zh
Priority to JP2008537582A priority patent/JP2009513084A/ja
Priority to KR1020087007453A priority patent/KR100888973B1/ko
Priority to JP2008537580A priority patent/JP5270357B2/ja
Priority to TW095136563A priority patent/TWI317244B/zh
Priority to RU2008120661/09A priority patent/RU2389155C2/ru
Priority to KR1020087030528A priority patent/KR100928268B1/ko
Priority to JP2008537583A priority patent/JP5249039B2/ja
Priority to KR1020087023852A priority patent/KR101186611B1/ko
Priority to PCT/KR2006/003976 priority patent/WO2007049865A1/en
Priority to EP06799061A priority patent/EP1952675A4/en
Priority to CNA2006800395796A priority patent/CN101297599A/zh
Priority to TW095136566A priority patent/TWI310544B/zh
Priority to JP2008537581A priority patent/JP5249038B2/ja
Priority to KR1020087007451A priority patent/KR100875429B1/ko
Priority to EP06799058A priority patent/EP1952673A1/en
Priority to CNA2006800394539A priority patent/CN101297595A/zh
Priority to PCT/KR2006/003972 priority patent/WO2007049861A1/en
Priority to JP2008537584A priority patent/JP5270358B2/ja
Priority to TW095136559A priority patent/TWI317245B/zh
Priority to TW095136562A priority patent/TWI317246B/zh
Priority to EP06799059.8A priority patent/EP1952674B1/en
Priority to TW098104747A priority patent/TWI450603B/zh
Publication of KR20070074442A publication Critical patent/KR20070074442A/ko
Priority to HK09103908.6A priority patent/HK1126071A1/xx
Priority to US12/872,081 priority patent/US8095357B2/en
Priority to US12/872,044 priority patent/US8095358B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction

Abstract

다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체가 개시된다. 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 이 장치는, 코딩된 다운 믹스 신호를 디코딩하는 코어 디코더와, 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 공간 정보가 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정하는 지연 시간 보상부 및 결정된 시간 구간에서 공간 정보를 디코딩된 다운 믹스 신호에 적용하여 다채널 오디오 신호를 복원하는 오디오 복원부를 구비하는 것을 특징으로 한다. 그러므로, 서로 다른 지연 시간에 따라 서로 다른 공간 정보를 계산할 필요가 없어 하나의 공간 정보만으로 모든 코덱의 종류에 대응할 수 있고, 복원되는 다채널 오디오 신호의 음질이 저하되는 현상을 방지할 수 있는 효과를 갖는다.
다채널 오디오, MPEG 서라운드, 동기 신호

Description

다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체{Apparatus and method for recovering multi-channel audio signal, and computer-readable medium storing a program performed in the apparatus}
도 1은 일반적인 MPEG 서라운드의 원리를 설명하기 위한 도면이다.
도 2는 본 발명에 의한 다채널 오디오 복원 장치의 실시예의 블럭도이다.
도 3은 본 발명에 의한 다채널 오디오 복원 방법의 실시예를 설명하기 위한 플로우차트이다.
도 4 (a) 내지 (c)들은 디코딩된 다운 믹스 신호의 지연 시간을 설명하기 위한 타이밍도들이다.
도 5는 도 2에 도시된 지연 시간 보상부의 본 발명에 의한 실시예의 블럭도이다.
도 6은 도 5에 도시된 지연 시간 획득부의 본 발명에 의한 바람직한 실시예의 블럭도이다.
*도면의 주요부분에 대한 부호의 설명
22, 40 : 코어 디코더 26 : 엠펙 서라운드 디코더
42 : 지연 시간 보상부 44 : 오디오 복원부
70 : 지연 시간 획득부 72 : 지연 시간 결정부
80 : 코덱 방식 인식부 82 : 지연 시간 독출부
본 발명은 다채널 오디오 신호의 처리에 관한 것으로서, 특히 다채널 오디오 신호의 복원 장치 및 방법과 이 장치에서 수행되는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체에 관한 것이다.
엠펙(MPEG:Moving Picture Experts Group) 서라운드(surround)는 5.1 채널의 신호를 스테레오 신호 혹은 모노 신호로 다운 믹스한 후 코딩하여 전송하면서, 부가의 공간 정보를 함께 전송하고, 코딩된 다운 믹스 신호를 디코딩한 후, 디코딩된 다운 믹스 신호와 부가의 공간 정보를 이용하여 5.1 채널 신호를 재생해 내는 기술이다.
일반적으로 다운 믹스 신호를 코딩하여 보내는 코덱(codec)으로 AAC(MPEG-4 Advanced Audio Coding) 코덱 이외에 여러 가지 방식들이 있다. 압축 코덱이 달라짐에 따라 각기 다른 고유한 지연 시간이 발생하게 된다. 즉, 코어(core) 코덱의 경우 어떤 종류의 코어 코덱을 사용했는가에 따라 각기 다른 지연 시간을 갖는다. 그럼에도 불구하고, 압축 코덱의 종류에 따라 서로 달라지는 지연 시간을 알맞게 보정하지 않고 공간 정보를 디코딩된 다운 믹스 신호의 프레임별로 적용할 경우, 공간 정보가 프레임에 적용되는 시간 구간이 일치하지 않을 수 있다. 예컨대, 서로 다른 코덱을 사용할 수 있는 엠펙 서라운드에서 코어 코덱의 종류별로 서로 달라지는 지연 시간을 고려하지 않고 공간 정보를 적용하여 오디오 신호를 복원할 경우, 공간 정보가 적용되는 부분의 동기가 어긋날 수 있다. 이로 인해, 복원되는 다채널 오디오 신호의 음질이 저하되는 문제점이 발생한다.
본 발명이 이루고자 하는 기술적 과제는, 서로 다른 코덱을 사용할 수 있는 엠펙 서라운드에서 원래의 다채널 오디오 신호를 복원하기 위해 이용되는 공간 정보를 정확한 시점에 적용할 수 있는 다채널 오디오 복원 장치 및 방법을 제공하는 데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 상기 다채널 오디오 복원 장치에서 수행되는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는 데 있다.
상기 과제를 이루기 위해, 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 본 발명에 의한 다채널 오디오 복원 장치는, 상기 코딩된 다운 믹스 신호를 디코딩하는 코어 디코더와, 상기 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정하는 지연 시간 보상부 및 상기 결정된 시간 구간에서 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용하여 상기 다채널 오디오 신호를 복원하는 오디오 복원부로 구성되는 것이 바람직하다.
또한, 상기 과제를 이루기 위해, 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 본 발명에 의한 다채널 오디오 복원 방법은, 상기 코딩된 다운 믹스 신호를 디코딩하는 단계와, 상기 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정하는 단계 및 상기 결정된 시간 구간에 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용하여 상기 다채널 오디오 신호를 복원하는 단계로 이루어지는 것이 바람직하다.
상기 다른 과제를 이루기 위해, 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 다채널 오디오 복원 장치에서 수행되는 본 발명에 의한 프로그램을 기록하는 컴퓨터로 읽을 수 있는 기록 매체는, 상기 코딩된 다운 믹스 신호를 디코딩시키는 단계와, 상기 디코딩된 다운 믹스 신호가 갖는 고유한 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정시키는 단계 및 상기 결정된 시간 구간에 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용시켜 상기 다채널 오디오 신호를 복원시키는 단계를 수행하는 것이 바람직하다.
이하, 본 발명에 의한 다채널 오디오 복원 장치 및 방법의 이해를 돕기 위해, 일반적인 엠펙(MPEG) 서라운드의 원리에 대해 첨부한 도면을 참조하여 다음과 같이 설명한다.
도 1은 일반적인 MPEG 서라운드의 원리를 설명하기 위한 도면으로서, 다운 믹싱부(10), 공간 정보 추출부(12), 코어 인코더(16), 코어 디코더(22) 및 사운드(sound) 합성부(24)로 구성된다.
도 1에 도시된 다운 믹싱부(10), 공간 정보 추출부(12) 및 코어 인코더(16)를 통칭하여 MPEG 서라운드 인코더라 할 수도 있고, 다운 믹싱부(10) 및 공간 정보 추출부(12)만을 통칭하여 MEPG 서라운드 인코더(14)라 할 수도 있다. 편의상, 도 1의 경우, 다운 믹싱부(10) 및 공간 정보 추출부(12)를 MPEG 서라운드 인코더(14)라 칭하기로 한다. 이와 비슷하게, 도 1에 도시된 코어 디코더(22) 및 사운드 합성부(24)를 통칭하여 MPEG 서라운드 디코더라 할 수도 있고, 사운드 합성부(24)만을 통칭하여 MEPG 서라운드 디코더라 할 수도 있다. 편의상, 도 1의 경우, 사운드 합성부(24)만을 MPEG 서라운드 디코더(26)라 칭하기로 한다.
도 1에 도시된 MPEG 서라운드 인코더(14)의 다운 믹싱(down mixing)부(10)는 N-채널 오디오 신호(x1, x2, ... 및 xN)를 입력하고, 입력한 N-채널 오디오 신호(x1, x2, ... 및 xN)를 인코딩하여 스테레오(stereo) 또는 모노(mono) 오디오 신호를 생성한다. 여기서, N은 입력 오디오 신호의 개수를 나타내며, 예를 들어 5.1 채널의 경우 6이 될 수 있다.
도 1의 경우, 다운 믹싱부(10)는 모노 오디오 신호가 아니라 스테레오 오디오 신호들(x1 및 x2)들을 생성하는 것으로 가정한다. 이 때, 다운 믹싱부(10)는 입력단자 IN1을 통해 입력한 아티스틱(artistic) 다운 믹스 신호를 입력하고, 입력한 아티스틱 다운 믹스 신호로부터 스테레오 또는 모노 오디오 신호를 생성할 수도 있다. 여기서, 아티스틱 다운 믹스 신호란, 외부에서 직접 제공되는 다운 믹스 신호 를 의미한다.
공간 정보 추출부(12)는 N-채널 오디오 신호의 공간 정보(Spatial Cue side information 또는 Spatial parameter side information)를 추출하고, 추출된 공간 정보(20)를 MPEG 서라운드 디코더(26)로 출력한다. 여기서, 공간 정보란, N-채널 오디오 신호를 MPEG 서라운드 디코더(26)에서 충실히 복원하기 위해 사용되는 정보로서, 다수개의 파라미터들에 의해 표현될 수 있다. 여기서, 다수개의 파라미터들로서 CLD(Channel Level Difference)s, ICC(InterChannel Correlations)s 및 CPC(Channel Prediction Coefficient)s들이 있다. CLD는 트리(tree) 구조(configuration) 내의 오디오 신호들 간의 레벨 차를 나타내고, ICC는 트리 구조 내의 오디오 신호들 간의 코히런스(Coherence)를 나타내고, CPC는 다른 오디오 신호들로부터 하나의 오디오 신호를 예측할 수 있는 파라미터를 나타낸다.
코어 인코더(16)는 스테레오 다운믹스 신호들(x1 및 x2)을 압축(coding 또는 compress)하고, 압축된 다운 믹스 신호를 전송 채널(18)을 통해 코어 디코더(22)로 전송한다. 코어 디코더(22)는 전송 채널(18)을 통해 입력한 압축된 다운 믹스 신호를 스테레오 다운 믹스 신호로 디코딩(decoding)하여 코어 인코더(16)에서 압축되기 이전의 다운 믹스 신호로 재건하고, 재건된 다운 믹스 신호(
Figure 112006058859577-PAT00001
,
Figure 112006058859577-PAT00002
)를 MPEG 서라운드 디코더(26)로 출력한다. 또한, 재건된 다운 믹스 신호(
Figure 112006058859577-PAT00003
,
Figure 112006058859577-PAT00004
)는 스테레오 디지탈 디코더들과 같은 일반적인 시스템으로도 출 력될 수 있다.
이 때, MPEG 서라운드 인코더(14)의 공간 정보 추출부(12)로부터 입력한 공간 정보(20)를 이용하여 MPEG 서라운드 디코더(26)의 사운드 합성부(24)는 재건된 다운 믹스 신호(
Figure 112006058859577-PAT00005
,
Figure 112006058859577-PAT00006
)로부터 원래의 N-채널 오디오 신호를 복원하고, 복원된 N-채널 오디오 신호(
Figure 112006058859577-PAT00007
,
Figure 112006058859577-PAT00008
, ... 및
Figure 112006058859577-PAT00009
) 를 출력한다.
이하, 본 발명에 의한 다채널 오디오 복원 장치의 실시예의 구성 및 동작과 그 장치에서 수행되는 다채널 오디오 복원 방법의 실시예를 첨부한 도면들을 참조하여 다음과 같이 설명한다.
도 2는 본 발명에 의한 다채널 오디오 복원 장치의 실시예의 블럭도로서, 코어 디코더(40), 지연 시간 보상부(42) 및 오디오 복원부(44)로 구성된다.
도 3은 본 발명에 의한 다채널 오디오 복원 방법의 실시예를 설명하기 위한 플로우차트로서, 코딩된 다운 믹스 신호를 디코딩하는 단계(제60 단계), 디코딩된 다운 믹스 신호에 공간 정보가 적용될 시간 구간을 결정하는 단계(제62 단계) 및 다채널 오디오 신호를 복원하는 단계(제64 단계)로 이루어진다.
도 2에 도시된 다채널 오디오 복원 장치는 디코딩된 다운 믹스 신호로부터 다채널 오디오 신호를 다음과 같이 복원한다. 여기서, 디코딩된 다운 믹스 신호란, 도 1 또는 도 2에 도시된 코어 디코더(22 또는 40)로부터 출력되는 신호를 의미한다.
본 발명에 의한 다채널 오디오 복원 방법에 의하면, 먼저, 코어 디코더(40)는 입력단자 IN2를 통해 코딩된 다운 믹스 신호를 입력하고, 입력한 코딩된 다운 믹스 신호를 디코딩하며, 디코딩된 다운 믹스 신호를 오디오 복원부(44)로 출력한다(제60 단계). 여기서, 도 2에 도시된 코어 디코더(40)는 도 1에 도시된 코어 디코더(22)와 동일한 동작을 수행한다. 따라서, 코어 디코더(40)는 코딩된 다운 믹스 신호를 코어 인코더(16)로부터 입력할 수 있다.
제60 단계 후에, 지연 시간 보상부(42)는 코어 디코더(40)에서 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 디코딩된 다운 믹스 신호에 공간 정보가 적용될 시간 구간을 결정하고, 결정된 시간 구간에서 공간 정보를 오디오 복원부(44)로 출력한다(제62 단계). 이를 위해, 지연 시간 보상부(42)는 도 1에 도시된 공간 정보 추출부(12)로부터 출력되는 공간 정보(20)를 입력단자 IN3을 통해 입력할 수 있다.
도 4 (a) 내지 (c)들은 디코딩된 다운 믹스 신호의 지연 시간을 설명하기 위한 타이밍(timing)도들로서, 도 4 (a)는 원래의 N-채널 오디오 신호의 타이밍도를 나타내고, 도 4 (b)는 지연 시간(Δ1)을 갖는 디코딩된 다운 믹스 신호의 일 례의 타이밍도를 나타내고, 도 4 (c)는 지연 시간(Δ2)을 갖는 디코딩된 다운 믹스 신호의 다른 례의 타이밍도를 나타낸다.
도 1에 도시된 코덱(16 및 22) 방식의 종류에 따라 디코딩된 다운 믹스 신호의 지연 시간은 서로 달라진다. 예를 들어, 코덱(16 및 22)의 종류로서, MP3(MPEG-1 Layer Ⅲ), AAC, HE-AAC(MPEG-4 High-Efficienty AAC), WMA, WAV 또는 심지어 PCM(Pulse Code Modulation) 등이 있다. 이와 같이 코덱 방식의 종류가 달라짐에 따라 디코딩된 다운 믹스 신호의 지연 시간은 달라진다.
도 4 (a)에 도시된 바와 같은 원래의 N-채널 오디오 신호는 다운 믹싱부(10)에서 다운 믹싱된 후, 코어 인코더(16)에서 코딩되고 코어 디코더(22 또는 40)에서 디코딩되는 동안, 코덱(16 및 22)의 종류에 따라 도 4 (b) 또는 (c)에 도시된 바와 같이 지연 시간(Δ1 또는 Δ2)이 달라진다. 만일, 이러한 지연 시간을 고려하지 않고 공간 정보가 시간 구간들(66 및 68) 각각에 디코딩된 믹스 신호의 프레임들(f1 및 f2)에 적용될 경우 전술한 바와 같이 음질의 저하가 초래될 수 있다.
만일, MPEG 서라운드 인코더(14)로부터 전송되는 공간 정보가 하나의 코덱 방식에 맞추어져 동기되어 있을 때, 공간 정보가 동기된 코덱 방식으로 다운 믹스 신호가 코딩 및 디코딩되면, 도 2에 도시된 다채널 오디오 복원 장치는 지연 시간 보상부(42)를 마련할 필요가 없다.
그러나, 공간 정보가 하나의 코덱 방식에 맞추어져 동기되어 있을 때, 공간 정보가 동기된 코덱 방식과 다른 코덱 방식으로 다운 믹스 신호가 코딩 및 디코딩될 경우, 그 코덱 방식의 종류에 따라 달라지는 지연 시간 만큼 공간 정보를 디코딩된 다운 믹스 신호에 동기시켜야 할 필요가 있다. 이를 위해, 도 2에 도시된 다채널 오디오 복원 장치는 지연 시간 보상부(42)를 통해 전술한 바와 같이 공간 정보와 디코딩된 다운 믹스 신호를 동기시킨다.
이하, 공간 정보가 하나의 코덱 방식에 맞추어져 동기되어 있고, 공간 정보가 동기된 코덱 방식과 다른 코덱 방식으로 다운 믹스 신호가 코딩 및/또는 디코딩 될 경우, 도 2에 도시된 지연 시간 보상부(42)의 본 발명에 의한 실시예의 구성 및 동작을 다음과 같이 살펴본다.
도 5는 도 2에 도시된 지연 시간 보상부(42)의 본 발명에 의한 실시예의 블럭도로서, 지연 시간 획득부(70) 및 시간 구간 결정부(72)로 구성된다.
도 5에 도시된 지연 시간 획득부(70)는 디코딩된 다운 믹스 신호의 지연 시간을 구하고, 구해진 지연 시간을 시간 구간 결정부(72)로 출력한다.
지연 시간 획득부(70)는 코덱 방식에 관련된 지연 정보로부터 지연 시간을 추출하고, 추출된 지연 시간을 시간 구간 결정부(72)로 출력할 수 있다. 여기서, 코덱 방식이란, 다운 믹스 신호가 코딩된 방식 및/또는 디코딩된 다운 믹스 신호가 디코딩된 방식을 의미한다.
본 발명의 일 실시예에 의하면, 지연 시간 획득부(70)는 입력단자 IN4를 통해 외부로부터 지연 정보를 입력할 수도 있다. 이와 같이 지연 정보가 외부로부터 입력될 경우, 지연 정보는 공간 정보의 헤더에 비트 스트림(bitstream)의 형태로 포함될 수 있다. 외부로부터 입력된 지연 정보는 지연 시간 자체에 대한 정보를 가질 수도 있고 코덱 방식의 종류에 대한 정보를 가질 수도 있다. 지연 정보로서 지연 시간 자체가 아니라 코덱 방식의 종류에 대한 정보가 입력된다고 하더라도 지연 시간 획득부(70)는 지연 시간을 획득할 수 있다. 왜냐하면, 코덱 방식의 종류마다 지연 시간이 정해져 있기 때문이다.
만일, 지연 정보가 외부로부터 입력될 경우, 다운 믹스 신호를 코딩하는 방식과 코딩된 다운 믹스 신호를 디코딩하는 방식이 달라도 된다. 왜냐하면, 코딩 방 식의 종류에 대한 지연 정보가 외부로부터 주어지고 디코딩 방식에 대한 종류를 자체적으로 인식할 수 있으므로, 다채널 오디오 복원 장치는 디코딩된 다운 믹스 신호의 지연 시간을 추정할 수 있기 때문이다.
본 발명의 다른 실시예에 의하면, 지연 시간 획득부(70)는 지연 정보를 외부로부터 입력하는 대신에 자체적으로도 획득할 수 있다. 자체적으로 획득되는 지연 정보는 코덱 방식의 종류에 대한 정보를 갖는다. 만일, 지연 정보가 외부로부터 입력되는 대신에 자체적으로 획득된다면, 다운 믹스 신호를 코딩하는 방식과 코딩된 다운 믹스 신호를 디코딩하는 방식은 동일해야 한다. 왜냐하면, 외부로부터 지연 정보가 주어지지 않는 상황에서, 디코딩된 다운 믹스 신호의 지연 시간을 다채널 오디오 복원 장치의 코어 디코더(40)의 종류를 통해 판단하기 위해서이다.
도 6은 도 5에 도시된 지연 시간 획득부(70)의 본 발명에 의한 바람직한 실시예의 블럭도로서, 코덱 방식 인식부(80) 및 지연 시간 독출부(82)로 구성된다.
도 6에 도시된 코덱 방식 인식부(80)는 코덱 방식을 인식하고, 인식된 코덱 방식을 지연 시간 독출부(82)로 출력할 수 있다.
본 발명의 일 실시예에 의하면, 코덱 방식 인식부(80)는 코덱 방식의 종류를 입력단자 IN5를 통해 외부로부터 입력하여 인식할 수 있다. 이 경우, 코덱 방식의 종류는 전술한 바와 같이 코덱 방식에 관련된 지연 정보에 포함될 수 있다.
본 발명의 다른 실시예에 의하면, 코덱 방식 인식부(80)는 코덱 방식의 종류를 외부로부터 입력단자 IN5를 통해 입력하는 대신에, 자체적으로 분석하여 인식할 수도 있다. 전술한 바와 같이, 코어 인코더(16)의 코딩 방식의 종류와 코어 디코 더(40)의 디코딩 방식의 종류가 동일할 경우, 비록 외부로부터 입력단자 IN5를 통해 코덱 방식의 종류가 입력되지 않더라도, 코덱 방식 인식부(80)는 코어 디코더(40)의 디코딩 방식의 종류를 인지할 수 있으므로 코어 인코더(16)의 코딩 방식의 종류를 인식할 수 있다.
한편, 지연 시간 독출부(82)는 코덱 방식의 종류별로 지연 시간들을 저장하고, 저장된 서로 다른 시간 지연들 중에서, 코덱 방식 인식부(80)에서 인식된 코덱 방식의 종류에 상응하는 시간 지연을 출력단자 OUT3을 통해 시간 구간 결정부(72)로 독출한다. 이를 위해, 지연 시간 독출부(82)는 서로 다른 지연 시간들을 데이타로서 저장하고, 코덱 방식의 종류를 어드레스로서 저장하는 룩 업 테이블(LUT:Look Up Table) 형식으로 구현될 수 있다.
도 5에 도시된 시간 구간 결정부(72)는 지연 시간 획득부(70)로부터 입력한 시간 지연에 따라 시간 구간을 결정하고, 결정된 시간 구간에서 공간 정보를 출력단자 OUT2를 통해 오디오 복원부(44)로 출력한다.
한편, 제62 단계후에, 오디오 복원부(44)는 지연 시간 보상부(42)로부터 결정된 시간 구간에서 입력한 공간 정보를 디코딩된 다운 믹스 신호에 적용하여 다채널 오디오 신호를 복원하고, 복원된 다채널 오디오 신호를 출력단자 OUT1을 통해 출력한다(제64 단계). 이와 같이, 본 발명의 경우 지연 시간을 고려하여 시간 구간을 결정하므로, 시간 구간에서 공간 정보들(SC1, SC2, ...)은 디코딩된 다운 믹스 신호의 프레임별(f1, f2, ...)로 예를 들면 도 4 (b) 또는 도 4 (c)에 도시된 바와 같이 적용될 수 있다.
시간 구간에서 공간 정보를 다운 믹스 신호에 적용한다는 것을 제외하면, 도 2에 도시된 오디오 복원부(44)가 디코딩된 다운 믹스 신호로부터 공간 정보를 이용하여 원래의 다채널 오디오 신호를 복원하는 과정은 도 1에 도시된 사운드 합성부(24)와 동일하므로 이에 대한 상세한 설명은 생략한다.
본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다)가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장 장치 등이 있다.
이상, 전술한 본 발명의 바람직한 실시예는, 예시의 목적을 위해 개시된 것으로, 당업자라면 이하 첨부된 특허청구범위에 개시된 본 발명의 기술적 사상과 그 기술적 범위 내에서, 다양한 다른 실시예들을 개량, 변경, 대체 또는 부가 등이 가능할 것이다.
이상에서 설명한 바와 같이, 본 발명에 의한 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체는 임의의 코덱 방식에 맞추어 동기된 하나의 공간 정보를 적용할 시간 구간을 지연 시간을 고려하여 시간 슬롯 상에 조정할 수 있기 때문에, 서로 다른 지연 시간에 따라 서로 다른 공간 정보를 계산할 필요가 없어 하나의 공간 정보만으로 모든 코 덱의 종류에 대응할 수 있고, 코어 코덱의 종류별로 서로 달라지는 지연 시간을 고려하여 공간 정보를 프레임에 동기시켜 적용할 수 있어 복원되는 다채널 오디오 신호의 음질이 저하되는 현상을 방지할 수 있는 효과를 갖는다.

Claims (14)

  1. 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 다채널 오디오 복원 장치에 있어서,
    상기 코딩된 다운 믹스 신호를 디코딩하는 코어 디코더;
    상기 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정하는 지연 시간 보상부; 및
    상기 결정된 시간 구간에서 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용하여 상기 다채널 오디오 신호를 복원하는 오디오 복원부를 구비하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  2. 제1 항에 있어서, 상기 공간 정보는 하나의 코덱 방식에 맞추어져 동기되어 있는 것을 특징으로 하는 다채널 오디오 복원 장치.
  3. 제1 항에 있어서, 상기 지연 시간 보상부는
    상기 지연 시간을 구하는 지연 시간 획득부; 및
    상기 시간 구간을 상기 지연 시간에 따라 결정하는 시간 구간 결정부를 구비하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  4. 제3 항에 있어서, 상기 지연 시간 획득부는
    코덱 방식에 관련된 지연 정보로부터 상기 지연 시간을 추출하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  5. 제4 항에 있어서, 상기 지연 시간 획득부는 상기 지연 정보를 외부로부터 입력하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  6. 제5 항에 있어서, 상기 지연 정보는 상기 공간 정보의 헤더에 포함되는 것을 특징으로 하는 다채널 오디오 복원 장치.
  7. 제5 항에 있어서, 상기 지연 정보는 상기 지연 시간 자체에 대한 정보를 갖는 것을 특징으로 하는 다채널 오디오 복원 장치.
  8. 제4 항 또는 제5 항에 있어서, 상기 지연 정보는 상기 코덱 방식의 종류에 대한 정보를 갖는 것을 특징으로 하는 다채널 오디오 복원 장치.
  9. 제8 항에 있어서, 상기 지연 시간 획득부는
    상기 코덱 방식의 종류를 인식하는 코덱 방식 인식부; 및
    코덱 방식별로 지연 시간들을 저장하고, 저장된 서로 다른 지연 시간들 중에서 상기 인식된 코덱 방식의 종류에 해당하는 상기 지연 시간을 독출하는 지연 시간 독출부를 구비하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  10. 제9 항에 있어서, 상기 코덱 방식 인식부는
    상기 코덱 방식의 종류를 외부로부터 입력하여 인식하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  11. 제9 항에 있어서, 상기 코덱 방식 인식부는
    상기 코덱 방식의 종류를 자체적으로 분석하여 인식하는 것을 특징으로 하는 다채널 오디오 복원 장치.
  12. 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 다채널 오디오 복원 방법에 있어서,
    상기 코딩된 다운 믹스 신호를 디코딩하는 단계;
    상기 디코딩된 다운 믹스 신호가 갖는 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정하는 단계; 및
    상기 결정된 시간 구간에 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용하여 상기 다채널 오디오 신호를 복원하는 단계를 구비하는 것을 특징으로 하는 다채널 오디오 복원 방법.
  13. 제12 항에 있어서, 상기 공간 정보는 하나의 코덱 방식에 맞추어져 동기되어 있는 것을 특징으로 하는 다채널 오디오 복원 장치.
  14. 다채널 오디오 신호가 다운 믹싱된 후 코딩된 다운 믹스 신호로부터 상기 다채널 오디오 신호를 복원하는 다채널 오디오 복원 장치에서 수행되는 프로그램을 기록하는 컴퓨터로 읽을 수 있는 기록 매체에 있어서,
    상기 코딩된 다운 믹스 신호를 디코딩시키는 단계;
    상기 디코딩된 다운 믹스 신호가 갖는 고유한 지연 시간에 따라, 공간 정보가 상기 디코딩된 다운 믹스 신호에 적용될 시간 구간을 결정시키는 단계; 및
    상기 결정된 시간 구간에 상기 공간 정보를 상기 디코딩된 다운 믹스 신호에 적용시켜 상기 다채널 오디오 신호를 복원시키는 단계를 수행하는 프로그램을 기록하는 컴퓨터로 읽을 수 있는 기록 매체.
KR1020060078219A 2005-10-04 2006-08-18 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체 KR20070074442A (ko)

Priority Applications (52)

Application Number Priority Date Filing Date Title
US11/541,471 US20070092086A1 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/540,920 US7653533B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,395 US7840401B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/540,919 US7761289B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,472 US7716043B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
US11/541,397 US7742913B2 (en) 2005-10-24 2006-09-29 Removing time delays in signal paths
BRPI0617779-4A BRPI0617779A2 (pt) 2005-10-24 2006-10-02 remoção dos atrasos de tempo em rotas de sinal
PCT/KR2006/003974 WO2007049863A2 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
TW095136561A TWI317243B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395781A CN101297598B (zh) 2005-10-24 2006-10-02 处理音频信号的方法和系统
EP06799056A EP1952671A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
KR1020087007450A KR100888971B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
CN200680039452.4A CN101297594B (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
EP06799055A EP1952670A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
PCT/KR2006/003975 WO2007049864A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395777A CN101297597B (zh) 2005-10-24 2006-10-02 处理音频信号的方法和装置
JP2008537579A JP5399706B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
CA2626132A CA2626132C (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
KR1020087007452A KR100888972B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
PCT/KR2006/003980 WO2007049866A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799057.2A EP1952672B1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
KR1020087007449A KR100875428B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
PCT/KR2006/003973 WO2007049862A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
AU2006306942A AU2006306942B2 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
KR1020087007454A KR100888974B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
TW095136564A TWI317247B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CN2006800395762A CN101297596B (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
JP2008537582A JP2009513084A (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087007453A KR100888973B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
JP2008537580A JP5270357B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
TW095136563A TWI317244B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
RU2008120661/09A RU2389155C2 (ru) 2005-10-24 2006-10-02 Устранение задержек по времени на трактах обработки сигнала
KR1020087030528A KR100928268B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
JP2008537583A JP5249039B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087023852A KR101186611B1 (ko) 2005-10-24 2006-10-02 오디오 신호의 처리 방법 및 이의 장치
PCT/KR2006/003976 WO2007049865A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799061A EP1952675A4 (en) 2005-10-24 2006-10-02 REMOVAL OF TIME DELAYS IN SIGNAL ROUTES
CNA2006800395796A CN101297599A (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
TW095136566A TWI310544B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537581A JP5249038B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
KR1020087007451A KR100875429B1 (ko) 2005-10-24 2006-10-02 신호 처리에서 시간 지연을 보상하는 방법
EP06799058A EP1952673A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
CNA2006800394539A CN101297595A (zh) 2005-10-24 2006-10-02 消除信号路径中的时间延迟
PCT/KR2006/003972 WO2007049861A1 (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
JP2008537584A JP5270358B2 (ja) 2005-10-24 2006-10-02 信号処理で時間遅延を補償する方法
TW095136559A TWI317245B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
TW095136562A TWI317246B (en) 2005-10-24 2006-10-02 Removing time delays in signal paths
EP06799059.8A EP1952674B1 (en) 2005-10-24 2006-10-02 Compensation of a decoding delay of a multi-channel audio signal
TW098104747A TWI450603B (zh) 2005-10-04 2006-10-02 音頻訊號處理方法及其系統與電腦可讀取媒體
HK09103908.6A HK1126071A1 (en) 2005-10-24 2009-04-28 Method and apparatus for processing audio signal
US12/872,081 US8095357B2 (en) 2005-10-24 2010-08-31 Removing time delays in signal paths
US12/872,044 US8095358B2 (en) 2005-10-24 2010-08-31 Removing time delays in signal paths

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US75700506P 2006-01-09 2006-01-09
US60/757,005 2006-01-09

Publications (1)

Publication Number Publication Date
KR20070074442A true KR20070074442A (ko) 2007-07-12

Family

ID=38508606

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060078219A KR20070074442A (ko) 2005-10-04 2006-08-18 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체

Country Status (1)

Country Link
KR (1) KR20070074442A (ko)

Similar Documents

Publication Publication Date Title
AU2006228821B2 (en) Device and method for producing a data flow and for producing a multi-channel representation
JP5254808B2 (ja) オーディオ信号の処理方法及び装置
JP4601669B2 (ja) マルチチャネル信号またはパラメータデータセットを生成する装置および方法
JP5006315B2 (ja) オーディオ信号のエンコーディング及びデコーディング方法及び装置
US6446037B1 (en) Scalable coding method for high quality audio
US9570082B2 (en) Method, medium, and apparatus encoding and/or decoding multichannel audio signals
RU2708942C2 (ru) Кодирование и декодирование аудиосигналов
KR20070003593A (ko) 멀티채널 오디오 신호의 인코딩 및 디코딩 방법
KR20120031998A (ko) Ｈｅ－ａａｃ 디코더와 ｍｐｅｇ 서라운드 디코더를 이용하여 멀티채널 오디오 신호를 복원하는 장치 및 방법
KR20070003544A (ko) 아비트러리다운믹스게인을 이용한 클리핑복원
KR20080071971A (ko) 미디어 신호 처리 방법 및 장치
KR20060109297A (ko) 오디오 신호의 인코딩/디코딩 방법 및 장치
US9111524B2 (en) Seamless playback of successive multimedia files
RU2383941C2 (ru) Способ и устройство для кодирования и декодирования аудиосигналов
US20150104158A1 (en) Digital signal reproduction device
KR20070074442A (ko) 다채널 오디오 복원 장치 및 방법과 이 장치에서 수행되는프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체
JP4862136B2 (ja) 音声信号処理装置
KR20080010980A (ko) 부호화/복호화 방법 및 장치.
KR20080035448A (ko) 다채널 오디오 신호의 부호화/복호화 방법 및 장치
JP2007178529A (ja) 符号化オーディオ信号再生装置及び符号化オーディオ信号再生方法
KR20070098726A (ko) 미디어 신호를 부호화/복호화하는 방법 및 장치
KR20080030848A (ko) 오디오 신호 인코딩 및 디코딩 방법 및 장치