KR100917843B1 - 다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법 - Google Patents

다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법 Download PDF

Info

Publication number
KR100917843B1
KR100917843B1 KR1020070098663A KR20070098663A KR100917843B1 KR 100917843 B1 KR100917843 B1 KR 100917843B1 KR 1020070098663 A KR1020070098663 A KR 1020070098663A KR 20070098663 A KR20070098663 A KR 20070098663A KR 100917843 B1 KR100917843 B1 KR 100917843B1
Authority
KR
South Korea
Prior art keywords
information
audio signal
channel
audio
different channels
Prior art date
Application number
KR1020070098663A
Other languages
English (en)
Other versions
KR20080029940A (ko
Inventor
백승권
서정일
이태진
이용주
장인선
유재현
장대영
홍진우
김진웅
강경옥
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20080029940A publication Critical patent/KR20080029940A/ko
Application granted granted Critical
Publication of KR100917843B1 publication Critical patent/KR100917843B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams

Abstract

1. 청구범위에 기재된 발명이 속한 기술분야
다양한 채널의 다객체 오디오 신호의 부호화 및 복호화 장치 및 방법에 관한 것임.
2. 발명이 해결하고자 하는 기술적 과제
다양한 채널로 구성된 다객체 오디오 신호 부호화 및 복호화 장치 및 방법을 제공함.
3. 발명의 해결방법의 요지
상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 하나의 다운믹스된 오디오 신호로 다운믹싱하며, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 헤더 정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 다운믹싱수단; 상기 다운믹싱된 오디오 신호를 부호화하는 부호화수단; 및 상기 부가정보를 비트스트림으로 생성하는 부가정보 부호화수단을 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함함.
4. 발명의 중요한 용도
오디오 부호화 및 복호화에 이용됨.
오디오 객체, 다채널, 다객체

Description

다양한 채널로 구성된 다객체 오디오 신호의 부호화 및 복호화 장치 및 방법{APPARATUS AND METHOD FOR CODING AND DECODING MULTI-OBJECT AUDIO SIGNAL WITH VARIOUS CHANNEL}
본 발명은 다객체 오디오 신호의 부호화 및 복호화 장치 및 방법에 관한 것으로, 보다 상세하게는 다양한 채널을 갖는 다객체 오디오 신호를 부호화 및 복호화하는, 다양한 채널로 구성된 다객체 오디오 신호 부호화 및 복호화 장치 및 방법에 관한 것이다.
여기서, 다양한 채널을 갖는 다객체 오디오 신호란, 다객체 오디오 신호로서 각각의 오디오 객체가 서로 상이한 채널(예를 들어, 모노, 스테레오, 5.1 채널)로 구성된 오디오 신호를 의미한다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT신성장동력핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2005-S-403-02, 과제명: 지능형 통합정보방송(SmaRTV)기술].
종래의 오디오 부복호화 기술에 따르면, 사용자는 오디오 컨텐츠를 수동적으로 청취할 수 밖에 없었으므로, 사용자의 필요에 따라 서로 상이한 채널로 구성된 각 오디오 객체를 제어하여 하나의 오디오 컨텐츠를 다양한 방법으로 조합함으로써 다양한 오디오 객체를 소비할 수 있는 다양한 채널로 구성된 복수의 오디오 객체별 부호화 및 복호화 장치 및 방법이 요구된다.
이와 관련하여, 종래의 SAC(Spatial Audio Coding)는 다채널 오디오 신호를 다운믹스된 모노 또는 스테레오 신호 및 공간큐로 표현, 전송 및 복원하는 기술로서 낮은 비트율에서도 고품질의 다채널 오디오 신호를 전송할 수 있다.
그러나, 종래 SAC는 다채널이되 1개 오디오 객체에 대해서만 부호화 및 복호화가 가능한 기술이기 때문에, 다채널이면서 동시에 다객체 오디오 신호, 예를 들어, 모노, 스테레오 및 5.1 채널로 구성된 다양한 객체의 오디오 신호를 부복호화할 수 없다는 문제점이 있다.
또한, 종래의 바이노럴 큐 코딩(Binaural Cue Coding, BCC)은 다객체 오디오 신호를 부복호화할 수 있으나, 당해 오디오 객체는 모노 채널인 경우로 한정되기 때문에, 모노 채널 이외의 다양한 채널로 구성된 다객체 오디오 신호를 부복호화할 수 없다는 단점이 있다.
정리하면, 종래기술에 따르면, 단일 채널로 구성된 다객체 오디오 신호 또는 다채널의 단일 객체 오디오 신호에 대해서만 부복호화를 수행할 수 있기 때문에, 다양한 채널로 구성된 다객체 오디오 신호에 대해서는 부복호화를 수행할 수 없다는 문제점이 있으며, 따라서 종래의 오디오 부복호화 기술에 따르면, 사용자는 오디오 컨텐츠를 수동적으로 청취할 수 밖에 없다는 문제점이 있다.
따라서, 사용자의 필요에 따라 서로 상이한 채널로 구성된 복수의 오디오 객체 각각을 제어하여 하나의 오디오 컨텐츠를 다양한 방법으로 조합함으로써 다양한 오디오 객체를 소비할 수 있는 다양한 채널로 구성된 복수의 오디오 객체별 부호화 및 복호화 장치 및 방법이 요구된다.
본 발명은 상기 요구에 부응하기 위하여 제안된 것으로, 다양한 채널을 갖는 다객체 오디오 신호를 부호화 및 복호화하는, 다양한 채널로 구성된 다객체 오디오 신호 부호화 및 복호화 장치 및 방법을 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 부호화 장치에 있어서, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 하나의 다운믹스된 오디오 신호로 다운믹싱하며, 상기 서로 상이한 채 널로 구성된 다객체 오디오 신호 각각에 대한 헤더 정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 다운믹싱수단; 상기 다운믹싱된 오디오 신호를 부호화하는 부호화수단; 및 상기 부가정보를 비트스트림으로 생성하는 부가정보 부호화수단을 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 부호화 장치를 제공한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 부호화 방법에 있어서, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 하나의 다운믹스된 오디오 신호로 다운믹싱하며, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 헤더 정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 다운믹싱단계; 상기 다운믹싱된 오디오 신호를 부호화하는 부호화단계; 및 상기 부가정보를 비트스트림으로 생성하는 부가정보 부호화단계를 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 부호화 방법을 제공한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 장치에 있어서, 입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석수단; 상기 입력신호분석수단으로부터 추출된 부가정보를 이용하여, 상기 복원된 다운믹스 오디오 신호를 객체별 오디오 신호로 복원하는 오디오 객체추출수단; 및 입력된 오디오 신호에 대한 제어정보를 이용하여 상기 복원된 객체별 오디오 신호를 다객체 오디오 신호로 출력하는 출력수단을 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 복호화 장치를 제공한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 방법에 있어서, 입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석단계; 상기 입력신호 분석단계로부터 추출된 부가정보를 이용하여, 상기복원된 다운믹스 오디오 신호를 객체별 오디오 신호로 복원하는 오디오 객체추출단계; 및 입력된 오디오 신호에 대한 제어정보를 이용하여 상기 복원된 객체별 오디오 신호를 다객체 오디오 신호로 출력하는 출력단계를 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 복호화 방법을 제공한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 장치에 있어서, 입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석수단; 입력 오디오 신호에 대한 제어 정보를 이용하여, 상기 입력신호 분석수단으로부터 추출된 부가정보를 제어하는 부가정보 제어수단; 및 제어된 부가정보를 이용하여 상기 복원된 다운믹스 오디오 신호를 다객체 오디오 신호로 출력하는 출력수단을 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 복호화 장치를 제공한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 방법에 있어서, 입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석단계; 입력 오디오 신호에 대한 제어 정보를 이용하여, 상기 입력신호 분석단계로부터 추출된 부가정보를 제어하는 부가정보 제어단계; 및 제어된 부가정보를 이용하여 상기 복원된 다운믹스 오디오 신호를 다객체 오디오 신호로 출력하는 출력단계를 포함하되, 상기 헤더 정보는 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및 상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보를 포함하는 복호화 방법을 제공한다.
본 발명은, 다양한 채널을 갖는 다객체 오디오 신호를 부호화 및 복호화하는, 다양한 채널로 구성된 다객체 오디오 신호 부호화 장치 및 방법을 제공함으로써, 다양한 채널로 구성된 다양한 객체의 오디오 컨텐츠를 효율적으로 부호화 및 복호화함으로써, 사용자로 하여금 필요에 따라 능동적으로 오디오 컨텐츠를 소비할 수 있도록 한다.
상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다.
도 1은 본 발명에 따른 다객체 오디오 부호화 장치를 나타내는 일실시예 구성도로서, 예를 들어, 입력되는 복수의 오디오 객체의 채널이 각각 모노, 스테레오 및 5.1 채널이다.
도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 다객체 오디오 부호화 장치는 제1다운믹서(101), 제2다운믹서(103), 오디오 인코더(105), 부가정보 인코더(107) 및 멀티플렉서(Multiplexer, 109)를 포함한다.
상기 제1다운믹서(101)는 모노 채널 다운믹서(111), 스테레오 채널 다운믹서(113) 및 다채널 다운믹서(115)를 포함한다.
상기 제1다운믹서(101)는 입력 오디오 객체의 헤더정보를 이용하여 입력된 다양한 채널의 다객체 오디오 신호를 모노, 스테레오, 다채널로 식별하고, 채널별로 그룹핑한다. 따라서, 다양한 채널의 다객체 오디오 신호는 각각 채널별로 그룹핑되어 각 채널별 다운믹서(111, 113,115)에 의해 다운믹싱된다.
또한 상기 제1다운믹서(101)는 입력 오디오 객체로부터 다운믹스된 오디오 신호 및 공간큐를 포함하는 부가정보를 추출한다. 즉, 동일한 채널별로 음원이 그룹핑되어 상기 제1다운믹서(101)로 입력되고, 모노 채널 다운믹서(111)는 입력된 모노 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보를 추출하고, 스테레오 채널 다운믹서(113)는 입력된 스테레오 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보를 추출하며, 다채널 다운믹서(115)는 입력된 다채널(예를 들어 5.1 채널) 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보를 추출한다.
상기 오디오 인코더(105)는 상기 제2다운믹서(103)로부터 출력된 제2다운믹스 신호를 부호화한다.
상기 부가정보 인코더(107)는 상기 제1다운믹서(101)로부터 출력된 부가정보 및 상기 제2다운믹서(103)로부터 출력된 부가정보를 이용하여 부가정보 비트스트림을 생성한다. 여기서 부가정보 비트스트림에 포함된 정보는 하기 도 6에서 상세하게 설명한다.
상기 멀티플렉서(109)는 상기 오디오 인코더(105)로부터 부호화된 신호 및 상기 부가정보 인코더(107)로부터 생성된 부가정보 비트스트림을 멀티플렉싱하여 복호화 장치로 전송되는 비트스트림을 생성한다.
상기 제1다운믹서(101)로부터 출력되는 제1다운믹스 신호는 스테레오 신호 또는 모노 신호이다. 즉, 상기 모노 채널 다운믹서(111)로부터 출력되는 다운믹스 신호는 모노 신호이며, 나머지 다운믹서(113, 115)로부터 출력되는 다운믹스 신호는 모노 또는 스테레오 신호이다.
상기 제2다운믹서(103)는 상기 제1다운믹서(101)로부터 출력된 제1다운믹스 신호를 제2다운믹스하여 출력하고, 상기 제2다운믹스 과정에서 분석된 공간큐를 포함하는 부가정보를 추출한다. 여기서 제2다운믹스 신호는 모드에 따라 모노 또는 스테레오 신호이다.
여기서, 상기 부가정보에는 공간큐 및 오디오 신호 복원 및 제어를 위한 헤더 정보가 포함된다. 부가정보는 하기 도 6에서 상세하게 설명한다.
도 2는 도 1의 모노 채널 다운믹서(111)를 나타내는 일실시예 상세 구성도로서, 예를 들어, 입력되는 모노 오디오 객체가 N개(m1,…, mN)이다.
도 2에 도시된 바와 같이, 상기 모노 채널 다운믹서(111)는 기본 다운믹서1을 캐스캐이드(cascade) 구조로 포함한다.
모노 채널 다운믹서(111)에 포함되는 기본 다운믹서1(201)의 개수는 모노 오디오 객체의 개수(N)에 따라 결정된다. 즉, 모노 오디오 객체가 N개일 때 기본 다 운믹서1(201)의 개수는 N-1개가 되며, 모노 오디오 객체가 1개 일때는 기본 다운믹서 없이 입력 신호가 바이패스(bypass) 된다.
한편, 실시예에 따라 1개의 기본 다운믹서1이 캐스캐이드 방식으로 N-1번 이용될 수 있다.
기본적으로 기본 다운믹서1은 2개의 입력 신호를 다운믹스하여, 1개의 다운믹스된 모노 신호를 생성하고, 입력 신호에 대한 공간 큐를 포함하는 부가정보를 추출한다. 첫번째 기본 다운믹서1(201a)은 상기 모노 채널 다운믹서(111)으로 입력되는 모노 오디오 객체 2개를 이용하여 1개의 다운믹스된 모노 신호를 생성하고, 공간큐를 포함하는 부가정보를 추출한다. 다음, 두번째 이용되는 기본 다운믹서1(201b)은 첫번째 기본 다운믹서1(201a)으로부터 출력되는 다운믹스된 모노 신호 및 상기 모노 채널 다운믹서(111)으로 입력되는 모노 오디오 객체를 이용하여 1개의 다운믹스된 모노 신호를 생성하고, 공간큐를 포함하는 부가정보를 추출한다. N-1번째 기본 다운믹서1(201d)은 N-2번째 기본 다운믹서1(미도시)으로부터 출력되는 다운믹스 모노 신호 및 상기 모노 채널 다운믹서(111)으로 입력되는 모노 오디오 객체를 이용하여 1개의 다운믹스된 모노 신호를 생성하고, 공간큐를 포함하는 부가정보를 추출한다.
여기서 공간큐(spatial cue)란 오디오 신호를 부호화 및 복호화하는 과정에서 이용되는 정보로서, 주파수 영역에서 추출되며, 기본 다운믹서1(201)으로 입력되는 두 신호의 크기 차, 지연 차, 상관성 등의 정보를 포함한다. 예를 들어, 본 발명의 일실시예로서 활용 가능한 공간큐로서, 오디오 신호의 파워 이득 정보를 나타내는 오디오 신호간 레벨차(Channel(audio signal) Level Difference, CLD), 오디오 신호간 에너지비(Inter-Channel Level Difference: ICLD), 오디오 신호간 시간 차(Inter Channel Time Difference: ICTD), 오디오 신호간 상관성 정보를 나타내는 오디오 신호간 상관성(Inter Channel Correlation: ICC) 및 가상음원 위치 정보(Virtual Source Location Information)가 있으며, 이에 한정되지 않는다.
여기서, 상기 부가정보에는 공간큐 및 오디오 신호 복원 및 제어를 위한 헤더 정보가 포함된다. 부가정보는 하기 도 6에서 상세하게 설명한다.
도 3은 도 1의 스테레오 채널 다운믹서(113)를 나타내는 일실시예 상세 구성도로서, 예를 들어, 입력되는 스테레오 오디오 객체는 left 신호 및 right 신호 각각 M개(SL1,…, SLM 및 SR1, …, SRM)이다.
스테레오 채널 다운믹서(113)로 입력되는 스테레오 오디오 객체는 스테레오의 left 신호 및 right 신호로 분리되어, 그룹핑된다.
도 3에 도시된 바와 같이, 상기 스테레오 채널 다운믹서(113)는 기본 다운믹서1(201)을 포함한다. 상기 스테레오 채널 다운믹서(113)에 포함된 기본 다운믹서1(201)은 M개의 left 신호 및 M개의 right 신호를 다운믹싱하기 위해, 2*(M-1)개가 필요하다. 여기서, 도 2에서 설명한 바와 같이, 실시예에 따라 1개의 기본 다운믹서1이 2*(M-1)번 이용될 수 있다.
M개의 left 신호를 분석하기 위한 M-1개의 기본 다운믹서1(201la ~ 201le)은 도 2에서 설명한 바와 같이, 입력되는 신호를 분석하여, 1개의 다운믹스된 left 신호를 생성하고, 공간큐를 포함하는 부가정보를 추출한다.
또한, M개의 right 신호를 분석하기 위한 M-1개의 기본 다운믹서1(201ra ~ 201re)은 도 2에서 설명한 바와 같이, 입력되는 신호를 분석하여, 1개의 다운믹스된 right 신호를 생성하고, 공간 큐를 포함하는 부가정보를 추출한다.
도 2에서 설명한 바와 같이, 스테레오 오디오 객체가 1개인 경우에는, 입력되는 left 신호 및 right 신호가 바이패스(bypass)될 수 있다.
따라서, 상기 스테레오 채널 다운믹서(113)는 다운믹스된 left 신호 및 다운믹스된 right 신호를 생성함으로써, 스테레오 다운믹스 신호를 출력하고, 공간 큐를 포함하는 부가정보를 추출한다.
여기서, 상기 부가정보에는 공간큐 및 오디오 신호 복원 및 제어를 위한 헤더 정보가 포함된다. 부가정보는 하기 도 6에서 상세하게 설명한다.
도 4는 도 1의 다채널 다운믹서(115)를 나타내는 일실시예 상세 구성도로서, 예를 들어, 입력되는 5.1 채널 오디오 객체는 P개이다.
도 4에 도시된 바와 같이, 다채널 다운믹서(115)는 종래의 MPEG Surround 또는 공간큐 기반 오디오 코딩(Spatial Audio Coding, SAC) 기술에 따른 다운믹서로서, 다채널 오디오 신호로부터 공간큐가 포함된 부가정보를 추출하고, 오디오 신호를 모노 또는 스테레오 다운믹스 신호로 다운믹스한다.
즉, 다채널 다운믹서(115)는 입력 신호인 P개의 다채널 오디오 객체로부터 공간큐를 추출하여 전송하고, 오디오 신호를 모노 또는 스테레오 신호로 다운믹스한다. 일반적으로 다채널 오디오 객체는 1개인 경우가 대부분이다.
도 5는 도 1의 제2다운믹서(103)를 나타내는 일실시예 상세 구성도이다.
상기 제2다운믹서(103)는 상기 제1다운믹서(101)로부터 출력된 신호를 다시 다운믹스(제2다운믹싱)하여 스테레오 다운믹스 신호를 출력하고, 공간큐가 포함된 부가정보를 추출한다.
도 5에 도시된 바와 같이, 상기 제2다운믹서(103)는 기본 다운믹서1(201f, 201g) 및 기본 다운믹서2(501)를 포함한다.
스테레오 채널 다운믹서(113) 및 다채널 다운믹서(115)로부터 다운믹스된 신호가 스테레오일 경우, 당해 다운믹스된 스테레오 신호는 각각 left, right 신호로 그룹핑되며 기본 다운믹서1(201f 및 201g)이 당해 그룹핑된 left, right 신호를 다운믹싱한다. 각각의 기본 다운믹서1(201f 및 201g)으로부터 출력된 다운믹스 모노 신호는 left와 right 신호의 대표적인 다운믹스 신호이다.
즉, 상기 기본 다운믹서1(201f)은 상기 스테레오 채널 다운믹서(113)로부터 출력되는 다운믹스된 left 신호 및 상기 다채널 다운믹서(115)로부터 출력되는 다운믹스된 left 신호를 다시 다운믹스하여, 1개의 대표 다운믹스 left 신호를 출력하고, 부가정보를 추출한다.
그리고, 상기 기본 다운믹서1(201g)은 상기 스테레오 채널 다운믹서(113)로부터 출력되는 다운믹스된 right 신호 및 상기 다채널 다운믹서(115)로부터 출력되 는 다운믹스된 right 신호를 다시 다운믹스하여, 1개의 대표 다운믹스 right 신호를 출력하고, 부가정보를 추출한다.
여기서, 도 2에서 설명한 바와 같이, 실시예에 따라 1개의 기본 다운믹서1이 2번 이용될 수 있다.
다음, 상기 기본 다운믹서2(501)는 상기 모노 채널 다운믹서(111)로부터 출력되는 다운믹스 모노 신호, 상기 기본 다운믹서1(201f 및 201g)으로부터 출력되는 대표 다운믹스 left 신호 및 대표 다운믹스 right 신호를 다운믹스하여, 전체 다운믹스 left 신호 및 전체 다운믹스 right 신호를 출력하고, 공간큐가 포함된 부가정보를 추출한다.
여기서, 상기 부가정보에는 공간큐 및 오디오 신호 복원 및 제어를 위한 헤더 정보가 포함된다. 부가정보는 하기 도 6에서 상세하게 설명한다.
상기 기본 다운믹서1(201)과 상기 기본 다운믹서2(501)는 각각 하기 [수학식1] 및 [수학식2]에 기초하여 입력 오디오 신호를 다운믹싱한다.
[수학식 1]
Figure 112007070529059-pat00001
[수학식 2]
Figure 112007070529059-pat00002
여기서
Figure 112007070529059-pat00003
는 가중요소(weighting factor)로서 입력 오디오 신호의 다운믹싱 레벨을 조절한다.
Figure 112007070529059-pat00004
는 상기 기본 다운믹서1(201)과 상기 기본 다운믹서2(501)의 입력 오디오 신호로서 모노 신호 또는 스테레오의 left 신호 또는 right 신호이다. 아래첨자 b는 서브밴드를 나타내는 인덱스로서 각 가중요소(
Figure 112007070529059-pat00005
)는 서브밴드별로 정의될 수 있다.
가중요소는 입력되는 오디오 객체의 표현목적에 따라 달리 정의될 수 있다. 예를 들어, 임의의 모노 신호
Figure 112007070529059-pat00006
가 주된 신호로 부호화되기 위하여,
Figure 112007070529059-pat00007
에 해당하는 가중요소가 상대적으로 큰 값으로 정의될 수 있다. [수학식 1]에서
Figure 112007070529059-pat00008
인 경우, 다운믹스 신호는
Figure 112007070529059-pat00009
로서
Figure 112007070529059-pat00010
가 주된 신호로 다운믹스된다.
상기 가중요소는 다운믹스 신호에 대한 표현 목적의 제약조건(constraint condition)에 따라 정해질 수 있다. 여기서 제약조건이란, 음향 장면(scene)에 대한 제약조건으로서, 예를 들어, 다운믹스된 오디오 신호에서 바이올린 및 기타에 대한 오디오 신호가 바이올린 0.7, 기타 0.3 비율로 재생(playback)되기 위해서 각 각의 가중요소가 각각 0.7 및 0.3으로 정해질 수 있다. 제약조건 정보는 시스템 혹은 사용자 등 외부로부터 입력에 의해 결정된다.
한편, 상기 가중요소는 공간큐 레벨 정보에 반영되어야 한다. 예를 들어, CLD를 공간큐로서 이용하는 경우, [수학식 1]에 대해서 [수학식 3]과 같이 공간큐 레벨 정보가 예측될 수 있다.
[수학식 3]
Figure 112007070529059-pat00011
여기서, P()는 파워 연산자로서,
Figure 112007070529059-pat00012
을 이용하여 각 신호의 파워 합을 계산할 수 있다.
Figure 112007070529059-pat00013
및
Figure 112007070529059-pat00014
는 서브밴드의 경계(boundary)를 나타낸다.
기본 다운믹서2(501)는 MPEG Surround의 TTT(Three-to-Two) box와 동일하게 공간큐를 추출한다.
도 6은 도 1의 부가정보 인코더(107)로부터 생성되는 부가정보 비트스트림의 구조를 나타내는 일실시예 구성도이다.
도 6에 도시된 바와 같이, 부가정보 비트스트림은 헤더정보 및 공간큐(spatial cue)를 포함한다.
상기 헤더정보는 다양한 채널로 구성된 다객체 오디오 신호의 복원 및 재생을 위한 정보를 포함하며, 오디오 객체에 대한 채널 정보 및 해당 오디오 객체의 ID를 정의함으로써 모노, 스테레오, 다채널의 오디오 객체에 대한 복호화 정보를 제공할 수 있다. 즉, 예를 들어, 부호화된 특정 오디오 객체가 모노 오디오 신호인지 스테레오 오디오 신호인지 구분될 수 있도록 식별 ID 및 객체별 정보가 정의될 수 있다. 상기 헤더정보는 일실시예로서 SAC(Spatial Audio Coding) 헤더 정보, 오디오 객체 정보 및 프리셋(preset) 정보를 포함할 수 있다.
일실시예로서 상기 SAC 헤더 정보는 공간큐 기반의 오디오 부호화 과정에서 생성되는 정보로서, 타임 슬럿(time-slot) 정보를 포함할 수 있다. 상기 SAC 헤더 정보는 상기 제1다운믹서(101) 및 상기 제2다운믹서(103)가 부가정보를 추출하는 과정에서 추출된다.
일실시예로서, 상기 오디오 객체 정보는 다운믹스되는 오디오 객체들이 모노, 스테레오, 혹은 다채널인지를 식별하기 위한 정보 및 객체 ID 정보를 포함한다. 예를 들어, 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)를 포함한다.
일실시예로서, 상기 프리셋 정보는 헤더 정보의 부가정보로서, 각 객체의 제어 정보가 미리 정의되어 있다.
예를 들어 상기 프리셋 정보는 프리셋 모드 정보 및 프리셋 모드 지원 정보를 포함한다. 상기 프리셋 모드 정보는 예를 들어 가라오케 모드, 솔로 객체 추출(extraction) 모드(기타 연주 추출, 피아노 연주 추출 등), 선호 렌더링 정보 및 기본 재생 모드 세팅(playback mode setting) 정보를 포함할 수 있다.
상기 프리셋 모드 지원 정보는 예를 들어 가라오케 모드 지원을 위한 정보로서 가라오케 모드에서 보컬 인덱스 정보, 솔로 객체 추출 모드 지원을 위한 정보로서 해당 객체 인덱스 정보, 선호 렌더링 지원을 위한 정보로서 각 객체별 렌더링 정보(rotation, elevation, speed 등), 및 기본 스테레오 및 다채널 재생 모드 세팅 지원을 위한 정보로서 각 오디오 객체별 최적의 렌더링 정보를 포함한다.
또한, 상기 부가정보에 포함되는 공간큐는 입력된 다객체 오디오 신호의 객체별 공간큐 정보를 포함한다.
부가정보의 포맷은 설계자의 선택에 따라 다양하게 구성될 수 있다.
도 7은 도 6에 도시된 부가정보 비트스트림의 일실시예 상세 구조도로서, 모노 및 스테레오 채널로 구성된 다객체 오디오 신호에 대한 부가정보를 나타낸다.
도 7에 도시된 바와 같이, 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 혹은 다채널인지 식별하는 정보)가 포함되고, 또한 부가정보 비트스트림에는 공간큐가 포함된다. 도 7의 일실시예에서는 공간큐의 일 예로서 CLD 및 ICC가 이용되었다.
도 7에 도시된 바와 같이, 각 모노 및 스테레오 객체에 대응되는 공간큐(CLD, ICC)가 부가정보에 포함된다. 즉, 각 입력 오디오 객체에 대응되는 공 간큐 정보는 모두 부가정보에 포함되어야 한다.
도 8은 도 6에 도시된 부가정보 비트스트림의 또 다른 일실시예 상세 구조도로서, 모노, 스테레오 및 다채널로 구성된 다객체 오디오 신호에 대한 부가정보 를 나타낸다.
도 8에 도시된 바와 같이, 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)가 포함되고, 또한 부가정보 비트스트림에는 공간큐가 포함된다. 도 8의 일실시예에서는 공간큐의 일 예로서 CLD 및 ICC가 이용되었다.
한편, 여기서 다채널 객체에 대한 공간큐는, 모노 및 스테레오 객체에 대한 공간큐와 캐스케이드 멀티플렉싱(Cascaded Multiplexing)되어 하나의 부가정보 비트스트림으로 표현될 수 있다. 상기 모노 채널 다운믹서(111), 스테레오 채널 다운믹서(113) 및 제2 다운믹서(103)에 의해 추출된 공간큐가 도 8의 모노 및 스테레오 오디오 객체에 대한 공간큐이고, 상기 다채널 다운믹서(115)에 의해 추출된 공간큐가 도 8의 다채널 오디오 객체에 대한 공간큐이다.
도 9는 본 발명에 따른 다양한 채널의 다객체 오디오 신호를 복호화하는 장치의 일실시예 구성도이다.
본 발명의 일실시예에 따른 다양한 채널의 다객체 오디오 신호를 복호화하는 장치는, 예를 들어 도 1의 부호화 장치로부터 생성된 오디오 비트스트림으로부터 공간큐 정보를 추출하고, 추출된 공간큐를 이용하여 각 채널 정보를 예측함으로써, 다양한 채널로 구성된 다객체 오디오 신호(모노, 스테레오 및 다채널 오디오 객체를 포함하는 오디오 신호)를 복원한다.
도 9에 도시된 바와 같이, 본 발명의 일실시예에 따른 다양한 채널의 다객체 오디오 신호를 복호화하는 장치는, 역다중화부(demultiplexer, DEMUX, 901), 오디오 디코더(903), 부가정보 해석부(905), 오디오 객체 추출부(907) 및 렌더링 처리부(909)를 포함한다.
상기 디멀티플렉서(901)는 예를 들어 도 1의 부호화 장치로부터 생성된 오디오 비트스트림으로부터 오디오 정보 비트스트림과 부가정보 비트스트림을 분리한다.
상기 오디오 디코더(903)는 상기 디멀티플렉서(901)에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호를 복원한다.
상기 부가정보 해석부(905)는 상기 디멀티플렉서(901)에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보를 추출한다.
상기 오디오 객체 추출부(907)는 상기 부가정보 해석부(905)로부터 추출된 부가정보의 헤더 정보를 이용하여, 다운믹스 오디오 신호로부터 객체별 오디오 신호를 복원한다. 상기 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱 스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)가 포함되어 있기 때문에 상기 오디오 객체 추출부(907)는 상기 부가정보 해석부(905)로부터 추출된 부가정보의 헤더 정보 및 공간큐 정보에 기초하여 상기 오디오 디코더(903)에 의해 출력된 다운믹스 오디오 신호로부터 객체별 오디오 신호를 복원할 수 있다.
상기 렌더링 처리부(909)는, 상기 오디오 객체 추출부(907)에 의해 복원된 각 오디오 객체에 대한 렌더링 제어 정보(예를 들어, 공간상 오디오 객체의 위치 및 크기) 및 출력 채널 제어 정보(예를 들어, 5.1 또는 7.1 채널, 스테레오)를 외부로부터 입력받아, 상기 오디오 객체 추출부(907)로부터 복원된 각 객체별 오디오 신호를 정위시켜 오디오 신호를 출력한다.
도 10은 본 발명에 따른 다양한 채널의 다객체 오디오 신호를 복호화하는 장치의 또 다른 일실시예 구성도이다. 도 10의 일실시예는 각 객체별 복원된 오디오 신호를 렌더링 하는 도 9의 일실시예와 달리, 부가정보를 제어한 다음, 제어된 부가정보에 따라 오디오 객체를 렌더링함으로써 오디오 신호를 복원한다는 점에서 도 9의 일실시예와 차이가 있다.
도 10에 도시된 바와 같이, 본 발명의 또 다른 일실시예에 따른 다양한 채널의 다객체 오디오 신호를 복호화하는 장치는, 디멀티플렉서(901), 오디오 디코더(903), 부가정보 해석부(905), 부가정보 제어부(1001), SAC 디코더(1003)를 포함한다.
상기 디멀티플렉서(901), 오디오 디코더(903), 부가정보 해석부(905), 도 9의 디멀티플렉서(901), 오디오 디코더(903), 부가정보 해석부(905)와 동일한 구성이다.
상기 부가정보 제어부(1001)는, 상기 오디오 디코더(903)에 의해 복원된 다운믹스 오디오 신호에 대한 렌더링 제어 정보(예를 들어, 공간상 오디오 객체의 위치 및 크기) 및 출력 채널 제어 정보(예를 들어, 5.1 또는 7.1 채널, 스테레오)를 외부로부터 입력받아, 상기 부가정보 해석부(905)로부터 추출된 부가정보(예를 들어, 각 오디오 객체의 신호 크기 정보 및 상관성 정보)를 상기 외부 입력 신호에 따라 제어한다.
상기 SAC 디코더(1003)는 상기 부가정보 제어부(1001)에 의해 제어된 부가정보를 이용하여, 상기 오디오 디코더(903)로부터 복원된 다운믹스 오디오 신호를 다양한 채널의 다객체 오디오 신호로 복원한다. 상기 SAC 디코더(1003)는 상기 부가정보 제어부(1001)에 의해 제어된 부가정보의 헤더 정보를 이용하여, 다운믹스 오디오 신호로부터 객체별 오디오 신호를 복원한다. 상기 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)가 포함되어 있기 때문에 상기 SAC 디코더(1003)는 상기 부가정보 제어부(1001)에 의해 제어된 부가정보의 헤더 정보 및 공간큐 정보에 기초하여 상기 오디오 디코더(903)에 의해 출력된 다운믹스 오디오 신호로부터 객체별 오디오 신호를 복원할 수 있다.
도 11은 도 1에 따른 다객체 오디오 부호화 방법을 나타내는 일실시예 흐름도이다.
도 1에 도시된 바와 같이, 입력된 다양한 채널의 다객체 오디오 신호는 입력 오디오 객체의 헤더정보에 의해 모노, 스테레오, 다채널로 식별되고, 채널별로 그룹핑된다(s1101).
다음, 단계 s1101에 의해 동일한 채널별로 그룹핑된 음원이 다운믹스되고, 공간큐를 포함하는 부가정보가 추출된다(s1103). 즉, 입력된 모노 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보가 추출되고, 입력된 스테레오 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보가 추출되며, 입력된 다채널(예를 들어 5.1 채널) 오디오 객체로부터 다운믹스 신호 및 공간큐를 포함하는 부가정보가 추출된다.
상기 단계 s1103로부터 출력되는 제1다운믹스 신호는 스테레오 신호 또는 모노 신호이다. 즉, 상기 입력된 모노 오디오 객체로부터 출력되는 다운믹스 신호는 모노 신호이며, 스테레오 오디오 객체 및 다채널 오디오 객체로부터 출력되는 다운믹스 신호는 모노 또는 스테레오 신호이다.
다음, 단계 s1103로부터 출력되는 제1다운믹스 신호는 제2다운믹스되고, 상기 제2다운믹스 과정에서 분석된 공간큐를 포함하는 부가정보가 추출된다(s1105). 여기서 제2다운믹스 신호는 모드에 따라 모노 또는 스테레오 신호이다.
다음, 단계 s1105로부터 출력된 제2다운믹스 신호가 부호화된다(s1107).
다음, 단계 s1103으로부터 출력된 부가정보 및 단계 s1105로부터 출력된 부가정보를 이용하여 부가정보 비트스트림이 생성된다(s1109).
다음, 단계 s1107로부터 부호화된 신호 및 단계 s1109로부터 생성된 부가정보 비트스트림이 멀티플렉싱되어 복호화 장치로 전송되는 비트스트림이 생성된다(s1111).
도 12는 도 9에 따른 다객체 오디오 복호화 방법을 나타내는 일실시예 흐름도이다.
도 12에 도시된 바와 같이, 상기 단계 s1111에 의해 생성된 오디오 비트스트림으로부터 오디오 정보 비트스트림과 부가정보 비트스트림이 분리된다(s1201).
다음, 단계 s1201에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호가 복원된다(s1203).
다음, 단계 s1201에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보가 추출된다(s1205).
다음, 단계 s1205로부터 추출된 부가정보의 헤더 정보를 이용하여, 다운믹스 오디오 신호로부터 객체별 오디오 신호가 복원된다(s1207). 상기 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)가 포함되어 있기 때문에 상기 단계 s1205로부터 추 출된부가정보의 헤더 정보 및 공간큐 정보에 기초하여 상기 단계 s1203에 의해 출력된 다운믹스 오디오 신호로부터 객체별 오디오 신호가 복원될 수 있다.
다음, 단계 s1207에 의해 복원된 각 오디오 객체에 대한 렌더링 제어 정보(예를 들어, 공간상 오디오 객체의 위치 및 크기) 및 출력 채널 제어 정보(예를 들어, 5.1 또는 7.1 채널, 스테레오)를 외부로부터 입력받아, 상기 단계 s1207로부터 복원된 각 객체별 오디오 신호가 정위되어, 다객체 오디오 신호가 출력된다.
도 13은 도 10에 따른 다객체 오디오 복호화 방법을 나타내는 일실시예 흐름도이다.
도 13에 도시된 바와 같이, 상기 단계 s1111에 의해 생성된 오디오 비트스트림으로부터 오디오 정보 비트스트림과 부가정보 비트스트림이 분리된다(s1301).
다음, 단계 s1301에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호가 복원된다(s1303).
다음, 단계 s1301에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보가 추출된다(s1305).
다음, 단계 s1303에 의해 복원된 각 오디오 객체에 대한 렌더링 제어 정보(예를 들어, 공간상 오디오 객체의 위치 및 크기) 및 출력 채널 제어 정보(예를 들어, 5.1 또는 7.1 채널, 스테레오)를 외부로부터 입력받아, 상기 단계 s1305로부터 추출된 부가정보(예를 들어, 각 오디오 객체의 신호 크기 정보 및 상관성 정보)가 상기 외부 입력 신호에 따라 제어된다(s1307).
다음, 단계 s1307에 의해 제어된 부가정보를 이용하여, 상기 단계 s1303으로부터 복원된 다운믹스 오디오 신호가 다양한 채널의 다객체 오디오 신호로 복원된다(s1309). 상기 단계 s1307에 의해 제어된 부가정보의 헤더 정보를 이용하여, 다운믹스 오디오 신호로부터 객체별 오디오 신호가 복원된다. 상기 헤더 정보에는 채널별 오디오 객체 수(모노 오디오 객체수, 스테레오 오디오 객체수, 다채널 오디오 객체수), 각 채널별 오디오 객체들의 인덱스 정보(ID, 오디오 객체가 모노, 스테레오, 다채널인지 식별하는 정보)가 포함되어 있기 때문에, 상기 단계 s1307에 의해 제어된 부가정보의 헤더 정보 및 공간큐 정보에 기초하여 상기 단계 s1303에 의해 출력된 다운믹스 오디오 신호로부터 객체별 오디오 신호가 복원될 수 있다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.
도 1은 본 발명에 따른 다객체 오디오 부호화 장치를 나타내는 일실시예 구성도.
도 2는 도 1의 모노 채널 다운믹서를 나타내는 일실시예 상세 구성도.
도 3은 도 1의 스테레오 채널 다운믹서를 나타내는 일실시예 상세 구성도.
도 4는 도 1의 다채널 다운믹서를 나타내는 일실시예 상세 구성도.
도 5는 도 1의 제2다운믹서를 나타내는 일실시예 상세 구성도.
도 6는 도 1의 부가정보 인코더로부터 생성되는 부가정보 비트스트림의 구조를 나타내는 일실시예 구성도.
도 7은 도 6에 도시된 부가정보 비트스트림의 구조를 상세하게 나타내는 일실시예 구성도.
도 8은 도 6에 도시된 부가정보 비트스트림의 구조를 상세하게 나타내는 또 다른 일실시예 구성도.
도 9는 본 발명에 따른 다객체 오디오 복호화 장치를 나타내는 일실시예 구성도.
도 10은 본 발명에 따른 다객체 오디오 복호화 장치를 나타내는 또 다른 일실시예 구성도.
도 11은 도 1에 따른 다객체 오디오 부호화 방법을 나타내는 일실시예 흐름도.
도 12는 도 9에 따른 다객체 오디오 복호화 방법을 나타내는 일실시예 흐름 도.
도 13은 도 10에 따른 다객체 오디오 복호화 방법을 나타내는 일실시예 흐름도.

Claims (64)

  1. 서로 상이한 채널로 구성된 다객체 오디오 신호의 부호화 장치에 있어서,
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 하나의 다운믹스된 오디오 신호로 다운믹싱하며, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 헤더 정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 다운믹싱수단;
    상기 다운믹싱된 오디오 신호를 부호화하는 부호화수단; 및
    상기 부가정보를 비트스트림으로 생성하는 부가정보 부호화수단
    을 포함하되,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 부호화 장치.
  2. 제1항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체수 정보
    를 포함하는 부호화 장치.
  3. 제1항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    부호화 장치.
  4. 제1항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 부호화 장치.
  5. 제4항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 부호화 장치.
  6. 제1항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    부호화 장치.
  7. 제1항에 있어서,
    상기 다운믹싱수단은
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 채널별로 다운믹싱하는 제1다운믹스부; 및
    상기 제1다운믹스부에 의해 채널별로 다운믹스된 신호를 하나의 다운믹스 신호로 다운믹싱하는 제2다운믹스부
    를 포함하는 부호화 장치.
  8. 제7항에 있어서,
    상기 제1다운믹스부는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 포함된 모노 채널의 다객체 오디오 신호 각각에 대하여 부가정보를 추출하고 상기 모노 채널의 다객체 오디오 신호를 다운믹싱하는 기본 다운믹서
    를 포함하는 부호화 장치.
  9. 제8항에 있어서,
    상기 기본 다운믹서는
    상기 모노 채널의 다객체 오디오 신호 N개에 대하여 N-1개가 캐스캐이드 구조로 구성된
    부호화 장치.
  10. 제8항에 있어서,
    상기 기본 다운믹서는
    상기 모노 채널의 다객체 오디오 신호 N개에 대하여 1개가 캐스캐이드 방식으로 N-1번 수행되는
    부호화 장치.
  11. 제7항에 있어서,
    상기 제1다운믹스부는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 포함된 스테레오 채널의 다객체 오디오 신호인 좌측 신호 및 우측 신호 각각에 대하여 부가정보를 추출하고 상기 스테레오 채널의 다객체 오디오 신호인 좌측 신호 및 우측 신호를 다운믹싱하는 기본 다운믹서
    를 포함하는 부호화 장치.
  12. 제11항에 있어서,
    상기 기본 다운믹서는
    상기 스테레오 채널의 다객체 오디오 신호를 구성하는 좌측 신호 및 우측 신호 각각의 M개에 대하여 M-1개가 상기 좌측 신호 및 우측 신호 각각에 대하여 캐스 캐이드 구조로 구성된
    부호화 장치.
  13. 제11항에 있어서,
    상기 기본 다운믹서는
    상기 스테레오 채널의 다객체 오디오 신호를 구성하는 좌측 신호 및 우측 신호 각각의 M개에 대하여 1개가 상기 좌측 신호 및 우측 신호 각각에 대하여 캐스캐이드 방식으로 M-1번 수행되는
    부호화 장치.
  14. 제11항에 있어서,
    상기 제1다운믹스부는
    MPEG Surround 또는 공간큐 기반 오디오 코딩(SAC) 방식에 기초하여 다채널인 다객체 오디오 신호에 대하여 부가정보를 추출하고 상기 다채널인 다객체 오디오 신호를 다운믹싱하는 다채널 다운믹서
    를 포함하는 부호화 장치.
  15. 제7항에 있어서,
    상기 제2다운믹스부는
    상기 제1다운믹스부에 의해 스테레오 채널로 다운믹스된 신호의 좌측 신호 및 우측 신호 각각에 대하여 부가정보를 추출하고 상기 제1다운믹스부에 의해 스테레오 채널로 다운믹스된 신호의 좌측 신호 및 우측 신호 각각을 모노 채널 신호로 다운믹싱하는 제1기본 다운믹서; 및
    상기 제1기본 다운믹서 및 상기 제1다운믹스부에 의해 모노 채널로 다운믹스된 신호에 대하여 부가정보를 추출하고 상기 제1기본 다운믹서 및 상기 제1다운믹스부에 의해 모노 채널로 다운믹스된 신호를 스테레오 채널 신호로 다운믹싱하는 제2기본 다운믹서
    를 포함하는 부호화 장치.
  16. 제1항에 있어서,
    상기 부호화 장치는
    상기 부호화수단에 의해 부호화된 오디오 신호 및 상기 부가정보 부호화수단에 의해 생성된 부가정보를 멀티플렉싱하는 멀티플렉싱수단
    을 더 포함하는 부호화 장치.
  17. 서로 상이한 채널로 구성된 다객체 오디오 신호의 부호화 방법에 있어서,
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 하나의 다운믹스된 오디오 신호로 다운믹싱하며, 상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 헤더 정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 다운믹싱단계;
    상기 다운믹싱된 오디오 신호를 부호화하는 부호화단계; 및
    상기 부가정보를 비트스트림으로 생성하는 부가정보 부호화단계
    를 포함하되,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 부호화 방법.
  18. 제17항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체 수 정보
    를 포함하는 부호화 방법.
  19. 제17항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    부호화 방법.
  20. 제17항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 부호화 방법.
  21. 제20항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 부호화 방법.
  22. 제17항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    부호화 방법.
  23. 제17항에 있어서,
    상기 다운믹싱단계는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호를 채널별로 다운믹싱하는 제1다운믹스단계; 및
    상기 제1다운믹스단계에 의해 채널별로 다운믹스된 신호를 하나의 다운믹스 신호로 다운믹싱하는 제2다운믹스단계
    를 포함하는 부호화 방법.
  24. 제23항에 있어서,
    상기 제1다운믹스단계는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 포함된 모노 채널의 다객체 오디오 신호 각각에 대하여 부가정보를 추출하고 상기 모노 채널의 다객체 오디오 신호를 다운믹싱하는 기본 다운믹스단계
    를 포함하는 부호화 방법.
  25. 제24항에 있어서,
    상기 기본 다운믹스단계는
    상기 모노 채널의 다객체 오디오 신호 N개에 대하여 N-1개가 캐스캐이드 구조로 수행되는
    부호화 방법.
  26. 제24항에 있어서,
    상기 기본 다운믹스단계는
    상기 모노 채널의 다객체 오디오 신호 N개에 대하여 1개가 캐스캐이드 방식으로 N-1번 수행되는
    부호화 방법.
  27. 제23항에 있어서,
    상기 제1다운믹스단계는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 포함된 스테레오 채널의 다객체 오디오 신호인 좌측 신호 및 우측 신호 각각에 대하여 부가정보를 추출하고 상기 스테레오 채널의 다객체 오디오 신호인 좌측 신호 및 우측 신호를 다운믹싱하는 기본 다운믹스단계
    를 포함하는 부호화 방법.
  28. 제27항에 있어서,
    상기 기본 다운믹스단계는
    상기 스테레오 채널의 다객체 오디오 신호를 구성하는 좌측 신호 및 우측 신호 각각의 M개에 대하여 M-1개가 상기 좌측 신호 및 우측 신호 각각에 대하여 캐스캐이드 구조로 수행되는
    부호화 방법.
  29. 제27항에 있어서,
    상기 기본 다운믹스단계는
    상기 스테레오 채널의 다객체 오디오 신호를 구성하는 좌측 신호 및 우측 신호 각각의 M개에 대하여 1개가 상기 좌측 신호 및 우측 신호 각각에 대하여 캐스캐이드 방식으로 M-1번 수행되는
    부호화 방법.
  30. 제27항에 있어서,
    상기 제1다운믹스단계는
    MPEG Surround 또는 공간큐 기반 오디오 코딩(SAC) 방식에 기초하여 다채널인 다객체 오디오 신호에 대하여 부가정보를 추출하고 상기 다채널인 다객체 오디오 신호를 다운믹싱하는 다채널 다운믹스단계
    를 포함하는 부호화 방법.
  31. 제23항에 있어서,
    상기 제2다운믹스단계는
    상기 제1다운믹스단계에 의해 스테레오 채널로 다운믹스된 신호의 좌측 신호 및 우측 신호 각각에 대하여 부가정보를 추출하고 상기 제1다운믹스단계에 의해 스테레오 채널로 다운믹스된 신호의 좌측 신호 및 우측 신호 각각을 모노 채널 신호로 다운믹싱하는 제1기본 다운믹스단계; 및
    상기 제1기본 다운믹스단계 및 상기 제1다운믹스단계에 의해 모노 채널로 다운믹스된 신호에 대하여 부가정보를 추출하고 상기 제1기본 다운믹스단계 및 상기 제1다운믹스단계에 의해 모노 채널로 다운믹스된 신호를 스테레오 채널 신호로 다운믹싱하는 제2기본 다운믹스단계
    를 포함하는 부호화 방법.
  32. 제17항에 있어서,
    상기 부호화 방법은
    상기 부호화단계에 의해 부호화된 오디오 신호 및 상기 부가정보 부호화단계에 의해 생성된 부가정보를 멀티플렉싱하는 멀티플렉싱단계
    을 더 포함하는 부호화 방법.
  33. 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 장치에 있어서,
    입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석수단;
    상기 입력신호분석수단으로부터 추출된 부가정보를 이용하여, 상기 복원된 다운믹스 오디오 신호를 객체별 오디오 신호로 복원하는 오디오 객체추출수단; 및
    입력된 오디오 신호에 대한 제어정보를 이용하여 상기 복원된 객체별 오디오 신호를 다객체 오디오 신호로 출력하는 출력수단
    을 포함하되
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 복호화 장치.
  34. 제33항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체수 정보
    를 포함하는 복호화 장치.
  35. 제33항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    복호화 장치.
  36. 제33항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 복호화 장치.
  37. 제36항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 복호화 장치.
  38. 제33항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    복호화 장치.
  39. 제33항에 있어서,
    상기 제어 정보는
    복원된 각 오디오 객체에 대한 렌더링 제어 정보 및 출력 채널 제어 정보인
    복호화 장치.
  40. 제33항에 있어서,
    상기 입력신호 분석수단은
    입력된 오디오 신호로부터 오디오 정보 비트스트림과 부가정보 비트스트림을 분리하는 디멀티플렉싱부;
    상기 디멀티플렉싱부에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호를 복원하는 오디오 복원부; 및
    상기 디멀티플렉싱부에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보를 추출하는 부가정보 해석부
    를 포함하는 복호화 장치.
  41. 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 방법에 있어서,
    입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석단계;
    상기 입력신호 분석단계로부터 추출된 부가정보를 이용하여, 상기 복원된 다운믹스 오디오 신호를 객체별 오디오 신호로 복원하는 오디오 객체추출단계; 및
    입력된 오디오 신호에 대한 제어정보를 이용하여 상기 복원된 객체별 오디오 신호를 다객체 오디오 신호로 출력하는 출력단계
    를 포함하되
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 복호화 방법.
  42. 제41항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체수 정보
    를 포함하는 복호화 방법.
  43. 제41항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    복호화 방법.
  44. 제41항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 복호화 방법.
  45. 제44항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 복호화 방법.
  46. 제41항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    복호화 방법.
  47. 제41항에 있어서,
    상기 제어 정보는
    복원된 각 오디오 객체에 대한 렌더링 제어 정보 및 출력 채널 제어 정보인
    복호화 방법.
  48. 제41항에 있어서,
    상기 입력신호 분석단계은
    입력된 오디오 신호로부터 오디오 정보 비트스트림과 부가정보 비트스트림을 분리하는 디멀티플렉싱단계;
    상기 디멀티플렉싱단계에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호를 복원하는 오디오 복원단계; 및
    상기 디멀티플렉싱단계에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보를 추출하는 부가정보 해석단계
    를 포함하는 복호화 방법.
  49. 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 장치에 있어서,
    입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석수단;
    입력 오디오 신호에 대한 제어 정보를 이용하여, 상기 입력신호 분석수단으로부터 추출된 부가정보를 제어하는 부가정보 제어수단; 및
    제어된 부가정보를 이용하여 상기 복원된 다운믹스 오디오 신호를 다객체 오디오 신호로 출력하는 출력수단
    을 포함하되,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 복호화 장치.
  50. 제49항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체수 정보
    를 포함하는 복호화 장치.
  51. 제49항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    복호화 장치.
  52. 제49항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 복호화 장치.
  53. 제52항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 복호화 장치.
  54. 제49항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    복호화 장치.
  55. 제49항에 있어서,
    상기 제어 정보는
    복원된 다운믹스 오디오 신호에 대한 렌더링 제어 정보 및 출력 채널 제어 정보인
    복호화 장치.
  56. 제49항에 있어서,
    상기 입력신호 분석수단은
    입력된 오디오 신호로부터 오디오 정보 비트스트림과 부가정보 비트스트림을 분리하는 디멀티플렉싱부;
    상기 디멀티플렉싱부에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호를 복원하는 오디오 복원부; 및
    상기 디멀티플렉싱부에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보를 추출하는 부가정보 해석부
    를 포함하는 복호화 장치.
  57. 서로 상이한 채널로 구성된 다객체 오디오 신호의 복호화 방법에 있어서,
    입력 오디오 신호로부터 다운믹스 오디오 신호를 복원하고, 입력된 오디오 신호에 포함된 부가정보 비트스트림으로부터 헤더정보 및 공간큐 정보를 포함하는 부가정보를 추출하는 입력신호 분석단계;
    입력 오디오 신호에 대한 제어 정보를 이용하여, 상기 입력신호 분석단계로부터 추출된 부가정보를 제어하는 부가정보 제어단계; 및
    제어된 부가정보를 이용하여 상기 복원된 다운믹스 오디오 신호를 다객체 오디오 신호로 출력하는 출력단계
    를 포함하되,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 식별자 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 채널 정보
    를 포함하는 복호화 방법.
  58. 제57항에 있어서,
    상기 채널 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호 각각에 대한 채널 정보; 및
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 채널별 오디오 객체수 정보
    를 포함하는 복호화 방법.
  59. 제57항에 있어서,
    상기 헤더 정보는
    공간큐 기반의 오디오 부호화 정보인 타임 슬럿(time-slot) 정보
    를 더 포함하는
    복호화 방법.
  60. 제57항에 있어서,
    상기 헤더 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 정보
    를 더 포함하는 복호화 방법.
  61. 제60항에 있어서,
    상기 프리셋 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호에 대한 프리셋 모드를 정의하는 프리셋 모드 정보; 및
    상기 프리셋 모드를 지원하기 위해 필요한 정보를 정의하는 프리셋 모드 지원 정보
    를 포함하는 복호화 방법.
  62. 제57항에 있어서,
    상기 공간큐 정보는
    상기 서로 상이한 채널로 구성된 다객체 오디오 신호의 모노 및 스테레오 오디오 객체에 대한 공간큐 정보 이후에 다채널 오디오 객체에 대한 공간큐 정보를 순차적으로 포함하는
    복호화 방법.
  63. 제57항에 있어서,
    상기 제어 정보는
    복원된 다운믹스 오디오 신호에 대한 렌더링 제어 정보 및 출력 채널 제어 정보인
    복호화 방법.
  64. 제57항에 있어서,
    상기 입력신호 분석단계는
    입력된 오디오 신호로부터 오디오 정보 비트스트림과 부가정보 비트스트림을 분리하는 디멀티플렉싱단계;
    상기 디멀티플렉싱단계에 의해 분리된 오디오 정보 비트스트림으로부터 다운믹스 오디오 신호를 복원하는 오디오 복원단계; 및
    상기 디멀티플렉싱단계에 의해 분리된 부가정보 비트스트림으로부터 각 오디오 객체의 공간큐 정보가 포함된 부가정보를 추출하는 부가정보 해석단계
    를 포함하는 복호화 방법.
KR1020070098663A 2006-09-29 2007-10-01 다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법 KR100917843B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060096172 2006-09-29
KR20060096172 2006-09-29

Publications (2)

Publication Number Publication Date
KR20080029940A KR20080029940A (ko) 2008-04-03
KR100917843B1 true KR100917843B1 (ko) 2009-09-18

Family

ID=39230399

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070098663A KR100917843B1 (ko) 2006-09-29 2007-10-01 다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법

Country Status (6)

Country Link
US (4) US8364497B2 (ko)
EP (3) EP2100297A4 (ko)
JP (3) JP5451394B2 (ko)
KR (1) KR100917843B1 (ko)
CN (3) CN101617360B (ko)
WO (1) WO2008039038A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015111970A1 (ko) * 2014-01-23 2015-07-30 재단법인 다차원 스마트 아이티 융합시스템 연구단 레지듀얼 코딩을 이용하는 인코딩 장치 및 방법
WO2016204579A1 (ko) * 2015-06-17 2016-12-22 삼성전자 주식회사 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치
WO2016204581A1 (ko) * 2015-06-17 2016-12-22 삼성전자 주식회사 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009526467A (ja) * 2006-02-09 2009-07-16 エルジー エレクトロニクス インコーポレイティド オブジェクトベースオーディオ信号の符号化及び復号化方法とその装置
CN101529504B (zh) * 2006-10-16 2012-08-22 弗劳恩霍夫应用研究促进协会 多通道参数转换的装置和方法
DE602007013415D1 (de) 2006-10-16 2011-05-05 Dolby Sweden Ab Erweiterte codierung und parameterrepräsentation einer mehrkanaligen heruntergemischten objektcodierung
MX2008012439A (es) * 2006-11-24 2008-10-10 Lg Electronics Inc Metodo de codificacion y decodificacion de señal de audio basada en objetos y aparato para lo mismo.
EP2595149A3 (en) 2006-12-27 2013-11-13 Electronics and Telecommunications Research Institute Apparatus for transcoding downmix signals
US8756066B2 (en) 2007-02-14 2014-06-17 Lg Electronics Inc. Methods and apparatuses for encoding and decoding object-based audio signals
RU2419168C1 (ru) * 2007-03-09 2011-05-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ обработки аудиосигнала и устройство для его осуществления
KR20080082917A (ko) 2007-03-09 2008-09-12 엘지전자 주식회사 오디오 신호 처리 방법 및 이의 장치
US8422688B2 (en) * 2007-09-06 2013-04-16 Lg Electronics Inc. Method and an apparatus of decoding an audio signal
EP2083585B1 (en) 2008-01-23 2010-09-15 LG Electronics Inc. A method and an apparatus for processing an audio signal
WO2009093866A2 (en) 2008-01-23 2009-07-30 Lg Electronics Inc. A method and an apparatus for processing an audio signal
WO2009128662A2 (en) 2008-04-16 2009-10-22 Lg Electronics Inc. A method and an apparatus for processing an audio signal
US8175295B2 (en) 2008-04-16 2012-05-08 Lg Electronics Inc. Method and an apparatus for processing an audio signal
KR101061128B1 (ko) 2008-04-16 2011-08-31 엘지전자 주식회사 오디오 신호 처리 방법 및 이의 장치
CN102007533B (zh) * 2008-04-16 2012-12-12 Lg电子株式会社 用于处理音频信号的方法和装置
KR20090110242A (ko) 2008-04-17 2009-10-21 삼성전자주식회사 오디오 신호를 처리하는 방법 및 장치
KR101724326B1 (ko) * 2008-04-23 2017-04-07 한국전자통신연구원 객체기반 오디오 컨텐츠의 생성/재생 방법 및 객체기반 오디오 서비스를 위한 파일 포맷 구조를 가진 데이터를 기록한 컴퓨터 판독 가능 기록 매체
KR101596504B1 (ko) * 2008-04-23 2016-02-23 한국전자통신연구원 객체기반 오디오 컨텐츠의 생성/재생 방법 및 객체기반 오디오 서비스를 위한 파일 포맷 구조를 가진 데이터를 기록한 컴퓨터 판독 가능 기록 매체
KR102149019B1 (ko) * 2008-04-23 2020-08-28 한국전자통신연구원 객체기반 오디오 컨텐츠의 생성/재생 방법 및 객체기반 오디오 서비스를 위한 파일 포맷 구조를 가진 데이터를 기록한 컴퓨터 판독 가능 기록 매체
EP2146341B1 (en) 2008-07-15 2013-09-11 LG Electronics Inc. A method and an apparatus for processing an audio signal
WO2010008198A2 (en) 2008-07-15 2010-01-21 Lg Electronics Inc. A method and an apparatus for processing an audio signal
KR101108061B1 (ko) * 2008-09-25 2012-01-25 엘지전자 주식회사 신호 처리 방법 및 이의 장치
WO2010036060A2 (en) 2008-09-25 2010-04-01 Lg Electronics Inc. A method and an apparatus for processing a signal
US8346379B2 (en) 2008-09-25 2013-01-01 Lg Electronics Inc. Method and an apparatus for processing a signal
US9412126B2 (en) * 2008-11-06 2016-08-09 At&T Intellectual Property I, Lp System and method for commercializing avatars
KR101129974B1 (ko) * 2008-12-22 2012-03-28 (주)오디즌 객체 기반 오디오 컨텐츠 생성/재생 방법 및 그 장치
US8332229B2 (en) * 2008-12-30 2012-12-11 Stmicroelectronics Asia Pacific Pte. Ltd. Low complexity MPEG encoding for surround sound recordings
WO2010085083A2 (en) * 2009-01-20 2010-07-29 Lg Electronics Inc. An apparatus for processing an audio signal and method thereof
WO2010087627A2 (en) * 2009-01-28 2010-08-05 Lg Electronics Inc. A method and an apparatus for decoding an audio signal
KR101283783B1 (ko) * 2009-06-23 2013-07-08 한국전자통신연구원 고품질 다채널 오디오 부호화 및 복호화 장치
US20100324915A1 (en) * 2009-06-23 2010-12-23 Electronic And Telecommunications Research Institute Encoding and decoding apparatuses for high quality multi-channel audio codec
US9105264B2 (en) * 2009-07-31 2015-08-11 Panasonic Intellectual Property Management Co., Ltd. Coding apparatus and decoding apparatus
US20110054917A1 (en) * 2009-08-28 2011-03-03 Electronics And Telecommunications Research Institute Apparatus and method for structuring bitstream for object-based audio service, and apparatus for encoding the bitstream
BR112012017651B1 (pt) 2010-01-19 2021-01-26 Dolby International Ab método e sistema para gerar um sinal transposto de frequência e/ou estendido no tempo a partir de um sinal de áudio de entrada e meio de armazenamento
WO2011104146A1 (en) * 2010-02-24 2011-09-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for generating an enhanced downmix signal, method for generating an enhanced downmix signal and computer program
CN102222503B (zh) * 2010-04-14 2013-08-28 华为终端有限公司 一种音频信号的混音处理方法、装置及系统
KR101615776B1 (ko) * 2010-05-28 2016-04-28 한국전자통신연구원 상이한 분석 단계를 사용하는 다객체 오디오 신호의 부호화 및 복호화 장치 및 방법
KR20120071072A (ko) 2010-12-22 2012-07-02 한국전자통신연구원 객체 기반 오디오를 제공하는 방송 송신 장치 및 방법, 그리고 방송 재생 장치 및 방법
KR101227932B1 (ko) * 2011-01-14 2013-01-30 전자부품연구원 다채널 멀티트랙 오디오 시스템 및 오디오 처리 방법
KR101748756B1 (ko) 2011-03-18 2017-06-19 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에.베. 오디오 콘텐츠를 표현하는 비트스트림의 프레임들 내의 프레임 요소 배치
CN103050124B (zh) 2011-10-13 2016-03-30 华为终端有限公司 混音方法、装置及系统
EP2751803B1 (en) 2011-11-01 2015-09-16 Koninklijke Philips N.V. Audio object encoding and decoding
CN104641414A (zh) * 2012-07-19 2015-05-20 诺基亚公司 立体声音频信号编码器
CA2881065C (en) * 2012-08-10 2020-03-10 Thorsten Kastner Encoder, decoder, system and method employing a residual concept for parametric audio object coding
CN103812824A (zh) * 2012-11-07 2014-05-21 中兴通讯股份有限公司 音频多编码传输方法及相应装置
EP3270375B1 (en) 2013-05-24 2020-01-15 Dolby International AB Reconstruction of audio scenes from a downmix
CA3017077C (en) 2013-05-24 2021-08-17 Dolby International Ab Coding of audio scenes
TWI615834B (zh) * 2013-05-31 2018-02-21 Sony Corp 編碼裝置及方法、解碼裝置及方法、以及程式
CN104240711B (zh) 2013-06-18 2019-10-11 杜比实验室特许公司 用于生成自适应音频内容的方法、系统和装置
EP2830047A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for low delay object metadata coding
EP2830050A1 (en) * 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for enhanced spatial audio object coding
EP2830045A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Concept for audio encoding and decoding for audio channels and audio objects
KR102243395B1 (ko) * 2013-09-05 2021-04-22 한국전자통신연구원 오디오 부호화 장치 및 방법, 오디오 복호화 장치 및 방법, 오디오 재생 장치
EP3059732B1 (en) * 2013-10-17 2018-10-10 Socionext Inc. Audio decoding device
EP3444815B1 (en) * 2013-11-27 2020-01-08 DTS, Inc. Multiplet-based matrix mixing for high-channel count multichannel audio
KR101511553B1 (ko) * 2014-02-14 2015-04-13 전자부품연구원 다중 단계 오디오 분리 방법 및 이를 적용한 오디오 시스템
EP3143620A1 (en) * 2014-05-15 2017-03-22 Telefonaktiebolaget LM Ericsson (publ) Audio signal classification and coding
CN110970041B (zh) 2014-07-01 2023-10-20 韩国电子通信研究院 处理多信道音频信号的方法和装置
US9774974B2 (en) * 2014-09-24 2017-09-26 Electronics And Telecommunications Research Institute Audio metadata providing apparatus and method, and multichannel audio data playback apparatus and method to support dynamic format conversion
CN106716525B (zh) * 2014-09-25 2020-10-23 杜比实验室特许公司 下混音频信号中的声音对象插入
CN105898667A (zh) * 2014-12-22 2016-08-24 杜比实验室特许公司 从音频内容基于投影提取音频对象
CN106303897A (zh) * 2015-06-01 2017-01-04 杜比实验室特许公司 处理基于对象的音频信号
EP3291582A4 (en) * 2015-06-17 2018-05-09 Samsung Electronics Co., Ltd. Device and method for processing internal channel for low complexity format conversion
CN105070304B (zh) 2015-08-11 2018-09-04 小米科技有限责任公司 实现对象音频录音的方法及装置、电子设备
KR102586089B1 (ko) 2015-11-17 2023-10-10 돌비 레버러토리즈 라이쎈싱 코오포레이션 파라메트릭 바이너럴 출력 시스템 및 방법을 위한 머리추적
RU2722391C2 (ru) * 2015-11-17 2020-05-29 Долби Лэборетериз Лайсенсинг Корпорейшн Система и способ слежения за движением головы для получения параметрического бинаурального выходного сигнала
KR102421292B1 (ko) * 2016-04-21 2022-07-18 한국전자통신연구원 오디오 객체 신호 재생 시스템 및 그 방법
CA3045847C (en) * 2016-11-08 2021-06-15 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Downmixer and method for downmixing at least two channels and multichannel encoder and multichannel decoder
US20200236424A1 (en) * 2017-04-28 2020-07-23 Hewlett-Packard Development Company, L.P. Audio tuning presets selection
GB2578715A (en) 2018-07-20 2020-05-27 Nokia Technologies Oy Controlling audio focus for spatial audio processing
GB2582748A (en) 2019-03-27 2020-10-07 Nokia Technologies Oy Sound field related rendering
KR102471718B1 (ko) * 2019-07-25 2022-11-28 한국전자통신연구원 객체 기반 오디오를 제공하는 방송 송신 장치 및 방법, 그리고 방송 재생 장치 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004036954A1 (en) 2002-10-15 2004-04-29 Electronics And Telecommunications Research Institute Apparatus and method for adapting audio signal according to user's preference

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1995007579A1 (en) 1993-09-10 1995-03-16 Rca Thomson Licensing Corporation Real-time audio packet layer encoder
JP4190742B2 (ja) * 2001-02-09 2008-12-03 ソニー株式会社 信号処理装置及び方法
JP3747806B2 (ja) 2001-06-11 2006-02-22 ソニー株式会社 データ処理装置及びデータ処理方法
JP2003032800A (ja) 2001-07-17 2003-01-31 Nippon Hoso Kyokai <Nhk> スピーカ接続回路装置
JP2003066994A (ja) * 2001-08-27 2003-03-05 Canon Inc データ復号装置及びデータ復号方法、並びにプログラム、記憶媒体
EP1341160A1 (en) 2002-03-01 2003-09-03 Deutsche Thomson-Brandt Gmbh Method and apparatus for encoding and for decoding a digital information signal
KR100923297B1 (ko) * 2002-12-14 2009-10-23 삼성전자주식회사 스테레오 오디오 부호화 방법, 그 장치, 복호화 방법 및그 장치
WO2005013491A2 (de) * 2003-07-21 2005-02-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audiodateiformatumwandlung
DE10344638A1 (de) * 2003-08-04 2005-03-10 Fraunhofer Ges Forschung Vorrichtung und Verfahren zum Erzeugen, Speichern oder Bearbeiten einer Audiodarstellung einer Audioszene
US7805313B2 (en) * 2004-03-04 2010-09-28 Agere Systems Inc. Frequency-based coding of channels in parametric multi-channel coding systems
RU2382419C2 (ru) 2004-04-05 2010-02-20 Конинклейке Филипс Электроникс Н.В. Многоканальный кодер
SE0400998D0 (sv) * 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
WO2006003891A1 (ja) * 2004-07-02 2006-01-12 Matsushita Electric Industrial Co., Ltd. 音声信号復号化装置及び音声信号符号化装置
US7508947B2 (en) * 2004-08-03 2009-03-24 Dolby Laboratories Licensing Corporation Method for combining audio signals using auditory scene analysis
JP3915804B2 (ja) * 2004-08-26 2007-05-16 ヤマハ株式会社 オーディオ再生装置
DE102004043521A1 (de) * 2004-09-08 2006-03-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals oder eines Parameterdatensatzes
SE0402652D0 (sv) * 2004-11-02 2004-11-02 Coding Tech Ab Methods for improved performance of prediction based multi- channel reconstruction
WO2006060279A1 (en) * 2004-11-30 2006-06-08 Agere Systems Inc. Parametric coding of spatial audio with object-based side information
DE102005008366A1 (de) * 2005-02-23 2006-08-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Ansteuern einer Wellenfeldsynthese-Renderer-Einrichtung mit Audioobjekten
US8214221B2 (en) * 2005-06-30 2012-07-03 Lg Electronics Inc. Method and apparatus for decoding an audio signal and identifying information included in the audio signal
JP5173811B2 (ja) * 2005-08-30 2013-04-03 エルジー エレクトロニクス インコーポレイティド オーディオ信号デコーディング方法及びその装置
US7788107B2 (en) * 2005-08-30 2010-08-31 Lg Electronics Inc. Method for decoding an audio signal
WO2007043844A1 (en) * 2005-10-13 2007-04-19 Lg Electronics Inc. Method and apparatus for processing a signal
CN100561576C (zh) * 2005-10-25 2009-11-18 芯晟(北京)科技有限公司 一种基于量化信号域的立体声及多声道编解码方法与系统
JP4944902B2 (ja) * 2006-01-09 2012-06-06 ノキア コーポレイション バイノーラルオーディオ信号の復号制御
JP2009526467A (ja) 2006-02-09 2009-07-16 エルジー エレクトロニクス インコーポレイティド オブジェクトベースオーディオ信号の符号化及び復号化方法とその装置
DE602007013415D1 (de) * 2006-10-16 2011-05-05 Dolby Sweden Ab Erweiterte codierung und parameterrepräsentation einer mehrkanaligen heruntergemischten objektcodierung
KR20080082917A (ko) 2007-03-09 2008-09-12 엘지전자 주식회사 오디오 신호 처리 방법 및 이의 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004036954A1 (en) 2002-10-15 2004-04-29 Electronics And Telecommunications Research Institute Apparatus and method for adapting audio signal according to user's preference

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BREEBAART et al 'MPEG Spatial Audio Coding / MPEG Surround Overview and Current Status' In Proc 119th AES Convention New York, October 2005
FALLER, CHRISTOF Parametric coding of spatial audio Lausanne EPFL, 2004
VAANANEN, RIITTA 'User Interaction and Authoring of 3D Sound Scenes in the Carrouso EU project' In Proc 114th AES Convention Amsterdam, March 2003

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015111970A1 (ko) * 2014-01-23 2015-07-30 재단법인 다차원 스마트 아이티 융합시스템 연구단 레지듀얼 코딩을 이용하는 인코딩 장치 및 방법
WO2016204579A1 (ko) * 2015-06-17 2016-12-22 삼성전자 주식회사 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치
WO2016204581A1 (ko) * 2015-06-17 2016-12-22 삼성전자 주식회사 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치
US10490197B2 (en) 2015-06-17 2019-11-26 Samsung Electronics Co., Ltd. Method and device for processing internal channels for low complexity format conversion
US10497379B2 (en) 2015-06-17 2019-12-03 Samsung Electronics Co., Ltd. Method and device for processing internal channels for low complexity format conversion
US11404068B2 (en) 2015-06-17 2022-08-02 Samsung Electronics Co., Ltd. Method and device for processing internal channels for low complexity format conversion
US11810583B2 (en) 2015-06-17 2023-11-07 Samsung Electronics Co., Ltd. Method and device for processing internal channels for low complexity format conversion

Also Published As

Publication number Publication date
JP5451394B2 (ja) 2014-03-26
KR20080029940A (ko) 2008-04-03
US9311919B2 (en) 2016-04-12
JP2010521002A (ja) 2010-06-17
JP5453514B2 (ja) 2014-03-26
WO2008039038A1 (en) 2008-04-03
US9257124B2 (en) 2016-02-09
CN102768835A (zh) 2012-11-07
CN101617360B (zh) 2012-08-22
US8670989B2 (en) 2014-03-11
US20130110523A1 (en) 2013-05-02
US20140095179A1 (en) 2014-04-03
EP2575129A1 (en) 2013-04-03
JP5453515B2 (ja) 2014-03-26
US20140095178A1 (en) 2014-04-03
JP2013077023A (ja) 2013-04-25
EP2575130A1 (en) 2013-04-03
CN101617360A (zh) 2009-12-30
CN102768836A (zh) 2012-11-07
EP2100297A1 (en) 2009-09-16
JP2013054395A (ja) 2013-03-21
US20100174548A1 (en) 2010-07-08
CN102768835B (zh) 2014-11-05
CN102768836B (zh) 2014-11-05
US8364497B2 (en) 2013-01-29
EP2100297A4 (en) 2011-07-27

Similar Documents

Publication Publication Date Title
KR100917843B1 (ko) 다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법
US10002616B2 (en) Audio decoding device
KR101086347B1 (ko) 부가정보 비트스트림 변환을 포함하는 다양한 채널로구성된 다객체 오디오 신호의 부호화 및 복호화 장치 및방법
KR100946688B1 (ko) 멀티 채널 오디오 디코더, 멀티 채널 인코더, 오디오 신호 처리 방법 및 상기 처리 방법을 수행하는 프로그램을 기록한 기록매체
JP4616349B2 (ja) ステレオ互換性のあるマルチチャネルオーディオ符号化
KR20090104674A (ko) 다객체 오디오 신호의 부가정보 비트스트림 생성 방법 및 장치
KR20080089308A (ko) 다채널로 구성된 다객체 오디오 신호의 인코딩 및 디코딩장치 및 방법
JP2010515099A5 (ko)
KR20080086552A (ko) 오디오 신호의 디코딩 방법 및 장치
KR101615776B1 (ko) 상이한 분석 단계를 사용하는 다객체 오디오 신호의 부호화 및 복호화 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120831

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20130829

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140827

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150827

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160826

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20170828

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20190826

Year of fee payment: 11