KR20140017338A - 오디오 신호 처리 장치 및 방법 - Google Patents

오디오 신호 처리 장치 및 방법 Download PDF

Info

Publication number
KR20140017338A
KR20140017338A KR1020120084207A KR20120084207A KR20140017338A KR 20140017338 A KR20140017338 A KR 20140017338A KR 1020120084207 A KR1020120084207 A KR 1020120084207A KR 20120084207 A KR20120084207 A KR 20120084207A KR 20140017338 A KR20140017338 A KR 20140017338A
Authority
KR
South Korea
Prior art keywords
audio signal
transmission
gain value
transmission audio
information
Prior art date
Application number
KR1020120084207A
Other languages
English (en)
Inventor
오현오
Original Assignee
인텔렉추얼디스커버리 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔렉추얼디스커버리 주식회사 filed Critical 인텔렉추얼디스커버리 주식회사
Priority to KR1020120084207A priority Critical patent/KR20140017338A/ko
Priority to US14/414,902 priority patent/US20150213790A1/en
Priority to PCT/KR2013/006730 priority patent/WO2014021587A1/ko
Priority to CN201380039780.4A priority patent/CN104541326A/zh
Priority to JP2015523021A priority patent/JP2015528925A/ja
Priority to EP13826484.1A priority patent/EP2863387A4/en
Publication of KR20140017338A publication Critical patent/KR20140017338A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/1752—Masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0264—Noise filtering characterised by the type of parameter measurement, e.g. correlation techniques, zero crossing techniques or predictive techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages

Abstract

본 발명은 오디오 신호 처리 방법 및 장치에 관한 것으로서, 보다 구체적으로, 디지털 매체 또는 방송, 통신 신호를 통해 수신한 두 채널 이상의 오디오 신호에 대해 확장된 형태의 합과 차신호를 이용하여 오디오 신호를 디코딩하는 방법 및 장치에 관한 것이다.
본 발명에 따르면 적어도 두 채널의 오디오신호를 부호화하는 방법에 있어서, 제1오디오신호 및 제2오디오신호를 입력받는 단계, 상기 제1오디오신호와 상기 제2오디오신호에 대한 상관도를 구하는 단계, 상기 상관도가 기준값 이상인지 여부를 판단하는 단계, 상기 판단 결과가 참인 경우, 상기 제1오디오신호와 상기 제2오디오신호를 이용하여 제1게인값과 제2게인값을 산출하는 단계, 및 상기 제1오디오신호, 제2오디오신호, 제1게인값, 제2게입값을 이용하여 제1전송오디오신호와 제2전송오디오신호를 생성하는 단계를 포함하고, 상기 제1전송오디오신호와 상기 제2전송오디오신호는 지각 부호화 기법에 의해 부호화하는 오디오 신호 처리 방법이 제공될 수 있다.

Description

오디오 신호 처리 장치 및 방법 {APPARATUS AND METHOD FOR AUDIO SIGNAL PROCESSING}
본 발명은 오디오 신호 처리 방법 및 장치에 관한 것으로서, 보다 구체적으로, 디지털 매체 또는 방송, 통신 신호를 통해 수신한 두 채널 이상의 오디오 신호에 대해 확장된 형태의 합과 차신호를 이용하여 오디오 신호를 디코딩하는 방법 및 장치에 관한 것이다.
종래의 고음질 오디오 부호화 방법은 심리음향모델을 이용하여 인간의 청각적 마스킹에 의해 들리지 않는 신호대역을 찾아내고, 부호화 과정에서 발생하는 양자화 잡음을 마스킹 대역에 집중하도록 하여 청취 시 원 오디오 신호와 동일한 음질이 가능하면서도 높은 압축을 가능하게 하는 방법을 사용한다. 이와 같은 고음질 오디오 부호화 방법을 지각 부호화(Pereptual Coding)라고도 한다.
MP3 (MPEG-1/2 Layer-III), AAC (Advanced Audio Coding) 등은 대표적인 지각 부호화 방법으로 스테레오 오디오 신호에 대한 효과적인 압축을 위해 조인트 스테레오 부호화 방법의 하나인 합차 부호화 (Mid-Side Stereo Coding)를 사용하기도 한다. 조인트 스테레오 부호화 하지 않고, 독립적으로 두 채널을 따로 부호화 하는 경우를 듀얼 모노(Dual Mono)라고 부른다.
종래의 듀얼 모노 부호화 및 합차 부호화 방법으로는 마스킹 대상이 되는 양자화 잡음이 오디오 신호와 공간적으로 완전히 일치하지 않아 마스킹 현상을 최대로 이용하지 못하는 문제가 발생한다. 즉, 지각 부호화의 압축 효율이 제한적인 경우가 발생한다. 따라서, 마스킹 현상을 최대로 이용하기 위해서 부호화의 대상이 되는 오디오 신호를 변형하는 과정이 필요하다.
본 발명의 일 양상에 따르면 적어도 두 채널의 오디오신호를 부호화하는 방법에 있어서, 제1오디오신호 및 제2오디오신호를 입력받는 단계, 상기 제1오디오신호와 상기 제2오디오신호에 대한 상관도를 구하는 단계, 상기 상관도가 기준값 이상인지 여부를 판단하는 단계, 상기 판단 결과가 참인 경우, 상기 제1오디오신호와 상기 제2오디오신호를 이용하여 제1게인값과 제2게인값을 산출하는 단계, 및 상기 제1오디오신호, 제2오디오신호, 제1게인값, 제2게입값을 이용하여 제1전송오디오신호와 제2전송오디오신호를 생성하는 단계를 포함하고, 상기 제1전송오디오신호와 상기 제2전송오디오신호는 지각 부호화 기법에 의해 부호화하는 오디오 신호 처리 방법이 제공될 수 있다.
본 발명의 다른 양상에 따르면 제1전송오디오신호, 제2전송오디오신호, 확장합차행렬사용정보를 수신하는 단계, 상기 확장합차행렬사용정보에 따라 채널게인정보의 수신 여부가 결정되고, 상기 채널게인정보가 수신된 경우, 상기 채널게인정보를 이용하여 제1게인값 및 제2게인값을 산출하는 단계, 및 상기 제1전송오디오신호, 상기 제2전송오디오신호, 상기 제1게인값, 상기 제2게인값을 이용하여 제1출력오디오신호 및 제2출력오디오신호를 생성하는 단계를 포함하고, 상기 채널게인정보가 수신되지 않은 경우, 상기 제1출력오디오신호는 상기 제1전송오디오신호와 같고 상기 제2출력오디오신호는 상기 제1전송오디오신호와 같은 오디오 신호 처리 방법이 제공될 수 있다.
본 발명에 의하면, 음원의 공간상 위치에 관계없이 심리음향 모델에 의한 마스킹을 최대한 이용할 수 있어서 고음질 오디오 부호화의 음질 향상을 기대할 수 있다.
본 발명의 효과가 상술한 효과들로 제한되는 것은 아니며, 언급되지 아니한 효과들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.
도 1은 종래의 합차 부호화 방법을 설명하기 위해 듀얼 모노 부호화 시 문제점을 설명한 도면
도 2는 종래의 합차 부호화 방법을 설명하기 위한 도면
도 3은 종래의 듀얼 모노 부호화 방법으로 해결되지 않는 경우의 예를 설명하기 위한 도면
도 4은 종래의 합차 부호화 방법으로 해결되지 않는 경우의 예를 설명하기 위한 도면
도 5는 본 발명에 따른 확장 합차 부호화 방법이 적용된 오디오 부호화기의 예시적인 구성도
도 6은 본 발명에 따른 확장 합차행렬 처리과정의 예시적인 구성도
도 7은 본 발명에 따른 확장 합차행렬 처리의 효과로 양자화 잡음이 마스킹되는 것을 설명하기 위한 예시도
도 8은 본 발명에 따른 확장 합차행렬이 사용되지 않는 경우의 예시적인 구성도
도 9는 본 발명에 따른 확장 합차 부호화 과정의 예시적인 흐름도
도 10은 본 발명에 따른 확장 합차 복호화 방법이 적용된 오디오 복호화기의 예시적인 구성도
도 11은 본 발명에 따른 확장 합차역행렬 처리과정의 예시적인 구성도
도 12은 본 발명에 따른 확장 합차역행렬이 사용되지 않는 경우의 예시적인 구성도
도 13는 본 발명에 따른 확장 합차역행렬 처리과정의 예시적인 흐름도
본 발명의 일 양상에 따르면 적어도 두 채널의 오디오신호를 부호화하는 방법에 있어서, 제1오디오신호 및 제2오디오신호를 입력받는 단계, 상기 제1오디오신호와 상기 제2오디오신호에 대한 상관도를 구하는 단계, 상기 상관도가 기준값 이상인지 여부를 판단하는 단계, 상기 판단 결과가 참인 경우, 상기 제1오디오신호와 상기 제2오디오신호를 이용하여 제1게인값과 제2게인값을 산출하는 단계, 및 상기 제1오디오신호, 제2오디오신호, 제1게인값, 제2게입값을 이용하여 제1전송오디오신호와 제2전송오디오신호를 생성하는 단계를 포함하고, 상기 제1전송오디오신호와 상기 제2전송오디오신호는 지각 부호화 기법에 의해 부호화하는 오디오 신호 처리 방법이 제공될 수 있다.
본 발명에 있어서, 상기 오디오 신호 처리 방법에서 상기 지각 부호화 기법은 상기 제1전송오디오신호에 대한 제1마스킹임계치를 산출하고, 상기 제2전송오디오신호에 대한 제2마스킹임계치를 산출하는 단계를 더 포함할 수 있다.
본 발명에 있어서, 상기 오디오 신호 처리 방법은 상기 제1마스킹임계치를 이용하여 상기 제1전송오디오신호를 지각 부호화하는 오디오 신호 처리 방법이 더 제공될 수 있다.
본 발명에 있어서, 상기 오디오 신호처리 방법은 상기 상관도가 상기 기준값 미만인 경우, 제1전송오디오신호는 제1오디오신호와 같고, 제2전송오디오신호는 제2오디오신호와 같도록 생성하는 단계를 더 포함할 수 있다.
본 발명에 있어서, 상기 오디오 신호 처리 방법은 상기 제1게인값과 상기 제2게인값은 채널레벨차 값을 이용하여 산출된다.
여기서, 상기 제1전송오디오신호는 적어도 상기 제1오디오신호 및 상기 제2오디오신호보다 주음원을 더 많이 포함한다.
또한, 상기 제2전송오디오신호는 적어도 상기 제1오디오신호 및 상기 제2오디오신호보다 주음원을 더 적게 포함한다.
본 발명의 다른 양상에 따르면 제1전송오디오신호, 제2전송오디오신호, 확장합차행렬사용정보를 수신하는 단계, 상기 확장합차행렬사용정보에 따라 채널게인정보의 수신 여부가 결정되고, 상기 채널게인정보가 수신된 경우, 상기 채널게인정보를 이용하여 제1게인값 및 제2게인값을 산출하는 단계, 및 상기 제1전송오디오신호, 상기 제2전송오디오신호, 상기 제1게인값, 상기 제2게인값을 이용하여 제1출력오디오신호 및 제2출력오디오신호를 생성하는 단계를 포함하고, 상기 채널게인정보가 수신되지 않은 경우, 상기 제1출력오디오신호는 상기 제1전송오디오신호와 같고 상기 제2출력오디오신호는 상기 제1전송오디오신호와 같은 오디오 신호 처리 방법이 제공될 수 있다.
여기서, 상기 오디오 신호 처리 방법은 상기 확장합차행렬사용정보가 1인 경우 채널게인정보를 수신한다.
또한, 상기 오디오 신호 처리 방법은 상기 채널게인정보가 수신된 경우 제1출력오디오신호는 제1전송오디오신호와 제2전송오디오신호의 합에 제1게인값을 곱하여 얻고, 제2출력오디오신호는 제1전송오디오신호와 제2전송오디오신호의 차에 제2게인값을 곱하여 얻는다.
또한, 상기 오디오 신호 처리 방법에 있어서 상기 제1전송오디오신호와 제2전송오디오신호는 지각 부호화된 신호이다.
여기서, 상기 제1게인값은 채널게인정보의 제곱에 상수 1을 더한 값에 루트근한 값에 비례하고, 상기 제2게인값은 채널게인정보의 제곱에 상수 1을 더한 값에 루트근한 값을 채널게인정보로 나눈 값에 비례한다.
여기서, 상기 제1출력오디오신호와 상기 제2출력오디오신호는 쌍으로 이루어진 두 스피커에 각각 출력되는 오디오 신호이다.

이하 첨부된 도면을 참조로 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
본 발명에서 다음 용어는 다음과 같은 기준으로 해석될 수 있고, 기재되지 않은 용어라도 하기 취지에 따라 해석될 수 있다. 코딩은 경우에 따라 인코딩 또는 디코딩으로 해석될 수 있고, 정보(information)는 값(values), 파라미터(parameter), 계수(coefficients), 성분(elements) 등을 모두 아우르는 용어로서, 경우에 따라 의미는 달리 해석될 수 있는 바, 그러나 본 발명은 이에 한정되지 아니한다.
좌,우 두 개의 스피커를 이용한 오디오 재생 방법인 스테레오 오디오를 부호화하기 위한 방법 가운데 합차부호화 (Mid-Side Stereo Coding) 방법이 있는데, 이는 특히 심리음향 실험에 근거하여 알려져 있는 BMLD (Binaural Masking Level Difference) 현상을 극복하고자 고안되었다. 즉, 심리음향에서의 마스킹 현상은 마스킹을 발생시키는 마스커(Masker)와 마스킹이 되는 마스키(Maskee)가 공간적으로 동일한 방향에 있을 때 가능하다는 것이 BMLD이다. 스테레오 오디오 신호의 두 채널 오디오 신호간의 상관성이 매우 높고, 그 크기가 같은 경우 그 소리에 대한 상(음상)이 두 스피커 사이 중앙에 맺히게 되며, 상관성이 없는 경우 각 스피커에서 독립된 소리가 나와 그 상이 각각 스피커에 맺히게된다. 만일 상관성이 최대인 입력 신호에 대해 각 채널을 독립적으로 부호화(dual mono)할 경우 이 때 발생하는 각 채널에서의 양자화 잡음은 서로 상관성이 없으므로, 오디오 신호는 중앙에, 양자화 잡음은 그 상이 각 스피커에 따로 맺히게 될 것이다. 따라서, 마스키가 되야하는 양자화 잡음이 공간적 불일치로 인해 마스킹되지 않아, 결국 사람에게 왜곡으로 들리는 문제가 발생한다. 합차부호화는 이와 같은 문제를 해결하고자, 두 채널 신호를 더한 신호 (Mid 신호)와 뺀 신호 (Difference)를 생성한 후 이를 이용하여 심리음향 모델을 수행하고, 이를 이용하여 양자화하여, 발생한 양자화 잡음이 음상과 같은 위치에 있도록 한다. 두 채널 오디오 신호간의 상관성이 없는 독립적인 신호인 경우는 기존대로 듀얼 모노로 부호화하는 것이 바람직하므로, 이와 같은 MS 부호화 방법은 입력된 신호의 특성에 따라 가변적으로 적용 가능하다. 도 1과 도 2는 듀얼 모노 부호화 하는 경우와 합차 부호화를 하는 경우에 신호와 양자화 잡음의 공간상 위치를 예시한다.
도 3 및 도 4에 예시한 것과 같이 입력 스테레오 오디오 신호의 상관도는 높으나 좌, 우 채널의 신호 레벨이 다른 경우 사운드 공간상에 음원(110)의 위치가 중앙이나 좌,우 측면의 스피커가 아닌 임의 위치에 존재하게 된다. 도 3, 도 4의 예시에서는 좌, 우 채널의 레벨차이가 10dB (좌측이 10dB 큰) 경우를 예시하였다. 이와 같은 경우는 는 종래의 듀얼 모노뿐 아니라 합차 부호화 방법을 이용하더라도 마스커가 되는 소스 S의 위치와 마스키인 양자화 잡음 N1 (120a, 130a), N2 (120b, 130b)의 위치가 일치하기 어려운 문제가 발생한다. 본 발명은 이와 같은 문제를 해결하기위해 확장된 형태의 합차 부호화 방법을 갖는다.
도 5는 본 발명에 따른 확장 합차 부호화 방법이 적용된 오디오 부호화기(500)의 일 실시예를 나타낸다. 도 5을 참조하면, 두 채널의 오디오 신호 CH1, CH2은 상관도 산출부(510), 게인정보 산출부(520), 확장 합차행렬 처리부(530)에 각각 입력된다. 이때, CH1, CH2는 스테레오 오디오 신호의 일정 시간 구간에 해당하는 오디오 블럭 데이터일 수 있으며, 혹은 오디오 블럭에 대해 필터뱅크 변환된 주파수 영역의 일부 혹은 전부인 신호일 수 있다. 또한 본 발명에서는 독립된 하나의 오디오 신호를 채널로 표현하는데, 여기서 채널은 하나의 라우드 스피커를 통해 재생되는 한 신호인 경우이다. 그러나, 채널이라 표현하여 이와 같은 신호에만 한정되는 것은 아니고, 독립된 하나의 오디오 객체 신호나 복수의 오디오 신호가 묶여서 표현된 하나의 신호 등을 포함할 수 있다.
상관도 산출부(510)는 입력 CH1, CH2의 해당 구간에서 상관도가 얼마나 되는지를 계산하는 과정으로 CH1에 해당하는 입력신호를 x, CH2에 해당하는 입력신호를 y라고 할 때, 본 발명에서는 일 실시예로써 다음과 같은 식으로 정의된 ICC 값을 사용한다.
Figure pat00001
상기 수학식 1과 같이 ICC를 이용하는 방법 이외에도 상관도를 구하는 여러가지 방법이 있으며, 본 발명은 이에 한정되지 않는다. 또한 상관도 이외에도 본 발명에 따른 확장 합차행렬 처리를 수행할 지 여부를 결정할 수 있는 다른 방법이 존재할 수 있으며, 이에 한정되지 않는다.
게인정보 산출부(520)는 입력 CH1, CH2를 이용하여 본 발명에 따른 확장 합차행렬 처리에 사용될 게인 g1과 g2를 산출한다. 확장 합차행렬 게인을 얻기위해 필요한 채널레벨차 c는 다음과 같이 구한다.
Figure pat00002
즉, 채널레벨차 계수 c는 CH1과 CH2의 신호 크기(파워 혹은 에너지)의 비율이다. 채널레벨차 c를 이용하여 확장 합차행렬 게인 g1, g2를 계산하는 일 실시예는 다음과 같다.
Figure pat00003
수학식 3에서 게인 g1, g2는 입력 신호의 에너지를 보상하기 위한 추가적인 게인이 더 곱해질 수 있다. 확장 합차행렬 처리부(530)는 입력 CH1, CH2 신호를 받아서 본 발명에 따른 행렬 연산을 통해 확장 합차 신호 TCH1과 TCH2를 생성한다. 도 6은 확장 합차행렬 처리부(530)에서 처리되는 처리 과정을 나타내며, 이를 수식으로 나타내면 다음과 같다.
Figure pat00004
따라서 확장 합차행렬 처리부(530)는 입력신호 CH1, CH2 와 함께 상관도 정보와 확장 합차행렬 게인 정보를 필요로 하며, 확장 합차행렬 처리(600)의 특징은 도 3의 예시에서처럼 두 채널 사이의 사운드 장면에서 주요 음원(110)이 위치한 지점 중심으로 확장 합차 신호 TCH1, TCH2에 의한 상이 위치하도록 변환하는 역할을 수행한다. 따라서, 이렇게 변환된 신호 TCH1와 TCH2에 대한 지각 부호화의 결과로 발생한 양자화 잡음은 도 7의 N1(140a), N2(140b)와 같이 음원 S(110)에 의해 공간적으로도 마스킹이 잘 되어 결국 음질 왜곡이 줄어드는 효과를 얻게 한다.
한편, 확장 합차행렬 처리부(530)에서 확장 합차행렬 처리(600)를 수행할 지 여부는 상기 수학식 1을 통해 구한 상관도 ICC값과 채널레벨차 계수 등을 참조하여 결정한다. ICC가 주어진 상수 thr 이하이면, 확장 합차 부호화를 위한 처리를 수행하지 않고 종래와 같이 각 채널을 독립적으로 부호화 한다. 즉, 도 8 및 다음의 수학식 5와 같이 확장 합차행렬 처리부(530)는 입력 신호를 바로 출력한다.
Figure pat00005
도 9는 확장 합차 부호화 과정의 일 실시예에 따른 흐름도를 나타낸다.
심리음향모델부(550)은 확장 합차행렬 처리부(530)의 출력 TCH1과 TCH2를 입력받아서 각 채널별로 심리음향모델을 수행하여 각 채널별 마스킹 임계치를 출력한다. 예를 들어, 해당 분석 구간의 채널 신호에서 각 신호 성분 대비 마스킹되는 크기의 비율인 SMR (Signal-to-Mask Ratio)값을 산출한다. 따라서, 본 발명에 따른 확장 합차행렬 처리부를 수행함으로 인해, SMR을 산출하는 대상 신호가 달라진다.
양자화부(560)는 확장 합차 처리부(530)의 출력 TCH1과 TCH2를 입력받고, 심리음향모델부(560)를 통해 마스킹 임계치 SMR을 입력받아서 양자화를 수행한다. 이때 신호에 대한 양자화는 SMR에 근거하여 발생하는 양자화 잡음이 신호에 의해 마스킹되어 재생시 청자의 귀에 들리지 않도록 양자화 크기를 결정하는 과정을 포함한다. 이는 종래의 AAC 같은 지각 부호화 방법에서 사용하는 방법과 유사하다.
엔트로피 부호화부(570)는 양자화된 신호 채널신호(qTCH1와 qTCH2)에 대해 허프만 부호화(Huffman Coding)이나 대수 부호화(Arithmatic Coding)과 같은 엔트로피 부호화를 통해 추가적인 데이터 압축을 수행한다. 구현 방법에 따라 양자화부(560)와 엔트로피 부호화(570)는 하나의 루프 안에서 반복적으로 수행하며 최적화될 수 있다.
한편, 상관도 산출부(510)의 출력인 상관도 값(ICC)과 게인정보 산출부(520)의 출력값인 채널레벨차 계수는 확장 합차 부가정보 부호화부(540)의 입력으로 들어가서 부호화되어 복호화부에 전달된다. 예를들어, 상관도 값에 따라 확장 합차행렬 연산의 수행여부를 표시한 확장합차사용정보 ems_flag와 채널레벨차 계수가 부호화되어 전송된다. 확장합차행렬 연산이 사용된 경우는 ems_flag=1로 부호화되고, 사용되지 않은 경우는 ems_flag=0 으로 부호화된다.
한편 부호화기와 복호화기에서 사용되는 게인값간의 오차를 최소화하기 위해 부호화기에서도 체널레벨차 계수와 게인 g1, g2 등은 전송을 위해 양자화된 값을 사용하는 것이 바람직하다.
먹스(MUX)부(580)에서는 확장 합차 부가정보 부호화부(540)의 출력, 엔트로피 부호화부(570)의 출력, 심리음향모델부(550)의 출력 등을 취합하여 출력 비트열로 생성한다.
도 10는 본 발명에 따른 확장 합차 부호화 방법으로 부호화된 비트열을 복호화기 위한 오디오 복호화기(1000)의 일 실시예를 나타낸다. 도 10을 참조하면, 오디오 복호화 과정은 부호화 과정의 역과정으로 볼 수 있는데, 먼저 전송된 비트열은 디먹스(DEMUX)부(1010)를 통해 각 복호화 단계에 필요한 정보들로 분리한다.
엔트로피 복호화부(1030)은 엔트로피 부호화된 데이터로부터 양자화되어 전송된 각 채널 신호 qTCH1, qTCH2로 복원하며, 복원된 신호는 역양자화부(1040)에서 역양자화를 통해 확장 합차역행렬 처리부(1050)로 보낸다.
역게인정보 산출부(1020)는 전송된 채널레벨차 계수 c를 이용하여 확장 합차역행렬 처리에 사용할 역행렬 게인값 h1, h2를 다음 수학식과 같이 계산한다.
Figure pat00006
앞서 수학식 3에서 게인 g1, g2에 에너지 보상 게인을 포함한 경우, 수학식 6에서도 이를 반영하기 위한 별도의 게인을 추가로 곱할 수 있다.
확장 합차역행렬 처리부(1050)는 qTCH1, qTCH2와 앞서 계산한 h1,h2를 입력받아 qCH1, qCH2를 출력하는 연산을 수행한다. 확장 합차역행렬 처리부(1050)에서 수행되는 역행렬 연산 과정은 도 11 및 도 12에 나타난 것과 같은 처리(1100, 1200) 가운데 하나로 표현할 수 있다. 이때 비트열로부터 얻을 수 있는 확장합차사용정보 ems_flag에 따라 1100과 같은 역행렬처리를 수행할 지 아니면 1200과 같이 역행렬 처리하지 않고 바이패스(bypass)할 지 결정한다. 도 10에는 표현이 안되었지만, 바이패스하는 경우는 계수 c도 전송되지 않으며, 따라서 역게인정보 산출부도 동작하지 않는다.
다음 수학식은 1100의 역행렬처리 과정을 수식으로 나타내었다.
Figure pat00007
확장 합차역행렬 처리부(1050)의 출력 qCH1과 qCH2는 시간영역 신호인 경우 바로 출력 오디오 신호가 되어 스피커로 연결되어 재생될 수 있고, 도 10에서 생략되었지만, 필터뱅크를 통해 주파수 영역에서 부호화된 경우 역필터뱅크 (e.g. IMDCT)를 수행하여 최종 오디오 신호로 출력될 수 있다.
도 13는 본 발명에 따른 확장 합차역행렬 처리과정의 일 실시예에 따른 흐름도를 나타낸다.
이상의 과정을 통해 두 채널의 입력 신호를 대상으로 하는 오디오 신호의 부호화 및 복호화 방법을 실시예로 본 발명에 따른 확장 합차행렬 처리 방법을 설명하였으나 동일한 발명의 사상에 근거해서 두 채널 이상의 입력 신호에 대해서도 적용이 가능하다. 예를 들어, 3차원 공간상에 세 개의 스피커 출력 신호 사이에 음원을 위치하는 방법인 VBAP(Vector Based Amplitude Panning)으로 렌더링된 채널 신호가 입력되는 경우, 이를 고려하여 세 채널 입력 신호를 각 채널별로 독립 부호화 하는 대신 유사한 합차 기술을 이용하여 각 채널 신호에 의한 마스킹 임계치 및 그에 따르는 양자화 잡음이 공간적으로 신호에 의해 보다 잘 마스킹되도록 부호화 하는 것이 가능하다.
또한, 본 발명에 따른 확장 합차행렬 처리는 오디오 신호의 채널별 부호화 복호화 과정 이외에도 파라메트릭 부호화에서도 적용 가능하다. 즉, 스테레오 신호를 모노로 다운믹스하고, 별도 부가 정보를 통해 스테레오 신호를 생성하는 방법의 부호화를 통칭하는 파라메트릭 스테레오(Parametric Stereo) 기법의 경우, 일반적으로 수행하는 다운믹스 대신, 본 발명에서 제안한 방법과 같이 게인값을 생성해서 다운믹스하면, 이를 부호화하는 지각 부호화에서의 마스킹이 보다 효과적으로 동작할 수 있어서 전체적인 음질이 향상되는 효과를 기대할 수 있다.
또한, 오디오 부호화 이외에도 오디오 신호를 다운믹스하는 신호 처리 과정이나, 오디오 이외에 이미지나 비디오 신호, 생체 정보 신호와 같은 경우를 대상해서도 2개 이상으로써 유사성을 가지고 있는 신호를 전송해야하는 경우에 확장하여 적용 가능할 수 있다.
도 14는 본 발명의 일 실시예에 따른 오디오 신호 처리 장치가 구현된 제품들의 관계를 보여주는 도면이다. 우선 도 14를 참조하면, 유무선 통신부(310)는 유무선 통신 방식을 통해서 비트스트림을 수신한다. 구체적으로 유무선 통신부(310)는 유선통신부(310A), 적외선통신부(310B), 블루투스부(310C), 무선랜통신부(310D) 중 하나 이상을 포함할 수 있다.
사용자 인증부는(320)는 사용자 정보를 입력 받아서 사용자 인증을 수행하는 것으로서 지문인식부(320A), 홍채인식부(320B), 얼굴인식부(320C), 및 음성인식부(320D) 중 하나 이상을 포함할 수 있는데, 각각 지문, 홍채정보, 얼굴 윤곽 정보, 음성 정보를 입력받아서, 사용자 정보로 변환하고, 사용자 정보 및 기존 등록되어 있는 사용자 데이터와의 일치여부를 판단하여 사용자 인증을 수행할 수 있다.
입력부(330)는 사용자가 여러 종류의 명령을 입력하기 위한 입력장치로서, 키패드부(330A), 터치패드부(330B), 리모컨부(330C) 중 하나 이상을 포함할 수 있지만, 본 발명은 이에 한정되지 아니한다.
신호 코딩 유닛(340)는 유무선 통신부(310)를 통해 수신된 오디오 신호 및/또는 비디오 신호에 대해서 인코딩 또는 디코딩을 수행하고, 시간 도메인의 오디오 신호를 출력한다. 오디오 신호 처리 장치(345)를 포함하는데, 이는 앞서 설명한 본 발명의 실시예(즉, 일 실시예에 따른 부호화기(500) 및 다른 실시예에 따른 복호화기(1000))에 해당하는 것으로서, 이와 같이 오디오 처리 장치(345) 및 이를 포함한 신호 코딩 유닛은 하나 이상의 프로세서에 의해 구현될 수 있다.
제어부(350)는 입력장치들로부터 입력 신호를 수신하고, 신호 디코딩부(340)와 출력부(360)의 모든 프로세스를 제어한다. 출력부(360)는 신호 디코딩부(340)에 의해 생성된 출력 신호 등이 출력되는 구성요소로서, 스피커부(360A) 및 디스플레이부(360B)를 포함할 수 있다. 출력 신호가 오디오 신호일 때 출력 신호는 스피커로 출력되고, 비디오 신호일 때 출력 신호는 디스플레이를 통해 출력된다.
본 발명에 따른 오디오 신호 처리 방법은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 본 발명에 따른 데이터 구조를 가지는 멀티미디어 데이터도 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있다. 상기 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 인코딩 방법에 의해 생성된 비트스트림은 컴퓨터가 읽을 수 있는 기록 매체에 저장되거나, 유/무선 통신망을 이용해 전송될 수 있다.
이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
110: 사운드 공간상의 음원(의 위치)
120a: 듀얼모노 부호화 방법에 의해 발생하는 첫번째 양자화 잡음
120b: 듀얼모노 부호화 방법에 의해 발생하는 두번째 양자화 잡음
130a: 합차부호화 방법에 의해 발생하는 첫번째 양자화 잡음
130b: 합차부호화 방법에 의해 발생하는 두번째 양자화 잡음
140a: 확장 합차부호화 방법에 의해 발생하는 첫번째 양자화 잡음
140b: 확장 합차부호화 방법에 의해 발생하는 두번째 양자화 잡음
500: 본 발명에 따른 오디오 부호화기
510: 상관도 산출부

Claims (13)

  1. 적어도 두 채널의 오디오신호를 부호화하는 방법에 있어서, 제1오디오신호 및 제2오디오신호를 입력받는 단계;
    상기 제1오디오신호와 상기 제2오디오신호에 대한 상관도를 구하는 단계;
    상기 상관도에 따라 상기 제1오디오신호와 상기 제2오디오신호를 이용하여 제1게인값과 제2게인값을 산출하는 단계; 및
    상기 제1오디오신호, 제2오디오신호, 제1게인값, 제2게인값을 이용하여 제1전송오디오신호와 제2전송오디오신호를 생성하는 단계를 포함하고, 상기 제1전송오디오신호와 상기 제2전송오디오신호는 지각 부호화 기법에 의해 부호화되는 오디오 신호 처리 방법.
  2. 제 1 항에 있어서,
    상기 지각 부호화 기법은 상기 제1전송오디오신호에 대한 제1마스킹임계치를 산출하고, 상기 제2전송오디오신호에 대한 제2마스킹임계치를 산출하는 단계를 더 포함하는 오디오 신호 처리 방법.
  3. 제 2 항에 있어서,
    상기 제1전송오디오신호는 상기 제1마스킹임계치를 참조하여 지각 부호화된는 오디오 신호 처리 방법.
  4. 제 1 항에 있어서,
    상기 상관도가 기 설정된 기준값 미만인 경우, 제1전송오디오신호는 제1오디오신호와 같고, 제2전송오디오신호는 제2오디오신호와 같도록 생성하는 단계를 더 포함하는 오디오 신호 처리 방법.
  5. 제 1 항에 있어서,
    상기 제1게인값과 상기 제2게인값은 채널레벨차 값을 이용하여 산출되는 오디오 신호 처리 방법.
  6. 제 1 항에 있어서,
    상기 제1전송오디오신호는 적어도 상기 제1오디오신호 및 상기 제2오디오신호보다 주음원을 더 많이 포함하는 오디오 신호 처리 방법.
  7. 제 1 항에 있어서,
    상기 제2전송오디오신호는 적어도 상기 제1오디오신호 및 상기 제2오디오신호보다 주음원을 더 적게 포함하는 오디오 신호 처리 방법.
  8. 제1전송오디오신호, 제2전송오디오신호, 확장합차행렬사용정보를 수신하는 단계;
    상기 확장합차행렬사용정보에 따라 채널게인정보의 수신 여부가 결정되고, 상기 채널게인정보가 수신된 경우, 상기 채널게인정보를 이용하여 제1게인값 및 제2게인값을 산출하는 단계; 및
    상기 제1전송오디오신호, 상기 제2전송오디오신호, 상기 제1게인값, 상기 제2게인값을 이용하여 제1출력오디오신호 및 제2출력오디오신호를 생성하는 단계를 포함하고, 상기 채널게인정보가 수신되지 않은 경우, 상기 제1출력오디오신호는 상기 제1전송오디오신호와 같고 상기 제2출력오디오신호는 상기 제1전송오디오신호와 같은 오디오 신호 처리 방법.
  9. 제 8 항에 있어서,
    상기 확장합차행렬사용정보가 1인 경우 채널게인정보를 수신하는 오디오 신호 처리 방법.
  10. 제 8 항에 있어서,
    상기 채널게인정보가 수신된 경우 제1출력오디오신호는 제1전송오디오신호와 제2전송오디오신호의 합에 제1게인값을 곱하여 얻고, 제2출력오디오신호는 제1전송오디오신호와 제2전송오디오신호의 차에 제2게인값을 곱하여 얻는 오디오 신호 처리 방법.
  11. 제 8 항에 있어서,
    상기 제1전송오디오신호와 제2전송오디오신호는 지각 부호화된 신호인 오디오 신호 처리 방법.
  12. 제 8 항에 있어서,
    상기 제1게인값은 채널게인정보의 제곱에 상수 1을 더한 값에 루트근한 값에 비례하고, 상기 제2게인값은 채널게인정보의 제곱에 상수 1을 더한 값에 루트근한 값을 채널게인정보로 나눈 값에 비례하는 오디오 신호 처리 방법.
  13. 제 8 항에 있어서,
    상기 제1출력오디오신호와 상기 제2출력오디오신호는 쌍으로 이루어진 두 스피커에 각각 출력되는 오디오 신호인 오디오 신호 처리 방법.
KR1020120084207A 2012-07-31 2012-07-31 오디오 신호 처리 장치 및 방법 KR20140017338A (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020120084207A KR20140017338A (ko) 2012-07-31 2012-07-31 오디오 신호 처리 장치 및 방법
US14/414,902 US20150213790A1 (en) 2012-07-31 2013-07-26 Device and method for processing audio signal
PCT/KR2013/006730 WO2014021587A1 (ko) 2012-07-31 2013-07-26 오디오 신호 처리 장치 및 방법
CN201380039780.4A CN104541326A (zh) 2012-07-31 2013-07-26 一种设备和方法,用于处理音频信号
JP2015523021A JP2015528925A (ja) 2012-07-31 2013-07-26 オーディオ信号処理装置および方法
EP13826484.1A EP2863387A4 (en) 2012-07-31 2013-07-26 DEVICE AND METHOD FOR PROCESSING SOUND SIGNALS

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120084207A KR20140017338A (ko) 2012-07-31 2012-07-31 오디오 신호 처리 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20140017338A true KR20140017338A (ko) 2014-02-11

Family

ID=50028214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120084207A KR20140017338A (ko) 2012-07-31 2012-07-31 오디오 신호 처리 장치 및 방법

Country Status (6)

Country Link
US (1) US20150213790A1 (ko)
EP (1) EP2863387A4 (ko)
JP (1) JP2015528925A (ko)
KR (1) KR20140017338A (ko)
CN (1) CN104541326A (ko)
WO (1) WO2014021587A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190017512A (ko) * 2017-08-11 2019-02-20 삼성전자주식회사 전자장치, 그 제어방법 및 그 컴퓨터프로그램제품

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107731238B (zh) * 2016-08-10 2021-07-16 华为技术有限公司 多声道信号的编码方法和编码器
CA3045847C (en) * 2016-11-08 2021-06-15 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Downmixer and method for downmixing at least two channels and multichannel encoder and multichannel decoder
WO2019049245A1 (ja) * 2017-09-06 2019-03-14 ヤマハ株式会社 オーディオシステム、オーディオ機器、及びオーディオ機器の制御方法
US10650834B2 (en) * 2018-01-10 2020-05-12 Savitech Corp. Audio processing method and non-transitory computer readable medium
WO2020084741A1 (ja) * 2018-10-25 2020-04-30 日本電気株式会社 音声処理装置、音声処理方法、及びコンピュータ読み取り可能な記録媒体
US20220138624A1 (en) * 2019-02-15 2022-05-05 Nec Corporation Time-series data processing method
EP3719799A1 (en) * 2019-04-04 2020-10-07 FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. A multi-channel audio encoder, decoder, methods and computer program for switching between a parametric multi-channel operation and an individual channel operation
WO2021099363A2 (en) * 2019-11-20 2021-05-27 Dolby International Ab Methods and devices for personalizing audio content
WO2023114862A1 (en) * 2021-12-15 2023-06-22 Atieva, Inc. Signal processing approximating a standardized studio experience in a vehicle audio system having non-standard speaker locations

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6499010B1 (en) * 2000-01-04 2002-12-24 Agere Systems Inc. Perceptual audio coder bit allocation scheme providing improved perceptual quality consistency
JP3951690B2 (ja) * 2000-12-14 2007-08-01 ソニー株式会社 符号化装置および方法、並びに記録媒体
JP2004325633A (ja) * 2003-04-23 2004-11-18 Matsushita Electric Ind Co Ltd 信号符号化方法、信号符号化プログラム及びその記録媒体
MXPA06011396A (es) * 2004-04-05 2006-12-20 Koninkl Philips Electronics Nv Metodos de codificacion y decodificacion de senales estereofonicas y aparatos que utilizan los mismos.
US7406412B2 (en) * 2004-04-20 2008-07-29 Dolby Laboratories Licensing Corporation Reduced computational complexity of bit allocation for perceptual coding
CN101069232A (zh) * 2004-11-30 2007-11-07 松下电器产业株式会社 立体声编码装置、立体声解码装置及其方法
EP1814104A4 (en) * 2004-11-30 2008-12-31 Panasonic Corp STEREO ENCODING APPARATUS, STEREO DECODING APPARATUS, AND METHODS THEREOF
US7573912B2 (en) * 2005-02-22 2009-08-11 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschunng E.V. Near-transparent or transparent multi-channel encoder/decoder scheme
DE102005010057A1 (de) * 2005-03-04 2006-09-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines codierten Stereo-Signals eines Audiostücks oder Audiodatenstroms
US7751572B2 (en) * 2005-04-15 2010-07-06 Dolby International Ab Adaptive residual audio coding
US7835904B2 (en) * 2006-03-03 2010-11-16 Microsoft Corp. Perceptual, scalable audio compression
US20080004873A1 (en) * 2006-06-28 2008-01-03 Chi-Min Liu Perceptual coding of audio signals by spectrum uncertainty
JP5174027B2 (ja) * 2006-09-29 2013-04-03 エルジー エレクトロニクス インコーポレイティド ミックス信号処理装置及びミックス信号処理方法
US20080091415A1 (en) * 2006-10-12 2008-04-17 Schafer Ronald W System and method for canceling acoustic echoes in audio-conference communication systems
CN101553868B (zh) * 2006-12-07 2012-08-29 Lg电子株式会社 用于处理音频信号的方法和装置
JP2008203315A (ja) * 2007-02-16 2008-09-04 Matsushita Electric Ind Co Ltd オーディオ符号化・復号化装置、方法、及びソフトウェア

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190017512A (ko) * 2017-08-11 2019-02-20 삼성전자주식회사 전자장치, 그 제어방법 및 그 컴퓨터프로그램제품

Also Published As

Publication number Publication date
JP2015528925A (ja) 2015-10-01
EP2863387A1 (en) 2015-04-22
WO2014021587A1 (ko) 2014-02-06
CN104541326A (zh) 2015-04-22
EP2863387A4 (en) 2016-03-30
US20150213790A1 (en) 2015-07-30

Similar Documents

Publication Publication Date Title
KR20140017338A (ko) 오디오 신호 처리 장치 및 방법
JP4418493B2 (ja) パラメトリックマルチチャネル符号化システムにおけるチャネルの周波数ベースの符号化
KR100928311B1 (ko) 오디오 피스 또는 오디오 데이터스트림의 인코딩된스테레오 신호를 생성하는 장치 및 방법
JP5081838B2 (ja) オーディオ符号化及び復号
US20150371643A1 (en) Stereo audio signal encoder
JPWO2005112002A1 (ja) オーディオ信号符号化装置及びオーディオ信号復号化装置
CN112074902B (zh) 使用混合编码器/解码器空间分析的音频场景编码器、音频场景解码器及相关方法
KR102587641B1 (ko) 공간적 오디오 파라미터 인코딩 및 연관된 디코딩의 결정
KR102590816B1 (ko) 방향 컴포넌트 보상을 사용하는 DirAC 기반 공간 오디오 코딩과 관련된 인코딩, 디코딩, 장면 처리 및 기타 절차를 위한 장치, 방법 및 컴퓨터 프로그램
CN115580822A (zh) 空间音频捕获、传输和再现
US9311925B2 (en) Method, apparatus and computer program for processing multi-channel signals
EP3987516B1 (en) Coding scaled spatial components
JP2007187749A (ja) マルチチャンネル符号化における頭部伝達関数をサポートするための新装置
KR102664650B1 (ko) 공간 오디오 파라미터의 유의성의 결정 및 관련 인코딩
RU2779415C1 (ru) Устройство, способ и компьютерная программа для кодирования, декодирования, обработки сцены и других процедур, связанных с пространственным аудиокодированием на основе dirac с использованием диффузной компенсации
JP7223872B2 (ja) 空間音声パラメータの重要度の決定および関連符号化
RU2772423C1 (ru) Устройство, способ и компьютерная программа для кодирования, декодирования, обработки сцены и других процедур, связанных с пространственным аудиокодированием на основе dirac с использованием генераторов компонент низкого порядка, среднего порядка и высокого порядка
KR20230084232A (ko) 오디오 파라미터의 양자화
KR20230069173A (ko) 공간 오디오 파라미터 양자화
CN116508332A (zh) 空间音频参数编码和相关解码
JP2024512953A (ja) 空間音声ストリームの結合

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid