KR101058041B1 - 스케일러블 채널 복호화 방법 및 장치 - Google Patents
스케일러블 채널 복호화 방법 및 장치 Download PDFInfo
- Publication number
- KR101058041B1 KR101058041B1 KR1020070067134A KR20070067134A KR101058041B1 KR 101058041 B1 KR101058041 B1 KR 101058041B1 KR 1020070067134 A KR1020070067134 A KR 1020070067134A KR 20070067134 A KR20070067134 A KR 20070067134A KR 101058041 B1 KR101058041 B1 KR 101058041B1
- Authority
- KR
- South Korea
- Prior art keywords
- channel
- decoding
- matrix
- tree structure
- channels
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 19
- 239000013598 vector Substances 0.000 claims description 14
- 230000000694 effects Effects 0.000 abstract description 2
- 230000005236 sound signal Effects 0.000 abstract description 2
- 239000011159 matrix material Substances 0.000 description 66
- 238000004364 calculation method Methods 0.000 description 6
- 230000002123 temporal effect Effects 0.000 description 6
- 230000015572 biosynthetic process Effects 0.000 description 4
- 239000003638 chemical reducing agent Substances 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000005034 decoration Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000007493 shaping process Methods 0.000 description 2
- 101000591286 Homo sapiens Myocardin-related transcription factor A Proteins 0.000 description 1
- 102100034099 Myocardin-related transcription factor A Human genes 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Stereophonic System (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
본 발명은 멀티 채널(multi-channel)로 오디오 신호를 부호화/복호화하는 서라운드(surround) 오디오 코딩에 관한 것으로, 복호화단에 마련된 채널 또는 스피커의 설정을 인식하여 각 멀티채널 신호에 대해 복호화하는 레벨의 수를 계산하고 그 레벨의 수에 따라 복호화하여 업믹싱한다.
이렇게 함으로써 복호화단에서 출력 채널의 개수를 줄일 수 있는 동시에 복호화를 수행하는 복잡도를 용이하게 경감할 수 있다. 또한, 각 사용자가 가지고 있는 다양한 스피커들의 설정에 따라 적응적으로 최적의 음질을 제공할 수 있는 효과를 거둘 수 있다.
Description
도 1은 본 발명에 의한 멀티 채널 복호화 방법에 대한 일 실시예를 흐름도로 도시한 것이다.
도 2는 본 발명에 의한 스케일러블 채널 복호화 장치의 일 실시예를 블록도로 도시한 것이다.
도 3은 5-2-5 트리 구조와 아비트러리 트리 구조(arbitrary tree)를 복합적으로 구성한 일 실시예를 도시한 것이다.
도 4는 본 발명에 의한 스케일러블 채널 복호화 방법 및 장치를 설명하기 위한 소정의 트리 구조를 도시한 것이다.
도 5는 5-1-5 1 트리 구조에서 4채널만 출력이 가능한 경우를 도시한 것이다.
도 6은 5-1-5 2 트리 구조에서 4채널만 출력이 가능한 경우를 도시한 것이다.
도 7은 5-1-5 1 트리 구조에서 3채널만 출력이 가능한 경우를 도시한 것이다.
도 8은 5-1-5 2 트리 구조에서 3채널만 출력이 가능한 경우를 도시한 것이 다.
도 10은 본 발명에 의한 스케일러블 채널 복호화 방법 및 장치에 의하여 불필요한 모듈에 대응하는 행렬의 원소 또는 벡터의 원소를 제거하는 수도 코드를 도시한 것이다.
〈도면의 주요 부호에 대한 간단한 설명〉
230: 설정 인식부 235: 레벨 계산부
240: 복호화 결정부 250: 제1 계산부
252: 경로 판단부 254: 레벨 감소부
256: 제2 계산부 260: 제어부
본 발명은 오디오 코딩에 관한 것으로, 보다 상세하게는 멀티 채널(multi-channel)로 오디오 신호를 부호화/복호화하는 서라운드(surround) 오디오 코딩에 관한 것이다.
멀티채널 오디오 코딩에는 웨이브폼(waveform) 멀티채널 오디오 코딩과 파라메트릭(Parametric) 멀티채널 오디오 코딩이 있다. 웨이브폼 멀티채널 오디오 코딩에는 MPEG-2 MC 오디오 코딩, AAC MC 오디오 코딩 및 BSAC/AVS MC 오디오 코딩 등이 있으며, 5개의 채널 신호를 입력으로 하여 5개의 채널 신호로 출력한다. 파라메트릭 멀티채널 오디오 코딩은 MPEG 서라운드 코딩이 있으며, 1 또는 2 개의 입력 채널을 6 또는 8개의 멀티 채널로 출력한다.
일반적으로, 이러한 멀티채널 오디오 코딩은 복호화단에서 출력할 채널의 개수가 부호화단에서 고정되어 출력된다. 예를 들어, MPEG 서라운드 코딩에서는 6개 또는 8개의 멀티 채널로 출력되는 채널의 개수가 고정되어 있다. 그러므로 사용자가 재생하고자 하는 스피커의 개수 및 스피커의 위치에 해당하는 복호화단의 채널 설정이 부호화단에서 설정된 채널의 개수와 상이한 경우 복호화단에서 업믹싱을 수행함에 있어서 음질이 저하되는 문제점을 갖는다.
본 발명이 이루고자 하는 기술적 과제는, 복호화단에 마련된 채널 또는 스피커의 설정을 인식하여 부호화단에서 부호화된 각 멀티채널 신호에 대해 복호화하고자 하는 레벨의 수를 계산하고 그 레벨의 수에 따라 복호화하여 업믹싱하는 스케일러블 채널 복호화 방법 및 장치를 제공하는 것이다.
상기의 과제를 이루기 위한 본 발명에 의한 스케일러블 채널 복호화 방법은, 채널 또는 스피커의 설정(configuration)을 인식하는 단계, 상기 인식된 채널 또는 스피커의 설정을 이용하여 각 멀티채널 신호에 대해 복호화하는 레벨(level)의 수를 계산하는 단계 및 상기 계산된 레벨의 수에 따라 복호화하여 업믹싱(up-mixing)하는 단계를 포함하는 것을 특징으로 한다.
전술된 발명을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체인 것이 바람직하다.
상기의 과제를 이루기 위한 본 발명에 의한 스케일러블 채널 복호화 장치는, 채널 또는 스피커의 설정을 인식하는 설정 인식부, 상기 인식된 채널 또는 스피커의 설정을 이용하여 각 멀티채널 신호에 대해 복호화하는 레벨의 수를 계산하는 레벨 계산부 및 상기 계산된 레벨의 수에 따라 복호화하여 업믹싱하는 업믹싱부를 포함하는 것을 특징으로 한다.
상기의 과제를 이루기 위한 본 발명에 의한 스케일러블 채널 복호화 방법, 채널 또는 스피커의 설정을 인식하는 단계, 및 부호화단에서 멀티채널로부터 다운믹스된 신호를 상기 인식된 채널 또는 스피커의 설정에 대응하는 멀티채널 신호로 업믹싱하는 단계를 포함하는 것을 특징으로 한다.
상기의 과제를 이루기 위한 본 발명에 의한 스케일러블 채널 복호화 방법, 채널 또는 스피커의 설정을 인식하는 단계, 상기 인식된 채널 또는 스피커의 설정을 이용하여 각 멀티채널 신호에 대해 거쳐야 하는 모듈의 수를 계산하는 단계, 및 상기 계산된 모듈의 수에 따라 복호화하여 업믹싱하는 단계를 포함하는 것을 특징으로 한다.
상기의 과제를 이루기 위한 본 발명에 의한 스케일러블 채널 복호화 방법, 채널 또는 스피커의 설정을 인식하는 단계, 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용할 수 없는 채널을 복호화하지 않는 것으로 결정하는 단계, 상기 복호화하지 않는 것으로 결정된 멀티채널을 제외하고 동일한 경로에 의해 복호화되는 멀티채널이 있는지 여부를 판단하는 단계, 상기 판단된 결과에 따라 각 멀티채널 신호에 대해 거쳐야 하는 모듈의 수를 계산하는 단계 및 상기 계산된 모듈의 수에 따라 복호화하여 업믹싱하는 단계를 포함하는 것을 특징으로 한다.
이하, 첨부된 도면들을 참조하여 본 발명에 따른 스케일러블 채널 복호화 방법 및 장치에 대해 상세히 설명한다.
도 1은 본 발명에 의한 멀티 채널 복호화 방법에 대한 일 실시예를 흐름도로 도시한 것이다.
먼저, 부호화기로부터 전송받은 MPEG 서라운드 비트스트림(MPEG surround bitstream)을 분석(parsing)하여 공간 정보(spatial cue) 및 부가 정보를 추출한다(제100단계).
복호화단에 마련된 채널 또는 스피커의 설정(configuration)을 인식한다(제103단계). 여기서, 복호화단의 멀티채널의 설정은 복호화단에 구비된 스피커(speaker)의 개수(numPlayChan), 복호화단에 구비된 스피커 가운데 동작 가능한 스피커의 위치(playChanPos(ch)), 부호화된 채널들 가운데 복호화단의 멀티채널에서 이용을 할 수 있는지 여부를 나타내는 벡터(bPlaySpk(ch)) 등을 말한다.
여기서, bPlaySpk(ch)는 다음 기재된 수학식과 같이 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용가능한 스피커를 '1'로 나타내고, 이용할 수 없는 스피커를 '0'으로 나타낸다.
[수학식 1]
여기서, numOutChanAT는 다음 기재된 수학식에 의해 계산된 값이다.
[수학식 2]
또한, playChanPos는 예를 들어 5.1 채널에 대하여 다음과 같은 방식으로 표시할 수 있다.
[수학식 3]
playChanPos = [FL FR C LFE BL BR]
제103단계에서 인식한 결과, 부호화단에서 부호화된 채널들 가운데 멀티채널에서 이용할 수 없는 채널을 복호화하지 않는 것으로 결정한다(제106단계).
행렬 (여기서, v는 '0'이상이고, 'numOutChan'미만이다.)는 도 3 내지 8에 도시된 트리 구조에서 각 출력 신호에 대하여 OTT 모듈에서 상위로 출력될지('1'로 표시한다.) 하위로 출력될지('-1'로 표시한다)를 나타내는 원소들로 구성된 행렬이다. 이하에서 행렬 을 이용하여 설명하기로 한다. 그러나 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자들이라면 행렬 에 한정되어 실시되지 않음을 알 수 있다. 예를 들어, 행렬 에 대하여 행과 열이 바뀌어 실시할 수도 있다.
예를 들어, 도 4에 도시된 트리 구조(tree structure)로 설명하면, 행렬 에서 Box 0에서 상위로 출력되고, Box 1에서 상위로 출력되며, Box 2에서 상위로 출력되는 1열은 [1 1 1]로 표시되며, Box 0에서 하위로 출력되고, Box 3에서 상위로 출력되는 4열은 [1 1 n/a]로 표시된다. 여기서, ‘n/a’는 해당하는 채널, 모듈 또는 박스(Box)는 사용할 수 없음을 표시하는 식별자이다. 이와 동일한 방식으로 모든 멀티 채널을 행렬 로 나타내면 다음과 같다.
제106단계에서는 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용할 수 없는 채널에 해당하는 열을 행렬 에서 모두 n/a로 설정한다. 여기서, n/a는 해당하는 채널, 모듈 또는 Box는 사용할 수 없음을 표시하는 식별자이다.
예를 들어, 도 4에 도시된 트리 구조(tree structure)로 설명하면, 부호화단에서 부호화돤 채널들 가운데 복호화단에 마련된 멀티채널에서 이용을 할 수 있는지 여부를 나타내는 벡터인 bPlaySpk가 2번째 및 4번째 채널에 '0'으로 표시되어 있으므로 복호화단에 마련된 멀티채널 가운데 2번째 및 4번째 채널은 이용할 수 없 다. 그러므로 제106단계에서는 행렬 에서 2번째 및 4번째 채널에 대응되는 열인 2열과 4열을 다음 기재된 바와 같이 모두 n/a로 설정한다.
제106단계에서 복호화하지 않는 것으로 결정된 채널을 제외하고 동일한 경로에 의해 복호화되는 채널이 있는지 여부를 판단한다(제108단계). 제108단계에서는 제106단계에서 설정된 행렬 에서 소정의 정수 j와 k가 동일하지 않은 경우 와 가 동일한 것이 있는지 여부를 판단함으로써 동일한 경로에 복호화되는 멀티채널이 있는지 여부를 판단한다.
예를 들어, 도 4에 도시된 트리 구조로 설명하면, 과 이 동일하지 않으므로 제106단계에서 생성된 행렬 에서 1번째 채널 및 3번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 없는 것으로 제108단계에서 판단된다. 그러나 과 이 동일하므로 제106단계에서 생성된 행렬 에서 5번째 채널 및 6번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 있는 것으로 제108단계에서 판단된다.
제108단계에서 동일한 경로에 의하여 복호화되지 않는 멀티채널로 판단된 멀티채널에 대하여 복호화 레벨을 감소시킨다(제110단계). 여기서, 복호화 레벨은 각 멀티채널에서 멀티채널신호를 출력하기 위하여 거쳐야할 OTT 모듈 또는 TTT 모 듈 등과 같은 복호화를 수행하는 모듈 또는 박스의 수를 말한다. 제108단계에서 동일한 경로에 의하여 복호화되지 않는 멀티채널로 판단된 채널에 대하여 마지막으로 판단한 복호화 레벨을 n/a로 표시한다.
예를 들어, 도 4에 도시된 트리구조에서 1번째 채널 및 3번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 없는 것을 제108단계에서 판단되었으므로, 1번째 채널에 대응하는 1열 및 3번째 채널에 대응하는 3열의 마지막 행을 다음 기재된 바와 같이 n/a로 설정한다.
제108단계 및 제110단계는 복호화 레벨을 한 레벨씩 감소시키면서 반복적으로 수행한다. 이에 따라 제108단계 및 제110단계에서는 에 대하여 마지막 행부터 첫 번째 행까지 1행씩 올려가며 반복적으로 수행한다.
제110단계에서 감소된 결과를 이용하여 각 멀티채널에 대하여 복호화 레벨의 수를 계산한다(제113단계).
제113단계에서 복호화 레벨의 수는 다음 기재된 수학식에 의하여 계산한다.
[수학식 4]
DL=[2 -1 2 -1 3 3]
이는 n/a는 절대값을 0으로 가정하고 모두 n/a인 열은 -1로 가정하였으므로, 행렬 에서 1열에 대한 절대값의 합은 2이고, 모두 n/a인 열에 해당하는 2열은 -1로 설정한다.
이와 같은 방식에 의해 계산된 DL을 이용하여 도 4에 도시된 적색 점선 이전의 모듈까지만 복호화를 수행하여 스케일러블(scalable)하게 복호화할 수 있도록 한다.
제100단계에서 추출된 공간 정보를 이용하여 저 비트율(low bit-rate)에서 공간 정보가 급격하게 변화되는 것을 방지하기 위하여 선택적으로 공간 정보를 스무딩(smoothing)한다(제116단계).
제116단계 후에, 기존의 매트릭스 서라운드(matrix surround) 방식과 호환성을 유지하기 위해 추가적인 채널 별로 이득값(gain)을 계산하고, 프리-벡터(pre-vecter)들을 계산하며, 복호화기에서 이스터널 다운믹스(external downmix)를 사용할 경우 채널 별로 이득값을 보상하기 위한 변수를 추출함으로써, 행렬 R1을 생성한다(제119단계). 여기서, R1은 디코렐레이션하기 위해 디코릴레이터에 입력하기 위한 신호를 생성하는 데 이용된다.
예를 들어, 도 5에 도시된 5-1-5 1 트리 구조 및 도 6에 도시된 5-1-5 2 트리 구조가 다음에 기재된 행렬로 설정되어 있다고 가정한다.
이 경우 5-1-5 1 트리 구조에서 제119단계에서는 R1을 다음 기재된 바와 같이 계산한다.
이 경우 5-1-5 2 트리 구조에서 제119단계에서는 R1을 다음 기재된 바와 같이 계산한다.
제119단계에서 생성된 행렬 R1에 대해 보간(interpolation)을 수행하여 행렬 M1을 생성한다(제120단계).
디코릴레이션된 신호들과 다이렉트 신호(direct signal)를 믹스(mix)하기 위한 행렬 R2를 생성한다(제123단계). 제123단계에서 생성된 행렬 R2는 제106단계 내지 제113단계에서 불필요한 모듈로 판단된 모듈에서 복호화를 수행하지 않기 위하여 도 10에 도시된 수도 코드에 의해 불필요한 모듈에 대응하는 행렬의 원소 또는 벡터의 원소를 제거한다.
5-1-5 1 트리 구조 및 5-1-5 2 트리 구조에 적용한 예를 이하에서 살펴보기로 한다.
첫째, 도 5는 5-1-5 1 트리 구조에서 4채널만 출력이 가능한 경우를 도시한 것이다. 도 5에 도시된 5-1-5 1 트리 구조에 대하여 제103단계 내지 제113단계를 수행하면, 다음 기재된 과 DL(0,)이 생성된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다. 이에 따라 OTT 2 및 OTT 4가 업믹싱을 수행하지 않으므로 제126단계에서 다음 기재된 행렬 R2를 생성한다.
둘째, 도 6은 5-1-5 2 트리 구조에서 4채널만 출력이 가능한 경우를 도시한 것이다. 도 6에 도시된 5-1-5 2 트리 구조에 대하여 제103단계 내지 제113단계를 수행하면 다음 기재된 과 DL(0,)이 생성된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
5-2-5 트리 구조 및 7-2-7 트리 구조는 3개의 서브 트리로 분리될 수 있다. 그러므로 전술된 5-1-5 트리 구조에서 적용된 방식과 동일한 방식으로 제123단계에서 행렬 R2를 구할 수 있다.
제123단계에서 생성된 행렬 R2에 대해 보간을 수행하여 행렬 M2를 생성한다(제126단계).
부호화단에서 다운믹스된 신호와 원 신호 간의 차이를 ACC로 부호화되어 레지듀얼 코딩(residual coding)된 신호를 복호화한다(제129단계).
제129단계에서 복호화된 MDCT 계수를 QMF 도메인(QMF domain)으로 변환한다(제130단계).
제130단계에서 출력된 신호에 대하여 프레임(frame) 간 오버랩-애 드(overlap-add)를 수행한다(제133단계).
저주파 대역 신호가 QMF 필터 뱅크(QMF filterbank)로 주파수 분해능(frequency resolution)이 부족하므로 추가적인 필터링을 통해 주파수 분해능을 높인다(제136단계).
QMF Hybrid analysis filter bank를 이용하여 입력 신호를 주파수 밴드(band) 별로 분해한다(제140단계).
제120단계에서 생성된 행렬 M1을 이용하여 다이렉트 신호 및 디코릴레이션할 신호를 생성한다(제143단계).
제143단계에서 생성된 디코릴레이션할 신호에 대하여 디코릴레이션을 공간감을 가질 수 있도록 재구성하는 디코릴레이션을 수행한다(제146단계).
제146단계에서 디코릴레이션된 신호 및 제143단계에서 생성된 다이렉트 신호에 대하여 각각 제126단계에서 생성된 행렬 M2를 적용한다(제148단계).
제150단계에서 행렬 M2가 적용된 신호에 TES(Temporal Envelope Shaping)를 적용한다(제153단계).
제153단계에서 TES가 적용된 신호에 QMF hybrid synthesis filter bank를 이용하여 시간 도메인으로 변환한다(제156단계).
제156단계에서 변환된 신호에 TP(Temporal Processing)를 적용한다(제158단계).
여기서, 제153단계 및 제158단계는 Applause와 같이 템포럴 구조(Temporal Structure)가 중요한 신호에 대하여 음질을 향상시키기 위한 것으로서 선택적으로 이용할 수 있으며, 필수적으로 적용해야 하는 것은 아니다.
다이렉트 신호와 디코릴레이션된 신호를 믹스한다(제158단계).
또한, 아버트레리 트리 구조(arbitrary tree structure)에도 다음 기재된 수학식에 의하여 R3를 계산하여 적용할 수 있다.
[수학식 5]
도 2는 본 발명에 의한 스케일러블 채널 복호화 장치의 일 실시예를 블록도로 도시한 것이다.
비트스트림 디코더(200, bitstream decoder)는 부호화기로부터 전송받은 서라운드 비트스트림(surround bitstream)을 분석(parsing)하여 공간 정보(spatial cue) 및 부가 정보를 추출한다.
설정 인식부(230)는 복호화단에 마련된 채널 또는 스피커의 설정(configuration)을 인식한다. 여기서, 복호화단의 멀티채널의 설정은 복호화단에 구비된 스피커(speaker)의 개수(numPlayChan), 복호화단에 구비된 스피커 가운데 동작 가능한 스피커의 위치(playChanPos(ch)), 부호화된 채널들 가운데 복호화단의 멀티채널에서 이용을 할 수 있는지 여부를 나타내는 벡터(bPlaySpk(ch)) 등을 말한다.
여기서, bPlaySpk(ch)는 다음 기재된 수학식과 같이 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용가능한 스피커를 '1'로 나타내고, 이용할 수 없는 스피커를 '0'으로 나타낸다.
[수학식 6]
여기서, numOutChanAT는 다음 기재된 수학식에 의해 계산된 값이다.
[수학식 7]
또한, playChanPos는 예를 들어 5.1 채널에 대하여 다음과 같은 방식으로 표시된다.
[수학식 8]
playChanPos = [FL FR C LFE BL BR]
레벨 계산부(235)는 설정 인식부(230)에서 인식된 멀티채널의 설정을 이용하여 각 멀티채널 신호에 대해 복호화 레벨의 수를 계산한다. 여기서, 레벨 계산부(235)는 복호화 결정부(240) 및 제1 계산부(250)를 포함하여 이루어진다.
복호화 결정부(240)는 설정 인식부(230)에서 인식된 결과를 이용하여 부호화기에서 부호화된 채널들 가운데 멀티채널에서 이용할 수 없는 채널을 복호화하지 않는 것으로 결정한다.
행렬 (여기서, v는 '0'이상이고, 'numOutChan'미만이다.)는 도 3 내지 8에 도시된 트리 구조에서 각 출력 신호에 대하여 OTT 모듈에서 상위로 출력될지('1'로 표시한다.) 하위로 출력될지('-1'로 표시한다)를 나타내는 원소들로 구성된 행렬이다. 이하에서 행렬 을 이용하여 설명하기로 한다. 그러나 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자들이라면 행렬 에 한정되어 실시되지 않음을 알 수 있다. 예를 들어, 행렬 에 대하여 행과 열이 바뀌어 실시할 수도 있다.
예를 들어, 도 4에 도시된 트리 구조(tree structure)로 설명하면, 행렬 에서 Box 0에서 상위로 출력되고, Box 1에서 상위로 출력되며, Box 2에서 상위로 출력되는 1열은 [1 1 1]로 표시되며, Box 0에서 하위로 출력되고, Box 3에서 상위로 출력되는 4열은 [1 1 n/a]로 표시된다. 여기서, ‘n/a’는 해당하는 채널, 모듈 또는 박스(Box)는 사용할 수 없음을 표시하는 식별자이다. 이와 동일한 방식으로 모든 멀티 채널을 행렬 로 나타내면 다음과 같다
복호화 결정부(240)는 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용할 수 없는 채널에 해당하는 열을 행렬 에서 모두 'n/a'로 설정한다. 여기서, 'n/a'는 해당하는 채널, 모듈 또는 Box는 사용할 수 없음을 표시하는 식별자이다.
예를 들어, 도 4에 도시된 트리 구조(tree structure)로 설명하면, 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용을 할 수 있는지 여부를 나타내는 벡터인 bPlaySpk가 2번째 및 4번째 채널에 '0'으로 표시되어 있으므로 복호화단에 마련된 멀티채널 가운데 2번째 및 4번째 채널은 이용할 수 없다. 그러므로 복호화 결정부(240)에서는 행렬 에서 2번째 및 4번째 채널에 대응되는 열인 2열과 4열을 다음 기재된 바와 같이 모두 n/a로 설정한다.
제1 계산부(250)는 복호화 결정부(235)에서 복호화하지 않는 것으로 결정된 채널을 제외하고 동일한 경로에 의해 복호화되는 채널이 있는지 여부를 판단하여 복호화 레벨의 수를 계산한다. 여기서, 복호화 레벨은 각 멀티채널에서 멀티채널신호를 출력하기 위하여 거쳐야할 OTT 모듈 또는 TTT 모듈 등과 같은 복호화를 수행하는 모듈의 수를 말한다.
제1 계산부(250)는 경로 판단부(252), 레벨 감소부(254) 및 제2 계산부(256)를 포함하여 이루어진다.
경로 판단부(252)는 복호화 결정부(240)에서 복호화하지 않는 것으로 결정된 멀티채널을 제외하고 동일한 경로에 의해 복호화되는 멀티채널이 있는지 여부를 판단한다. 여기서, 경로 판단부(252)는 복호화 결정부(240)에서 설정된 행렬 에서 소정의 정수 j와 k가 동일하지 않은 경우 와 가 동일한 것이 있는지 여부를 판단함으로써 동일한 경로에 복호화되는 멀티채널이 있는지 여부를 판단한다.
예를 들어, 도 4에 도시된 트리 구조로 설명하면, 과 이 동일하지 않으므로 복호화 결정부(240)에서 생성된 행렬 에서 1번째 채널 및 3번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 없는 것을 경로 판단부(252)에서 판단된다. 도 4에 도시된 트리 구조로 설명 하면, 과 이 동일하므로 복호화 결정부(240)에서 생성된 행렬 에서 1번째 채널 및 3번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 있는 것을 경로 판단부(252)에서 판단된다.
레벨 감소부(254)는 경로 판단부(252)에서 동일한 경로에 의하여 복호화되지 않는 멀티채널로 판단된 멀티채널에 대하여 복호화 레벨을 감소시킨다. 여기서, 복호화 레벨은 각 멀티채널에서 신호를 출력하기 위하여 거처야 할 OTT 모듈 또는 TTT 모듈 등과 같은 복호화를 수행하는 모듈 또는 박스의 수를 말한다. 경로 판단부(252)에서 동일한 경로에 의하여 복호화되지 않는 멀티채널로 판단된 채널에 대하여 마지막으로 판단한 복호화 레벨을 n/a로 표시한다.
예를 들어, 도 4에 도시된 트리구조에서 1번째 채널 및 3번째 채널이 동일한 경로에 의해 복호화되는 멀티채널이 없는 것을 경로 판단부(252)에서 판단되었으므로, 1번째 채널에 대응하는 1열 및 3번째 채널에 대응하는 3열의 마지막 행을 다음 기재된 바와 같이 n/a로 설정한다.
경로 판단부(252) 및 레벨 감소부(254)는 복호화 레벨을 한 레벨씩 감소시키면서 반복적으로 수행한다. 이에 따라 경로 판단부(252) 및 레벨 감소부(254)에서는 에 대하여 마지막 행부터 첫 번째 행까지 1행씩 올려가며 반복적으로 수행한다.
제2 계산부(256)는 레벨 감소부(254)에서 감소된 결과를 이용하여 각 멀티채널에 대하여 복호화 레벨의 수를 계산한다. 여기서, 제2 계산부(256)는 복호화 레벨의 수를 다음 기재된 수학식에 의하여 계산한다.
[수학식 9]
DL=[2 -1 2 -1 3 3]
이는 n/a는 절대값을 0으로 가정하고 모두 n/a인 열은 -1로 가정하였으므로, 행렬 에서 1열에 대한 절대값의 합은 2이고, 모두 n/a인 열에 해당하는 2열 은 -1로 설정한다.
이와 같은 방식에 의해 계산된 DL을 이용하여 도 4에 도시된 점선 이전의 모듈까지만 복호화를 수행하여 스케일러블(scalable)하게 복호화할 수 있도록 한다.
제어부(260)는 제2 계산부(256)에서 구해진 복호화 레벨을 이용하여 불필요한 모듈은 수행하지 않게 행렬 R1, R2 및 R3를 생성하는 것을 제어한다.
스무딩부(202, smoothing unit)는 비트스트림 디코더(200)에서 추출된 공간 정보를 이용하여 저 비트율(low bit-rate)에서 공간 정보가 급격하게 변화되는 것을 방지하기 위하여 선택적으로 공간 정보를 스무딩(smoothing)한다.
매트릭스 컴퍼넌트 계산부(204, matrix component calculating unit)는 기존의 매트릭스 서라운드(matrix surround) 방식과 호환성을 유지하기 위해 추가적인 채널별로 이득값(gain)을 계산한다.
전-벡터 계산부(206, pre-vectors calculating unit)는 프리-벡터(pre-vecter)들을 계산한다.
아버트레리 다운믹스이득값 추출부(208, arbitrary downmix gain extracting unit)는 복호화기에서 이스터널 다운믹스(external downmix)를 사용할 경우 채널 별로 이득값을 보상하기 위한 변수를 추출한다.
*매트릭스 생성부(212)는 매트릭스 컴퍼넌트 계산부(204), 전-벡터 계산부(206) 및 아버트레리 다운믹스이득값 추출부(208)에서 출력되는 결과를 이용하여 행렬 R1을 생성한다. 여기서, R1은 디코릴레이션하기 위해 디코릴레이터에 입력하 기 위한 신호를 생성하는 데 이용된다.
예를 들어, 도 5에 도시된 5-1-5 1 트리 구조 및 도 6에 도시된 5-1-5 2 트리 구조가 다음에 기재된 행렬로 설정되어 있다고 가정한다.
이 경우 5-1-5 1 트리 구조에서 매트릭스 생성부(212)에서는 R1을 다음 기재된 바와 같이 계산한다.
이 경우 5-1-5 2 트리 구조에서 매트릭스 생성부(212)에서는 R1을 다음 기재된 바와 같이 계산한다.
보간 처리부(214)는 매트릭스 생성부(212)에서 생성된 행렬 R1에 대해 보간(interpolation)을 수행하여 행렬 M1을 생성한다.
믹스벡터 계산부(210, mix-vectors calculating unit)는 디코릴레이션된 신호들과 다이렉트 신호(direct signal)를 믹스(mix)하기 위한 행렬 R2를 생성한다. 믹스벡터 계산부(210)에서 생성된 행렬 R2는 레벨 계산부(235)에서 불필요한 모듈로 판단된 모듈에서 복호화를 수행하지 않기 위하여 도 10에 도시된 수도 코드에 의해 불필요한 모듈에 대응하는 행렬의 원소 또는 벡터의 원소를 제거한다.
보간 처리부(316)는 믹스벡터 계산부(210)에서 생성된 행렬 R2에 대해 보간을 수행하여 행렬 M2를 생성한다.
5-1-5 1 트리 구조 및 5-1-5 2 트리 구조에 적용한 예를 이하에서 살펴보기로 한다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다. 이에 따라 OTT 2 및 OTT 4가 복호화를 수행하지 않으므로 제126단계에서 다음 기재된 행렬 R2를 생성한다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
이렇게 생성된 DL(0,)에 의하여 적색 점선으로 표시된 부분 이전 모듈에서 복호화가 중단된다.
5-2-5 트리 구조 및 7-2-7 트리 구조는 3개의 서브 트리로 분리될 수 있다. 그러므로 전술된 5-1-5 트리 구조에서 적용된 방식과 동일한 방식으로 믹스멕터 생성부(210)에서 행렬 R2를 구할 수 있다.
AAC 디코더(216, AAC decoder)는 부호화단에서 다운믹스된 신호와 원 신호 간의 차이를 ACC로 부호화되어 레지듀얼 코딩(residual coding)된 신호를 복호화한다.
MDCT 변환부(218, MDCT2QMF unit)는 AAC 디코더(216)에서 복호화된 MDCT 계수를 QMF 도메인(QMF domain)으로 변환한다.
오버랩-애드부(220, overlap-add unit)는 MDCT 변환부(218)에서 출력된 신호에 대하여 프레임(frame) 간 오버랩-애드(overlap-add)를 수행한다.
하이브리드 분석부(222, hybrid analysis unit)는 저주파 대역 신호가 QMF 필터 뱅크(QMF filterbank)로 주파수 분해능(frequency resolution)이 부족하므로 추가적인 필터링을 통해 주파수 분해능을 높인다.
하이브리드 분석부(270)는 QMF Hybrid analysis filter bank로서 입력 신호를 주파수 밴드(band) 별로 분해한다.
전-매트릭스 적용부(273, pre-matrix application unit)는 보간 처리부(214)에서 생성된 행렬 M1을 이용하여 다이렉트 신호 및 디코릴레이션할 신호를 생성한다.
디코릴레이션부(276)는 전-매트릭스 적용부(273)에서 생성된 디코릴레이션할 신호에 대하여 공간감을 가질 수 있도록 재구성하는 디코릴레이션을 수행한다.
믹스-매트릭스 적용부(279, mix-matrix application unit)는 디코릴레이션부(276, decorrelation unit)에서 디코릴레이션된 신호 및 전-매트릭스 적용부(273)에서 생성된 다이렉트 신호에 대하여 각각 보간 처리부(215)에서 생성된 행렬 M2를 적용한다.
TES 적용부(288)는 믹스-매트릭스 적용부(279)에서 행렬 M2가 적용된 신호에 TES(Temporal Envelope Shaping)를 적용한다.
QMF 하이브리드 합성부(285, QMF hybrid synthesis unit)는 TES 적용부(288)에서 TES가 적용된 신호에 QMF hybrid synthesis filter bank를 이용하여 시간 도메인으로 변환한다.
TP 적용부(288)는 QMF 하이브리드 합성부(285)에서 변환된 신호에 TP(Temporal Processing)를 적용한다.
여기서, TES 적용부(282) 및 TP 적용부(288)는 Applause와 같이 템포럴 구조(Temporal Structure)가 중요한 신호에 대하여 음질을 향상시키기 위한 것으로서 선택적으로 이용할 수 있으며, 필수적으로 적용해야 하는 것은 아니다.
믹싱부(290)는 다이렉트 신호와 디코릴레이션된 신호를 믹스한다.
또한, 아버트레리 트리 구조(arbitrary tree structure)에도 다음 기재된 수학식에 의하여 R3를 계산하여 적용할 수 있다.
[수학식 10]
본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다)가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장 장치 등이 있다.
이러한 본 발명에 대한 이해를 돕기 위하여 도면에 도시된 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 의해 정해져야 할 것이다.
본 발명에 의한 스케일러블 채널 복호화 방법 및 장치에 의하면, 복호화단에 마련된 채널 또는 스피커의 설정을 인식하여 각 멀티채널 신호에 대해 복호화하는 레벨의 수를 계산하고 그 레벨의 수에 따라 복호화하여 업믹싱한다.
이렇게 함으로써 복호화단에서 출력 채널의 개수를 줄일 수 있는 동시에 복호화를 수행하는 복잡도를 용이하게 경감할 수 있다. 또한, 각 사용자가 가지고 있는 다양한 스피커들의 설정에 따라 적응적으로 최적의 음질을 제공할 수 있는 효과를 거둘 수 있다.
Claims (6)
- 삭제
- 채널 또는 스피커의 설정을 인식하는 단계;상기 인식된 채널 또는 스피커의 설정을 이용하여 각 멀티채널 신호에 대해 거쳐야 하는 모듈의 수를 결정하는 단계; 및상기 결정된 모듈의 수에 따라 복호화하여 업믹싱하는 단계를 포함하는 것을 특징으로 하는 스케일러블 채널 복호화 방법.
- 삭제
- 제 2 항에 있어서,상기 채널 또는 스피커의 설정은 부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용할 수 있는 채널에 관한 정보인 것을 특징으로 하는 스케일러블 채널 복호화 방법.
- 제 4 항에 있어서,상기 정보는 복호화단에 마련된 멀티채널의 개수, 복호화단에서 스피커가 마련된 위치, 부호화단에서 부호화된 채널들에 대하여 복호화단에 마련된 멀티채널에서 이용할 수 있는지 여부를 나타내는 벡터 및 각 멀티채널 신호가 거쳐야 하는 모듈(module)의 개수 중 적어도 어느 하나인 것을 특징으로 하는 스케일러블 채널 복호화 방법.
- 제 2 항에 있어서, 상기 결정하는 단계는부호화단에서 부호화된 채널들 가운데 복호화단에 마련된 멀티채널에서 이용할 수 없는 채널을 복호화하지 않는 것으로 결정하는 단계; 및상기 복호화하지 않는 것으로 결정된 멀티채널을 제외하고 동일한 경로에 의해 복호화되는 멀티채널이 있는지 여부를 판단하여 복호화하는 모듈의 수를 결정하는 단계를 포함하는 것을 특징으로 하는 스케일러블 채널 복호화 방법.
Applications Claiming Priority (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US75785706P | 2006-01-11 | 2006-01-11 | |
US60/757,857 | 2006-01-11 | ||
US75898506P | 2006-01-17 | 2006-01-17 | |
US60/758,985 | 2006-01-17 | ||
US75954306P | 2006-01-18 | 2006-01-18 | |
US60/759,543 | 2006-01-18 | ||
US78914706P | 2006-04-05 | 2006-04-05 | |
US60/789,147 | 2006-04-05 | ||
US78960106P | 2006-04-06 | 2006-04-06 | |
US60/789,601 | 2006-04-06 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060049033A Division KR100803212B1 (ko) | 2006-01-11 | 2006-05-30 | 스케일러블 채널 복호화 방법 및 장치 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110056345A Division KR101259016B1 (ko) | 2006-01-11 | 2011-06-10 | 스케일러블 채널 복호화 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20070080850A KR20070080850A (ko) | 2007-08-13 |
KR101058041B1 true KR101058041B1 (ko) | 2011-08-19 |
Family
ID=38500416
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060049033A KR100803212B1 (ko) | 2006-01-11 | 2006-05-30 | 스케일러블 채널 복호화 방법 및 장치 |
KR1020070067134A KR101058041B1 (ko) | 2006-01-11 | 2007-07-04 | 스케일러블 채널 복호화 방법 및 장치 |
KR1020110056345A KR101259016B1 (ko) | 2006-01-11 | 2011-06-10 | 스케일러블 채널 복호화 방법 및 장치 |
KR1020120064601A KR101414455B1 (ko) | 2006-01-11 | 2012-06-15 | 스케일러블 채널 복호화 방법 |
KR1020120108275A KR101414456B1 (ko) | 2006-01-11 | 2012-09-27 | 스케일러블 채널 복호화 장치 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060049033A KR100803212B1 (ko) | 2006-01-11 | 2006-05-30 | 스케일러블 채널 복호화 방법 및 장치 |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110056345A KR101259016B1 (ko) | 2006-01-11 | 2011-06-10 | 스케일러블 채널 복호화 방법 및 장치 |
KR1020120064601A KR101414455B1 (ko) | 2006-01-11 | 2012-06-15 | 스케일러블 채널 복호화 방법 |
KR1020120108275A KR101414456B1 (ko) | 2006-01-11 | 2012-09-27 | 스케일러블 채널 복호화 장치 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9934789B2 (ko) |
EP (2) | EP2509071B1 (ko) |
JP (2) | JP4801742B2 (ko) |
KR (5) | KR100803212B1 (ko) |
CN (5) | CN102938253B (ko) |
WO (1) | WO2007081164A1 (ko) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1905002B1 (en) | 2005-05-26 | 2013-05-22 | LG Electronics Inc. | Method and apparatus for decoding audio signal |
JP4988716B2 (ja) | 2005-05-26 | 2012-08-01 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号のデコーディング方法及び装置 |
WO2007032648A1 (en) * | 2005-09-14 | 2007-03-22 | Lg Electronics Inc. | Method and apparatus for decoding an audio signal |
KR101218776B1 (ko) | 2006-01-11 | 2013-01-18 | 삼성전자주식회사 | 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체 |
KR100803212B1 (ko) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | 스케일러블 채널 복호화 방법 및 장치 |
EP1974348B1 (en) * | 2006-01-19 | 2013-07-24 | LG Electronics, Inc. | Method and apparatus for processing a media signal |
CN101410891A (zh) | 2006-02-03 | 2009-04-15 | 韩国电子通信研究院 | 使用空间线索控制多目标或多声道音频信号的渲染的方法和装置 |
KR20080093024A (ko) * | 2006-02-07 | 2008-10-17 | 엘지전자 주식회사 | 부호화/복호화 장치 및 방법 |
KR100773560B1 (ko) | 2006-03-06 | 2007-11-05 | 삼성전자주식회사 | 스테레오 신호 생성 방법 및 장치 |
KR100763920B1 (ko) | 2006-08-09 | 2007-10-05 | 삼성전자주식회사 | 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2채널의 바이노럴 신호로 복호화하는 방법 및 장치 |
US8571875B2 (en) | 2006-10-18 | 2013-10-29 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding multichannel audio signals |
KR101613975B1 (ko) * | 2009-08-18 | 2016-05-02 | 삼성전자주식회사 | 멀티 채널 오디오 신호의 부호화 방법 및 장치, 그 복호화 방법 및 장치 |
TWI413110B (zh) * | 2009-10-06 | 2013-10-21 | Dolby Int Ab | 以選擇性通道解碼的有效多通道信號處理 |
TWI557723B (zh) | 2010-02-18 | 2016-11-11 | 杜比實驗室特許公司 | 解碼方法及系統 |
AU2013201583B2 (en) * | 2010-02-18 | 2015-07-16 | Dolby International Ab | Audio decoder and decoding method using efficient downmixing |
US9838823B2 (en) | 2013-04-27 | 2017-12-05 | Intellectual Discovery Co., Ltd. | Audio signal processing method |
JP6228387B2 (ja) * | 2013-05-14 | 2017-11-08 | 日本放送協会 | 音響信号再生装置 |
JP6228389B2 (ja) * | 2013-05-14 | 2017-11-08 | 日本放送協会 | 音響信号再生装置 |
EP2830336A3 (en) * | 2013-07-22 | 2015-03-04 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Renderer controlled spatial upmix |
MX361115B (es) * | 2013-07-22 | 2018-11-28 | Fraunhofer Ges Forschung | Descodificador de audio multicanal, codificador de audio multicanal, métodos, programa de computadora y representación de audio codificada usando una decorrelación de señales de audio renderizadas. |
KR101805327B1 (ko) | 2013-10-21 | 2017-12-05 | 돌비 인터네셔널 에이비 | 오디오 신호들의 파라메트릭 재구성을 위한 역상관기 구조 |
FR3013496A1 (fr) * | 2013-11-15 | 2015-05-22 | Orange | Transition d'un codage/decodage par transformee vers un codage/decodage predictif |
CN106716525B (zh) * | 2014-09-25 | 2020-10-23 | 杜比实验室特许公司 | 下混音频信号中的声音对象插入 |
CN113584145A (zh) * | 2021-06-09 | 2021-11-02 | 广东省妇幼保健院 | 检测pgrmc1含量的试剂在制备诊断和预测多囊卵巢综合征的试剂盒中的应用 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5524054A (en) | 1993-06-22 | 1996-06-04 | Deutsche Thomson-Brandt Gmbh | Method for generating a multi-channel audio decoder matrix |
JP2004312484A (ja) | 2003-04-09 | 2004-11-04 | Sony Corp | 音響変換装置および音響変換方法 |
US20050195981A1 (en) | 2004-03-04 | 2005-09-08 | Christof Faller | Frequency-based coding of channels in parametric multi-channel coding systems |
Family Cites Families (56)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL121810A (en) * | 1996-02-08 | 2000-08-13 | Koninkl Philips Electronics Nv | 7-channel transmission compatible with 5-channel transmission and 2-channel transmission |
JPH11225390A (ja) | 1998-02-04 | 1999-08-17 | Matsushita Electric Ind Co Ltd | マルチチャネルデータ再生方法 |
KR20010086976A (ko) | 2000-03-06 | 2001-09-15 | 김규태, 이교식 | 채널 다운 믹싱 장치 |
JP4304401B2 (ja) * | 2000-06-07 | 2009-07-29 | ソニー株式会社 | マルチチャンネルオーディオ再生装置 |
EP2299735B1 (en) | 2000-07-19 | 2014-04-23 | Koninklijke Philips N.V. | Multi-channel stereo-converter for deriving a stereo surround and/or audio center signal |
KR20020018730A (ko) | 2000-09-04 | 2002-03-09 | 박종섭 | 멀티채널 비디오/오디오 신호의 저장 및 재생장치 |
WO2004019656A2 (en) * | 2001-02-07 | 2004-03-04 | Dolby Laboratories Licensing Corporation | Audio channel spatial translation |
US7660424B2 (en) * | 2001-02-07 | 2010-02-09 | Dolby Laboratories Licensing Corporation | Audio channel spatial translation |
JP2002318598A (ja) * | 2001-04-20 | 2002-10-31 | Toshiba Corp | 情報再生装置、情報再生方法、情報記録媒体、情報記録装置、情報記録方法、および情報記録プログラム |
US7116787B2 (en) * | 2001-05-04 | 2006-10-03 | Agere Systems Inc. | Perceptual synthesis of auditory scenes |
US7292901B2 (en) | 2002-06-24 | 2007-11-06 | Agere Systems Inc. | Hybrid multi-channel/cue coding/decoding of audio signals |
US7006636B2 (en) * | 2002-05-24 | 2006-02-28 | Agere Systems Inc. | Coherence-based audio coding and synthesis |
TW569551B (en) | 2001-09-25 | 2004-01-01 | Roger Wallace Dressler | Method and apparatus for multichannel logic matrix decoding |
US7068792B1 (en) * | 2002-02-28 | 2006-06-27 | Cisco Technology, Inc. | Enhanced spatial mixing to enable three-dimensional audio deployment |
BRPI0308691B1 (pt) * | 2002-04-10 | 2018-06-19 | Koninklijke Philips N.V. | “Métodos para codificar um sinal de canal múltiplo e para decodificar informação de sinal de canal múltiplo, e arranjos para codificar e decodificar um sinal de canal múltiplo” |
JP4322207B2 (ja) | 2002-07-12 | 2009-08-26 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | オーディオ符号化方法 |
JP2004194100A (ja) * | 2002-12-12 | 2004-07-08 | Renesas Technology Corp | オーディオ復号再生装置 |
KR20040078183A (ko) | 2003-03-03 | 2004-09-10 | 학교법인고려중앙학원 | 비정질 코발트-나이오븀-지르코늄 합금을 하지층으로사용한 자기터널접합 |
SE0301273D0 (sv) * | 2003-04-30 | 2003-04-30 | Coding Technologies Sweden Ab | Advanced processing based on a complex-exponential-modulated filterbank and adaptive time signalling methods |
JP2005069274A (ja) | 2003-08-28 | 2005-03-17 | Nsk Ltd | 転がり軸受 |
US8054980B2 (en) * | 2003-09-05 | 2011-11-08 | Stmicroelectronics Asia Pacific Pte, Ltd. | Apparatus and method for rendering audio information to virtualize speakers in an audio system |
JP4221263B2 (ja) | 2003-09-12 | 2009-02-12 | 財団法人鉄道総合技術研究所 | 乗車列車同定システム |
JP4134869B2 (ja) | 2003-09-25 | 2008-08-20 | 三菱電機株式会社 | 撮像装置 |
JP4089895B2 (ja) | 2003-09-25 | 2008-05-28 | 株式会社オーバル | 渦流量計 |
US7447317B2 (en) | 2003-10-02 | 2008-11-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V | Compatible multi-channel coding/decoding by weighting the downmix channel |
KR20050060789A (ko) * | 2003-12-17 | 2005-06-22 | 삼성전자주식회사 | 가상 음향 재생 방법 및 그 장치 |
US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
RU2396608C2 (ru) * | 2004-04-05 | 2010-08-10 | Конинклейке Филипс Электроникс Н.В. | Способ, устройство, кодирующее устройство, декодирующее устройство и аудиосистема |
SE0400997D0 (sv) * | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Efficient coding of multi-channel audio |
SE0400998D0 (sv) | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Method for representing multi-channel audio signals |
JP4123376B2 (ja) | 2004-04-27 | 2008-07-23 | ソニー株式会社 | 信号処理装置およびバイノーラル再生方法 |
KR100677119B1 (ko) | 2004-06-04 | 2007-02-02 | 삼성전자주식회사 | 와이드 스테레오 재생 방법 및 그 장치 |
KR100644617B1 (ko) | 2004-06-16 | 2006-11-10 | 삼성전자주식회사 | 7.1 채널 오디오 재생 방법 및 장치 |
KR100663729B1 (ko) | 2004-07-09 | 2007-01-02 | 한국전자통신연구원 | 가상 음원 위치 정보를 이용한 멀티채널 오디오 신호부호화 및 복호화 방법 및 장치 |
CN1985544B (zh) * | 2004-07-14 | 2010-10-13 | 皇家飞利浦电子股份有限公司 | 处理立体声下混合信号的方法、装置、编译码器和系统 |
US8204261B2 (en) * | 2004-10-20 | 2012-06-19 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Diffuse sound shaping for BCC schemes and the like |
US20060106620A1 (en) * | 2004-10-28 | 2006-05-18 | Thompson Jeffrey K | Audio spatial environment down-mixer |
US7573912B2 (en) * | 2005-02-22 | 2009-08-11 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschunng E.V. | Near-transparent or transparent multi-channel encoder/decoder scheme |
KR20060109296A (ko) | 2005-04-14 | 2006-10-19 | 엘지전자 주식회사 | 멀티채널 오디오 신호에 대한 서브밴드별 공간 정보의 변동기준채널 적용방법 |
KR20070005469A (ko) | 2005-07-05 | 2007-01-10 | 엘지전자 주식회사 | 다채널 오디오 신호의 디코딩 장치 및 디코딩 방법 |
KR100880642B1 (ko) * | 2005-08-30 | 2009-01-30 | 엘지전자 주식회사 | 오디오 신호의 디코딩 방법 및 장치 |
KR20070035411A (ko) | 2005-09-27 | 2007-03-30 | 엘지전자 주식회사 | 멀티 채널 오디오 신호의 공간 정보 부호화/복호화 방법 및장치 |
JP5025113B2 (ja) * | 2005-09-29 | 2012-09-12 | 三洋電機株式会社 | 回路装置 |
US7974713B2 (en) * | 2005-10-12 | 2011-07-05 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Temporal and spatial shaping of multi-channel audio signals |
WO2007080211A1 (en) * | 2006-01-09 | 2007-07-19 | Nokia Corporation | Decoding of binaural audio signals |
JP4944902B2 (ja) | 2006-01-09 | 2012-06-06 | ノキア コーポレイション | バイノーラルオーディオ信号の復号制御 |
KR101218776B1 (ko) * | 2006-01-11 | 2013-01-18 | 삼성전자주식회사 | 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체 |
KR100803212B1 (ko) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | 스케일러블 채널 복호화 방법 및 장치 |
JP4940671B2 (ja) | 2006-01-26 | 2012-05-30 | ソニー株式会社 | オーディオ信号処理装置、オーディオ信号処理方法及びオーディオ信号処理プログラム |
EP4178110B1 (en) * | 2006-01-27 | 2024-04-24 | Dolby International AB | Efficient filtering with a complex modulated filterbank |
JP3905118B1 (ja) * | 2006-06-21 | 2007-04-18 | 英生 住野 | ヘルメット |
JP4875413B2 (ja) * | 2006-06-22 | 2012-02-15 | グンゼ株式会社 | 衣類 |
US7876904B2 (en) * | 2006-07-08 | 2011-01-25 | Nokia Corporation | Dynamic decoding of binaural audio signals |
KR100763919B1 (ko) | 2006-08-03 | 2007-10-05 | 삼성전자주식회사 | 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2 채널의 바이노럴 신호로 복호화하는 방법 및 장치 |
AU2007201109B2 (en) | 2007-03-14 | 2010-11-04 | Tyco Electronics Services Gmbh | Electrical Connector |
KR200478183Y1 (ko) | 2015-04-07 | 2015-09-08 | (주)아이셈자원 | 고철 분리기 |
-
2006
- 2006-05-30 KR KR1020060049033A patent/KR100803212B1/ko active IP Right Grant
-
2007
- 2007-01-11 JP JP2008550237A patent/JP4801742B2/ja active Active
- 2007-01-11 US US11/652,031 patent/US9934789B2/en active Active
- 2007-01-11 EP EP12002670.3A patent/EP2509071B1/en active Active
- 2007-01-11 CN CN201210458715.2A patent/CN102938253B/zh active Active
- 2007-01-11 WO PCT/KR2007/000201 patent/WO2007081164A1/en active Application Filing
- 2007-01-11 CN CN201210457153.XA patent/CN103354090B/zh active Active
- 2007-01-11 CN CN200780002329XA patent/CN101371300B/zh active Active
- 2007-01-11 CN CN201210458826.3A patent/CN103021417B/zh active Active
- 2007-01-11 CN CN201210459124.7A patent/CN103000182B/zh active Active
- 2007-01-11 EP EP07708487A patent/EP1977418A4/en not_active Withdrawn
- 2007-07-04 KR KR1020070067134A patent/KR101058041B1/ko active IP Right Grant
-
2011
- 2011-06-10 KR KR1020110056345A patent/KR101259016B1/ko active IP Right Grant
- 2011-06-15 JP JP2011133621A patent/JP5129368B2/ja active Active
-
2012
- 2012-06-15 KR KR1020120064601A patent/KR101414455B1/ko active IP Right Grant
- 2012-09-27 KR KR1020120108275A patent/KR101414456B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5524054A (en) | 1993-06-22 | 1996-06-04 | Deutsche Thomson-Brandt Gmbh | Method for generating a multi-channel audio decoder matrix |
JP2004312484A (ja) | 2003-04-09 | 2004-11-04 | Sony Corp | 音響変換装置および音響変換方法 |
US20050195981A1 (en) | 2004-03-04 | 2005-09-08 | Christof Faller | Frequency-based coding of channels in parametric multi-channel coding systems |
Non-Patent Citations (1)
Title |
---|
MPEG Spatial Audio Coding/MPEG Surround: Overview and Current Status, The 119th AES convention 논문집 (2005.10.7.)* |
Also Published As
Publication number | Publication date |
---|---|
KR101414455B1 (ko) | 2014-07-03 |
KR100803212B1 (ko) | 2008-02-14 |
KR101414456B1 (ko) | 2014-07-03 |
US9934789B2 (en) | 2018-04-03 |
EP1977418A4 (en) | 2010-02-03 |
CN101371300A (zh) | 2009-02-18 |
CN103000182B (zh) | 2016-05-11 |
EP2509071B1 (en) | 2016-01-06 |
KR20070080850A (ko) | 2007-08-13 |
JP5129368B2 (ja) | 2013-01-30 |
WO2007081164A1 (en) | 2007-07-19 |
CN103021417B (zh) | 2015-07-22 |
CN102938253A (zh) | 2013-02-20 |
CN103354090A (zh) | 2013-10-16 |
KR20110083580A (ko) | 2011-07-20 |
KR20120121378A (ko) | 2012-11-05 |
KR20120084278A (ko) | 2012-07-27 |
CN103021417A (zh) | 2013-04-03 |
EP2509071A1 (en) | 2012-10-10 |
US20070233296A1 (en) | 2007-10-04 |
CN102938253B (zh) | 2015-09-09 |
CN103000182A (zh) | 2013-03-27 |
EP1977418A1 (en) | 2008-10-08 |
JP4801742B2 (ja) | 2011-10-26 |
CN103354090B (zh) | 2017-06-16 |
KR101259016B1 (ko) | 2013-04-29 |
CN101371300B (zh) | 2013-01-02 |
JP2009523354A (ja) | 2009-06-18 |
JP2011217395A (ja) | 2011-10-27 |
KR20070075236A (ko) | 2007-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101058041B1 (ko) | 스케일러블 채널 복호화 방법 및 장치 | |
KR101218776B1 (ko) | 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체 | |
KR100888474B1 (ko) | 멀티채널 오디오 신호의 부호화/복호화 장치 및 방법 | |
KR101044948B1 (ko) | 스테레오 신호 생성 방법 및 장치 | |
KR20070038020A (ko) | 오디오 신호 처리 방법 및 장치와 프로그램을 기록하는컴퓨터로 읽을 수 있는 기록 매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
A107 | Divisional application of patent | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140730 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20150730 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20160728 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20170728 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20190730 Year of fee payment: 9 |