KR100891688B1 - 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 - Google Patents
멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 Download PDFInfo
- Publication number
- KR100891688B1 KR100891688B1 KR20087011932A KR20087011932A KR100891688B1 KR 100891688 B1 KR100891688 B1 KR 100891688B1 KR 20087011932 A KR20087011932 A KR 20087011932A KR 20087011932 A KR20087011932 A KR 20087011932A KR 100891688 B1 KR100891688 B1 KR 100891688B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- configuration information
- multichannel
- downmix
- spatial
- Prior art date
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 48
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013139 quantization Methods 0.000 claims 3
- 238000010586 diagram Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Multimedia (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereophonic System (AREA)
- Time-Division Multiplex Systems (AREA)
Abstract
본 발명은 멀티채널 오디오 신호 부호화 및 복호화 방법과 그 장치에 관한 것이다. 본 부호화 방법에서는 멀티채널 오디오 신호와 다운믹스 신호에 기초하여 산출한 공간정보를 부호화하고, 부호화된 공간정보에서 선택된 부가적 구성정보를 생성한다. 그리고, 다운믹스 신호를 부호화하여 부호화된 공간정보와 결합하고, 부가적 구성정보를 소정 구간에 삽입한 비트스트림을 생성한다. 본 발명에 따르면, 헤더 등에 포함되는정보의 일부 혹은 전체를 재전송하여 사용환경에 따라 최적의 비트스트림을 구성할 수 있다.
Description
본 발명은 부호화 및 복호화 방법과 그 장치에 관한 것으로서, 더욱 상세하게는 헤더 등에 포함되는 정보의 전부 혹은 일부의 재전송이 가능하도록 멀티채널 오디오 신호를 부호화 및 복호화하는 부호화 및 복호화 방법과 그 장치에 관한 것이다.
일반적으로 멀티채널 오디오 신호 부호화 방법은, 각 채널별로 신호를 모두 부호화하는 대신, 멀티채널 오디오 신호를 모노 신호 혹은 스테레오 신호로 다운믹스한 신호를 부호화하는 방식을 사용한다. 이때, 공간적 큐(Spatial Cue) 등을 표현하기 위한 공간정보(spatial information)가 부가정보로써 함께 부호화된다.
도 1은 일반적인 멀티채널 오디오 신호 부호화 방법을 통해 생성되는 멀티채널 오디오 신호의 비트스트림에 대한 구성을 나타낸 것이다. 도 1을 참조하면, 멀티채널 오디오 신호의 비트스트림은 프레임(Frame) 단위로 분할되어 전송되거나 복호화되며, 그 첫번째 프레임 앞에 헤더(Header) 영역이 존재한다. 헤더 영역에는 SAC 구성(Spatial Audio Coding Configuration) 정보 등이 포함되며, 각 프레임에는 해당 프레임에 대한 공간정보 등이 포함된다. 헤더 영역에 포함되는 SAC 구성 정보는 각 프레임에 공통적으로 적용될 수 있는 내용, 즉 표본화 주파수, 프레임 길이, 및 멀티채널 오디오 신호가 어떤 조합으로 다운믹스되어 있는지 등과 같은 정보를 포함한다.
그런데, SAC 구성 정보 등은 비트스트림의 헤더 영역에 포함되므로, 파일 헤더와 같이 전체 비트스트림에서 처음 한 번만 포함된다. 따라서, 스트리밍 서비스(streaming service)와 같이 처음부터 멀티채널 오디오 신호의 비트스트림을 전송받을 수 없는 환경에서는 복호화에 필요한 필수 정보를 획득하기 어렵게 된다.
또한, 멀티채널 오디오 신호가 어떠한 조합으로 다운믹스 되었는지를 나타내는 정보 등도 SAC 구성 정보에 한 번만 포함되므로, 멀티채널 오디오 신호 전체에 대하여 한가지 다운믹스 조합만을 사용할 수 있다. 따라서, 프레임별로 다운믹스 조합을 변경하거나, 다른 구성으로 복호화할 수 없는 등, 멀티채널 오디오 신호의 프레임마다 최적의 효율을 갖도록 부호화 혹은 복호화할 수 없다.
기술적 과제
따라서, 본 발명의 목적은, 헤더 등에서 선택된 정보를 부가적 구성정보로 재전송가능하게 부호화하는 부호화 방법 및 그 장치를 제공함에 있다.
본 발명의 다른 목적은, 헤더 등에서 선택된 부가적 구성정보가 포함된 비트스트림을 복호화하는 복호화 방법 및 그 장치를 제공하는데 있다.
기술적 해결방법
상기 목적을 달성하기 위한 본 발명에 따른 부호화 방법은, 멀티채널 오디오 신호로부터 생성되는 다운믹스 신호 및 상기 멀티채널 오디오 신호와 다운믹스 신호에 기초하여 산출한 공간정보를 생성하는 단계; 상기 공간정보의 헤더에 포함되는 부가적 구성정보를, 프레임단위로 분할된 상기 공간정보의 프레임 내 소정 구간에 포함시켜 부가정보를 생성하는 단계;및 상기 다운믹스 신호와 상기 부가정보를 결합하고, 상기 부가정보내에 상기 부가적 구성정보가 삽입되었는지 여부를 나타내는 제 1 재전송정보 플래그를 삽입하여 비트스트림을 생성하는 단계를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명에 따른 부호화 장치는, 멀티채널 오디오 신호에 대한 다운믹스 신호를 생성하는 다운믹스부; 상기 다운믹스 신호를 부호화하는 코아 인코더; 상기 멀티채널 오디오 신호의 공간정보를 산출하는 공간정보 생성부; 상기 공간정보를 부호화하는 파라미터 인코더; 및 상기 부호화된 공간정보와 상기 부호화된 다운믹스 신호를 결합하고, 상기 부호화된 공간정보에서 선택된 부가적 구성정보를 소정 구간에 삽입한 비트스트림을 생성하는 비트스트림 생성부를 포함하고, 상기 비트스트림 생성부는, 상기 비트스트림 내에 상기 부호화된 공간정보로부터 선택된 부가적 구성정보 및 상기 부가적 구성정보가 상기 비트스트림에 삽입되었는지 여부를 나타내는 제 1 플래그를 삽입하는 것을 특징으로 한다.
한편, 본 발명에 따른 복호화 방법은, 다운믹스 신호 및 부가정보를 포함하는 비트스트림을 수신하는 단계; 상기 비트스트림에서 상기 다운믹스 신호 및 상기 부가정보를 분리하는 단계; 상기 부가정보로부터 상기 부가정보에 부가적 구성정보가 포함되었는지 여부를 나타내는 제 1 플래그를 획득하는 단계; 상기 제 1 플래그에 기초하여 상기 부가적 구성정보가 포함된 경우, 상기 부가적 구성정보를 추출하는 단계; 및 상기 추출된 부가적 구성정보를 이용하여 멀티채널 오디오 신호를 생성하는 단계;를 포함한다.
본 발명에 따르면, 입력받은 비트스트림의 프레임에서 부호화된 다운믹스 신호와 부가 정보를 각각 분리하는 디멀티플렉서; 상기 부호화된 다운믹스 신호를 복호화하여 다운믹스 신호를 생성하는 코아 디코더; 상기 부가정보에 포함된 정보를 참조하여, 부가적 구성정보가 상기 부가정보에 삽입되었는지 여부를 판단하여, 상기 부가적 구성정보가 상기 부가정보에 삽입된 경우, 상기 부가적 구성정보를 복호화하여 공간정보를 생성하는 파라미터 디코더; 상기 공간정보와 상기 다운믹스 신호를 이용하여 멀티채널 오디오 신호를 생성하는 멀티채널 합성부;를 포함하는 복호화 장치가 제공된다.
또한, 상기 목적을 달성하기 위하여 본 발명에서는, 상기 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 프로세서가 읽을 수 있는 기록매체를 제공한다.
유리한 효과
본 발명에 따르면, 헤더 등에 포함되는 정보의 일부 혹은 전부를 특정 프레임에 포함시켜 재전송할 수 있도록 부호화되므로, 스트리밍(streaming) 서비스의 경우 등에 유용하게 사용할 수 있다. 또한, 필요에 따라 프레임(frame)마다 다른 구성(config)을 갖도록 부호화 및 복호화할 수 있으므로, 사용환경에 따라 최적의 비트스트림 생성할 수 있다.
또한, 선택된 공간정보를 필요한 프레임에만 전송할 수 있으므로, 신호의 품질을 유지하면서도 전송할 데이터량을 효과적으로 감소시킬 수 있다.
도 1은 일반적인 멀티채널 오디오 신호의 비트스트림 구성을 나타낸 도면,
도 2는 본 발명에 따른 부호화 및 복호화 방법이 적용되는 멀티채널 오디오 부호화/복호화 장치의 일 예에 대한 블럭도,
도 3 및 도 4는 본 발명에서 사용되는 공간정보의 syntax의 일 예를 나타낸 도면,
도 5 및 도 6은 본 발명의 일실시예에 따른 복호화 방법의 설명에 제공되는 흐름도, 그리고
도 7은 본 발명의 다른 실시예에 따른 복호화 방법의 설명에 제공되는 흐름도이다.
발명의 실시를 위한 최선의 형태
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
본 발명에 따른 멀티채널 오디오 신호 부호화 및 복호화 방법은 기본적으로 멀티채널 오디오 신호의 처리 과정에 적용되지만, 반드시 이에 국한되는 것은 아니며 본 발명에 따른 조건을 만족하는 다른 신호의 처리 과정에 적용이 가능하다.
도 2는 본 발명에 따른 부호화 및 복호화 방법이 적용되는 멀티채널 오디오 부호화/복호화 장치의 일 예에 대한 블럭도이다. 도 2를 참조하면, 본 실시예에 따른 부호화 장치(100)는 다운믹스부(110), 공간정보 생성부(120), 코아 인코더(130), 파라미터 인코더(135), 및 비트스트림 생성부(140)를 포함한다. 그리고, 멀티채널 오디오 복호화 장치(200)는, 디멀티 플렉서(210), 코아 디코더(220), 파라미터 디코더(230), 및 멀티채널 합성부(240)를 포함한다.
부호화 장치(100)에서, 다운믹스부(110)는 n개의 채널로 구성된 멀티채널 오디오 신호를 모노 혹은 스테레오 신호로 다운믹스(downmix)하여 다운믹스 신호를 생성한다. 사용 환경에 따라서는 외부에서 가공한 임의의 다운믹스 신호(Artistic Downmix)를 다운믹스 신호로 사용할 수도 있다. 공간정보 생성부(120)는 멀티채널 오디오 신호에 대한 공간정보(spatial information)를 산출하며, 코아 인코더(130)는 다운믹스부(110)에 출력되는 다운믹스 신호를 부호화하여 부호화된 다운믹스 신 호를 생성한다. 파라미터 인코더(135)는 공간정보 생성부(120)에서 생성한 공간정보를 부호화한다.
비트스트림 생성부(140)는 부호화된 다운믹스 신호 및 공간정보를 결합하여 비트스트림을 생성하며, 필요에 따라 비트스트림의 소정 구간에 부가적 구성정보를 삽입한다. 이때, 부가적 구성정보는 헤더 등에 포함된 공간정보나 기타정보의 전부 혹은 일부에 대응하는 정보이다. 따라서, 공간정보와 추가된 부가적 구성정보는 부가정보로써 비트스트림 생성부(140)에서 생성한 비트스트림에 포함가능하다.
복호화 장치(200)에서, 디멀티플렉서(210)는 전송된 비트스트림을 수신하여 부호화된 다운믹스 신호와 부가정보로 분리한다. 코아 디코더(220)는 부호화된 다운믹스 신호를 복호화하여 다운믹스 신호를 생성한다. 파라미터 디코더(230)는 부가정보를 복호화하여 공간정보를 생성한다. 이때, 부가정보에 추가된 부가적 구성정보가 포함되어 있으면, 추가된 부가적 구성정보를 이용하여 공간정보를 생성한다. 멀티채널 합성부(240)는 공간정보와 다운믹스 신호를 이용하여 멀티채널 오디오 신호를 생성한다.
도 3 및 도 4는 본 발명에서 사용되는 공간정보의 syntax의 일 예를 나타낸 도면이다. 도 3에서, SpatialSpecificConfig()는 헤더 영역에 포함되는 공간정보(spatial information)를 나타내며, 도 4에서 SpatialFrame()는 각 프레임에 대응하는 정보인 프레임 정보를 나타낸다.
SpatialSpecificConfig()는 SAC 구성 정보에 대응하며, 각 프레임에 공통적으로 적용될 수 있는 공간정보를 나타내며, 표본화 주파수를 나타내는 bsSamplingFrequency, 프레임 길이를 나타내는 bsFrameLength, 멀티 채널 신호가 어떤 조합으로 다운 믹스되어 있는지를 나타내는 bsTreeConfic 등과 같은 정보가 포함되어 있다. 그리고, SpatialFrame()은 파라미터 셋의 개수와 관련된 타임 슬롯에 대한 정보를 나타내는 Fraiminginfo() 등과 같이 각 프레임에 대응하는 공간정보가 포함된다.
이러한 정보에서, 본 발명에 따른 부호화 방법에서는, SpatialSpecficConfig (), 즉 SAC 구성 정보에 포함된 정보의 전부 혹은 일부에 대응하는 정보를 부가적 구성정보로 특정 프레임 혹은 모든 프레임마다 포함시켜 부호화할 수 있다. 따라서, SAC 구성 정보 등이 비트스트림의 헤더에 한 번만 포함되는 것이 아니라, 특정 프레임 혹은 모든 프레임마다 포함되도록 부호화된다.
이와 같이 부가적 구성정보가 소정 프레임에 삽입된 멀티채널 오디오 신호의 비트스트림을 복호화하기 위해 다음과 같은 방법을 사용하여 부호화한다.
먼저, SpatialSpecificConfig() 전체에 대응하는 부가적 구성정보를 특정 프레임에 재전송하기 위해, SpatialFrame() 내에 부가적 구성정보가 재전송되는지 여부를 나타내는 재전송 플래그를 설정한다. 예컨대, 이 재전송 플래그를 bsResendSptialSpecificConficFrame 라 하면, 복호화 과정에서는 이 재전송 플래그가 셋(set) 되어 있는 경우, SpatialSpecifigConfig() 전체에 대응하는 부가적 구성정보가 포함되어 있는 것을 알 수 있다.
또한, 헤더에 포함되는 SpatialSpecifigConfig() 안에 재전송 플래그를 설정할 수 있다. 예컨대, 헤더내 설정되는 재전송 플래그를 bsResendSpatialSpecificConfigHeader 라 하면, 이 재전송 플래그가 셋 되어 있는 경우, SpatialFrame()내의 재전송 플래그(bsResendSpatialSpecificConficFrame)의 셋 여부를 다시 검사하여, 이에 따라 부가적 구성정보를 다시 전송받을 수 있다. 만일, 헤더 안에 재전송 플래그가 셋 되어 있지 않으면, 부가적 구성정보가 포함되지 않은 비트스트림임을 알 수 있으므로, 프레임내 재전송 플래그를 체크하는 과정없이 복호화 과정이 진행될 수 있다.
부가적 구성정보를 SpatialSpecificConfig() 전체에 대응하도록 구성하는 대신, 이 중에서 선택된 특정 파라미터(parameter)만으로 구성할 수 있다. 특정 파라미터 셋(set)을 SpatialSpecificConfigParam 이라 하면, SpatialFrame() 안에 SpatialSpecifigConfigParam가 재전송되는지에 대한 플래그, 예컨대, bsResendSpatialSpecificConficParamFrame를 두어, 이 재전송 플래그가 셋 되어 있는 경우 SpatialSpecifigConfigParam 가 다시 전송되는 것을 알 수 있다.
마찬가지로, 헤더에 포함되는 SpatialSpecifigConfig()내에 재전송 가능 플래그, 예컨대 bsResendSpatialSpecificConfigParamHeader를 두어 이 플래그가 셋 되어 있는 경우, SpatialFrame()에서 SpatialSpecificConfigParam 가 재전송되는지에 대한 플래그(bsResendSpatialSpecificConficParamFrame)를 다시 체크하여, 이에 따라 부가적 구성정보를 다시 전송받을 수 있다. 이 경우에도, 헤더내 재전송 플래그가 셋 되어있지 않으면, 부가적 구성정보가 포함되지 않은 일반적인 비트스트림임을 알 수 있다.
이와 같은 방법을 통해 헤더 등에 포함되는 공간정보의 전부 혹은 일부를 주 기적으로 재전송하거나, 필요에 따라 선택된 프레임에 포함시켜 재전송할 수 있도록 부호화할 수 있다.
한편, 헤더에 포함되는 공간정보의 일부에 대응하는 SpatialSpecificConfigParam을 구성함에 있어서 SpatialSpecficConfig()에 포함된 정보 중 적어도 어느 하나를 포함하도록 구성할 수 있다.
다음의 [표 1]의 SpatialSpecConfig()에 포함된 각 변수를 정의한다.
표 1
예를 들어, 멀티채널 오디오 신호가 어떤 조합으로 다운믹스 되었는지를 나타내는 bsTreeConfig를 재전송하기 위하여, SpatialFrame() 안에 bsTreeConfig가 재전송되는지에 대한 플래그, 예컨대 bsResendTreeConfigFrame를 두어, 이 플래그 가 셋팅되어 있는 경우, bsTreeConfig 가 재전송되었음을 알 수 있다.
또한, 전술한 바와 같이, SpatialSpecifigConfigHeader 안에 재전송 가능 플래그, 예컨대 bsResendTreeConfigHeader를 두어 이 플래그가 셋 되어 있는 경우, SpatialFrame()에서 bsTreeConfig가 재전송되는지에 대한 플래그(bsResendTreeConfigFrame)를 다시 체크(check) 하도록 하는 것도 가능하다.
이와 같은 방법을 통해 bsTreeConfig를 주기적으로 재전송하거나 필요에 따라 선택적으로 재전송할 수 있으며, bsTreeConfig를 프레임마다 필요에 따라 다르게 설정할 경우, 보다 효율적으로 신호의 저장 및 전송이 가능해 진다.
예를 들어, 신호 구간에 따라 다섯 채널로 구성된 멀티채널 오디오 신호가 모노 신호로 표현되어도 그 품질이 유지되는 구간과 스테레오 신호로 압축되어야 하는 구간이 존재한다면, 종래의 방법은 품질 유지를 위해 계속 스테레오 신호로 부호화하여야 하지만, 본 발명에 따르면 필요한 구간에서만 스테레오 신호로 부호화할 수 있다. 또한, 같은 모노 신호로 부호화하는 경우에도, 신호 특성에 따라 모드를 변환할 수 있어 같은 비트율에서 더 좋은 품질의 신호를 얻을 수 있다.
그리고, bsTreeConfig를 재전송하는 대신 이를 bsTreeExt, bsTreeCh, bsTreeCfg 의 3 비트로 나누어 사용할 수 있다. 이 경우, bsTreeExt = 1이면, bsTreeConfig 이 15인 경우, 즉 extended signaling 으로 TreeDescription 을 받아들인다. 또한, bsTreeExt = 0 인 경우, bsTreeCh 를 받아서 bsTreeCh = 0 이면 515 구성, bsTesCh = 1 이면 525 구성으로 할 수 있다. 그리고, bsTreeExt = 0 이고 bsTreeCh = 0 인 경우에 대해, bsTreeCfg = 0 이면 5151, bsTreeCfg = 1 이면 5152 로 하는 방법을 사용할 수 있다. 이와 같은 방법으로, 최소 2비트를 가지고도 표현할 수 있어, 사용 비트수를 감소시킬 수 있다.
도 5 및 도 6은 본 발명의 일실시예에 따른 복호화 방법의 설명에 제공되는 흐름도이다. 도 5를 참조하면, 멀티채널 오디오 복호화 과정에서 멀티채널 오디오 신호의 헤더를 입력받으면(S400), 헤더내에 설정되어 있는 재전송 플래그(bsResendSpatialSpecificConfigHeader)가 셋(set) 되었는지 여부를 판단한다(S405). 판단 결과, 헤더내 재전송 플래그가 셋 되어있지 않으면, 부가적 구성정보가 포함되는 않은 경우이므로, 도 6에 도시한 바와 같이, 헤더에 포함된 구성정보를 공간정보로 이용하여 멀티채널 오디오 신호를 생성한다(S440 내지 S450).
그러나, 헤더내 재전송 플래그(bsResendSpatialSpecificConfigHeader)가 셋되어 있는 경우이면, 부가적 구성정보가 재전송되는 경우이므로, 다음 프레임을 입력받아(S410), 그 프레임내 포함된 재전송 플래그(bsResendSpatialSpecificConficFrame)가 셋 되었는지 여부를 판단한다(S415). 판단 결과, 프레임내 재전송 플래그가 셋 되어 있으면, 부가적 구성정보를 추출한다(S420). 이때, 부가적 구성정보는 현재의 프레임에 포함되어 있거나 혹은 이전 프레임내에 존재할 수 있다.
부가적 구성정보가 추출되면, 추출된 구성정보를 이용하여 다운믹스 신호로부터 멀티채널 오디오 신호를 생성한다(S425). 즉, 수신한 프레임에서 부호화된 다운믹스 신호와 프레임 정보를 각각 분리하고, 추출한 부가적 구성정보와 프레임 정보를 이용하여 공간정보를 생성하고, 생성한 공간정보와 다운믹스 신호를 이용하여 멀티채널 오디오 신호를 생성한다. 만일, 부가적 구성정보가 헤더내 포함된 공간정보의 일부라면, 공간정보의 생성에 필요한 나머지 정보는 헤더에서 추출한 공간정보를 이용한다. 프레임내 재전송 플래그가 셋되어 있지 않으면, 헤더에서 추출한 구성정보를 이용하여 멀티채널 오디오신호를 생성한다(S435). 이와 같은 과정은, 스트림 종료시까지 반복적으로 수행된다.
도 7은 본 발명의 다른 실시예에 따른 복호화 방법의 설명에 제공되는 흐름도이다. 본 실시예의 경우에는 헤더내에 재전송 플래그가 포함되지 않고, 프레임내에만 재전송 플래그가 포함된 경우이다. 도 6을 참조하면, 멀티채널 오디오 신호의 복호화 장치에서, 프레임을 입력받으면(S500), 프레임내 재전송 플래그가 셋 되었는지 여부를 판단한다(S505). 판단결과, 재전송 플래그가 셋되어 있으면, 부가적 구성정보를 추출한다(S510). 추출한 부가적 구성정보를 이용하여 멀티채널 오디오 신호를 생성한다(S515). 즉, 부가적 구성정보와 프레임내 정보를 이용하여 공간정보를 생성하고, 생성한 공간정보와 다운믹스 신호를 이용하여 멀티채널 오디오 신호를 생성한다.
이와 달리, 재전송 플래그가 셋되어 있지 않으면, 헤더에서 추출한 구성정보와 프레임 정보를 이용하여 공간정보를 생성하고, 생성한 공간정보와 다운믹스 신호를 이용하여 멀티채널 오디오 신호를 생성한다(S525).
이와 같은 방법에 의해, 선택된 프레임내 부가적 구성정보를 삽입하여, 스트리밍 서비스와 같이 처음부터 비트스트림을 수신하지 못하는 경우에도, 멀티채널 오디오 신호를 생성할 수 있다.
한편, 본 발명은 또한 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서가 설치된 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
본 발명은 멀티채널 오디오 신호의 부호화 및 복호과 과정 등에 사용되어, 헤더 등에 포함되는 정보의 전부 혹은 일부를 재전송할 수 있다.
Claims (23)
- 다운믹스 신호를 포함하는 비트스트림의 부가정보 영역으로부터 공간정보 프레임을 획득하는 단계;상기 공간정보 프레임에 포함된, 공간정보의 구성정보를 획득하는 단계;상기 구성정보에 포함된 멀티채널 구성정보를 이용하여 상기 다운믹스 신호를 분할하는 단계; 및상기 구성정보에 포함된 다운믹스 게인 정보 및 상기 멀티채널을 구성하는 채널에 대한 채널 게인 정보를 이용하여, 상기 분할된 다운믹스 신호로부터 상기 멀티채널 오디오 신호를 복원하는 단계를 포함하는 오디오 신호의 디코딩 방법.
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 제 1 항에 있어서,상기 구성정보는 상기 공간정보 프레임에 상기 구성정보가 포함되었는지를 나타내는 플래그 정보에 기초하여 획득되는 것을 특징으로 하는 오디오 신호의 디코딩 방법.
- 삭제
- 삭제
- 삭제
- 제 7 항에 있어서,상기 플래그 정보는 상기 구성정보가 재전송되었는지를 나타내는 것을 특징으로 하는 오디오 신호의 디코딩 방법.
- 제 1 항에 있어서,상기 구성정보는 파라미터 밴드 개수 정보, 표준화 주파수 정보, 프레임 길이 정보, 디코릴레이터 모드 정보, 3D 오디오 모드 정보, 엔벨로프 보정의 양자화 모드 정보, 및 HRTF 파라미터 정보를 포함하는 것을 특징으로 하는 오디오 신호의 디코딩 방법.
- 다운믹스 신호를 포함하는 비트스트림의 부가정보 영역으로부터 공간정보 프레임을 획득하고, 상기 공간정보 프레임에 포함된 공간정보의 구성정보를 획득하는 파라미터 디코더; 및상기 구성정보에 포함된 멀티채널 구성정보를 이용하여 상기 다운믹스 신호를 분할하고, 상기 구성정보에 포함된 다운믹스 게인 정보 및 상기 멀티채널을 구성하는 채널에 대한 채널 게인 정보를 이용하여 상기 분할된 다운믹스 신호로부터 상기 멀티채널 오디오 신호를 복원하는 멀티채널 합성부를 포함하는 것을 특징으로 하는 오디오 신호의 디코딩 장치.
- 멀티채널 오디오 신호로부터 다운믹스 신호 및 공간 정보를 생성하는 단계; 및상기 공간정보의 구성정보를 상기 다운믹스 신호를 포함하는 비트스트림의 부가정보 영역에 포함시키는 단계를 포함하고,상기 구성정보는 멀티채널 구성 정보, 다운믹스 게인 정보 및 상기 멀티채널을 구성하는 채널에 대한 채널 게인 정보를 포함하며,상기 멀티채널 구성 정보를 이용하여 상기 다운믹스 신호를 분할하고, 상기 분할된 다운믹스 신호에 상기 다운믹스 게인 정보 및 상기 채널 게인 정보를 적용하여, 상기 멀티채널 오디오 신호를 복원할 수 있는 것을 특징으로 하는 오디오 신호의 인코딩 방법.
- 제 14 항에 있어서,상기 부가정보 영역은 상기 구성정보를 포함하는 공간정보 프레임을 갖는 것을 특징으로 하는 오디오 신호의 인코딩 방법.
- 제 15 항에 있어서,상기 부가정보 영역은 상기 구성정보가 상기 공간정보 프레임에 포함되었는지를 나타내는 플래그 정보를 더 포함하는 것을 특징으로 하는 오디오 신호의 인코딩 방법.
- 제 16항에 있어서,상기 플래그 정보는 상기 구성정보가 재전송되었는지를 나타내는 것을 특징으로 하는 오디오 신호의 인코딩 방법.
- 제 14 항에 있어서,상기 구성정보는 파라미터 밴드 개수 정보, 표준화 주파수 정보, 프레임 길이 정보, 디코릴레이터 모드 정보, 3D 오디오 모드 정보, 엔벨로프 보정의 양자화 모드 정보, 및 HRTF 파라미터 정보를 포함하는 것을 특징으로 하는 오디오 신호의 인코딩 방법.
- 멀티채널 오디오 신호로부터 다운믹스 신호를 생성하는 다운믹스부;상기 멀티채널 오디오 신호의 공간정보를 생성하는 공간정보 생성부; 및상기 다운믹스 신호를 포함하는 비트스트림의 부가정보 영역에 상기 공간정보의 구성정보를 포함시키고, 상기 다운믹스 신호와 상기 부가정보를 포함하는 비트스트림을 생성하는 비트스트림 생성부를 포함하고,상기 구성정보는 멀티채널 구성 정보, 다운믹스 게인 정보 및 상기 멀티채널을 구성하는 채널에 대한 채널 게인 정보를 포함하며,상기 멀티채널 구성 정보를 이용하여 상기 다운믹스 신호를 분할하고, 상기 분할된 다운믹스 신호에 상기 다운믹스 게인 정보 및 상기 채널 게인 정보를 적용하여, 상기 멀티채널 오디오 신호를 복원할 수 있는 것을 특징으로 하는 오디오 신호의 인코딩 장치.
- 제 19 항에 있어서,상기 부가정보 영역은 상기 구성정보를 포함하는 공간정보 프레임을 갖는 것을 특징으로 하는 오디오 신호의 인코딩 장치.
- 제 19 항에 있어서,상기 비트스트림 생성부는, 상기 구성정보가 상기 공간정보 프레임에 포함되었는지를 나타내는 플래그 정보를 상기 부가정보 영역에 설정하는 것을 특징으로 하는 오디오 신호의 인코딩 장치.
- 제 21 항에 있어서,상기 플래그 정보는 상기 구성정보가 재전송되었는지를 나타내는 것을 특징으로 하는 오디오 신호의 인코딩 장치.
- 제 19 항에 있어서,상기 구성정보는 파라미터 밴드 개수 정보, 표준화 주파수 정보, 프레임 길이 정보, 디코릴레이터 모드 정보, 3D 오디오 모드 정보, 엔벨로프 보정의 양자화 모드 정보, 및 HRTF 파라미터 정보를 포함하는 것을 특징으로 하는 오디오 신호의 인코딩 장치.
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US73003305P | 2005-10-26 | 2005-10-26 | |
| US60/730,033 | 2005-10-26 | ||
| KR1020060071754 | 2006-07-28 | ||
| KR20060071754 | 2006-07-28 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020087021420A Division KR20080094710A (ko) | 2005-10-26 | 2006-10-20 | 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20080065293A KR20080065293A (ko) | 2008-07-11 |
| KR100891688B1 true KR100891688B1 (ko) | 2009-04-03 |
Family
ID=37967960
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020087021420A KR20080094710A (ko) | 2005-10-26 | 2006-10-20 | 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 |
| KR20087011932A KR100891688B1 (ko) | 2005-10-26 | 2006-10-20 | 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020087021420A KR20080094710A (ko) | 2005-10-26 | 2006-10-20 | 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US8238561B2 (ko) |
| EP (1) | EP1946310A4 (ko) |
| JP (1) | JP2009514008A (ko) |
| KR (2) | KR20080094710A (ko) |
| CN (1) | CN101297353B (ko) |
| TW (2) | TWI451401B (ko) |
| WO (1) | WO2007049881A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016204583A1 (ko) * | 2015-06-17 | 2016-12-22 | 삼성전자 주식회사 | 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치 |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| MX2009003570A (es) * | 2006-10-16 | 2009-05-28 | Dolby Sweden Ab | Codificacion mejorada y representacion de parametros para codificacion de objetos de mezcla descendente de multicanal. |
| US8386267B2 (en) * | 2008-03-19 | 2013-02-26 | Panasonic Corporation | Stereo signal encoding device, stereo signal decoding device and methods for them |
| EP2111062B1 (en) | 2008-04-16 | 2014-11-12 | LG Electronics Inc. | A method and an apparatus for processing an audio signal |
| KR101062351B1 (ko) | 2008-04-16 | 2011-09-05 | 엘지전자 주식회사 | 오디오 신호 처리 방법 및 이의 장치 |
| JP5249408B2 (ja) | 2008-04-16 | 2013-07-31 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号の処理方法及び装置 |
| WO2011021239A1 (ja) * | 2009-08-20 | 2011-02-24 | トムソン ライセンシング | オーディオ・ストリームを合成する装置、方法及びプログラム |
| JP2011177430A (ja) * | 2010-03-03 | 2011-09-15 | Terumo Corp | 医療用マニピュレータシステム |
| EP2688066A1 (en) | 2012-07-16 | 2014-01-22 | Thomson Licensing | Method and apparatus for encoding multi-channel HOA audio signals for noise reduction, and method and apparatus for decoding multi-channel HOA audio signals for noise reduction |
| JP6250071B2 (ja) * | 2013-02-21 | 2017-12-20 | ドルビー・インターナショナル・アーベー | パラメトリック・マルチチャネル・エンコードのための方法 |
| KR101427756B1 (ko) * | 2013-04-26 | 2014-08-08 | 주식회사 코아로직 | 멀티 채널의 오디오 신호 전송 방법 및 장치 |
| EP3067885A1 (en) | 2015-03-09 | 2016-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for encoding or decoding a multi-channel signal |
| CN113035212A (zh) * | 2015-05-20 | 2021-06-25 | 瑞典爱立信有限公司 | 多声道音频信号的编码 |
| CN108665902B (zh) | 2017-03-31 | 2020-12-01 | 华为技术有限公司 | 多声道信号的编解码方法和编解码器 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5682461A (en) | 1992-03-24 | 1997-10-28 | Institut Fuer Rundfunktechnik Gmbh | Method of transmitting or storing digitalized, multi-channel audio signals |
| WO2003090208A1 (en) | 2002-04-22 | 2003-10-30 | Koninklijke Philips Electronics N.V. | pARAMETRIC REPRESENTATION OF SPATIAL AUDIO |
| US6774820B2 (en) | 1999-04-07 | 2004-08-10 | Dolby Laboratories Licensing Corporation | Matrix improvements to lossless encoding and decoding |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100335611B1 (ko) * | 1997-11-20 | 2002-10-09 | 삼성전자 주식회사 | 비트율 조절이 가능한 스테레오 오디오 부호화/복호화 방법 및 장치 |
| JP3529665B2 (ja) * | 1999-04-16 | 2004-05-24 | パイオニア株式会社 | 情報変換方法及び情報変換装置並びに情報再生装置 |
| WO2002056300A1 (en) * | 2001-01-16 | 2002-07-18 | Koninklijke Philips Electronics N.V. | Parametric encoder and method for encoding an audio or speech signal |
| US7006636B2 (en) * | 2002-05-24 | 2006-02-28 | Agere Systems Inc. | Coherence-based audio coding and synthesis |
| AU2003281128A1 (en) * | 2002-07-16 | 2004-02-02 | Koninklijke Philips Electronics N.V. | Audio coding |
| US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
| US7961890B2 (en) * | 2005-04-15 | 2011-06-14 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. | Multi-channel hierarchical audio coding with compact side information |
| US8032368B2 (en) * | 2005-07-11 | 2011-10-04 | Lg Electronics Inc. | Apparatus and method of encoding and decoding audio signals using hierarchical block swithcing and linear prediction coding |
| US7974713B2 (en) | 2005-10-12 | 2011-07-05 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Temporal and spatial shaping of multi-channel audio signals |
-
2006
- 2006-10-20 KR KR1020087021420A patent/KR20080094710A/ko not_active Application Discontinuation
- 2006-10-20 CN CN2006800398351A patent/CN101297353B/zh active Active
- 2006-10-20 KR KR20087011932A patent/KR100891688B1/ko active IP Right Grant
- 2006-10-20 JP JP2008537589A patent/JP2009514008A/ja active Pending
- 2006-10-20 EP EP06799359A patent/EP1946310A4/en not_active Ceased
- 2006-10-20 US US12/091,921 patent/US8238561B2/en active Active
- 2006-10-20 WO PCT/KR2006/004286 patent/WO2007049881A1/en active Application Filing
- 2006-10-24 TW TW97151238A patent/TWI451401B/zh active
- 2006-10-24 TW TW95139227A patent/TWI323878B/zh active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5682461A (en) | 1992-03-24 | 1997-10-28 | Institut Fuer Rundfunktechnik Gmbh | Method of transmitting or storing digitalized, multi-channel audio signals |
| US6774820B2 (en) | 1999-04-07 | 2004-08-10 | Dolby Laboratories Licensing Corporation | Matrix improvements to lossless encoding and decoding |
| WO2003090208A1 (en) | 2002-04-22 | 2003-10-30 | Koninklijke Philips Electronics N.V. | pARAMETRIC REPRESENTATION OF SPATIAL AUDIO |
Non-Patent Citations (1)
| Title |
|---|
| Beack S. et al., "An Efficient Representation Method for ICLD with Robustness to Spectral Distortion" ETRI Journal, June 2005, VOL.27,NO.3 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016204583A1 (ko) * | 2015-06-17 | 2016-12-22 | 삼성전자 주식회사 | 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치 |
| US10607622B2 (en) | 2015-06-17 | 2020-03-31 | Samsung Electronics Co., Ltd. | Device and method for processing internal channel for low complexity format conversion |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101297353A (zh) | 2008-10-29 |
| TW200939205A (en) | 2009-09-16 |
| TWI323878B (en) | 2010-04-21 |
| KR20080094710A (ko) | 2008-10-23 |
| CN101297353B (zh) | 2013-03-13 |
| EP1946310A4 (en) | 2011-03-09 |
| KR20080065293A (ko) | 2008-07-11 |
| WO2007049881A1 (en) | 2007-05-03 |
| US8238561B2 (en) | 2012-08-07 |
| TWI451401B (zh) | 2014-09-01 |
| JP2009514008A (ja) | 2009-04-02 |
| TW200746045A (en) | 2007-12-16 |
| US20080262854A1 (en) | 2008-10-23 |
| EP1946310A1 (en) | 2008-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100891688B1 (ko) | 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치 | |
| JP2009514008A5 (ko) | ||
| JP5006315B2 (ja) | オーディオ信号のエンコーディング及びデコーディング方法及び装置 | |
| KR100904437B1 (ko) | 오디오 신호의 처리 방법 및 장치 | |
| US11955130B2 (en) | Layered coding and data structure for compressed higher-order Ambisonics sound or sound field representations | |
| JP2014089467A (ja) | マルチチャンネルオーディオ信号のエンコーディング／デコーディングシステム、記録媒体及び方法 | |
| CN101836250A (zh) | 用于处理信号的方法及装置 | |
| KR20210027236A (ko) | 몰입형 오디오 신호를 포함하는 비트스트림을 생성 또는 디코딩하기 위한 방법 및 디바이스 | |
| KR100880643B1 (ko) | 오디오 신호의 디코딩 방법 및 장치 | |
| US20080288263A1 (en) | Method and Apparatus for Encoding/Decoding | |
| US20060235683A1 (en) | Lossless encoding of information with guaranteed maximum bitrate | |
| TWI631554B (zh) | Encoding device and method, decoding device and method, and program | |
| KR20070003546A (ko) | 멀티채널 오디오 코딩에서 클리핑복원정보를 이용한 클리핑복원방법 | |
| US20050141722A1 (en) | Signal processing | |
| RU2383941C2 (ru) | Способ и устройство для кодирования и декодирования аудиосигналов | |
| KR20090039642A (ko) | Ｄｍｂ 신호의 디코딩 방법 및 이의 디코딩 장치 | |
| KR100813269B1 (ko) | 비트 스트림 처리/전송 방법 및 장치, 비트 스트림수신/처리 방법 및 장치 | |
| KR20070108302A (ko) | 오디오 데이터의 확장에 대한 스케러빌러티를 지원하는부호화 방법 및 장치, 그 복호화 방법 및 장치 | |
| KR20070003574A (ko) | 오디오 신호 인코딩 및 디코딩 방법 및 장치 | |
| RU2802677C2 (ru) | Способы и устройства для формирования или декодирования битового потока, содержащего иммерсивные аудиосигналы | |
| ES2387574T3 (es) | Método y aparato para decodificar una señal de audio | |
| KR20170031604A (ko) | 디지털 라디오 서비스를 위한 usac 오디오 신호 인코딩/디코딩 장치 및 방법 | |
| KR20070108313A (ko) | 오디오 신호의 인코딩/디코딩 방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| A302 | Request for accelerated examination | ||
| A107 | Divisional application of patent | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130226 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20140224 Year of fee payment: 6 |
|
| FPAY | Annual fee payment |
Payment date: 20150224 Year of fee payment: 7 |
|
| FPAY | Annual fee payment |
Payment date: 20160224 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20170214 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20190214 Year of fee payment: 11 |