KR20070019718A - 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치 - Google Patents

오디오 신호 부호화 장치 및 오디오 신호 복호화 장치 Download PDF

Info

Publication number
KR20070019718A
KR20070019718A KR1020067021807A KR20067021807A KR20070019718A KR 20070019718 A KR20070019718 A KR 20070019718A KR 1020067021807 A KR1020067021807 A KR 1020067021807A KR 20067021807 A KR20067021807 A KR 20067021807A KR 20070019718 A KR20070019718 A KR 20070019718A
Authority
KR
South Korea
Prior art keywords
signal
mixed
audio
auxiliary information
signals
Prior art date
Application number
KR1020067021807A
Other languages
English (en)
Other versions
KR101117336B1 (ko
Inventor
미네오 츠시마
Original Assignee
마쯔시다덴기산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마쯔시다덴기산교 가부시키가이샤 filed Critical 마쯔시다덴기산교 가부시키가이샤
Publication of KR20070019718A publication Critical patent/KR20070019718A/ko
Application granted granted Critical
Publication of KR101117336B1 publication Critical patent/KR101117336B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Stereophonic System (AREA)

Abstract

포터블 플레이어(710) 또는 멀티 채널 홈 플레이어(730)는, 멀티 채널 오디오 신호가 혼입된, 다운 믹스 신호를 나타내는 부호열과, 다운 믹스 신호를 다운 믹스되기 전의 멀티 채널 오디오 신호에 되돌리기 위한 보조 정보를, 입력된 부호열로부터 추출하는 동시에, 다운 믹스 신호를 나타내는 부호열을 복호화하는 혼입 신호 복호화부(711)와, 추출된 보조 정보에 의거하여 복호화에 의해 얻어진 다운 믹스 신호를 분리하여, 다운 믹스되기 전의 멀티 채널 오디오 신호와 청각적으로 유사한 오디오 신호를 생성하는 신호 분리 처리부(731)와, 복호화된 다운 믹스 신호를 재생하는 헤드폰 또는 스피커(720) 또는 다운 믹스 신호로부터 분리된 멀티 채널 오디오 신호를 재생하는 스피커(740)를 구비한다.

Description

오디오 신호 부호화 장치 및 오디오 신호 복호화 장치 {AUDIO SIGNAL ENCODER AND AUDIO SIGNAL DECODER}
본 발명은 오디오 신호를 부호화하는 부호화 장치 및 부호화된 오디오 신호를 복호화하는 복호화 장치에 관한 것이다.
종래의 오디오 신호 복호화 방법 및 부호화 방법으로서는, 공지인 것으로서 ISO/IEC의 국제 표준 방식, 통칭 MPEG 방식 등을 들 수 있다. 현재, 폭넓은 응용을 갖고, 저 비트 레이트 시라도 고음질인 부호화 방식으로서 ISO/IEC 13818-7, 통칭 MPEG2 AAC(Advanced Audio Coding) 등을 들 수 있다. 본 방식의 확장 규격도 복수 규격화가 현재 이루어지고 있다(비특허문헌 1 참조).
비특허문헌 1 : ISO/IEC 13818-7(MPEG2 AAC)
그러나, 종래의 오디오 신호 부호화 방법 및 복호화 방법에서는, 예컨대 배경 기술에 기재된 AAC 등에서는 멀티 채널의 신호를 부호화할 때에, 채널사이의 상관을 충분히 살릴 수 없기 때문에, 저 비트 레이트화하는 것이 곤란하였다. 도 1은 멀티 채널의 신호를 부호화한 것을 복호화할 때의 종래 방법을 도시하는 도면이다. 도 1에 도시하는 바와 같이, 예컨대, 종래의 멀티 채널 AAC 부호화 장치(600)에서는, 5.1 채널의 오디오 신호를 부호화하고 다중화하여 방송 등에 의해 종래의 플레이어(610)에 송신하고 있다. 이러한 부호화 데이터를 수신하는 종래의 플레이어(610)에서는, 출력이 2채널인 스피커나 헤드폰인 경우, 멀티 채널 AAC 복호화부(611) 및 다운 믹스부(612)를 구비하고, 수신한 부호화 신호로부터 생성한 다운 믹스 신호를 2채널의 스피커 또는 헤드폰(613)에 출력하고 있다.
그러나, 종래의 플레이어(610)에서는, 원음의 멀티 채널 신호를 부호화한 것을 복호화할 때에, 2개의 스피커나 헤드폰 등만으로 재생하는 경우, 한번 모든 채널을 복호화한다. 그 후, 다운 믹스부(612)가 복호화된 모든 채널로부터 상기 2개의 스피커나 헤드폰으로 재생해야 할 다운 믹스 신호(우 : DR, 좌 : DL)를 다운 믹스 등의 방법을 이용하여 생성한다. 예컨대, 5.1 채널의 멀티 채널 신호는, 시청자의 전방 정면(Center), 전방 우측(FR), 전방 좌측(FL), 후방 우측(BR) 및 후방 좌측(BL)에 배치되는 음원으로부터의 5채널의 오디오 신호와, 오디오 신호의 초저역을 나타내는 O.1채널의 신호(LFE)로 구성된다. 다운 믹스부(612)는 복호화된 각각의 채널의 신호를 복수 채널 신호를 가중 가산하여 다운 믹스 신호(DR, DL)를 생성하고 있다. 이것은 2개의 스피커나 헤드폰으로 재생하는 경우라도, 많은 계산량이나 계산용 버퍼를 요하고, 나아가서는 그것을 실장하는 DSP(Disital Signal Processor) 등의 계산 수단의 소비 전력이나 비용을 높이는 원인으로 되어 있다.
상기 과제를 해결하기 위해서, 본 발명의 오디오 신호 복호화 장치는 부호열을 복호화하여 오디오 신호를 출력하는 오디오 신호 복호화 장치로서, 복수의 오디오 신호가 혼입된 보다 소수의 혼입 신호를 나타내는 부호열과, 상기 혼입 신호를 혼입하기 전의 오디오 신호에 되돌리기 위한 보조 정보를, 입력된 부호열로부터 추출하는 추출 수단과, 상기 혼입 신호를 나타내는 상기 부호열을 복호화하는 복호화 수단과, 추출된 상기 보조 정보에 의거하여 상기 복호화에 의해 얻어진 상기 혼입 신호를 분리하여, 혼입되기 전의 상기 오디오 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하는 신호 분리 수단과, 복호화된 상기 혼입 신호를 재생하거나 또는 상기 혼입 신호로부터 분리된 복수의 오디오 신호를 재생하는 재생 수단을 구비한다.
한편, 본 발명은 이러한 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치로서 실현할 수 있을 뿐만 아니라, 오디오 신호 부호화 방법 및 오디오 신호 복호화 방법으로서 실현하거나, 그들의 단계를 컴퓨터에 실행시키는 프로그램으로서 실현하거나 할 수도 있다. 또한, 이들의 단계를 집적 회로 등에 내장한 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치로서 실현할 수도 있다. 그리고, 그러한 프로그램은 CD-ROM 등의 기록 매체나 인터넷 등의 전송 매체를 통해 배달할 수 있는 것은 말할 필요도 없다.
이상 설명한 바와 같이, 본 발명의 오디오 신호 부호화 장치에서는, 혼입된 복수의 신호열로부터 부호열을 생성하고, 생성된 부호열로부터 복수의 신호열로 분리함에 있어서, 신호간의 유사성에 착안하여 매우 작은 보조 정보를 부호열 중에 포함시킴으로써, 청감 상 위화감이 없을 정도로 신호의 분리를 달성하는 것이 가능해진다. 또한, 미리 혼입된 신호가 멀티 채널 신호의 다운 믹스 신호이도록 구성해 두면, 복호 시에 있어서는 보조 정보를 판독하여 신호 처리하지 않고 다운 믹스 신호부만을 복호하면, 2채널 신호의 재생계를 갖는 스피커나 헤드폰에 있어서도 저연산량으로 고음질인 재생이 가능해진다.
도 1은 종래의 멀티 채널 신호의 부호화 방법 및 복호화 방법의 일례를 도시하는 도면이다.
도 2는 본 발명의 오디오 신호 부호화 장치의 주요부를 개략적으로 도시하는 도면이다.
도 3은 본 발명의 오디오 신호 복호화 장치의 주요부를 개략적으로 도시하는 도면이다.
도 4는, 본 실시형태의 오디오 신호 복호화 장치에 있어서, 2개의 신호가 혼입된 혼입 신호(mX)로부터, 원(原)신호에 청각상 유사한 신호(X1)와 신호(X2)가 분리하는 태양을 도시하는 도면이다.
도 5는 본 실시형태의 오디오 신호 복호화 장치의 보다 구체적인 구성의 일례를 도시하는 도면이다.
도 6a는 도 5에 도시한 혼입 신호 복호화부로부터의 출력인 서브 밴드 신호를 도시하는 도면이다. 도 6b는, 도 7에 도시한 시간 주파수 공간의 분할 방법을 도 6a에 도시한 서브 밴드 신호에 적용한 예를 도시하고 있다.
도 7은 혼입 신호 복호화부로부터의 출력 신호가 나타나는 공간의 분할 방법의 일례를 도시하는 도면이다.
도 8은 부호화 장치로부터의 부호열을 2채널의 포터블 플레이어로 재생하는 경우의 오디오 신호 시스템의 구성예를 도시하는 도면이다.
도 9는 부호화 장치로부터의 부호열을 멀티 채널의 오디오 재생 가능한 홈 플레이어로 재생하는 경우의 오디오 신호 시스템의 구성예를 도시하는 도면이다.
도 10은 본 실시형태의 오디오 신호 복호화 장치에 있어서, 더욱 위상 제어를 행하는 경우의 구성의 일례를 도시하는 도면이다.
도 11은 본 실시형태의 오디오 신호 복호화 장치에 있어서, 입력 신호끼리의 상관이 작은 경우에 선형 예측 필터를 이용하는 경우의 구성의 일례를 도시하는 도면이다.
<도면의 주요부분에 대한 부호의 설명>
101 : 혼입 신호 정보, 102 : 혼입 신호 복호화부
103 : 신호 분리 처리부, 104 : 보조 정보
105 : 출력 신호(1), 106 : 출력 신호(2)
201 : 입력 신호(1), 202 : 입력 신호(2)
203 : 혼입 신호 부호화부, 204 : 보조 정보 생성부
205 : 보조 정보, 206 : 혼입 신호 정보
211 : 게인 산출부, 212 : 위상 산출부
213 : 계수 산출부, 301 : 혼입 신호 정보
302 : 혼입 신호 복호화부, 303 : 신호 분리부
304 : 게인 제어부, 305 : 출력 신호(1)
306 : 출력 신호(2), 307 : 보조 정보
308 : 시간 주파수 매트릭스 생성부, 401 : 혼입 신호 정보
402 : 혼입 신호 복호화부, 403 : 신호 분리부
404 : 게인 제어부, 405 : 출력 신호(1)
406 : 출력 신호(2), 407 : 보조 정보
408 : 시간 주파수 매트릭스 생성부, 409 : 위상 제어부
501 : 혼입 신호 정보, 502 : 혼입 신호 복호화부
503 : 신호 분리부, 504 : 게인 제어부
505 : 출력 신호(1), 506 : 출력 신호(2)
507 : 보조 정보, 508 : 시간 주파수 매트릭스 생성부
509 : 위상 제어부, 510 : 선형 예측 필터 적응부
600 : 종래의 멀티 채널 AAC 부호화 장치
610 : 종래의 플레이어, 611 : 멀티 채널 AAC 복호화부
612 : 다운 믹스부, 613 : 스피커 또는 헤드폰
700 : 부호화 장치, 701 : 다운 믹스부
702 : 보조 정보 생성부, 703 : 부호화부
710 : 포터블 플레이어, 711 : 혼입 신호 복호화부
720 : 헤드폰 또는 스피커, 730 : 멀티 채널 홈 플레이어
740 : 스피커
이하, 본 발명의 실시형태를, 도면을 참조하면서 설명한다.
(실시형태 1)
도 2는, 본 발명의 오디오 신호 복호 장치에서 복호 가능한 부호열을 생성하는 오디오 신호 부호화 장치(200)의 구성을 도시하는 블록도이다. 이 오디오 신호 부호화 장치(200)는, 적어도 2개의 신호를 입력하고, 입력된 신호로부터 보다 소수의 혼입 신호를 생성하여 혼입 신호를 나타내는 1개의 부호화 데이터와 그 부호화 데이터보다도 적은 비트수로 나타내는 보조 정보를 포함하는 부호열을 생성하는 오디오 신호 부호화 장치로서, 혼입 신호 부호화부(203) 및 보조 정보 생성부(204)를 구비한다. 보조 정보 생성부(204)는, 내부에 게인 산출부(211), 위상 산출부(212) 및 계수 산출부(213)를 구비한다. 이하에서는, 설명을 간단히 하기 위해서 입력 신호가 2개인 경우에 관해서 설명한다. 혼입 신호 부호화부(203) 및 보조 정보 생성부(204)는 모두 입력 신호(1)(201)와, 입력 신호(2)(202)를 입력으로 하고, 혼입 신호 부호화부(203)는 혼입 신호 및 혼입 신호 정보(206)를 생성한다. 여기서, 혼입 신호는 입력 신호(1)(201) 및 입력 신호(2)(202)를 소정의 방법으로 중첩하여 얻어지는 신호이다. 보조 정보 생성부(204)는 입력된 입력 신호(1)(201), 입력 신호(2)(202) 및 혼입 신호 부호화부(203)의 출력인 혼입 신호로부터 보조 정보(205)를 생성한다.
보다 구체적으로는, 혼입 신호 부호화부(203)에서는 입력 신호(1)(201) 및 입력 신호(2)(202)를 어떤 일정한 미리 정해진 방법에 의해서 가산하여 혼입 신호를 생성하고, 그 혼입 신호를 부호화하여 혼입 신호 정보(206)를 출력한다. 여기서, 혼입 신호 부호화부(203)의 부호화 방법으로서는 AAC 등의 방법을 이용해도 좋 지만, 특별히 한정하지 않는다.
보조 정보 생성부(204)에서는, 입력 신호(1)(201), 입력 신호(2)(202) 및 혼입 신호 부호화부(203)에서 만들어진 혼입 신호와 혼입 신호 정보(206)를 이용하여 보조 정보(205)를 생성한다. 여기서 보조 정보(205)는 혼입 신호로부터, 혼입 전의 신호인 입력 신호(1)(201)와 입력 신호(2)(202)와, 청감 상 가능한 한 동일하게 들리는 신호를 분리하기 위한 정보가 되도록 한다. 따라서, 혼입 신호로부터 혼입 전의 입력 신호(1)(201)와 입력 신호(2)(202)를 완전히 동일하게 분리할 수 있어도 좋고, 들은 바 차이가 없을 정도로 분리할 수 있는 것이어도 좋다. 들어서 차이가 있었다고 해도, 그 보조 정보는 본 발명의 범위이고, 이와 같이 분리하기 위한 정보가 포함되어 있는 것이 중요하다. 보조 정보 생성부에 있어서는 입력되는 신호에 대하여, 예컨대, QMF(Quadrature Mirror Filter) 필터 뱅크를 이용하는 부호화 방법으로 부호화해도 좋고, FFT(Fast Fourier Transform) 등을 이용하는 부호화 방법으로 부호화해도 좋다.
게인 산출부(211)는 입력 신호(1)(201) 및 입력 신호(2)(202)와 혼입 신호를 비교하여, 혼입 신호로부터 입력 신호(1)(201) 및 입력 신호(2)(202)와 많이 닮은 신호를 생성하기 위한 게인을 산출한다. 보다 구체적으로는, 게인 산출부(211)는 우선, 입력 신호(1)(201) 및 입력 신호(2)(202)와 혼입 신호에 대하여, 프레임마다 각각 QMF 필터 처리를 실시함으로써, 입력 신호(1)(201), 입력 신호(2)(202) 및 혼입 신호를 시간 주파수 공간 상의 서브 밴드 신호로 변환한다. 이어서, 시간 주파수 공간을 시간 방향 및 주파수 방향으로 분할한 후, 분할된 각 영역 내에서 입력 신호(1)(201) 및 입력 신호(2)(202)로부터 변환된 각각의 서브 밴드 신호와, 혼입 신호로부터 변환된 서브 밴드 신호를 비교한다. 그리고, 분할된 영역마다 혼입 신호로부터 변환된 서브 밴드 신호를 이용하여, 입력 신호(1)(201) 및 입력 신호(2)(202)로부터 변환된 각각의 서브 밴드 신호를 나타내기 위한 게인을 산출한다. 또한, 분할된 각 영역에 대하여 산출된 게인의 분포를 나타내는 시간 주파수 매트릭스를 생성하고, 시간 주파수 공간의 분할 방법을 나타낸 정보와 함께 보조 정보(205)로서 출력한다. 한편, 여기에서 구하는 게인의 분포는 입력 신호(1)(201) 및 입력 신호(2)(202)로부터 변환된 서브 밴드 신호의 한 쪽에 대해서만 산출된다고 해도 좋다. 혼입 신호로부터 입력 신호(1)(201) 및 입력 신호(2)(202)의 한 쪽이 생성되면, 생성된 입력 신호(1)(201) 또는 입력 신호(2)(202)를 혼입 신호로부터 감산함으로써 다른 쪽의 입력 신호(1)(201) 또는 입력 신호(2)(202)가 얻어지기 때문이다.
또한, 예컨대 근접하는 마이크로폰 등으로 집음되는 음성 등은 스펙트럼에 있어서도 서로 상관성이 높다고 예상된다. 이러한 경우, 위상 산출부(212)는 게인 산출부(211)와 마찬가지로, 입력 신호(1)(201) 및 입력 신호(2)(202)와 혼입 신호에 대하여, 프레임마다 각각 QMF 필터 처리를 실시한다. 또한, 위상 산출부(212)는 서브 밴드마다 입력 신호(1)(201)로부터 얻어진 서브 밴드 신호와, 입력 신호(2)(202)로부터 얻어진 서브 밴드 신호의 위상차(지연량)를 산출하고, 산출된 위상차와, 이 경우의 게인을 보조 정보로서 출력한다. 한편, 입력 신호(1)(201)와 입력 신호(2)(202)의 위상차는, 저주파에서는 청각적으로 감지되기 쉽지만, 고주파에 서는 감지되기 어렵다는 성질이 있다. 이 때문에, 서브 밴드 신호가 고주파인 경우에는, 이 위상차의 산출을 생략한다고 해도 좋다. 또한, 위상 산출부(212)는 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 경우에는 위상차를 산출하더라도, 그 산출값을 보조 정보에 포함시키지 않는다.
또한, 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 경우, 입력 신호(1)(201)와 입력 신호(2)(202)의 한 쪽의 신호는, 다른 쪽의 신호에 상관없는 신호(노이즈 신호)로 간주할 수 있다. 따라서, 계수 산출부(213)는 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 경우, 우선, 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 것을 나타내는 플래그를 생성한다. 혼입 신호를 입력 신호로 하는 선형 예측 필터(함수)를 정의하고, 그 필터에 의한 출력이 혼입 전의 한 쪽의 신호로 가능한 한 되도록 선형 예측 계수를 도출한다. 혼입 신호가 2개의 신호로 이루어지는 것이면, 2조의 선형 예측 계수열을 도출하고, 그 양자를 보조 정보에 출력해도 좋고, 한 쪽만 출력해도 좋다. 혼입 신호가 복수의 입력 신호로 이루어지는 경우에 있어서도, 적어도 어느 하나의 입력 신호로 가능한 한 되는 선형 예측 계수를 도출한다. 이러한 구성으로, 계수 산출부(213)는 이 함수의 선형 예측 계수를 산출한 후, 산출된 선형 예측 계수와, 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 것을 나타내는 플래그를 보조 정보로서 출력한다. 한편, 여기서는 입력 신호(1)(201)와 입력 신호(2)(202)의 상관성이 낮은 것을 플래그로 나타낸다고 하고 있지만, 신호 전체로 비교하는 경우에 한하지 않고, QMF 필터 처리 등을 이용하여 얻어진 서브 밴드 신호마다 이 플래그를 생성해도 좋 다.
다음에 도 3을 이용하여 복호화 방법을 설명한다. 도 3은, 본 발명의 오디오 신호 복호화 장치(100)의 주요부의 구성을 모식적으로 도시하는 도면이다. 오디오 신호 복호화 장치(100)는 입력되는 부호열로부터, 미리 혼입 신호 정보와 보조 정보를 추출하고, 복호화된 혼입 신호 정보로부터 출력 신호(1)(105)와, 출력 신호(2)(106)를 분리하는 복호화 장치로서, 혼입 신호 복호화부(102) 및 신호 분리 처리부(103)를 구비한다.
오디오 신호 복호화 장치(100)의 전단에서, 부호열로부터 추출된 혼입 신호 정보(101)는, 혼입 신호 복호화부(102)에서 부호화 데이터의 형식으로부터 오디오 신호의 형식으로 복호화된다. 상기의 오디오 신호의 형식으로서는, 시간축 상의 신호 형식에 한정되지 않고, 주파수축 상의 신호 형식이어도 좋고, 시간과 주파수의 양축으로 표현되는 형식 등이어도 좋다. 혼입 신호 복호화부(102)로부터의 출력 신호 및 보조 정보(104)는, 신호 분리 처리부(103)로 입력되어 신호의 분리 합성이 이루어지고, 출력 신호(1)(105)와, 출력 신호(2)(106)가 출력된다. 도 4는, 본 실시형태의 오디오 신호 복호화 장치에 있어서, 2개의 신호가 혼입된 혼입 신호(mX)로부터, 원신호에 청각상 유사한 2개의 신호(X1)와 신호(X2)가 분리되는 태양을 도시하는 도면이다. 본 발명의 오디오 신호 복호화 장치(100)에서는, 부호열로부터 추출된 보조 정보에 의거하여, 혼입 신호(mX)로부터 원신호인 신호(X1)와 신호(X2)와 청각상 유사한 신호(X1)와 신호(X2)가 분리된다.
이하, 본 발명이 구체적인 복호화 방법에 관해서 도 5를 이용하여 설명한다. 도 5는, 본 실시형태의 오디오 신호 복호화 장치(100)에 있어서 게인 제어를 행하는 경우의 구성의 일례를 도시하는 도면이다. 본 실시형태의 오디오 신호 복호화 장치(100)는, 혼입 신호 복호화부(302), 신호 분리부(303), 게인 제어부(304) 및 시간 주파수 매트릭스 생성부(308)를 구비한다.
도 5에 도시하는 오디오 신호 복호화 장치(100)의 전단에서, 미리 부호열로부터 추출된 혼입 신호 정보(301)는, 혼입 신호 복호화부(302)로 입력된다. 혼입 신호 정보(301)는 혼입 신호 복호화부(302)에서 부호화 데이터의 형식으로부터 오디오 신호의 형식으로 복호화된다. 상기의 오디오 신호의 형식으로서는, 시간축 상의 신호 형식에 한정하지 않고, 주파수축 상의 신호 형식이어도 좋고, 시간과 주파수의 양축으로 표현되는 형식 등이어도 좋다. 상기의 혼입 신호 복호화부(302)의 출력 신호 및 보조 정보(307)는, 신호 분리부(303)로 입력된다. 신호 분리부(303)에서는, 보조 정보(307)를 바탕으로 복호화된 혼입 오디오 신호를 복수의 신호로 분리한다. 구체적으로는, 보조 정보(307)에 포함되어 있는 시간 주파수 공간(또는 주파수 공간)의 분할 방법을 나타낸 정보에 따라서, 혼입 오디오 신호가 속하는 공간을 분할한다. 여기서는 간단하게 하기 위해 2개로 분리하는 경우에 관해서 기재하지만, 반드시 2개로 한정하지 않는다. 한편, 보조 정보(307)에 의거하여 시간 주파수 매트릭스 생성부(308)에서는, 혼입 신호 복호화부(302)로부터의 출력, 또는, 신호 분리부(303)로부터의 복수의 출력 신호와 동일한 오디오 신호의 형식에 대한 게인을 생성한다. 예컨대, 오디오 형식이 단순히 시간 영역의 신호인 경우에는, 시간 영역의 1개 이상의 시간에 관한 게인 정보를 시간 주파수 매트릭스 생성 부(308)의 출력으로 하고, 오디오 형식이 QMF 필터와 같은 복수 서브 밴드로 이루어지는 시간축과 주파수축으로 표현되는 형식인 경우에는, 시간과 주파수의 2차원의 게인 정보를 시간 주파수 매트릭스 생성부(308)의 출력으로 한다. 그러한 게인 정보와, 신호 분리부(303)로부터의 복수의 오디오 신호에 대하여, 게인 제어부(304)에서는 데이터 형식에 맞춘 게인 제어를 적용하고, 출력 신호(1)(305) 및 출력 신호(2)(306)를 출력한다.
이와 같이 구성된 오디오 신호 복호화 장치에서는, 혼입된 오디오 신호로부터 적절히 게인 컨트롤된 복수의 오디오 신호를 얻는 것이 가능하다.
이 게인 컨트롤에 대해서는, 이하의 도 6 및 도 7을 이용하여 상세히 설명한다. 도 6a 및 도 6b는 도 5에 도시한 혼입 신호 복호화부(302)로부터의 출력이 QMF 필터인 경우의 각 서브 밴드 신호에 대한 게인 제어의 일례를 도시하는 도면이다. 도 7은, 혼입 신호 복호화부(302)로부터의 출력 신호가 나타내는 공간의 분할 방법의 일례를 도시하는 도면이다. 도 6a는, 도 5에 도시한 혼입 신호 복호화부(302)로부터의 출력인 서브 밴드 신호를 도시하는 도면이다. 이와 같이, QMF 필터로부터 출력되는 서브 밴드 신호는 시간축과 주파수축으로 이루어지는 이차원 공간 상의 신호로서 나타낸다.
따라서, 오디오 형식이 QMF 필터로 구성되는 경우는, 프레임 단위로 오디오 신호를 취급하는 경우에 있어서 시간 주파수 매트릭스를 이용한 게인 제어가 용이하다.
예컨대, 32서브 밴드로 이루어지는 QMF 필터로 구성한다고 해서, 1프레임 1024 샘플의 오디오 신호를 취급하면, 결과적으로 시간 방향으로 32샘플, 주파수 방향(서브 밴드)으로 32밴드의 시간 주파수 매트릭스를 오디오 형식으로서 얻을 수 있다. 그들의 1024샘플의 신호에 게인 제어를 행하는 경우, 도 7과 같이 주파수 방향과 시간 방향으로 영역을 분할하고, 분할된 각각의 영역에 관해서 게인 제어의 계수(R11, R12, R21, R22)를 정의하면 게인 제어가 용이하다. 여기서는 R11로부터 R22까지 4개의 요소로 이루어지는 매트릭스를 편의상 이용하지만, 시간 방향, 주파수 방향의 계수의 개수는 이들에 한정되지 않는다. 도 6에 게인 제어의 적용예를 도시하였다. 즉, 도 6b는, 도 7에 도시한 시간 주파수 공간의 분할 방법을 도 6a에 도시한 서브 밴드 신호에 적용한 예를 도시하고 있다. 도 6b에 도시하는 바와 같이, QMF 필터가 6서브 밴드인 경우에, 저역으로부터 4밴드와 고역으로부터 2밴드인 2개로 나누고, 시간 방향으로는 균일하게 2개로 나눈 경우, 그들 4영역에 존재하는 QMF 필터로부터 얻어지는 신호열에 게인(R11, R12, R21, R22)은 곱한 신호를 출력하는 등이다.
혼입되는 신호열에 관해서 특별히 제한은 없지만, 멀티 채널의 오디오 신호열을 취급하는 경우에 있어서, 프론트 채널 신호에 대하여, 백 채널 신호가 혼입되는 경우나, 다시 센터 채널이 혼입되는 경우 등이 생각된다. 따라서, 혼입 후의 신호는 일반적으로 다운 믹스 신호 등으로 불리는 경우에 관해서도 유효하다.
도 8은, 부호화 장치(700)로부터의 부호열을 2채널의 포터블 플레이어로 재생하는 경우의 오디오 신호 시스템의 구성예를 도시하는 도면이다. 동 도면에 도시하는 바와 같이, 이 오디오 신호 시스템은 부호화 장치(700), 포터블 플레이어 (710) 및 헤드폰 또는 스피커(720)를 구비한다. 부호화 장치(700)는 예컨대, 5.1 채널의 멀티 채널 오디오 신호열을 입력으로 하고, 5.1 채널로부터 다운 믹스된 2 채널의 오디오 부호열과 보조 신호를 출력하는 부호화 장치로서, 다운 믹스부(701), 보조 정보 생성부(702) 및 부호화부(703)를 구비한다. 다운 믹스부(701)는 5.1 채널의 멀티 채널 오디오 신호열로부터 2채널의 다운 믹스 신호를 생성하고, 생성한 다운 믹스 신호(DL 및 DR)를 부호화부(703)에 출력한다. 보조 정보 생성부(702)는, 생성된 다운 믹스 신호(DL 및 DR)로부터 5.1 채널의 멀티 채널 신호를 복원하기 위한 정보를 생성하고, 보조 정보로서 부호화부(703)에 출력한다. 부호화부(703)는 생성된 다운 믹스 신호(DL 및 DR)와, 보조 정보를 부호화 및 다중화하여 부호열로서 출력한다. 이 오디오 신호 시스템에서의 포터블 플레이어(710)는 2채널의 헤드폰 또는 스피커(720)에 접속되어 있고, 2채널의 스테레오 재생만이 재생 가능하다. 포터블 플레이어(710)는 혼입 신호 복호화부(711)를 구비하고, 부호화 장치(700)로부터 취득한 부호열을 혼입 신호 복호화부(711)로 복호화할 뿐으로 2채널의 헤드폰 또는 스피커(720)로 재생할 수 있다.
도 9는, 부호화 장치(700)로부터의 부호열을 멀티 채널의 오디오 재생 가능한 홈 플레이어로 재생하는 경우의 오디오 신호 시스템의 구성예를 도시하는 도면이다. 동 도면에 도시하는 바와 같이, 이 오디오 신호 시스템은 부호화 장치(700), 멀티 채널 홈 플레이어(730) 및 스피커(740)를 구비한다. 부호화 장치(700)의 내부 구성은, 도 8에 도시한 부호화 장치(700)와 동일하기 때문에 설명을 생략한다. 멀티 채널 홈 플레이어(730)는 혼입 신호 복호화부(711) 및 신호 분리 처리부(731)를 구비하고, 5.1 채널의 멀티 채널 신호를 재생 가능한 스피커(740)에 접속되어 있다. 이 멀티 채널 홈 플레이어(730)에 있어서, 혼입 신호 복호화부(711)는 부호화 장치(700)로부터 취득한 부호열을 복호화하여 보조 정보와 다운 믹스 신호(DL 및 DR)를 추출한다. 신호 분리 처리부(731)에서는 추출된 다운 믹스 신호(DL과 DR)로부터, 추출된 보조 정보에 의거하여 5.1 채널의 멀티 채널 신호를 생성한다.
도 8 및 도 9에 도시한 예와 같이, 동일한 부호열을 입력해도 2채널의 신호밖에 재생하지 않는 포터블 플레이어 등에서는, 단순히 부호열 중의 혼입 신호를 복호화할 뿐으로 원하는 다운 믹스 오디오 신호를 재생할 수 있고, 전력의 소비를 억제하여 배터리를 오래 유지시킬 수 있다는 효과가 있다. 또한, 가정에 비치되는 멀티 채널의 오디오 신호를 재생 가능한 홈 플레이어 등에서는, 배터리 구동이 아니기 때문에 소비 전력을 걱정하지 않고, 보다 고음질인 오디오 신호의 재생을 추구할 수 있다는 효과가 있다.
(실시형태 2)
이하에서는 본 실시형태의 구체적인 복호화 장치에 관해서 도 10을 이용하여 설명한다.
도 10은, 본 실시형태의 오디오 신호 복호화 장치에 있어서, 더욱 위상 제어를 행하는 경우의 구성의 일례를 도시하는 도면이다. 실시형태 2의 오디오 신호 복호화 장치는 부호열인 혼입 신호 정보(401) 및 보조 정보(407)를 입력하고, 입력된 혼입 신호 정보(401) 및 보조 정보(407)에 의거하여 출력 신호(1)(405) 및 출력 신호(2)(406)를 출력하는 오디오 신호 복호화 장치로서, 혼입 신호 복호화부(402), 신호 분리부(403), 게인 제어부(404), 시간 주파수 매트릭스 생성부(408) 및 위상 제어부(409)를 구비한다.
실시형태 2의 구성과 전술의 실시형태 1의 구성 상의 차이는, 위상 제어부(409)가 추가된 점 뿐이고, 그 밖의 구성은 실시형태 1과 마찬가지이다. 따라서 본 실시형태 2에서는 위상 제어부(409)의 구성만 상세히 설명한다.
부호화 시에 혼입된 신호가 서로 관련성이 있는 경우, 특히, 어느 한 쪽의 신호에 대하여 다른 한 쪽의 신호가 지연이 있고, 게인이 상이한 것으로서 취급하는 경우, 혼입 신호는, (수학식 1)과 같이 표기된다.
Figure 112006075779476-PCT00001
여기서는, mx는 혼입된 후의 신호, x1, x2가 입력 신호(혼입 전의 신호), A는 게인 보정, phaseFactor는 위상차에 따라서 곱하는 계수로 한다. 따라서, 혼입 신호(mx)는 신호(x1)의 함수로서 나타내기 때문에, 위상 제어부(409)에서는 혼입 신호(mx)로부터 신호(x1)를 용이하게 산출하여 분리할 수 있다. 신호(x2)는 혼입 신호(mx)로부터 신호(x1)를 분리함으로써 얻어진다. 또한, 이와 같이 분리된 신호(x1및 x2)에 대하여, 게인 제어부(404)가 보조 정보(407)로부터 얻어지는 시간 주파수 매트릭스에 따라서 게인 제어를 행하기 때문에, 보다 원음에 가까운 출력 신호(1)(405) 및 출력 신호(2)(406)를 출력할 수 있다.
A 및 phaseFactor는 혼입된 후의 신호로부터 도출하는 것은 아니고, 부호화 시(즉 혼입하기 전의 복수의 신호)로부터 도출할 수 있기 때문에, 이들을 미리 부호화 장치에서 보조 정보(407)에 부호화해 두면, 위상 제어부(409)에서는 분리한 각각의 신호의 위상을 제어 가능하다.
위상차는 정수에 한정되지 않는 샘플수로서 부호화되어도 좋고, 공분산 행렬로 부여되어도 좋다. 공분산 행렬은 해당 사업자에게는 공지인 기술이기 때문에, 설명을 생략한다.
위상 정보가, 청감 상 중요한 주파수 대역도 있으면, 위상 정보가 음질에 큰 영향을 주지 않는 신호나 주파수 대역이 있기 때문에, 위상 정보는 모든 주파수 대역 및 모든 시간에 보낼 필요는 없다. 즉, 위상 정보가 청감 상, 중요하지 않은 주파수 대역이나 음질에 큰 영향을 주지 않는 신호나 주파수 대역에서는, 서브 밴드 신호의 위상 제어를 생략할 수 있다. 따라서, 위상 정보는 서브 밴드 신호마다 생성해 두면, 쓸데없는 정보를 보내지 않고서 끝나, 보조 정보의 데이터량을 삭감할 수 있다.
(실시형태 3)
본 발명의 구체적인 복호화 장치에 관해서 도 11을 이용하여 설명한다. 도 11은 본 실시형태의 오디오 신호 복호화 장치에 있어서, 입력 신호끼리의 상관이 작은 경우에 선형 예측 필터를 이용하는 경우의 구성의 일례를 도시하는 도면이다.
실시형태 3의 오디오 신호 복호화 장치는, 혼입 신호 정보(501)와, 보조 정보(507)를 입력으로 하고, 원래의 입력 신호끼리에 큰 상관이 없는 경우, 한 쪽의 신호를 혼입 신호의 함수로 나타내는 무상관 신호(노이즈 신호)로 간주하여 생성하고 출력 신호(1)(505)와 출력 신호(2)(506)를 출력하는 오디오 신호 복호화 장치로서, 혼입 신호 복호화부(502), 신호 분리부(503), 게인 제어부(504), 시간 주파수 매트릭스 생성부(508), 위상 제어부(509) 및 선형 예측 필터 적응부(510)를 구비한다.
우선, 이 실시형태 3의 복호화 장치는, 실시형태 1에서의 복호화 장치를 상세히 설명하는 것이다.
실시형태 3의 구성과 전술의 실시형태 2와의 구성 상의 차이는, 선형 예측 필터 적응부(510)가 추가된 점 뿐으로, 그 밖의 구성은 실시형태 2와 동일하다. 따라서 본 실시형태 3에서는, 선형 예측 필터 적응부(510)의 구성만 상세히 설명한다.
부호화 시에 혼입된 신호가 서로 상관이 작은 경우, 어느 한 쪽의 신호에 대하여 다른 한 쪽의 신호를, 지연 등을 이용하여 단순히 표현할 수 없다. 선형 예측 필터 적응부(510)는, 이 경우는 한 쪽의 신호에 대하여, 또 한 쪽의 신호를 무상관 신호(노이즈 신호)로 간주하여 부호화하는 것이 생각된다. 이러한 경우는, 상관이 작은 것을 나타내는 플래그 등을 미리 부호화 열 중에 부호화해 두면, 복호화 시에 상관이 작은 경우의 분리 처리를 실행할 수 있다. 이 정보는 주파수 대역마다 또는 시간 간격마다 부호화해도 좋다. 또한, 이 플래그는 서브 밴드 신호마다 부호 열 중에 부호화해 두어도 좋다.
Figure 112006075779476-PCT00002
여기서는, mx는 혼입된 후의 신호, x1m, x2가 입력 신호(혼입 전의 신호), Func()는 선형 예측 계수 등으로 이루어지는 다항식이다.
신호(mx, x1, x2)는 혼입된 후의 신호로부터 도출하는 것은 아니고, 부호화 시(즉 혼입하기 전의 복수의 신호)에 이용할 수 있기 때문에, 신호(mx, x1, x2)로부터 Func()되는 다항식의 계수를 도출하고, 이들 계수를 미리 보조 정보(507)에 부호화해 두면, 선형 예측 필터 적응부(510)로서는 x1, x2를 도출 가능하다.
Figure 112006075779476-PCT00003
따라서, (수학식 3)으로 하는 것 같은 Func()의 계수를 도출하여 부호화하면 좋다.
이상과 같이, 입력 신호끼리의 상관의 유무를 부호 열 중에 플래그로서 포함시켜 둠으로써, 입력 신호끼리에 그다지 상관이 없는 경우나, 입력 신호가 2이상 있는 경우에서 그 중의 어느 하나를 기준 신호로 하여 다른 입력 신호가 기준 신호와 그다지 상관이 없는 경우에는, 다른 쪽의 신호를 혼입 신호의 함수로 나타내는 무상관 신호(노이즈 신호)로 하여 나타낼 수 있다. 또한, 입력 신호끼리의 상관성이 높은 경우에는, 다른 신호를 기준이 되는 신호의 지연 신호로서 나타낼 수 있 다. 그리고, 이렇게 하여 혼입 신호로부터 분리된 각 신호에 시간 주파수 매트릭스로 표시되는 게인을 승산함으로써, 입력된 원음에 보다 충실한 출력 신호를 얻을 수 있다는 효과가 있다.
본 발명의 오디오 신호 복호화 장치 및 부호화 장치는, 종래부터 오디오 부호화 및 복호화 방법이 적용되어 있던 모든 어플리케이션에 있어서 적용 가능하다.
오디오 부호화된 비트 스트림된 부호화 열은 현재, 방송 컨텐츠의 전송, DVD나 SD 카드 등의 축적 매체에 기록되어 재생되는 응용, 휴대 전화로 대표되는 통신 기기에 AV 컨텐츠를 전송하는 경우 등에 사용하고 있다. 또한, 인터넷 상에서 주고 받아지는 전자 데이터로서, 오디오 신호를 전송하는 경우에 있어서도 유용하다.
본 발명의 오디오 신호 복호화 장치는, 전지 등에 의해 구동되는 휴대 전화기 등의 포터블 타입의 오디오 신호 재생 장치로서 유용하다. 또한, 본 발명의 오디오 신호 복호화 장치는, 멀티 채널 재생과 2채널 재생을 전환하여 재생 가능한 멀티 채널 홈 플레이어로서 유용하다. 또한, 본 발명의 오디오 신호 부호화 장치는, 대역이 좁은 전송로를 통해 휴대 전화기 등의 포터블 타입의 오디오 신호 재생 장치에 오디오 컨텐츠를 배달하는 방송국이나 컨텐츠 배달 서버에 구비되는 오디오 신호 부호화 장치로서 유용하다.

Claims (19)

  1. 부호열을 복호화하여 오디오 신호를 출력하는 오디오 신호 복호화 장치로서,
    복수의 오디오 신호가 혼입된 보다 소수의 혼입 신호를 나타내는 부호열과, 상기 혼입 신호를 혼입되기 전의 오디오 신호로 되돌리기 위한 보조 정보를 입력된 부호열로부터 추출하는 추출 수단과,
    상기 혼입 신호를 나타내는 상기 부호열을 복호화하는 복호화 수단과,
    추출된 상기 보조 정보에 의거하여 상기 복호화에 의해 얻어진 상기 혼입 신호를 분리하여, 혼입되기 전의 상기 오디오 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하는 신호 분리 수단과,
    복호화된 상기 혼입 신호를 재생하거나 또는 상기 혼입 신호로부터 분리된 복수의 오디오 신호를 재생하는 재생 수단을 구비하는 오디오 신호 복호화 장치.
  2. 청구항 1에 있어서, 상기 보조 정보는 상기 혼입 신호가 나타내는 공간을 복수개 영역으로 분할하는 방법을 나타내는 분할 정보와, 분할된 각 영역 내의 혼입 신호에 대응하는 게인을 포함하고,
    상기 신호 분리 수단은,
    상기 복호화에 의해 얻어진 상기 혼입 신호를 상기 분할 정보에 따라 복수개 영역으로 분할하는 영역 분할부와,
    분할된 상기 각 영역 내의 혼입 신호에, 대응하는 상기 게인을 승산하여, 청 각적으로 유사한 상기 오디오 신호를 생성하는 근사 신호 생성부를 구비하고,
    상기 신호 분리 수단은 상기 근사 신호 생성부에 의한 처리를 반복하고, 혼입되기 전의 수에 상당하는 오디오 신호를 생성하는 오디오 신호 복호화 장치.
  3. 청구항 2에 있어서, 상기 보조 정보는, QMF 필터 처리가 실시된 시간 주파수 공간상의 서브 밴드 신호에 대하여, 시간 주파수 공간의 상기 분할 정보와, 상기 각 영역 내의 게인의 분포를 나타내는 시간 주파수 매트릭스를 포함하고,
    상기 영역 분할부는 상기 QMF 필터 처리에 의해 시간 주파수 공간상의 서브 밴드 신호로 나타내고 있는 혼입 신호에 대하여, 상기 분할 정보에 따라서 상기 시간 주파수 공간을 복수개 영역으로 분할하고,
    상기 근사 신호 생성부는 분할된 영역마다, 상기 서브 밴드 신호로 나타낸 혼입 신호에 대응하는 게인을 승산하는 오디오 신호 복호화 장치.
  4. 청구항 2에 있어서, 상기 보조 정보는 이산 코사인 변환이 실시된 주파수축 상의 스펙트럼 신호에 대하여, 주파수 영역의 상기 분할 정보와, 상기 각 영역 내의 게인의 분포를 나타내는 주파수 매트릭스를 포함하고,
    상기 영역 분할부는 상기 이산 코사인 변환에 의해 주파수축 상의 스펙트럼 신호로 나타내고 있는 혼입 신호에 대하여, 상기 분할 정보에 따라서 상기 주파수 영역을 복수개 영역으로 분할하고,
    상기 근사 신호 생성부는 분할된 영역마다, 상기 스펙트럼 신호로 나타낸 혼 입 신호에 대응하는 게인을 승산하는 오디오 신호 복호화 장치.
  5. 청구항 1에 있어서, 상기 보조 정보는 혼입되기 전의 복수의 오디오 신호의 각각에 대해서, 그 중의 1개를 기준 신호로 한 경우의 위상차를 나타내는 위상 정보를 포함하고,
    상기 신호 분리 수단은,
    혼입되기 전의 복수의 상기 오디오 신호를 상기 보조 정보 내의 상기 위상 정보를 이용하여 상기 기준 신호로 나타내고, 상기 혼입 신호로부터 연산에 의해 구해지는 상기 기준 신호로부터, 상기 각 오디오 신호를 산출하는 오디오 신호 산출부를 구비하고,
    상기 신호 분리 수단은 상기 오디오 신호 산출부에 의해 산출된 상기 각 오디오 신호를, 혼입되기 전의 상기 오디오 신호로서 생성하는 오디오 신호 복호화 장치.
  6. 청구항 5에 있어서, 상기 보조 정보는, QMF 필터 처리가 실시된 시간 주파수 공간상의 서브 밴드 신호에 대하여, 혼입되기 전의 복수의 오디오 신호의 각 서브 밴드 신호를 단위로 하여 상기 위상차를 나타내는 위상 정보를 포함하고,
    상기 오디오 신호 산출부는, 혼입되기 전의 복수의 상기 QMF 필터 처리가 실시된 상기 오디오 신호를, 서브 밴드 신호마다 상기 보조 정보 내의 상기 위상 정보를 이용하여 상기 기준 신호의 서브 밴드 신호로 나타내는 오디오 신호 복호화 장치.
  7. 청구항 6에 있어서, 혼입되기 전의 복수의 오디오 신호를 구성하는 서브 밴드 신호에서, 상기 보조 정보에 상기 위상 정보가 포함되지 않는 서브 밴드 신호는, 상기 기준 신호에 대하여 상관이 낮은 신호이거나, 노이즈성의 신호이거나 또는 청각적으로 위상차가 감지되기 어려운 고역의 신호인 오디오 신호 복호화 장치.
  8. 청구항 5에 있어서, 상기 보조 정보는 혼입되기 전의 복수의 오디오 신호끼리의 상관의 정도를 나타내는 플래그를 포함하고,
    상기 신호 분리 수단은 상기 보조 정보에 포함되는 플래그가 상기 오디오 신호끼리의 상관이 높은 것을 나타내고 있는 경우, 상기 오디오 신호 산출부에 의해 산출된 상기 각 오디오 신호를, 혼입되기 전의 상기 오디오 신호로서 생성하는 오디오 신호 복호화 장치.
  9. 청구항 1에 있어서, 상기 보조 정보는 혼입되기 전의 1이상의 오디오 신호를 상기 혼입 신호의 함수로서 나타내기 위한 선형 예측 계수를 포함하고,
    상기 신호 분리 수단은,
    상기 보조 정보 내의 상기 선형 예측 계수를 이용하여, 상기 혼입 신호의 함수로서 나타내는 무상관 신호를 산출하는 무상관 신호 산출부를 구비하고,
    상기 신호 분리 수단은 산출된 상기 무상관 신호를 상기 혼입 신호로부터 제 거함으로써, 혼입되기 전의 상기 오디오 신호를 생성하는 오디오 신호 복호화 장치.
  10. 청구항 9에 있어서, 상기 보조 정보는 혼입되기 전의 복수의 오디오 신호끼리의 상관의 정도를 나타내는 플래그를 포함하고,
    상기 신호 분리 수단은 상기 보조 정보에 포함되는 플래그가 상기 오디오 신호끼리의 상관이 낮은 것을 나타내고 있는 경우, 상기 무상관 신호를 상기 혼입 신호로부터 제거함으로써 혼입되기 전의 상기 오디오 신호를 생성하는 오디오 신호 복호화 장치.
  11. 청구항 9에 있어서, 상기 선형 예측 계수는 혼입 신호를 입력 신호로 하는 선형 예측 필터를 함수를 이용하여 정의하고, 상기 선형 예측 필터의 출력이 상기 혼입 신호에 혼입되기 전의 적어도 어느 하나의 상기 오디오 신호를 나타내도록 도출된 계수인 오디오 신호 복호화 장치.
  12. 청구항 1에 있어서, 혼입되기 전의 복수의 상기 오디오 신호는, 멀티 채널 신호를 구성하는 각 채널의 오디오 신호이고, 상기 혼입 신호는 상기 멀티 채널 신호를 다운 믹스하여 얻어지는 다운 믹스 신호로서,
    상기 복호화 수단은 상기 혼입 신호를 나타내는 상기 부호열을 복호화하여 다운 믹스 신호를 생성하고,
    상기 신호 분리 수단은 추출된 상기 보조 정보에 의거하여, 다운 믹스되기 전의 멀티 채널 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하는 오디오 신호 복호화 장치.
  13. 복수의 오디오 신호가 혼입된 혼입 신호를 부호화하는 부호화 장치로서,
    입력되는 복수의 오디오 신호를 혼입하여 원래의 오디오 신호보다도 소수의 오디오 신호를 나타내는 혼입 신호를 생성하는 혼입 신호 생성 수단과,
    상기 혼입 신호로부터, 혼입되기 전의 상기 오디오 신호와 청각상 동등한 오디오 신호를 분리하기 위한 보조 정보를 생성하는 보조 정보 생성 수단과,
    상기 혼입 신호를 부호화하는 부호화 수단과,
    부호화된 상기 혼입 신호와 생성된 상기 보조 정보를 포함하는 부호열을 생성하는 부호열 생성 수단을 구비하는 오디오 신호 부호화 장치.
  14. 부호열을 복호화하여 오디오 신호를 출력하는 오디오 신호 복호화 방법으로서,
    복수의 오디오 신호가 혼입된 보다 소수의 혼입 신호를 나타내는 부호열과, 상기 혼입 신호를 혼입되기 전의 오디오 신호로 되돌리기 위한 보조 정보를 입력된 부호열로부터 추출하고,
    상기 혼입 신호를 나타내는 상기 부호열을 복호화하고,
    추출된 상기 보조 정보에 의거하여 상기 복호화에 의해 얻어진 상기 혼입 신 호를 분리하여, 혼입되기 전의 상기 오디오 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하고,
    복호화된 상기 혼입 신호를 재생하거나 또는 상기 혼입 신호로부터 분리된 복수의 오디오 신호를 재생하는 단계를 포함하는 오디오 신호 복호화 방법.
  15. 복수의 오디오 신호가 혼입된 혼입 신호를 부호화하는 부호화 방법으로서,
    입력되는 복수의 오디오 신호를 혼입하여 혼입되기 전의 상기 오디오 신호보다도 소수의 오디오 신호를 나타내는 혼입 신호를 생성하며,
    상기 혼입 신호로부터, 혼입되기 전의 상기 오디오 신호와 청각상 동등한 오디오 신호를 분리하기 위한 보조 정보를 생성하고,
    상기 혼입 신호를 부호화하며,
    부호화된 상기 혼입 신호와 생성된 상기 보조 정보를 포함하는 부호열을 생성하는 단계를 포함하는 오디오 신호 부호화 방법.
  16. 부호열을 복호화하여 오디오 신호를 출력하는 오디오 신호 복호화 장치를 위한 프로그램으로서, 컴퓨터에
    복수의 오디오 신호가 혼입된 보다 소수의 혼입 신호를 나타내는 부호열과, 상기 혼입 신호를 혼입되기 전의 오디오 신호로 되돌리기 위한 보조 정보를, 입력된 부호열로부터 추출하는 단계와, 상기 혼입 신호를 나타내는 상기 부호열을 복호화하는 단계와, 추출된 상기 보조 정보에 의거하여 상기 복호화에 의해 얻어진 상 기 혼입 신호를 분리하여 혼입되기 전의 상기 오디오 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하는 단계와, 복호화된 상기 혼입 신호를 재생하거나 또는 상기 혼입 신호로부터 분리된 복수의 오디오 신호를 재생하는 단계를 실행시키는 프로그램.
  17. 복수의 오디오 신호가 혼입된 혼입 신호를 부호화하는 부호화 장치를 위한 프로그램으로서, 컴퓨터에
    입력되는 복수의 오디오 신호를 혼입하여, 혼입되기 전의 상기 오디오 신호보다도 소수의 오디오 신호를 나타내는 혼입 신호를 생성하는 단계와, 상기 혼입 신호로부터, 혼입되기 전의 상기 오디오 신호와 청각상 동등한 오디오 신호를 분리하기 위한 보조 정보를 생성하는 단계와, 상기 혼입 신호를 부호화하는 단계와, 부호화된 상기 혼입 신호와 생성된 상기 보조 정보를 포함하는 부호열을 생성하는 단계를 실행시키는 프로그램.
  18. 컴퓨터에, 복수의 오디오 신호가 혼입된 보다 소수의 혼입 신호를 나타내는 부호열과, 상기 혼입 신호를 혼입되기 전의 오디오 신호로 되돌리기 위한 보조 정보를 입력된 부호열로부터 추출하는 단계와, 상기 혼입 신호를 나타내는 상기 부호열을 복호화하는 단계와, 추출된 상기 보조 정보에 의거하여 상기 복호화에 의해 얻어진 상기 혼입 신호를 분리하여, 혼입되기 전의 상기 오디오 신호와 청각적으로 유사한 복수의 오디오 신호를 생성하는 단계와, 복호화된 상기 혼입 신호를 재생하 거나 또는 상기 혼입 신호로부터 분리된 복수의 오디오 신호를 재생하는 단계를 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  19. 컴퓨터에, 입력되는 복수의 오디오 신호를 혼입하여, 혼입되기 전의 상기 오디오 신호보다도 소수의 오디오 신호를 나타내는 혼입 신호를 생성하는 단계와, 상기 혼입 신호로부터, 혼입되기 전의 상기 오디오 신호와 청각상 동등한 오디오 신호를 분리하기 위한 보조 정보를 생성하는 단계와, 상기 혼입 신호를 부호화하는 단계와, 부호화된 상기 혼입 신호와 생성된 상기 보조 정보를 포함하는 부호열을 생성하는 단계를 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
KR1020067021807A 2004-05-19 2005-05-17 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치 KR101117336B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2004-00148661 2004-05-19
JP2004148661 2004-05-19
PCT/JP2005/008997 WO2005112002A1 (ja) 2004-05-19 2005-05-17 オーディオ信号符号化装置及びオーディオ信号復号化装置

Publications (2)

Publication Number Publication Date
KR20070019718A true KR20070019718A (ko) 2007-02-15
KR101117336B1 KR101117336B1 (ko) 2012-03-08

Family

ID=35394382

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067021807A KR101117336B1 (ko) 2004-05-19 2005-05-17 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치

Country Status (8)

Country Link
US (1) US8078475B2 (ko)
EP (2) EP1914723B1 (ko)
JP (1) JP4939933B2 (ko)
KR (1) KR101117336B1 (ko)
CN (1) CN1954362B (ko)
CA (1) CA2566366C (ko)
DE (2) DE602005024548D1 (ko)
WO (1) WO2005112002A1 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1691348A1 (en) * 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
DE602006011600D1 (de) * 2005-04-28 2010-02-25 Panasonic Corp Audiocodierungseinrichtung und audiocodierungsverfahren
EP1876585B1 (en) * 2005-04-28 2010-06-16 Panasonic Corporation Audio encoding device and audio encoding method
US8626515B2 (en) * 2006-03-30 2014-01-07 Lg Electronics Inc. Apparatus for processing media signal and method thereof
JP2007310087A (ja) * 2006-05-17 2007-11-29 Mitsubishi Electric Corp 音声符号化装置及び音声復号装置
CN101578655B (zh) * 2007-10-16 2013-06-05 松下电器产业株式会社 流合成装置、解码装置、方法
WO2009075510A1 (en) * 2007-12-09 2009-06-18 Lg Electronics Inc. A method and an apparatus for processing a signal
KR101428487B1 (ko) * 2008-07-11 2014-08-08 삼성전자주식회사 멀티 채널 부호화 및 복호화 방법 및 장치
EP2144229A1 (en) * 2008-07-11 2010-01-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient use of phase information in audio encoding and decoding
CN102138176B (zh) * 2008-07-11 2013-11-06 日本电气株式会社 信号分析装置、信号控制装置及其方法
WO2010013450A1 (ja) * 2008-07-29 2010-02-04 パナソニック株式会社 音響符号化装置、音響復号化装置、音響符号化復号化装置および会議システム
KR20100035121A (ko) * 2008-09-25 2010-04-02 엘지전자 주식회사 신호 처리 방법 및 이의 장치
US8346380B2 (en) 2008-09-25 2013-01-01 Lg Electronics Inc. Method and an apparatus for processing a signal
US8346379B2 (en) 2008-09-25 2013-01-01 Lg Electronics Inc. Method and an apparatus for processing a signal
EP2169665B1 (en) * 2008-09-25 2018-05-02 LG Electronics Inc. A method and an apparatus for processing a signal
WO2011048792A1 (ja) 2009-10-21 2011-04-28 パナソニック株式会社 音響信号処理装置、音響符号化装置および音響復号装置
CN103069484B (zh) * 2010-04-14 2014-10-08 华为技术有限公司 时/频二维后处理
RU2595910C2 (ru) 2011-06-24 2016-08-27 Конинклейке Филипс Н.В. Процессор аудиосигналов для обработки кодированных многоканальных аудиосигналов и способ для этого
JP5057535B1 (ja) 2011-08-31 2012-10-24 国立大学法人電気通信大学 ミキシング装置、ミキシング信号処理装置、ミキシングプログラム及びミキシング方法
JP6019266B2 (ja) 2013-04-05 2016-11-02 ドルビー・インターナショナル・アーベー ステレオ・オーディオ・エンコーダおよびデコーダ
CN108806704B (zh) 2013-04-19 2023-06-06 韩国电子通信研究院 多信道音频信号处理装置及方法
CN104982042B (zh) 2013-04-19 2018-06-08 韩国电子通信研究院 多信道音频信号处理装置及方法
US9319819B2 (en) 2013-07-25 2016-04-19 Etri Binaural rendering method and apparatus for decoding multi channel audio
US9658818B2 (en) 2014-08-11 2017-05-23 Princeton Audio, LLC Adaptable audio systems
CN105812986A (zh) * 2016-05-09 2016-07-27 中山奥凯华泰电子有限公司 将多声道缩混成无线两声道的音箱和处理方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100518470B1 (ko) * 1993-12-23 2005-12-27 코닌클리케 필립스 일렉트로닉스 엔.브이. 적응성디더감산,숨겨진채널비트삽입및필터링을통한다중비트코드화디지탈음향의엔코딩방법및장치와,이방법과함께사용하기위한엔코딩및디코딩장치
TW295747B (ko) 1994-06-13 1997-01-11 Sony Co Ltd
JP3397001B2 (ja) * 1994-06-13 2003-04-14 ソニー株式会社 符号化方法及び装置、復号化装置、並びに記録媒体
EP0688113A2 (en) 1994-06-13 1995-12-20 Sony Corporation Method and apparatus for encoding and decoding digital audio signals and apparatus for recording digital audio
JPH09102742A (ja) 1995-10-05 1997-04-15 Sony Corp 符号化方法および装置、復号化方法および装置、並びに記録媒体
JPH1132399A (ja) 1997-05-13 1999-02-02 Sony Corp 符号化方法及び装置、並びに記録媒体
US6356211B1 (en) * 1997-05-13 2002-03-12 Sony Corporation Encoding method and apparatus and recording medium
KR20000069793A (ko) 1997-10-31 2000-11-25 이데이 노부유끼 정보 부호화 장치 및 방법, 정보 복호 장치 및 방법, 기록 매체 및 제공 매체
JP2000123481A (ja) * 1997-10-31 2000-04-28 Sony Corp 情報符号化装置および方法、情報復号装置および方法、記録媒体、並びに提供媒体
SE519552C2 (sv) 1998-09-30 2003-03-11 Ericsson Telefon Ab L M Flerkanalig signalkodning och -avkodning
JP3341992B2 (ja) 1998-11-16 2002-11-05 日本ビクター株式会社 光記録媒体、音声復号装置
US6539357B1 (en) * 1999-04-29 2003-03-25 Agere Systems Inc. Technique for parametric coding of a signal containing information
KR20040063155A (ko) * 2001-11-23 2004-07-12 코닌클리케 필립스 일렉트로닉스 엔.브이. 인지성 잡음의 대치
JP2003195894A (ja) 2001-12-27 2003-07-09 Mitsubishi Electric Corp 符号化装置、復号化装置、符号化方法、及び復号化方法
JP4296753B2 (ja) 2002-05-20 2009-07-15 ソニー株式会社 音響信号符号化方法及び装置、音響信号復号方法及び装置、並びにプログラム及び記録媒体
AU2003244932A1 (en) * 2002-07-12 2004-02-02 Koninklijke Philips Electronics N.V. Audio coding
EP1523863A1 (en) * 2002-07-16 2005-04-20 Koninklijke Philips Electronics N.V. Audio coding
US7502743B2 (en) * 2002-09-04 2009-03-10 Microsoft Corporation Multi-channel audio encoding and decoding with multi-channel transform selection
US7447317B2 (en) * 2003-10-02 2008-11-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V Compatible multi-channel coding/decoding by weighting the downmix channel
EP1818911B1 (en) * 2004-12-27 2012-02-08 Panasonic Corporation Sound coding device and sound coding method

Also Published As

Publication number Publication date
CA2566366A1 (en) 2005-11-24
DE602005022235D1 (de) 2010-08-19
CA2566366C (en) 2013-08-06
JP4939933B2 (ja) 2012-05-30
EP1914723B1 (en) 2010-07-07
EP1914723A3 (en) 2008-05-14
US20070244706A1 (en) 2007-10-18
JPWO2005112002A1 (ja) 2008-03-27
US8078475B2 (en) 2011-12-13
CN1954362B (zh) 2011-02-02
WO2005112002A1 (ja) 2005-11-24
DE602005024548D1 (de) 2010-12-16
EP1914723A2 (en) 2008-04-23
KR101117336B1 (ko) 2012-03-08
EP1758100A4 (en) 2007-07-04
EP1758100A1 (en) 2007-02-28
EP1758100B1 (en) 2010-11-03
CN1954362A (zh) 2007-04-25

Similar Documents

Publication Publication Date Title
KR101117336B1 (ko) 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치
KR100955361B1 (ko) 적응 잔류 오디오 코딩
US7916873B2 (en) Stereo compatible multi-channel audio coding
US8352280B2 (en) Scalable multi-channel audio coding
KR101158698B1 (ko) 복수-채널 인코더, 입력 신호를 인코딩하는 방법, 저장 매체, 및 인코딩된 출력 데이터를 디코딩하도록 작동하는 디코더
US8081764B2 (en) Audio decoder
JP4601669B2 (ja) マルチチャネル信号またはパラメータデータセットを生成する装置および方法
EP2535892B1 (en) Audio signal decoder, method for decoding an audio signal and computer program using cascaded audio object processing stages
US8019614B2 (en) Energy shaping apparatus and energy shaping method
EP1376538A1 (en) Hybrid multi-channel/cue coding/decoding of audio signals
US20070168183A1 (en) Audio distribution system, an audio encoder, an audio decoder and methods of operation therefore
CN112823534B (zh) 信号处理设备和方法以及程序
EP2610867B1 (en) Audio reproducing device and audio reproducing method
WO2006011367A1 (ja) オーディオ信号符号化装置および復号化装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150120

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160105

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170103

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180104

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190107

Year of fee payment: 8