JP5193397B2 - 選択的チャネル復号による効率的な多チャネル信号処理 - Google Patents
選択的チャネル復号による効率的な多チャネル信号処理 Download PDFInfo
- Publication number
- JP5193397B2 JP5193397B2 JP2012531290A JP2012531290A JP5193397B2 JP 5193397 B2 JP5193397 B2 JP 5193397B2 JP 2012531290 A JP2012531290 A JP 2012531290A JP 2012531290 A JP2012531290 A JP 2012531290A JP 5193397 B2 JP5193397 B2 JP 5193397B2
- Authority
- JP
- Japan
- Prior art keywords
- channel
- map
- channel selection
- audio
- channels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title description 8
- 238000000034 method Methods 0.000 claims description 56
- 108091006146 Channels Proteins 0.000 description 248
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 239000000284 extract Substances 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Transmission Systems Not Characterized By The Medium Used For Transmission (AREA)
Description
図1は、エンコードされたオーディオ情報の一つまたは複数のチャネルを表すビットストリームを伝達する入力信号を通信経路11から受け取り、復号されたオーディオ情報の一つまたは複数のチャネルを表す出力信号を通信経路19に沿って生成するオーディオ・デコーダ10の概略的なブロック図である。デコーダ10は、入力信号ビットストリームから、エンコードされたデータの一連のブロックまたはシンタックス要素を抽出し、経路13に沿って選択コンポーネント14に渡すパース(parse)・コンポーネント12を有する。選択コンポーネント14は、エンコードされたデータのどのシンタックス要素が経路15に沿って復号コンポーネント16に渡されるかを決定する。復号コンポーネント16は、エンコードされたデータのブロックに復号プロセスを適用して、経路17に沿って復号されたデータを生成する。フィルタ・コンポーネント18は復号されたデータに一つまたは複数の合成フィルタを適用し、経路19に沿って復号されたオーディオ情報を生成する。
本発明の諸側面を組み込むデコーダは、再生のために選択および処理されるべき入力ビットストリーム中のオーディオ・チャネルを定義するチャネル選択マスクを定義するために向上された選択コンポーネント14を使う。一つまたは複数のチャネル選択マップのセットを使うプロセスからチャネル選択マスクを構築する一つの実装を以下に述べる。これらのマップは、入力ビットストリーム中のチャネルの数に対していかなる制限を課すこともなく、復号されることのできる出力チャネルの数および型の構成を定義する。代替的な実装も可能である。
パース・コンポーネント12は入力信号ビットストリームからエンコードされたデータの一連のブロックまたはシンタックス要素を抽出する。パース・コンポーネント12は、当技術分野においてよく知られている通常の技法を使ってこれらのシンタックス要素を抽出してもよい。
図2は、本発明を実行するために選択コンポーネント14が実装されうる一つの仕方の概略図である。この実装では、コンポーネント32がビットストリームのチャネル構成を決定する。これについて以下でより詳細に述べる。
コンポーネント32が、特定のMPEG-2 AACまたはMPEG-4オーディオ準拠ビットストリームによって表されるオーディオ・チャネルの構成を決定するのは、三つの方法のうち一つにおいてでありうる。二つの方法は、MPEG-2 AACまたはMPEG-4オーディオ規格のいずれかに準拠するビットストリームに関する。第三の方法は、MPEG-2 AAC規格に準拠するビットストリームのみに関する。
(C)中央前方チャネル;(L)左前方チャネル;(R)右前方チャネル
(BC)後方中央チャネル;(BL)後方左チャネル;(BR)後方右チャネル
(SL)側方左チャネル;(SR)側方右チャネル;(LFE)低周波数効果チャネル
前方チャネルと側方チャネルの間にある他所で言及される追加的チャネルは、「ワイド」チャネルと称される。ワイド左チャネル(WL)はL位置とSL位置の間であり、ワイド右チャネルはR位置とSR位置の間である。
コンポーネント34は、入力ビットストリーム中のオーディオ・チャネルと、それらのチャネルを再生するよう意図されているスピーカーの位置との間の関係を定義するチャネル構成マップを生成する。コンポーネント38は、どのスピーカー位置が復号されることができるかを指定する一つまたは複数のチャネル選択マップのセットを提供する。好ましくは、チャネル構成マップおよびチャネル選択マップは、同じフォーマットおよびチャネル配置をもつ。
コンポーネント38によって与えられるチャネル選択マップは、デコーダ10が処理および復号できる、マスター・チャネル選択マップにおけるチャネルの組み合わせを定義する。ビットストリーム中のどのチャネルが復号されるかを指定するために、これらのマップの一つがコンポーネント36によって選ばれる。
コンポーネント36は、コンポーネント38によって与えられたチャネル選択マップのすべてを調べ、コンポーネント34によって生成されたチャネル構成マップに対する最良一致を与えるチャネル選択マップを選ぶ。ある実装では、最良一致は、最大数のチャネルが復号されることを許容するチャネル選択マップを同定することによって決定される。これは、図3および図4において概略的に例解される。
コンポーネント42は、入力ビットストリームのどのオーディオ・チャネルが復号されるかおよびそれらがデコーダ10の出力チャネルにどのように導かれるかを定義するチャネル選択マスクを構築するために、選ばれたチャネル選択マップを使う。このマスクは、ある種のチャネルの復号を禁止し、他のチャネルの復号を許可する。図3および図4に示される実装では、マスクは「O」および「X」の記号で表される項目を含む。マスク中の「O」の項目はチャネルが復号されることを許容する。マスク中の「X」の項目はチャネルが復号されることを禁止する。
コンポーネント44および46は、チャネル選択マスクに従ってビットストリームを処理する。コンポーネント44は、ビットストリームからオーディオ・チャネル・シンタックス要素を抽出し、それらをコンポーネント46に渡す。コンポーネント46は各オーディオ・チャネル・シンタックス要素をチャネル選択マスクと突き合わせて検査する。対応するマスク項目が有効にされている、あるいは図に示したような「O」項目である場合、そのシンタックス要素は復号のために経路15に沿って渡される。対応するマスク項目が無効にされている、あるいは図に示したような「X」項目である場合、そのシンタックス要素は破棄される。
本発明のさまざまな側面を組み込む装置は、コンピュータまたは汎用コンピュータにおいて見出されるのと同様のコンポーネントに結合されたデジタル信号プロセッサ(DSP)回路のようなより特化したコンポーネントを含む他の何らかの装置による実行のためのソフトウェアを含む、多様な仕方で実装されうる。図5は、本発明の諸側面を実装するために使用されうる装置70の概略的なブロック図である。プロセッサ72は、計算資源を提供する。RAM 73は、処理のためにプロセッサ72によって使用されるランダム・アクセス・メモリ(RAM)である。ROM 74は、装置70を動作させるために必要とされるプログラムを記憶するため、および可能性としては本発明のさまざまな側面を実行するための読み出し専用メモリ(ROM)のような持続性記憶装置の何らかの形を表す。I/O制御76は、通信経路11、19によって信号を送受信するインターフェース回路を表す。図示した実施形態では、すべての主要なシステム・コンポーネントはバス71に接続されている。バス71は二つ以上の物理的または論理的バスを表していてもよい。ただし、バス・アーキテクチャは本発明を実装するために必須ではない。
Claims (11)
- エンコードされたオーディオ情報を復号する方法であって:
一つまたは複数のオーディオ・チャネルを表すエンコードされた情報を伝達する入力信号をデコーダにおいて受信し、
前記デコーダが処理および復号できるすべての可能なチャネルを定義するマスター・チャネル選択マップを提供し、
前記エンコードされた情報によって表される前記一つまたは複数のオーディオ・チャネルについてチャネル構成マップを決定し、ここで、前記チャネル構成マップは、前記入力信号中の各オーディオ・チャネルと、前記マスター・チャネル選択マップ中のチャネルとの間の関係を定義し、前記マスター・チャネル選択マップ内のエントリーは、前記入力信号中の対応するチャネルに関連付けられているスピーカー位置を指定し、
前記マスター・チャネル選択マップ内の、前記デコーダが処理および復号できるチャネルの組み合わせを定義するチャネル選択マップを複数提供し、
前記複数のチャネル選択マップから、前記チャネル構成マップへの最良一致を与えるチャネル選択マップを選び、
前記チャネル構成マップ中の、選ばれたチャネル選択マップにおいて対応するスピーカー位置を有する各チャネルを指定するよう、チャネル選択マスクを構築し、
前記入力信号からエンコードされた情報を抽出し、
前記チャネル選択マスクにおいて指定されているオーディオ・チャネルについて、前記抽出されたエンコードされた情報を復号する、
ことを含む方法。 - 請求項1記載の方法であって:
前記複数のチャネル選択マップから、前記チャネル構成マップ中に存在するスピーカー位置を最大数もつチャネル選択マップを選択し、
選択されたチャネル選択マップを、前記チャネル構成マップへの最良一致を与える前記チャネル選択マップとして選ぶことを含む、
方法。 - 請求項2記載の方法であって:
前記複数のチャネル選択マップのうちからの各チャネル選択マップがそれぞれの優先度を有しており、
前記複数のチャネル選択マップのうちからの二つ以上のチャネル選択マップが、前記チャネル構成マップ中に存在するスピーカー位置を前記最大数に等しい数だけもち、
当該方法は、前記二つ以上のチャネル選択マップから、最も高い優先度をもつチャネル選択マップを選択することを含む、
方法。 - 前記エンコードされたオーディオ情報は第一の数のオーディオ・チャネルを表し、前記チャネル選択マスクは第二の数の復号されるべきオーディオ・チャネルを指定し、前記第一の数は前記第二の数より大きい、請求項1ないし3のうちいずれか一項記載の方法。
- 前記入力信号において伝達されるデータを調べることによって前記チャネル構成マップを決定する、請求項1ないし4のうちいずれか一項記載の方法。
- 一組のあらかじめ定義されたチャネル構成のうちからの一つのチャネル構成を指定する前記入力信号中のデータから、前記チャネル構成マップを決定する、請求項5記載の方法。
- 前記入力信号において表されている各オーディオ・チャネルを明示的に指定する前記入力信号中のデータから、前記チャネル構成マップを決定する、請求項5記載の方法。
- 前記入力信号において表されているオーディオ・チャネルの数および配置を判別することによって前記チャネル構成マップを決定する、請求項7記載の方法。
- 請求項8記載の方法であって:
前記入力信号において伝達される前記エンコードされたオーディオ情報が複数のフレームに配置されており、
前記チャネル構成マップが、最初の受領されたフレームからオーディオ・チャネルの数および配置を判別することによって決定され、
当該方法が:
平坦なチャネル選択マスクにおいて指定されているオーディオ・チャネルに従って、前記最初の受領されたフレームから、抽出されたエンコードされた情報を復号し、ここで、前記平坦なチャネル選択マスクは復号されることのできるオーディオ・チャネルの最大数を指定し、
前記チャネル選択マスクにおいて指定されているオーディオ・チャネルについて最初の受領されたフレームに続く諸フレームから、抽出されたエンコードされた情報を復号することを含む、
方法。 - 請求項1ないし9のうちいずれか一項記載の方法のすべてのステップを実行する手段を有する、エンコードされたオーディオ情報を復号する装置。
- 請求項1ないし9のうちいずれか一項記載の方法のすべてのステップを実行するよう、装置によって実行可能な命令のプログラムを記録した記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US24918509P | 2009-10-06 | 2009-10-06 | |
US61/249,185 | 2009-10-06 | ||
PCT/EP2010/006059 WO2011042149A1 (en) | 2009-10-06 | 2010-10-05 | Efficient multichannel signal processing by selective channel decoding |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013506860A JP2013506860A (ja) | 2013-02-28 |
JP5193397B2 true JP5193397B2 (ja) | 2013-05-08 |
Family
ID=43428208
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012531290A Active JP5193397B2 (ja) | 2009-10-06 | 2010-10-05 | 選択的チャネル復号による効率的な多チャネル信号処理 |
Country Status (7)
Country | Link |
---|---|
US (1) | US8738386B2 (ja) |
EP (1) | EP2486563B1 (ja) |
JP (1) | JP5193397B2 (ja) |
CN (1) | CN102549656B (ja) |
AR (1) | AR079287A1 (ja) |
TW (1) | TWI413110B (ja) |
WO (1) | WO2011042149A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9105300B2 (en) | 2009-10-19 | 2015-08-11 | Dolby International Ab | Metadata time marking information for indicating a section of an audio object |
EP2830335A3 (en) * | 2013-07-22 | 2015-02-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus, method, and computer program for mapping first and second input channels to at least one output channel |
US10356759B2 (en) * | 2016-03-11 | 2019-07-16 | Intel Corporation | Parameter encoding techniques for wireless communication networks |
GB2568274A (en) * | 2017-11-10 | 2019-05-15 | Nokia Technologies Oy | Audio stream dependency information |
US20200388292A1 (en) * | 2019-06-10 | 2020-12-10 | Google Llc | Audio channel mixing |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6128597A (en) | 1996-05-03 | 2000-10-03 | Lsi Logic Corporation | Audio decoder with a reconfigurable downmixing/windowing pipeline and method therefor |
JP2004194100A (ja) * | 2002-12-12 | 2004-07-08 | Renesas Technology Corp | オーディオ復号再生装置 |
KR100512943B1 (ko) * | 2003-10-14 | 2005-09-07 | 삼성전자주식회사 | 위성 방송 수신기 및 그의 위성 방송 수신 방법 |
US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
SE0400997D0 (sv) * | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Efficient coding of multi-channel audio |
US7991272B2 (en) * | 2005-07-11 | 2011-08-02 | Lg Electronics Inc. | Apparatus and method of processing an audio signal |
US20080221907A1 (en) * | 2005-09-14 | 2008-09-11 | Lg Electronics, Inc. | Method and Apparatus for Decoding an Audio Signal |
US7536299B2 (en) * | 2005-12-19 | 2009-05-19 | Dolby Laboratories Licensing Corporation | Correlating and decorrelating transforms for multiple description coding systems |
KR100803212B1 (ko) * | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | 스케일러블 채널 복호화 방법 및 장치 |
US7965848B2 (en) * | 2006-03-29 | 2011-06-21 | Dolby International Ab | Reduced number of channels decoding |
US7876904B2 (en) | 2006-07-08 | 2011-01-25 | Nokia Corporation | Dynamic decoding of binaural audio signals |
US8798776B2 (en) | 2008-09-30 | 2014-08-05 | Dolby International Ab | Transcoding of audio metadata |
CN102203854B (zh) | 2008-10-29 | 2013-01-02 | 杜比国际公司 | 使用预先存在的音频增益元数据的信号削波保护 |
TWI501580B (zh) | 2009-08-07 | 2015-09-21 | Dolby Int Ab | 資料串流的鑑別 |
UA101291C2 (ru) | 2009-12-16 | 2013-03-11 | Долби Интернешнл Аб | Сводка параметров последовательности бит sbr |
TWI529703B (zh) | 2010-02-11 | 2016-04-11 | 杜比實驗室特許公司 | 用以非破壞地正常化可攜式裝置中音訊訊號響度之系統及方法 |
-
2010
- 2010-09-21 TW TW099132007A patent/TWI413110B/zh active
- 2010-09-29 AR ARP100103537A patent/AR079287A1/es active IP Right Grant
- 2010-10-05 US US13/393,584 patent/US8738386B2/en active Active
- 2010-10-05 EP EP10767932.6A patent/EP2486563B1/en active Active
- 2010-10-05 JP JP2012531290A patent/JP5193397B2/ja active Active
- 2010-10-05 WO PCT/EP2010/006059 patent/WO2011042149A1/en active Application Filing
- 2010-10-05 CN CN2010800448770A patent/CN102549656B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
TWI413110B (zh) | 2013-10-21 |
EP2486563B1 (en) | 2020-02-26 |
JP2013506860A (ja) | 2013-02-28 |
AR079287A1 (es) | 2012-01-18 |
EP2486563A1 (en) | 2012-08-15 |
US20120209615A1 (en) | 2012-08-16 |
US8738386B2 (en) | 2014-05-27 |
CN102549656B (zh) | 2013-04-17 |
WO2011042149A1 (en) | 2011-04-14 |
CN102549656A (zh) | 2012-07-04 |
TW201140560A (en) | 2011-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10425757B2 (en) | Compatible multi-channel coding/decoding | |
US8145498B2 (en) | Device and method for generating a coded multi-channel signal and device and method for decoding a coded multi-channel signal | |
KR100946688B1 (ko) | 멀티 채널 오디오 디코더, 멀티 채널 인코더, 오디오 신호 처리 방법 및 상기 처리 방법을 수행하는 프로그램을 기록한 기록매체 | |
KR100955361B1 (ko) | 적응 잔류 오디오 코딩 | |
US9479871B2 (en) | Method, medium, and system synthesizing a stereo signal | |
US8078475B2 (en) | Audio signal encoder and audio signal decoder | |
JP5490143B2 (ja) | ダウンミックスオーディオ信号をアップミックスするためのアップミキサー、方法、および、コンピュータ・プログラム | |
JP5193397B2 (ja) | 選択的チャネル復号による効率的な多チャネル信号処理 | |
US20070206690A1 (en) | Device and method for generating a multi-channel signal or a parameter data set | |
EP1999744A1 (en) | Reduced number of channels decoding | |
KR20120084278A (ko) | 스케일러블 채널 복호화 방법 및 장치 | |
CN101479786A (zh) | 用于编码和解码基于对象的音频信号的方法和装置 | |
JP2022031955A (ja) | バイノーラル・ダイアログ向上 | |
EP3238465A1 (en) | Projection-based audio object extraction from audio content | |
KR100829560B1 (ko) | 멀티채널 오디오 신호의 부호화/복호화 방법 및 장치,멀티채널이 다운믹스된 신호를 2 채널로 출력하는 복호화방법 및 장치 | |
US8447618B2 (en) | Method and apparatus for encoding and decoding residual signal | |
JP5629429B2 (ja) | オーディオ再生装置及びオーディオ再生方法 | |
JP5113151B2 (ja) | メディア信号処理装置及びその方法 | |
KR101464977B1 (ko) | 메모리 관리 방법, 및 멀티 채널 데이터의 복호화 방법 및장치 | |
US8781134B2 (en) | Method and apparatus for encoding and decoding stereo audio | |
RU2406262C2 (ru) | Декодирование уменьшенного количества каналов |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5193397 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160208 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |