JP6517723B2 - 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法 - Google Patents

高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法 Download PDF

Info

Publication number
JP6517723B2
JP6517723B2 JP2016076927A JP2016076927A JP6517723B2 JP 6517723 B2 JP6517723 B2 JP 6517723B2 JP 2016076927 A JP2016076927 A JP 2016076927A JP 2016076927 A JP2016076927 A JP 2016076927A JP 6517723 B2 JP6517723 B2 JP 6517723B2
Authority
JP
Japan
Prior art keywords
audio signal
gain
compression
segments
appendix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016076927A
Other languages
English (en)
Other versions
JP2016167081A (ja
Inventor
ヘデリン,ペール
ビスワス,アリジット
シュフーグ,ミヒャエル
メルコーテ,ヴィナイ
Original Assignee
ドルビー ラボラトリーズ ライセンシング コーポレイション
ドルビー ラボラトリーズ ライセンシング コーポレイション
ドルビー・インターナショナル・アーベー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ドルビー ラボラトリーズ ライセンシング コーポレイション, ドルビー ラボラトリーズ ライセンシング コーポレイション, ドルビー・インターナショナル・アーベー filed Critical ドルビー ラボラトリーズ ライセンシング コーポレイション
Publication of JP2016167081A publication Critical patent/JP2016167081A/ja
Application granted granted Critical
Publication of JP6517723B2 publication Critical patent/JP6517723B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L21/0232Processing in the frequency domain
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0324Details of processing therefor
    • G10L21/034Automatic adjustment
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0204Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
    • G10L19/0208Subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/18Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/66Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission for reducing bandwidth of signals; for improving efficiency of transmission
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/45Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of analysis window
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G7/00Volume compression or expansion in amplifiers
    • H03G7/007Volume compression or expansion in amplifiers of digital or coded signals

Description

本発明の一つまたはそれ以上の実施例は、一般的にオーディオ信号処理に関する。より特定的には、圧縮/拡張(圧縮伸張)技術を使用したオーディオコーデック(codec)における符号化ノイズの低減に関する。
本出願は、2013年4月5日提出の米国仮特許出願第61/809028号および2013年9月12日提出の米国仮特許出願第61/877167号についての優先権を主張するものである。これらは、全てがここにおいて参照として包含されている。
多くの一般的なデジタルサウンドフォーマットは、不可逆データ圧縮(lossy data compression)技術を使用しており、ストレージ削減のため又はデータレート要求のためにいくつかのデータを破棄する。不可逆データ圧縮の適用は、ソースコンテンツ(例えば、オーディオコンテンツ)のフィデリティ(fidelity)を低減するだけでなく、圧縮アーチファクトの形式における目立った歪みも持ち込んでしまう。オーディオ符号化システムのコンテクストにおいて、こうしたサウンドアーチファクトは、符号化ノイズまたは量子化ノイズと呼ばれている。
デジタルオーディオシステムは、定義されたオーディオファイルフォーマットまたはストリーミングメディアオーディオフォーマットに従ってオーディオデータを圧縮および復元するためにコーデック(符号化−復号化コンポーネント)を使用する。コーデックは、できる限り高いフィデリティを維持しながら最小数量のビットを用いてオーディオ信号を表すように試みるアルゴリズムを実施する。オーディオコーデックにおいて典型的に使用される不可逆圧縮技術は、人間の聴覚の心理音響モデル上で動作する。オーディオフォーマットは、たいてい時間/周波数変換(例えば、修正離散コサイン変換−MDCT)の使用を含んでおり、マスキング効果を使用する。周波数マスキングまたは時間的マスキングといったものであり、あらゆる明らかな量子化ノイズを含んでいる、所定のサウンドが実際のコンテンツによって隠され又はマスクされる。
大部分のオーディオ符号化は、フレームに基づくものである(frame based)。フレームの中で、オーディオコーデックは、一般的に周波数領域における符号化ノイズを形成する。ノイズが聞こえるのを最小限にするようにである。いくつかの現在のデジタルオーディオフォーマットは、フレームがいくつかの異なるレベルまたは強度のサウンドを含み得るように長い持続期間のフレームを使用する。符号化ノイズは、たいてい、フレームの展開にわたりレベルの変動が無いので、符号化ノイズは、強度が低いフレームの部分の最中に最も聞こえ得るものである。そうした効果は、前エコー歪み(pre−echo distortion)として表され得るものであり、そこでは、高強度セグメントに先立つサイレンス(または低レベル信号)が復号化されたオーディオ信号におけるノイズに浸されている。そうした効果は、過渡(transient)サウンド、もしくは、カスタネット又は他のシャープな打撃音源といった、パーカッション楽器からのインパルスにおいて最も目立ち得る。そうした歪みは、典型的には、時間領域におけるコーデックの変換ウィンドウ全体にわたり広がっている周波数領域において持ち込まれる量子化ノイズによって生じる。
前エコーアーチファクトを回避または最小化するための現在の手段は、フィルタの使用を含んでいる。そうしたフィルタは、しかしながら、位相歪みと時間的不鮮明(semaring)を持ち込んでしまう。別の可能なソリューションは、より小さな変換ウィンドウの使用を含む。しかしながら、このアプローチは、著しく周波数解像度を低減し得るものである。
背景技術の部分において説明された技術的事項は、単に背景技術の部分での言及の結果として従来技術であると仮定されるべきではない。同様に、背景技術の部分において言及された問題または背景技術に係る技術的事項に関する問題は、従来技術において以前から認識されてきたものであると仮定されるべきではない。背景技術の部分における技術的事項は、異なるアプローチを単に示しているだけであり、それ自体でも発明であり得るものである。
本発明の実施例は、受信したオーディオ信号を処理する方法に向けられている。受信したオーディオ信号を定められたウィンドウ形状を使用して複数の時間セグメントに分割することを含んでいるプロセスを通じて、オーディオ信号を拡大されたダイナミックレンジに拡張すること、オーディオ信号の周波数領域表現の非エネルギーベース(non−energy based)平均を使用して、周波数領域においてそれぞれの時間セグメントに対する広帯域(wideband)ゲインを計算すること、および、拡張されたオーディオ信号を得るために、それぞれの時間セグメントにゲイン値を適用すること、によるものである。それぞれの時間セグメントに適用される広帯域ゲインのゲイン値は、比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱める効果を有するように選択される。この方法のために、受信したオーディオ信号は、オリジナルのダイナミックレンジから圧縮されたオリジナルのオーディオ信号を含んでいる。オリジナルのオーディオ信号を定められたウィンドウ形状を使用して複数の時間セグメントに分割すること、最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して周波数領域における広帯域ゲインを計算すること、および、オリジナルのオーディオ信号に広帯域ゲインを適用すること、を含んでいる圧縮プロセスを通じて行われるものである。圧縮プロセスにおいて、それぞれの時間セグメントに適用される広帯域ゲインのゲイン値は、比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱める効果を有するように選択される。拡張プロセスは、最初のオーディオ信号のダイナミックレンジを実質的に回復するように構成されており、拡張プロセスの広帯域ゲインは、圧縮プロセスの広帯域ゲインと実質的に逆であってよい。
受信したオーディオ信号を拡張プロセスによって処理する方法を実施するシステムにおいては、オーディオ信号を分析して周波数領域表現を得るためにフィルターバンク(filterbank)コンポーネントが使用され得る。そして、複数の時間セグメントへの分割のために定められたウィンドウ形状は、フィルターバンクに対するプロトタイプフィルタと同一であり得る。同様に、受信したオーディオ信号を圧縮プロセスによって処理する方法を実施するシステムにおいては、オリジナルのオーディオ信号を分析してその周波数領域表現を得るためにフィルターバンクコンポーネントが使用され得る。そして、複数の時間セグメントへの分割のために定められたウィンドウ形状は、フィルターバンクに対するプロトタイプフィルタと同一であり得る。いずれの場合においてもフィルターバンクは、QMFバンクまたは短時間フーリエ変換であってよい。このシステムにおいて、拡張プロセスに対して受信された信号は、ビットストリームを生成するオーディオエンコーダおよびビットストリームを復号するデコーダによって圧縮された信号の変形の後で取得される。エンコーダとデコーダは、変換ベースオーディオコーデックの少なくとも一部を含んでよい。システムは、さらに、ビットストリームを通じて受信され、かつ、拡張プロセスの活動状態を決定するコントロール情報を処理するコンポーネントを含み得る。
以降の図面においては、類似の参照番号が、類似のエレメントを参照するために使用される。以降の図面は種々の実施例を示すものであるが、一つまたはそれ以上の実施は、図面において示された実施例に限定されるものではない。
図1は、一つの実施例の下で、変換ベースオーディオコーデックにおいてオーディオ信号を圧縮および拡張するためのシステムを示している。 図2Aは、一つの実施例の下で、複数の短時間セグメントに分割されたオーディオ信号を示している。 図2Bは、一つの実施例の下で、それぞれの短時間セグメントにわたる広帯域ゲインの適用後の図2Aのオーディオ信号を示している。 図3Aは、一つの実施例の下で、オーディオ信号を圧縮する方法を説明するフローチャートである。 図3Bは、一つの実施例の下で、オーディオ信号を拡張する方法を説明するフローチャートである。 図4は、一つの実施例の下で、オーディオ信号を圧縮するためのシステムを説明するブロックダイヤグラムである。 図5は、一つの実施例の下で、オーディオ信号を拡張するためのシステムを説明するブロックダイヤグラムである。 図6は、一つの実施例の下で、複数の短時間セグメントへのオーディオ信号の分割を示している。
オーディオコーデックにおける量子化ノイズの時間的ノイズ形成を達成するための圧縮伸張技術の使用について説明される。そうした実施例は、量子化ノイズの時間的形成を達成するためにQMF領域において実施される圧縮伸張アルゴリズムの使用を含んでいる。プロセスは、所望のデコーダ圧縮伸張レベルのエンコーダコントロールを含み、かつ、モノラルのアプリケーションを越えてステレオおよびマルチチャンネル圧縮伸張への拡張を含んでいる。
ここにおいて説明される一つまたはそれ以上の実施例に係る態様は、ソフトウェアのインストラクションを実行している一つまたはそれ以上のコンピュータまたは処理装置を含むネットワークにわたる送信のためにオーディオ信号を処理するオーディオシステムにおいて実施され得る。説明される実施例は、単独又はあらゆる組合せにおいて別の実施例と一緒に使用され得る。種々の実施例は、従来技術の種々の欠陥によって動機付けされてきており、本明細書の中の一つまたはそれ以上の場所において説明または言及されるが、実施例は、これらのあらゆる欠陥を取り扱うことを要しない。別の言葉で言えば、異なる実施例は、本明細書の中で説明される異なる欠陥を取り扱い得る。いくつかの実施例は、いくつかの欠陥を部分的に取り扱うだけであり、または、本明細書の中で説明される一つだけの欠陥を取り扱い得る。そして、いくつかの実施例は、これらの欠陥を全く取り扱わなくてよい。
図1は、一つの実施例の下で、コーデックベースのオーディオ処理システムにおいて量子化ノイズを低減するための圧縮伸張システムを示している。図1は、エンコーダ(または「コアエンコーダ」)106とデコーダ(または「コアデコーダ」)112を含むオーディオコーデックの周辺に設けられるオーディオ信号処理システムを示している。エンコーダ106は、オーディオコンテンツをネットワーク110にわたり送信するためにデータストリームまたは信号へと符号化する。ネットワークでは、再生またはさらなる処理のためにデコーダ112によって復号化される。一つの実施例において、コーデックのエンコーダ106およびデコーダ112は、デジタルオーディオデータのストレージ及び/又はデータレートを低減するために不可逆な圧縮方法を実施する。そうしたコーデックは、MP3、Vorbis、Dolby Digital(AC−3)、AAC、または類似のコーデックとして実施され得る。コーデックの不可逆な圧縮方法は、符号化ノイズを生成する。符号化ノイズは、コーデックによって定められるフレーム展開にわたり一般的にレベルの変動がない。そうした符号化ノイズは、しばしば、フレームの強度が低い部分の最中に最も聞き取ることができる。システム100は、既存の符号化システムにおいて知覚される符号化ノイズを低減するコンポーネントを含んでいる。コーデックのコアエンコーダ106の以前に圧縮プリステップ(pre−step)コンポーネント104、および、コアデコーダ112出力上で動作する拡張ポストステップ(post−step)コンポーネント114を提供することによるものである。圧縮コンポーネント104は、定められたウィンドウ形状を使用してオリジナルオーディオ入力信号102を複数の時間セグメントへ分割し、計算し、かつ、最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して周波数領域において広帯域ゲインを適用するように構成されている。ここで、それぞれの時間セグメントに対して適用されるゲイン値は、比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱める。このゲイン修正は、圧縮の効果、または、入力されたオーディオ信号102のオリジナルのダイナミックレンジを著しく低減する効果を有する。圧縮されたオーディオ信号は、次に、エンコーダ106において符号化され、ネットワーク110にわたり送信され、そして、デコーダ112において復号化される。復号化された圧縮信号は、拡張コンポーネント114に入力される。拡張コンポーネントは、圧縮プリステップ104の逆(inverse)オペレーションを実行するように構成されている。それぞれの時間セグメントに対して逆ゲイン値を適用することによって、圧縮されたオーディオ信号のダイナミックレンジを拡張してオリジナル入力オーディオ信号102のダイナミックレンジに戻すものである。このように、オーディオ出力信号116は、オリジナルのダイナミックレンジを有するオーディオ信号を含んでおり、プリステップおよびポストステップの圧縮伸張プロセスを通じて符号化ノイズが取り除かれている。
図1に示されるように、圧縮コンポーネントまたは圧縮プリステップ104は、コアエンコーダ106へのオーディオ信号102入力のダイナミックレンジを低減するように構成されている。入力オーディオ信号は、数多くの短いセグメントへ分割される。短いセグメントのサイズまたは長さは、コアエンコーダ106によって使用されるフレームサイズの小部分である。例えば、コアコーダの典型的なフレームサイズは40から80ミリ秒のオーダーであってよい。この場合に、それぞれの短いセグメントは、1から3ミリ秒のオーダーであってよい。圧縮コンポーネント104は、セグメント毎に入力オーディオ信号を圧縮するために適切な広帯域ゲイン値を計算する。このことは、信号の短いセグメントを各セグメントに対する適切なゲイン値により変更することによって達成される。比較的に低い強度のセグメントを増幅するために比較的に大きなゲイン値が選択され、かつ、高い強度のセグメントを弱めるために小さなゲイン値が選択される。
図2Aは、一つの実施例の下で、複数の短時間セグメントに分割されたオーディオ信号を示しており、かつ、図2Bは、圧縮コンポーネントによる広帯域ゲインの適用後の同一のオーディオ信号を示している。図2Aに示されるように、オーディオ信号202は、パーカッション楽器(例えば、カスタネット)によって生成されるといった過渡(transient)またはインパルスサウンドを示している。信号は、電圧Vと時間tのプロットで示されるように、アンプにおけるスパイク(spike)が特徴である。一般的に、信号のアンプは、音響エネルギーまたはサウンドの強度に関連し、あらゆる時点におけるサウンドパワー(sound’s power)の測定を表している。オーディオ信号202がフレームベースのオーディオコーデックを通じて処理される場合、信号部分は、変換(例えば、MDCT)フレーム204の中で処理される。典型的な現在のオーディオシステムは、比較的に長いデュレーション(duration)のフレームを使用する。シャープな過渡サウンドまたは短いインパルスサウンドに対して、一つのフレームが、強度が高いサウンドと同様に強度が低いサウンドも含み得るようにである。従って、図1に示されるように、一つのMDCTフレーム204は、オーディオ信号のインパルス部分(ピーク)を含んでおり、同様に、ピークの前後の強度が低い信号を比較的大量に含んでいる。一つの実施例において、圧縮コンポーネント104は、信号を数多くの短いセグメント206へ分割し、信号202のダイナミックレンジを圧縮するために各セグメントに対して広帯域ゲインを適用する。短いセグメントそれぞれの数量とサイズは、アプリケーションのニーズとシステムの制限に基づいて選択され得る。個々のMDCTフレームのサイズに関して、短いセグメントの数量は、12から64セグメントであってよく、典型的には32セグメントを含んでいる。しかしながら、実施例はそのように限定されない。
図2Bは、一つの実施例の下で、それぞれの短時間セグメントにわたる広帯域ゲインの適用後の図2Aのオーディオ信号を示している。図2Bに示されるように、オーディオ信号212は、オリジナル信号202と相対的に同一な形状を有している。しかしながら、強度が低いセグメントのアンプが増幅ゲイン値の適用によって増加されており、かつ、強度が高いセグメントのアンプが減衰ゲイン値の適用によって減少されている。
コアデコーダ112の出力は、低減されたダイナミックレンジを伴う入力オーディオ信号(例えば、信号212)およびコアエンコーダ106によって持ち込まれた量子化ノイズである。この量子化ノイズは、各フレームの中で時間にわたりほとんど均一なレベルであることを特徴とする。拡張コンポーネント114は、復号化された信号上で、オリジナル信号のダイナミックレンジを回復するように動作する。拡張コンポーネントは、短いセグメントサイズ206に基づいて同一の短い時間解像度を使用し、かつ、圧縮コンポーネント104において適用されたゲインを反転する。従って、拡張コンポーネント114は、オリジナル信号において強度が低かったセグメントに小さなゲインを適用する(減衰)、圧縮器によって増幅されてきたものである。そして、オリジナル信号において強度が高かったセグメントに大きなゲインを適用する(増幅)、圧縮器によって減衰されてきたものである。コアコーダによって追加された量子化ノイズは、均一な時間エンベロープ(envelope)を有していたが、このように、同時にポストプロセッサゲインによって、オリジナル信号の時間エンベロープにおおよそ従うように形成される。この処理は、静かなパッセージ(passage)の最中に量子化ノイズを効果的により聞こえ難くする。ノイズは、強度が高いパッセージの最中に増幅され得るが、オーディオコンテンツ自身の大きな信号のマスキング効果のおかげでより聞こえ難いままである。
図2Aに示されるように、圧縮伸張プロセスは、オーディオ信号の個々のセグメントをそれぞれのゲイン値を用いて個別に修正する。所定の場合に、このことは、圧縮コンポーネントの出力における不連続性を結果として生じ得るものであり、コアエンコーダ106において問題を生じ得る。同様に、拡張コンポーネント114でのゲインの不連続性は、形成されたノイズのエンベロープにおける不連続性を結果として生じ得る。ノイズは、オーディオ出力116における聞き取ることができるクリック音(click)を結果として生じ得るものである。個別のゲイン値のオーディオ信号の短いセグメントへの適用に関する別の問題は、典型的なオーディオ信号は多くの個別の音源の組合せであるという事実に基づく。これらの音源のいくつかは、時間にわたり変動がなく、かつ、いくつかは過渡的であり得る。変動がない信号は、一般的に、統計的なパラメータにおいて時間にわたり一定であるが、一方、過渡的な信号は一般的に一定ではない。過渡性に係る広帯域の特性が与えられると、そうした混合におけるフィンガープリントは、たいてい、より高い周波数において、より見えやすい。信号の短期エネルギー(RMS)に基づくゲイン計算は、低周波数でより強くなるようにバイアスされる傾向があり、それ故、変動のない音源が支配的であり、時間にわたる変化をほとんど示さない。従って、このエネルギーベースアプローチは、コアエンコーダによって持ち込まれたノイズを形成することにおいて、一般的に効果が無い、
一つの実施例において、システム100は、短いプロトタイプフィルタを用いてフィルターバンク(filter−bank)において圧縮と拡張コンポーネントにおいてゲインを計算して適用する。個々のゲイン値の適用に関連する潜在的な問題を解決するためである。修正されるべき信号(圧縮コンポーネント104におけるオリジナル信号、および拡張コンポーネント114におけるコアデコーダ112の出力)が、最初にフィルターバンクによって分析され、かつ、広帯域ゲインが周波数領域において直接的に適用される。時間領域において対応する効果は、プロトタイプフィルタの形状に従って、ゲイン適用を自然に滑らかにすることである。このことは、上記の不連続性の問題を解決する。修正された周波数領域信号は、次に、対応する統合フィルターバンクを介して変換され時間領域に戻される。フィルターバンクを用いた信号の分析は、スペクトラムコンテンツに対するアクセスを提供し、高周波数による貢献を優先的にブースト(boost)する(または、あらゆる弱いスペクトラムコンテンツによる貢献をブーストするための)ゲイン計算ができるようにし、信号における最強のコンポーネントによって支配されないゲイン値を提供している。このことは、上述のように、異なる音源の組合せを含むオーディオソースに関する問題を解決する。一つの実施例において、システムは、pノルム(p−norm)のスペクトラムマグニチュードを使用してゲインを計算する。ここで、pは、典型的には2より小さい(p<2)。これにより、エネルギー(p=2)に基づく場合と比較して、弱いスペクトラムコンポーネントをより強調することができる。
上述のように、システムは、ゲイン適用を滑らかにするためのプロトタイプフィルタを含んでいる。一般的に、プロトタイプフィルタは、フィルターバンクにおいて基本的なウィンドウ形状であり、フィルターバンクにおける異なるサブバンドフィルタに対するインパルス応答を得るために、正弦波形によって変調される。例えば、短時間フーリエ変換(STFT)がフィルターバンクであり、この変換の各周波数ラインがフィルターバンクのサブバンドである。短時間フーリエ変換は、信号にウィンドウ形状(Nサンプルウィンドウ)を掛け合わせることによって実施される。ウィンドウ形状は、長方形、ハン(Hann)、カイザーベッセル由来(KBD)、または他のいくつかの形状であり得る。ウィンドウされた信号は、次に、離散フーリエ変換(DFT)オペレーションの対象となり、STFTを得る。この場合のウィンドウ形状は、プロトタイプフィルタである。DFTは、正弦波ベースの関数から成り、それぞれが異なる周波数である。正弦関数が掛け合わされたウィンドウ形状は、次に、その周波数に対応するサブバンドに対するフィルタを提供する。全ての周波数においてウィンドウ形状が同一なので、「プロトタイプ」として参照されている。
一つの実施例において、システムは、フィルターバンクとしてQMF(Quadrature Modulated Filter、直角位相変調フィルタ)バンクを使用する。所定の実施例において、QMFバンクは、64−ptウィンドウを有してよく、プルトタイプを形成する。コサインおよびサイン関数によって変調されたこのウィンドウ(64個の均等に間隔を空けて配置された周波数に対応するもの)は、QMFバンクに対するサブバンドフィルタを形成する。QMF関数のそれぞれの適用の後で、ウィンドウは64サンプル毎に移動される。つまり、この場合の時間セグメント間のオーバーラップは、640−64=576サンプルである。しかしながら、この場合においてはウィンドウ形状が10時間セグメント(640=10*64)に及ぶが、ウィンドウのメインローブ(main lobe)(サンプル値が非常に重大であるところ)は約128サンプル長である。このように、ウィンドウの有効長は、いまだに比較的に短い。
一つの実施例において、拡張コンポーネント114は、圧縮コンポーネント104によって適用されたゲインを、理想的には反転させる。圧縮コンポーネントにより適用されたゲインをビットストリームを通じてデコーダへ送信することができるが、そうしたアプローチは、典型的には著しくビットレートを消費する。一つの実施例においては、代わりにシステム100が、拡張コンポーネント114により要求されるゲインを、利用可能な信号、つまり、デコーダ112の出力、から直接的に見積る。効率的であり、追加のビットを要求しないものである。圧縮と拡張コンポーネントにおけるフィルターバンクは同一であるように選択される。お互いの反転であるゲインを計算するためである。加えて、これらのフィルバンクは、時間同期しており、圧縮コンポーネント104の出力と拡張コンポーネント114への入力との間のあらゆる効果的な遅延は、フィルターバンクのストライド(stride)の倍数である。仮に、コアエンコーダ−デコーダの損失が無く、かつ、フィルターバンクが完全な回復を提供するとすれば、圧縮と拡張コンポーネントにおけるゲインはお互いの正確な反転であろう。このようにして、オリジナル信号の正確な回復ができる。実際には、しかしながら、拡張コンポーネント114によって提供されるゲインは、圧縮コンポーネント104によって適用されるゲインの反転の非常に近い近似に過ぎない。
一つの実施例において、圧縮と拡張コンポーネントにおいて使用されるフィルターバンクはQMFバンクである。典型的な使用アプリケーションにおいて、コアオーディオフレームは、4096サンプル長であってよく、隣接するフレームと2048のオーバーラップを伴うものである。48kHzにおいて、そうしたフレームは85.3ミリ秒の長さである。対照的に、使用されるQMFバンクは、64サンプルのストライド(1.3msの長さ)を有してよく、ゲインに対する細かな時間的解像度を提供する。さらに、QMFは、640サンプル長のスムーズプロトタイプフィルタを有し、ゲイン適用が時間にわたり滑らかに変化することを保証している。このQMFフィルターバンクを用いた分析は、信号の時間−周波数タイル(time−frequency tiled)表現を提供する。各QMF時間スロットはストライドに対して等しいものであり、かつ、各QMF時間スロットにおいては、均一の間隔を空けて配置された64のサブバンドが在る。代替的に、他のフィルターバンクを使用することができる、短時間フーリエ変換(STFT)といったものであり、そうした時間−周波数タイル表現がそれでも獲得され得る。
一つの実施例において、圧縮コンポーネント104は、コーデック入力を調整するプリ処理ステップ(pre−processing step)を実行する。この実施例に対して、S(k)は、時間スロットtおよび周波数ビンkにおける複素値フィルタバンクサンプルである。図6は、一つの実施例の下で、ある周波数の範囲について、数多くの時間スロットへのオーディオ信号の分割を示している。ダイヤグラム600の実施例については、64個の周波数ビンk、および、示されるように、複数の時間−周波数タイルを生成する32個の時間スロットtが存在する(正確な縮尺である必要はないが)。圧縮プリステップは、コーデック入力がS’(k)=S(k)/gとなるように調整する。この等式において、
Figure 0006517723
は、正規化されたスロット平均である。
上記の等式において、
Figure 0006517723
は、平均絶対レベル/1−ノルムであり、Sは、適切な定数である。一般的なp−ノルムは、以下のコンテクストにおいて定義される。
Figure 0006517723
1−ノルムは、エネルギー(rms/2−ノルム)の使用よりも、著しく良い結果を与えることが示されてきた。指数項γの値は、典型的に0と1の間の範囲にあり、1/3であるように選択されてよい。定数Sは、実施プラットフォームから独立して道理にかなったゲイン値を保証する。例えば、全てのS(k)値が、絶対値が1に制限されるプラットフォームにおいて実施される場合に、定数Sは1であってよい。S(k)が異なる最大値を有しうるプラットフォームにおいては、潜在的に異なるものであり得る。信号の大きなセットにわたる平均ゲイン値が1に近いことを保証するためにも使用され得るものである。つまり、コンテンツの大きな集積から判断された最大信号値と最小信号値との間の中間信号値であってよい。
拡張コンポーネント114によって実行されるポストステッププロセスにおいては、圧縮コンポーネント104によって適用される反転ゲインによって出力が拡大される。このことは、圧縮コンポーネントのフィルターバンクに係る正確な又はほぼ正確なレプリカを要求する。この場合、
Figure 0006517723
は、この第2フィルターバンクの複素値サンプル(complex valued sample)を表している。拡張コンポーネント114は、
Figure 0006517723
となるようにコーデック出力を調整する。
上記の等式において、
Figure 0006517723
は、正規化されたスロット平均であり、次のように与えられる。
Figure 0006517723
および、
Figure 0006517723
一般的に、拡張コンポーネント114は、圧縮コンポーネント104において使用されたものと同一のp−ノルムを使用する。従って、
Figure 0006517723
を定めるために平均絶対レベルが使用される場合には、
Figure 0006517723
も、また、上記の等式における1−ノルム(p=1)を使用して定められる。
複合フィルターバンク(コサインおよびサインベースの関数両方を含む)、STFTまたは復号QMF(complex−QMF)といったもの、が圧縮と拡張コンポーネントにおいて使用される場合、
大きさ(magnitude)、つまり、復号サブバンドサンプルの
Figure 0006517723
または
Figure 0006517723
の計算は、計算的に集中した平方根演算を必要とする。
上記の等式において、値Kは、フィルターバンクにおけるサブバンドの数量と等しいか、それ以下である。一般的に、p−ノルムは、フィルターバンクにおけるサブバンドのあらゆるサブセットを使用して計算され得る。しかしながら、エンコーダ106とデコーダ112の両方において同一のサブセットが使用されるべきである。一つの実施例において、オーディオ信号の高周波数部分(例えば、6kHz以上のオーディオコンポーネント)は、高度なスペクトラム拡張(A−SPX)ツールを用いてコード化され得る。加えて、ノイズ形成をガイドするためには、1kHz以上の信号(または同様な周波数)のみを使用することが望ましい。そうした場合には、1kHzから6kHzの範囲内のそうしたサブバンドだけが、p−ノルム、そして従ってゲイン値を計算するために使用され得る。さらに、ゲインは、サブバンドの一つのサブセットから計算されるが、異なり、かつ、おそらくより大きなサブバンドのサブセットに対してさえ適用され得るものである。
図1に示されるように、オーディオコーデックのコアエンコーダ106によって持ち込まれる量子化ノイズを形成する圧縮機能は、所定のプリエンコーダ圧縮機能とポストデコーダ拡張機能を実行する2つの分離したコンポーネント104と114によって実行される。図3Aは、一つの実施例の下で、プリエンコーダ圧縮コンポーネントにおいてオーディオ信号を圧縮する方法を説明するフローチャートであり、図3Bは、一つの実施例の下で、ポストデコーダ拡張コンポーネントにおいてオーディオ信号を拡張する方法を説明するフローチャートである。
図3Aにおいて示されるように、プロセス300は、圧縮コンポーネントが入力オーディオ信号を受信すること(302)から始まる。この圧縮は、次に、オーディオ信号を短時間セグメントへと分割し(304)、そして、それぞれの短時間セグメントに対して広帯域ゲイン値を適用することによって低減されたダイナミックレンジへオーディオ信号を圧縮する(306)。圧縮コンポーネントは、また、上述のように、異なるゲイン値を隣接するセグメントに対して適用することによって生じるあらゆる不連続性を低減または除去するために、所定のプロトタイプフィルタリングおよびQMFフィルターバンクを実施する(308)。所定の場合、オーディオコンテンツのタイプまたはオーディオコンテンツの所定の特性といったもの、オーディオコーデックのエンコード/デコードステージの前後のオーディオ信号の圧縮と拡張は、オーディオ出力の品質を高めるより、むしろ劣化させ得る。そうしたインスタンスにおいては、圧縮伸張プロセスがターンオフされ、または、異なる圧縮伸張(圧縮/拡張)レベルに戻るよう変更され得る。このように、圧縮コンポーネントは、他の変数の中で、圧縮伸張機能の妥当性及び/又は特定の信号入力とオーディオ再生環境に対して要求される圧縮伸張の最適レベルを決定する(310)。この決定ステップ310は、プロセス300のあらゆる実践的な時点で発生してよい。オーディオ信号の分割304またはオーディオ信号の圧縮306の以前といったものである。圧縮伸張が適切であると判断される場合には、ゲインが適用される(306)。そして、エンコーダは、次に、コーデックのデータフォーマットに従ってデコーダに対して送信するための信号を符号化する(312)。所定の圧縮伸張コントロールデータ、動作化データといったもの、同期化データ、圧縮伸張レベルデータ、および、他の類似のコントロールデータは、拡張コンポーネントによる処理のためのビットストリーム部分として送信され得る。
図3Bは、一つの実施例の下で、ポストデコーダ拡張コンポーネントにおいてオーディオ信号を拡張する方法を説明するフローチャートである。プロセス350に示されるように、コーデックのデコードステージは、エンコードステージからオーディオ信号を符号化しているビットストリームを受信する(352)。デコーダは、次に、コーデックデータフォーマットに従って、符号化された信号を復号化する(353)。拡張コンポーネントは、次に、ビットストリームを処理して、コントロールデータに基づいて拡張パラメータの拡張または変更をスイッチオフするために、あらゆる符号化されたコントロールデータを適用する(354)。拡張コンポーネントは、適切なウィンドウ形状を使用して、オーディオ信号を時間セグメントへと分割する(356)。一つの実施例において、時間セグメントは、圧縮コンポーネントによって使用される同一の時間セグメントに対応している。拡張コンポーネントは、次に、周波数領域において各セグメントに対する適切なゲイン値を計算し、かつ、オーディオ信号のダイナミックレンジをオリジナルのダイナミックレンジ又はあらゆる他の好適なダイナミックレンジに戻すように拡張するために各時間セグメントに対してゲイン値を適用する。
圧縮伸張コントロール
システム100の圧縮伸張器(compander)を含む圧縮と拡張コンポーネントは、オーディオ信号処理の所定の時間においてだけ、もしくは、所定のタイプのオーディオコンテンツに対してだけ、プリとポスト処理ステップを適用するように構成されている。例えば、圧縮伸張は、スピーチおよび音楽の過渡信号に対して有益性を示し得る。しかしながら、変動がない信号といった、他の信号に対して、圧縮伸張は信号品質を低下させることがある。従って、図3Aに示されるように、圧縮伸張コントロールメカニズムがブロック310のように提供され、圧縮伸張オペレーションを調整するために、圧縮コンポーネント104から拡張コンポーネント114に対してコントロールデータが送信される。そうしたコントロールメカニズムの最も簡単な形態は、圧縮伸張の適用がオーディオ品質を低下させてしまうオーディオサンプルのブロックに対して、圧縮伸張機能をスイッチオフすることである。一つの実施例において、圧縮伸張のオン/オフ決定はエンコーダにおいて検出され、ビットストリームエレメントとしてデコーダに対して送信される。同一のQMF時間スロットにおいて圧縮器と拡張器がスイッチオン/オフされ得るようにである。
2つの状態間のスイッチングは、たいてい、適用されるゲインにおける不連続性を導き、結果として聞き取ることができるスイッチングアーチファクトまたはクリック音を生じてしまう。実施例は、こうしたアーチファクトを低減または除去するためのメカニズムを含んでいる。第1の実施例において、システムは、ゲインが1に近いフレームにおいてだけ、圧縮伸張機能オフとオンのスイッチングをすることができる。この場合、スイッチングと機能オン/オフとの間にはわずかな不連続性しか存在しない。第2の実施例においては、オンとオフモードとの間に、つまり、第3の弱い(weak)圧縮伸張モードが、オンとオフフレームとの間のオーディオフレームに適用される。弱い圧縮伸張モードは、圧縮伸張の最中に、指数項γをデフォルト値から0へゆっくりと移行する。中間的な弱い圧縮伸張モードの代替として、システムは、スタートフレーム(start−frame)とストップフレーム(stop−frame)を実施し得る。圧縮伸張機能を突然にスイッチオフする代わりに、オーディオサンプルのブロックにわたり、圧縮伸張モードを滑らかにフェードアウトするものである。さらなる実施例において、システムは、単純に圧縮伸張をスイッチオフするのではなく、むしろ平均ゲインを適用するように構成されている。所定の場合において、音調変動がない信号のオーディオ品質が増加され得る。圧縮伸張オフ状態における一定ゲイン係数1.0よりも、隣接する圧縮伸張オンフレームのゲイン係数に多く似ているオーディオフレームに対して一定ゲイン係数を適用する場合である。そうしたゲイン係数は、一つのフレームにわたり全ての圧縮伸張ゲインを平均することによって計算することができる。一定の平均圧縮伸張ゲインを含むフレームは、このように、ビットストリームにおいて合図される。
実施例は、モノラルオーディオチャンネルのコンテクストにおいて説明されているが、各チャンネルに対して個別にアプリケーションを繰り返すことによって、簡単に、マルチチャンネルを取り扱い得ることに留意すべきである。しかしながら、2つまたはそれ以上のチャンネルを含むオーディオ信号は所定の追加的な複雑性を示し、図1の圧縮伸張システムの実施例によって扱われる。圧縮伸張ストラテジーは、チャンネル間の類似性に基づくべきである。
例えば、ステレオパン(stereo−panned)の過渡信号の場合には、個々のチャンネルの独立した圧縮伸張が聞き取ることができるイメージアーチファクトを結果として生じ得ることが観察されてきた。一つの実施例において、システムは、両方のチャンネルのサブバンドサンプルから各時間セグメントに対する一つのゲイン値を決定し、2つの信号を圧縮/拡張するために同一のゲイン値を使用する。このアプローチは、一般的に、2つのチャンネル領域が非常に類似した信号を有するときはいつでも適切なものである。ここでは、例えば、相互相関を使用して類似性が定められる。検出器は、チャンネル間の類似性を計算し、チャネルの個別の圧縮伸張を使用するか、チャネルを共同して圧縮伸張するかを切り換える。より多くのチャンネルへの拡張は、チャンネルを類似性クライテリアを使用してチャンネルのグループへと分割し、共同圧縮伸張をグループに適用する。このグループ情報は、次に、ビットストリームを通じて送信される。
システム実施
図4は、一つの実施例の下で、コーデックのエンコードステージに関してオーディオ信号を圧縮するためのシステムを説明するブロックダイヤグラムである。図4は、図3Aに示されたコーデックべースのシステムにおける使用のための圧縮方法の少なくとも一部を実施するハードウェア回路またはシステムを示している。システム400で示されるように、時間領域における入力オーディオ信号401が、QMFフィルターバンク402に入力される。このフィルターバンクは、入力信号を複数のコンポーネントへと分離する分析オペレーションを実施する。そこでは、各バンドパスフィルタがオリジナル信号の周波数サブバンドを伝える。QMFフィルターバンク410によって実行される合成オペレーションにおいて、信号の再構成が実行される。図4の実施例においては、分析と統合の両方のフィルターバンクが、64バンドを取り扱う。コアエンコーダ412は、統合フィルターバンク410からオーディオ信号を受信して、オーディオ信号を符号化することによって適切なデジタルフォーマット(例えば、MP3、ACC、等)においてビットストリームを生成する。
システム400は、オーディオ信号が分割された短いセグメントそれぞれに対してゲイン値を適用する圧縮器406を含んでいる。これは、図2Bに示されるといった、圧縮されたダイナミックレンジのオーディオ信号を生成する。圧縮伸張コントロールユニット404は、オーディオ信号を分析して、信号のタイプ(例えば、スピーチ)、信号の特性(例えば、変動がないものと過渡のもの)、または他の関連するパラメータに基づいて、圧縮が適用されるべきか、または、どの程度の圧縮が適用されるべきかを決定する。コントロールユニット404は、オーディオ信号の時間的なピーク特性を検出するためのメカニズムを含み得る。検出されたオーディオ信号の特性と所定の規定のクライテリアに基づいて、コントロールユニット404は、圧縮機能をターンオフするか、短いセグメントに適用するゲイン値を変更するか、いずれかを行うように、圧縮器406に対して適切なコントロール信号を送信する。
圧縮伸張に加えて、多くの他の符号化ツールも、また、QMF領域において動作し得る。そうした一つのツールは、A−SPX(advanced apectral extension)であり、図4のブロック408に示されている。A−SPXは、知覚的により重要でない周波数が、より重要な周波数よりも粗い符号化スキームを用いて符号化されるように使用される技術である。例えば、デコーダ側のA−SPXにおいては、より低い周波数からのQMFサブバンドサンプルが、より高い周波数においてレプリカされ、そして、エンコーダからデコーダへ送信された側面情報(side information)を使用して、より高い周波数帯におけるスペクトラムエンベロープ(spectral envelope)が、次に形成される。
圧縮伸張とA−SPXの両方がQMF領域において実行されるシステムでは、エンコーダにおいて、より高い周波数に対するA−SPXエンベロープデータが、図4に示されるように、未だ圧縮されていないサブバンドサンプルから引き出され得る。そして、コアエンコーダ412によって符号化された信号の周波数帯に対応する、より低い周波数のQMFサンプルに対してだけ圧縮が適用され得る。図5のデコーダ502において、復号化された信号のQMF分析504の後で、拡張プロセス506が最初に適用され、そして、A−SPXオペレーション508が、より低い周波数において拡張された信号から、より高いサブバンドサンプルを続いて再び生成する。
この実施例においては、エンコーダにおけるQMF統合フィルターバンク410とデコーダ504におけるQMF分析フィルターバンクが、一緒に、640−64+1サンプル遅延(〜9QMFスロット)をもたらす。この実施例におけるコアコーデック遅延は3200サンプル(50QMFスロット)であり、全体の遅延は59スロットである。この遅延は、コントロールデータをビットストリームの中にエンベッドすること、および、デコーダにおいてそれを使用することによって説明される。エンコーダの圧縮器とデコーダの拡張器の両方が、同期して動作するようにである。
代替的に、エンコーダにおいては、オリジナル信号の全てのバンド幅について圧縮が適用されてよい。A−SPXエンベロープが、続いて、圧縮されたサブバンドサンプルから引き出され得る。そうした場合に、デコーダは、QMF分析の後で、圧縮された信号の全てのバンド幅を最初に再構成するために、A−SPXを最初に実行する。拡張ステージは、次に、オリジナルのダイナミックレンジを伴う信号を回復するために適用される。
QMF領域において動作し得るさらに別のツールは、図4における高度カップリング(avdanced coupling、AC)ツール(図示なし)であり得る。高度カップリングシステムおいては、ステレオ出力を再構成するためにデコーダでQMF領域において適用され得る追加的なパラメトリック(parametric)空間情報を伴うモノダウンミックス(downmix)として2つのチャンネルが符号化される。ACと圧縮伸張は、お互いに関連して使用される。ACツールは、エンコーダでの圧縮ステージ406の後に配置することもでき、その場合はデコーダでの拡張ステージ506の前に適用されるだろう。代替的に、AC側面情報は、圧縮されていないステレオ信号から引き出され得る。その場合に、ACツールは、デコーダでの拡張ステージ506の後に動作するだろう。ハイブリッド(hybrid)ACモードも、また、サポートされる。その場合、ACが所定の周波数の上で使用され、かつ、この周波数の下ではディスクリートステレオ(discrete stereo)が使用される。もしくは、代替的に、ディスクリートステレオが所定の周波数の上で使用され、かつ、この周波数の下でACが使用される。
図3Aと図3Bに示されるように、コーデックのエンコードステージとデコードステージとの間で送信されるビットストリームは、所定のコントロールデータを含んでいる。そうしたコントロールデータは、側面情報を構成し、システムは、異なる圧縮伸張モード間をスイッチすることができる。スイッチングコントロールデータ(圧縮伸張オン/オフをスイッチングするためのもの)と潜在的ないくつかの中間状態を加えたものは、チャンネルごとに1または2ビットのオーダーを追加し得る。他のコントロールデータは、ディスクリートステレオの全てのチャンネルまたはマルチチャンネルコンフィグレーションが、共通の圧縮伸張ゲイン係数を使用するか、もしくは、各チャンネルに対して独立してゲイン係数が計算されるべきか、を決定するための信号を含み得る。そうしたデータは、チャンネルごとに一つのエクストラビット(ectra bit)を要求だけし得る。他の同様なコントロールデータエレメントとそれらの適切なビット荷重は、システム要求と制限に従って使用され得る。
検出メカニズム
一つの実施例において、圧縮伸張コントロールメカニズムは、QMF領域において圧縮伸張のコントロールを提供するために、圧縮コンポーネント104の部分として含まれている。圧縮伸張コントロールは、多くのファクターに基づいて構成され得る。オーディオ信号タイプといったものである。例えば、大部分のアプリケーションにおいて、圧縮伸張は、スピーチ信号と過渡信号、または、時間的にピーキー(peaky)な信号のクラスの中のあらゆる他の信号に対して、ターンオンされるべきである。システムは、圧縮伸張機能のための適切なコントロール信号の生成を手助けするために、信号のピークを検出するための検出メカニズムを含んでいる。
一つの実施例においては、所与のコアコーデックについて、周波数ビン(frequency bin)kにわたり、時間的ピークTP(k)frameに対する測定値が計算される。以下の等式を使用して計算されるものである。
Figure 0006517723
上記の等式において、S(k)は、サブバンド信号であり、Tは、一つのコアエンコーダフレームに対応するQMFスロットの数量である。一つの実施例において、Tの値は、32であってよい。バンド毎に計算された時間的ピークは、サウンドコンテンツを一般的な2つのカテゴリーへと分類するために使用され得る。変動のない音楽信号、および、音楽的過渡信号またはスピーチ信号である。TP(k)frameの値が、定められた値(例えば、1.2)より小さい場合に、フレームのそのサブバンドにおける信号は、変動のない音楽信号である可能性が高い。TP(k)frameの値が、この値より大きい場合には、信号は、音楽的過渡信号またはスピーチ信号である可能性が高い。値が、より高い閾値(例えば、1.6)より大きい場合、信号は、純粋な音楽的過渡信号である可能性が非常に高い。例えば、カスタネットである。さらに、自然に生じている信号に対して、異なるバンドにおいて得られた時間的ピークの値は、多かれ少なかれ類似していることが観察されてきており、この特性は、計算されるべき時間的ピーク値に対するサブバンドの数量を低減するために使用され得るものである。この観察に基づいて、システムは、以下の2つのうち一つを実施し得る。
第1実施例において、検出器は以下のプロセスを実行する。第1ステップとして、検出器は1.6より大きな時間的ピークを有するバンドの数量を計算する。第2ステップとして、検出器は、次に、1.6より小さいバンドの時間的ピークの平均を計算する。第1ステップにおいて見つかったバンドの数量が51より多い場合、または、第2ステップにおいて決定された平均値が1.45より大きい場合には、信号が、音楽的過渡信号であると決定され、従って、圧縮伸張がスイッチオンされるべきである。そうでなければ、圧縮伸張がスイッチオンされるべきでない信号であるものと決定される。そうした検出器は、スピーチ信号に対して、大部分の時間をスイッチオフする。いくつかの実施例において、スピーチ信号は、たいてい、個別のスピーチコーダーによって符号化され、そして、このことは一般的には問題ではない。しかしながら、所定の場合においては、スピーチに対しても、また、圧縮伸張機能をスイッチオンすることが望ましいことがある。この場合、第2タイプの検出器が適切であろう。
一つの実施例において、この第2タイプの検出器は、以下のプロセスを実行する。第1ステップとして、検出器は1.2より大きな時間的ピークを有するバンドの数量を計算する。第2ステップとして、検出器は、次に、1.2より小さいバンドの時間的ピークの平均を計算する。検出器は、次に、以下のルールを適用する。第1ステップの結果が55より大きい場合に圧縮伸張をターンオンし、第1ステップの結果が15より小さい場合に圧縮伸張をターンオフする。第1ステップの結果が15と55の間であり、かつ、第2ステップの結果が1.16より大きい場合に圧縮伸張をターンオンし、第1ステップの結果が15と55の間であり、かつ、第2ステップの結果が1.16より小さい場合に圧縮伸張をターンオフする。説明された2つのタイプの検出器は、検出アルゴリズムのために多くの可能なソリューションのうち2つの実施例に過ぎず、他の同様なアルゴリズムも、または、代替的に、使用され得ることに留意すべきである。
図4のエレメント404によって提供される圧縮伸張コントロール機能は、所定のオペレーションモードに基づいて圧縮伸張が使用され、もしくは、使用されないように、あらゆる適切な方法で実施され得る。例えば、圧縮伸張は、一般的には、サラウンドサウンドシステムのLFE(low frequency effects)チャンネル上では使用されない。そして、A−SPX機能が実施されていない(つまり、QMFなし)場合にも、また、使用されない。一つの実施例において、圧縮伸張コントロール機能は、圧縮伸張コントロールエレメント404といった、回路またはプロセッサベースのエレメントにより実行されるプログラムによって提供され得る。以下は、一つの実施例において、圧縮伸張コントロールを実施することができるプログラムセグメントのシンタックスのある実施例である。
Companding_control(nCh)
{
sync_flag=0;
if(nCh>1){
sync_flag
}
b_needAvg=0
ch_count=sync_flag?1:nCh
for(ch=0;ch<ch_count;ch++){
b_compand_on[ch]
if(!b_compand_on[ch]){
b_needAvg=1;
}
}
if(b_needAvg){
b_compand_avg:
}
}
sync_flag、b_compand_on〔ch〕、および、b_compand_avgフラグ、または、プログラムエレメントは、1ビット長のオーダーであってよく、または、システム制限と要求に応じたあらゆる他の長さであってよい。上記に説明されたプログラムコードは、圧縮伸張コントロール機能を実施する一つの方法の実施例であって、いくつかの実施例に従った圧縮伸張コントロールを実施するために他のプロトコルまたはハードウェアコンポーネントが使用され得ることに留意すべきである。
説明された実施例は、これまで、コーデックにおけるエンコーダによって持ち込まれる量子化ノイズを低減するための圧縮伸張プログラムを含んでいるが、そうした圧縮伸張プロセスの態様は、エンコードとデコード(コーデック)ステージを含まない一つの信号処理システムにおいても適用され得ることに留意すべきである。さらに、圧縮伸張プロセスがコーデックに関連して使用される場合に、コーデックは、変換ベース(transform−based)または非変換ベースのものであってよい。
ここにおいて説明されたシステムの態様は、デジタルまたはデジタル化されたオーディオファイルを処理するための適切なコンピュータベースのサウンド処理ネットワーク環境において実施され得る。アダプティブ(adptive)オーディオシステムの部分は、あらゆる所望の数量の個別のマシンを有する一つまたはそれ以上のネットワークを含み得る。マシンは、コンピュータ間で送信されるデータをバッファし、かつ、ルート化するのに役立つ一つまたはそれ以上のルーター(図示なし)を含んでいる。そうしたネットワークは、種々の異なるネットワークプロトコル上で構築され得る。そして、イントラネット、ワイドエリアネットワーク(WAN)、ローカルエリアネットワーク(LAN)、または、これらのあらゆる組合せであってよい。
一つまたはそれ以上のコンポーネント、ブロック、プロセス、または、他の機能的コンポーネントは、システムに係るプロセッサベースのコンピューティングデバイスの実行をコントロールするコンピュータプログラムを通じて実施され得る。ここにおいて開示された種々の機能は、ハードウェア、ファームウェア、及び/又は、種々のマシンで読取り可能またはコンピュータで読取り可能な媒体において具現化されるデータ及び/又はインストラクションとしての、あらゆる数の組合せを使用して記述され得ることにも、また、留意すべきである。行動、レジスタ転送、ロジックコンポーネント、及び/又は、他の特性、に関するものである。そうしたフォーマットされたデータ及び/又はインストラクションが具体化され得るコンピュータで読取り可能な媒体は、これらに限定されるわけではないが、種々の形態における物理的(固定)、不揮発性ストレージメディアを含んでいる。光、磁気、または、半導体ストレージメディアといったものである。
コンテクストが、そうでないものと明確に要求しなければ、明細書および特許請求の範囲の全てを通じて、用語「含む(”comprise”、”comprising”)」および類似のものは、排他的または徹底的な意味とは反対の包括的な意味において理解されるべきである。一つまたは複数の数を使用する用語は、また、それぞれに、複数または一つの数も含むものである。加えて、用語「ここにおいて(”herein”)」、「これ以降(”hereunder”)」、「上記の(”above”)」、「以下の(”below”)」、および、類似の意味の用語は、この出願申請に全体として言及するものであり、この出願申請のあらゆる特定の部分に言及するものではない。用語「または(”or”)」が、2つまたはそれ以上のアイテムのリストに関連して使用される場合、その用語は、以下の用語の解釈の全てをカバーするものである。つまり、リストの中のあらゆるアイテム、リストの中の全てのアイテム、および、リストの中のアイテムのあらゆる組合せ、である。
一つまたはそれ以上の実施例が、例示として、および、特定の実施例に関して説明されてきたが、一つまたはそれ以上の実施は、開示された実施例に限定されるものではないことが理解されるべきである。反対に、当業者にとって明らかであるような種々の変形および類似の構成をカバーするように意図されている。従って、添付の特許請求の範囲は、全てのそうした変形および類似の構成を包含するように、最も広い解釈に調和されるべきである。
上記の実施形態につき以下の付記を残しておく。
(付記1)
オーディオ信号を拡張する方法であって、
オーディオ信号を受信するステップと、
拡張プロセスによって前記オーディオ信号を拡張されたダイナミックレンジまで拡張するステップと、を含み、
前記拡張プロセスは、
定められたウィンドウ形状を使用して前記受信したオーディオ信号を複数の時間セグメントへと分割するステップと、
前記オーディオ信号の周波数領域表現の非エネルギーベース平均を使用して、前記周波数領域において各時間セグメントに対する広帯域ゲインを計算するステップと、
前記拡張されたダイナミックレンジを得るために、各時間セグメントに対して個別のゲイン値を適用するステップと、を含み、
前記個別のゲイン値の適用は、比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱める、
方法。
(付記2)
前記セグメントは、オーバーラップしている、
付記1に記載の方法。
(付記3)
前記オーディオ信号を分析するために第1フィルターバンクが使用されて、周波数領域表現を獲得し、かつ、
前記定められたウィンドウ形状は、前記第1フィルターバンクに対するプロトタイプフィルタに対応している、
付記2に記載の方法。
(付記4)
前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
付記3に記載の方法。
(付記5)
各時間セグメントに対する前記広帯域ゲインは、前記各時間セグメントにおけるサブバンドのサブセットの中の前記サブバンドサンプルを使用して計算される、
付記3に記載の方法。
(付記6)
サブバンドの前記サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応する、
付記5に記載の方法。
(付記7)
各時間セグメントそれぞれに対する前記ゲインは、各時間セグメントにおける前記サブバンドサンプルのp−ノルムから引き出され、
ここで、pは、2に等しくない正の実数である、
付記5に記載の方法。
(付記8)
前記広帯域ゲインは、前記第1フィルターバンクの領域において適用される、
付記5に記載の方法。
(付記9)
各広帯域ゲイン値は、前記第1フィルターバンクのサブバンドの第1サブセットから計算されて、前記第1フィルターバンクのサブバンドの第2サブセットに適用され、
ここで、サブバンドの第2セットは、サブバンドの前記第1サブセットを含む、
付記8に記載の方法。
(付記10)
サブバンドの前記第1サブセットおよび前記第2サブセットは、同一であり、かつ、前記オーディオ信号の低周波数領域に対応している、
付記9に記載の方法。
(付記11)
サブバンドの前記第1サブセットは、前記オーディオ信号の低周波数領域に対応し、かつ、
サブバンドの前記第2サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応する、
付記9に記載の方法。
(付記12)
前記受信したオーディオ信号は、プロセスによって以前に圧縮されているものであり、
前記プロセスは、
最初のオーディオ信号を受信するステップと、
圧縮プロセスによって、前記最初のオーディオ信号のオリジナルのダイナミックレンジを実質的に低減するように圧縮するステップと、を含み、
前記圧縮プロセスは、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへと分割するステップと、
前記最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して、各セグメントに対する広帯域ゲインを計算するステップと、
比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱めるために、前記複数のセグメントの各セグメントに対して前記最初のオーディオ信号から計算されたゲイン値を適用するステップと、
を含む、付記3に記載の方法。
(付記13)
拡張プロセスによって計算された前記広帯域ゲインは、対応する時間セグメントについて前記圧縮プロセスによって計算された前記広帯域ゲインの実質的な反転である、
付記12に記載の方法。
(付記14)
前記最初のオーディオ信号を分析するために前記圧縮プロセスにおいて前記広帯域ゲインが計算されて、周波数領域表現を獲得し、かつ、
分割のための前記定められたウィンドウ形状は、前記第1フィルターバンクに対するプロトタイプフィルタと同一であり、さらに、
第2フィルターバンクは、前記第1フィルターバンクと同一である、
付記12に記載の方法。
(付記15)
前記拡張プロセスのために受信された信号は、ビットストリームを生成するオーディオエンコーダおよび前記ビットストリームを復号化するデコーダによる前記圧縮された信号の修正の後で獲得される、
付記12に記載の方法。
(付記16)
前記オーディオエンコーダと前記デコーダは、両方ともに変換ベースのものであり、かつ、
前記圧縮プロセスと前記拡張プロセスにおける前記オーディオ信号の時間セグメントは、前記オーディオエンコーダとデコーダにおける変換に係る一つのウィンドウ長よりも実質的に短い、
付記15に記載の方法。
(付記17)
前記方法は、さらに、
前記拡張プロセスの動作状態を決定するコントロール情報を生成するステップと、
前記エンコーダから前記デコーダへ送信されるビットストリームにおいて、前記コントロール情報を送信するステップと、
を含む、付記15に記載の方法。
(付記18)
前記ビットストリームにおけるオーディオ信号は、前記拡張プロセスの複数の時間セグメントに応じたそれぞれのフレームを伴うフレームへと分割され、
前記動作状態がグループから選択され、
前記グループは、
前記拡張プロセスをフレームにおける各時間セグメントに適用すること、
前記拡張プロセスをフレームにおけるあらゆる時間セグメントに適用しないこと
修正されたゲイン計算を用いて前記拡張プロセスをフレームにおける各時間セグメントに適用することであって、前記各時間セグメントにおいて適用される前記ゲインは、前記フレームにおける全ての時間セグメントの平均ゲインであること、
修正されたゲイン計算を用いて前記拡張プロセスをフレームにおける各時間セグメントに適用することであって、計算は前記拡張プロセスを全く適用しないときに対して中間のゲイン値を結果として生じること、
ストップフレームを使用して、前記拡張プロセスが適用されているフレームからフェードアウトして、前記拡張プロセスが適用されていないフレームへフェードインすること、
スタートフレームを使用して、前記拡張プロセスが適用されていないフレームからフェードアウトして、前記拡張プロセスが適用されているフレームへフェードインすること、および、
前記拡張プロセスを完全に適用すること、
からなる、付記17に記載の方法。
(付記19)
前記拡張プロセスに対する前記コントロール情報は、前記最初のオーディオ信号の一つまたはそれ以上の特性に基づく前記圧縮ステップによって決定され、前記オーディオ信号のコンテンツタイプと前記オーディオ信号に係る変動のない特性対過渡特性のうち少なくとも一つを含む、
付記18に記載の方法。
(付記20)
前記コントロール情報は、動作状態間のスイッチングが信号の不連続性の発生を最小化するように決定される、
付記19に記載の方法。
(付記21)
前記コントロール情報は、前記圧縮プロセスもコントロールし、かつ、
前記拡張プロセスがスイッチオフされる場合に前記圧縮プロセスをターンオフし、前記拡張プロセスがスイッチオンされる場合に前記圧縮プロセスをターンオンする、効果を有し、
拡張に対する修正されたゲイン計算がなされる場合に、拡張に対する修正されたゲイン計算ができるようにし、
前記拡張器においてストップフレームが使用される場合にストップフレームを使用し、前記拡張器においてスタートフレームが使用される場合にスタートフレームを使用する、
付記20に記載の方法。
(付記22)
前記圧縮されたオーディオ信号と前記拡張器によって受信された前記オーディオ信号は、数量、N、チャンネルを有し、ここでNは1より大きく、
前記チャンネルは、一つまたはそれ以上の分離したサブセットへとグループ化され、
前記圧縮器および前記拡張器でのグループ化は、同一のものであり、
各グループにおける前記チャンネルは、前記圧縮器において同一のゲインを共有して圧縮され、かつ、前記拡張器において同一のゲインを共有して拡張される、
付記15に記載の方法。
(付記23)
前記グループ化は、既定のものであり、前記圧縮器と前記拡張器において既知である、
付記22に記載の方法。
(付記24)
各グループは、まさに一つのチャンネルを含み、N個のグループが存在する、
付記23に記載の方法。
(付記25)
チャンネルの前記グループ化は、
前記圧縮器においてチャンネル間の類似性メトリックを計算すること、
前記類似性メトリックに基づいて、類似のチャンネルを一緒にグループ化すること、
前記ビットストリームを通じて前記グループ化の情報を送信すること、
を含む、付記22に記載の方法。
(付記26)
ステレオ出力を再構成するために、少なくとも2つのチャンネルを前記第1フィルターバンク領域において適用された追加的なパラメトリック空間情報を伴うモノダウンミックスとして符号化し、
前記追加的なパラメトリック空間情報は、既定の周波数の下で使用される分離したステレオ情報を伴う既定の周波数の上で使用されるか、または、既定の周波数の上で使用される分離したステレオ情報を伴う既定の周波数の下で使用されるか、いずれかである、
付記22に記載の方法。
(付記27)
オーディオ信号を圧縮する方法であって、
最初のオーディオ信号を受信するステップと、
圧縮プロセスによって前記最初のオーディオ信号のダイナミックレンジを実質的に低減するステップと、を含み、
前記圧縮プロセスは、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへと分割するステップと、
前記最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して、前記周波数領域における広帯域ゲインを計算するステップと、
比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱めるように、前記複数のセグメントの各セグメントに対して個別のゲイン値を適用するステップと、を含む、
方法。
(付記28)
前記セグメントは、オーバーラップしており、
前記オーディオ信号を分析するために第1フィルターバンクが使用されて、周波数領域表現を獲得し、かつ、
前記定められたウィンドウ形状は、前記第1フィルターバンクに対するプロトタイプフィルタに対応している、
付記27に記載の方法。
(付記29)
前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
付記28に記載の方法。
(付記30)
各個別のゲイン値は、各時間セグメントにおけるサブバンドのサブセットの中のサブバンドサンプルを使用して計算される、
付記28に記載の方法。
(付記31)
サブバンドの前記サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応し、かつ、
前記ゲインは、前記第1フィルターバンクの領域において適用される、
付記30に記載の方法。
(付記32)
各時間セグメントに対する前記ゲインは、各時間セグメントにおける前記サブバンドサンプルのp−ノルムから引き出され、
ここで、pは、2に等しくない正の実数である、
付記30に記載の方法。
(付記33)
前記ゲインは、前記第1フィルターバンクのサブバンドの第1サブセットから計算されて、前記第1フィルターバンクのサブバンドの第2サブセットに適用され、
ここで、サブバンドの第2セットは、サブバンドの前記第1サブセットを含む、
付記30に記載の方法。
(付記34)
サブバンドの前記第1サブセットおよび前記第2サブセットは、同一であり、かつ、前記オーディオ信号の低周波数領域に対応している、
付記33に記載の方法。
(付記35)
サブバンドの前記第1サブセットは、前記オーディオ信号の低周波数領域に対応し、かつ、
サブバンドの前記第2サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応する、
付記33に記載の方法。
(付記36)
前記方法は、さらに、
前記最初のオーディオ信号の圧縮されたバージョンを拡張プロセスを実行する拡張コンポーネントに対して送信するステップを含み、
前記拡張プロセスは、
オーディオ信号の前記圧縮されたバージョンを受信するステップと、
前記オーディオ信号の前記圧縮されたバージョンを、プロセスによって、前記オーディオ信号のオリジナルのダイナミックレンジまで実質的に回復するように拡張するステップ、を含み、
前記プロセスは、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへと分割するステップと、
前記最初のオーディオ信号の周波数領域表現の非エネルギーベース平均を使用して、前記周波数領域において広帯域ゲインを計算するステップと、
比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱めるように、各時間セグメントに対して前記広帯域ゲインの個別のゲイン値を適用するステップと、
を含む、
付記27に記載の方法。
(付記37)
圧縮ステップによって計算された前記ゲインは、同一の時間セグメントについて前記拡張プロセスによって計算された前記ゲインの実質的な反転である、
付記36に記載の方法。
(付記38)
前記最初のオーディオ信号を分析するために前記拡張プロセスにおいて第2フィルターバンクが使用されて、周波数領域表現を獲得し、かつ、
分割のための前記定められたウィンドウ形状は、フィルターバンクに対するプロトタイプフィルタと同一であり、さらに、
第2フィルターバンクは、前記第1フィルターバンクと同一である、
付記36に記載の方法。
(付記39)
前記拡張ステップのために受信された信号は、ビットストリームを生成するオーディオエンコーダおよび前記ビットストリームを復号化するデコーダによる前記圧縮された信号の修正の後で獲得される、
付記36に記載の方法。
(付記40)
前記オーディオエンコーダと前記デコーダは、両方ともに変換ベースのものであり、かつ、
前記圧縮ステップと前記拡張ステップにおける前記オーディオ信号の時間セグメントは、前記オーディオエンコーダとデコーダにおける変換に係る一つのウィンドウ長よりも実質的に短い、
付記39に記載の方法。
(付記41)
前記方法は、さらに、
前記拡張ステップの動作状態を決定するコントロール情報を生成するステップと、
前記エンコーダから前記デコーダへ送信されるビットストリームにおいて、前記コントロール情報を送信するステップと、
を含む、付記39に記載の方法。
(付記42)
前記ビットストリームにおけるオーディオ信号は、前記拡張プロセスの複数の時間セグメントに応じたそれぞれのフレームを伴うフレームへと分割され、
前記動作状態がグループから選択され、
前記グループは、
前記拡張プロセスをフレームにおける各時間セグメントに適用すること、
前記拡張プロセスをフレームにおけるあらゆる時間セグメントに適用しないこと
修正されたゲイン計算を用いて前記拡張プロセスをフレームにおける各時間セグメントに適用することであって、前記各時間セグメントにおいて適用される前記ゲインは、前記フレームにおける全ての時間セグメントの平均ゲインであること、
修正されたゲイン計算を用いて前記拡張プロセスをフレームにおける各時間セグメントに適用することであって、計算は前記拡張プロセスを全く適用しないときに対して中間のゲイン値を結果として生じること、
ストップフレームを使用して、前記拡張プロセスが適用されているフレームからフェードアウトして、前記拡張プロセスが適用されていないフレームへフェードインすること、
スタートフレームを使用して、前記拡張プロセスが適用されていないフレームからフェードアウトして、前記拡張プロセスが適用されているフレームへフェードインすること、および、
前記拡張プロセスを完全に適用すること、
からなる、付記41に記載の方法。
(付記43)
前記拡張プロセスに対する前記コントロール情報は、前記最初のオーディオ信号の一つまたはそれ以上の特性に基づく前記圧縮ステップによって決定され、前記オーディオ信号のコンテンツタイプと前記オーディオ信号に係る変動のない特性対過渡特性のうち少なくとも一つを含む、
付記42に記載の方法。
(付記44)
前記コントロール情報は、動作状態間のスイッチングが信号の不連続性の発生を最小化するように決定される、
付記43に記載の方法。
(付記45)
前記コントロール情報は、前記圧縮プロセスもコントロールし、かつ、
前記拡張プロセスがスイッチオフされる場合に前記圧縮プロセスをターンオフし、前記拡張プロセスがスイッチオンされる場合に前記圧縮プロセスをターンオンする、効果を有し、
拡張に対する修正されたゲイン計算がなされる場合に、拡張に対する修正されたゲイン計算ができるようにし、
前記拡張器においてストップフレームが使用される場合にストップフレームを使用し、前記拡張器においてスタートフレームが使用される場合にスタートフレームを使用する、
付記44に記載の方法。
(付記46)
前記圧縮されたオーディオ信号と前記拡張器によって受信された前記オーディオ信号は、数量、N、チャンネルを有し、ここでNは1より大きく、
前記チャンネルは、一つまたはそれ以上の分離したサブセットへとグループ化され、
前記圧縮器および前記拡張器でのグループ化は、同一のものであり、
各グループにおける前記チャンネルは、前記圧縮器において同一のゲインを共有して圧縮され、かつ、前記拡張器において同一のゲインを共有して拡張される、
付記39に記載の方法。
(付記47)
前記グループ化は、既定のものであり、前記圧縮器と前記拡張器において既知である、
付記46に記載の方法。
(付記48)
各グループは、まさに一つのチャンネルを含み、N個のグループが存在する、
付記47に記載の方法。
(付記49)
チャンネルの前記グループ化は、
前記圧縮器においてチャンネル間の類似性メトリックを計算すること、
前記類似性メトリックに基づいて、類似のチャンネルを一緒にグループ化すること、
前記ビットストリームを通じて前記グループ化の情報を送信すること、
を含む、付記46に記載の方法。
(付記50)
ステレオ出力を再構成するために、少なくとも2つのチャンネルを前記第1フィルターバンク領域において適用された追加的なパラメトリック空間情報を伴うモノダウンミックスとして符号化し、
前記追加的なパラメトリック空間情報は、既定の周波数の下で使用される分離したステレオ情報を伴う既定の周波数の上で使用されるか、または、既定の周波数の上で使用される分離したステレオ情報を伴う既定の周波数の下で使用されるか、いずれかである、
付記49に記載の方法。
(付記51)
オーディオ信号を圧縮するための装置であって、
最初のオーディオ信号を受信する第1インターフェイスと、
前記最初のオーディオ信号のオリジナルのダイナミックレンジを実質的に低減するように前記最初のオーディオ信号を圧縮する圧縮器と、を含み、
前記圧縮器は、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへ分割し、
前記最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して、前記周波数領域における広帯域ゲインを計算し、
比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱めるように、前記複数のセグメントの各セグメントに対して個別のゲイン値を適用する、
ことにより圧縮を行う、装置。
(付記52)
前記装置は、さらに、
前記オーディオ信号を分析して、周波数領域表現を獲得する第1フィルターバンクを含み、
前記定められたウィンドウ形状は、前記第1フィルターバンクに対するプロトタイプフィルタに対応しており、さらに、
前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
付記51に記載の装置。
(付記53)
個別のゲイン値は、各時間セグメントそれぞれにおけるサブバンドのサブセットの中のサブバンドサンプルを使用して計算される、
付記52に記載の装置。
(付記54)
サブバンドの前記サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応し、かつ、
前記ゲインは、前記第1フィルターバンクの領域において適用される、
付記53に記載の装置。
(付記55)
前記装置は、さらに、
前記最初のオーディオ信号の圧縮されたバージョンを拡張器へ送信する第2インターフェイスを含み、
前記拡張器は、
オーディオ信号の前記圧縮されたバージョンを受信し、
前記オーディオ信号の前記圧縮されたバージョンを、前記オーディオ信号のオリジナルのダイナミックレンジまで実質的に回復するために、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへと分割し、
前記最初のオーディオ信号の周波数領域表現の非エネルギーベース平均を使用して、前記周波数領域において広帯域ゲインを計算し、
比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱めるように、各時間セグメントに対して前記広帯域ゲインの個別のゲイン値を適用する、
ことによって拡張する、
付記52に記載の装置。
(付記56)
前記圧縮器によって計算された前記ゲインは、同一の時間セグメントについて前記拡張器によって計算された前記ゲインの実質的な反転である、
付記55に記載の装置。
(付記57)
前記装置は、さらに、
前記最初のオーディオ信号を分析して周波数領域表現を獲得する第2フィルターバンク、を含み、
分割のための前記定められたウィンドウ形状は、フィルターバンクに対するプロトタイプフィルタと同一であり、さらに、
第2フィルターバンクは、前記第1フィルターバンクと同一である、
付記55に記載の装置。
(付記58)
前記装置は、さらに、
前記オーディオ信号の圧縮されたバージョンを圧縮器から拡張器へ送信するように構成されているオーディオコーデックのエンコードステージとデコードステージを含み、
前記エンコーダと前記デコーダは、両方ともに変換ベースのものである、
付記55に記載の装置。
(付記59)
前記装置は、さらに、
前記拡張器の動作状態を決定するコントロール情報を生成し、かつ、前記ビットストリームにおいて前記コントロール情報を送信するコントロールコンポーネントを含み、
前記拡張プロセスに対する前記コントロール情報は、前記最初のオーディオ信号の一つまたはそれ以上の特性に基づく前記圧縮ステップによって決定され、前記オーディオ信号のコンテンツタイプと前記オーディオ信号に係る変動のない特性対過渡特性のうち少なくとも一つを含む、
付記58に記載の装置。
(付記60)
前記装置は、さらに、
ステレオ出力を再構成するために、前記第1フィルターバンク領域においてパラメトリック空間情報を適用するパラメトリック空間情報コンポーネント、を含み、
前記パラメトリック空間情報は、既定の周波数の下で使用される分離したステレオ情報を伴う既定の周波数の上で使用されるか、または、既定の周波数の上で使用される分離したステレオ情報を伴う既定の周波数の下で使用されるか、いずれかである、
付記55に記載の装置。
(付記61)
オーディオ信号を拡張するための装置であって、
圧縮されたオーディオ信号を受信する第1インターフェイスと、
前記圧縮されたオーディオ信号をオリジナルの圧縮されていないダイナミックレンジに実質的に回復するための拡張器と、を含み、
前記拡張器は、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへ分割し、
前記最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して、前記周波数領域における広帯域ゲインを計算し、
比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱めるように、前記複数のセグメントの各セグメントに対して個別のゲイン値を適用する、
ことにより拡張を行う、装置。
(付記62)
前記装置は、さらに、
前記オーディオ信号を分析して、周波数領域表現を獲得する第1フィルターバンクを含み、
前記定められたウィンドウ形状は、前記第1フィルターバンクに対するプロトタイプフィルタに対応しており、さらに、
前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
付記61に記載の装置。
(付記63)
前記広帯域ゲインは、各時間セグメントに対する個々のゲイン値を含み、かつ、
個別のゲイン値それぞれは、各時間セグメントそれぞれにおけるサブバンドのサブセットの中のサブバンドサンプルを使用して計算される、
付記62に記載の装置。
(付記64)
サブバンドの前記サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応し、かつ、
前記ゲインは、前記第1フィルターバンクの領域において適用される、
付記63に記載の装置。
(付記65)
前記装置は、さらに、
最初のオーディオ信号を受信する圧縮器から前記圧縮されたオーディオ信号を受信する第2インターフェイスを含み、
前記圧縮器は、
前記最初のオーディオ信号の前記オリジナルのダイナミックレンジを実質的に低減するために、
定められたウィンドウ形状を使用して前記最初のオーディオ信号を複数の時間セグメントへと分割し、
前記最初のオーディオ信号の周波数領域サンプルの非エネルギーベース平均を使用して、前記周波数領域において広帯域ゲインを計算し、
比較的に低い強度のセグメントを増幅し、かつ、比較的に高い強度のセグメントを弱めるように、前記複数のセグメントの各時間セグメントに対して各ゲイン値を適用する、
ことによって前記最初のオーディオ信号を圧縮する、
付記62に記載の装置。
(付記66)
前記圧縮器によって計算された前記ゲインは、同一の時間セグメントについて前記拡張器によって計算された前記ゲインの実質的な反転である、
付記65に記載の装置。
(付記67)
前記装置は、さらに、
前記最初のオーディオ信号を分析して周波数領域表現を獲得するする第2フィルターバンク、を含み、
分割のための前記定められたウィンドウ形状は、フィルターバンクに対するプロトタイプフィルタと同一であり、さらに、
第2フィルターバンクは、前記第1フィルターバンクと同一である、
付記65に記載の装置。
(付記68)
前記装置は、さらに、
前記オーディオ信号の圧縮されたバージョンのビットストリームを圧縮器から拡張器へ送信するように構成されているオーディオコーデックのエンコードステージとデコードステージを含み、
前記エンコーダと前記デコーダは、両方ともに変換ベースのものである、
付記65に記載の装置。
(付記69)
前記装置は、さらに、
前記拡張器の動作状態を決定するコントロール情報を生成し、かつ、前記ビットストリームにおいて前記コントロール情報を送信するコントロールコンポーネントを含み、
前記拡張プロセスに対する前記コントロール情報は、前記最初のオーディオ信号の一つまたはそれ以上の特性に基づく前記圧縮ステップによって決定され、前記オーディオ信号のコンテンツタイプと前記オーディオ信号に係る変動のない特性対過渡特性のうち少なくとも一つを含む、
付記68に記載の装置。
(付記70)
前記装置は、さらに、
ステレオ出力を再構成するために、前記第1フィルターバンク領域においてパラメトリック空間情報を適用するパラメトリック空間情報コンポーネント、を含み、
前記パラメトリック空間情報は、既定の周波数の下で使用される分離したステレオ情報を伴う既定の周波数の上で使用されるか、または、既定の周波数の上で使用される分離したステレオ情報を伴う既定の周波数の下で使用されるか、いずれかである、
付記65に記載の装置。
104 圧縮コンポーネント
106 エンコーダ
110 ネットワーク
112 デコーダ
114 拡張コンポーネント
116 オーディオ出力
406 圧縮器
412 コアエンコーダ

Claims (10)

  1. オーディオ信号を拡張する方法であって、
    オーディオ信号を受信するステップであり、前記オーディオ信号は、圧縮プロセスによってオリジナルのダイナミックレンジを低減するように圧縮されているステップと、
    拡張プロセスによって前記オーディオ信号を前記オリジナルのダイナミックレンジまで実質的に拡張するステップと、を含み、
    前記拡張プロセスは、
    前記受信したオーディオ信号を複数のセグメントへと分割するステップと、
    各セグメントそれぞれに対するゲインを計算するステップと、
    前記拡張されたダイナミックレンジを得るために、各セグメントに対して前記ゲインを適用するステップと、を含み、
    前記ゲインは、前記オーディオ信号の周波数領域表現で各セグメントにおけるサブバンドサンプルのp−ノルムから引き出され、ここで、pは、2に等しくない正の実数であり、
    前記ゲインの適用は、比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱め
    前記圧縮プロセスと前記拡張プロセスにおいては、同一のp−ノルムが使用される、
    方法。
  2. 前記セグメントは、オーバーラップしている、
    請求項1に記載の方法。
  3. 前記オーディオ信号を分析するために第1フィルターバンクが使用されて、周波数領域表現を獲得する、
    請求項2に記載の方法。
  4. 前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
    請求項3に記載の方法。
  5. 各セグメントに対する前記ゲインは、前記各セグメントにおけるサブバンドのサブセットの中のサブバンドのサンプルを使用して計算される、
    請求項3に記載の方法。
  6. オーディオ信号を拡張するための装置であって、
    圧縮器によってオリジナルのダイナミックレンジを低減するように圧縮されたオーディオ信号を受信する第1インターフェイスと、
    前記圧縮されたオーディオ信号を、オリジナルのダイナミックレンジまで実質的に回復するように拡張する拡張器と、を含み、
    前記拡張は、
    最初のオーディオ信号を複数の時間セグメントへと分割し、
    各セグメントそれぞれに対するゲインを計算し、
    前記ゲインは、前記オーディオ信号の周波数領域表現で各セグメントにおけるサブバンドサンプルのp−ノルムから引き出され、ここで、pは、2に等しくない正の実数であり、
    比較的に高い強度のセグメントを増幅し、かつ、比較的に低い強度のセグメントを弱めるように、前記複数のセグメントの各セグメントに対してそれぞれのゲイン値を適用する、
    ことによって行われ
    前記装置は、さらに、
    前記圧縮されたオーディオ信号を圧縮器から受信する、第2インターフェイス、を含み、
    前記圧縮器と前記拡張器においては、同一のp−ノルムが使用される、
    装置。
  7. 前記装置は、さらに、
    周波数領域表現を獲得するために前記オーディオ信号を分析する第1フィルターバンクを、含み、
    前記第1フィルターバンクは、直角位相変調フィルタ(QMF)バンクまたは短時間フーリエ変換のうちの一つである、
    請求項に記載の装置。
  8. 前記ゲインは、各時間セグメントに対する個別のゲイン値を含み、かつ、
    個々のゲイン値それぞれは、各時間セグメントそれぞれにおけるサブバンドのサブセットの中のサブバンドのサンプルを使用して計算される、
    請求項に記載の装置。
  9. サブバンドの前記サブセットは、前記第1フィルターバンクによってスパンされる全ての周波数帯に対応し、かつ、
    前記ゲインは、前記第1フィルターバンクの領域において適用される、
    請求項に記載の装置。
  10. インストラクションが保管されたコンピュータで読取り可能な有形の記録媒体であって、一つまたはそれ以上のプロセッサによって前記インストラクションが実行されると、請求項1に記載の方法を前記コンピュータに実施させる、有形の記録媒体。
JP2016076927A 2013-04-05 2016-04-07 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法 Active JP6517723B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361809028P 2013-04-05 2013-04-05
US61/809,028 2013-04-05
US201361877167P 2013-09-12 2013-09-12
US61/877,167 2013-09-12

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015558242A Division JP6026678B2 (ja) 2013-04-05 2014-04-01 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016120633A Division JP6542717B2 (ja) 2013-04-05 2016-06-17 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法

Publications (2)

Publication Number Publication Date
JP2016167081A JP2016167081A (ja) 2016-09-15
JP6517723B2 true JP6517723B2 (ja) 2019-05-22

Family

ID=50629038

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2015558242A Active JP6026678B2 (ja) 2013-04-05 2014-04-01 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2016076927A Active JP6517723B2 (ja) 2013-04-05 2016-04-07 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2016120633A Active JP6542717B2 (ja) 2013-04-05 2016-06-17 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2019110378A Active JP6838105B2 (ja) 2013-04-05 2019-06-13 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2021019640A Active JP7050976B2 (ja) 2013-04-05 2021-02-10 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2022052882A Active JP7383067B2 (ja) 2013-04-05 2022-03-29 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2023189975A Pending JP2024020311A (ja) 2013-04-05 2023-11-07 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015558242A Active JP6026678B2 (ja) 2013-04-05 2014-04-01 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法

Family Applications After (5)

Application Number Title Priority Date Filing Date
JP2016120633A Active JP6542717B2 (ja) 2013-04-05 2016-06-17 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2019110378A Active JP6838105B2 (ja) 2013-04-05 2019-06-13 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2021019640A Active JP7050976B2 (ja) 2013-04-05 2021-02-10 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2022052882A Active JP7383067B2 (ja) 2013-04-05 2022-03-29 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
JP2023189975A Pending JP2024020311A (ja) 2013-04-05 2023-11-07 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法

Country Status (24)

Country Link
US (6) US9947335B2 (ja)
EP (3) EP2981963B1 (ja)
JP (7) JP6026678B2 (ja)
KR (7) KR20220140002A (ja)
CN (8) CN105933030B (ja)
AP (1) AP2015008800A0 (ja)
AU (1) AU2014248232B2 (ja)
BR (2) BR122017006632A2 (ja)
CA (1) CA2900724C (ja)
CL (1) CL2015002278A1 (ja)
DK (1) DK2981963T3 (ja)
EA (1) EA028755B9 (ja)
ES (1) ES2617314T3 (ja)
HK (4) HK1257807A1 (ja)
HU (1) HUE031966T2 (ja)
IL (8) IL300496A (ja)
ME (1) ME02623B (ja)
MX (1) MX342965B (ja)
MY (2) MY173488A (ja)
PL (1) PL2981963T3 (ja)
RU (2) RU2600527C1 (ja)
SG (1) SG11201506134XA (ja)
WO (1) WO2014165543A1 (ja)
ZA (1) ZA201600393B (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220140002A (ko) * 2013-04-05 2022-10-17 돌비 레버러토리즈 라이쎈싱 코오포레이션 향상된 스펙트럼 확장을 사용하여 양자화 잡음을 감소시키기 위한 압신 장치 및 방법
US9584911B2 (en) * 2015-03-27 2017-02-28 Cirrus Logic, Inc. Multichip dynamic range enhancement (DRE) audio processing methods and apparatuses
US10861475B2 (en) * 2015-11-10 2020-12-08 Dolby International Ab Signal-dependent companding system and method to reduce quantization noise
KR101968456B1 (ko) 2016-01-26 2019-04-11 돌비 레버러토리즈 라이쎈싱 코오포레이션 적응형 양자화
CA2985019C (en) * 2016-02-17 2022-05-03 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Post-processor, pre-processor, audio encoder, audio decoder and related methods for enhancing transient processing
US9934788B2 (en) * 2016-08-01 2018-04-03 Bose Corporation Reducing codec noise in acoustic devices
EP3651365A4 (en) * 2017-07-03 2021-03-31 Pioneer Corporation SIGNAL PROCESSING DEVICE, CONTROL PROCESS, PROGRAM, AND INFORMATION SUPPORT
RU2691122C1 (ru) * 2018-06-13 2019-06-11 Ордена трудового Красного Знамени федеральное государственное бюджетное образовательное учреждение высшего образования "Московский технический университет связи и информатики" (МТУСИ) Способ и устройство компандирования звуковых вещательных сигналов
JP7447085B2 (ja) 2018-08-21 2024-03-11 ドルビー・インターナショナル・アーベー コンパンディングによる密過渡イベントの符号化
CN112639968A (zh) 2018-08-30 2021-04-09 杜比国际公司 用于控制对经低比特率编码的音频的增强的方法和装置
CN110265043B (zh) * 2019-06-03 2021-06-01 同响科技股份有限公司 自适应有损或无损的音频压缩和解压缩演算方法
RU2731602C1 (ru) * 2019-09-30 2020-09-04 Ордена трудового Красного Знамени федеральное государственное бюджетное образовательное учреждение высшего образования "Московский технический университет связи и информатики" (МТУСИ) Способ и устройство компандирования с предыскажением звуковых вещательных сигналов
JP7340100B2 (ja) 2019-10-28 2023-09-06 メルク・シャープ・アンド・ドーム・エルエルシー Kras g12c変異型の小分子阻害薬
CN115485769A (zh) 2020-04-30 2022-12-16 杜比国际公司 动态范围减小的域中增强多声道音频的方法、装置和系统
EP4158624A1 (en) 2020-06-01 2023-04-05 Dolby International AB Method and apparatus for determining parameters of a generative neural network
CN114095831A (zh) * 2020-08-25 2022-02-25 上海艾为电子技术股份有限公司 多段动态范围控制电路以及音频处理芯片
CN112133319A (zh) * 2020-08-31 2020-12-25 腾讯音乐娱乐科技(深圳)有限公司 音频生成的方法、装置、设备及存储介质
CN117079657B (zh) * 2023-10-16 2024-01-26 中国铁塔股份有限公司 压限处理方法、装置、电子设备及可读存储介质

Family Cites Families (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6026678B2 (ja) 1981-04-30 1985-06-25 株式会社青木技研 電動ドライバ−の制御装置
JPS6026678A (ja) 1983-07-22 1985-02-09 Hiroshi Uchiyama 原油受入配管防蝕法
JPH05292592A (ja) * 1992-04-10 1993-11-05 Toshiba Corp 音質補正装置
US6003004A (en) * 1998-01-08 1999-12-14 Advanced Recognition Technologies, Inc. Speech recognition method and system using compressed speech data
JP3485786B2 (ja) 1998-02-10 2004-01-13 三洋電機株式会社 音声データの圧縮/伸長装置
TW390104B (en) * 1998-08-10 2000-05-11 Acer Labs Inc Method and device for down mixing of multi-sound-track compression audio frequency bit stream
US6300888B1 (en) 1998-12-14 2001-10-09 Microsoft Corporation Entrophy code mode switching for frequency-domain audio coding
US6487257B1 (en) * 1999-04-12 2002-11-26 Telefonaktiebolaget L M Ericsson Signal noise reduction by time-domain spectral subtraction using fixed filters
US6778966B2 (en) * 1999-11-29 2004-08-17 Syfx Segmented mapping converter system and method
CA2327041A1 (en) * 2000-11-22 2002-05-22 Voiceage Corporation A method for indexing pulse positions and signs in algebraic codebooks for efficient coding of wideband signals
JP2003005797A (ja) 2001-06-21 2003-01-08 Matsushita Electric Ind Co Ltd オーディオ信号の符号化方法及び装置、並びに符号化及び復号化システム
JP4247037B2 (ja) 2003-01-29 2009-04-02 株式会社東芝 音声信号処理方法と装置及びプログラム
EP1611772A1 (en) * 2003-03-04 2006-01-04 Nokia Corporation Support of a multichannel audio extension
US7876966B2 (en) 2003-03-11 2011-01-25 Spyder Navigations L.L.C. Switching between coding schemes
EP1619664B1 (en) 2003-04-30 2012-01-25 Panasonic Corporation Speech coding apparatus, speech decoding apparatus and methods thereof
ATE356405T1 (de) 2003-07-07 2007-03-15 Koninkl Philips Electronics Nv System und verfahren zur signalverarbeitung
KR20050049103A (ko) * 2003-11-21 2005-05-25 삼성전자주식회사 포만트 대역을 이용한 다이얼로그 인핸싱 방법 및 장치
CN1677492A (zh) * 2004-04-01 2005-10-05 北京宫羽数字技术有限责任公司 一种增强音频编解码装置及方法
US8090120B2 (en) * 2004-10-26 2012-01-03 Dolby Laboratories Licensing Corporation Calculating and adjusting the perceived loudness and/or the perceived spectral balance of an audio signal
JP4658137B2 (ja) * 2004-12-16 2011-03-23 ヴェーデクス・アクティーセルスカプ フィードバックモデル利得を推定する補聴器
KR100647336B1 (ko) * 2005-11-08 2006-11-23 삼성전자주식회사 적응적 시간/주파수 기반 오디오 부호화/복호화 장치 및방법
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
WO2007080211A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation Decoding of binaural audio signals
BRPI0709877B1 (pt) * 2006-04-04 2019-12-31 Dolby Laboratories Licensing Corp método e aparelho para controlar uma característica de intensidade acústica particular de um sinal de áudio
SG136836A1 (en) * 2006-04-28 2007-11-29 St Microelectronics Asia Adaptive rate control algorithm for low complexity aac encoding
CN100543842C (zh) * 2006-05-23 2009-09-23 中兴通讯股份有限公司 基于多统计模型和最小均方误差实现背景噪声抑制的方法
CN101089951B (zh) * 2006-06-16 2011-08-31 北京天籁传音数字技术有限公司 频带扩展编码方法及装置和解码方法及装置
ES2623226T3 (es) * 2006-07-04 2017-07-10 Dolby International Ab Unidad de filtro y procedimiento de generación de respuestas al impulso de filtro de subbanda
CN101529929B (zh) * 2006-09-05 2012-11-07 Gn瑞声达A/S 具有基于直方图的声环境分类的助听器
MY145497A (en) * 2006-10-16 2012-02-29 Dolby Sweden Ab Enhanced coding and parameter representation of multichannel downmixed object coding
US7953595B2 (en) * 2006-10-18 2011-05-31 Polycom, Inc. Dual-transform coding of audio signals
JP5141180B2 (ja) * 2006-11-09 2013-02-13 ソニー株式会社 周波数帯域拡大装置及び周波数帯域拡大方法、再生装置及び再生方法、並びに、プログラム及び記録媒体
CN101067931B (zh) * 2007-05-10 2011-04-20 芯晟(北京)科技有限公司 一种高效可配置的频域参数立体声及多声道编解码方法与系统
ES2358786T3 (es) * 2007-06-08 2011-05-13 Dolby Laboratories Licensing Corporation Derivación híbrida de canales de audio de sonido envolvente combinando de manera controlable componentes de señal de sonido ambiente y con decodificación matricial.
US7774205B2 (en) * 2007-06-15 2010-08-10 Microsoft Corporation Coding of sparse digital media spectral data
BRPI0813723B1 (pt) 2007-07-13 2020-02-04 Dolby Laboratories Licensing Corp método para controlar o nível de intensidade do som de eventos auditivos, memória legível por computador não transitória, sistema de computador e aparelho
ES2658942T3 (es) * 2007-08-27 2018-03-13 Telefonaktiebolaget Lm Ericsson (Publ) Análisis espectral/síntesis de baja complejidad utilizando resolución temporal seleccionable
JP4854630B2 (ja) * 2007-09-13 2012-01-18 富士通株式会社 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム
CN100585699C (zh) * 2007-11-02 2010-01-27 华为技术有限公司 一种音频解码的方法和装置
JP5400059B2 (ja) * 2007-12-18 2014-01-29 エルジー エレクトロニクス インコーポレイティド オーディオ信号処理方法及び装置
RU2437247C1 (ru) * 2008-01-01 2011-12-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ и устройство для обработки звукового сигнала
EP2077551B1 (en) * 2008-01-04 2011-03-02 Dolby Sweden AB Audio encoder and decoder
CN101335000B (zh) * 2008-03-26 2010-04-21 华为技术有限公司 编码的方法及装置
CN101262530B (zh) * 2008-04-29 2011-12-07 中兴通讯股份有限公司 一种消除移动终端回音的装置
EP2299368B1 (en) * 2008-05-01 2017-09-06 Japan Science and Technology Agency Audio processing device and audio processing method
JP4750153B2 (ja) * 2008-05-28 2011-08-17 独立行政法人科学技術振興機構 音響装置及び音響調整方法
CN101281747A (zh) * 2008-05-30 2008-10-08 苏州大学 基于声道参数的汉语耳语音声调识别方法
ES2683077T3 (es) * 2008-07-11 2018-09-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codificador y decodificador de audio para codificar y decodificar tramas de una señal de audio muestreada
EP2144230A1 (en) * 2008-07-11 2010-01-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Low bitrate audio encoding/decoding scheme having cascaded switches
ATE539433T1 (de) 2008-07-11 2012-01-15 Fraunhofer Ges Forschung Bereitstellen eines zeitverzerrungsaktivierungssignals und codierung eines audiosignals damit
EP2301020B1 (en) 2008-07-11 2013-01-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding/decoding an audio signal using an aliasing switch scheme
KR101518532B1 (ko) * 2008-07-11 2015-05-07 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 오디오 인코더, 오디오 디코더, 오디오 신호, 오디오 스트림을 부호화 및 복호화하는 장치 및 컴퓨터 프로그램
CN102099857B (zh) * 2008-07-18 2013-03-13 杜比实验室特许公司 用于解码器中的编码音频数据的频域后滤波的方法和系统
CN101656580B (zh) * 2008-08-22 2013-03-20 中兴通讯股份有限公司 全速率语音的处理方法和装置
JP2010079275A (ja) * 2008-08-29 2010-04-08 Sony Corp 周波数帯域拡大装置及び方法、符号化装置及び方法、復号化装置及び方法、並びにプログラム
CN101359902B (zh) * 2008-09-25 2012-03-21 炬才微电子(深圳)有限公司 一种音频信号的均衡方法及系统
JP5245714B2 (ja) * 2008-10-24 2013-07-24 ヤマハ株式会社 雑音抑圧装置及び雑音抑圧方法
JP5603339B2 (ja) * 2008-10-29 2014-10-08 ドルビー インターナショナル アーベー 既存のオーディオゲインメタデータを使用した信号のクリッピングの保護
ATE552651T1 (de) * 2008-12-24 2012-04-15 Dolby Lab Licensing Corp Audiosignallautheitbestimmung und modifikation im frequenzbereich
US8626516B2 (en) * 2009-02-09 2014-01-07 Broadcom Corporation Method and system for dynamic range control in an audio processing system
TWI597939B (zh) * 2009-02-18 2017-09-01 杜比國際公司 具相位偏移之複數值合成濾波器組
JP4843691B2 (ja) * 2009-03-09 2011-12-21 株式会社東芝 信号特性変化装置
CN101853666B (zh) * 2009-03-30 2012-04-04 华为技术有限公司 一种语音增强的方法和装置
CN101521014B (zh) * 2009-04-08 2011-09-14 武汉大学 音频带宽扩展编解码装置
US8391212B2 (en) * 2009-05-05 2013-03-05 Huawei Technologies Co., Ltd. System and method for frequency domain audio post-processing based on perceptual masking
JP5149991B2 (ja) * 2009-05-29 2013-02-20 シャープ株式会社 音声再生装置、音声再生方法及びプログラム
WO2010140940A1 (en) * 2009-06-04 2010-12-09 Telefonaktiebolaget Lm Ericsson (Publ) A method and arrangement for estimating the quality degradation of a processed signal
CN101668303B (zh) * 2009-09-24 2012-02-15 武汉中元通信股份有限公司 双频段宽带电台野外联试通信仿真方法与平台
US8571231B2 (en) * 2009-10-01 2013-10-29 Qualcomm Incorporated Suppressing noise in an audio signal
CN102648495B (zh) * 2009-10-21 2014-05-28 杜比Ab国际公司 用于利用适应性过取样产生高频音频信号的装置及方法
CN101916567B (zh) * 2009-11-23 2012-02-01 瑞声声学科技(深圳)有限公司 应用于双麦克风系统的语音增强方法
US9584235B2 (en) 2009-12-16 2017-02-28 Nokia Technologies Oy Multi-channel audio processing
CN101800520B (zh) * 2010-02-25 2013-05-22 青岛海信移动通信技术股份有限公司 自动增益控制的实现方法及实现系统
TWI459828B (zh) * 2010-03-08 2014-11-01 Dolby Lab Licensing Corp 在多頻道音訊中決定語音相關頻道的音量降低比例的方法及系統
US8616516B2 (en) 2010-03-24 2013-12-31 Intertechnique S.A. Assembling device for cabin interior components
CN101867809A (zh) * 2010-04-09 2010-10-20 中国科学院光电技术研究所 基于脉动阵列的高速图像压缩vlsi编码方法及编码器
WO2011127832A1 (en) 2010-04-14 2011-10-20 Huawei Technologies Co., Ltd. Time/frequency two dimension post-processing
US8886523B2 (en) 2010-04-14 2014-11-11 Huawei Technologies Co., Ltd. Audio decoding based on audio class with control code for post-processing modes
US8964993B2 (en) * 2010-04-27 2015-02-24 Yobe, Inc. Systems and methods for enhancing audio content
JP5882895B2 (ja) 2010-06-14 2016-03-09 パナソニック株式会社 復号装置
CN102361506A (zh) * 2011-06-08 2012-02-22 北京昆腾微电子有限公司 无线音频通信系统、以及用于发射音频信号的方法和设备
US20130136282A1 (en) * 2011-11-30 2013-05-30 David McClain System and Method for Spectral Personalization of Sound
CN102522092B (zh) * 2011-12-16 2013-06-19 大连理工大学 一种基于g.711.1的语音带宽扩展的装置和方法
CN102543086B (zh) * 2011-12-16 2013-08-14 大连理工大学 一种基于音频水印的语音带宽扩展的装置和方法
CN102625220B (zh) * 2012-03-22 2014-05-07 清华大学 一种确定助听设备听力补偿增益的方法
CN102737647A (zh) * 2012-07-23 2012-10-17 武汉大学 双声道音频音质增强编解码方法及装置
KR20220140002A (ko) 2013-04-05 2022-10-17 돌비 레버러토리즈 라이쎈싱 코오포레이션 향상된 스펙트럼 확장을 사용하여 양자화 잡음을 감소시키기 위한 압신 장치 및 방법
US10861475B2 (en) * 2015-11-10 2020-12-08 Dolby International Ab Signal-dependent companding system and method to reduce quantization noise
JP7447085B2 (ja) * 2018-08-21 2024-03-11 ドルビー・インターナショナル・アーベー コンパンディングによる密過渡イベントの符号化

Also Published As

Publication number Publication date
BR112015019176B1 (pt) 2021-02-09
IL266569B (en) 2020-06-30
MX2015010478A (es) 2015-12-16
RU2600527C1 (ru) 2016-10-20
KR102509345B1 (ko) 2023-03-14
BR122017006632A2 (pt) 2021-06-29
KR102081043B1 (ko) 2020-02-26
JP2024020311A (ja) 2024-02-14
CN108269584A (zh) 2018-07-10
US20180197562A1 (en) 2018-07-12
HK1257807A1 (zh) 2019-11-01
EP3176786A1 (en) 2017-06-07
MY173488A (en) 2020-01-28
CN105933030B (zh) 2018-09-28
US20160019908A1 (en) 2016-01-21
EA028755B1 (ru) 2017-12-29
JP2016167081A (ja) 2016-09-15
EP3176786B1 (en) 2019-05-08
KR101632599B1 (ko) 2016-06-22
US10217476B2 (en) 2019-02-26
JP2016191934A (ja) 2016-11-10
CN114566182A (zh) 2022-05-31
WO2014165543A1 (en) 2014-10-09
CA2900724A1 (en) 2014-10-09
SG11201506134XA (en) 2015-09-29
CN104995680A (zh) 2015-10-21
HUE031966T2 (en) 2017-08-28
IL274358B (en) 2021-05-31
EP3564953A2 (en) 2019-11-06
ZA201600393B (en) 2017-05-31
IL292853B2 (en) 2023-07-01
KR20230039765A (ko) 2023-03-21
RU2016116038A3 (ja) 2019-11-11
IL261514A (en) 2018-10-31
JP6542717B2 (ja) 2019-07-10
KR20160075804A (ko) 2016-06-29
RU2016116038A (ru) 2018-11-30
IL283098B (en) 2022-06-01
US9947335B2 (en) 2018-04-17
KR20150098688A (ko) 2015-08-28
US20190325890A1 (en) 2019-10-24
US20230049495A1 (en) 2023-02-16
IL292853B1 (en) 2023-03-01
EA028755B9 (ru) 2018-04-30
EP2981963A1 (en) 2016-02-10
AP2015008800A0 (en) 2015-10-31
IL266569A (en) 2019-07-31
RU2712814C2 (ru) 2020-01-31
US20200395031A1 (en) 2020-12-17
JP7383067B2 (ja) 2023-11-17
IL292853A (en) 2022-07-01
IL283098A (en) 2021-06-30
CN108269586B (zh) 2022-04-05
EP3564953B1 (en) 2022-03-23
CL2015002278A1 (es) 2015-12-11
AU2014248232A1 (en) 2015-08-06
CN105933030A (zh) 2016-09-07
US10373627B2 (en) 2019-08-06
ME02623B (me) 2017-06-20
JP2016510439A (ja) 2016-04-07
CN108269585B (zh) 2022-03-25
MY197063A (en) 2023-05-23
HK1254791A1 (zh) 2019-07-26
JP6026678B2 (ja) 2016-11-16
US11423923B2 (en) 2022-08-23
JP2019179254A (ja) 2019-10-17
CN108269585A (zh) 2018-07-10
KR20200028037A (ko) 2020-03-13
HK1211379A1 (en) 2016-05-20
KR102088153B1 (ko) 2020-03-12
JP7050976B2 (ja) 2022-04-08
US10679639B2 (en) 2020-06-09
IL300496A (en) 2023-04-01
AU2014248232B2 (en) 2015-09-24
CN108269586A (zh) 2018-07-10
KR20160075805A (ko) 2016-06-29
IL261514B (en) 2019-05-30
HK1254790A1 (zh) 2019-07-26
EP2981963B1 (en) 2017-01-04
CN104995680B (zh) 2018-04-03
IL240006A0 (en) 2015-09-24
CN108269584B (zh) 2022-03-25
CN106024008A (zh) 2016-10-12
IL243689A0 (en) 2016-04-21
IL274358A (en) 2020-06-30
KR20210049963A (ko) 2021-05-06
BR112015019176A2 (pt) 2017-07-18
MX342965B (es) 2016-10-19
DK2981963T3 (en) 2017-02-27
CN114566183A (zh) 2022-05-31
CN106024008B (zh) 2020-01-14
KR102248008B1 (ko) 2021-05-07
JP2022088519A (ja) 2022-06-14
US20180197561A1 (en) 2018-07-12
IL240006A (en) 2016-03-31
JP2021076872A (ja) 2021-05-20
CA2900724C (en) 2016-09-13
RU2020100016A (ru) 2021-07-08
PL2981963T3 (pl) 2017-06-30
ES2617314T3 (es) 2017-06-16
EA201591533A1 (ru) 2015-12-30
JP6838105B2 (ja) 2021-03-03
EP3564953A3 (en) 2020-02-26
KR20220140002A (ko) 2022-10-17

Similar Documents

Publication Publication Date Title
JP7383067B2 (ja) 高度なスペクトラム拡張を使用して量子化ノイズを低減するための圧縮伸張装置および方法
RU2801156C2 (ru) Система компандирования и способ для снижения шума квантования с использованием усовершенствованного спектрального расширения

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160617

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180424

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180626

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190227

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190307

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190418

R150 Certificate of patent or registration of utility model

Ref document number: 6517723

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250