JP6076407B2 - オーディオエンコーダおよび帯域幅拡張デコーダ - Google Patents

オーディオエンコーダおよび帯域幅拡張デコーダ Download PDF

Info

Publication number
JP6076407B2
JP6076407B2 JP2015123018A JP2015123018A JP6076407B2 JP 6076407 B2 JP6076407 B2 JP 6076407B2 JP 2015123018 A JP2015123018 A JP 2015123018A JP 2015123018 A JP2015123018 A JP 2015123018A JP 6076407 B2 JP6076407 B2 JP 6076407B2
Authority
JP
Japan
Prior art keywords
signal
high frequency
bandwidth
audio signal
input audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015123018A
Other languages
English (en)
Other versions
JP2015187747A (ja
Inventor
フレドリック ナーゲル
フレドリック ナーゲル
サッシャ ディスヒ
サッシャ ディスヒ
ギヨーム フックス
ギヨーム フックス
ユールゲン ヘレ
ユールゲン ヘレ
クリスティアン グリーベル
クリスティアン グリーベル
Original Assignee
フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ, フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ filed Critical フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Publication of JP2015187747A publication Critical patent/JP2015187747A/ja
Application granted granted Critical
Publication of JP6076407B2 publication Critical patent/JP6076407B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/26Pre-filtering or post-filtering
    • G10L19/265Pre-filtering, e.g. high frequency emphasis prior to encoding
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04Time compression or expansion
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/18Vocoders using multiple modes
    • G10L19/24Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding

Description

本発明に係る実施形態は、オーディオ信号処理、特に、オーディオエンコーダ、出力信号を提供する方法、帯域幅拡張デコーダおよび帯域幅の拡張されたオーディオ信号を提供する方法に関する。
これらの信号の効率的な記憶と伝送のためのデータリダクションに対して、聴覚に適応されたオーディオ信号の符号化が、多くの分野で受け入れられている。符号化アルゴリズムは、例えば、MPEG1/2のレイヤー3「MP3」またはMPEG4のAACとして知られている。これに使用する符号化アルゴリズムは、特に最小のビットレートを達成するとき、しばしば伝送されるオーディオ信号の帯域幅のエンコーダ側での制限によって主に引き起こされるオーディオ品質の低下に通じる。低域通過フィルタ処理された信号は、いわゆるコアコーダを用いて符号化され、高い周波数を有する領域が、低域通過フィルタ処理された信号から近似的に復元することができるように、パラメータ化される。
オーディオ信号をエンコーダ側のそのような状況の帯域制限に委ね、オーディオ信号の下側帯域だけを高品質オーディオエンコーダによってエンコードすることが、特許文献1により知られている。上側帯域は、しかしながら、非常に粗く、すなわち上側帯域のオリジナルのスペクトル包絡の再生を可能にするパラメータのセットによって、特徴づけられるだけである。デコーダ側では、そのとき上側帯域が合成される。この目的に対して、復号化されたオーディオ信号の下側帯域がフィルタバンクに供給されるハーモニック転移が提案されている。下側帯域のフィルタバンクチャネルは、上側帯域のフィルタバンクチャネルに接続され、すなわち「修復され」、各修復された帯域通過信号は包絡調整を受ける。特別な解析フィルタバンクに属する合成フィルタバンクは、下側帯域におけるオーディオ信号の帯域通過信号と、上側帯域にハーモニックに修復された下側帯域の包絡調整された帯域通過信号をここで受信する。合成フィルタバンクの出力信号は、エンコーダ側からデコーダ側に超低データレートで伝送されたそのオーディオ帯域幅に関して拡張されたオーディオ信号である。特に、フィルタバンクドメインにおけるフィルタバンク演算と修復は、高い計算労力になる可能性がある。
帯域制限されたオーディオ信号の帯域幅拡張に対する複雑度の低減された方法は、その代わりに、帯域制限のために失われる情報を近似するために、高周波領域(HF)に低周波信号部分(LF)を複製する機能を用いる。このような方法は、非特許文献1〜5に記載されている。
これらの方法において、ハーモニック転移は実行されないが、下側帯域の隣接帯域通過フィルタバンクチャネルが、上側帯域の隣接するフィルタバンクチャネルに人工的に導入される。これは、オーディオ信号の上側帯域の粗い近似に通じる。この信号の粗い近似は、そのとき更なるステップにおいて、オリジナル信号から推論される付加的な制御パラメータを定義することによってリファインされる。例として、MPEG4標準は、スペクトル包絡を調整するためのスケールファクタ、音調を適応させるための逆フィルタリングと暗騒音の付加の結合、および音調成分の補充のための正弦波信号部分の挿入を用いる。
これとは離れて、オリジナルのHF領域に関するいかなる情報も用いられない、いわゆる「ブラインド帯域幅拡張」のような更なる方法が、非特許文献6に記載されている。更に、非特許文献7に記載されている、いわゆる「人工帯域幅拡張」の方法も存在する。
非特許文献8において、例えば、低域通過フィルタ処理された信号をアップサンプリングすることによって得られるミラーリング操作によって、低周波成分の高い帯域へのコピー操作が実行される帯域幅拡張の方法が記載されている。
代替として、フィルタバンクドメインにおける複製操作に基本的に等しい、単側波帯変調を使用することができる。ハーモニック帯域幅拡張を可能にする方法は、ピッチの決定ステップ(ピッチトラッキング)、非線形歪ステップ(例えば、非特許文献8参照)、または、例えば、特許文献3に示されたような位相ボコーダを通常使用する。
特許文献4は、例えば、高周波復元法を用いる符号化システムのパフォーマンスを強化する方法を示す。それは、コアコーダによって符号化された低い帯域と高周波復元システムによって符号化された高い帯域の間のクロスオーバー周波数の時間上の適応によって、このようなシステムの全体のパフォーマンスをどのように改善するかを示す。この方法のために、コアコーダは、エンコーダ側での並びにデコーダ側での異なるクロスオーバー周波数と連動しなければならない。それ故、コアコーダの複雑度は増大する。
帯域幅拡張の更なる技術は、例えば、非特許文献9〜12および特許文献5〜6に記載されている。
複雑度の低減された帯域幅拡張法は品質喪失を示す一方、ハーモニック帯域幅拡張法は高い複雑度を呈する。低ビットレートが低い帯域の小さい帯域幅と組み合わされる特定のケースにおいて、ラフネスや不快に感知される音色のようなアーチファクトが発生する可能性がある。この理由は、近似されるHF部分が音の信号部分間の調和関係を保持しない複製操作に基づいているという事実である。このことは、LFとHFの間のハーモニック関係と、更にHF部分内の後続する修復のハーモニック関係の両方に当てはまる。例えば、SBR内で、低い帯域と高い帯域の境界で起こる、符号化された成分と複製された成分の並置が、粗い音響インプレッションを起こす可能性がある。その理由は、図18に図示されており、LF領域からHF領域に複製される音の部分が、LF領域の音の部分にスペクトル的に高密度に隣接している。
図18aは、3つのトーンから成る信号のオリジナルのスペクトルグラム1800aである。図18bは、図18aのオリジナル信号に対応する帯域幅の拡張された信号のダイアグラム1800bを示す。横座標は時間を示し、縦座標は周波数を示す。特に、最後のトーンで、潜在的な問題1810を観測することができる(不鮮明なライン1810)。
公知の方法によってハーモニック関係が考慮される場合、これは常にF0推定に基づいて行われる。このケースにおいて、これらの方法の成功は、主にこの推定の信頼性に依存する。
一般に、公知の帯域幅拡張法は、オーディオ信号を、低ビットレートで劣等なオーディオ品質で提供するかまたは高ビットレートで良好なオーディオ品質で提供する。
国際公開第1998/57436号 米国特許第5455888号明細書(Vasu Iyengar 他:音声帯域幅拡張方法および装置、) 米国仮特許出願第61/025129号明細書(F.Nagel、S. Disch:オーディオ信号におけるハーモニック帯域幅拡張の装置および方法) 国際公開第02/41302号 米国特許出願第08/951029号明細書(Ohmori 他:オーディオ帯域幅拡張システムおよび方法) 米国特許代6895375号(Malah, D、Cox, R. VS.:狭帯域音声の帯域幅拡張システム)
M. Dietz、L. Liljeryd、K. Kjorling、0. Kunz、スペクトル帯域複製、オーディオ符号化における新規なアプローチ、第112回AESコンベンション、ミュンヘン、2002年5月 S. Meltzer、R. Bohm、F. Henn、デジタルラジオ・モンディエール(DRM)のようなデジタル放送のためのSBR強化オーディオコーデック、第112回AESコンベンション、ミュンヘン、2002年 T. Ziegler、A. Ehret、P. Ekstrand、M. Lutzky、SBRによるmp3の強化:新しいmp3PROアルゴリズムの特徴と将来性、第112回AESコンベンション、ミュンヘン、2002年 国際標準ISO/IEC14496−3:2001/FPDAM I、帯域幅拡張、ISO/IEC、2002年 E. Larsen、R.M. Aarts、M. Danessis、音楽と音声の効率的な高周波帯域幅拡張、第112回AESコンベンション、ミュンヘン、2002年 K. Kayhko、狭帯域音声信号のロバスト広帯域強化、研究レポート、ヘルシンキ工科大学、アコースティックとオーディオ信号研究室、2001年 J. Makinen 他、AMR−WB+:第3世代携帯オーディオサービス放送のための新しいオーディオ符号化、IEEE、ICASSP2005年 U. Kornagel、電話帯域音声強化のための励磁信号のスペクトル拡大、IWAENC議事録、ダルムスタット、ドイツ、2001年9月、215−218頁 R. M. Aarts、E. Larsen、およびO. Ouweltjes、低周波と高周波の帯域幅拡張の統合アプローチ、第115回AECコンベンション、ニューヨーク、2003年10月 E. Larsen、M. Aarts、オーディオ帯域幅拡張−音響心理学への応用、信号処理とスピーカデザイン、John Wiley & Sons Ltd、2004年 E. Larsen、R. M. Aarts、M. Danessis、音楽と音声の効率的な高周波帯域幅拡張、第112回AESコンベンション、ミュンヘン、2002年 J. Makhoul、線形予測による音声のスペクトル解析、IEEE学会誌オーディオと電気音響、AU−21(3)、1973年6月
本発明の目的は、オーディオ信号に対する改良された符号化スキームを提供することである。
この目的は、請求項1に係るオーディオエンコーダと、請求項3および請求項8に係る帯域幅拡張デコーダと、請求項12、13および14に係る方法によって達成される。
本発明の実施形態は、入力オーディオ信号を用いて出力信号を提供するオーディオエンコーダを提供する。オーディオエンコーダは、パッチ生成器と、比較器と、出力インターフェースとを備えている。
パッチ生成器は、少なくとも1つの帯域幅拡張高周波信号を生成するように構成される。帯域幅拡張高周波信号は、高周波帯域を含み、帯域幅拡張高周波信号の高周波帯域は、入力オーディオ信号の低周波帯域に基づいている。異なる帯域幅拡張高周波信号が生成される場合、異なる帯域幅拡張高周波信号は、それらの高周波帯域内に異なる周波数を備える。
比較器は、複数の比較パラメータを算出するように構成される。比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の間の異なるオフセット周波数に基づいて算出される。更に、比較器は、複数の比較パラメータから比較パラメータを決定するように構成され、決定された比較パラメータは予め定義された判定基準を満たしている。
言い換えれば、例えば、比較器は、複数の比較パラメータの中から予め定義された判定基準を最良で満たす比較パラメータを決定するように構成することができる。
出力インターフェースは、伝送または記憶のための出力信号を提供するように構成される。出力信号は、決定された比較パラメータに対応するオフセット周波数に基づくパラメータ指示を備える。
言い換えれば、出力信号は、最適なオフセット周波数を指示する選択された比較パラメータを備えることができる。
本発明の他の実施形態は、入力オーディオ信号とパラメータ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する帯域幅拡張デコーダを提供する。パラメータ信号は、オフセット周波数の指示と電力密度パラメータの指示を備える。帯域幅拡張デコーダは、パッチ生成器と、結合器と、出力インターフェースを備える。
パッチ生成器は、高周波帯域を備える帯域幅拡張高周波信号を生成するように構成される。帯域幅拡張高周波信号の高周波帯域は、入力オーディオ信号の周波数帯域の1つ以上の周波数シフトに基づいて生成される。周波数シフトは、オフセット周波数に基づいている。
更に、パッチ生成器は、帯域幅拡張高周波信号の高周波帯域を、電力密度パラメータの値に等しいかまたは電力密度パラメータの逆数値に等しいファクタによってそれぞれ増幅または減衰することができるように構成される。
結合器は、帯域幅拡張高周波信号と入力オーディオ信号を結合し、帯域幅の拡張されたオーディオ信号を取得するように構成される。
出力インターフェースは、帯域幅の拡張されたオーディオ信号を提供するように構成される。
本発明の別の実施形態は、入力オーディオ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する帯域幅拡張デコーダを提供する。帯域幅拡張デコーダは、パッチ生成器と、比較器と、結合器と、出力インターフェースを備える。
パッチ生成器は、入力オーディオ信号に基づいて高周波帯域を備える少なくとも1つの帯域幅拡張高周波信号を生成するように構成され、生成された帯域幅拡張高周波信号の高周波帯域の下側遮断周波数は、入力オーディオ信号の上側遮断周波数より低い。異なる帯域幅拡張高周波信号が生成される場合、生成された帯域幅拡張高周波信号は、それらの高周波帯域内に異なる周波数を備える。
比較器は、複数の比較パラメータを算出するように構成される。比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の間の異なるオフセット周波数に基づいて算出される。更に、比較器は、複数の比較パラメータから比較パラメータを決定するように構成され、決定された比較パラメータは予め定義された判定基準を満たしている。
言い換えれば、例えば、比較器は、複数の比較パラメータの中から予め定義された判定基準を最良で満たす比較パラメータを決定するように構成される。
結合器は、入力オーディオ信号と帯域幅拡張高周波信号を結合し、帯域幅の拡張されたオーディオ信号を取得するように構成され、帯域幅の拡張されたオーディオ信号を取得するために用いられる帯域幅拡張高周波信号は、決定された比較パラメータに対応するオフセット周波数に基づいている。
出力インターフェースは、帯域幅の拡張されたオーディオ信号を提供するように構成される。
本発明に係る実施形態は、パッチとも呼ばれる帯域幅拡張高周波信号を生成し、オリジナル入力オーディオ信号と比較することができるという中心思想に基づいている。帯域幅拡張高周波信号の異なるオフセット周波数または異なるオフセット周波数を有するいくつかの帯域幅拡張高周波信号を用いることによって、異なるオフセット周波数に対応する複数の比較パラメータを算出することができる。比較パラメータは、オーディオ品質に関係する量に関するものとすることができる。それ故、比較パラメータは、帯域幅拡張高周波信号と入力オーディオ信号の互換性を保証し、結果としてオーディオ品質を改善しながら、決定することができる。
符号化されたオーディオ信号の伝送または記憶のビットレートは、オリジナル入力オーディオ信号の高周波帯域の復元のため決定された比較パラメータに対応するオフセット周波数に基づくパラメータ指示を用いることによって減らすことができる。このように、入力オーディオ信号の低周波部分とパラメータ指示のみが、記憶または伝送される必要がある。
用語の比較パラメータ、xover周波数、パラメータ指示は、後に定義される。
本発明に係るいくつかの実施形態は、比較パラメータを算出するために入力オーディオ信号と生成された帯域幅拡張高周波信号を比較する相互相関を用いた比較器に関する。
本発明に係るいくつかの更なる実施形態は、単側波帯変調に基づいて時間ドメインにおいて帯域幅拡張高周波信号を生成するパッチ生成器に関する。
オーディオ品質を増加させおよび/または伝送または記憶のビットレートを減少させることを可能にするオーディオ信号の改良された符号化スキームが提供されることは、本発明の好ましい実施形態の効果である。
本発明に係る実施形態は、以下の添付の図面を参照して引き続いて詳述される。
オーディオエンコーダのブロック図である。 帯域幅拡張高周波信号の生成と、入力オーディオ信号と生成された帯域幅拡張高周波信号の比較と、帯域幅拡張高周波信号の電力適応の概略図である。 帯域幅拡張高周波信号の生成と、入力オーディオ信号と帯域幅拡張高周波信号の比較と、帯域幅拡張高周波信号の電力適応の概略図である。 帯域幅拡張エンコーダのブロック図である。 帯域幅拡張デコーダのブロック図である。 帯域幅拡張デコーダのブロック図である。 入力オーディオ信号に基づいて出力信号を提供する方法のフロー図である。 帯域幅の拡張されたオーディオ信号を提供する方法のフロー図である。 入力オーディオ信号に基づいて出力信号を提供する方法のフロー図(その1)である。 入力オーディオ信号に基づいて出力信号を提供する方法のフロー図(その2)である。 比較パラメータを算出する方法のフロー図である。 オフセット周波数の補間の概略図である。 オフセット周波数の補間の概略図である。 帯域幅拡張デコーダのブロック図である。 帯域幅の拡張されたオーディオ信号を提供する方法のフロー図である。 帯域幅の拡張されたオーディオ信号を提供する方法のブロック図である。 帯域幅拡張エンコーダのブロック図である。 可変のクロスオーバー周波数を用いた3つのトーンのスペクトログラムである。 3つのトーンのオリジナルオーディオ信号のスペクトログラムである。 オリジナルオーディオ信号と、一定のクロスオーバー周波数を用いた帯域幅の拡張されたオーディオ信号と、可変のクロスオーバー周波数を用いた帯域幅の拡張されたオーディオ信号の電力スペクトル線図である。 公知の帯域幅拡張法を用いた3つのトーンのスペクトログラムである。 3つのトーンのオリジナルオーディオ信号のスペクトログラムである。
以下において、実施形態の記載の冗長性を低減するために、同一のまたは類似した機能特性を有する対象および機能ユニットに対して、同一の参照番号が部分的に用いられ、図面についてのその記述は他の図面にも適用される。
図1は、本発明の一実施形態に係る、入力オーディオ信号102を用いて出力信号132を提供するオーディオエンコーダ100のブロック図である。出力信号は、デコーダでの帯域幅拡張に適合する。それ故、オーディオエンコーダは、帯域幅拡張エンコーダとも呼ばれる。帯域幅拡張エンコーダ100は、パッチ生成器110と、比較器120と、出力インターフェース130を備える。
パッチ生成器110は比較器120に接続され、比較器120は出力インターフェース130に接続される。パッチ生成器110は、少なくとも1つの帯域幅拡張高周波信号112を生成する。帯域幅拡張高周波信号112は、高周波帯域を含み、帯域幅拡張高周波信号112の高周波帯域は、入力オーディオ信号102の低周波帯域に基づいている。異なる帯域幅拡張高周波信号112が生成される場合、異なる帯域幅拡張高周波信号112は、それらの高周波帯域内に異なる周波数を備える。
比較器120は、複数の比較パラメータを算出する。比較パラメータは、入力オーディオ信号102と生成された帯域幅拡張高周波信号112の比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号102と生成された帯域幅拡張高周波信号112の間の異なるオフセット周波数に基づいて算出される。更に、比較器120は、複数の比較パラメータから比較パラメータを決定し、決定された比較パラメータは予め定義された決定基準を満たしている。
出力インターフェース130は、伝送または記憶のために出力信号132を提供する。出力信号132は、決定された比較パラメータに対応するオフセット周波数に基づくパラメータ指示を備える。
異なるオフセット周波数に対する複数の比較パラメータを算出することによって、オリジナル入力オーディオ信号102によく適合する帯域幅拡張高周波信号112を見つけることができる。これは、各々異なるオフセット周波数を有する複数の帯域幅拡張高周波信号112を生成することによってまたは1つの帯域幅拡張高周波信号を生成して異なるオフセット周波数によって帯域幅拡張高周波信号112の高周波帯域をシフトすることによってなすことができる。また、異なるオフセット周波数を有する複数の帯域幅拡張高周波信号112を生成することと、他の異なるオフセット周波数によってそれらの高周波帯域をシフトすることの組合せも可能である。例えば、5つの異なる帯域幅拡張高周波信号112が生成され、それらの各々が一定の周波数オフセットによって5回シフトされる。
図2は、1つの帯域幅拡張高周波信号のみが生成されて異なるオフセット信号によってシフトされるケースに対する、帯域幅拡張高周波信号の生成、帯域幅拡張高周波信号と入力オーディオ信号の比較およびオプションの帯域幅拡張高周波信号の電力適応の概略図200を示す。
第1の概略の「電力対周波数」線図210は、入力オーディオ信号102を概略的に示す。この入力オーディオ信号102に基づいて、パッチ生成器110は、例えば、入力オーディオ信号102の低周波帯域をより高周波帯域にシフト222することによって(参照番号によって示されるように)、帯域幅拡張高周波信号112を生成することができる。例えば、低周波帯域は、帯域幅拡張エンコーダ100の一部とすることができる図1に図示されないコアコーダのクロスオーバー周波数に等しい周波数または他の予め定義された周波数によってシフトされる。
生成された帯域幅拡張高周波信号112は、そのとき異なるオフセット周波数232によって、そして各オフセット周波数232に対して、(参照番号230によって示されるように)シフトすることができ、比較パラメータは比較器120によって算出することができる。オフセット周波数232は、例えば、コアコーダのクロスオーバー周波数と関係して、他の特性周波数と関係して、または絶対周波数値として定義することができる。
次に、比較器120は、予め定義された決定基準を満たす比較パラメータを決定する。このようにして、(参照番号240に示すように)決定された比較パラメータに対応するオフセット周波数242を有する帯域幅拡張高周波信号112を決定することができる。
加えて、(参照番号250によって示されるように)電力密度パラメータ252を決定することもできる。電力密度パラメータ252は、決定された比較パラメータに対応するオフセット周波数を有する帯域幅拡張高周波信号の高周波帯域と入力オーディオ信号の対応する周波数帯域の比率を表すことができる。例えば、比率は、電力密度比、電力比または周波数帯域の電力密度に関する量の他の比率に関係するものとすることができる。
あるいは、図3は、異なるオフセット周波数を有する複数の帯域幅拡張高周波信号が生成されるケースに対する、帯域幅拡張高周波信号の生成、生成された帯域幅拡張高周波信号と入力オーディオ信号の比較およびオプションの帯域幅拡張高周波信号の電力適応の概略図300を示す。
図2に示されたシーケンスに対する差異において、パッチ生成器110は、(参照番号320によって示されるように)異なるオフセット周波数232を有する複数の帯域幅拡張高周波信号112を生成する。これは、入力オーディオ信号102の低周波帯域のより高い周波数への周波数シフト222によって再びなすことができる。入力オーディオ信号102の低周波帯域は、一定の周波数に各帯域幅拡張高周波信号112の個々のオフセット周波数232に加えたものによってシフトすることができる。その一定の周波数は、コアコーダのクロスオーバー周波数または他の特定の周波数に等しくすることができる。
各生成された帯域幅拡張高周波信号112に対する比較パラメータは、そのとき算出することができ、予め定義された決定基準を満たす比較パラメータは比較器120によって決定することができる(240)。
電力密度パラメータは、前述のように決定することができる(250)。
図2と図3に示されたコンセプトは、結合することもできる。
入力オーディオ信号102と生成された帯域幅拡張高周波信号112の比較は、両方の信号の相互相関によってなすことができる。このケースにおいて、比較パラメータは、例えば、入力オーディオ信号102と生成された帯域幅拡張高周波信号112の間の特定のオフセット周波数に対する相互相関の結果とすることができる。
出力信号132のパラメータ指示は、オフセット周波数自体、量子化されたオフセット周波数またはオフセット周波数に基づく他の量とすることができる。
入力オーディオ信号102の高周波帯域の代わりにパラメータ指示のみを伝送または記憶することによって、伝送または記憶のビットレートを低減することができる。予め定義された判定基準を満たす比較パラメータに対応するオフセット周波数に基づいてパラメータを選択することによって、これは、帯域の限られたオーディオ信号のみを復号化するよりも良好なオーディオ品質においてもたらすことができる。
予め定義された判定基準は、例えば、他のオフセット周波数を有する帯域幅拡張高周波信号112の70%以上の入力オーディオ信号102に整合する対応するオフセット周波数を有する帯域幅拡張高周波信号112を示している、入力オーディオ信号102への最良の3つの整合するうちの1つである対応するオフセット周波数を有する帯域幅拡張高周波信号112を示している、または対応するオフセット周波数を有する最も整合する帯域幅拡張高周波信号112を示している、複数の比較パラメータのうちの比較パラメータを決定することができる。これは、異なるオフセット周波数を有する複数の帯域幅拡張高周波信号112が生成されるケース、並びに1つの帯域幅拡張高周波信号112のみが生成され、異なるオフセット周波数によってシフトされるケース、またはこれらの2つのケースの組合せに関係する。
比較パラメータは、相互相関の結果または特定のオフセット周波数を有する帯域幅拡張高周波信号112がどれくらいよく入力オーディオ信号102に整合しているかを示す他の量とすることができる。
帯域幅拡張エンコーダ100は、入力オーディオ信号102の低周波帯を符号化するコアコーダを備えることができる。このコアコーダは、入力オーディオ信号102の符号化された低周波帯域の上側遮断周波数に対応することができるクロスオーバー周波数を備えることができる。コアコーダのクロスオーバー周波数は、一定または時間上で可変とすることができる。可変のクロスオーバー周波数を実施することは、コアコーダの複雑さを増やす可能性があるが、符号化の柔軟性を増やすこともできる。
図2および/または図3に示されるプロセスは、より高い周波数帯域またはパッチに対して繰り返すことができる。例えば、入力オーディオ信号102の低周波帯域は、4kHzの上側遮断周波数を備える。それ故、帯域幅拡張高周波信号112を生成するために入力オーディオ信号102の低周波帯域が低周波帯域の上側遮断周波数によってシフトされる場合、帯域幅拡張高周波信号112は、4kHzの下側遮断周波数と8kHzの上側遮断周波数を有する高周波帯域を備える。そのプロセスは、入力オーディオ信号102の低周波帯域を、低周波帯域の上側遮断周波数の2倍シフトすることによって繰り返すことができる。こうして、新しく生成された帯域幅拡張高周波信号112は、8kHzの下側遮断周波数と12kHzの上側遮断周波数を有する高周波帯域を備える。これは、所望の最も高い周波数に到達するまで繰り返すことができる。あるいは、これは、複数の異なる高周波帯域を有する1つの帯域幅拡張高周波信号を生成することによっても実現することができる。
この実施例で図示したように、入力オーディオ信号の低周波帯域の帯域幅と帯域幅拡張高周波信号の高周波帯域の帯域幅は同じとすることができる。あるいは、入力オーディオ信号の低周波帯域は、帯域幅拡張高周波信号を生成するために、拡張しシフトすることができる。
決定された比較パラメータに対応するオフセット周波数232を有する帯域幅拡張高周波信号112を決定することは、オフセット周波数242に依存して、入力オーディオ信号102の低周波帯域と帯域幅拡張高周波信号112の高周波帯域の間のギャップを残す可能性がある。このギャップは、例えば帯域制限されたノイズを含むこのギャップにフィットする周波数部分を生成することによって埋めることができる。あるいは、そのギャップは、オーディオ品質が劇的に被害を受けないかも知れないので、空で残すことができる。
図4は、本発明の実施形態に係る、入力オーディオ信号102を用いて出力信号132を提供する帯域幅拡張エンコーダ400のブロック図を示す。帯域幅拡張エンコーダ400は、パッチ生成器110と、比較器120と、出力インターフェース130と、コアコーダ410と、帯域通過フィルタ420と、パラメータ抽出ユニット430を備える。コアコーダ410は出力インターフェース130とパッチ生成器110に接続され、パッチ生成器110は比較器120に接続され、比較器120はパラメータ抽出ユニット430に接続され、パラメータ抽出ユニット430は出力インターフェース130に接続され、帯域通過フィルタ420は比較器120に接続される。
パッチ生成器110は、入力オーディオ信号102に基づいて帯域幅拡張高周波信号112を生成する変調器として実現することができる。比較器120は、帯域通過フィルタ420によってフィルタリングされた入力オーディオ信号102と生成された帯域幅拡張高周波信号112の比較を、それらの相互相関によって実行することができる。予め定義された判定基準を満たす比較パラメータの決定は、遅延推定と呼ぶこともできる。
出力インターフェース130は、ビットストリーム整形器の機能を含むこともでき、コアコーダ410によって提供される低周波信号とパラメータ抽出ユニット430によって提供されるオフセット周波数に基づくパラメータ指示を備えるパラメータ信号432を結合する結合器を備えることができる。更に、出力インターフェース130は、出力信号132のビットレートを減らすためにエントロピーコーダまたは差動コーダを備えることができる。結合器およびエントロピーまたは差動コーダは、この実施例で示されたように、出力インターフェース130の一部とすることができ、または独立ユニットとすることができる。
オーディオ信号102は、低周波部分と高周波部分に分割することもできる。これは、コアコーダ410の低域通過フィルタと帯域通過フィルタ420によってなすことができる。低域通過フィルタは、コアコーダ410の一部またはコアコーダ410に接続された独立の低域通過フィルタとすることができる。
低周波部分は、例えば、MPEG1/2のレイヤー3「MP3」またはMPEG4のAAC標準または音声コーダに準拠するオーディオコーダとすることができるコアエンコーダ410によって処理される。
低周波部分は、例えば、側波帯変調または周波数ドメインの高速フーリエ変換(FFT)によって、固定値によってシフトすることができ、対応するパッチの目標エリアにおけるオリジナルの低周波領域上に位置する。オプションとして、低周波部分は入力信号102から直接に取得することができる。これは、パッチ生成器110に接続される独立の低域通過フィルタによってなすことができる。
正規の時間インターバルにおいて、(入力オーディオ信号の)オリジナルの高周波部分と取得された高周波部分(帯域幅拡張高周波信号)の間の窓化された信号セクションの振幅スペクトル間の相互相関を算出することができる。このような方法で、最大相関に対する遅延(オフセット周波数)を決定することができる。この遅延は、オリジナルの単側波帯変調に関して補正ファクタの意味を持つことができ、すなわち単側波帯変調は、遅延によって付加的に補正し、相互相関を最大化することができる。言い換えれば、予め定義された判定基準を満たす比較パラメータに対応するものであって、比較パラメータは相互相関に対応し、予め定義された判定基準は最大相関を発見するものである、遅延とも呼ばれるオフセット周波数を、決定することができる。
加えて、振幅スペクトルの絶対値の比率を決定することができる。これによって、取得された高周波信号がどのファクタによって減衰または増幅するべきかを導き出すことができる。言い換えれば、電力の比、電力密度、振幅スペクトルの絶対値または帯域幅拡張高周波信号112の高周波帯域とオリジナル入力オーディオ信号102の対応する周波数帯域の電力密度比に関係する他の値を示す電力密度パラメータを、決定することができる。これは、実施例において示されたようなパラメータ抽出ユニット430の一部または独立のユニットとすることができる電力密度比較器によってなすことができる。電力密度パラメータを決定するために、例えば、入力オーディオ信号102の低周波帯域を一定の周波数によってシフトすることによって生成される帯域幅拡張高周波信号112または決定された比較パラメータに対応する帯域幅拡張高周波信号112または他の生成された帯域幅拡張高周波信号112を用いることができる。このケースにおける対応する周波数帯域は、例えば、同じ周波数範囲を有する周波数帯域を意味する。例えば、帯域幅拡張高周波信号の高周波帯域が4kHzから8kHzを形成する周波数を備える場合、入力オーディオ信号の対応する周波数帯域は4kHzから8kHzの範囲も備える。
遅延に対応し、振幅の絶対値に対応する取得された補正ファクタ(オフセット周波数、電力密度パラメータ)は、時間上で補間することができる。言い換えれば、窓化された信号セクションに対して(時間フレームに対して)決定されたパラメータは、信号セクションの各時間ステップに対して補間することができる。
この変調(制御)信号(パラメータ信号)またはそのパラメータ化された表現は、記憶またはデコーダに伝送することができる。言い換えれば、パラメータ信号432は、コアコーダ410によって処理された入力オーディオ信号102の低周波帯域と結合し、記憶またはデコーダに伝送することができる出力信号132を取得することができる。
加えて、例えばノイズレベルおよび/または音調に適応させるための更なるパラメータを決定することができる。これは、パラメータ抽出ユニット430によってなすことができる。更なるパラメータを、パラメータ信号432に加えることができる。
図4に示された実施例は、時間可変変調のエンコーダ側の演算を図示する。このケースにおける時間可変変調は、異なるオフセット周波数を有する帯域幅拡張高周波信号112に関係する。予め定義された判定基準を満たす決定された比較パラメータに対応するオフセット周波数は、時間上で変化することができる。
図5は、本発明の一実施形態に係る、入力オーディオ信号502とパラメータ信号504に基づいて帯域幅の拡張されたオーディオ信号532を提供する帯域幅拡張デコーダ500のブロック図を示す。パラメータ信号504は、オフセット周波数の指示と電力密度パラメータの指示を備える。帯域幅拡張デコーダ500は、パッチ生成器510と、結合器520と、出力インターフェース530を備える。
パッチ生成器510は結合器520に接続され、結合器520は出力インターフェース530に接続される。パッチ生成器510は、入力オーディオ信号502に基づいて高周波帯域を備える帯域幅拡張高周波信号512を生成する。帯域幅拡張高周波信号512の高周波帯域は、入力オーディオ信号502の周波数帯域の周波数シフトに基づいて生成され、周波数シフトはオフセット周波数に基づいている。
更に、パッチ生成器510は、電力密度パラメータの値に等しいまたは電力密度パラメータの逆数値に等しいファクタによって帯域幅拡張高周波信号512の高周波帯域を増幅または減衰させる。
結合器520は、帯域幅拡張高周波信号512と入力オーディオ信号502を結合し、帯域幅の拡張されたオーディオ信号532を取得し、出力インターフェース530は帯域幅の拡張されたオーディオ信号532を提供する。
例えば、オフセット周波数が前述のように決定される場合、オフセット周波数に基づいて帯域幅拡張高周波信号112を生成することは、高周波領域における入力オーディオ信号の周波数範囲の改良された延長を可能にすることができる。これは、帯域幅の拡張されたオーディオ信号532のオーディオ品質を増大することができる。
加えて、入力オーディオ信号502の高周波延長の電力密度は、電力密度パラメータによって帯域幅拡張高周波信号512の高周波帯域を増幅または減衰することによって、非常に効率的な方法でなすことができる。このような方法で、正規化は、必要でないものとすることができる。
パッチ生成器510は、入力オーディオ信号512の周波数帯域を、一定の周波数にオフセット周波数を加えた周波数でシフトすることによって、帯域幅拡張高周波信号512を生成することができる。オフセット周波数が下側周波数への周波数シフトを示す場合、結合器は、入力オーディオ信号502の上側遮断周波数より低い周波数を備える帯域幅拡張高周波信号512の高周波帯域の一部を無視することができる。
パッチ生成器510は、時間ドメインにおいてまたは周波数ドメインにおいて帯域幅拡張高周波信号512を生成することができる。時間ドメインにおいて、パッチ生成器510は、単側波帯変調に基づいて帯域幅拡張高周波信号512を生成することができる。
加えて、出力インターフェースは、出力信号を、それを提供する前に増幅することができる。
図6は、本発明の一実施形態に係る、入力オーディオ信号502とパラメータ信号504に基づいて帯域幅の拡張されたオーディオ信号532を提供する帯域幅拡張デコーダ600のブロック図を示す。帯域幅拡張デコーダ600は、パッチ生成器510と、結合器520と、出力インターフェース530と、コアデコーダ610と、パラメータ抽出ユニット620を備える。コアデコーダ610はパッチ生成器510と結合器520に接続され、パラメータ抽出ユニット620はパッチ生成器510と出力インターフェース530に接続され、パッチ生成器510は結合器520に接続され、結合器520は出力インターフェース530に接続される。
コアデコーダ610は、受信されたビットストリーム602を復号化し、パッチ生成器510と結合器520に入力オーディオ信号502を提供することができる。入力オーディオ信号502は、コアデコーダ610のクロスオーバー周波数に等しい上側遮断周波数を備えることができる。このクロスオーバー周波数は、一定または時間上で可変とすることができる。時間上で可変は、例えば、異なる時間インターバルまたは時間フレームに対して可変であるが、1つの時間インターバルまたは時間フレームに対して一定であることを意味する。
パラメータ抽出ユニット620は、受信されたビットストリーム602からパラメータ信号504を分離し、それをパッチ生成器510に提供することができる。加えて、パラメータ信号504または抽出されたノイズおよび/または音調パラメータは、出力インターフェース530に提供することができる。
パッチ生成器510は、オフセット周波数に基づいて入力オーディオ信号502を変調し、帯域幅拡張高周波信号512を取得することができ、パラメータ信号504に備えられた電力密度パラメータに基づいて帯域幅拡張高周波信号512を増幅または減衰することができる。この帯域幅拡張高周波信号512は、結合器520に提供される。言い換えれば、パッチ生成器510は、オフセット周波数と電力密度パラメータに基づいて入力オーディオ信号502を変調し、高周波信号を取得することができる。これは、例えば、時間ドメインにおいて、補間を有する単側波帯変調634および/または各時間ステップに対するフィルタリング632によってなすことができる。
結合器520は、入力オーディオ信号502と生成された帯域幅拡張高周波信号512を結合し、帯域幅拡張オーディオ信号532を取得する。
出力インターフェース530は、帯域幅の拡張されたオーディオ信号532を提供し、付加的に補正ユニットを備えることができる。補正ユニットは、パラメータ抽出ユニット620によって提供されるパラメータに基づいて、音調補正および/またはノイズ補正を実行することができる。補正ユニットは、図6で示すように出力インターフェース530の一部とすることができ、または独立のユニットとすることができる。補正ユニットは、パッチ生成器510と結合器520の間に配置することもできる。このような方法で、補正ユニットは、生成された帯域幅拡張高周波信号512の音調および/またはノイズのみを補正することができる。入力オーディオ信号512の音調およびノイズの補正は、入力オーディオ信号502はオリジナルオーディオ信号に相当するので必要ない。
いくつかの言葉で要約すると、帯域幅拡張デコーダ600は、伝送された変調関数によって、オーディオデコーダまたはコアデコーダ(入力オーディオ信号)の出力信号から高周波信号を合成し、スペクトル的に形成することができる。伝送された変調関数は、例えば、オフセット周波数と電力密度パラメータに基づく変調関数を意味する。次に、高周波信号と低周波信号を結合することができ、ノイズレベルと音調に適応させるための更なるパラメータを適用することができる。
図7は、本発明の実施形態に係る、入力オーディオ信号に基づいて出力信号を提供する方法700のフロー図を示す。本方法は、少なくとも1つの帯域幅拡張高周波信号を生成するステップ710と、複数の比較パラメータを算出するステップ720と、複数の比較パラメータから比較パラメータを決定するステップ730と、伝送または記憶のために信号を提供するステップ740を備える。
生成された帯域幅拡張高周波信号は、高周波帯域を備える。帯域幅拡張高周波信号の高周波帯域は、入力オーディオ信号の低周波帯域に基づいている。異なる帯域幅拡張高周波信号が生成される場合、異なる帯域幅拡張高周波信号は、それらの高周波帯域内に異なる周波数を備える。
比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号との比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号との間の異なるオフセット周波数に基づいて算出される。
決定された比較パラメータは、予め定義された判定基準を満たしている。
出力信号は、決定された比較パラメータに対応するオフセット周波数に基づくパラメータ指示を備える。
図8は、本発明の一実施形態に係る、入力オーディオ信号とパラメータ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する方法800のフロー図を示す。パラメータ信号は、オフセット周波数の指示と電力密度パラメータの指示を含んでいる。本方法は、帯域幅拡張高周波信号を生成するステップ810と、帯域幅拡張高周波信号の高周波帯域を増幅または減衰するステップ820と、帯域幅拡張高周波信号と入力オーディオ信号を結合し、帯域幅の拡張されたオーディオ信号を取得するステップ830と、帯域幅の拡張されたオーディオ信号を提供するステップ840を備える。
帯域幅拡張高周波信号は、高周波帯域を備える。帯域幅拡張高周波信号の高周波帯域は、入力オーディオ信号の周波数帯域の周波数シフトに基づいて生成される(810)。周波数シフトは、オフセット周波数に基づいている。
帯域幅拡張高周波信号の高周波帯域は、電力密度パラメータの値に等しいまたは電力密度パラメータの逆数値に等しいファクタによって増幅または減衰される(820)。
図9は、本発明の一実施形態に係る、入力オーディオ信号に基づいて出力信号を提供する方法900のフロー図を示す。それは、エンコーダにおけるアルゴリズムのシーケンスのための1つの可能性を図示する。これは、以下において数学的に記載される形式的ものでもある。リアルタイム信号はラテンの小文字によって、ヒルベルト変換信号は対応するギリシャ文字によって、フーリエ変換された信号はラテンの大文字または代わりにギリシャ文字によって示すことができる。
Figure 0006076407
Figure 0006076407
Figure 0006076407
合計は、γkがnから独立している場合にのみ、nによって置き換えることができる。
Figure 0006076407
このケースにおいて、各パッチは、同じ帯域幅を備える。
Figure 0006076407
Figure 0006076407
低域通過フィルタ処理された入力信号904の変調は、周波数ドメインにおいてまたは時間ドメインにおいてなすことができる。
Figure 0006076407
Figure 0006076407
Figure 0006076407
このような方法で、変調された信号910とも呼ばれる帯域幅拡張高周波信号を生成することができる。
Figure 0006076407
時間ドメインにおけるプロセスは、図9に示される。
Figure 0006076407
Figure 0006076407
Figure 0006076407
Figure 0006076407
Figure 0006076407
Figure 0006076407
Figure 0006076407
このオーバーオール変調関数またはオーバーオール変調関数のパラメータは、記憶または伝送する出力信号によって提供740することができる。
加えて、ノイズ補正および/または音調補正のための更なるパラメータを決定することができる。
Figure 0006076407
音の信号がそこにない、例えば静寂、過渡現象またはノイズの場合、遅延の演算は省略することができる。これらのケースにおいて、遅延は0にセットすることができる。
図10は、遅延を決定する実施例1000をより詳細に示す。
時間フレームまたは窓ξ=iに対して(1010)、遅延νは、開始値として−λにセットされる。そして、相互相関Rξ,k(ν)が算出される(720)。νがΛより小さい場合(1030)、νは増やされ(1032)、相互相関に関する次の比較パラメータが算出される(720)。νがΛに等しいまたは大きい場合(1030)、最大の算出された相互相関に対応する遅延を決定することができる(730)。最大が明確に識別可能である場合(924)、決定された遅延は、パラメータdξ,kとして用いられる(918)。そうでない場合、遅延は0にセットされ、パラメータdξ,k=0として用いられる(922)。
そして、次の時間フレームξ=ξ+1に対して(1050)、全体のプロセスが繰り返される(1040)。決定された遅延は、各時間ステップNに対するパラメータを取得するために補間することができる(926)。
複数の比較器が用いられる場合、複数の比較パラメータ、例えば相互相関の結果の演算は、並列になすこともできる。また、必要なハードウェアが何度か利用可能である場合、異なる時間フレームの処理は、並列になすこともできる。相互相関を算出するためのループは、+Λから開始することもでき、各ループをν≦Λまで減らすことができる。
図11は、異なる時間フレームのオフセット周波数、時間インターバルまたは窓の補間926の概略図を示す。図11aは、時間フレームがオーバーラップしない場合の補間1100を示す。遅延dξ,kは、全部の時間フレーム1110に対して決定される。各時間ステップ1120に対してパラメータを補間する最も簡単な方法は、時間フレーム1110の全ての時間ステップ1120のパラメータを、対応する遅延dξ,kに等しく設定することによって、実現することができる。時間フレームの端において、前または次の時間フレームの遅延を選択することができる。例えば、パラメータλk(n)からλk(n+3)は、dξ,kに等しく、パラメータλk(n+4)からλk(n+7)はdξ+1,kに等しい。
Figure 0006076407
Figure 0006076407
あるいは、補間は、例えばメディアンフィルタリングによってなすことができる。
補間は、補間手段によってなすことができる。補間手段は、パラメータ抽出ユニットまたは出力インターフェースの一部とすることができ、または別のユニットとすることができる。
Figure 0006076407
Figure 0006076407
Figure 0006076407
そして、前述したように、例えば逆フィルタリングによる音調補正は、以下のようにすることができる。
図12は、本発明の実施形態に係る、入力オーディオ信号502に基づいて帯域幅の拡張されたオーディオ信号532を提供する帯域幅拡張デコーダ1200のブロック図を示す。帯域幅拡張デコーダ1200は、パッチ生成器1210と、比較器1220と、結合器1230と、出力インターフェース1240を備える。パッチ生成器1210は比較器1220に接続され、比較器1220は結合器1230に接続され、結合器1230は出力インターフェース1240に接続される。
パッチ生成器1210は、入力オーディオ信号502に基づいて、高周波帯域を備える少なくとも1つの帯域幅拡張高周波信号1212を生成するものであって、帯域幅拡張高周波信号1212の高周波帯域の下側遮断周波数は、入力オーディオ信号502の上側遮断周波数より低い。異なる帯域幅拡張高周波信号1212が生成される場合、異なる帯域幅拡張高周波信号1212は、それらの高周波帯域内に異なる周波数を備える。
比較器1220は、複数の比較パラメータを算出する。比較パラメータは、入力オーディオ信号502と生成された帯域幅拡張高周波信号1212の比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号502と生成された帯域幅拡張高周波信号1212の間の異なるオフセット周波数に基づいて算出される。更に、比較器は、複数の比較パラメータから、予め定義された判定基準を満たす比較パラメータを決定する。
結合器1230は、入力オーディオ信号502と帯域幅拡張高周波信号1212を結合し、帯域幅の拡張されたオーディオ信号532を取得するものであって、帯域幅拡張高周波信号1212は決定された比較パラメータに対応するオフセット周波数に基づいている。
出力インターフェース1240は、帯域幅の拡張されたオーディオ信号532を提供する。
図5に示されるデコーダに比較して、記載されているデコーダ1200は、オフセット周波数を単独で決定する。それ故、このパラメータを入力オーディオ信号502とともに受信する必要はない。このような方法で、オーディオ信号の伝送と記憶のためのビットレートを更に減らすことができる。
図1に対して記載されたように、パッチ生成器1210は、異なるオフセット周波数を有する複数の帯域幅拡張高周波信号をまたは異なるオフセット周波数によってシフトされる1つの帯域幅拡張高周波信号のみを生成することができる。また、これらの2つの可能性の結合を用いることもできる。
図13は、本発明の実施形態に係る、帯域幅の拡張されたオーディオ信号を提供する方法1300のフロー図を示す。方法1300は、少なくとも1つの帯域幅拡張高周波信号を生成するステップ1310と、複数の比較パラメータを算出するステップ1320と、複数の比較パラメータから比較パラメータを決定するステップ1330と、入力オーディオ信号と帯域幅拡張高周波信号を結合するステップ1340と、帯域幅の拡張されたオーディオ信号を提供するステップ1350を備える。
帯域幅の拡張された高周波信号は、入力オーディオ信号に基づく高周波帯域を備える。帯域幅の拡張された高周波信号の高周波帯域の下側遮断周波数は、入力オーディオ信号の上側遮断周波数より低い。異なる帯域幅拡張高周波信号が生成される場合、異なる帯域幅拡張高周波信号は、それらの高周波帯域内に異なる周波数を備える。
比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の比較に基づいて算出される。複数の比較パラメータの各比較パラメータは、入力オーディオ信号と生成された帯域幅拡張高周波信号の間の異なるオフセット周波数に基づいて算出される。
決定された比較パラメータは、予め定義された判定基準を満たしている。
帯域幅拡張オーディオ信号を取得するために入力オーディオ信号と結合された帯域幅拡張高周波信号は、決定された比較パラメータに対応するオフセット周波数に基づいている。
図14は、本発明の実施形態に係る、帯域幅の拡張されたオーディオ信号を提供する方法のブロック図1400を示す。
入力オーディオ信号を備えるビットストリームを受信1402した後、コアデコーダは、入力オーディオ信号を復号化1410する。入力オーディオ信号に基づいて帯域幅拡張高周波信号が生成1310され、入力オーディオ信号と、異なるオフセット周波数を有する生成された帯域幅拡張高周波信号の間の相互相関に関する複数の比較パラメータが算出1320される。そして、遅延推定とも呼ばれる予め定義された判定基準を満たす比較パラメータが決定1330される。
決定された比較パラメータに対応するオフセット周波数に基づき、変調器は入力オーディオ信号を変調1420する。加えて、受信されたビットストリーム1402からパラメータを抽出1430し、例えば変調された信号の電力密度に適応させることができる。変調された信号は、そこで入力オーディオ信号と結合1340される。加えて、帯域幅の拡張されたオーディオ信号の音調とノイズを補正1440することができる。これは、入力オーディオ信号との結合の前になすこともできる。そして、帯域幅の拡張されたオーディオ信号に関するオーディオデータが、例えば音響再生のために提供1350される。
このような方法で、時間可変変調の演算が、デコーダ側でなされる。
入力オーディオ信号を変調1420してパッチを生成する変調器の代替として、例えば、既に前に生成された帯域幅拡張高周波信号を用いることができ、または、パッチ生成器は決定された比較パラメータに対応するオフセット周波数に基づいて帯域幅拡張高周波信号(パッチ)を生成することができる。
言い換えれば、低データレートがデコーダ側の低い複雑度より重要である場合、変調器の周波数変調の決定は、デコーダ側でなすこともできる。このため、図9に示されるアルゴリズムは、いくつかの変更のみによってデコーダで実行することができる。オリジナル信号はデコーダでの相互相関の演算に対して利用可能でないので、相関は、オーバーラップ範囲内でオリジナル信号(入力オーディオ信号)とシフトされたオリジナル信号(入力オーディオ信号)の間で算出することができる。例えば、信号は、ゼロとαk、例えば2で割ったαk、3で割ったαk、または4で割ったαk、の間でシフトすることができる。αkは、またk番目の帯域端を示し、例えば、α1はコアコーダのクロスオーバー周波数を示す。例えば、これは、エンコーダにおいて、デコーダでと同じ方法で生じる可能性がある。
エンコーダにおいて、スペクトル形成、ノイズ補正および/または音調補正のためのパラメータを抽出し、デコーダに伝送することができる。
図15は、本発明の一実施形態に係る、入力オーディオ信号を用いて出力信号を提供する帯域幅拡張エンコーダ1500のブロック図を示す。エンコーダ1500は、図4に示されたエンコーダに対応する。しかしながら、エンコーダ1500は、オフセット周波数自体に基づくパラメータ指示を有する出力信号132を提供しない。それは、電力密度パラメータと、音調補正およびノイズ補正のためのオプションのパラメータを決定し、出力信号132へのこれらのパラメータのパラメータ指示を含むことができるだけである。しかしながら、電力密度パラメータは(また、決定されている場合は他のパラメータも)、決定された比較パラメータに対応するオフセット周波数に基づいて決定される。
例えば、電力密度パラメータは、入力オーディオ信号102と、決定された比較パラメータに対応するオフセット周波数を有する帯域幅拡張高周波信号との比率を指示することができる。それ故、電力密度パラメータとオプションとして音調補正および/またはノイズ補正のためのパラメータに関係するパラメータ指示は、決定された比較パラメータに対応するオフセット周波数に基づいている。
エンコーダ1500と図4に示されたエンコーダとの更なる差異は、パッチ生成器110がデコーダ1400のパッチ生成器がなすのと同じ方法で帯域幅拡張高周波信号を生成するということである。このように、エンコーダ1500とデコーダは、同じオフセット周波数を取得することができ、それ故、エンコーダ1500によって抽出されるパラメータは、デコーダによって生成されるパッチに対して有効である。
言い換えれば、パッチは、例えば、各時間ステップ、各時間フレーム、時間フレームの部分または時間フレームのグループに対して、変化する遮断周波数によって生成することができる。
記載されたオーディオ信号の帯域幅の拡張の方法は、エンコーダ側とデコーダ側で、並びにデコーダ側のみで、用いることができる。公知の方法とは対照的に、記載された新規な方法は、オーディオ信号の基本周波数についての正確な情報を必要としない、いわゆる帯域幅のハーモニック拡張を実行することができる。更に、例えば、米国仮特許出願(出願番号US61/0125129)「 Nagel, S. Disch:オーディオ信号におけるハーモニック帯域幅拡張の装置および方法」に示されたような、位相ボコーダによってなされる、いわゆるハーモニック帯域幅拡張とは対照的に、スペクトルは広がることがなく、それ故、密度も変更することがない。ハーモニーを確実にするために、拡張されたものとベースバンドとの間の相関が実施される。この相関は、演算と記憶の複雑度およびデータレートの要求に依存して、デコーダにおいて並びにエンコーダにおいて算出することができる。
例えば、帯域幅拡張自体は、振幅変調(AM)および複数の遅い、単一適応の、時間可変キャリアを有する単側波帯変調(SSB)による周波数シフトを用いてなすことができる。付加的なパラメータによる次の後処理は、オリジナル信号のスペクトル包絡およびノイズレベル並びに他の特性を近似することを試みることができる。
信号の変換のための新規な方法は、低周波領域(LF)と高周波領域(HF)の間の、並びに次の高周波領域との間の時間可変遮断周波数XOverによるスペクトルのハーモニック補正の延長による単純な複製またはミラー操作、いわゆるパッチのために現れる問題を回避することができる。これらの遮断周波数は、生成されたパッチがオリジナルにおいて存在したような既存のハーモニック・ラスタに可能な限りよくフィットするように選択される。
図16は、ベースバンドの単側波帯変調によって3つのパッチを生成することができる、3つの時間可変の振幅および遮断周波数を有する変調器のスペクトログラムを示す。図16aは、時間可変遮断周波数1610を用いた帯域幅の拡張された信号のスペクトル線図1600aを示す。図16bは、3つのトーンのオーディオ信号のスペクトル線図1600bを図示する。図18bに描かれたスペクトログラムと比較して、ライン1620は、有意に不鮮明でない。
図17は、その期間の線図1700による作用効果を図示する。オーディオ信号の第3トーンの電力密度スペクトルは、オリジナル1710、一定の遮断周波数を有する1720、および可変遮断周波数を有する1730として示される。一定の遮断周波数1720を用いることとは対照的に、ハーモニック構造は、可変遮断周波数1730を用いることによって残る。
スペクトルのハーモニック延長によって、ベースバンド(コアコーダ)と拡張された帯域の両方の間の、および後続するパッチの間の遷移点における問題は、回避することができる。システムの機能に対する要求条件としてF0推定なしで、ハーモニーを妨害することも、過渡的な音響イベントによることもなく、聞き取れるアーチファクトの存在なしで、任意の信号をハーモニック延長することができる。
本発明に係るいくつかの実施形態は、全部の帯域幅が利用可能でない全てのオーディオアプリケーションに適する方法に関する。例えば、デジタルラジオ、インターネットストリーム、またはオーディオ通信アプリケーションのようなオーディオコンテンツの放送に対して、記載された方法を用いることができる。
本発明に係る更なる実施形態は、入力オーディオ信号とパラメータ信号に基づいて帯域幅の拡張されたオーディオ信号を提供するものであって、パラメータ信号がオフセット周波数の指示と電力密度パラメータの指示を備える、帯域幅拡張デコーダに関する。帯域幅拡張デコーダは、パッチ生成器と、結合器と、出力インターフェースを備える。パッチ生成器は、高周波帯域を備える帯域幅拡張高周波信号を生成するように構成され、帯域幅拡張高周波信号の高周波帯域は、入力オーディオ信号の周波数帯域の周波数シフトに基づいて生成され、周波数シフトは、オフセット周波数に基づき、パッチ生成器は、帯域幅拡張高周波信号の高周波帯域を、電力密度パラメータの値に等しいまたは電力密度パラメータの逆数値に等しいファクタによって増幅または減衰するように構成される。結合器は、帯域幅拡張高周波信号と入力オーディオ信号を結合し、帯域幅の拡張されたオーディオ信号を取得するように構成される。出力インターフェースは、帯域幅の拡張されたオーディオ信号を提供するように構成される。
本発明に係るいくつかの更なる実施形態は、前述のような帯域幅拡張デコーダに関し、パッチ生成器は、帯域幅拡張高周波信号の高周波帯域を、電力密度パラメータの値に等しいまたは電力密度パラメータの逆数値に等しいファクタによって増幅または減衰するように構成され、電力密度パラメータの指示は、入力オーディオ信号によって含まれる。
引き続いて、更なる実施例が記載される。
〔実施例1〕
入力オーディオ信号(102)を用いて出力信号(132)を提供するオーディオエンコーダ(100)、(400)、(1500)であって、
少なくとも1つの帯域幅拡張高周波信号(112)を生成するように構成され、帯域幅拡張高周波信号(112)は高周波帯域を備え、前記帯域幅拡張高周波信号(112)の高周波帯域は前記入力オーディオ信号(102)の低周波帯域に基づいており、異なる帯域幅拡張高周波信号(112)が生成される場合、異なる帯域幅拡張高周波信号(112)はそれらの高周波帯域内に異なる周波数を備えている、パッチ生成器(110)と、
複数の比較パラメータを算出するように構成され、比較パラメータは、前記入力オーディオ信号(102)と生成された帯域幅拡張高周波信号(112)の比較に基づいて算出され、複数の比較パラメータの各比較パラメータは、前記入力オーディオ信号(102)と生成された帯域幅拡張高周波信号(112)の間の異なるオフセット周波数に基づいて算出され、前記複数の比較パラメータから予め定義された判定基準を満たす比較パラメータを決定するように構成された、比較器(120)と、
前記決定された比較パラメータに対応するオフセット周波数に基づくパラメータ表示を備える出力信号(132)を、伝送または記憶のために提供するように構成された、出力インターフェース(130)と、
を備えた、オーディオエンコーダ。
〔実施例2〕
前記生成された帯域幅拡張高周波信号(112)の高周波帯域の電力密度に基づくパラメータと前記入力オーディオ信号(102)の対応する周波数帯域を比較し、電力密度パラメータを取得するように構成されたものであって、前記電力密度パラメータは、前記生成された帯域幅拡張高周波信号(112)の高周波帯域と前記入力オーディオ信号(102)の対応する周波数帯域の電力密度に基づく比率を示し、前記出力信号(132)のパラメータ表示は、前記電力密度パラメータに基づいている、電力密度比較器(430)を備えた、実施例1に記載のオーディオエンコーダ。
〔実施例3〕
入力オーディオ信号(502)とパラメータ信号(504)に基づいて帯域幅の拡張されたオーディオ信号(532)を提供するものであって、前記パラメータ信号(504)は、オフセット周波数の表示と電力密度パラメータの表示を備える、帯域幅拡張デコーダ(500)、(600)であって、
高周波帯域を備える帯域幅拡張高周波信号(512)を生成するように構成され、前記帯域幅拡張高周波信号(512)の高周波帯域は、前記入力オーディオ信号(502)の周波数帯域の周波数シフトに基づいて生成され、前記周波数シフトは、前記オフセット周波数に基づいており、前記帯域幅拡張高周波信号(512)の高周波帯域を、前記電力密度パラメータの値に等しいまたは前記電力密度パラメータの逆数値に等しいファクタによってそれぞれ増幅または減衰するように構成された、パッチ生成器(510)と、
前記帯域幅拡張高周波信号(512)と前記入力オーディオ信号を結合し、前記帯域幅の拡張されたオーディオ信号(532)を取得するように構成された、結合器(520)と、
前記帯域幅の拡張されたオーディオ信号(532)を提供するように構成された、出力インターフェース(530)と、
を備えた、帯域幅拡張デコーダ。
〔実施例4〕
前記結合器(520)は、前記帯域幅拡張高周波信号(512)の高周波帯域の一部を無視するように構成され、前記帯域幅拡張高周波信号(512)の高周波帯域の無視された部分が前記入力オーディオ信号(502)の上側遮断周波数より低い周波数を備える、実施例3に記載の帯域幅拡張デコーダ。
〔実施例5〕
符号化された入力オーディオ信号(602)に基づいて前記入力オーディオ信号(502)を生成するように構成されたものであって、一定の上側遮断周波数を有する前記入力オーディオ信号(502)を生成する、コアコーダ(610)を備え、前記パッチ生成器(510)は、前記入力オーディオ信号(502)の上側遮断周波数に前記オフセット周波数を加えた周波数に等しい周波数によって前記入力オーディオ信号(502)の周波数帯域をシフトすることによって前記帯域幅拡張高周波信号(512)の高周波帯域を生成するように構成された、実施例3または4に記載の帯域幅拡張デコーダ。
〔実施例6〕
前記パッチ生成器(510)は、前記帯域幅拡張高周波信号(512)を、時間ドメインにおいて生成するように構成された、実施例3〜5のいずれかに記載の帯域幅拡張デコーダ。
〔実施例7〕
前記パッチ生成器(510)は、前記帯域幅拡張高周波信号(512)を、単側波帯変調に基づいて生成するように構成された、実施例6に記載の帯域幅拡張デコーダ。
〔実施例8〕
入力オーディオ信号(502)に基づいて帯域幅の拡張されたオーディオ信号(532)を提供する帯域幅拡張デコーダ(1200)であって、
入力オーディオ信号(502)に基づいて、高周波帯域を備える少なくとも1つの帯域幅拡張高周波信号(1212)を生成するように構成され、前記帯域幅拡張高周波信号(1212)の高周波帯域の下側遮断周波数は、前記入力オーディオ信号(502)の上側遮断周波数より低く、異なる帯域幅拡張高周波信号(1212)が生成される場合、異なる帯域幅拡張高周波信号(1212)は、それらの高周波帯域内に異なる周波数を備えている、パッチ生成器(1210)と、
複数の比較パラメータを算出するように構成され、比較パラメータは、前記入力オーディオ信号(502)と生成された帯域幅拡張高周波信号(1212)との比較に基づいて算出され、前記複数の比較パラメータの各比較パラメータは、前記入力オーディオ信号(502)と生成された帯域幅拡張高周波信号(1212)の間の異なるオフセット周波数に基づいて算出され、前記複数の比較パラメータから予め定義された判定基準を満たす比較パラメータを決定するように構成された、比較器(1220)と、
前記入力オーディオ信号(502)と帯域幅拡張高周波信号を結合し、帯域幅の拡張されたオーディオ信号(532)を取得するように構成され、前記帯域幅拡張オーディオ信号(532)を取得するために用いられる前記帯域幅拡張高周波信号は、前記決定された比較パラメータに対応するオフセット周波数に基づいている、結合器(1230)と、
前記帯域幅の拡張されたオーディオ信号(532)を提供するように構成された、出力インターフェース(1240)と、
を備えた、帯域幅拡張デコーダ。
〔実施例9〕
前記パッチ生成器(1210)は、前記帯域幅拡張高周波信号(1212)の高周波帯域を、電力密度パラメータの値に等しいまたは電力密度パラメータの逆数値に等しいファクタによってそれぞれ増幅または減衰するように構成され、前記電力密度パラメータの表示が、前記入力オーディオ信号(502)に含まれている、実施例8に記載の帯域幅拡張デコーダ。
〔実施例10〕
時間フレームは複数の時間ステップを備え、各時間フレームは対応するオフセット周波数を備え、時間フレームの各時間ステップに対して時間フレームのオフセット周波数または異なる時間フレームの複数のオフセット周波数を補間し、各時間ステップに対する補間されたオフセット周波数を取得するように構成された、補間手段を備えた、実施例3〜9のいずれかに記載の帯域幅拡張デコーダ。
〔実施例11〕
前記比較器は、前記入力オーディオ信号と前記生成された帯域幅拡張高周波信号の相互相関の結果を算出することによって前記入力オーディオ信号と前記生成された帯域幅拡張高周波信号の比較を実行するように構成され、前記演算される比較パラメータは、前記相互相関の結果に基づいており、前記相互相関のパラメータは、前記帯域幅拡張高周波信号のオフセット周波数であり、それ故に前記算出された比較パラメータと関係している、実施例1または2のオーディオエンコーダまたは実施例8または9の帯域幅拡張デコーダ。
〔実施例12〕
入力オーディオ信号を用いて出力信号を提供する方法(700)であって、
少なくとも1つの帯域幅拡張高周波信号を生成し、帯域幅拡張高周波信号は高周波帯域を含み、前記帯域幅拡張高周波信号の高周波帯域は前記入力オーディオ信号の低周波帯域に基づいており、異なる帯域幅拡張高周波信号が生成される場合、異なる帯域幅拡張高周波信号はそれらの高周波帯域内に異なる周波数を備える、生成するステップ(710)と、
複数の比較パラメータを算出し、比較パラメータは前記入力オーディオ信号と生成された帯域幅拡張高周波信号の比較に基づいて算出され、前記複数の比較パラメータの各比較パラメータは前記入力オーディオ信号と生成された帯域幅拡張高周波信号の間の異なるオフセット周波数に基づいて算出される、算出するステップ(720)と、
前記複数の比較パラメータから予め定義された判定基準を満たす比較パラメータを決定する、決定するステップ(730)と、
前記決定された比較パラメータに対応するオフセット周波数に基づくパラメータ表示を備える出力信号を、伝送または記憶のために提供する、提供するステップ(740)と、
を備えた、方法。
〔実施例13〕
入力オーディオ信号とパラメータ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する方法(800)であって、前記パラメータ信号はオフセット周波数の表示と電力密度パラメータの表示を含み、
高周波帯域を備える帯域幅拡張高周波信号を生成するステップであって、前記帯域幅拡張高周波信号の高周波帯域は前記入力オーディオ信号の周波数帯域の周波数シフトに基づいて生成され、前記周波数シフトは前記オフセット周波数に基づいている、生成するステップ(810)と、
前記帯域幅拡張高周波信号の高周波帯域を、前記電力密度パラメータの値に等しいまたは前記電力密度パラメータの逆数値に等しいファクタによって増幅または減衰するステップ(820)と、
前記帯域幅拡張高周波信号と前記入力オーディオ信号を結合し、帯域幅の拡張されたオーディオ信号を取得するステップ(830)と、
前記帯域幅の拡張されたオーディオ信号を提供するステップ(840)と、
を備えた、方法。
〔実施例14〕
入力オーディオ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する方法(1300)であって、
前記入力オーディオ信号に基づいて高周波帯域を備える少なくとも1つの帯域幅拡張高周波信号を生成するステップであって、前記帯域幅拡張高周波信号の高周波帯域の下側遮断周波数は前記入力オーディオ信号の上側遮断周波数より低く、異なる帯域幅拡張高周波信号が生成される場合、異なる帯域幅拡張高周波信号はそれらの高周波帯域内に異なる周波数を備える、生成するステップ(1310)と、
複数の比較パラメータを算出するステップであって、比較パラメータは前記入力オーディオ信号と生成された帯域幅拡張高周波信号の比較に基づいて算出され、前記複数の比較パラメータの各比較パラメータは前記入力オーディオ信号と生成された帯域幅拡張周波数信号の間の異なるオフセット周波数に基づいて算出される、算出するステップ(1320)と、
前記複数の比較パラメータから、予め定義された判定基準を満たす比較パラメータを決定するステップ(1330)と、
前記入力オーディオ信号と帯域幅拡張高周波信号を結合し、前記帯域幅の拡張されたオーディオ信号を取得するステップであって、前記帯域幅の拡張されたオーディオ信号を取得するために用いられる帯域幅拡張高周波信号は前記決定された比較パラメータに対応するオフセット周波数に基づいている、結合するステップ(1310)と、
帯域幅の拡張されたオーディオ信号を提供するステップ(1350)と、
を備えた、方法。
〔実施例15〕
コンピュータプログラムがコンピュータまたはマイクロコントローラ上で動作するときに、前記コンピュータまたはマイクロコントローラに実施例12〜14のいずれかに記載された方法を実行させるためのコンピュータプログラム。
本発明はいくつかの実施形態に関して記載されているが、そこにはこの発明のスコープの範囲内にある変更、置換および均等物がある。また、この発明の方法および構成を実施する多くの代替方法があることにも注意すべきである。それ故に、以下に添付される請求の範囲は、本発明の真の趣旨およびスコープの範囲内にあるような全ての変更、置換および均等物を含むものと解釈することが意図される。
特に、状況に依存して、発明のスキームはソフトウェアにおいて実施することができることも指摘される。対応する方法が実行されるようにプログラム可能なコンピューターシステムと協働することができる電子的に読込可能な制御信号を有するデジタル記憶媒体、特にフロッピー(登録商標)ディスクまたはCD上に実装することができる。一般に、本発明は、このように、コンピュータプログラム製品がコンピュータ上で実行されるときに本発明の方法を実行する機械読取可能な媒体に記憶されたプログラムコードを有するコンピュータプログラム製品においても成立する。言い換えれば、本発明は、このように、コンピュータプログラム製品がコンピュータ上で実行されるときに本方法を実行するプログラムコードを有するコンピュータプログラムとしても実現することができる。

Claims (17)

  1. 入力オーディオ信号(102)を用いて出力信号(132)を提供するオーディオエンコーダであって、
    帯域幅拡張高周波信号(112)を生成するように構成され、前記帯域幅拡張高周波信号(112)は高周波帯域を備え、前記帯域幅拡張高周波信号(112)の高周波帯域は、前記入力オーディオ信号(102)の低周波帯域から、側波帯変調を用いて前記低周波帯域を固定値でシフトすることによって導き出される、パッチ生成器(110)と、
    帯域通過フィルタ(420)によってフィルタリングされた前記入力オーディオ信号と前記帯域幅拡張高周波信号(112)の比較を、前記帯域通過フィルタ(420)によってフィルタリングされた前記入力オーディオ信号の窓化された信号セクションの振幅スペクトルと前記帯域幅拡張高周波信号(112)との間の正規の時間インターバルにおける相互相関を用いて実行し、信号セクションに対して、最大相関に対する遅延を決定するように構成された、比較器(120)と、
    前記最大相関に対する遅延に基づくパラメータ表示を備える出力信号(132)を、伝送または記憶のために提供するように構成された、出力インターフェース(130)と、
    を備えた、オーディオエンコーダ。
  2. 前記生成された帯域幅拡張高周波信号(112)の高周波帯域の電力密度に基づくパラメータと前記入力オーディオ信号(102)の対応する周波数帯域を比較し、電力密度パラメータを取得するように構成されたものであって、前記電力密度パラメータは、前記生成された帯域幅拡張高周波信号(112)の高周波帯域と前記入力オーディオ信号(102)の対応する周波数帯域の電力密度に基づく比率を示し、前記出力インターフェース(130)は、前記出力信号(132)のパラメータ表示が前記電力密度パラメータに基づくように前記出力信号を提供するように構成された、請求項1に記載のオーディオエンコーダ。
  3. 前記側波帯変調は、単側波帯変調である、請求項1に記載のオーディオエンコーダ。
  4. 窓化された信号セクションに対して決定された前記最大相関に対する遅延が前記窓化された信号セクションの各時間ステップに対して補間されるように構成される、請求項1または2に記載のオーディオエンコーダ。
  5. 前記パッチ生成器(110)は、実数値の信号である前記入力オーディオ信号に対してヒルベルト変換(906)を適用し、解析的信号(908)が取得され、前記解析的信号を低域通過フィルタリング(904)するように構成された、請求項1〜4のいずれかに記載のオーディオエンコーダ
  6. 前記パッチ生成器は、解析的変調器(902)を生成し、低域通過フィルタリングされた信号を変調(710)し、変調された信号(910)を取得するように構成された、請求項5に記載のオーディオエンコーダ。
  7. 前記比較器は、前記解析的信号(908)のおよび前記変調された信号(910)の、オーバーラップを有するまたは有さない窓化(912、914)を実行し、窓化された信号セクションを取得し、引き続いて前記窓化された信号セクションのフーリエ変換を実行し、前記帯域通過フィルタ(420)によってフィルタリングされた前記入力オーディオ信号の窓化された信号セクションの振幅スペクトルと前記帯域幅拡張高周波信号(112)を取得するように構成された、請求項6に記載のオーディオエンコーダ。
  8. 入力オーディオ信号(502)とパラメータ信号(504)に基づいて帯域幅の拡張されたオーディオ信号(532)を提供する帯域幅拡張デコーダであって、前記パラメータ信号(504)は、オフセット周波数の表示と電力密度パラメータの表示を備え、
    高周波帯域を備える帯域幅拡張高周波信号(512)を生成するように構成され、前記帯域幅拡張高周波信号(512)の高周波帯域は、前記オフセット周波数と前記電力密度パラメータに基づく前記入力オーディオ信号(502)の変調によって生成され、前記変調を時間ドメインにおいて実行するように構成された、パッチ生成器(510)と、
    前記帯域幅拡張高周波信号(512)と前記入力オーディオ信号を結合し、前記帯域幅の拡張されたオーディオ信号(532)を取得するように構成された、結合器(520)と、
    前記帯域幅の拡張されたオーディオ信号(532)を提供するように構成された、出力インターフェース(530)と、
    を備えた、帯域幅拡張デコーダ。
  9. 前記パッチ生成器(510)は、単側波帯変調に基づいて前記帯域幅拡張高周波信号(512)を生成するように構成された、請求項8に記載の帯域幅拡張デコーダ。
  10. 時間フレームは複数の時間ステップを備え、各時間フレームは対応するオフセット周波数を備え、時間フレームの各時間ステップに対して時間フレームのオフセット周波数または異なる時間フレームの複数のオフセット周波数を補間し、各時間ステップに対する補間されたオフセット周波数を取得するように構成された、補間手段を備えた、請求項8または9に記載の帯域幅拡張デコーダ。
  11. 前記パッチ生成器は、次式
    Figure 0006076407
    に基づいて前記帯域幅拡張高周波信号(512)を演算するように構成された、請求項8〜10のいずれかに記載の帯域幅拡張デコーダ。
  12. 前記パッチ生成器は、前記入力オーディオ信号(502)によって乗算される変調関数を用いるように構成され、前記変調関数は、次式
    Figure 0006076407
    に基づいている、請求項8〜11のいずれかに記載の帯域幅拡張デコーダ。
  13. 前記パッチ生成器は、前記入力オーディオ信号(502)によって乗算される変調関数を用いるように構成され、前記変調関数は、次式
    Figure 0006076407
    に基づいている、請求項8〜11のいずれかに記載の帯域幅拡張エンコーダ。
  14. 入力オーディオ信号を用いて出力信号を提供する方法(700)であって、
    帯域幅拡張高周波信号(112)を生成するステップであって、前記帯域幅拡張高周波信号(112)は高周波帯域を備え、前記帯域幅拡張高周波信号(112)の高周波帯域は、前記入力オーディオ信号(102)の低周波帯域から、側波帯変調を用いて前記低周波帯域を固定値でシフトすることによって導き出される、生成するステップ(710)と、
    帯域通過フィルタ(420)によってフィルタリングされた前記入力オーディオ信号と前記帯域幅拡張高周波信号(112)の比較を、前記帯域通過フィルタ(420)によってフィルタリングされた前記入力オーディオ信号の窓化された信号セクションの振幅スペクトルと前記帯域幅拡張高周波信号(112)との間の正規の時間インターバルにおける相互相関を用いて実行し、信号セクションに対して、最大相関に対する遅延を決定する、比較するステップ(720)と、
    前記最大相関に対する遅延に基づくパラメータ表示を備える前記出力信号(132)を、伝送または記憶のために提供する、提供するステップ(740)と、
    を備えた、方法
  15. 入力オーディオ信号とパラメータ信号に基づいて帯域幅の拡張されたオーディオ信号を提供する方法(800)であって、前記パラメータ信号はオフセット周波数の表示と電力密度パラメータの表示を含み、
    高周波帯域を備える帯域幅拡張高周波信号を生成するステップであって、前記帯域幅拡張高周波信号の高周波帯域は、前記オフセット周波数と前記電力密度パラメータに基づく前記入力オーディオ信号(502)の変調によって生成され、前記変調は時間ドメインにおいて実行される、生成するステップ(810)と、
    前記帯域幅拡張高周波信号と前記入力オーディオ信号(502)を結合し、帯域幅の拡張されたオーディオ信号を取得する、結合するステップ(830)と、
    前記帯域幅の拡張されたオーディオ信号を提供する、提供するステップ(840)と、
    を備えた、方法。
  16. コンピュータプログラムがコンピュータまたはマイクロコントローラ上で動作するときに、前記コンピュータまたはマイクロコントローラに請求項14に記載された方法を実行させるためのコンピュータプログラム。
  17. コンピュータプログラムがコンピュータまたはマイクロコントローラ上で動作するときに、前記コンピュータまたはマイクロコントローラに請求項15に記載された方法を実行させるためのコンピュータプログラム。
JP2015123018A 2008-12-15 2015-06-18 オーディオエンコーダおよび帯域幅拡張デコーダ Active JP6076407B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12255208P 2008-12-15 2008-12-15
US61/122,552 2008-12-15

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014048421A Division JP5970014B2 (ja) 2008-12-15 2014-03-12 オーディオエンコーダおよび帯域幅拡張デコーダ

Publications (2)

Publication Number Publication Date
JP2015187747A JP2015187747A (ja) 2015-10-29
JP6076407B2 true JP6076407B2 (ja) 2017-02-08

Family

ID=42104496

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2011541363A Pending JP2012512437A (ja) 2008-12-15 2009-12-11 オーディオエンコーダおよび帯域幅拡張デコーダ
JP2014048421A Active JP5970014B2 (ja) 2008-12-15 2014-03-12 オーディオエンコーダおよび帯域幅拡張デコーダ
JP2015123018A Active JP6076407B2 (ja) 2008-12-15 2015-06-18 オーディオエンコーダおよび帯域幅拡張デコーダ

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2011541363A Pending JP2012512437A (ja) 2008-12-15 2009-12-11 オーディオエンコーダおよび帯域幅拡張デコーダ
JP2014048421A Active JP5970014B2 (ja) 2008-12-15 2014-03-12 オーディオエンコーダおよび帯域幅拡張デコーダ

Country Status (16)

Country Link
US (13) US8401862B2 (ja)
EP (12) EP4231291B1 (ja)
JP (3) JP2012512437A (ja)
KR (2) KR101369267B1 (ja)
CN (1) CN102246231B (ja)
AU (1) AU2009328247B9 (ja)
BR (2) BRPI0917762B1 (ja)
CA (5) CA2908847C (ja)
DK (1) DK3364414T3 (ja)
ES (4) ES2613941T3 (ja)
HK (2) HK1217810A1 (ja)
MX (1) MX2011006163A (ja)
PL (8) PL4231290T3 (ja)
PT (3) PT2359366T (ja)
TR (1) TR201808500T4 (ja)
WO (1) WO2010069885A1 (ja)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6992481B2 (en) 2003-05-29 2006-01-31 Timex Group B. V. Method for compensating for predictable generated signals in an electronic device
EP4231291B1 (en) * 2008-12-15 2023-11-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio bandwidth extension decoder, corresponding method and computer program
ES2805349T3 (es) * 2009-10-21 2021-02-11 Dolby Int Ab Sobremuestreo en un banco de filtros de reemisor combinado
JP5649084B2 (ja) 2010-03-09 2015-01-07 フラウンホーファーゲゼルシャフトツール フォルデルング デル アンゲヴァンテン フォルシユング エー.フアー. 再生速度またはピッチを変更する際にオーディオ信号における過渡音声事象を処理するための装置および方法
KR101414736B1 (ko) * 2010-03-09 2014-08-06 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 캐스케이드 필터뱅크들을 이용한 입력 오디오 신호를 처리하는 장치 및 방법
WO2011110494A1 (en) 2010-03-09 2011-09-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Improved magnitude response and temporal alignment in phase vocoder based bandwidth extension for audio signals
FR2961938B1 (fr) * 2010-06-25 2013-03-01 Inst Nat Rech Inf Automat Synthetiseur numerique audio ameliore
US8560330B2 (en) * 2010-07-19 2013-10-15 Futurewei Technologies, Inc. Energy envelope perceptual correction for high band coding
JP5714180B2 (ja) 2011-05-19 2015-05-07 ドルビー ラボラトリーズ ライセンシング コーポレイション パラメトリックオーディオコーディング方式の鑑識検出
US20130006644A1 (en) * 2011-06-30 2013-01-03 Zte Corporation Method and device for spectral band replication, and method and system for audio decoding
US9173025B2 (en) 2012-02-08 2015-10-27 Dolby Laboratories Licensing Corporation Combined suppression of noise, echo, and out-of-location signals
US20140046670A1 (en) * 2012-06-04 2014-02-13 Samsung Electronics Co., Ltd. Audio encoding method and apparatus, audio decoding method and apparatus, and multimedia device employing the same
KR101990884B1 (ko) * 2012-09-04 2019-06-19 에스케이 텔레콤주식회사 이종망 간의 통신품질 향상 방법 및 장치
EP2709106A1 (en) 2012-09-17 2014-03-19 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating a bandwidth extended signal from a bandwidth limited audio signal
US9258428B2 (en) * 2012-12-18 2016-02-09 Cisco Technology, Inc. Audio bandwidth extension for conferencing
EP2950308B1 (en) * 2013-01-22 2020-02-19 Panasonic Corporation Bandwidth expansion parameter-generator, encoder, decoder, bandwidth expansion parameter-generating method, encoding method, and decoding method
PL3067890T3 (pl) 2013-01-29 2018-06-29 Fraunhofer Ges Forschung Koder audio, dekoder audio, sposób dostarczania zakodowanej informacji audio, sposób dostarczania zdekodowanej informacji audio, program komputerowy i zakodowana reprezentacja, wykorzystujące adaptacyjne względem sygnału powiększanie szerokości pasma
ES2899781T3 (es) 2013-01-29 2022-03-14 Fraunhofer Ges Forschung Aparato y procedimiento para generar una señal de refuerzo de frecuencia mediante la configuración de la señal de refuerzo
CN103971694B (zh) * 2013-01-29 2016-12-28 华为技术有限公司 带宽扩展频带信号的预测方法、解码设备
RU2622872C2 (ru) * 2013-04-05 2017-06-20 Долби Интернэшнл Аб Аудиокодер и декодер для кодирования по форме волны с перемежением
CN104217727B (zh) * 2013-05-31 2017-07-21 华为技术有限公司 信号解码方法及设备
EP2830056A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding or decoding an audio signal with intelligent gap filling in the spectral domain
US10083708B2 (en) * 2013-10-11 2018-09-25 Qualcomm Incorporated Estimation of mixing factors to generate high-band excitation signal
EP2871641A1 (en) * 2013-11-12 2015-05-13 Dialog Semiconductor B.V. Enhancement of narrowband audio signals using a single sideband AM modulation
JP6593173B2 (ja) * 2013-12-27 2019-10-23 ソニー株式会社 復号化装置および方法、並びにプログラム
JP6576934B2 (ja) * 2014-01-07 2019-09-18 ハーマン インターナショナル インダストリーズ インコーポレイテッド 圧縮済みオーディオ信号の信号品質ベース強調及び補償
FR3017484A1 (fr) * 2014-02-07 2015-08-14 Orange Extension amelioree de bande de frequence dans un decodeur de signaux audiofrequences
EP3128513B1 (en) * 2014-03-31 2019-05-15 Fraunhofer Gesellschaft zur Förderung der Angewand Encoder, decoder, encoding method, decoding method, and program
US9984699B2 (en) * 2014-06-26 2018-05-29 Qualcomm Incorporated High-band signal coding using mismatched frequency ranges
EP2963645A1 (en) * 2014-07-01 2016-01-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Calculator and method for determining phase correction data for an audio signal
JP2016038435A (ja) * 2014-08-06 2016-03-22 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
US9852744B2 (en) * 2014-12-16 2017-12-26 Psyx Research, Inc. System and method for dynamic recovery of audio data
US10847170B2 (en) 2015-06-18 2020-11-24 Qualcomm Incorporated Device and method for generating a high-band signal from non-linearly processed sub-ranges
KR101677137B1 (ko) * 2015-07-17 2016-11-17 국방과학연구소 변조 스펙트로그램을 이용한 수중 방사체의 데몬 및 lofar 특징을 동시 추출하는 방법 및 장치
EP3182411A1 (en) 2015-12-14 2017-06-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for processing an encoded audio signal
EP3182410A3 (en) * 2015-12-18 2017-11-01 Dolby International AB Enhanced block switching and bit allocation for improved transform audio coding
JP6790114B2 (ja) * 2016-03-18 2020-11-25 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 音声スペクトログラムに基づく構造テンソルを使用して位相情報を復元することによるエンコーディング
TW202341126A (zh) * 2017-03-23 2023-10-16 瑞典商都比國際公司 用於音訊信號之高頻重建的諧波轉置器的回溯相容整合
EP3382702A1 (en) * 2017-03-31 2018-10-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for determining a predetermined characteristic related to an artificial bandwidth limitation processing of an audio signal
GB2562253B (en) * 2017-05-09 2021-11-03 Imagination Tech Ltd Efficient detection of ranging code correlation function of a GNSS signal
US10896684B2 (en) * 2017-07-28 2021-01-19 Fujitsu Limited Audio encoding apparatus and audio encoding method
CN109729585B (zh) * 2017-10-27 2022-04-15 成都鼎桥通信技术有限公司 网络处理方法和装置
US11158297B2 (en) * 2020-01-13 2021-10-26 International Business Machines Corporation Timbre creation system
EP4211701A1 (en) * 2020-09-09 2023-07-19 Sparrow Acoustics Inc. Method and system for performing time-domain processing of a waveform signal
US20230110255A1 (en) * 2021-10-12 2023-04-13 Zoom Video Communications, Inc. Audio super resolution

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2512908A (en) 1947-10-16 1950-06-27 Mina M Arndt Telephone switchboard mounting plate with plug-in components
US5455888A (en) 1992-12-04 1995-10-03 Northern Telecom Limited Speech bandwidth extension method and apparatus
WO1997029549A1 (fr) 1996-02-08 1997-08-14 Matsushita Electric Industrial Co., Ltd. Codeur, decodeur, codeur-decodeur et support d'enregistrement de signal audio large bande
JPH10124088A (ja) 1996-10-24 1998-05-15 Sony Corp 音声帯域幅拡張装置及び方法
SE512719C2 (sv) * 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
US6549884B1 (en) * 1999-09-21 2003-04-15 Creative Technology Ltd. Phase-vocoder pitch-shifting
US7742927B2 (en) * 2000-04-18 2010-06-22 France Telecom Spectral enhancing method and device
SE0001926D0 (sv) * 2000-05-23 2000-05-23 Lars Liljeryd Improved spectral translation/folding in the subband domain
SE0004187D0 (sv) * 2000-11-15 2000-11-15 Coding Technologies Sweden Ab Enhancing the performance of coding systems that use high frequency reconstruction methods
JP2003108197A (ja) * 2001-07-13 2003-04-11 Matsushita Electric Ind Co Ltd オーディオ信号復号化装置およびオーディオ信号符号化装置
DE60230856D1 (de) * 2001-07-13 2009-03-05 Panasonic Corp Audiosignaldecodierungseinrichtung und audiosignalcodierungseinrichtung
US6895375B2 (en) 2001-10-04 2005-05-17 At&T Corp. System for bandwidth extension of Narrow-band speech
AU2002352182A1 (en) 2001-11-29 2003-06-10 Coding Technologies Ab Methods for improving high frequency reconstruction
US20040002844A1 (en) 2002-06-27 2004-01-01 Jess Jochen A.G. System and method for statistical modeling and statistical timing analysis of integrated circuits
US8090577B2 (en) 2002-08-08 2012-01-03 Qualcomm Incorported Bandwidth-adaptive quantization
JP3861770B2 (ja) 2002-08-21 2006-12-20 ソニー株式会社 信号符号化装置及び方法、信号復号装置及び方法、並びにプログラム及び記録媒体
DE10328777A1 (de) 2003-06-25 2005-01-27 Coding Technologies Ab Vorrichtung und Verfahren zum Codieren eines Audiosignals und Vorrichtung und Verfahren zum Decodieren eines codierten Audiosignals
CN101800049B (zh) * 2003-09-16 2012-05-23 松下电器产业株式会社 编码装置和译码装置
DE10345996A1 (de) 2003-10-02 2005-04-28 Fraunhofer Ges Forschung Vorrichtung und Verfahren zum Verarbeiten von wenigstens zwei Eingangswerten
DE10345995B4 (de) 2003-10-02 2005-07-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Verarbeiten eines Signals mit einer Sequenz von diskreten Werten
JP4254479B2 (ja) * 2003-10-27 2009-04-15 ヤマハ株式会社 オーディオ帯域拡張再生装置
DE102004046746B4 (de) * 2004-09-27 2007-03-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren zum Synchronisieren von Zusatzdaten und Basisdaten
WO2006049205A1 (ja) * 2004-11-05 2006-05-11 Matsushita Electric Industrial Co., Ltd. スケーラブル復号化装置およびスケーラブル符号化装置
EP1686564B1 (en) * 2005-01-31 2009-04-15 Harman Becker Automotive Systems GmbH Bandwidth extension of bandlimited acoustic signals
JP4604864B2 (ja) 2005-06-14 2011-01-05 沖電気工業株式会社 帯域拡張装置及び不足帯域信号生成器
US7953605B2 (en) * 2005-10-07 2011-05-31 Deepen Sinha Method and apparatus for audio encoding and decoding using wideband psychoacoustic modeling and bandwidth extension
US7953604B2 (en) * 2006-01-20 2011-05-31 Microsoft Corporation Shape and scale parameters for extended-band frequency coding
US20080004866A1 (en) * 2006-06-30 2008-01-03 Nokia Corporation Artificial Bandwidth Expansion Method For A Multichannel Signal
PL2109098T3 (pl) * 2006-10-25 2021-03-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Urządzenie i sposób do generowania próbek audio w dziedzinie czasu
JP2008158300A (ja) * 2006-12-25 2008-07-10 Sony Corp 信号処理装置、信号処理方法、再生装置、再生方法、電子機器
US7912729B2 (en) * 2007-02-23 2011-03-22 Qnx Software Systems Co. High-frequency bandwidth extension in the time domain
DE102008015702B4 (de) 2008-01-31 2010-03-11 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Bandbreitenerweiterung eines Audiosignals
MX2010009932A (es) * 2008-03-10 2010-11-30 Fraunhofer Ges Forschung Metodo y dispositivo para manipular una señal de audio que tiene un evento transitorio.
US7977562B2 (en) * 2008-06-20 2011-07-12 Microsoft Corporation Synthesized singing voice waveform generator
AU2009267525B2 (en) * 2008-07-11 2012-12-20 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio signal synthesizer and audio signal encoder
US8880410B2 (en) * 2008-07-11 2014-11-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for generating a bandwidth extended signal
WO2010036062A2 (en) * 2008-09-25 2010-04-01 Lg Electronics Inc. A method and an apparatus for processing a signal
EP2224433B1 (en) * 2008-09-25 2020-05-27 Lg Electronics Inc. An apparatus for processing an audio signal and method thereof
EP4231291B1 (en) * 2008-12-15 2023-11-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio bandwidth extension decoder, corresponding method and computer program
EP3246919B1 (en) * 2009-01-28 2020-08-26 Dolby International AB Improved harmonic transposition
ES2805349T3 (es) * 2009-10-21 2021-02-11 Dolby Int Ab Sobremuestreo en un banco de filtros de reemisor combinado
PL2581905T3 (pl) * 2010-06-09 2016-06-30 Panasonic Ip Corp America Sposób rozszerzania pasma częstotliwości, urządzenie do rozszerzania pasma częstotliwości, program, układ scalony oraz urządzenie dekodujące audio
WO2012113035A1 (en) 2011-02-25 2012-08-30 Polyline Piping Systems Pty Ltd Mobile plastics extrusion plant
CN103928029B (zh) * 2013-01-11 2017-02-08 华为技术有限公司 音频信号编码和解码方法、音频信号编码和解码装置
US9666202B2 (en) * 2013-09-10 2017-05-30 Huawei Technologies Co., Ltd. Adaptive bandwidth extension and apparatus for the same

Also Published As

Publication number Publication date
EP2945159A1 (en) 2015-11-18
US8401862B2 (en) 2013-03-19
EP4224474A1 (en) 2023-08-09
CA2908550C (en) 2018-02-13
PL2359366T3 (pl) 2017-04-28
US20230049083A1 (en) 2023-02-16
ES2613941T3 (es) 2017-05-29
KR20130133914A (ko) 2013-12-09
EP3364414B1 (en) 2022-04-13
EP4231291C0 (en) 2023-11-15
ES2674386T3 (es) 2018-06-29
CA2908847C (en) 2018-02-13
EP4231293C0 (en) 2023-11-15
EP4231290C0 (en) 2023-11-15
EP4053838A1 (en) 2022-09-07
PT3364414T (pt) 2022-07-04
US10229696B2 (en) 2019-03-12
BR122015019030B1 (pt) 2020-05-05
US20230041923A1 (en) 2023-02-09
AU2009328247B9 (en) 2013-12-05
US20150243293A1 (en) 2015-08-27
HK1259024A1 (zh) 2019-11-22
AU2009328247A1 (en) 2011-07-07
US11646043B2 (en) 2023-05-09
MX2011006163A (es) 2011-11-02
EP4231292B1 (en) 2023-11-15
CA2746837A1 (en) 2010-06-24
CA2908576C (en) 2018-11-27
US20210151063A1 (en) 2021-05-20
EP4231294A1 (en) 2023-08-23
PT2945159T (pt) 2018-06-26
WO2010069885A1 (en) 2010-06-24
EP4053838B1 (en) 2023-06-21
JP5970014B2 (ja) 2016-08-17
BRPI0917762B1 (pt) 2020-09-29
US20230072871A1 (en) 2023-03-09
CA2908847A1 (en) 2010-06-24
KR20110095354A (ko) 2011-08-24
PL4231290T3 (pl) 2024-04-02
EP4224474C0 (en) 2023-11-01
US11664039B2 (en) 2023-05-30
US9058802B2 (en) 2015-06-16
US11626124B2 (en) 2023-04-11
US20190156845A1 (en) 2019-05-23
US11631418B2 (en) 2023-04-18
BRPI0917762A2 (pt) 2016-07-26
CA2989886A1 (en) 2010-06-24
CA2746837C (en) 2016-09-20
KR101369267B1 (ko) 2014-03-04
EP4231294C0 (en) 2023-11-15
EP4231290B1 (en) 2023-11-15
PL4224475T3 (pl) 2024-03-18
PL4053838T3 (pl) 2023-11-13
EP2359366B1 (en) 2016-11-02
ES2921059T3 (es) 2022-08-17
CA2989886C (en) 2020-05-05
DK3364414T3 (da) 2022-06-27
US20230032124A1 (en) 2023-02-02
EP4231294B1 (en) 2023-11-15
US20230051135A1 (en) 2023-02-16
CA2908576A1 (en) 2010-06-24
EP2945159B1 (en) 2018-03-21
US20130185082A1 (en) 2013-07-18
US11594237B2 (en) 2023-02-28
JP2015187747A (ja) 2015-10-29
EP4231291A1 (en) 2023-08-23
CN102246231B (zh) 2013-07-10
BR122015019030A2 (pt) 2019-08-27
EP4231290A1 (en) 2023-08-23
EP3364414A1 (en) 2018-08-22
JP2012512437A (ja) 2012-05-31
US20230053046A1 (en) 2023-02-16
US11670316B2 (en) 2023-06-06
TR201808500T4 (tr) 2018-07-23
US10937437B2 (en) 2021-03-02
EP4231295A1 (en) 2023-08-23
US11741978B2 (en) 2023-08-29
US11705146B2 (en) 2023-07-18
EP4231291B1 (en) 2023-11-15
EP4224474B1 (en) 2023-11-01
EP2359366A1 (en) 2011-08-24
EP4231293B1 (en) 2023-11-15
EP4224475C0 (en) 2023-10-11
PL2945159T3 (pl) 2018-08-31
EP4231292C0 (en) 2023-11-15
PL4231292T3 (pl) 2024-04-02
PT2359366T (pt) 2017-01-20
CN102246231A (zh) 2011-11-16
AU2009328247B2 (en) 2013-06-06
CA2908550A1 (en) 2010-06-24
EP4231295B1 (en) 2024-02-21
US20230377590A1 (en) 2023-11-23
PL3364414T3 (pl) 2022-08-16
EP4231293A1 (en) 2023-08-23
ES2951163T3 (es) 2023-10-18
JP2014142653A (ja) 2014-08-07
HK1217810A1 (zh) 2017-01-20
EP4053838C0 (en) 2023-06-21
US20230037621A1 (en) 2023-02-09
EP4224475B1 (en) 2023-10-11
PL4224474T3 (pl) 2024-04-02
KR101424944B1 (ko) 2014-08-01
EP4231295C0 (en) 2024-02-21
EP4224475A1 (en) 2023-08-09
US20110288873A1 (en) 2011-11-24
EP4231292A1 (en) 2023-08-23

Similar Documents

Publication Publication Date Title
JP6076407B2 (ja) オーディオエンコーダおよび帯域幅拡張デコーダ
AU2015203736B2 (en) Audio encoder and bandwidth extension decoder

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160705

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20161004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170110

R150 Certificate of patent or registration of utility model

Ref document number: 6076407

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250