JP2021522543A - 後処理遅延低減との高周波再構成技術の統合 - Google Patents
後処理遅延低減との高周波再構成技術の統合 Download PDFInfo
- Publication number
- JP2021522543A JP2021522543A JP2020559398A JP2020559398A JP2021522543A JP 2021522543 A JP2021522543 A JP 2021522543A JP 2020559398 A JP2020559398 A JP 2020559398A JP 2020559398 A JP2020559398 A JP 2020559398A JP 2021522543 A JP2021522543 A JP 2021522543A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- band
- audio signal
- data
- metadata
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012805 post-processing Methods 0.000 title claims abstract description 16
- 238000005516 engineering process Methods 0.000 title description 2
- 230000009467 reduction Effects 0.000 title description 2
- 230000010354 integration Effects 0.000 title 1
- 230000003595 spectral effect Effects 0.000 claims abstract description 106
- 238000000034 method Methods 0.000 claims abstract description 88
- 230000005236 sound signal Effects 0.000 claims abstract description 73
- 230000017105 transposition Effects 0.000 claims abstract description 40
- 238000001914 filtration Methods 0.000 claims abstract description 18
- 230000009466 transformation Effects 0.000 claims abstract description 11
- 239000000284 extract Substances 0.000 claims abstract description 10
- 230000008929 regeneration Effects 0.000 claims abstract description 7
- 238000011069 regeneration method Methods 0.000 claims abstract description 7
- 238000012545 processing Methods 0.000 claims description 94
- 238000011049 filling Methods 0.000 claims description 65
- 230000010076 replication Effects 0.000 claims description 56
- 230000008569 process Effects 0.000 claims description 32
- 230000003044 adaptive effect Effects 0.000 claims description 19
- 238000007781 pre-processing Methods 0.000 claims description 17
- 238000006243 chemical reaction Methods 0.000 claims description 11
- 230000001052 transient effect Effects 0.000 claims description 11
- 238000009792 diffusion process Methods 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 7
- 230000015572 biosynthetic process Effects 0.000 claims description 7
- 238000003786 synthesis reaction Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 5
- 239000000872 buffer Substances 0.000 description 25
- 238000010586 diagram Methods 0.000 description 12
- 230000004044 response Effects 0.000 description 9
- 238000005070 sampling Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 230000014509 gene expression Effects 0.000 description 6
- 230000001419 dependent effect Effects 0.000 description 5
- 230000010363 phase shift Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000001228 spectrum Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000001934 delay Effects 0.000 description 2
- 230000009977 dual effect Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000002156 mixing Methods 0.000 description 2
- 238000004321 preservation Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
- G10L21/0388—Details of processing therefor
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Mathematical Physics (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereophonic System (AREA)
Abstract
Description
特許請求の範囲中を含め、この開示全体を通して、信号又はデータに“対して”処理を実行するという表現(例えば、信号又はデータをフィルタリングする、スケーリングする、変換する、又はそれに利得を適用する)は、信号又はデータに対して直接的に、あるいは号又はデータの処理されたバージョンに対して(例えば、処理実行前の予備的なフィルタリング又は前処理を受けた信号のバージョンに対して)、処理を実行することを表すよう、広い意味で使用される。
MPEG−4 AAC規格は、符号化されたMPEG−4 AACビットストリームが、以下のメタデータ、すなわち、ビットストリームのオーディオコンテンツを復号するために(もし適用されるべきであれば)デコーダによって適用されるべき高周波再構成(“HFR”)処理の各タイプを示す、及び/又はそのようなHFR処理を制御する、及び/又はビットストリームのオーディオコンテンツを復号するために使用されるべき少なくとも1つのHFRツールの少なくとも1つの特性若しくはパラメータを示すメタデータ、を含むことを企図している。ここでは、スペクトルバンド複製(“SBR”)での使用に関してMPEG−4 AAC規格で記述又は言及されているこのタイプのメタデータを表すために、“SBRメタデータ”という表現を使用する。当業者によって理解されるように、SBRはHFRの一形式である。
・高調波トランスポジション、及び
・QMFパッチングによる追加の前処理(プレフラット化)。
・eSBR処理を実行するために必要とされる差分の制御データのみが伝送される(SBR制御データの同時伝送ではない)ので、(eSBRメタデータを含めることによる)ビットレートペナルティは、ビットレート全体のごく一部である、及び
・SBR関係の制御情報の調整(チューニング)は、典型的に、トランスポジションの詳細に依存しない。制御データがトランスポーザの動作に依存する場合の例については、この出願中で後述する。
符号化されたオーディオビットストリームの少なくとも1つのブロック(例えば、MPEG−4 AACビットストリームの少なくとも1つのブロック)を格納するように構成されたメモリ(例えば、図3又は図4のバッファ201)と、
メモリに結合され、ビットストリームの上記ブロックの少なくとも1つの部分を逆多重化するように構成されたビットストリームペイロードデフォーマッタ(例えば、図3の要素205、又は図4の要素215)と、
ビットストリームの上記ブロックのオーディオコンテンツの少なくとも1つの部分を復号するように結合及び構成された復号サブシステム(例えば、図3の要素202及び203、又は図4の要素202及び213)と、を有し、ブロックは、
充填要素であり、当該充填要素の始まりを示す識別子(例えば、MPEG−4 AAC規格の表4.85の値0x6を持つ“id_syn_ele”識別子)と、該識別子の後の充填データと、を含む充填要素と、
該ブロックのオーディオコンテンツに対してエンハンストスペクトルバンド複製(eSBR)処理が実行される(例えば、該ブロックに含められたスペクトルバンド複製データ及びeSBRメタデータを使用して)べきかを特定する少なくとも1つのフラグと、
を含む。
・高調波トランスポジション(16kbps、14400/28800Hz)
〇 DFTベース:3.68WMOPS(weighted million operations per second)
〇 QMFベース:0.98WMOPS
・QMFパッチング前処理(プレフラット化):0.1WMOPS
のようになる。知られることには、DFTベースのトランスポジションは、典型的に、過渡信号に関してQMFベースのトランスポジションよりも良好に機能する。
1. 1ビットメタデータパラメータ“bs_sbr_processing”、及び
2. 復号されるべき符号化されたビットストリームのオーディオコンテンツの各チャンネル(“ch”)についての、上述のパラメータ“sbrPatchingMode[ch]”、“sbrOversamplingFlag[ch]”、“sbrPitchInBinsFlag[ch]”、及び“sbrPitchInBins[ch]”の各々。
lk(n)=H11(k,n)sk(n)+H21(k,n)dk(n)
rk(n)=H12(k,n)sk(n)+H22(k,n)dk(n)
に従って、左再構成信号(lk(n))及び右再構成信号(rk(n))が生成され、ここで、H11、H12、H21及びH22は、ステレオパラメータによって規定されるものである。信号lk(n)及び信号rk(n)は、最終的に周波数−時間変換によって時間ドメインに変換され返す。
符号化されたオーディオビットストリームを受信し、該符号化されたオーディオビットストリームは、前記オーディオ信号の低帯域部分を表すオーディオデータと、高周波再構成メタデータとを含み、
前記オーディオデータを復号して、復号された低帯域オーディオ信号を生成し、
前記符号化されたオーディオビットストリームから前記高周波再構成メタデータを抽出し、前記高周波再構成メタデータは、高周波再構成プロセスのための動作パラメータを含み、該動作パラメータは、前記符号化されたオーディオビットストリームの後方互換拡張コンテナ内に置かれたパッチングモードパラメータを含み、該パッチングモードパラメータの第1の値は、スペクトル変換を指し示し、該パッチングモードパラメータの第2の値は、位相ボコーダ周波数拡散による高調波トランスポジションを指し示し、
前記復号された低帯域オーディオ信号をフィルタリングして、フィルタリングされた低帯域オーディオ信号を生成し、
前記フィルタリングされた低帯域オーディオ信号及び前記高周波再構成メタデータを用いて、前記オーディオ信号の高帯域部分を再生成し、当該再生成することは、前記パッチングモードパラメータが前記第1の値である場合にスペクトル変換を含み、当該再生成することは、前記パッチングモードパラメータが前記第2の値である場合に位相ボコーダ周波数拡散による高調波トランスポジションを含み、
前記フィルタリングされた低帯域オーディオ信号を前記再生成された高帯域部分と組み合わせて、広帯域オーディオ信号を形成する、
ことを有し、
前記フィルタリングすること、前記再生成すること、及び前記組み合わせることは、オーディオチャンネル当たり3010サンプル以下の遅延で後処理動作として実行される、
方法。
オプションで、前記スペクトルバンド複製拡張データは、
オプションのスペクトルバンド複製ヘッダと、
前記ヘッダの後のスペクトルバンド複製データと、
前記スペクトルバンド複製データの後のスペクトルバンド複製拡張要素であり、フラグが含められているスペクトルバンド複製拡張要素と、
を含む、
EEE2又は3の方法。
符号化されたオーディオビットストリームを受信する入力インタフェースであり、前記符号化されたオーディオビットストリームは、前記オーディオ信号の低帯域部分を表すオーディオデータと、高周波再構成メタデータとを含む、入力インタフェースと、
前記オーディオデータを復号して、復号された低帯域オーディオ信号を生成するコアオーディオデコーダと、
前記符号化されたオーディオビットストリームから前記高周波再構成メタデータを抽出するデフォーマッタであり、前記高周波再構成メタデータは、高周波再構成プロセスのための動作パラメータを含み、該動作パラメータは、前記符号化されたオーディオビットストリームの後方互換拡張コンテナ内に置かれたパッチングモードパラメータを含み、該パッチングモードパラメータの第1の値は、スペクトル変換を指し示し、該パッチングモードパラメータの第2の値は、位相ボコーダ周波数拡散による高調波トランスポジションを指し示す、デフォーマッタと、
前記復号された低帯域オーディオ信号をフィルタリングして、フィルタリングされた低帯域オーディオ信号を生成する分析フィルタバンクと、
前記フィルタリングされた低帯域オーディオ信号及び前記高周波再構成メタデータを用いて、前記オーディオ信号の高帯域部分を再構成する高周波リジェネレータであり、前記再構成することは、前記パッチングモードパラメータが前記第1の値である場合にスペクトル変換を含み、前記再構成することは、前記パッチングモードパラメータが前記第2の値である場合に位相ボコーダ周波数拡散による高調波トランスポジションを含む、高周波リジェネレータと、
前記フィルタリングされた低帯域オーディオ信号を前記再生成された高帯域部分と組み合わせて、広帯域オーディオ信号を形成する合成フィルタバンクと、
を有し、
前記分析フィルタバンク、前記高周波リジェネレータ、及び前記合成フィルタバンクは、オーディオチャンネル当たり3010サンプル以下の遅延でポストプロセッサにて実行される、
オーディオ処理ユニット。
Claims (15)
- オーディオ信号の高周波再構成を実行する方法であって、当該方法は、
符号化されたオーディオビットストリームを受信し、該符号化されたオーディオビットストリームは、前記オーディオ信号の低帯域部分を表すオーディオデータと、高周波再構成メタデータとを含み、
前記オーディオデータを復号して、復号された低帯域オーディオ信号を生成し、
前記符号化されたオーディオビットストリームから前記高周波再構成メタデータを抽出し、前記高周波再構成メタデータは、高周波再構成プロセスのための動作パラメータを含み、該動作パラメータは、前記符号化されたオーディオビットストリームの後方互換拡張コンテナ内に置かれたパッチングモードパラメータを含み、該パッチングモードパラメータの第1の値は、スペクトル変換を指し示し、該パッチングモードパラメータの第2の値は、位相ボコーダ周波数拡散による高調波トランスポジションを指し示し、
前記復号された低帯域オーディオ信号をフィルタリングして、フィルタリングされた低帯域オーディオ信号を生成し、
前記フィルタリングされた低帯域オーディオ信号及び前記高周波再構成メタデータを用いて、前記オーディオ信号の高帯域部分を再生成し、当該再生成することは、前記パッチングモードパラメータが前記第1の値である場合にスペクトル変換を含み、当該再生成することは、前記パッチングモードパラメータが前記第2の値である場合に位相ボコーダ周波数拡散による高調波トランスポジションを含み、
前記フィルタリングされた低帯域オーディオ信号を前記再生成された高帯域部分と組み合わせて、広帯域オーディオ信号を形成する、
ことを有し、
前記フィルタリングすること、前記再生成すること、及び前記組み合わせることは、オーディオチャンネル当たり3010サンプルの遅延で後処理動作として実行される、
方法。 - 前記符号化されたオーディオビットストリームは更に充填要素を含み、該充填要素は、該充填要素の始まりを指し示す識別子と、該識別子の後の充填データとを有し、該充填データが前記後方互換拡張コンテナを含む、請求項1に記載の方法。
- 前記識別子は、最上位ビットが先に伝送され且つ0x6の値を持つ3ビット符号なし整数である、請求項2に記載の方法。
- 前記充填データは拡張ペイロードを含み、該拡張ペイロードはスペクトルバンド複製拡張データを含み、前記拡張ペイロードは、最上位ビットが先頭に送信され且つ‘1101’又は‘1110’の値を持つ4ビット符号なし整数で識別され、
オプションで、前記スペクトルバンド複製拡張データは、
オプションのスペクトルバンド複製ヘッダと、
前記ヘッダの後のスペクトルバンド複製データと、
前記スペクトルバンド複製データの後のスペクトルバンド複製拡張要素であり、フラグが含められているスペクトルバンド複製拡張要素と、
を含む、
請求項2又は3に記載の方法。 - 前記高周波再構成メタデータは、エンベロープスケールファクタ、ノイズフロアスケールファクタ、時間/周波数グリッド情報、又はクロスオーバー周波数を指し示すパラメータを含む、請求項1乃至4のいずれか一項に記載の方法。
- 前記後方互換拡張コンテナは更に、前記パッチングモードパラメータが前記第1の値に等しいときに、前記高帯域部分のスペクトルエンベロープの形状における不連続を回避するために追加の前処理が使用されるかを指し示すフラグを含み、該フラグの第1の値は、前記追加の前処理をイネーブルし、該フラグの第2の値は、前記追加の前処理をディセーブルする、請求項1乃至5のいずれか一項に記載の方法。
- 前記追加の前処理は、線形予測フィルタ係数を用いてプリゲイン曲線を計算することを含む、請求項6に記載の方法。
- 前記後方互換拡張コンテナは更に、前記パッチングモードパラメータが前記第2の値に等しいときに、信号適応周波数ドメインオーバーサンプリングが適用されるべきかを指し示すフラグを含み、該フラグの第1の値は、前記信号適応周波数ドメインオーバーサンプリングをイネーブルし、該フラグの第2の値は、前記信号適応周波数ドメインオーバーサンプリングをディセーブルする、請求項1乃至5のいずれか一項に記載の方法。
- 前記信号適応周波数ドメインオーバーサンプリングは、過渡信号を含むフレームに対してのみ適用される、請求項8に記載の方法。
- 位相ボコーダ周波数拡散による前記高調波トランスポジションは、毎秒450万演算及び3kワードのメモリの又はそれよりも低い推定複雑度で実行される、請求項1乃至9のいずれか一項に記載の方法。
- 前記復号された低帯域オーディオ信号をフィルタリングして、フィルタリングされた低帯域オーディオ信号を生成することは、複素QMF分析フィルタバンクを用いて、前記復号された低帯域オーディオ信号を複数のサブバンドへとフィルタリングすることを有し、
前記フィルタリングされた低帯域オーディオ信号を前記再生成された高帯域部分と組み合わせて、広帯域オーディオ信号を形成することは、複素QMF合成フィルタバンクを用いることを有する、
請求項1乃至10のいずれか一項に記載の方法。 - 命令を有するコンピュータプログラムであって、前記命令は、コンピューティング装置又はシステムによって実行されるときに、該コンピューティング装置又はシステムに、請求項1乃至12のいずれかに記載の方法を実行させる、コンピュータプログラム。
- オーディオ信号の高周波再構成を実行するオーディオ処理ユニットであって、当該オーディオ処理ユニットは、
符号化されたオーディオビットストリームを受信する入力インタフェースであり、前記符号化されたオーディオビットストリームは、前記オーディオ信号の低帯域部分を表すオーディオデータと、高周波再構成メタデータとを含む、入力インタフェースと、
前記オーディオデータを復号して、復号された低帯域オーディオ信号を生成するコアオーディオデコーダと、
前記符号化されたオーディオビットストリームから前記高周波再構成メタデータを抽出するデフォーマッタであり、前記高周波再構成メタデータは、高周波再構成プロセスのための動作パラメータを含み、該動作パラメータは、前記符号化されたオーディオビットストリームの後方互換拡張コンテナ内に置かれたパッチングモードパラメータを含み、該パッチングモードパラメータの第1の値は、スペクトル変換を指し示し、該パッチングモードパラメータの第2の値は、位相ボコーダ周波数拡散による高調波トランスポジションを指し示す、デフォーマッタと、
前記復号された低帯域オーディオ信号をフィルタリングして、フィルタリングされた低帯域オーディオ信号を生成する分析フィルタバンクと、
前記フィルタリングされた低帯域オーディオ信号及び前記高周波再構成メタデータを用いて、前記オーディオ信号の高帯域部分を再構成する高周波リジェネレータであり、前記再構成することは、前記パッチングモードパラメータが前記第1の値である場合にスペクトル変換を含み、前記再構成することは、前記パッチングモードパラメータが前記第2の値である場合に位相ボコーダ周波数拡散による高調波トランスポジションを含む、高周波リジェネレータと、
前記フィルタリングされた低帯域オーディオ信号を前記再構成された高帯域部分と組み合わせて、広帯域オーディオ信号を形成する合成フィルタバンクと、
を有し、
前記分析フィルタバンク、前記高周波リジェネレータ、及び前記合成フィルタバンクは、オーディオチャンネル当たり3010サンプルの遅延でポストプロセッサにて実行される、
オーディオ処理ユニット。 - 位相ボコーダ周波数拡散による前記高調波トランスポジションは、毎秒450万演算及び3kワードのメモリの又はそれよりも低い推定複雑度で実行される、請求項14に記載のオーディオ処理ユニット。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023048111A JP7493076B2 (ja) | 2018-04-25 | 2023-03-24 | 後処理遅延低減との高周波再構成技術の統合 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP18169156 | 2018-04-25 | ||
EP18169156.9 | 2018-04-25 | ||
PCT/EP2019/060600 WO2019207036A1 (en) | 2018-04-25 | 2019-04-25 | Integration of high frequency audio reconstruction techniques |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023048111A Division JP7493076B2 (ja) | 2018-04-25 | 2023-03-24 | 後処理遅延低減との高周波再構成技術の統合 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021522543A true JP2021522543A (ja) | 2021-08-30 |
JPWO2019207036A5 JPWO2019207036A5 (ja) | 2023-01-25 |
JP7252976B2 JP7252976B2 (ja) | 2023-04-05 |
Family
ID=62063367
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020559398A Active JP7252976B2 (ja) | 2018-04-25 | 2019-04-25 | 後処理遅延低減との高周波再構成技術の統合 |
Country Status (15)
Country | Link |
---|---|
US (7) | US11527256B2 (ja) |
EP (1) | EP3785260A1 (ja) |
JP (1) | JP7252976B2 (ja) |
KR (1) | KR20210005164A (ja) |
CN (1) | CN112189231A (ja) |
AU (3) | AU2019258524B2 (ja) |
BR (1) | BR112020021832A2 (ja) |
CA (1) | CA3098064A1 (ja) |
CL (1) | CL2020002745A1 (ja) |
IL (3) | IL278223B2 (ja) |
MA (1) | MA52530A (ja) |
MX (1) | MX2020011206A (ja) |
SG (1) | SG11202010374VA (ja) |
WO (1) | WO2019207036A1 (ja) |
ZA (1) | ZA202006518B (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113436603B (zh) * | 2021-06-28 | 2023-05-02 | 北京达佳互联信息技术有限公司 | 声码器的训练方法和装置及合成音频信号的方法和声码器 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012141631A (ja) * | 2008-03-10 | 2012-07-26 | Fraunhofer Ges Zur Foerderung Der Angewandten Forschung Ev | 瞬間的事象を有する音声信号の操作装置および操作方法 |
WO2013068587A2 (en) * | 2011-11-11 | 2013-05-16 | Dolby International Ab | Upsampling using oversampled sbr |
WO2015036348A1 (en) * | 2013-09-12 | 2015-03-19 | Dolby International Ab | Time- alignment of qmf based processing data |
JP2015111277A (ja) * | 2010-07-19 | 2015-06-18 | ドルビー・インターナショナル・アーベー | 高周波再構成の際のオーディオ信号処理 |
US20180025737A1 (en) * | 2015-03-13 | 2018-01-25 | Dolby International Ab | Decoding audio bitstreams with enhanced spectral band replication metadata in at least one fill element |
Family Cites Families (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE512719C2 (sv) * | 1997-06-10 | 2000-05-02 | Lars Gustaf Liljeryd | En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion |
SE9903553D0 (sv) | 1999-01-27 | 1999-10-01 | Lars Liljeryd | Enhancing percepptual performance of SBR and related coding methods by adaptive noise addition (ANA) and noise substitution limiting (NSL) |
SE0001926D0 (sv) | 2000-05-23 | 2000-05-23 | Lars Liljeryd | Improved spectral translation/folding in the subband domain |
JP3870193B2 (ja) | 2001-11-29 | 2007-01-17 | コーディング テクノロジーズ アクチボラゲット | 高周波再構成に用いる符号器、復号器、方法及びコンピュータプログラム |
US7447631B2 (en) | 2002-06-17 | 2008-11-04 | Dolby Laboratories Licensing Corporation | Audio coding system using spectral hole filling |
EP1532734A4 (en) * | 2002-06-05 | 2008-10-01 | Sonic Focus Inc | ACOUSTIC VIRTUAL REALITY ENGINE AND ADVANCED TECHNIQUES FOR IMPROVING THE DELIVERED SOUND |
US7933945B2 (en) | 2002-06-27 | 2011-04-26 | Openpeak Inc. | Method, system, and computer program product for managing controlled residential or non-residential environments |
US6792057B2 (en) | 2002-08-29 | 2004-09-14 | Bae Systems Information And Electronic Systems Integration Inc | Partial band reconstruction of frequency channelized filters |
JP4937746B2 (ja) | 2004-07-20 | 2012-05-23 | パナソニック株式会社 | 音声符号化装置および音声符号化方法 |
US8260609B2 (en) | 2006-07-31 | 2012-09-04 | Qualcomm Incorporated | Systems, methods, and apparatus for wideband encoding and decoding of inactive frames |
CN101140759B (zh) * | 2006-09-08 | 2010-05-12 | 华为技术有限公司 | 语音或音频信号的带宽扩展方法及系统 |
WO2009059632A1 (en) | 2007-11-06 | 2009-05-14 | Nokia Corporation | An encoder |
CN101458930B (zh) | 2007-12-12 | 2011-09-14 | 华为技术有限公司 | 带宽扩展中激励信号的生成及信号重建方法和装置 |
DE102008015702B4 (de) | 2008-01-31 | 2010-03-11 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zur Bandbreitenerweiterung eines Audiosignals |
KR101223835B1 (ko) | 2008-07-11 | 2013-01-17 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 오디오 신호 합성기 및 오디오 신호 인코더 |
JP5203077B2 (ja) | 2008-07-14 | 2013-06-05 | 株式会社エヌ・ティ・ティ・ドコモ | 音声符号化装置及び方法、音声復号化装置及び方法、並びに、音声帯域拡張装置及び方法 |
BR122019023684B1 (pt) * | 2009-01-16 | 2020-05-05 | Dolby Int Ab | sistema para gerar um componente de frequência alta de um sinal de áudio e método para realizar reconstrução de frequência alta de um componente de frequência alta |
TWI662788B (zh) | 2009-02-18 | 2019-06-11 | 瑞典商杜比國際公司 | 用於高頻重建或參數立體聲之複指數調變濾波器組 |
KR101433701B1 (ko) | 2009-03-17 | 2014-08-28 | 돌비 인터네셔널 에이비 | 적응형으로 선택가능한 좌/우 또는 미드/사이드 스테레오 코딩과 파라메트릭 스테레오 코딩의 조합에 기초한 진보된 스테레오 코딩 |
CO6440537A2 (es) * | 2009-04-09 | 2012-05-15 | Fraunhofer Ges Forschung | Aparato y metodo para generar una señal de audio de sintesis y para codificar una señal de audio |
US8971551B2 (en) * | 2009-09-18 | 2015-03-03 | Dolby International Ab | Virtual bass synthesis using harmonic transposition |
TWI643187B (zh) | 2009-05-27 | 2018-12-01 | 瑞典商杜比國際公司 | 從訊號的低頻成份產生該訊號之高頻成份的系統與方法,及其機上盒、電腦程式產品、軟體程式及儲存媒體 |
ES2400661T3 (es) | 2009-06-29 | 2013-04-11 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Codificación y decodificación de extensión de ancho de banda |
US8515768B2 (en) * | 2009-08-31 | 2013-08-20 | Apple Inc. | Enhanced audio decoder |
KR101697497B1 (ko) * | 2009-09-18 | 2017-01-18 | 돌비 인터네셔널 에이비 | 입력 신호를 전위시키기 위한 시스템 및 방법, 및 상기 방법을 수행하기 위한 컴퓨터 프로그램이 기록된 컴퓨터 판독가능 저장 매체 |
KR101309671B1 (ko) * | 2009-10-21 | 2013-09-23 | 돌비 인터네셔널 에이비 | 결합된 트랜스포저 필터 뱅크에서의 오버샘플링 |
MY164396A (en) | 2010-01-19 | 2017-12-15 | Dolby Int Ab | Subband block based harmonic transposition |
BR112012022745B1 (pt) | 2010-03-09 | 2020-11-10 | Fraunhofer - Gesellschaft Zur Föerderung Der Angewandten Forschung E.V. | dispositivo e método para resposta de magnitude aperfeiçoada e alinhamento temporal em um vocoder de fase com base no método de extenção da largura de banda para sinais de áudio |
AU2011226212B2 (en) | 2010-03-09 | 2014-03-27 | Dolby International Ab | Apparatus and method for processing an input audio signal using cascaded filterbanks |
US9047875B2 (en) * | 2010-07-19 | 2015-06-02 | Futurewei Technologies, Inc. | Spectrum flatness control for bandwidth extension |
US8996976B2 (en) | 2011-09-06 | 2015-03-31 | Microsoft Technology Licensing, Llc | Hyperlink destination visibility |
JP2013068587A (ja) | 2011-09-22 | 2013-04-18 | Nippon Water Solution:Kk | 携帯型時間積分式漏水発見装置 |
GB2499699A (en) | 2011-12-14 | 2013-08-28 | Wolfson Ltd | Digital data transmission involving the position of and duration of data pulses within transfer periods |
EP2631906A1 (en) | 2012-02-27 | 2013-08-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Phase coherence control for harmonic signals in perceptual audio codecs |
EP2881943A1 (en) * | 2013-12-09 | 2015-06-10 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for decoding an encoded audio signal with low computational resources |
EP3127109B1 (en) * | 2014-04-01 | 2018-03-14 | Dolby International AB | Efficient coding of audio scenes comprising audio objects |
GR1008810B (el) * | 2015-03-19 | 2016-07-07 | Νικολαος Ευστρατιου Καβουνης | Φυσικος αφρωδης οινος με βιολογικο κροκο κοζανης |
EP3208800A1 (en) | 2016-02-17 | 2017-08-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for stereo filing in multichannel coding |
EP3382700A1 (en) | 2017-03-31 | 2018-10-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for post-processing an audio signal using a transient location detection |
TWI809289B (zh) | 2018-01-26 | 2023-07-21 | 瑞典商都比國際公司 | 用於執行一音訊信號之高頻重建之方法、音訊處理單元及非暫時性電腦可讀媒體 |
-
2019
- 2019-04-25 MX MX2020011206A patent/MX2020011206A/es unknown
- 2019-04-25 SG SG11202010374VA patent/SG11202010374VA/en unknown
- 2019-04-25 AU AU2019258524A patent/AU2019258524B2/en active Active
- 2019-04-25 CA CA3098064A patent/CA3098064A1/en active Pending
- 2019-04-25 WO PCT/EP2019/060600 patent/WO2019207036A1/en active Application Filing
- 2019-04-25 EP EP19719519.1A patent/EP3785260A1/en not_active Ceased
- 2019-04-25 CN CN201980034785.5A patent/CN112189231A/zh active Pending
- 2019-04-25 IL IL278223A patent/IL278223B2/en unknown
- 2019-04-25 MA MA052530A patent/MA52530A/fr unknown
- 2019-04-25 US US17/050,669 patent/US11527256B2/en active Active
- 2019-04-25 JP JP2020559398A patent/JP7252976B2/ja active Active
- 2019-04-25 IL IL303445A patent/IL303445B1/en unknown
- 2019-04-25 KR KR1020207033978A patent/KR20210005164A/ko active Search and Examination
- 2019-04-25 BR BR112020021832-4A patent/BR112020021832A2/pt unknown
- 2019-04-25 IL IL310202A patent/IL310202A/en unknown
-
2020
- 2020-10-20 ZA ZA2020/06518A patent/ZA202006518B/en unknown
- 2020-10-22 CL CL2020002745A patent/CL2020002745A1/es unknown
-
2022
- 2022-11-15 US US17/987,545 patent/US11810589B2/en active Active
-
2023
- 2023-02-23 US US18/113,418 patent/US11862185B2/en active Active
- 2023-02-23 US US18/113,391 patent/US11810590B2/en active Active
- 2023-02-23 US US18/113,397 patent/US11810591B2/en active Active
- 2023-02-23 US US18/113,406 patent/US11810592B2/en active Active
- 2023-11-14 US US18/508,415 patent/US20240087590A1/en active Pending
-
2024
- 2024-04-10 AU AU2024202301A patent/AU2024202301A1/en active Pending
- 2024-04-11 AU AU2024202352A patent/AU2024202352A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012141631A (ja) * | 2008-03-10 | 2012-07-26 | Fraunhofer Ges Zur Foerderung Der Angewandten Forschung Ev | 瞬間的事象を有する音声信号の操作装置および操作方法 |
JP2015111277A (ja) * | 2010-07-19 | 2015-06-18 | ドルビー・インターナショナル・アーベー | 高周波再構成の際のオーディオ信号処理 |
JP2017062483A (ja) * | 2010-07-19 | 2017-03-30 | ドルビー・インターナショナル・アーベー | 高周波再構成の際のオーディオ信号処理 |
WO2013068587A2 (en) * | 2011-11-11 | 2013-05-16 | Dolby International Ab | Upsampling using oversampled sbr |
WO2015036348A1 (en) * | 2013-09-12 | 2015-03-19 | Dolby International Ab | Time- alignment of qmf based processing data |
US20180025737A1 (en) * | 2015-03-13 | 2018-01-25 | Dolby International Ab | Decoding audio bitstreams with enhanced spectral band replication metadata in at least one fill element |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6908795B2 (ja) | 後処理遅延低減との高周波再構成技術の統合 | |
US11810592B2 (en) | Integration of high frequency audio reconstruction techniques | |
EP3518233B1 (en) | Backward-compatible integration of high frequency reconstruction techniques for audio signals | |
JP7493076B2 (ja) | 後処理遅延低減との高周波再構成技術の統合 | |
JP7493073B2 (ja) | 後処理遅延低減との高周波再構成技術の統合 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220420 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230113 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230228 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230324 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7252976 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |