JP2024026178A - 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法 - Google Patents

完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法 Download PDF

Info

Publication number
JP2024026178A
JP2024026178A JP2023199977A JP2023199977A JP2024026178A JP 2024026178 A JP2024026178 A JP 2024026178A JP 2023199977 A JP2023199977 A JP 2023199977A JP 2023199977 A JP2023199977 A JP 2023199977A JP 2024026178 A JP2024026178 A JP 2024026178A
Authority
JP
Japan
Prior art keywords
spectrum
decoding module
frame
previous
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023199977A
Other languages
English (en)
Other versions
JP2024026178A5 (ja
Inventor
エイドリアン トマセク
Tomasek Adrian
ラルフ スペルシュナイダー
Sperschneider Ralph
ヤン ビューテ
Buethe Jan
コンラート ベンドルフ
Benndorf Conrad
マルティーン ディーツ
Dietz Martin
マルクス シュネル
Schnell Markus
マキシミリアン シュレーゲル
SCHLEGEL Maximilian
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP19156997.9A external-priority patent/EP3697005A1/en
Priority claimed from PCT/EP2020/053620 external-priority patent/WO2020165265A1/en
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Publication of JP2024026178A publication Critical patent/JP2024026178A/ja
Publication of JP2024026178A5 publication Critical patent/JP2024026178A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • G10L19/035Scalar quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0041Arrangements at the transmitter end
    • H04L1/0042Encoding specially adapted to other signal generation operation, e.g. in order to reduce transmit distortions, jitter, or to improve signal shape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0041Arrangements at the transmitter end
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005Correction of errors induced by the transmission channel, if related to the coding algorithm
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0212Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using orthogonal transformation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/18Vocoders using multiple modes
    • G10L19/20Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0324Details of processing therefor
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/03Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
    • H03M13/05Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
    • H03M13/07Arithmetic codes
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/03Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
    • H03M13/05Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
    • H03M13/13Linear codes
    • H03M13/15Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes
    • H03M13/151Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes using error location or error correction polynomials
    • H03M13/1515Reed-Solomon codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B17/00Monitoring; Testing
    • H04B17/30Monitoring; Testing of propagation channels
    • H04B17/309Measuring or estimating channel quality parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0009Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the channel coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0023Systems modifying transmission characteristics according to link quality, e.g. power backoff characterised by the signalling
    • H04L1/0032Without explicit signalling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045Arrangements at the receiver end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045Arrangements at the receiver end
    • H04L1/0046Code rate detection or code type detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045Arrangements at the receiver end
    • H04L1/0047Decoding adapted to other signal detection operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056Systems characterized by the type of code used
    • H04L1/0057Block codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0078Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0083Formatting with frames or packets; Protocol or part of protocol for error control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0078Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0084Formats for payload data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93Discriminating between voiced and unvoiced parts of speech signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/08Arrangements for detecting or preventing errors in the information received by repeating transmission, e.g. Verdan system

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Probability & Statistics with Applications (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Electromagnetism (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Error Detection And Correction (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Alarm Systems (AREA)
  • Micro-Organisms Or Cultivation Processes Thereof (AREA)
  • Color Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、LC3フレーム損失隠蔽のためのデコーダおよび復号方法を提供する。【解決手段】デコーダ(100)は、復号モジュール(110)と出力インタフェース(120)と、を備える。復号モジュール(110)はエラー隠しモードを含み、オーディオ信号のスペクトルの周波数が敷居周波数よりも大きいスペクトル線についてエラー隠蔽を実行することおよび/または現在のフレームに先行している前のフレームの前のビットストリームペイロードがトーナルまたは高調波なオーディオ信号の信号成分を符号化するかどうかに依存してエラー隠蔽を実行することによって、オーディオ信号を再構築する。【選択図】図1

Description

本発明は、完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、LC3フレーム損失隠蔽のためのデコーダおよび復号方法に関連する。
変換に基づいたオーディオコーデックは、オーディオフレームのスペクトルのコード化された表現に依存している。そのようなスペクトルは複数のスペクトル線から成る。種々の理由のため、いくつかのスペクトル線または全てのスペクトル線がデコーダ側で利用できないことがある。周波数領域におけるオーディオエラー隠蔽の概念は、例えば、このようなスペクトル線の喪失によって引き起こされたアーチファクトを軽減するための手段を提供することができる。共通のアプローチは、できるだけ良いこれらの代替を見つけることである。
従来技術において、種々のフレーム損失隠蔽技術が利用することができる。
周波数領域におけるフレーム損失隠蔽の概念は、例えば特に消音、反復ノイズ置換、および予測に言及している非特許文献1において議論されている。これらの技術は常に、ゼロまたはある種の背景ノイズ/快適ノイズのいずれかに向けて、通常はいくつかの失われたフレームにわたって信号を減衰させる、フェードアウト処理と組合されている。
特許文献1においては、周波数帯域のための種々の減衰係数が、これらの帯域におけるエネルギーに応じて提供されている。例えば、エネルギーが閾値より高い帯域にはより大きい減衰係数を適用することができ、エネルギーがその閾値より低い帯域にはより小さい減衰係数が適用されうる。さらに、特許文献1においては、最後の複数の良好なフレームにわたってエネルギー向上が観察され、最後の良好なフレームにおけるエネルギーが最後から2番目の良好なフレームにおいてよりも小さければ、より強い減衰が適用される。
さらに、信号のスペクトルの形も、ある種の共通の形に向かってフェードされることがある。このアプローチは、特に線形予測符号化(LPC)に基づくコーデック、例えばEVS(拡張された音声サービス)において使われる。そこで、LPC係数は混合されて、いくつかの提供された平均係数となる。
P. Lauber and R. Sperschneider, "Error Concealment for Compressed Digital Audio," in Audio Engineering Society, 2001. A. Raemoe, A. Kurittu and H. Toukomaa, "EVS Channel Aware Mode Robustness to Frame Erasures," in Interspeech 2016, San Francisco, CA, USA, 2016. A. Venkatraman, D. J. Sinder, S. Shaminda, R. Vivek, D. Duminda, C. Venkata, V. Imre, K. Venkatesh, S. Benjamin, L. Jeremie, Z. Xingtao and M. Lei, "Improved Error Resilience for VoLTE and VoIP with 3GPP EVS Channel Aware Coding," in ICASSP 2015.
J. Lecomte and A. Tomasek, "ERROR CONCEALMENT UNIT, AUDIO DECODER, AND RELATED METHOD AND COMPUTER PROGRAM FADING OUT A CONCEALED AUDIO FRAME OUT ACCORDING TO DIFFERENT DAMPING FACTORS FOR DIFFERENT FREQUENCY BANDS", WO 2017/153299A2, published 2017. M. Schnabel, G. Markovic, R. Sperschneider, C. Helmrich and J. Lecomte, "Apparatus and method realizing a fading of an mdct spectrum to white noise prior to fdns application". European Patent EP 3 011 559 B1, published 2017.
本発明の目的は、エラー隠蔽のためのより良い概念を提供することである。
本発明の目的は、請求項1に記載のデコーダ、請求項39に記載の方法、および請求項40に記載のコンピュータプログラムによって解決される。
現在のフレームを復号してオーディオ信号を再構築するためのデコーダが提供される。オーディオ信号は現在のフレーム内で符号化される。現在のフレームは現在のビットストリームペイロードを含む。現在のビットストリームペイロードは複数のペイロードビットを含む。複数のペイロードビットは、オーディオ信号のスペクトルの複数のスペクトル線を符号化する。ペイロードビットのそれぞれは、現在のビットストリームペイロード内の位置を表している。デコーダは、復号モジュールと出力インタフェースとを備える。復号モジュールはオーディオ信号を再構築するように構成される。出力インタフェースはオーディオ信号を出力するように構成される。復号モジュールはエラー隠蔽モードを含み、復号モジュールが前記エラー隠蔽モードになっている場合、復号モジュールは、オーディオ信号のスペクトルの、周波数が閾周波数よりも大きいスペクトル線についてエラー隠蔽を実行することによって、オーディオ信号を再構築するように構成される。および/または、復号モジュールがエラー隠蔽を実行する場合、復号モジュールは、現在のフレームに先行する前のフレームの前のビットストリームペイロードが、トーナルまたは高調波なオーディオ信号の信号成分を符号化するかどうかに依存して、エラー隠蔽を実行するように構成される。
さらに、現在のフレームを復号してオーディオ信号を再構築するための方法が提供される。オーディオ信号は現在のフレーム内で符号化され、現在のフレームは現在のビットストリームペイロードを含み、現在のビットストリームペイロードは複数のペイロードビットを含む。複数のペイロードビットは、オーディオ信号のスペクトルの複数のスペクトル線を符号化する。ペイロードビットのそれぞれは、現在のビットストリームペイロード内の位置を表す。方法は、オーディオ信号を再構築するステップであって、エラー隠蔽モードにおいて、オーディオ信号を再構築するステップは、オーディオ信号のスペクトルの、周波数が閾周波数より大きいスペクトル線についてエラー隠蔽を実施することによって、実行される、および/または、エラー隠蔽が実行される場合、エラー隠蔽は、現在のフレームに先行する前のフレームの前のビットストリームペイロードが、トーナルまたは高調波なオーディオ信号の信号成分を符号化するかどうかに依存して、実行される、オーディオ信号を再構築するステップと、オーディオ信号を出力するステップと、を含む。
さらに、コンピュータまたは信号プロセッサ上において実行されるときに、前述の方法を実施するためのコンピュータプログラムが提供される。
ある状況において、完全フレーム損失隠蔽が可能な限り最良のエラー隠蔽戦略であると考えられるならば、エラー隠蔽概念は、例えばフレーム全体が失われた、または、無効としてマークされた場合、または、スペクトルの一部が利用可能であったとしても、例えばフレーム全体に適用されることがある。
しかし、別の状況においては、スペクトルの一部が利用可能であれば、エラー隠蔽技術は、例えばフレームの一部のみにしか適用されないこともあるる。
スペクトルの一部が利用可能な状況は、例えば、スケーラブルな符号化、例えばいくつかの層は受信されるが他の層は受信されない、スケーラブルなAAC、AAC SLS、またはBSACにおいて生じる(AAC=先進的オーディオ符号化、SLS=スケーラブル・ロスレス、BSAC=ビット分割算術符号化)。
または、スペクトルの一部は、例えば、失われたフレームの冗長な低品質コピーが利用可能である、冗長フレーム符号化において、すなわち、VoIPまたはVoLTEの文脈において利用可能であることがある(VoIPおよびVoLTEにおける堅牢さとエラー耐性についてのより詳しくは、例えば非特許文献2および非特許文献3を参照のこと。VoIP=ボイスオーバーIP/ボイスオーバーインターネットプロトコル、VoLTE=ボイスオーバーLTE/ボイスオーバーロング・ターム・エボリューション)。
あるいは、例えば、所定のスケール係数が検出されて破損され、ひいては所定の数の破損したスペクトル線が存在することになる、スケール係数データのためのRVLC(可逆可変長符号化)を伴うAACにおいて、または、例えば、(心理音響的に重要聖が低いスペクトル範囲を表す)スペクトルの一部のコード化済み表現におけるエラーが別々に検出できる、DECT(デジタル強化無線電機通信)のためのLC3において、選択的なエラー検出が実行されるときに、スペクトルの一部が利用可能であることがある。
本発明によれば、エラー隠蔽のためのより良い概念を提供することができる。
本発明の実施の形態は、図を参照して以下により詳細に説明される。
図1は、実施の形態に依る現在のフレームを復号し、オーディオ信号の一部を再構築するためのデコーダを示す。 図2は、特定の実施の形態に依る復号モジュールを示す。 図3は、クリーンなチャンネルの復号のための、実施の形態に依る復号モジュールの概要を示す。 図4は、完全フレーム損失隠蔽のための、実施の形態に依る復号モジュールの概要を示す。 図5は、部分的フレーム損失隠しのための、実施の形態に依る復号モジュールの概要を示す。 図6は、連続で失われたフレームの数に依存し、かつ、フレーム長さにさらに依存する、実施の形態に依るフェード関数を示す。 図7は、連続で失われたフレームの数に依存し、かつ、フレーム長さにさらに依存する、実施の形態に依る符号のスクランブル化のための閾値を示す。 図8は、連続で失われたフレームの数に依存し、かつ、フレーム長さにさらに依存する、実施の形態に依るエネルギー閾値係数を示す。 図9は、連続で失われたフレームの数に依存する、実施の形態に依る非線形減衰を示す。
図1は、実施の形態に依る、現在のフレームを復号してオーディオ信号を再構築するためのデコーダ100を示す。
オーディオ信号は現在のフレーム内で符号化される。現在のフレームは現在のビットストリームペイロードを含む。現在のビットストリームペイロードは複数のペイロードビットを含む。複数のペイロードビットは、オーディオ信号のスペクトルの複数のスペクトル線を符号化する。ペイロードビットのうちのそれぞれは、現在のビットストリームペイロード内の位置を表す。
デコーダ100は、復号モジュール110および出力インタフェース120を含む。
復号モジュール110は、オーディオ信号を再構築するように構成される。
出力インタフェース120は、オーディオ信号を出力するように構成される。
復号モジュール110は、エラー隠蔽モードを含み、復号モジュール110がエラー隠蔽モードになっている場合、復号モジュール110は、オーディオ信号のスペクトルの、周波数が閾周波数より大きいスペクトル線についてエラー隠蔽を実行することによって、オーディオ信号を再構築するように構成される。
および/または、復号モジュール110がエラー隠蔽を実行する場合、復号モジュール110は、現在のフレームに先行する前のフレームの前のビットストリームペイロードが、トーナルまたは高調波なオーディオ信号の信号成分を符号化するかどうかに依存して、エラー隠蔽を実行するように構成される。
いくつかの実施の形態において、現在のフレームの現在のビットストリームペイロードが訂正不能なエラーを含んでいたら、および/または、現在のフレームが失われていたら、復号モジュールは、例えば前記エラー隠蔽モードになっていることがある。デコーダ100がエラー訂正を実行した後にもエラーがまだ存在している場合、または、現在のビットストリームペイロードがエラーを含み、かつ、エラー訂正が一切実行されない場合に、現在のビットストリームペイロードは、例えば訂正不能なエラーを含むことがある。訂正不能なエラーを含むフレームは、例えば破損されたフレームと称されることがある。
例えば、ある実施の形態によれば、現在のフレームに先行する前記前のフレームの前記前のビットストリームペイロードが、トーナルまたは高調波なオーディオ信号の前記信号成分を符号化するかどうかに依存して、特定のエラー隠蔽パラメータが構成されることがある。
ある実施の形態によれば、前のフレームは、例えば、完全フレーム損失隠蔽モードにおいてエラー隠蔽を実行することなく、復号モジュール110が復号した、最後の受信済みフレームである。
以下において、実施の形態をより詳細に説明する。
スペクトルは、例えば、利用可能かつ使用されることになるスペクトル線と、利用可能でない、または(例えば利用可能であったとしても)使用されるべきではないスペクトル線とに細分割されると考慮されることがある。
いくつかの実施の形態によれば、例えば以下の通りすすめることができる。
いくつかの状況においては、全てのスペクトル線が利用可能かつ使用されることになり、従ってフレーム損失隠蔽は、例えば実行されないことがある。
別の状況においては、所定のスペクトル線が利用可能かつ使用されることになり、部分的フレーム損失隠蔽が、例えば欠けているスペクトル線に対して実行されることがある。
さらに別の状況においては、利用可能なスペクトル線がない、またはどのスペクトル線も使用されるべきではなく、完全フレーム損失隠蔽が、例えば実行されることがる。
以下において、いくつかの実施の形態に依る、トーナル性に依存するエラー隠蔽を説明する。
ある実施の形態において、復号モジュール110がエラー隠蔽を実行する場合、復号モジュール110は、例えば、オーディオ信号の前のスペクトルの複数の符号を使ってエラー隠蔽を実行することによって、オーディオ信号の現在のスペクトルを再構築するように構成されることがある。前記複数の符号は前のフレーム内で符号化され復号モジュール110は、例えば、前記前のフレームが、トーナルまたは高調波なオーディオ信号の信号成分を符号化するかどうかに依存して、エラー隠蔽を実行するように構成されることがある。例えば、エラー隠蔽のためのパラメータは、例えば、信号成分がトーナルまたは高調波であるかどうかに依存して、異なる方法で選択されることがある。
ある実施の形態において、前記前のフレームは、例えば、復号モジュール110がエラー隠蔽を実行することなく復号した、最後に受信したフレームである場合がある。または、前記前のフレームは、例えば、復号モジュール110が完全フレーム損失隠蔽モードにおいてエラー隠蔽を実行することなく復号した、最後に受信したフレームであることがある。あるいは、前記前のフレームは、例えば、復号モジュール110が部分的フレーム損失隠蔽モードまたは完全フレーム損失隠蔽モードにおいてエラー隠蔽を実行することなく復号した、最後に受信したフレームであることがある。
ある実施の形態によれば、復号モジュール110がエラー隠蔽を実行し、かつ、前のフレームの前のビットストリームペイロードが、トーナルまたは高調波な信号成分を符号化する場合、復号モジュール110は、例えば、前のスペクトルの複数の符号のうちの1つ以上の符号をフリップ(はじく)して現在のスペクトルを再構築するように構成されることがある。ここで、現在のスペクトルを再構築するために復号モジュール110がフリップする前のスペクトルの複数の符号のうちの1つの符号のための確率を示すパーセンテージ値pは、例えば、0%≦p≦50%であることがある。復号モジュール110は、パーセンテージ値pを決定するように構成されることがある。ある実施の形態において、復号モジュール110は、例えば、擬似乱数のシーケンスを用て、前のスペクトルの考慮された符号が実際にフリップされるかどうかをパーセンテージ値pに依存して決定することがある。
ある実施の形態において、復号モジュール110は、後続のフレームの数に依存してパーセンテージ値pを増加させるように構成されることがある。前記後続のフレームの数は、例えば、いくつの後続の(部分的にまたは完全に)失われたフレームについて、復号モジュール110がエラー隠蔽を実行したかを示すことがある。あるいは、前記後続のフレームの数は、例えば、復号モジュール110が特定のエラー隠蔽モードにおいて、いくつの後続のフレームのためにエラー隠蔽を実行したかを示すことがある。
ある実施の形態において、復号モジュール110は、前記後続のフレームの数に依存する関数に依存して、パーセンテージ値pを決定するように構成されることがあり、前記後続のフレームの数は前記関数の独立変数である。
ある実施の形態によれば、復号モジュール110は、例えば、前記後続のフレームの数が第1の閾値より小さければパーセンテージ値pが0%であるように、前記後続のフレームの数が第1の閾値以上且つ第2の閾値より小さければパーセンテージ値pが0%≦p≦50%であるように、また、前記後続のフレームの数が第2の閾値より大きければパーセンテージ値pが50%であるように、パーセンテージ値pを決定するように構成されることがある。
ある実施の形態において、復号モジュール110は、例えば、パーセンテージ値pが後続のフレームの数に依存して、第1の閾値と第2の閾値との間の範囲で線形に増加するように、パーセンテージ値pを決定するように構成されることがある。
ある実施の形態によれば、復号モジュール110がエラー隠隠蔽を実行し、かつ、前のフレームの前のビットストリームペイロードが、トーナルまたは高調波な信号成分を符号化しない場合、復号モジュール110は、例えば、前のスペクトルの複数の符号の50%をフリップして現在のスペクトルを再構築するように構成されることがある。
ある実施の形態において、復号モジュール110がエラーを実行する場合、復号モジュール110は、例えば、前のフレームが、トーナルまたは高調波な信号成分を符号化するかどうかに依存して、オーディオ信号の前のスペクトルの複数の振幅を使ったエラー隠蔽を実行することによって、オーディオ信号の現在のスペクトルを再構築するように構成されることがあり、ここで、前記複数の振幅は前のフレーム内で符号化される。
ある実施の形態によれば、復号モジュール110がエラー隠蔽を実行する場合、復号モジュール110は、例えば、非線形の減衰特性に従って前のスペクトルの複数の振幅を減衰して現在のスペクトルを再構築するように構成されることがあり、ここで非線形の減衰特性は、前のフレームの前のビットストリームペイロードが、トーナルまたは高調波な信号成分を符号化するかどうかに依存する。例えば、非線形の減衰特性のためのパラメータは、例えば、信号成分がトーナルまたは高調波であるかどうかに依存して、異なる方法で選択されることがある。
ある実施の形態において、復号モジュール110がエラー隠蔽を実行し、かつ、前のフレームの前のビットストリームペイロードが、トーナルまたは高調波な信号成分を符号化する場合、復号モジュール110は、例えば、安定係数に依存して、前のスペクトルの複数の振幅を減衰するように構成されることがある。ここで前記安定係数は、現在のスペクトルと前のスペクトルとの間の類似度を示す、または、安定係数は、前のスペクトルと前のフレームに先行する前の前のフレームの前の前のスペクトルとの間の類似度を示す。
ある実施の形態によれば、前記前の前のフレームは、例えば、復号モジュールがエラー隠蔽を実行することなく復号した、前のフレームの前に、最後に受信したフレームであることがある。または、前記前の前のフレームは、例えば、復号モジュール110が完全フレーム損失隠蔽モードでエラー隠蔽を実行することなく復号した、前のフレームの前に、最後に受信したフレーム(例えば、最後から2番目に受信したフレーム)であることがある。または、前記前の前のフレームは、例えば、復号モジュール110が部分的なフレーム損失隠蔽モードまたは完全フレーム損失隠蔽モードにおいてエラー隠蔽を実行することなく復号した、前のフレームの前に最後に受信したフレームであることがある。
ある実施の形態において、復号モジュール110が部分的なフレーム損失隠蔽を実行するように設定された場合、前記安定係数は、例えば、現在のスペクトルと前のスペクトルとの間の前記類似度を示すことがある。復号モジュール110が完全なフレーム損失隠蔽を実行するように設定された場合、前記安定係数は、例えば、前のスペクトルと前の前のスペクトルとの間の前記類似度を示すことがある。
ある実施の形態によれば、復号モジュール110は、例えば、前のスペクトルのスペクトルビンのエネルギーを決定するように構成されることがある。さらに、復号モジュール110は、例えば、前記スペクトルビンの前記エネルギーがエネルギー閾値よりも小さいかどうかを決定するように構成されることがある。前記エネルギーが前記エネルギー閾値よりも小さい場合、復号モジュール110は、例えば、前記スペクトルビンに割り当てられている複数の振幅のうちの1つの振幅を第1のフェード係数で減衰するように構成されることがある。前記エネルギーが前記エネルギー閾値以上である場合、復号モジュール110は、例えば、前記スペクトルビンに割り当てられている複数の振幅のうちの前記振幅を第1のフェード係数より小さい第2のフェード係数で減衰するように構成されることがある。復号モジュール110は、例えば、複数の振幅のうちの1つの振幅の減衰についてより小さいフェード係数を使うことによって、複数の振幅のうちの前記1つの振幅の減衰が増大するように、減衰を実行するように構成されることがある。
ある実施の形態において、復号モジュール110は、例えば、前のスペクトルの複数のスペクトルビンを含むスペクトル帯域のエネルギーを決定するように構成されることがある。復号モジュール110は、例えば、前記スペクトル帯域の前記エネルギーがエネルギー閾値より小さいかどうかを決定するように構成されることがある。前記エネルギーが前記エネルギー閾値より小さい場合、復号モジュール110は、例えば、前記スペクトル帯域の前記スペクトルビンに割り当てられている複数の振幅のうちの1つの振幅を第1のフェード係数で減衰するように構成されることがある。前記エネルギーが前記エネルギー閾値以上であれば、復号モジュール110は、例えば、前記スペクトル帯域の前記スペクトルビンに割り当てられている複数の振幅のうちの前記振幅を第1のフェード係数よりも小さい第2のフェード係数で減衰するように構成されることがある。復号モジュール110は、例えば、複数の振幅のうちの1つの振幅の減衰のためにより小さいフェード係数を使うことによって、複数の振幅のうちの前記1つの振幅の減衰が増大するように、減衰を実行するように構成されることがある。
ある実施の形態によれば、復号モジュール110は、例えば、前記後続のフレームの数に応じて第1のフェード係数がより小さくなるように、第1のフェード係数を決定するように構成されることがある。さらに、復号モジュール110は、例えば、前記後続のフレームの数に応じて第2のフェード係数がより小さくなるように、第2のフェード係数を決定するように構成されることがある。
ある実施の形態において、復号モジュール110は、例えば、現在のフレームが後続のフレームの間の最初のフレームである場合、
cum_fading_slow=1、且つ、
cum_fading_fast=1
であるように、また、現在のフレームが、後続のフレームのうちの最初のフレームに後続するフレームのうちの1つである場合、第1のフェード係数および前記第2のフェード係数を、例えば、
cum_fading_slow=cum_fading_slow*slow、
cum_fading_fast=cum_fading_fast*fast
に従って、前記後続のフレームの数に依存して決定することができるように、
第1のフェード係数および第2のフェード係数を決定するように構成されることがある。
ここで、式の右項のcum_fading_slowは、(例えば、最初の失われたフレームにて1で初期化された)前のフレームの第1のフェード係数であり、式の左項のcum_fading_slowは、現在のフレームの第1のフェード係数である。式の右項のcum_fading_fastは、(例えば、最初の失われたフレームにて1で初期化された)前のフレームの第2のフェード係数であり、式の左項のcum_fading_fastは、現在のフレームの第2のフェード係数である。ここで、1>slow>fast>0である。
ある実施の形態によれば、1>slow>fast>0.3である。
ある実施の形態において、復号モジュール110は、例えば、前記後続のフレームの数が第3の閾値より小さい場合には前記エネルギー閾値は第1のエネルギー値に等しく、前記後続のフレームの数が第3の閾値以上且つ第4の閾値より小さい場合には前記エネルギー閾値は、前記第1のエネルギー値より小さく且つ第2のエネルギー値より大きく、前記後続のフレームの数が第4の閾値より大きい場合には前記エネルギー閾値は前記第2のエネルギー値に等しくなるように、前記エネルギー閾値を決定するように構成されることがある。
実施の形態によれば、復号モジュール110は、例えば、エネルギー閾値が後続のフレームの数に依存して、第3の閾値と第4の閾値との間の範囲で線形的に減少するように、エネルギー閾値を決定するように構成されることがある。
利用不能または使用すべきでないスペクトル線については、前に受信した信号のトーナル性に依存して、また入手可能ならば、現在受信されている信号のトーナル性に依存して、ある程度のトーナル性が維持されていたとしても、置換が発生する。
最後の良好な信号がトーナルであったとインジケータが示す場合、より多くのトーナル性が維持される。
最後の良好な信号がトーナルでなかったとインジケータが示す場合、維持されるトーナル性はより少なくなる。
トーナル性は主に、1つのフレーム内の種々のビンの間の位相の関係性、および/または、後続のフレームについての同じビンの位相の関係性によって表される。
いくつかの実施の形態は、第1の側面、すなわち、トーナル性が主に、1つのフレーム内の種々のビンの間の位相の関係性によって表わされる、ことに焦点を合わせる。
1つのフレーム内における種々のビンの位相は主に、符号を特徴とするが、隣接するビンの振幅の関係性をも特徴とする。よって、振幅の関係性の保存ならびに符号の保存によって、高く維持されたトーナル性がもたらされる。逆もまた同様に、後続のビンの間でより多くの振幅および/または符号の関係性が変更されるにつれて、維持されるトーナル性は少なくなる。
いくつかの実施の形態による符号の操作をここから説明する。
技術水準から、2つのアプローチが知られている。
第1のアプローチによると、フレーム反復が適用される。符号は前のスペクトルから維持される。
第2のアプローチにおいては、ノイズ置換が実行される。符号は前のスペクトルと比較してスクランブル化され、無作為に、符号の50%がフリップされる。
無声信号については、ノイズ置換が良好な結果をもたらす。
有声信号については、代わりにフレーム反復を使用することができるが、より長い損失については、(損失の始まりに好まれる)維持されたトーナル性が煩わしくなる。
実施の形態は、有声信号については、フレーム反復とノイズ置換との間の変遷フェーズが望ましい、という発見に基づく。
いくつかの実施の形態によれば、これは、例えば、フレーム毎に所定の割合の符号を無作為にはじくことによって達成される。この割合は0%と50%との間であり、経時的に増大していく。
ここで、いくつかの実施の形態による振幅の操作を説明する。
技術水準において最も頻繁に使用される最も簡単な方法は、全ての周波数ビンに対し所定の減衰係数を適用することである。この減衰係数は、フレームからフレームへと増大して、円滑なフェードアウトを達成する。フェードアウトスピードは固定であるか、または信号特性に依存する。このアプローチによって、隣接するビンの大きさの関係性ならびにフレーム全体のスペクトルの形が維持される。
また、各帯域内のエネルギーに依存して異なる減衰係数を使用する帯域毎減衰が技術水準において既知である。このアプローチは、それぞれの帯域内で隣接するビンの大きさの関係性を維持している一方で、フレーム全体のスペクトルの形は平坦にされる。
いくつかの実施の形態によれば、値がより大きいビンは、値がより小さいビンよりも強く減衰されている。このため、いくつかの実施の形態では、例えば、非線形の減衰特性を定義していることがある。この非線形の減衰特性は、そうでなければ生じる可能性があるオーバーシュートを防止する。なぜなら、オーバーラップ加算の間にエイリアス消去が一切保証されず、隣接するビンの大きさの関係性を変更し、その結果スペクトルの形はより平坦になるからである。スペクトルの形を平坦にするために、いくつかの実施の形態は、隣接するビンの大きさの比率が予め1より上であったならば1より上に維持され、比率が予め1より下であったならば1より下に維持されるべきである、という発見に基づく。
この減衰を率直に適用するために、いくつかの実施の形態においては、非線形特性は、例えば、損失の始まりには小さく、その後に増大することがある。実施の形態において、経時的な調整は、例えば、信号のトーナル性に依存することがある。いくつかの実施の形態によれば、無声信号については、例えば、非線形性が有声信号よりも強いことがある。
このような非線形の減衰特性は、スペクトルの形に影響する。実施の形態において、スペクトルは、例えば、時間と共により平坦になって、バースト消失の間に煩わしい合成音のアーチファクトが生じる可能性を低減する。
以下において、いくつかの実施の形態による、部分的フレーム損失隠蔽を説明する。
ある実施の形態によれば、前記エラー隠蔽モードは、例えば、部分的フレーム損失隠蔽モードであることがあり、復号モジュール110が部分的フレーム損失隠蔽モードになっている場合、復号モジュール110は、例えば、スペクトルの複数のスペクトル線のうちの、周波数が閾周波数以下の1つ以上の第1のスペクトル線についてエラー隠しを実行することなくオーディオ信号を再構築するように構成されることがある。ここで、前記1つ以上の第1のスペクトル線は、1つ以上の複数のペイロードビットのうちの第1のグループによって符号化されている。さらに、復号モジュール110は、例えば、スペクトルの複数のスペクトル線のうちの周波数が閾周波数よりも大きい1つ以上の第2のスペクトル線についてエラー隠蔽を実行することによってオーディオ信号を再構築するように構成されることがあり、ここで前記1つ以上の第2のスペクトル線は、1つ以上の複数のペイロードビットのうちの第2のグループによって符号化されている。
ある実施の形態において、復号モジュール110は、例えば、現在のフレームが、オーディオ信号のスペクトルのうちの、周波数が閾周波数以下の前記1つ以上の第1のスペクトル線を符号化する破損ビットを一切含まないかどうかを検出するように構成されることがある。さらに、復号モジュール110は、例えば、現在のフレームが、オーディオ信号のスペクトルのうちの、周波数が閾周波数より大きい前記1つ以上の第2のスペクトル線を符号化する1つ以上の破損ビットを含むかどうかを検出するように構成されることがある。前記1つ以上の破損ビットは、ペイロードビットのうち、歪んだまたは歪んでいると思われる1つ以上のものである。現在のフレームが、オーディオ信号のスペクトルのうち、周波数が閾周波数以下の前記1つ以上の第1のスペクトル線を符号化する破損ビットを一切含まず、かつ、現在のフレームが、オーディオ信号のスペクトルのうちの、周波数が閾周波数より大きい前記1つ以上の第2のスペクトル線を符号化する前記1つ以上の破損ビットを含む場合、復号モジュール110は、例えば、スペクトルのうちの、閾周波数よりも大きい前記1つ以上の第2のスペクトル線についてエラー隠蔽を実行することによって、部分的フレーム損失隠蔽モードにおいてエラー隠蔽を実行するように構成されることがある。
ある実施の形態によれば、現在のフレームが、オーディオ信号のスペクトルのうちの、周波数が閾周波数以下の前記1つ以上の第1のスペクトル線を符号化する破損ビットを一切含まず、かつ、現在のフレームが、オーディオ信号のスペクトルのうちの、周波数が閾周波数よりも大きい前記1つ以上の第2のスペクトル線を符号化する1つ以上の破損ビットを含む場合、復号モジュール110は、例えば、オーディオ信号のスペクトルのうちの、周波数が閾周波数より以下の前記1つ以上の第1のスペクトル線を符号化する、前記1つ以上の複数のペイロードビットの前記第1のグループを復号することによって、オーディオ信号を再構築するように構成されることがある。
ある実施の形態において、復号モジュール110は、例えば、現在のフレームが失われているかどうかを検出するように構成され、デコーダ100が、現在のフレームが失われていることを検出した場合、復号モジュール110は、例えば、オーディオ信号のスペクトルのうちの、周波数が閾周波数よりも大きい前記1つ以上の第2のスペクトル線についてエラー隠蔽を実行することによって、オーディオ信号を再構築するように構成されることがある。さらに、復号モジュール110は、例えば、前記第1のグループについてエラー隠蔽を実行しないで、オーディオ信号のスペクトルのうちの、閾周波数以下の1つ以上の第1の周波数について前記1つ以上の第1のスペクトル線を符号化する、前記1つ以上の複数のペイロードビットの前記第1のグループを復号するように構成されることがある。ここで、前記1つ以上の複数のペイロードビットの前記第1のグループは、現在のフレームと異なる冗長フレームの1つ以上のペイロードビットである。
ある実施の形態において、冗長フレームは、例えば、現在のフレームの帯域幅が限定されたバージョンであることがある。例えば、冗長フレームは、例えば、現在のフレームと同じ時間期間の間、オーディオ信号を符号化するデータ(例えば、現在のフレームに比べて限縮されたデータセット)を提供することがある。このデータは、例えば、オーディオ信号のスペクトルの、閾周波数以下の前記1つ以上の第1の周波数について前記1つ以上の第1のスペクトル線のオーディオ信号を符号化する、複数のペイロードビットについては、現在のフレームの同じ時間期間の間、スペクトルの前記第1の周波数の現在のフレームよりも少ないビットで符号化されるため、異なることがある。
ある実施の形態において、復号モジュール110が完全フレーム損失隠蔽モードにおいてエラー隠蔽を実行するように構成される場合、復号モジュール110は、(そうでなければ現在のフレームの現在のビットストリームペイロードの全てのペイロードビットによって再構築可能な)スペクトル(全体)の全てのスペクトル線についてエラー隠蔽を実行するように構成される。
ある実施の形態によれば、複数のペイロードビットは複数の現在のペイロードビットである。復号モジュール110が部分的フレーム損失隠蔽モードになっている場合、復号モジュール110は、例えば、前のフレームの前のビットストリームペイロードの1つ以上の前のペイロードビットによって符号化された1つ以上の記憶されたスペクトル線を使って、オーディオ信号のスペクトルのうちの周波数が閾周波数よりも大きい前記1つ以上の第2のスペクトル線についてエラー隠蔽を実行するように構成されることがある。
ある実施の形態において、スペクトルは、例えば、現在の量子化済みスペクトルであることがある。復号モジュール110が部分的フレーム損失隠蔽モードにおいてエラー隠蔽を実行している場合、復号モジュール110は、例えば、オーディオ信号のスペクトルのうちの、周波数が閾周波数よりも大きい前記1つ以上の第2のスペクトル線についてエラー隠蔽を実行して、前記現在の量子化済みスペクトルの1つ以上の中間スペクトル線を得るように構成されることがある。
ある実施の形態によれば、スペクトルは現在の量子化済みスペクトルである。復号モジュール110が部分的フレーム損失隠蔽モードにおいてエラー隠蔽を実行している場合、復号モジュール110は、例えば、オーディオ信号のスペクトルのうちの、周波数が閾周波数よりも大きい前記1つ以上の第2のスペクトル線についてエラー隠蔽を実行して、前記現在の量子化済みスペクトルの1つ以上の中間スペクトル線を得るように構成されることがある。ここで、復号モジュール110は、例えば、再スケーリング係数を使用して1つ以上の中間スペクトル線を再スケーリングしてオーディオ信号を再構築するように構成されることがある。
ある実施の形態において、復号モジュール110は、例えば、以下のうちの少なくとも1つに依存して、再スケーリング係数を決定するように構成されることがある。
・前記現在のビットストリームペイロード内で符号化されたグローバルゲイン
・前記前のビットストリームペイロード内で符号化されたグローバルゲイン
・前記前のフレームの前の量子化済みスペクトルのエネルギー、前記前のフレームの前の復号済みスペクトルのエネルギー
・前記現在のフレームの前記現在の量子化済みスペクトルのエネルギー
ある実施の形態によれば、復号モジュール110は、例えば、
・エラー隠蔽を実行しないと再構築することができない最初のスペクトルビンからスペクトルの頂点までの、前のフレームの前の復号済みスペクトルのスペクトルビンの平均エネルギーが、ゼロからエラー隠蔽を実行しないでも再構築することができる最後のスペクトルビンまでの、前のフレームの前の復号済みスペクトルのスペクトルビンの平均エネルギー以上かどうか、または
・ゼロからエラー隠蔽を実行しないでも再構築することのできる前記最後のスペクトルビンまでの
、現在のフレームの前記現在の量子化済みスペクトルのスペクトルビンのエネルギーが、ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、前のフレームの前の量子化済みスペクトルのスペクトルビンのエネルギー以上かどうか
に依存して、再スケーリング係数を決定するように構成されることがある。
ある実施の形態において、
・エラー隠蔽を実行しないと再構築することができない前記最初のスペクトルビンからスペクトルの頂点までの、前のフレームの前の復号済みスペクトルのスペクトルビンの平均エネルギーが、ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、前のフレームの前の復号済みスペクトルのスペクトルビンの平均エネルギーより小さい場合、および、
・ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、現在のフレームの前記現在の量子化済みスペクトルのスペクトルビンのエネルギーが、ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、前のフレームの前の量子化済みスペクトルのスペクトルビンのエネルギーより小さい場合、
復号モジュール110は、例えば、再スケーリング係数が、
・ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、現在の量子化済みスペクトルのスペクトルビンのエネルギーを現在のフレームのゲイン係数の平方で乗算したものと
・ゼロからエラー隠蔽を実行しないでも再構築することができる前記最後のスペクトルビンまでの、前の量子化されたスペクトルのスペクトルビンのエネルギーを前のフレームのゲイン係数の平方で乗算したものと、の比率の平方根に等しくなるように、再スケーリング係数を決定するように構成されることがある。
Figure 2024026178000002
Figure 2024026178000003
Figure 2024026178000004
部分的フレーム損失隠蔽が適用されるシナリオにおいては、ビットストリームペイロードのより高感度なビットは、エラー無しであると想定される、または決定される。
Figure 2024026178000005
Figure 2024026178000006
エネルギーが変化する遷移フレームにおいて高エネルギーのアーチファクトを防止するために、隠蔽されたスペクトル線は順次再スケーリングされるが、一方、結果として生じる再スケーリング係数は、例えば、(a)グローバルゲイン、および(b)スペクトルのエネルギーの少なくとも1つに依存することがある。好ましくは、結果として生じる再スケーリング係数は、例えば、グローバルゲインとスペクトルのエネルギーとの両方に依存しても良い。
グローバルゲインに基づく再スケーリング係数は、前のグローバルゲインと現在のグローバルゲインとの比率に等しい。
次の場合、エネルギーに基づく再スケーリング係数は、1で初期化される(例えば、再スケーリングが実行されない/例えば再スケーリングには効果がない)。
・周波数ビンkbe(エラー隠蔽を実行しなければ再構築することができない最初のスペクトルビン)からスペクトルの頂点までの、前の復号済みスペクトルのスペクトルビンの平均エネルギーが、ゼロから周波数ビンkbe-1(エラー隠蔽を実行しないでも再構築することができる最後のスペクトルビン)までの、前の復号済みスペクトルのスペクトルビンの平均エネルギー以上である場合、または、
・ゼロから周波数ビンkbe-1までの、現在の量子化済みスペクトルのスペクトルビンのエネルギーが、ゼロから周波数ビンkbe-1までの、前の量子化済みスペクトルのスペクトルビンのエネルギー以上である場合。
さもなければ、再スケーリング係数は、
・ゼロから周波数ビンkbe-1にまでの、現在の量子化済みスペクトルのスペクトルビンのエネルギーを現在のフレームのゲイン係数の平方で乗算したものと、
・ゼロから周波数ビンkbe-1にまでの、前の量子化されたスペクトルのスペクトルビンのエネルギーを前のフレームのゲイン係数の平方で乗算したものと、
の比率の平方根と等しい。
この場合において、両方の係数を乗算するとき、ゲイン係数は互いに相殺する。従って、再スケーリング係数はその後、
・ゼロから周波数ビンkbe-1にまでの、現在の量子化済みスペクトルのスペクトルビンのエネルギーと、
・ゼロから周波数ビンkbe-1にまでの、前の量子化済みスペクトルのスペクトルビンのエネルギーと、
の比率の平方根に等しくなる。
その後、隠蔽された量子化済みスペクトルは、例えば、エラーのない量子化済みスペクトルとして扱われることがある。これは、ノイズ充填またはノイズ整形あるいははパラメータがエラーのないビットストリームに記憶されるその他の操作等の、デコーダが追って行う操作が、例えば、後に適用されうることを意味する。従って、可能な隠蔽アーチファクトが軽減される。
その後、上述されたのと同様のフェード肯定が、例えば、周波数ビンkbeからスペクトルの頂点までのスペクトルに適用され、例えば利用可能かもしれないトーナル特性が、例えば、フェードされてノイズになることがありおよび/または、顕著であることがあるスペクトルの形が、例えば、平坦化されることがあり、および/または、エネルギーが例えば減少されることがある。
以下に、実施の形態を詳細に説明する。
図2は、特定の実施の形態による復号モジュール110を示す。
図2の復号モジュール110は、復号済みスペクトル記憶モジュール330と、任意に、量子化済みスペクトル記憶モジュール310と、部分フレーム反復・再スケーリングモジュール320と、フェードアウト・符号スクランブル化モジュール340と、を含む。図2の具体的な復号モジュール110のこれらの(サブ)モジュールの固有の詳細は、図3~図5を参照して説明される。
図3~図5は、実施の形態による、LC3デコーダ(例示的に、本発明の方法において修正された最新の変換コーダとして使用される)のハイレベルの概要を提供する。特に、図3~図5は復号モジュール110のための様々な具体的な実施の形態を提供する。
ある実施の形態において、復号モジュール110は、例えば、オーディオ信号の量子化済みスペクトルを記憶するように構成された量子化済みスペクトル記憶モジュール310を含むことがあり、量子化済みスペクトル記憶モジュール310は、最後の非完全フレーム損失隠蔽量子化済みスペクトルを提供するように構成される。さらに、復号モジュール110は、例えば、オーディオ信号の復号済みスペクトルを記憶するように構成された復号済みスペクトル記憶モジュール330を含むことがあり、復号済みスペクトル記憶モジュール330は、最後の非完全フレーム損失隠蔽復号済みスペクトルを提供するように構成される。
図3は、クリーンチャンネルの復号のための実施の形態による、復号モジュール110の概要を示す。特に、図3は通常のデコーダ操作を示す。完全フレーム損失隠蔽ならびに部分的フレーム損失隠蔽のために必要な処理ブロックは、処理ブロック310および330である。
量子化済みスペクトル記憶モジュール310は、例えば、量子化済みスペクトルを記憶するように構成されることがある。量子化済みスペクトル記憶モジュール310は、部分的フレーム損失隠蔽の場合に再使用が可能になるようにするために、最後の非FFLC量子化済みスペクトルを記憶する。
復号済みスペクトル記憶モジュール330は、(例えば、復号済みスペクトルと称される)スペクトルを記憶するように構成される。この処理ブロックは、完全フレーム損失隠蔽の場合に再使用がk能なようにするために、最後の非FFLCスペクトルを記憶する。例えば、部分的フレーム損失隠蔽の間の再スケーリングにも使用することができる。
ある実施の形態において、復号モジュール110は、例えば、オーディオ信号の復号済みスペクトルを記憶するように構成された復号済みスペクトル記憶モジュール330を含むことがあり、復号済みスペクトル記憶モジュール330は、最後の非完全フレーム損失隠蔽復号済みスペクトルを提供するように構成される。さらに、復号モジュール110は、例えば、スペクトルのスペクトル線に対するフェードアウトおよび符号のスクランブル化を行うように構成されるフェードアウト・符号スクランブル化モジュール340を含む。
さらに、ある実施の形態によれば、復号モジュール110は、例えば、オーディオ信号の量子化済みスペクトルを記憶するように構成された量子化済みスペクトル記憶モジュール310を含むことがあり、量子化済みスペクトル記憶モジュール310は、最後の非完全フレーム損失隠蔽量子化済みスペクトルを提供するように構成される。さらに、復号モジュール110は、例えば、部分フレームの反復および再スケーリングを実行するように構成された部分フレーム反復・再スケーリングモジュール320を含むことがあり、部分フレーム反復・再スケーリングモジュール320は、復号モジュール110が復号することができなかったスペクトル線を追加することによってスペクトルを補足するように構成され、部分フレーム反復・再スケーリングモジュール320は、前記スペクトル線を再スケーリングするように構成される。
図4は、完全フレーム損失隠蔽のための実施の形態による、復号モジュール110の概要を示す。特に、図4は、完全フレーム損失隠蔽を実行するように構成された実施の形態を説明する。完全フレーム損失隠蔽のために必要な処理ブロックは、処理ブロック330および340である。処理ブロック330および340は、例えば、以下のタスクを持つことがある。
復号済みスペクトル記憶モジュール330は、例えば、スペクトル(例えば、ここでも復号済みスペクトルと称される)を記憶するように構成されることがある。この処理ブロック330は、最後の非FFLCスペクトルを提供する。
フェードアウト・符号スクランブル化モジュール340は、例えば、フェードアウトおよび符号のスクランブル化を実行するように構成される。この処理ブロックは、下記に説明するように、最後の非FFLCフレームのスペクトル線を処理することによってスペクトルを生成するように構成される。
図5は、部分的フレーム損失隠蔽のための実施の形態による、復号モジュール110の概要を説明する。
特に、図5は、部分的フレーム損失隠蔽の適用を示す。部分的フレーム損失隠蔽のために必要な処理ブロックは、処理ブロック310、320、330および340である。これらの処理ブロック310、320、330および340は、以下のタスクを持つ。
量子化済みスペクトル記憶モジュール310は、例えば、量子化済みスペクトルを記憶するように構成される。量子化済みスペクトル記憶モジュール310は、例えば、最後の非FFLC量子化スペクトルを提供するように構成されることがある。
部分フレーム反復・再スケーリングモジュール320は、例えば、部分フレームの反復および再スケーリングを実行するように構成されることがある。この処理ブロックは、例えば、復号することができなかったスペクトル線を追加することによって、スペクトルを補足するように構成されることがある。後に、それらのスペクトル線は、例えば、以下に説明されるように、再スケーリングされ、所定の閾値より下の値は0に量子化される。
復号済みスペクトル記憶モジュール330は、例えば、スペクトル(例えば、ここでも復号済みスペクトルと称される)を記憶するように構成されることがある。復号済みスペクトル記憶モジュール330は、例えば、再スケーリング係数を計算するために使用されうる、最後の非FFLCスペクトルを提供するように構成されることがある。
フェードアウト・符号スクランブル化モジュール340は、例えば、フェードアウトおよび符号のスクランブル化を実行するように構成される。フェードアウト・符号スクランブル化モジュール340は、例えば、部分的フレーム損失隠蔽によって前に提供されたスペクトル線を処理するように構成されることがある。下記に説明する。
以下、いくつかの実施の形態による、トーナル性に依存するエラー隠蔽をより詳細に説明する。
最初に、いくつかの実施の形態によるフェード関数が提供される。
以下に説明されるように、符号のスクランブル化および非線形の減衰のために実施されたフェード処理のために、1から特定の値(plc_start_inFrames)まで、特定の値(plc_end_inFrames)からゼロ(0)までの、そしてplc_start_inFramesとplc_end_inFramesとの間で1とゼロとの間(1>x>0)を線形的に減少する、後続の失われたフレームの数(nbLostFramesInRow)に依存する関数が、例えば、採用されることがある。
特定の実施の形態が、例えば、以下の通り実施されうる。
plc_duration_inFrames=plc_end_inFrames-plc_start_inFrames;
x=max(plc_start_inFrames、(min(nbLostFramesInRow、plc_end_inFrames)));
m=-1/plc_duration_inFrames;
b=-plc_end_inFrames;
linFuncStartStop=m*(x+b);
ここで、
plc_start_inFramesは、後続の失われたフレームの数であり、ここまでは、linFuncStartStopの値は1と等しい。
plc_end_inFramesは、後続の失われたフレームの数であり、ここからlinFuncStartStopの値は0と等しくなる。
linFuncStartStopは、フェード関数の値である。
開始の値と終わりの値とは、信号の特性(例えば、有声対無声)に依存して、および、フレーム損失隠蔽(例えば、PFLC対FFLC)に依存して、異なって選択される(PFLC=部分的フレーム損失隠蔽、FFLC=完全フレーム損失隠蔽)。
図6は、連続して失われたフレームの数(追って失われたフレームの数)に依存する、ある実施の形態によるフェード関数を示す。
特に、図6は、20msと60msとの間を線形的に減少するように構成されるフェード関数の一例を提供している。
以下に、いくつかの実施の形態による符号の操作をより詳細に説明する。
必要条件として、符号のスクランブル化のための閾値は、例えば、上に導出したように、フェード値(linFuncStartStop)に基づいて決定することができる。
randThreshold=-32768*linFuncStartStop
図7は、連続して失われたフレームの数(追って失われたフレームの数)に依存し、さらにフレーム長さに依存する、ある実施の形態による符号のスクランブル化のための閾値を示す。
特に、図7は、フェード関数を使う、連続的に失われたフレームの数に依存する閾値の一例を提供する。閾値0は50%の符号フリップに相当する一方、閾値-32768は0%の符号のフリップに相当する。
Figure 2024026178000007
この例において、seed(すなわち、ランダム値)は、32768と-32768との間を変化する。無声信号(pitch_present==0)については、符号逆転のための閾値はゼロであり、ひいては50%の確率となる。有声信号について、-32768(符号逆転の確率0%)とゼロ(符号逆転の確率50%)との間の可変閾値(randThreshold)が適用される。
以下、いくつかの実施の形態による振幅の操作をより詳細に説明する。
特定の実施の形態において、2つの減衰係数が、例えば以下に示すように、安定に関する尺度に依存して定義されうる。
slow=0.8+0.2*stabFac
fast=0.3+0.2*stabFac
ここで、stabFacは、FFLCの場合は最後のフレームと最後から2番目のフレームとの間、またはPFLCの場合は現在のフレームと最後のフレームとの間の安定性値を示す。
例えば、安定係数は、2つの信号、例えば現在の信号と過去の信号との間の類似度を表わす。安定係数は、例えば[0:1]に限定されることがある。安定係数1または1に近い安定係数は、例えば、両信号が非常に似ていることを意味し、安定係数0または0に近い安定係数は、例えば、両信号が非常に異なっていることを意味することがある。類似度は、例えば、2つのオーディオ信号のスペクトルの包絡線について計算されうる。
Figure 2024026178000008
いくつかの実施の形態において、stabFacは、例えば、FFLCに対してとPFLCに対してとで異なって使われることがある。つまり、FFLCについては安定性に応じて0と1との間の値に設定される一方、PFLCに対して1に設定されることがある。
その後、対応する累積減衰係数(それぞれのバースト損失の開始時に1で初期化された、cum_fading_slowおよびcum_fading_fast)が導出され、例えば、フレーム毎に以下のように変化することがある。
cum_fading_slow=cum_fading_slow*slow
cum_fading_fast=cum_fading_fast*fast
ここで、cum_fading_slowは、遅い累積減衰係数を示し、cum_fading_fastは、速い累積減衰係数を示す。
ある実施の形態において、蓄積は、例えば、FFLCについてのみ行われ、PFLCについては行われないことがある。
さらに、ある実施の形態によれば、第1の閾(ad_ThreshFac_start)および最後の閾(ad_ThreshFac_end)のための値を、例えば、定義することがある。いくつかの実施の形態において、これらの値は、例えば、ヒューリスティックに選択されることがある。通常、いずれの値も、例えば、1より大きく、第1の閾値は最後の閾値より大きい。これらの2つの閾制限に基づき、現在のフレーム(ad_threshFac)のための閾値は、例えば、上に導出したフェード値(linFuncStartStop)に基づいて決定することができる。
ad_ThreshFac_start=10;
ad_ThreshFac_end=1.2;
ad_threshFac=(ad_ThreshFac_start-ad_ThreshFac_end)*linFuncStartStop+ad_ThreshFac_end;
ここで、ad_ThreshFac_startは、より強い減衰が適用される、エネルギーを意味する第1の係数を示し、ad_ThreshFac_stopは、より強い減衰が適用される、エネルギーを意味する最後の係数を示す。
閾調整は、FFLCのためだけに行われ、PFLCのためには行われないこともある。この場合、閾は後続のフレームについては固定となる。
図8は、ある実施の形態による、連続して失われたフレームの数に依存し、さらにフレーム長さに依存するエネルギー閾係数を示す。
特に、図8は、フェード関数を使って、連続的に失われたフレームの数に依存する閾係数の一例を提供し、ここで閾係数は、20msと60msとの間で10から1.2まで減少する。
Figure 2024026178000009
elseパスにおいてnが導出されたことで、減衰曲線がより大きい値をより大きく、より小さい値をより小さく維持することが保証される。
図9は、累積減衰が適用される一例を示す。この例における可能な入力値は、0から1000との間である。n=0は受信したフレームを表し、ある種の参照をもたらす。この例において、初期の遅い減衰係数は0.9に設定され、初期の速い減衰係数は0.4に設定されている(stabFac=0.5)。2番目のフレームにおいてこれらの値の2乗が使用されており、以下同様であって、後続の曲線がより平坦になる。同時に、閾は、例えば、減少され、ひいては連続した曲線のねじれがさらに左に移動することがある。
Figure 2024026178000010
受信したフレームの間のスペクトル線の記憶および(部分的にまたは完全に)失われたフレームの間のスペクトル線の挿入は、一般に、ビットストリームにおいて提供された情報に基づくスペクトルの復号と時間領域への逆変換との間のどのような場所でも実行される。LC3を参照すると、例えばSNS復号(SNS=スペクトルノイズ整形)の前後、例えばTNS復号(TNS=時間ノイズ整形)の前後、例えばグローバルゲインの適用前後、および/または、例えばノイズ充填の前後に、特に実行されることがある。
好ましい位置の選択は、部分的または完全に失われたフレームについての追加情報が入手可能かどうかに応じても、変わってくる。部分的に失われたフレーム(部分的フレーム損失隠蔽)の場合、例えば、以降の信号処理工程のためのパラメータが利用可能であるため、信号処理の始まりに実行されることがある。、完全に失われたフレーム(完全フレーム損失隠蔽)の場合、例えば、以降の信号処理工程のためのパラメータが一切利用できないため、より後の段階で実行されることがある。しかし、例えば、この工程によって専用のスペクトル整形が可能になるため、それでもSNS復号の前に実行することもできる。
以下、いくつかの実施の形態による部分的フレーム損失隠蔽を、より詳細に説明する。
Figure 2024026178000011
Figure 2024026178000012
Figure 2024026178000013
Figure 2024026178000014
Figure 2024026178000015
Figure 2024026178000016
たとえいくつかの点が装置の文脈内で説明されていても、これらの点が、ブロックまたは装置が方法の工程または方法の工程の特徴に対応する、対応する方法の説明でもあることは明らかである。同様に、方法の工程の文脈において説明された点も、対応する装置の対応するブロックまたは品目または特徴の説明でもある。方法の工程の一部または全部は、例えば、マイクロプロセッサ、プログラム可能なコンピュータ、または電子回路などのハードウェア装置によって(または、ハードウェア装置を使って)実行することができる。いくつかの実施の形態において、最も重要な方法の工程の1つ以上が、そのような装置により実行される。
予定の実施要件によっては、本発明の実施の形態は、ハードウェアまたはソフトウェアで、あるいは少なくとも部分的にハードウェアまたはソフトウェアで実施されることがある。実施はデジタル記憶媒体、例えば、プログラム可能なコンピュータシステムと協働してそれぞれの方法が実行される(またはかかるプログラム可能なコンピュータシステムと協働可能な)電子的に読み取り可能な制御信号が記憶された、フロッピーディスク、DVD、ブルーレイ、CD、ROM、PROM、EPROM、EEPROMまたはフラッシュメモリを使って実行することができる。それゆえ、デジタル記憶媒体は、コンピュータ読み取り可能でありうる。
本発明によるいくつかの実施の形態は、電子的に読み取り可能な制御信号を有するデータキャリアで構成され、このデータキャリアは、本明細書に記載の方法の1つが実行されるように、プログラム可能なコンピュータシステムと協働することができる。
一般に、本発明の実施の形態は、プログラムコードを持つコンピュータプログラム製品として実施することができる。プログラムコードは、コンピュータプログラム製品がコンピュータ上で実行されるとき、方法のうちの1つを実行するように作動する。プログラムコードは、例えば、機械可読なキャリア上に記憶されることができる。
別の実施の形態は、機械可読なキャリア上に記憶された、ここに記載された方法のうちの1つを実行するためのコンピュータプログラムを含む。
すなわち、本発明の実施の形態は、従って、コンピュータプログラムがコンピュータ上で作動するときに、ここに記載された方法のうちの1つを実行するためのプログラムコードを持つコンピュータプログラムである。
本発明の方法の別の実施の形態は、従って、ここに記載された方法のうちの1つを実行するためのコンピュータプログラムが記録されたデータキャリア(またはデジタル記憶媒体、またはコンピュータ可読媒体)である。データキャリア、デジタル記憶媒体または記録されたメディアは典型的に、有形および/または非一時的である。
本発明の方法の別の実施の形態は、従って、ここに記載された方法のうちの1つを実行するためのコンピュータプログラムを表わすデータストリームまたは信号のシーケンスである。データストリームまたは信号のシーケンスは、データ通信接続、例えばインターネットを介して転送されるように構成されることがる。
別の実施の形態は、ここに記載された方法のうちの1つを実行するように構成または適合された処理手段、例えば、コンピュータまたはプログラム可能な論理デバイスを含む。
別の実施の形態は、ここに記載された方法のうちの1つを実行するためのコンピュータプログラムをインストールしたコンピュータを含む。
発明による別の実施の形態は、ここに記載された方法のうちの1つを実行するためのコンピュータプログラムを受信機に(例えば電子的または光学的に)転送するように構成された装置またはシステムを含む。受信機は、例えばコンピュータ、モバイルデバイス、メモリーデバイス等であっても良い。装置またはシステムは例えば、コンピュータプログラムを受信機に転送するためのファイルサーバーを含むことがある。
いくつかの実施の形態において、ここに記載された方法の機能のうちのいくつかまたは全てを実行するために、プログラム可能な論理デバイス(例えば、フィールドプログラマブルゲートアレイ)が使われることがある。いくつかの実施の形態において、フィールドプログラマバルゲートアレイは、ここに記載された方法のうちの1つを実行するために、マイクロプロセッサと協働することがある。一般に、方法は好ましくは、任意のハードウェア装置によって実行される。
ここに記載された装置は、ハードウェア装置を使用して、またはコンピュータを使用して、またはハードウェア装置とコンピュータとの組合せを使用して実施されることがある。
ここに説明された方法は、ハードウェア装置を使うこと、またはコンピュータを使うこと、またはハードウェア装置の結合とコンピュータを使うことによって実施される。
上記に記載した実施の形態は、本発明の原則を単に示すに過ぎない。ここに記載された構成および詳細の修正および変形は当業者に明白であると理解される。従って、当面の請求項の範囲によってのみ制限されることを意図するものであり、実施の形態の記載と説明によってここに表される特定の詳細によって制限されることを意図するものではない。

Claims (40)

  1. オーディオ信号を再構築するように、現在のフレームをデコードするためのデコーダ(100)であって、前記オーディオ信号は、現在のフレーム内でエンコードされ、前記現在のフレームは、現在のビットストリームペイロードを含み、前記現在のビットストリームペイロードは、複数のペイロードビットを含み、前記複数のペイロードビットは、前記オーディオ信号のスペクトルの複数のスペクトル線をエンコードし、前記ペイロードビットのそれぞれは、前記現在のビットストリームペイロード内の位置を表し、
    前記デコーダ(100)は、
    前記オーディオ信号を再構築するように構成されたデコード化モジュール(110)と、
    前記オーディオ信号を出力するように構成された出力インタフェース(120)と、を含み、
    前記デコード化モジュール(110)は、エラー隠しモードを含み、仮に前記デコード化モジュール(110)が前記エラー隠しモードにあるならば、前記デコード化モジュール(110)は、閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのそれらのスペクトル線のためのエラー隠しを実施することによって、前記オーディオ信号を再構築するように構成され、および/または、
    仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、前記デコード化モジュール(110)は、前記現在のフレームに先行している前のフレームの前のビットストリームペイロードが、色調または和声の前記オーディオ信号の信号構成要素をエンコードするかどうかに依存する方法で、エラー隠しを実施するように構成される、デコーダ(100)。
  2. 前記エラー隠しモードは、部分的なフレーム損失隠しモードであり、仮に前記デコード化モジュール(110)が前記部分的なフレーム損失隠しモードにあるならば、前記デコード化モジュール(110)は、
    前記閾周波数より小さいか、または等しい周波数を表す、前記スペクトルの前記複数のスペクトル線のうちの1つ以上の第1のスペクトル線のためのエラー隠しを実施しないで、前記オーディオ信号を再構築するように構成され、ここで、前記1つ以上の第1のスペクトル線は、前記複数のペイロードビットのうちの1つ以上の第1のグループによってエンコードされている、そして、
    前記閾周波数より大きい周波数を表す、前記スペクトルの前記複数のスペクトル線のうちの1つ以上の第2のスペクトル線のためのエラー隠しを実施することによって、前記オーディオ信号を再構築するように構成され、ここで、前記1つ以上の第2のスペクトル線は、前記複数のペイロードビットのうちの1つ以上の第2のグループによってエンコードされている、請求項1に記載のデコーダ(100)。
  3. 前記デコード化モジュール(110)は、前記現在のフレームが、前記閾周波数より小さいか、または等しい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第1のスペクトル線をエンコードする破損されたビットを少しも含まないかどうかを検出するように構成され、
    前記デコード化モジュール(110)は、前記現在のフレームが、前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線をエンコードする1つ以上の破損されたビットを含むかどうかを検出するように構成され、
    前記1つ以上の破損されたビットは、歪められるか、または歪められそうな1つ以上の前記ペイロードビットであり、
    仮に前記現在のフレームが、前記閾周波数より小さいか、または等しい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第1のスペクトル線をエンコードする破損されたビットを少しも含まないならば、かつ、仮に前記現在のフレームが、前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線をエンコードする前記1つ以上の破損されたビットを含むならば、前記デコード化モジュール(110)は、前記閾周波数より大きい前記スペクトルのうちの前記1つ以上の第2のスペクトル線のためのエラー隠しを実施することによって、前記部分的なフレーム損失隠しモードにおいてエラー隠しを実施するように構成される、請求項2に記載のデコーダ(100)。
  4. 仮に前記現在のフレームが、前記閾周波数より小さいか、または等しい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第1のスペクトル線をエンコードする破損されたビットを少しも含まないならば、かつ、仮に前記現在のフレームが、前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線をエンコードする前記1つ以上の破損されたビットを含むならば、前記デコード化モジュール(110)は、前記閾周波数より小さいか、または等しい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第1のスペクトル線をエンコードする、前記1つ以上の前記複数のペイロードビットの前記第1のグループをデコード化することによって、前記オーディオ信号を再構築するように構成される、請求項3に記載のデコーダ(100)。
  5. 前記デコード化モジュール(110)は、前記現在のフレームが失われるかどうかを検出するように構成され、
    仮に前記デコーダ(100)が、前記現在のフレームが失われることを検出したならば、前記デコード化モジュール(110)は、
    前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線のためのエラー隠しを実施することによって、および、
    前記閾周波数より小さいか、または等しい前記オーディオ信号の前記スペクトルのうちの1つ以上の第1の周波数のための前記1つ以上の第1のスペクトル線をエンコードする、前記1つ以上の前記複数のペイロードビットの前記第1のグループを、エラー隠しを実施しないでデコードすることによって、前記オーディオ信号を再構築するように構成され、
    ここで、前記1つ以上の前記複数のペイロードビットの前記第1のグループは、前記現在のフレームと異なる冗長なフレームの1つ以上のペイロードビットである、請求項2~請求項4のいずれか1つに記載のデコーダ(100)。
  6. 仮に、前記デコード化モジュール(110)が、完全なフレーム損失隠しモードにおいてエラー隠しを実施するように構成されるならば、前記デコード化モジュール(110)は、前記スペクトルの全てのスペクトル線のためのエラー隠しを実施するように構成される、請求項2~請求項5のいずれか1つに記載のデコーダ(100)。
  7. 前記複数のペイロードビットは、複数の現在のペイロードビットであり、
    仮に、前記デコード化モジュール(110)が、前記部分的なフレーム損失隠しモードにあるならば、前記デコード化モジュール(110)は、前記前のフレームの前記前のビットストリームペイロードの1つ以上前のペイロードビットによってエンコードされた1つ以上の記憶されたスペクトル線を使って、前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線のためにエラー隠しを実施するように構成される、請求項6に記載のデコーダ(100)。
  8. 前記スペクトルは、現在の量子化されたスペクトルであり、
    仮に、前記デコード化モジュール(110)が、前記部分的なフレーム損失隠しモードにおいてエラー隠しを実施するならば、前記デコード化モジュール(110)は、前記現在の量子化されたスペクトルの1つ以上の中間的なスペクトル線を得るために、前記閾周波数より大きい周波数を表す、前記オーディオ信号の前記スペクトルのうちの前記1つ以上の第2のスペクトル線のためにエラー隠しを実施するように構成され、前記デコード化モジュール(110)は、前記オーディオ信号を再構築するために、再スケーリングファクターを使用して前記1つ以上の中間的なスペクトル線を再縮尺するように構成される、請求項7に記載のデコーダ(100)。
  9. 前記デコード化モジュール(110)は、
    前記現在のビットストリームペイロード内でエンコードされるグローバル(全域にわたる)ゲイン、および、
    前記前のビットストリームペイロード内でエンコードされるグローバルゲイン、および、
    前記前のフレームの前の量子化されたスペクトルのエネルギー、および、前記前のフレームの前のデコードされたスペクトルのエネルギー、および、
    前記現在のフレームの前記現在の量子化されたスペクトルのエネルギーの少なくとも1つに依存して、前記再スケーリングファクターを決定するように構成される、請求項8に記載のデコーダ(100)。
  10. 前記デコード化モジュール(110)は、
    エラー隠しを実施しないで再構築できない第1のスペクトル貯蔵箱から開始して前記スペクトルのトップにまでアップする、前記前のフレームの前記前のデコード化されたスペクトルのスペクトル貯蔵箱の平均エネルギーが、ゼロから開始してエラー隠しを実施しないで再構築できる最後のスペクトル貯蔵箱にまでアップする、前記前のフレームの前記前のデコード化されたスペクトルのスペクトル貯蔵箱の平均エネルギーより大きい、または等しいかどうかに依存して、または、
    ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記現在のフレームの前記現在の量子化されたスペクトルのスペクトル貯蔵箱のエネルギーが、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記前のフレームの前記前の量子化されたスペクトルのスペクトル貯蔵箱のエネルギーより大きい、または等しいかどうかに依存して、
    前記再スケーリングファクターを決定するように構成される、請求項8または請求項9に記載のデコーダ(100)。
  11. 仮に、エラー隠しを実施しないで再構築できない前記第1のスペクトル貯蔵箱から開始して前記スペクトルのトップにまでアップする、前記前のフレームの前記前のデコード化されたスペクトルの前記スペクトル貯蔵箱の前記平均エネルギーが、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記前のフレームの前記前のデコード化されたスペクトルの前記スペクトル貯蔵箱の前記平均エネルギーより小さいならば、および、
    仮に、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記現在のフレームの前記現在の量子化されたスペクトルの前記スペクトル貯蔵箱のエネルギーが、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記前のフレームの前記前の量子化されたスペクトルの前記スペクトル貯蔵箱のエネルギーより小さいならば、
    前記デコード化モジュール(110)は、前記再スケーリングファクターが、前記現在のフレームのゲインファクターの平方と乗算された、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記現在の量子化されたスペクトルの前記スペクトル貯蔵箱のエネルギーと、前記前のフレームのゲインファクターの平方と乗算された、ゼロから開始してエラー隠しを実施しないで再構築できる前記最後のスペクトル貯蔵箱にまでアップする、前記前の量子化されたスペクトルの前記スペクトル貯蔵箱のエネルギーとの比率の平方根に等しいように、前記再スケーリングファクターを決定するように構成される、請求項10に記載のデコーダ(100)。
  12. 前記デコード化モジュール(110)は、グローバルゲイン再スケーリングファクターに依存する、全体の再スケーリングファクターである前記再スケーリングファクターを決定するように構成され、
    前記デコード化モジュール(110)は、facgg=ggprev/ggに従って前記グローバルゲイン再スケーリングファクターを決定するように構成され、
    ggは、前記現在のビットストリームペイロード内でエンコードされる前記グローバルゲインを示し、
    ggprevは、前記前のビットストリームペイロード内でエンコードされる前記グローバルゲインを示し、
    facggは、前記グローバルゲイン再スケーリングファクターである、請求項9~請求項11のいずれか1つに記載のデコーダ(100)。
  13. Figure 2024026178000017
  14. Figure 2024026178000018
  15. Figure 2024026178000019
  16. 仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、前記デコード化モジュール(110)は、前記オーディオ信号の前のスペクトルの複数の符号を使ってエラー隠しを実施することによって、前記オーディオ信号の現在のスペクトルを再構築するように構成され、前記複数の符号は前記前のフレーム内でエンコードされ、前記デコード化モジュール(110)は、前記前のフレームが、色調または和声である信号構成要素をエンコードするかどうかに依存する方法で、エラー隠しを実施するように構成される、請求項1~請求項15のいずれか1つに記載のデコーダ(100)。
  17. 前記前のフレームは、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされた、最後の受信されたフレームであり、または、
    前記前のフレームは、完全なフレーム損失隠しモードにおいて、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされた、最後の受信されたフレームであり、または、
    前記前のフレームは、部分的なフレーム損失隠しモードまたは完全なフレーム損失隠しモードにおいて、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされた、最後の受信されたフレームである、請求項16に記載のデコーダ(100)。
  18. 仮にエラー隠しが前記デコード化モジュール(110)によって実施され、かつ、前記前のフレームの前記前のビットストリームペイロードが、色調または和声である信号構成要素をエンコードするならば、前記デコード化モジュール(110)は、前記現在のスペクトルを再構築するために、前記前のスペクトルの前記複数の符号のうちの1つ以上の符号をフリップするように構成され、前記現在のスペクトルを再構築するために前記デコード化モジュール(110)によってフリップされるべき前記前のスペクトルの前記複数の符号のうちの1つの符号のための確率を指示する、パーセンテージ値pは、0%≦p≦50%であり、前記デコード化モジュール(110)は、前記パーセンテージ値pを決定するように構成される、請求項16または請求項17に記載のデコーダ(100)。
  19. 前記デコード化モジュール(110)は、後続のフレームの数に依存するパーセンテージ値pを増加させるように構成され、
    前記後続のフレームの数は、いくつの後続の部分的にまたは完全に失われたフレームのために、エラー隠しが前記デコード化モジュール(110)によって実施されるかを指示する、または、前記後続のフレームの数は、いくつの後続のフレームのために、特定のエラー隠しモードにおいて、エラー隠しが前記デコード化モジュール(110)によって実施されるかを指示する、請求項18に記載のデコーダ(100)。
  20. 前記デコード化モジュール(110)は、前記後続のフレームの数に依存する関数に依存しているパーセンテージ値pを決定するように構成され、前記後続のフレームの数は前記関数の独立変数である、請求項19に記載のデコーダ(100)。
  21. 前記デコード化モジュール(110)は、
    仮に前記後続のフレームの数が第1の閾値より小さいならば、前記パーセンテージ値pが0%であるように、および、
    仮に前記後続のフレームの数が、前記第1の閾値より大きくまたは等しく、かつ、第2の閾値より小さいならば、前記パーセンテージ値pが0%≦p≦50%であるように、および、
    仮に前記後続のフレームの数が前記第2の閾値より大きいならば、前記パーセンテージ値pが50%であるように、前記パーセンテージ値pを決定するように構成される、請求項20に記載のデコーダ(100)。
  22. 前記デコード化モジュール(110)は、前記パーセンテージ値pが、前記後続のフレームの数に依存している前記第1の閾値と前記第2の閾値との間の範囲で、線形に増加するように、前記パーセンテージ値pを決定するように構成される、請求項21に記載のデコーダ(100)。
  23. 仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、かつ、仮に前記前のフレームの前記前のビットストリームペイロードが、色調または和声である信号構成要素をエンコードしないならば、前記デコード化モジュール(110)は、前記現在のスペクトルを再構築するために、前記前のスペクトルの前記複数の符号の50%をフリップするように構成される、請求項18~請求項22のいずれか1つに記載のデコーダ(100)。
  24. 仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、前記デコード化モジュール(110)は、前記前のフレームが、色調または和声である信号構成要素をエンコードするかどうかに依存する、前記オーディオ信号の前記前のスペクトルの複数の振幅を使ってエラー隠しを実施することによって、前記オーディオ信号の前記現在のスペクトルを再構築するように構成され、前記複数の振幅は、前記前のフレーム内でエンコードされる、請求項1~請求項23のいずれか1つに記載のデコーダ(100)。
  25. 仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、前記デコード化モジュール(110)は、前記現在のスペクトルを再構築するために、非線形の減衰特性に従って前記前のスペクトルの前記複数の振幅を減衰するように構成され、前記非線形の減衰特性は、前記前のフレームが色調または和声である信号構成要素をエンコードするかどうかに依存する、請求項24に記載のデコーダ(100)。
  26. 仮にエラー隠しが前記デコード化モジュール(110)によって実施されるならば、かつ、仮に前記前のフレームの前記前のビットストリームペイロードが、色調または和声である信号構成要素をエンコードするならば、前記デコード化モジュール(110)は、安定性ファクターに依存する前記前のスペクトルの前記複数の振幅を減衰するように構成され、前記安定性ファクターは、前記現在のスペクトルと前記前のスペクトルとの間の類似点を指示し、または、前記安定性ファクターは、前記前のスペクトルと前記前のフレームに先行している前の前のフレームの前の前のスペクトルとの間の類似点を指示する、請求項24または請求項25に記載のデコーダ(100)。
  27. 前記前の前のフレームは、前記前のフレームの前の、最後の受信されたフレームであり、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされている、または、
    前記前の前のフレームは、前記前のフレームの前の、最後の受信されたフレームであり、完全なフレーム損失隠しモードにおいて、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされている、または、
    前記前の前のフレームは、前記前のフレームの前の、最後の受信されたフレームであり、部分的なフレーム損失隠しモードまたは完全なフレーム損失隠しモードにおいて、エラー隠しを実施しないで前記デコード化モジュール(110)によってデコードされている、請求項26に記載のデコーダ(100)。
  28. 仮に前記デコード化モジュール(110)が、部分的なフレーム損失隠しを実施するようにセットされるならば、前記安定性ファクターは、前記現在のスペクトルと前記前のスペクトルとの間の前記類似点を指示し、
    仮に前記デコード化モジュール(110)が、完全なフレーム損失隠しを実施するようにセットされるならば、前記安定性ファクターは、前記前のスペクトルと前記前の前のスペクトルとの間の前記類似点を指示する、請求項26または請求項27に記載のデコーダ(100)。
  29. 前記デコード化モジュール(110)は、前記前のスペクトルのスペクトル貯蔵箱のエネルギーを決定するように構成され、
    前記デコード化モジュール(110)は、前記スペクトル貯蔵箱の前記エネルギーが前記エネルギー閾より小さいかどうかを決定するように構成され、
    仮に前記エネルギーが前記エネルギー閾より小さいならば、前記デコード化モジュール(110)は、第1のフェードファクターを持つ前記スペクトル貯蔵箱に割り当てられている前記複数の振幅のうちの1つの振幅を減衰するように構成され、
    仮に前記エネルギーが前記エネルギー閾より大きいか、または等しいならば、前記デコード化モジュール(110)は、前記第1のフェードファクターより小さい第2のフェードファクターを持つ前記スペクトル貯蔵箱に割り当てられている前記複数の振幅のうちの前記振幅を減衰するように構成され、
    前記デコード化モジュール(110)は、前記複数の振幅のうちの1つの振幅の減衰のために、より小さいフェードファクターを使うことによって、前記複数の振幅のうちの前記1つの振幅の前記減衰が増加するように、減衰を実施するように構成される、請求項26~請求項28のいずれか1つに記載のデコーダ(100)。
  30. 前記デコード化モジュール(110)は、前記前のスペクトルの複数のスペクトル貯蔵箱を含むスペクトル帯域のエネルギーを決定するように構成され、
    前記デコード化モジュール(110)は、前記スペクトル帯域の前記エネルギーがエネルギー閾より小さいかどうかを決定するように構成され、
    仮に前記エネルギーが前記エネルギー閾より小さいならば、前記デコード化モジュール(110)は、第1のフェードファクターを持つ前記スペクトル帯域の前記スペクトル貯蔵箱に割り当てられている前記複数の振幅のうちの1つの振幅を減衰するように構成され、
    仮に前記エネルギーが前記エネルギー閾より大きいか、または等しいならば、前記デコード化モジュール(110)は、前記第1のフェードファクターより小さい第2のフェードファクターを持つ前記スペクトル帯域の前記スペクトル貯蔵箱に割り当てられている前記複数の振幅のうちの前記振幅を減衰するように構成され、
    前記デコード化モジュール(110)は、前記複数の振幅のうちの1つの振幅の減衰のために、より小さいフェードファクターを使うことによって、前記複数の振幅のうちの前記1つの振幅の前記減衰が増加するように、減衰を実施するように構成される、請求項26~請求項28のいずれか1つに記載のデコーダ(100)。
  31. 前記デコード化モジュール(110)は、前記後続のフレームの数に依存して、前記第1のフェードファクターがより小さくなるように、前記第1のフェードファクターを決定するように構成され、そして、
    前記デコード化モジュール(110)は、前記後続のフレームの数に依存して、前記第2のフェードファクターがより小さくなるように、前記第2のフェードファクターを決定するように構成される、請求項30に記載し、さらに請求項19に依存するデコーダ(100)。
  32. 前記デコード化モジュール(110)は、前記第1のフェードファクターおよび前記第2のフェードファクターを決定するように構成され、従って、cum_fading_slow=1、および、cum_fading_fast=1であり、
    仮に前記現在のフレームが前記後続のフレームの間の第1のフレームであるならば、かつ、従って、仮に前記現在のフレームが、前記後続のフレームの間の前記第1のフレームに続いている前記フレームのうちの1つであるならば、前記第1のフェードファクターおよび前記第2のフェードファクターは、
    cum_fading_slow=cum_fading_slow*slow、
    cum_fading_fast=cum_fading_fast*fast
    に従って、前記後続のフレームの数に依存して決定され、
    前記式の右側のcum_fading_slowは、前記前のフレームの前記第1のフェードファクターであり、
    前記式の左側のcum_fading_slowは、前記現在のフレームの前記第1のフェードファクターであり、
    前記式の右側のcum_fading_fastは、前記前のフレームの前記第2のフェードファクターであり、
    前記式の左側のcum_fading_fastは、前記現在のフレームの前記第2のフェードファクターであり、
    1>slow>fast>0である、請求項31に記載のデコーダ(100)。
  33. 1>slow>fast>0.3である、請求項32に記載のデコーダ(100)。
  34. 前記デコード化モジュール(110)は、
    仮に前記後続のフレームの数が、第3の閾値より小さいならば、前記エネルギー閾は、第1のエネルギー値に等しいように、および、
    仮に前記後続のフレームの数が、前記第3の閾値より大きいか、または等しく、かつ、第4の閾値より小さいならば、前記エネルギー閾は、前記第1のエネルギー値より小さく、かつ、第2のエネルギー値より大きいように、および、
    仮に前記後続のフレームの数が、前記第4の閾値より大きいならば、前記エネルギー閾は、前記第2のエネルギー値に等しいように、
    前記エネルギー閾を決定するように構成される、請求項29~請求項33のいずれか1つに記載し、さらに請求項19に依存するデコーダ(100)。
  35. 前記デコード化モジュール(110)は、前記エネルギー閾が、前記後続のフレームの数に依存する前記第3の閾値と前記第4の閾値との間の範囲で線形的に減少するように、前記エネルギー閾を決定するように構成される、請求項34に記載のデコーダ(100)。
  36. 前記デコード化モジュール(110)は、前記オーディオ信号のデコード化されたスペクトルを記憶するために構成されたデコード化スペクトル記憶モジュール(330)を含み、前記デコード化スペクトル記憶モジュール(330)は、最後の非完全なフレーム損失隠しデコード化スペクトルを提供するように構成され、
    前記デコード化モジュール(110)は、前記スペクトルのスペクトル線についてフェードアウトおよび符号のスクランブル化のために構成されたフェードアウトおよび符号のスクランブル化モジュール(340)を含む、請求項1に記載の、または、請求項15~請求項35のいずれか1つに記載のデコーダ(100)。
  37. 前記デコード化モジュール(110)は、前記オーディオ信号の量子化されたスペクトルを記憶するために構成された量子化スペクトル記憶モジュール(310)を含み、前記量子化スペクトル記憶モジュール(310)は、最後の非完全なフレーム損失隠し量子化スペクトルを提供するように構成され、
    前記デコード化モジュール(110)は、部分フレームの反復および再スケーリングのために構成された部分フレーム反復および再スケーリングモジュール(320)を含み、前記部分フレーム反復および再スケーリングモジュール(320)は、前記デコード化モジュール(110)によってデコード化できなかった、スペクトル線を追加することによって前記スペクトルを補足するように構成され、前記部分フレーム反復および再スケーリングモジュール(320)は、前記スペクトル線を再スケールするように構成される、請求項36に記載のデコーダ(100)。
  38. 前記デコード化モジュール(110)は、前記オーディオ信号の量子化されたスペクトルを記憶するために構成された量子化スペクトル記憶モジュール(310)を含み、前記量子化スペクトル記憶モジュール(310)は、最後の非完全なフレーム損失隠し量子化スペクトルを提供するように構成され、
    前記デコード化モジュール(110)は、前記オーディオ信号のデコード化されたスペクトルを記憶するために構成されたデコード化スペクトル記憶モジュール(330)を含み、前記デコード化スペクトル記憶モジュール(330)は、最後の非完全なフレーム損失隠しデコード化スペクトルを提供するように構成される、請求項2~請求項14のいずれか1つに記載のデコーダ(100)。
  39. オーディオ信号を再構築するように、現在のフレームをデコード化するための方法であって、前記オーディオ信号は、現在のフレーム内でエンコードされ、前記現在のフレームは、現在のビットストリームペイロードを含み、前記現在のビットストリームペイロードは、複数のペイロードビットを含み、前記複数のペイロードビットは、前記オーディオ信号のスペクトルの複数のスペクトル線をエンコードし、前記ペイロードビットのそれぞれは、前記現在のビットストリームペイロード内の位置を表し、
    前記方法は、前記オーディオ信号を再構築すること、および、前記オーディオ信号を出力することを含み、
    エラー隠しモードにおいて、前記オーディオ信号を再構築することは、閾周波数より大きい周波数を表している前記オーディオ信号のスペクトルのそれらのスペクトル線のためのエラー隠しを実施することによって、実施され、および/または、
    仮にエラー隠しが実施されるならば、エラー隠しは、前記現在のフレームに先行している前のフレームの前のビットストリームペイロードが、色調または和声の前記オーディオ信号の信号構成要素をエンコードするかどうかに依存する方法で実施される、方法。
  40. コンピュータまたは信号プロセッサ上において実行されるとき、請求項39の方法を実施するためのコンピュータプログラム。
JP2023199977A 2019-02-13 2023-11-27 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法 Pending JP2024026178A (ja)

Applications Claiming Priority (16)

Application Number Priority Date Filing Date Title
EP19156997.9 2019-02-13
EP19157042.3 2019-02-13
EP19157036.5 2019-02-13
EP19157047 2019-02-13
EP19157047.2 2019-02-13
EP19157036 2019-02-13
EP19156997.9A EP3697005A1 (en) 2019-02-13 2019-02-13 Multi-mode channel coding with mode specific coloration sequences
EP19157042 2019-02-13
EPPCT/EP2019/065209 2019-06-11
PCT/EP2019/065172 WO2020164751A1 (en) 2019-02-13 2019-06-11 Decoder and decoding method for lc3 concealment including full frame loss concealment and partial frame loss concealment
PCT/EP2019/065209 WO2020164753A1 (en) 2019-02-13 2019-06-11 Decoder and decoding method selecting an error concealment mode, and encoder and encoding method
PCT/EP2019/065205 WO2020164752A1 (en) 2019-02-13 2019-06-11 Audio transmitter processor, audio receiver processor and related methods and computer programs
EPPCT/EP2019/065205 2019-06-11
EPPCT/EP2019/065172 2019-06-11
PCT/EP2020/053620 WO2020165265A1 (en) 2019-02-13 2020-02-12 Decoder and decoding method for lc3 concealment including full frame loss concealment and partial frame loss concealment
JP2021547397A JP7472154B2 (ja) 2019-02-13 2020-02-12 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021547397A Division JP7472154B2 (ja) 2019-02-13 2020-02-12 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法

Publications (2)

Publication Number Publication Date
JP2024026178A true JP2024026178A (ja) 2024-02-28
JP2024026178A5 JP2024026178A5 (ja) 2024-06-27

Family

ID=66776368

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2021547397A Active JP7472154B2 (ja) 2019-02-13 2020-02-12 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法
JP2021547398A Active JP7358490B2 (ja) 2019-02-13 2020-02-12 エラー隠蔽モードを選択するデコーダおよび復号方法、ならびに、エンコーダおよび符号化方法
JP2021547400A Active JP7348297B2 (ja) 2019-02-13 2020-02-12 オーディオ送信プロセッサ、オーディオ受信プロセッサ、および関連方法ならびにコンピュータプログラム
JP2021547399A Pending JP2022521487A (ja) 2019-02-13 2020-02-12 マルチモードチャンネル符号化
JP2023112340A Pending JP2023145493A (ja) 2019-02-13 2023-07-07 マルチモードチャンネル符号化
JP2023145005A Pending JP2023175750A (ja) 2019-02-13 2023-09-07 オーディオ送信プロセッサ、オーディオ受信プロセッサ、および関連方法ならびにコンピュータプログラム
JP2023199977A Pending JP2024026178A (ja) 2019-02-13 2023-11-27 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法

Family Applications Before (6)

Application Number Title Priority Date Filing Date
JP2021547397A Active JP7472154B2 (ja) 2019-02-13 2020-02-12 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法
JP2021547398A Active JP7358490B2 (ja) 2019-02-13 2020-02-12 エラー隠蔽モードを選択するデコーダおよび復号方法、ならびに、エンコーダおよび符号化方法
JP2021547400A Active JP7348297B2 (ja) 2019-02-13 2020-02-12 オーディオ送信プロセッサ、オーディオ受信プロセッサ、および関連方法ならびにコンピュータプログラム
JP2021547399A Pending JP2022521487A (ja) 2019-02-13 2020-02-12 マルチモードチャンネル符号化
JP2023112340A Pending JP2023145493A (ja) 2019-02-13 2023-07-07 マルチモードチャンネル符号化
JP2023145005A Pending JP2023175750A (ja) 2019-02-13 2023-09-07 オーディオ送信プロセッサ、オーディオ受信プロセッサ、および関連方法ならびにコンピュータプログラム

Country Status (13)

Country Link
US (6) US20210366498A1 (ja)
EP (7) EP4239924A3 (ja)
JP (7) JP7472154B2 (ja)
KR (7) KR102640740B1 (ja)
CN (4) CN113491080B (ja)
AU (8) AU2020220383C1 (ja)
BR (4) BR112021015608A2 (ja)
CA (7) CA3128781A1 (ja)
MX (4) MX2021009733A (ja)
SG (4) SG11202108537YA (ja)
TW (4) TWI785309B (ja)
WO (3) WO2020164751A1 (ja)
ZA (4) ZA202105719B (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10990919B2 (en) 2017-03-27 2021-04-27 Clearpath Robotics Inc. Systems and methods for autonomous lineside parts delivery to an assembly line process
CN112151044B (zh) * 2020-09-23 2024-06-11 北京百瑞互联技术股份有限公司 在lc3音频编码器中自动调节蓝牙播放设备频响曲线的方法、装置及存储介质
CN112735446B (zh) * 2020-12-30 2022-05-17 北京百瑞互联技术有限公司 在lc3音频码流中添加额外信息的方法、系统及介质
US12014068B2 (en) * 2021-04-27 2024-06-18 Microchip Technology Inc. System and method for double data rate (DDR) chip-kill recovery
CN112992160B (zh) * 2021-05-08 2021-07-27 北京百瑞互联技术有限公司 一种音频错误隐藏方法及装置
US11934696B2 (en) 2021-05-18 2024-03-19 Microchip Technology Inc. Machine learning assisted quality of service (QoS) for solid state drives
US20230326473A1 (en) * 2022-04-08 2023-10-12 Digital Voice Systems, Inc. Tone Frame Detector for Digital Speech

Family Cites Families (109)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL8402411A (nl) * 1984-08-02 1986-03-03 Philips Nv Inrichting voor het korrigeren en maskeren van fouten in een informatiestroom, en weergeeftoestel voor het weergeven van beeld en/of geluid voorzien van zo een inrichting.
DE69126565T2 (de) * 1990-04-17 1998-01-02 Matsushita Electric Ind Co Ltd Verfahren zur Übertragung von Kodes mit variabler Länge
JP2998254B2 (ja) * 1990-04-17 2000-01-11 松下電器産業株式会社 可変長符号化データの伝送方法
US5230003A (en) * 1991-02-08 1993-07-20 Ericsson-Ge Mobile Communications Holding, Inc. Decoding system for distinguishing different types of convolutionally-encoded signals
JP2746033B2 (ja) 1992-12-24 1998-04-28 日本電気株式会社 音声復号化装置
JP3171973B2 (ja) * 1993-01-07 2001-06-04 株式会社東芝 音声符号化の誤り制御方法
JP3328093B2 (ja) 1994-07-12 2002-09-24 三菱電機株式会社 エラー訂正装置
US6104754A (en) 1995-03-15 2000-08-15 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems, and variable-length coding and/or decoding system
EP1802135A3 (en) * 1995-03-15 2008-11-12 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems
JP2003289539A (ja) * 1995-03-15 2003-10-10 Toshiba Corp 動画像符号化装置および方法
KR100551001B1 (ko) * 1995-09-22 2006-07-06 퍼시픽 커뮤니케이션 싸이언스 인코포레이티드 복수의코드율을갖는셀룰러통신시스템에서송신성능을개선하기위한방법및시스템
US6415398B1 (en) * 1995-09-29 2002-07-02 Kabushiki Kaisha Toshiba Coding system and decoding system
GB2311699B (en) * 1996-03-29 2000-09-20 Nokia Mobile Phones Ltd Method and apparatus for digital communication
JP3583551B2 (ja) * 1996-07-01 2004-11-04 松下電器産業株式会社 誤り補償装置
JPH10233692A (ja) * 1997-01-16 1998-09-02 Sony Corp オーディオ信号符号化装置および符号化方法並びにオーディオ信号復号装置および復号方法
JP3184868B2 (ja) * 1997-06-05 2001-07-09 株式会社日立製作所 Webページの真正性確認システム
US6279133B1 (en) 1997-12-31 2001-08-21 Kawasaki Steel Corporation Method and apparatus for significantly improving the reliability of multilevel memory architecture
US6405338B1 (en) * 1998-02-11 2002-06-11 Lucent Technologies Inc. Unequal error protection for perceptual audio coders
US6256487B1 (en) 1998-09-01 2001-07-03 Telefonaktiebolaget Lm Ericsson (Publ) Multiple mode transmitter using multiple speech/channel coding modes wherein the coding mode is conveyed to the receiver with the transmitted signal
JP2000123083A (ja) * 1998-10-15 2000-04-28 Sony Corp 情報提供システムおよび方法、並びに提供媒体
US6975254B1 (en) * 1998-12-28 2005-12-13 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Methods and devices for coding or decoding an audio signal or bit stream
DE19907728C2 (de) * 1999-02-23 2001-03-01 Fraunhofer Ges Forschung Vorrichtung und Verfahren zum Erzeugen eines Datenstroms und Vorrichtung und Verfahren zum Lesen eines Datenstroms
FI107676B (fi) * 1999-06-21 2001-09-14 Nokia Mobile Phones Ltd Menetelmä ja järjestely tietyn signaalinkäsittelymetodin käyttämiseksi informaation välittämiseen
US6570509B2 (en) * 2000-03-03 2003-05-27 Motorola, Inc. Method and system for encoding to mitigate decoding errors in a receiver
FR2813722B1 (fr) 2000-09-05 2003-01-24 France Telecom Procede et dispositif de dissimulation d'erreurs et systeme de transmission comportant un tel dispositif
EP1199709A1 (en) * 2000-10-20 2002-04-24 Telefonaktiebolaget Lm Ericsson Error Concealment in relation to decoding of encoded acoustic signals
US6810078B2 (en) * 2000-12-08 2004-10-26 Prairiecomm, Inc. Blind rate determination
WO2002071639A1 (en) 2001-03-05 2002-09-12 Intervideo, Inc. Systems and methods for error resilient encoding
US6694474B2 (en) 2001-03-22 2004-02-17 Agere Systems Inc. Channel coding with unequal error protection for multi-mode source coded information
US7146553B2 (en) * 2001-11-21 2006-12-05 Infinera Corporation Error correction improvement for concatenated codes
JP3776431B2 (ja) * 2002-01-31 2006-05-17 三菱電機株式会社 情報通知方法、移動通信システム、基地局および移動局
US7266750B1 (en) 2002-07-10 2007-09-04 Maxtor Corporation Error recovery strategies for iterative decoders
US7536305B2 (en) * 2002-09-04 2009-05-19 Microsoft Corporation Mixed lossless audio compression
US6985856B2 (en) * 2002-12-31 2006-01-10 Nokia Corporation Method and device for compressed-domain packet loss concealment
US7356748B2 (en) * 2003-12-19 2008-04-08 Telefonaktiebolaget Lm Ericsson (Publ) Partial spectral loss concealment in transform codecs
JP4252596B2 (ja) * 2004-03-03 2009-04-08 三菱電機株式会社 パケット転送装置
US8725501B2 (en) 2004-07-20 2014-05-13 Panasonic Corporation Audio decoding device and compensation frame generation method
US7738561B2 (en) * 2004-11-16 2010-06-15 Industrial Technology Research Institute MPEG-4 streaming system with adaptive error concealment
KR20060101889A (ko) * 2005-03-22 2006-09-27 엘지전자 주식회사 디지털 오디오의 신호 처리 방법 및 장치
JP4261506B2 (ja) * 2005-03-31 2009-04-30 株式会社東芝 無線通信装置及び適法制御方法
US7177804B2 (en) 2005-05-31 2007-02-13 Microsoft Corporation Sub-band voice codec with multi-stage codebooks and redundant coding
US8050915B2 (en) 2005-07-11 2011-11-01 Lg Electronics Inc. Apparatus and method of encoding and decoding audio signals using hierarchical block switching and linear prediction coding
FR2889534B1 (fr) * 2005-08-04 2012-11-02 Lab Francais Du Fractionnement Anticorps anti-idiotypique neutralisant l'activite inhibitrice d'un anticorps inhibiteur du facteur viii
US7623725B2 (en) 2005-10-14 2009-11-24 Hewlett-Packard Development Company, L.P. Method and system for denoising pairs of mutually interfering signals
EP1961181B1 (en) * 2005-12-16 2009-04-15 Dolby Sweden AB Apparatus for generating and interpreting a data stream having a series of segments using data in subsequent data frames
WO2007084475A2 (en) * 2006-01-17 2007-07-26 Thomson Licensing Methods and apparatus for low complexity error resilient motion estimation and coding mode selection
KR100763207B1 (ko) * 2006-05-03 2007-10-04 삼성전자주식회사 비압축 aⅴ 데이터를 송수신하는 방법, 장치, 및 전송프레임 구조
US8798172B2 (en) * 2006-05-16 2014-08-05 Samsung Electronics Co., Ltd. Method and apparatus to conceal error in decoded audio signal
US7610195B2 (en) 2006-06-01 2009-10-27 Nokia Corporation Decoding of predictively coded data using buffer adaptation
EP1901496B1 (en) * 2006-09-12 2010-09-01 Panasonic Corporation Link adaptation dependent on control signaling
CN101174931A (zh) * 2006-10-30 2008-05-07 华为技术有限公司 一种重传类型选择方法、相应的发送设备、接收设备及系统
KR101292771B1 (ko) * 2006-11-24 2013-08-16 삼성전자주식회사 오디오 신호의 오류은폐방법 및 장치
KR100862662B1 (ko) * 2006-11-28 2008-10-10 삼성전자주식회사 프레임 오류 은닉 방법 및 장치, 이를 이용한 오디오 신호복호화 방법 및 장치
KR101291193B1 (ko) * 2006-11-30 2013-07-31 삼성전자주식회사 프레임 오류은닉방법
US20100040153A1 (en) 2007-05-07 2010-02-18 Panasonic Corporation Decoding apparatus and decoding method
WO2008151061A1 (en) * 2007-05-31 2008-12-11 Interdigital Technology Corporation Channel coding and rate matching for lte control channels
JP5219699B2 (ja) * 2007-08-30 2013-06-26 パナソニック株式会社 符号化装置及び復号装置
CN100524462C (zh) * 2007-09-15 2009-08-05 华为技术有限公司 对高带信号进行帧错误隐藏的方法及装置
CN101261833B (zh) * 2008-01-24 2011-04-27 清华大学 一种使用正弦模型进行音频错误隐藏处理的方法
FR2929466A1 (fr) 2008-03-28 2009-10-02 France Telecom Dissimulation d'erreur de transmission dans un signal numerique dans une structure de decodage hierarchique
US8301440B2 (en) * 2008-05-09 2012-10-30 Broadcom Corporation Bit error concealment for audio coding systems
JP2009276890A (ja) 2008-05-13 2009-11-26 Hitachi Systems & Services Ltd データ通信の誤り検出方法
CN102057424B (zh) * 2008-06-13 2015-06-17 诺基亚公司 用于经编码的音频数据的错误隐藏的方法和装置
WO2010000303A1 (en) * 2008-06-30 2010-01-07 Nokia Corporation Speech decoder with error concealment
MY152252A (en) * 2008-07-11 2014-09-15 Fraunhofer Ges Forschung Apparatus and method for encoding/decoding an audio signal using an aliasing switch scheme
MX2011000382A (es) * 2008-07-11 2011-02-25 Fraunhofer Ges Forschung Codificador de audio, decodificador de audio, metodos para la codificacion y decodificacion de audio; transmision de audio y programa de computacion.
KR101756834B1 (ko) 2008-07-14 2017-07-12 삼성전자주식회사 오디오/스피치 신호의 부호화 및 복호화 방법 및 장치
EP2146343A1 (en) 2008-07-16 2010-01-20 Deutsche Thomson OHG Method and apparatus for synchronizing highly compressed enhancement layer data
WO2010036739A1 (en) * 2008-09-26 2010-04-01 Telegent Systems, Inc. Devices and methods of digital video and/or audio reception and/or output having error detection and/or concealment circuitry and techniques
WO2010088625A1 (en) 2009-01-30 2010-08-05 Techwell, Inc. Mixed format media transmission systems and methods
WO2010103607A1 (ja) * 2009-03-09 2010-09-16 富士通株式会社 データ転送装置及びデータ転送装置の制御方法
US8300979B2 (en) 2009-07-29 2012-10-30 Hewlett-Packard Development Company, L.P. Method and system for robust universal denoising of noisy data sets
US8625692B2 (en) * 2009-09-28 2014-01-07 Samsung Electronics Co., Ltd. Transmission/reception apparatus and method for improving throughput in a multi-input multi-output communication system
MX2012004648A (es) * 2009-10-20 2012-05-29 Fraunhofer Ges Forschung Codificacion de señal de audio, decodificador de señal de audio, metodo para codificar o decodificar una señal de audio utilizando una cancelacion del tipo aliasing.
US8428959B2 (en) * 2010-01-29 2013-04-23 Polycom, Inc. Audio packet loss concealment by transform interpolation
EP2362658A1 (en) * 2010-02-26 2011-08-31 Research In Motion Limited Encoding and decoding methods and devices employing dual codesets
EP2614592B1 (en) * 2010-09-09 2018-06-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Entropy encoding and decoding scheme
CN102034478B (zh) * 2010-11-17 2013-10-30 南京邮电大学 基于压缩感知和信息隐藏的语音保密通信系统设计方法
BR112013020324B8 (pt) 2011-02-14 2022-02-08 Fraunhofer Ges Forschung Aparelho e método para supressão de erro em fala unificada de baixo atraso e codificação de áudio
US9026434B2 (en) 2011-04-11 2015-05-05 Samsung Electronic Co., Ltd. Frame erasure concealment for a multi rate speech and audio codec
CN102163430B (zh) * 2011-05-06 2012-09-26 中国科学技术大学苏州研究院 采用信息隐藏技术进行amr-wb语音编码或解码的方法
CN103688306B (zh) * 2011-05-16 2017-05-17 谷歌公司 对被编码为连续帧序列的音频信号进行解码的方法和装置
JP2012242785A (ja) * 2011-05-24 2012-12-10 Sony Corp 信号処理装置、信号処理方法、およびプログラム
KR102172279B1 (ko) 2011-11-14 2020-10-30 한국전자통신연구원 스케일러블 다채널 오디오 신호를 지원하는 부호화 장치 및 복호화 장치, 상기 장치가 수행하는 방법
US9203757B2 (en) * 2012-03-22 2015-12-01 Texas Instruments Incorporated Network throughput using multiple reed-solomon blocks
WO2013183977A1 (ko) 2012-06-08 2013-12-12 삼성전자 주식회사 프레임 에러 은닉방법 및 장치와 오디오 복호화방법 및 장치
US9823745B1 (en) 2012-08-30 2017-11-21 Atheer, Inc. Method and apparatus for selectively presenting content
US10223831B2 (en) 2012-08-30 2019-03-05 Atheer, Inc. Method and apparatus for selectively presenting content
CN104641624B (zh) 2012-09-19 2017-11-28 富士胶片株式会社 图像处理装置、摄像装置及图像处理方法
US9280975B2 (en) 2012-09-24 2016-03-08 Samsung Electronics Co., Ltd. Frame error concealment method and apparatus, and audio decoding method and apparatus
IN2015DN04001A (ja) 2012-11-07 2015-10-02 Dolby Int Ab
TWM487509U (zh) * 2013-06-19 2014-10-01 杜比實驗室特許公司 音訊處理設備及電子裝置
CA2916150C (en) 2013-06-21 2019-06-18 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method realizing improved concepts for tcx ltp
KR101849613B1 (ko) * 2013-10-18 2018-04-18 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 스피치 관련 스펙트럼 정형 정보를 사용하는 오디오 신호의 인코딩 및 오디오 신호의 디코딩을 위한 개념
ES2805744T3 (es) * 2013-10-31 2021-02-15 Fraunhofer Ges Forschung Decodificador de audio y método para proporcionar una información de audio decodificada usando un ocultamiento de errores en base a una señal de excitación de dominio de tiempo
EP2922056A1 (en) 2014-03-19 2015-09-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus, method and corresponding computer program for generating an error concealment signal using power compensation
NO2780522T3 (ja) 2014-05-15 2018-06-09
CN104021769B (zh) * 2014-05-30 2016-06-15 京东方科技集团股份有限公司 一种移位寄存器、栅线集成驱动电路及显示屏
TWI602172B (zh) * 2014-08-27 2017-10-11 弗勞恩霍夫爾協會 使用參數以加強隱蔽之用於編碼及解碼音訊內容的編碼器、解碼器及方法
CN107004417B (zh) * 2014-12-09 2021-05-07 杜比国际公司 Mdct域错误掩盖
US20160171740A1 (en) 2014-12-15 2016-06-16 Calay Venture S.à r.l. Real-time method for collaborative animation
US10756997B2 (en) * 2015-09-28 2020-08-25 Cybrook Inc. Bandwidth adjustment for real-time video transmission
JP6356360B2 (ja) 2015-11-13 2018-07-11 株式会社日立国際電気 音声通信システム
WO2017129270A1 (en) 2016-01-29 2017-08-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for improving a transition from a concealed audio signal portion to a succeeding audio signal portion of an audio signal
KR102250472B1 (ko) * 2016-03-07 2021-05-12 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 하이브리드 은닉 방법: 오디오 코덱들에서 주파수 및 시간 도메인 패킷 손실 은닉의 결합
ES2874629T3 (es) * 2016-03-07 2021-11-05 Fraunhofer Ges Forschung Unidad de ocultación de error, decodificador de audio y método y programa informático relacionados que desvanecen una trama de audio ocultada según factores de amortiguamiento diferentes para bandas de frecuencia diferentes
MX2018010756A (es) * 2016-03-07 2019-01-14 Fraunhofer Ges Forschung Unidad de ocultamiento de error, decodificador de audio, y método relacionado y programa de computadora que usa características de una representación decodificada de una trama de audio decodificada apropiadamente.
EP3273602B1 (en) 2016-07-19 2022-01-26 MediaTek Inc. Low complexity rate matching design for polar codes
US10312945B2 (en) * 2017-02-13 2019-06-04 Lg Electronics Inc. Channel coding method using concatenated code structure and apparatus therefor

Also Published As

Publication number Publication date
BR112021015533A2 (pt) 2021-10-05
AU2020220383B2 (en) 2023-04-13
WO2020164752A1 (en) 2020-08-20
BR112021015532A2 (pt) 2021-10-05
TWI785309B (zh) 2022-12-01
EP4239924A2 (en) 2023-09-06
ZA202105720B (en) 2022-07-27
EP4109444A1 (en) 2022-12-28
US20220014310A1 (en) 2022-01-13
JP2023145493A (ja) 2023-10-11
CA3205152A1 (en) 2020-08-20
AU2023226770A1 (en) 2023-09-28
MX2021009731A (es) 2021-09-08
TW202044777A (zh) 2020-12-01
JP2023175750A (ja) 2023-12-12
SG11202108674TA (en) 2021-09-29
CN113491080A (zh) 2021-10-08
EP4239924A3 (en) 2023-11-15
CN113544773A (zh) 2021-10-22
TWI748339B (zh) 2021-12-01
MX2021009728A (es) 2021-10-13
AU2020223488A1 (en) 2021-10-07
EP3924963A1 (en) 2021-12-22
US20230230606A1 (en) 2023-07-20
KR102640740B1 (ko) 2024-02-27
EP3925104A2 (en) 2021-12-22
MX2021009733A (es) 2021-09-08
AU2020220383C1 (en) 2023-07-06
ZA202105722B (en) 2022-07-27
AU2023204176A1 (en) 2023-07-20
SG11202108673QA (en) 2021-09-29
KR20230147748A (ko) 2023-10-23
JP2022520609A (ja) 2022-03-31
CA3129616A1 (en) 2020-08-20
JP2022521487A (ja) 2022-04-08
WO2020164753A1 (en) 2020-08-20
KR20210118948A (ko) 2021-10-01
AU2023204659A1 (en) 2023-08-03
US12009002B2 (en) 2024-06-11
CN113491079A (zh) 2021-10-08
JP7472154B2 (ja) 2024-04-22
KR20210143177A (ko) 2021-11-26
EP3925103A1 (en) 2021-12-22
TW202044779A (zh) 2020-12-01
ZA202105721B (en) 2022-07-27
CN113491080B (zh) 2024-05-31
TWI745862B (zh) 2021-11-11
AU2020220383A1 (en) 2021-10-07
US11875806B2 (en) 2024-01-16
SG11202108537YA (en) 2021-09-29
KR102637530B1 (ko) 2024-02-19
EP3925105A2 (en) 2021-12-22
BR112021015608A2 (pt) 2021-10-05
US20210385012A1 (en) 2021-12-09
EP4369334A2 (en) 2024-05-15
AU2020221993B2 (en) 2023-05-18
TW202044231A (zh) 2020-12-01
US20210366498A1 (en) 2021-11-25
BR112021016022A2 (pt) 2021-10-05
CA3129610A1 (en) 2020-08-20
KR20210125555A (ko) 2021-10-18
TWI797422B (zh) 2023-04-01
AU2023216863A1 (en) 2023-09-07
AU2020221993A1 (en) 2021-10-07
SG11202108672XA (en) 2021-09-29
MX2021009729A (es) 2021-10-26
CN113490981A (zh) 2021-10-08
JP7348297B2 (ja) 2023-09-20
AU2020221602A1 (en) 2021-10-07
JP2022520608A (ja) 2022-03-31
US20210375295A1 (en) 2021-12-02
KR20230098370A (ko) 2023-07-03
CA3128781A1 (en) 2020-08-20
CA3128783A1 (en) 2020-08-20
KR102662188B1 (ko) 2024-05-03
KR20230147747A (ko) 2023-10-23
US20230274750A1 (en) 2023-08-31
KR20210125534A (ko) 2021-10-18
TW202101426A (zh) 2021-01-01
WO2020164751A1 (en) 2020-08-20
ZA202105719B (en) 2022-06-29
JP7358490B2 (ja) 2023-10-10
CA3231332A1 (en) 2020-08-20
JP2022520816A (ja) 2022-04-01
CA3231339A1 (en) 2020-08-20

Similar Documents

Publication Publication Date Title
JP2024026178A (ja) 完全フレーム損失隠蔽および部分的フレーム損失隠蔽を含む、lc3隠蔽のためのデコーダおよび復号方法
JP5849106B2 (ja) 低遅延の統合されたスピーチ及びオーディオ符号化におけるエラー隠しのための装置及び方法
ES2858423T3 (es) Método y dispositivo para el llenado de huecos espectrales
US5247579A (en) Methods for speech transmission
KR100882752B1 (ko) 인코드된 음향신호의 디코딩에 관한 에러 은폐
EP0560931B1 (en) Methods for speech quantization and error correction
US9325544B2 (en) Packet-loss concealment for a degraded frame using replacement data from a non-degraded frame
US9076439B2 (en) Bit error management and mitigation for sub-band coding
US10504525B2 (en) Adaptive forward error correction redundant payload generation
JP2024026178A5 (ja)
WO2020165265A1 (en) Decoder and decoding method for lc3 concealment including full frame loss concealment and partial frame loss concealment
JP6475250B2 (ja) 音声/オーディオビットストリームを復号するための方法及び装置
KR101450297B1 (ko) 복잡성 분배를 이용하는 디지털 신호에서의 전송 에러 위장
RU2795500C2 (ru) Декодер и способ декодирования для маскировки lc3, включающий в себя маскировку полных потерь кадров и маскировку частичных потерь кадров

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231226

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240617