JP2017524972A - 損失フレームを処理するための方法および装置 - Google Patents

損失フレームを処理するための方法および装置 Download PDF

Info

Publication number
JP2017524972A
JP2017524972A JP2016572825A JP2016572825A JP2017524972A JP 2017524972 A JP2017524972 A JP 2017524972A JP 2016572825 A JP2016572825 A JP 2016572825A JP 2016572825 A JP2016572825 A JP 2016572825A JP 2017524972 A JP2017524972 A JP 2017524972A
Authority
JP
Japan
Prior art keywords
frame
current loss
energy
band signal
low
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016572825A
Other languages
English (en)
Other versions
JP6439804B2 (ja
Inventor
▲賓▼ 王
▲賓▼ 王
▲澤▼新 ▲劉▼
▲澤▼新 ▲劉▼
磊 苗
磊 苗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2017524972A publication Critical patent/JP2017524972A/ja
Application granted granted Critical
Publication of JP6439804B2 publication Critical patent/JP6439804B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • G10L19/083—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters the excitation function being an excitation gain
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • G10L21/0388—Details of processing therefor
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93—Discriminating between voiced and unvoiced parts of speech signals
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93—Discriminating between voiced and unvoiced parts of speech signals
    • G10L2025/932—Decision in previous or following frames

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Telephone Function (AREA)
  • Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
  • Circuits Of Receivers In General (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本発明の実施形態は、損失フレームを処理するための方法および装置を提供し、ここで、損失フレームを処理するための方法は、現在の損失フレームの初期の高帯域信号を決定するステップと、現在の損失フレームの利得を決定するステップと、現在の損失フレームの利得調整情報を決定するステップであって、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である、ステップと、利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップと、調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するステップとを含む。本発明の実施形態で提供される損失フレームを処理するための方法および装置は、オーディオ信号の損失フレームの回復における性能を改善するために使用される。

Description

本発明の実施形態は通信技術の分野に関し、詳細には、損失フレームを処理するための方法および装置に関する。
通信技術の発展とともに、ユーザはますます高い品質の音声通話を要求しており、且つ、音声通話の品質を改善するための方法は、主に、音声信号の帯域幅を増加させることである。従来の符号化体系が、音声信号の帯域幅を増加させるように符号化するために使用される場合、ビットレートは大きく改善される。しかしながら、より高いビットレートは音声信号を送信するためにより大きなネットワーク帯域幅を必要とする。ネットワーク帯域幅の制限によって、ビットレートを増加させることによって、音声信号の帯域幅を増加させる方法を実現することは困難である。
現在は、ビットレートが変化しない、またはわずかにのみ変化するとき、より広い帯域幅によって音声信号を符号化するために、帯域幅拡張技術が主に使用される。帯域幅拡張技術は、時間領域帯域幅拡張技術および周波数領域帯域幅拡張技術を含む。加えて、音声信号を送信するプロセスでは、パケット損失レートは、音声信号の品質に影響を与える重要な要因である。従って、パケット損失が発生したときに損失フレームをできるだけ正しく回復して、フレーム損失が発生したときに信号遷移をより自然にし且つより安定させる方法は、音声信号送信の重要な技術である。
しかしながら、帯域幅拡張技術が使用されるとき、フレーム損失が音声信号内で発生した場合、既存の損失フレーム回復方法は、回復された損失フレームと回復された損失フレームの前後のフレームとの間の不連続な遷移を引き起こす場合があり、このことは、音声信号におけるノイズを引き起こす。
本発明の実施形態は損失フレームを処理するための方法および装置を提供し、これらは、オーディオ信号の損失フレームの回復における性能を改善するために使用される。
第1の態様は、損失フレームを処理するための方法を提供し、方法は、
現在の損失フレームの初期の高帯域信号を決定するステップと、
現在の損失フレームの利得を決定するステップと、
現在の損失フレームの利得調整情報を決定するステップであって、ここで、利得調整情報は、
フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である、ステップと、
利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップと、
調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するステップとを含む。
第1の態様を参照すると、第1の態様の第1の可能な実施方式では、利得調整情報は、フレームの低帯域信号エネルギーを含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得するステップと、
現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップとを含む。
第1の態様を参照すると、第1の態様の第2の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
連続する損失フレームの数が1と等しく、且つ、
現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、
現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップとを含む。
第1の態様を参照すると、第1の態様の第3の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
連続する損失フレームの数が1と等しく、
現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、且つ、
現在の損失フレームの低帯域信号のスペクトル傾斜が損失フレームの前のフレームの低帯域信号のスペクトル傾斜よりも大きいとき、
事前に設定された調整因子に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップを含む。
第1の態様を参照すると、第1の態様の第4の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
連続する損失フレームの数が1と等しく、且つ、
現在の損失フレームのクラスが無声でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、
現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップとを含む。
第1の態様を参照すると、第1の態様の第5の可能な実施方式では、利得調整情報は、連続する損失フレームの数を含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいとき、
現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップとを含む。
第1の態様を参照すると、第1の態様の第6の可能な実施方式では、利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含み、且つ、利得補正情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップは、
現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
連続する損失フレームの数が1よりも大きく、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きく、および、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、
現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するステップとを含む。
第1の態様乃至第1の態様の第6の可能な実施方式のうちのいずれか1つの可能な実施方式を参照すると、第1の態様の第7の可能な実施方式では、現在の損失フレームの利得調整情報を決定するステップの後、方法は、
初期の励起調整因子を決定するステップと、
利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップとをさらに含み、且つ、
調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するステップは、
調整された利得および調整された励起調整因子に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第8の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、且つ、
現在の損失フレームのクラスが無声でなく、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第9の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第10の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第11の可能な実施方式では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第12の可能な実施方式では、利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第13の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第14の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第1の態様の第7の可能な実施方式を参照すると、第1の態様の第15の可能な実施方式では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップは、
連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、
現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するステップを含む。
第2の態様は、損失フレームを処理するための装置を提供し、ここで、損失フレームを処理するための装置は、
現在の損失フレームの初期の高帯域信号を決定し、現在の損失フレームの利得を決定し、現在の損失フレームの利得調整情報を決定するように構成される決定モジュールであって、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である、決定モジュールと、
利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得し、調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するように構成される調整モジュールとを含む。
第2の態様を参照すると、第2の態様の第1の可能な実施方式では、利得調整情報は、フレームの低帯域信号エネルギーを含み、且つ、調整モジュールは、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得し、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様を参照すると、第2の態様の第2の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様を参照すると、第2の態様の第3の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、且つ、現在の損失フレームの低帯域信号のスペクトル傾斜が損失フレームの前のフレームの低帯域信号のスペクトル傾斜よりも大きいとき、事前に設定された調整因子に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様を参照すると、第2の態様の第4の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、且つ、現在の損失フレームのクラスが無声でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様を参照すると、第2の態様の第5の可能な実施方式では、利得調整情報は、連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様を参照すると、第2の態様の第6の可能な実施方式では、利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含み、且つ、調整モジュールは、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの数が1よりも大きく、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きく、および、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
第2の態様乃至第2の態様の第6の可能な実施方式のうちのいずれか1つの可能な実施方式を参照すると、第2の態様の第7の可能な実施方式では、決定モジュールは、初期の励起調整因子を決定するようにさらに構成され、且つ、
調整モジュールは、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得し、調整された利得および調整された励起調整因子に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するようにさらに構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第8の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、現在の損失フレームのクラスが無声でなく、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第9の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの周波帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第10の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第11の可能な実施方式では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第12の可能な実施方式では、利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第13の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第14の可能な実施方式では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
第2の態様の第7の可能な実施方式を参照すると、第2の態様の第15の可能な実施方式では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュールは、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
本発明の実施形態で提供される、損失フレームを処理するための方法および装置によると、フレーム損失がオーディオデータ内で発生するとき、損失フレームの高帯域信号は、損失フレームの低帯域信号に従って調整され、その結果、回復された損失フレームの高周波帯域および低周波帯域のフレーム間変化傾向は一致し、且つ、損失フレーム回復の性能は改善される。
本発明の実施形態における、または従来技術における技術的解決手段をより明確に説明するために、以下では、実施形態または従来技術を説明するために必要とされる添付図面を簡潔に導入する。明らかに、以下の説明における添付図面は、本発明のいくつかの実施形態を示し、且つ、当業者は、創造的努力なしに、これらの添付図面から他の図面をさらに導出することができる。
図1は、時間領域帯域幅拡張技術を使用することによって、オーディオ信号を符号化する原理図である。 図2は、時間領域帯域幅拡張技術を使用することによって、オーディオ信号を復号する原理図である。 図3は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態1のフローチャートである。 図4は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態2のフローチャートである。 図5は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態3のフローチャートである。 図6は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態4のフローチャートである。 図7は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態5のフローチャートである。 図8は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態6のフローチャートである。 図9は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態7のフローチャートである。 図10は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態8のフローチャートである。 図11は、本発明の実施形態に係る、損失フレームを処理するための装置の概略構成図である。
本発明の実施形態の目的、技術的解決手段および利点をより明確にするために、以下では、本発明の実施形態における添付図面を参照して、本発明の実施形態における技術的解決手段を明確且つ完全に説明する。明らかに、説明される実施形態は、本発明の実施形態の全てではなく一部である。創造的努力なしに、本発明の実施形態に基づいて、当業者によって得られる全ての他の実施形態は、本発明の保護範囲に包含されるべきである。
現在は、ビットレートが変化しない、またはわずかにのみ変化するとき、より広い帯域幅によって音声信号を符号化するために、帯域幅拡張技術が主に使用される。帯域幅拡張技術の原理は、送信端は信号を高帯域部分と低帯域部分とに分割し、ここで、低帯域部分は符号器を使用することによって符号化され、且つ、高帯域部分については、部分的情報および高周波帯域および低周波帯域の関連パラメータ等の情報のみが抽出されることである。受信端は、低帯域部分の信号、高帯域部分の関連情報および高周波帯域および低周波帯域の関連パラメータに従って音声信号全体を回復する。
一般に、帯域幅拡張技術では、音声信号の送信中にフレーム損失が発生したとき、損失フレームの最初のN個のフレーム（Nは1以上である）に関する情報が損失フレームを回復するために使用される。損失フレームの低帯域部分は、損失フレームの前のフレームの低帯域情報に従って回復されてよく、且つ、損失フレームの高帯域部分は、音声信号のグローバル利得因子およびサブフレーム利得減衰因子に従って回復される。しかしながら、グローバル利得因子とサブフレーム利得減衰因子の両方が、符号器によって、元の音声信号の高帯域部分の符号化に基づいて得られ、且つ、元の音声信号の低帯域部分は高帯域部分の損失フレーム回復処理のために使用されない。しかしながら、フレーム損失が発生したとき、損失フレームの低帯域エネルギー変化傾向が高帯域エネルギー変化傾向と一致しない場合、回復されたフレームと回復されたフレームの前後のフレームとの間の不連続なエネルギー遷移が引き起こされ、このことは、音声信号におけるノイズを引き起こす。
図1は、時間領域帯域幅拡張技術を使用することによって、オーディオ信号を符号化する原理図であり、且つ、図2は、時間領域帯域幅拡張技術を使用することによって、オーディオ信号を復号する原理図である。図1および図2に示されるように、符号器では、最初に、符号器はオーディオ信号101を収集し、ここで、オーディオ信号101は低帯域部分および高帯域部分を含む。低帯域部分および高帯域部分は相対的な概念である。オーディオ信号が、周波数に従って、0HzからW1Hzまでの部分と、W1HzからW2Hzまでの部分とに分割される限り、0HzからW1Hzまでの部分は低帯域部分であり、且つ、W1HzからW2Hzまでの部分は高帯域部分である。例えば、8kHzサンプリング周波数を有するオーディオ信号については、0kHzから4kHzまでの部分は低帯域部分として使用されてよく、且つ、4kHzから8kHzまでの部分は高帯域部分として使用されてよく、16kHzサンプリング周波数を有するオーディオ信号については、0kHzから6kHzまでの部分は低帯域部分として使用されてよく、且つ、6kHzから16kHzまでの部分は高帯域部分として使用されてよい。次いで、符号器は、オーディオ信号101の低帯域部分のパラメータを演算を介して取得する。これらのパラメータは、オーディオ信号101のピッチ周期、代数的符号数、利得等を含むとともに、前述のうち1つ以上を含んでよい。本発明の技術的解決手段の説明を容易にするために、符号化パラメータ102が、パラメータを表すために一般に使用される。符号化パラメータ102は、本発明の実施形態の理解を助けるために使用される例でしかなく、しかし、符号器によって使用されるパラメータに対する特定の限定を意味しないことは理解されることができる。オーディオ信号101の高帯域部分について、符号器は、高帯域部分に対して線形予測符号化（Linear Predictive Coding, LPC）を実行して、高帯域LPC係数103を取得する。高帯域励起信号104は、符号化パラメータ102に従って、演算を介して取得され、高帯域LPC係数103は、LPC合成フィルタのフィルタリング係数として使用され、高帯域励起信号104は、LPC合成フィルタを使用することによって、高帯域信号に合成され、オーディオ信号101の元の高帯域部分および合成された高帯域信号は、サブフレーム利得（SubGain）105とグローバル利得（FramGain）106を取得するために比較される。グローバル利得106は、オーディオ信号101の各フレームの元の高帯域部分のエネルギーを合成された高帯域信号のエネルギーと比較することによって取得され、且つ、サブフレーム利得105は、オーディオ信号101の各フレームのサブフレームの元の高帯域部分のエネルギーを合成された高帯域信号のエネルギーと比較することによって取得される。LPC係数103は、線形スペクトル周波数（Linear Spectral Frequency, LSF）パラメータ107に変換され、且つ、LSFパラメータ107、サブフレーム利得105およびグローバル利得106は量子化された後に符号化される。最後に、符号器は、符号化パラメータ102、符号化LSFパラメータ107、符号化サブフレーム利得105および符号化グローバル利得106に従って、符号化ストリーム108を取得するとともに、符号化ストリーム108を復号器に送信する。
復号器では、復号器は、受信された符号化ストリーム108を復号して、音声信号のピッチ周期、代数的符号数、利得等のパラメータ、すなわち、符号化パラメータ102を取得し、且つ、復号器は受信された符号化ストリーム108を復号および逆量子化して、LSFパラメータ107、サブフレーム利得105およびグローバル利得106を取得するとともに、LSFパラメータ107をLPC係数103に変換する。高帯域励起信号104は、符号化パラメータ102に従って、演算を介して取得され、LPCパラメータ103は、LPC合成フィルタのフィルタリング係数として使用され、高帯域励起信号104は、LPC合成フィルタを使用することによって、高帯域信号に合成され、合成された高帯域信号は、サブフレーム利得105およびグローバル利得106の調整によってオーディオ信号101の高帯域部分に回復され、オーディオ信号101の低帯域部分は、符号化パラメータ102に従って、復号を介して取得され、オーディオ信号101の高帯域部分および低帯域部分は、元のオーディオ信号101を取得するために合成される。
オーディオ信号の送信中にフレーム損失が発生するとき、損失フレームの符号化パラメータおよびLSFパラメータは、損失フレームの前のフレームの符号化パラメータおよびLSFパラメータに従って推定され（例えば、損失フレームの前のフレームの符号化パラメータおよびLSFパラメータは、損失フレームの符号化パラメータおよびLSFパラメータとして直接使用される）、且つ、損失フレームのグローバル利得およびサブフレーム利得が、損失フレームの前のフレームのグローバル利得、サブフレーム利得および符号化タイプに従って推定される。このようにして、推定された損失フレームの符号化パラメータは、損失フレームの低帯域部分を回復するために復号されてよく、且つ、損失フレームの高帯域励起信号は、推定された符号化パラメータに従って回復され、損失フレームの高帯域部分は、推定された損失フレームのグローバル利得およびサブフレーム利得に従って回復され、回復された低帯域部分および高帯域部分は、損失フレームの信号に合成される。
図1および図2に示される、オーディオ信号の符号化および復号原理によってわかるように、損失フレームの前のフレームの符号化パラメータは、損失フレームの低帯域部分を回復するために使用され、損失フレームの前のフレームの符号化パラメータは、損失フレームの前のフレームの低帯域部分に従って、符号化を介して直接取得され、損失フレームの低帯域部分は、符号化パラメータに従って、望ましく回復されることができる。損失フレームの前のフレームのグローバル利得、サブフレーム利得および符号化タイプは、損失フレームの高帯域部分を回復するために使用され、且つ、損失フレームの前のフレームのグローバル利得およびサブフレーム利得は、符号化または演算等の処理によって取得されるため、損失フレームの回復された高帯域部分内でエラーが発生し得る。
可能な解決手段では、損失フレームの高帯域部分を回復するための方法は、グローバル利得因子およびサブフレーム利得減衰因子を調整するとともに、損失フレームの前のフレームのグローバル利得因子およびサブフレーム利得減衰因子に固定減衰因子を掛け、且つ、損失フレームのグローバル利得因子およびサブフレーム利得減衰因子として積を使用することである。
別の可能な解決手段では、損失フレームのグローバル利得因子およびサブフレーム利得減衰因子は、損失フレームの前のフレームの符号化タイプ、フレーム損失が発生する前の最後の正常なフレームの符号化タイプ、連続する損失フレームの数および損失フレームの前のフレームのグローバル利得因子およびサブフレーム利得減衰因子を使用することによって、適応して推定される。グローバル利得因子およびサブフレーム利得減衰因子は、グローバル利得およびサブフレーム利得に関連するパラメータである。損失フレームの前のフレームの高帯域情報および低帯域情報は、損失フレームの高帯域部分の初期回復のために使用され、且つ、損失フレームの初期に回復された高帯域部分が調整されるとき、損失フレームの前のフレームの高帯域情報のみが必要とされ、損失フレームの高帯域部分および低帯域部分のエネルギー変化傾向が一致しないとき、回復された損失フレームは、オーディオ信号全体における不連続な遷移を引き起こし、このことはノイズを引き起こす。
本発明の実施形態は、損失フレームを処理するための方法および装置を提供する。従来技術における損失フレームを回復するためにオーディオ信号の高帯域部分を使用することに基づいて、損失フレームの利得および高周波励起は、オーディオ信号の低帯域部分に従ってさらに調整され、その結果、回復された損失フレームの高周波帯域および低周波帯域の変化傾向は一致し、且つ、損失フレーム処理の性能は改善される。
図3は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態1のフローチャートである。図3に示されるように、本実施形態における方法は以下のステップを含む：
ステップS301：現在の損失フレームの初期の高帯域信号を決定する。
具体的には、本実施形態で提供される損失フレームを処理するための方法は、オーディオ信号の受信端に適用される。最初に、オーディオ信号の受信端は、送信端によって送信されたオーディオデータを受信し、ここで、受信端によって受信されたオーディオデータは、データストリームの形態であってよく、または、データパケットの形態であってよい。受信端によって受信されたオーディオデータ内でフレーム損失が発生したとき、受信端は、損失フレームを検出してよい。受信端が、受信されたオーディオデータ内でフレーム損失が発生したかどうかを決定するための方法は、従来技術における任意の1つの方法であってよい。例えば、オーディオデータの各フレーム内にフラグビットが設定され、且つ、フラグビットは、正常な場合において0である。フレーム損失が発生したとき、フラグビットは1に設定される。オーディオデータを受信したとき、受信端は、各フレーム内のフラグビットを検出し、且つ、フラグビットが1であることを検出したとき、受信端は、フレーム損失が発生したと決定してよい。別の可能な方法では、例えば、オーディオデータのフレームは、シーケンシャルに番号付けされてよく、且つ、復号器によって受信された現在のフレームのシーケンス番号が、前の受信されたフレームの番号と連続していない場合、フレーム損失が発生したと決定されることができる。本実施形態は、受信されたオーディオデータ内でフレーム損失が発生したかどうかを決定するための方法を限定しない。
オーディオ信号内でフレーム損失が発生したと決定された後、損失フレームは回復される必要がある。オーディオ信号の損失フレームは、低帯域信号部分と高帯域信号部分とに分割されてよい。最初に、現在の損失フレームの前のフレームの低帯域情報は、現在の損失フレームの低帯域情報を回復するために使用される。具体的には、現在の損失フレームの符号化パラメータは、現在の損失フレームの前のフレームの符号化パラメータに従って推定され、現在の損失フレームの低帯域部分を推定する。本明細書では、損失フレームの前のフレームは、正常に受信されたフレームであってよく、または、正常に受信されたフレームに従って回復されたフレームであってよいことは理解されることができる。次いで、現在の損失フレームの高帯域励起信号は、現在の損失フレームの推定された符号化パラメータに従って回復され、現在の損失フレームのグローバル利得およびサブフレーム利得は、現在の損失フレームの前のフレームのグローバル利得、サブフレーム利得および符号化タイプに従って推定され、現在の損失フレームの高帯域信号は、現在の損失フレームの推定されたグローバル利得およびサブフレーム利得に従って回復される。
前述の方法に従って回復される、現在の損失フレームの高帯域信号は、初期の高帯域信号と呼ばれ、且つ、本実施形態における以下のステップは、初期の高周波信号を調整して、現在の損失フレームのより正確な高帯域信号を回復することである。
ステップS302：現在の損失フレームの利得を決定する。
具体的には、ステップS301からわかるように、現在の損失フレームのグローバル利得およびサブフレーム利得は、現在の損失フレームの前のフレームのグローバル利得、サブフレーム利得および符号化タイプに従って推定されてよい。本実施形態は、現在の損失フレームの高帯域信号を調整することであり、且つ、サブフレーム利得は、現在の損失フレームに直接影響を与え、従って、このステップおよび本実施形態における現在の損失フレームの利得は、現在の損失フレームのサブフレーム利得である。
ステップS303：現在の損失フレームの利得調整情報を決定し、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である。
具体的には、本実施形態は、現在の損失フレームの高帯域信号を調整することであり、且つ、高帯域信号は、高帯域励起信号および利得に従って取得され、従って、損失フレームの利得を調整することによって、現在の損失フレームの高帯域信号を調整する目的が達成されることができる。利得調整情報は、利得を調整するために使用される必要があり、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含んでよい。
フレームのクラスは、現在の損失フレームの前のフレームの符号化タイプに従って取得されてよく、且つ、フレームのクラスおよび符号化タイプ情報の両方が、フレームの低帯域信号部分内で搬送される。連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である。
フレーム損失の前の符号化タイプは、現在のフレーム損失イベントが発生する前の符号化モードを指してよい。一般に、よりよい符号化性能を達成するために、符号器は、信号を符号化する前に信号を分類して、適切な符号化モードを選択してよい。現在、符号化モードは、非アクティブフレーム符号化モード（INACTIVE mode）、無声フレーム符号化モード（UNVOICED mode）、有声フレーム符号化モード（VOICED mode）、汎用フレーム符号化モード（GENERIC mode）、遷移フレーム符号化モード（TRANSITION mode）およびオーディオフレーム符号化モード（AUDIO mode）を含んでよい。
フレーム損失の前に受信された最後のフレームのクラスは、このフレーム損失イベントが発生する前に、復号器によって受信された最新のフレームのクラスを指してよい。例えば、符号器は4つのフレームを復号器に送信し、ここで、復号器は、第1のフレームおよび第2のフレームを正しく受信するが、第3のフレームおよび第4のフレームは損失すると仮定すると、フレーム損失の前に受信された最後のフレームは、第2のフレームを指すことができる。一般に、フレームのクラスは、(1) 無声、非アクティブ、ノイズまたは有声であるいくつかの特徴のうちの1つで終わるフレーム（UNVOICED_CLAS frame）；(2)無声子音から有声子音までの遷移を有し、且つ比較的弱い無声子音によって開始されるフレーム（UNVOICED_TRANSITION frame）；(3) 有声子音の後の遷移を有するフレームであって、有声特徴は非常に弱い、フレーム（VOICED_TRANSITION frame）；(4) 有声特徴を有するフレームであって、その前のフレームは、有声フレームまたは有声子音によって開始するフレームである、フレーム（VOICED_CLAS frame）；(5) 明白な有声子音によって開始するフレーム（ONSET frame）；(6) 調波およびノイズの混合によって開始するフレーム（SIN_ONSET frame）；および(7) 非アクティブ特徴フレーム（INACTIVE_CLAS frame）を含んでよい。
連続する損失フレームの数は、現在の損失フレームが損失するまでにこのフレーム損失イベントにおいて損失する連続するフレームの数を指してよい。実際、連続する損失フレームの数は、現在の損失フレームが、連続する損失フレームのどのフレームであるかを示してよい。例えば、符号器は、5つのフレームを復号器に送信し、且つ、復号器は、第1のフレームおよび第2のフレームを正しく受信するが、第3から第5のフレームは損失する。現在の損失フレームが第4のフレームである場合、連続する損失フレームの数は2であり、且つ、現在の損失フレームが第5のフレームである場合、連続する損失フレームの数は3である。
フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む利得調整情報は、フレームの低帯域信号に従って取得され、従って、本実施形態では、フレームの利得は、信号の低帯域信号部分を使用することによって調整される。
ステップS304：利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、現在の損失フレームの利得は、利得調整情報に従って調整されてよい。具体的な調整方法は、オーディオ信号の復号器において事前に設定されてよく、利得調整情報を決定した後、復号器は、利得調整情報が対応する事前に設定された条件を満たすかどうかを決定するとともに、且つ、対応する事前に設定された条件が満たされる場合、事前に設定された条件に対応する調整方法に従って、現在の損失フレームの利得を調整し、最後に、現在の損失フレームの調整された利得を取得する。
ステップS305：調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得する。
具体的には、初期の高帯域信号は、調整された利得に従って調整され、調整された高帯域信号、すなわち、現在の損失フレームの高帯域信号を取得してよい。一般に、高帯域信号は、高帯域励起信号と利得との積であり、従って、現在の損失フレームの高帯域信号は、調整された利得に初期の高帯域信号を掛けることによって取得されてよい。
さらに、ステップS305において取得される現在の損失フレームの高帯域信号および現在の損失フレームの前のフレームの符号化パラメータを使用することによって回復される現在の損失フレームの低帯域信号は、現在の損失フレームを取得するために合成されてよく、それによって、現在の損失フレームに対する回復処理を完了する。現在の損失フレームの回復中、高帯域信号を使用することによって取得される関連パラメータを使用することによる現在の損失フレームの回復に加えて、受信端は、低帯域信号を使用することによって、現在の損失フレームをさらに回復するため、その結果、回復された現在の損失フレームの高周波帯域および低周波帯域のフレーム間変化傾向は一致し、且つ、損失フレーム回復の性能は改善される。
本実施形態では、フレーム損失がオーディオデータ内で発生するとき、損失フレームの高帯域信号は、損失フレームの低帯域信号に従って調整され、その結果、回復された損失フレームの高周波帯域および低周波帯域のフレーム間変化傾向は一致し、且つ、損失フレーム回復の性能は改善される。
前述のステップS304における、利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するための具体的な方法は、オーディオ信号の受信端において事前に設定されてよい。前述では、利得調整情報に従って、現在の損失フレームの利得を調整するための方法をさらに説明するために、具体的な実施形態を使用する。
図4は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態2のフローチャートである。図4に示されるように、本実施形態における方法は以下のステップを含む：
ステップS401：現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、フレームの低帯域信号エネルギーを含む。現在の損失フレームの利得が、利得調整情報に従って調整されるとき、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が最初に獲得される。現在の損失フレームの低帯域信号エネルギーは、現在の損失フレームの回復された低帯域信号に従って取得されてよく、且つ、現在の損失フレームの前のフレームの低帯域信号エネルギーもまた、現在の損失フレームの前のフレームの低帯域信号エネルギーに従って取得されてよい。
ステップS402：現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比は、現在の損失フレームの低帯域信号エネルギーの変化傾向を反映し、従って、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比に従って、現在の損失フレームの利得が調整され、且つ、取得された調整された利得は、現在の損失フレームの低帯域信号の変化傾向を反映する。従って、本実施形態で取得される、調整された利得を使用することによって、現在の損失フレームの高帯域信号の調整は、現在の損失フレームの高周波帯域および低周波帯域のフレーム間変化傾向を一致させることができるとともに、損失フレーム回復の性能を改善することができる。
図5は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態3のフローチャートである。図5に示されるように、本実施形態における方法は以下のステップを含む：
ステップS501：連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの高周波励起エネルギーと現在の損失フレームの前のフレームの高周波励起エネルギーのエネルギー比を取得する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。現在の損失フレームの利得が利得調整情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく（UNVOICED_CLAS）、現在の損失フレームのクラスが無声の遷移でなく（UNVOICED_TRANSITION）、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるという条件を満たすかどうかが最初に決定される。
低帯域信号のスペクトル傾斜は、低帯域信号のスペクトルの傾きであり、且つ、第1の閾値は事前に設定された値であってよい。例えば、本実施形態における第1の閾値は、8に設定されてよい。現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が、第1の閾値よりも小さいことの意味は、低帯域信号を使用することによって、現在の損失フレームの利得を補正する精度が低減されないように、現在の損失フレームの前のフレームの低帯域信号が、過度に速く変化することはできないことにある。現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であることの意味は、現在の損失フレームを補正する精度が影響を受けないように、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーとの間の差が、過度に大きくなることはできないことにある。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。加えて、現在の損失フレームの低帯域信号のスペクトル傾斜が現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜以下であるという決定条件が、さらに追加される必要がある。
ステップS502：現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、ステップS501において、利得調整情報が条件を満たすと決定された場合、現在の損失フレームの利得は、現在の損失フレームの高周波励起エネルギーと現在の損失フレームの前のフレームの高周波励起エネルギーのエネルギー比に従って調整される。prev_ener_ratioが損失フレームの前のフレームの高周波励起エネルギーと損失フレームの高周波励起エネルギーの比を示すとする。この場合、現在の損失フレームの利得は、prev_ener_ratioと現在の損失フレームの利得との間の関係に従って再び調整される。例えば、本実施形態では、現在の損失フレームの利得はGであるとし、且つ、現在の損失フレームの調整された利得はG'であるとする。prev_ener_ratioがGの4倍よりも大きいとき、G'=0.4×prev_ener_ratio+0.6×Gであり、prev_ener_ratioがGの2倍よりも大きいがGの4倍以下であるとき、G'=0.8×prev_ener_ratio+0.2×Gであり、prev_ener_ratioがGの2倍以下であるとき、G'=0.2×prev_ener_ratio+0.8×Gである。
図6は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態4のフローチャートである。図6に示されるように、本実施形態における方法は以下のステップを含む：
ステップS601：連続する損失フレームの数が1と等しいこと、現在の損失フレームのクラスが無声でないこと、現在の損失フレームのクラスが無声の遷移でないこと、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さいこと、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であること、および、現在の損失フレームの低帯域信号のスペクトル傾斜が損失フレームの前のフレームの低帯域信号のスペクトル傾斜よりも大きいことを決定する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。現在の損失フレームの利得が利得調整情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく（UNVOICED_CLAS）、現在の損失フレームのクラスが無声の遷移でなく（UNVOICED_TRANSITION）、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるという条件を満たすかどうかが最初に決定される。
低帯域信号のスペクトル傾斜は、低帯域信号のスペクトルの傾きであり、且つ、第1の閾値は事前に設定された値であってよい。例えば、本実施形態における第1の閾値は、8に設定されてよい。現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が、第1の閾値よりも小さいことの意味は、低帯域信号を使用することによって、現在の損失フレームの利得を補正する精度が低減されないように、現在の損失フレームの前のフレームの低帯域信号が、過度に速く変化することはできないことにある。現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であることの意味は、現在の損失フレームを補正する精度が影響を受けないように、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーとの間の差が、過度に大きくなることはできないことにある。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。加えて、現在の損失フレームの低帯域信号のスペクトル傾斜が現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜よりも大きいという決定条件が、さらに追加される必要がある。
ステップS602：事前に設定された調整因子に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、ステップS601において、利得調整情報が条件を満たすと決定された場合、現在の損失フレームの利得は、事前に設定された調整因子に従って調整される。G'=G×fであり、ここで、fは事前に設定された調整因子であり、且つ、fは、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜の比と等しい。
図7は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態5のフローチャートである。図7に示されるように、本実施形態における方法は以下のステップを含む：
ステップS701：連続する損失フレームの数が1と等しく、且つ、現在の損失フレームのクラスが無声でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含む。現在の損失フレームの利得が利得調整情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるという条件を満たすかどうかが最初に決定される。
低帯域信号のスペクトル傾斜は、低帯域信号のスペクトルの傾きであり、且つ、第1の閾値は事前に設定された値であってよい。例えば、本実施形態における第1の閾値は、8に設定されてよい。現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が、第1の閾値よりも大きいことの意味は、現在の損失フレームの前のフレームの低帯域信号が、比較的速く変化することにあり、この場合、低帯域信号を使用することによって、現在の損失フレームの利得を補正することの重みは低減される。現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であることの意味は、現在の損失フレームを補正する精度が影響を受けないように、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーとの間の差が、過度に大きくなることはできないことにある。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。
ステップS702：現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、ステップS701において、利得調整情報が条件を満たすと決定された場合、現在の損失フレームの利得は、現在の損失フレームの高周波励起エネルギーと現在の損失フレームの前のフレームの高周波励起エネルギーのエネルギー比に従って調整される。例えば、本実施形態では、G'=0.2×prev_ener_ratio+0.8×Gである。
図8は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態6のフローチャートである。図8に示されるように、本実施形態における方法は以下のステップを含む：
ステップS801：現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、連続する損失フレームの数を含む。最初に、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が、現在の損失フレームの低帯域信号エネルギーに従って取得される。
ステップS802：連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、現在の損失フレームの利得が利得調整情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいという条件を満たすかどうかが最初に決定される。さらに、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値以下であるかどうかという別の条件がさらに決定される必要があり、ここで、第2の閾値は事前に設定された閾値であってよく、例えば10であってよい。前述の条件が全て満たされる場合、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得が調整される。例えば、prev_ener_ratio>4Gであるとき、G'=min((0.5×prev_ener_ratio+0.5×G),4×G)であり、このことは、G'が、0.5×prev_ener_ratio+0.5×Gおよび4×Gのうちのより小さい方と等しいことを示し、且つ、4G>prev_ener_ratio>Gであるとき、0.8×prev_ener_ratio+0.2×Gである。
図9は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態7のフローチャートである。図9に示されるように、本実施形態における方法は以下のステップを含む：
ステップS901：現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得する。
具体的には、本実施形態は、ステップS304のさらなる説明である。利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含む。最初に、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が、現在の損失フレームの低帯域信号エネルギーに従って取得される。
ステップS902：連続する損失フレームの数が1よりも大きく、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きく、および、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
具体的には、現在の損失フレームの利得が利得調整情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいという条件を満たすかどうかが最初に決定される。さらに、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいかどうかという別の条件がさらに決定される必要があり、ここで、第2の閾値は事前に設定された閾値であってよく、例えば10であってよい。前述の条件が全て満たされる場合、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得が調整される。例えば、prev_ener_ratio>4Gであるとき、G'=min((0.8×prev_ener_ratio+0.2×G),4×G)であり、このことは、G'が、0.8×prev_ener_ratio+0.2×Gおよび4×Gのうちのより小さい方と等しいことを示し、且つ、4G>prev_ener_ratio>Gであるとき、0.5×prev_ener_ratio+0.5×Gである。
Windows 7のプラットフォーム上では、Microsoft Visual Studio 2008コンパイル環境が使用され、且つ、図5から図9に示される実施形態における、損失フレームを処理するための方法は、以下のコードを使用することによって実施されてよい：
if( st->nbLostCmpt == 1 )
{
prev_ener_ratio = st->prev_ener_shb/ener;
if( st->clas_dec != UNVOICED_CLAS && st->clas_dec !=
UNVOICED_TRANSITION &&st->tilt_swb_fec < 8.0 &&
((st->enerLL > 0.5f*st->prev_enerLL && st->enerLL <
2.0f*st->prev_enerLL)|| (st->enerLH > 0.5f*st->prev_enerLH &&
st->enerLH < 2.0f*st->prev_enerLH)))
{
if( prev_ener_ratio > 4.0f * GainFrame )
{
GainFrame = 0.4f * prev_ener_ratio + 0.6f * GainFrame;
}
else if( prev_ener_ratio > 2.0f * GainFrame )
{
GainFrame = 0.8f * prev_ener_ratio + 0.2f * GainFrame;
}
else
{
GainFrame = 0.2f * prev_ener_ratio + 0.8f * GainFrame;
}
if( tilt_swb_fec > st->tilt_swb_fec )
{
GainFrame *= st->tilt_swb_fec > 0 ?
(min(5.0f,tilt_swb_fec/st->tilt_swb_fec)): 1.0f;
}
}
else if( (st->clas_dec != UNVOICED_CLAS || st->tilt_swb_fec > 8.0) &&
prev_ener_ratio > 4.0f * GainFrame &&
(st->enerLL > 0.5f*st->prev_enerLL ||st->enerLH >
0.5f*st->prev_enerLH) )
{
GainFrame = 0.2f * prev_ener_ratio + 0.8f * GainFrame;
}
}
else if( st->nbLostCmpt > 1 )
{
prev_ener_ratio = st->prev_ener_shb/ener;
if(prev_ener_ratio > 4.0 * GainFrame )
{
if( tilt_swb_fec > 10.0f && st->tilt_swb_fec >10.0f )
{
GainFrame = min((prev_ener_ratio *0.8f + GainFrame * 0.2f),4.0f * GainFrame);
}
else
{
GainFrame = min((prev_ener_ratio *0.5f + GainFrame * 0.5f),4.0f * GainFrame);
}
}
else if( prev_ener_ratio > GainFrame )
{
if( tilt_swb_fec > 10.0f && st->tilt_swb_fec >10.0f )
{
GainFrame = 0.5f * prev_ener_ratio + 0.5f * GainFrame;
}
else
{
GainFrame = 0.2f * prev_ener_ratio + 0.8f * GainFrame;
}
}
図10は、本発明の実施形態に係る、損失フレームを処理するための方法の実施形態8のフローチャートである。図10に示されるように、本実施形態における方法は、以下のステップを含む：
ステップS1001：現在の損失フレームの初期の高帯域信号を決定する。
ステップS1002：現在の損失フレームの利得を決定する。
ステップS1003：現在の損失フレームの利得調整情報を決定し、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である。
ステップS1004：初期の励起調整因子を決定する。
具体的には、図3に示される実施形態に基づいて、本実施形態では、現在の損失フレームの高帯域励起信号が、現在の損失フレームをより正確に調整するためにさらに調整される。励起調整因子は、現在の損失フレームの高帯域励起信号を調整するために使用される因子を指し、且つ、初期の励起調整因子は、損失フレームのサブフレーム利得およびグローバル利得に従って取得される。
ステップS1005：利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得する。
具体的には、初期の励起調整因子は、利得調整情報に従って調整されてよい。具体的な調整方法は、オーディオ信号の復号器において事前に設定されてよく、利得調整情報を決定した後、復号器は利得調整情報を決定し、且つ、対応する事前に設定された条件が満たされる場合、事前に設定された条件に対応する調整方法に従って、初期の励起調整因子を調整し、最後に、調整された初期の励起調整因子を取得する。
フレーム損失のケースにおける、フレーム間エネルギーの連続性を保証するために、調整された励起調整因子に対して平滑インクリメンタル処理が実行される必要があり、例えば、scale'=pow(scale', 0.125)という式が、計算のために使用されてよいことは留意されるべきである。すなわち、scale’の0.125乗が獲得される。
ステップS1006：利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得する。
ステップS1007：調整された利得および調整された励起調整因子に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得する。
具体的には、一般に、高帯域信号は、高帯域励起信号と利得との積であり、従って、高帯域励起信号は、励起調整因子に従って調整されてよく、且つ、高帯域励起信号はまた、最後に現在の損失フレームの高帯域信号を取得するために、調整された利得に従って調整される。
さらに、ステップS1005では、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するための具体的な方法は、以下の実施方式において示されてよい。
可能な実施方式では、ステップS1005は、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、現在の損失フレームのクラスが無声でなく、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含み、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。
具体的には、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、現在の損失フレームのクラスが無声でなく、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないという条件の全てを満たすかどうかが最初に決定される。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。現在の損失フレームの前の最後の正常に受信されたフレームは、現在の損失フレームの前の損失していない最後のフレームを示す。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と等しい。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるという条件の全てを満たすかどうかが最初に決定される。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と等しい。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるという条件の全てを満たすかどうかが最初に決定される。現在の損失フレームの前の最後の正常に受信されたフレームは、現在の損失フレームの前の損失していない最後のフレームを示す。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と等しい。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいという条件の全てを満たすかどうかが最初に決定される。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよく、且つ、第3の閾値は、事前に設定された閾値であってよく、例えば、5であってよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と等しい。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいという条件の全てを満たすかどうかが最初に決定される。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と等しい。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるという条件の全てを満たすかどうかが最初に決定される。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と、3のうちのより小さい方である。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるという条件の全てを満たすかどうかが最初に決定される。現在の損失フレームの前の最後の正常に受信されたフレームは、現在の損失フレームの前の損失していない最後のフレームを示す。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と、3のうちのより小さい方である。
別の可能な実施方式では、ステップS1005は、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得することを含む。
具体的には、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含む。初期の励起調整因子が利得補正情報に従って調整されるとき、利得調整情報が、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいという条件の全てを満たすかどうかが最初に決定される。事前に設定された間隔は、一般に、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの半分よりも大きく、且つ、現在の損失フレームの低帯域信号エネルギーが現在の損失フレームの前のフレームの低帯域信号エネルギーの2倍よりも小さくなるように設定されてよく、且つ、第3の閾値は、事前に設定された閾値であってよく、例えば、5であってよい。全ての前述の条件が満たされると決定された場合、初期の励起調整因子は、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび損失フレームの低帯域信号エネルギーに従って調整される。例えば、初期の励起調整因子はscaleであり、且つ、調整された励起調整因子はscale'であると仮定される。従って、scale'は、現在の損失フレームの前のフレームの低帯域エネルギーと現在の損失フレームの低帯域エネルギーの比と、3のうちのより小さい方である。
Windows 7のプラットフォーム上では、Microsoft Visual Studio 2008コンパイル環境が使用され、且つ、図10に示される実施形態における、損失フレームを処理するための方法および図10に示される実施形態における実施方式は、以下のコードを使用することによって実施されてよい：
if( st->bfi )
{
scale = 1.0f;
temp = 1.0f;
if (st->nbLostCmpt == 1 )
{
if( curr_frame_pow > st->prev_swb_bwe_frame_pow &&
st->prev_coder_type != UNVOICED &&
st->last_good != UNVOICED_CLAS )
{
scale = root_a_over_b( st->prev_swb_bwe_frame_pow, curr_frame_pow );
temp = (float) pow( scale, 0.125f );
}
else if( curr_frame_pow < 0.5f *st->prev_swb_bwe_frame_pow && st->nbLostCmpt == 1 &&
(st->enerLL > 0.5 * st->prev_enerLL || st->enerLH > 0.5 *st->prev_enerLH) &&
(st->prev_coder_type == UNVOICED || st->last_good == UNVOICED_CLAS || st->tilt_swb_fec > 5.0f) )
{
scale = root_a_over_b(st->prev_swb_bwe_frame_pow, curr_frame_pow);
temp = (float) pow(scale, 0.125f);
}
}
else if ( st->nbLostCmpt > 1 )
{
if( curr_frame_pow > st->prev_swb_bwe_frame_pow )
{
scale = root_a_over_b( st->prev_swb_bwe_frame_pow, curr_frame_pow );
temp = (float) pow( scale, 0.125f );
}
else if( curr_frame_pow < 0.5f *st->prev_swb_bwe_frame_pow &&
(st->enerLL > 0.5 * st->prev_enerLL || st->enerLH > 0.5 *st->prev_enerLH) &&
(st->prev_coder_type == UNVOICED || st->last_good == UNVOICED_CLAS || st->tilt_swb_fec > 5.0f) )
{
scale=min(3.0f,root_a_over_b(st->prev_swb_bwe_frame_pow, curr_frame_pow));
temp = (float) pow(scale, 0.125f);
}
}
for( j=0; j<8; j++ )
{
GainShape[2 * j] *= scale;
GainShape[2 * j + 1] *= scale;
for( i=0; i<L_FRAME16k/8; i++ )
{
shaped_shb_excitation[i + j * L_FRAME16k/8] *= scale;
}
scale /= temp;
}
}
本実施形態で提供される、損失フレームを処理するための方法では、損失フレームおよび損失フレームの前のフレームの低帯域信号のスペクトル傾斜、低帯域信号エネルギー比、高周波励起エネルギー比および損失フレームのフレームクラス等の情報を使用することによって、損失フレームの利得および励起調整因子を補正するための具体的な方法のみである。しかしながら、損失フレームおよび損失フレームの前の少なくとも1つのフレームの低帯域情報および符号化タイプ情報に従って、損失フレームの高帯域情報を補正するための損失フレーム処理方法が本発明の保護範囲に包含される限り、本発明で提供される損失フレームを処理するための方法はそれらに限定されない。
本発明の本実施形態で提供される損失フレームを処理するための方法によると、高帯域の損失フレーム回復は、連続するフレーム間の低帯域の相互関係に基づいて導かれ、且つ、そのような方法は、低帯域情報が正確に回復される場合に、回復された損失フレームの高帯域エネルギーをより連続的にすることができ、それによって、不連続な高帯域エネルギー回復のケースを解決し、且つ、損失フレームの高帯域性能を改善する。
図11は、本発明の実施形態に係る、損失フレームを処理するための装置の概略構成図である。図11に示されるように、本実施形態における損失フレームを処理するための装置は、
現在の損失フレームの初期の高帯域信号を決定し、現在の損失フレームの利得を決定し、現在の損失フレームの利得調整情報を決定するように構成される決定モジュール111であって、ここで、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、ここで、連続する損失フレームの数は、現在の損失フレームまでに損失した連続するフレームの数である、決定モジュール111と、
利得調整情報に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得し、調整された利得に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するように構成される調整モジュール112とを含む。
本実施形態で提供される損失フレームを処理するための装置は、図3に示される方法の実施形態の技術的解決手段を実行するために使用されてよいとともに、同様の実施の原理および技術的効果を有し、且つ、詳細はここでは繰り返し説明されない。
さらに、図11に示される実施形態では、利得調整情報は、フレームの低帯域信号エネルギーを含み、且つ、調整モジュール112は、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得し、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームのクラスが無声でなく、現在の損失フレームのクラスが無声の遷移でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、且つ、現在の損失フレームの低帯域信号のスペクトル傾斜が損失フレームの前のフレームの低帯域信号のスペクトル傾斜よりも大きいとき、事前に設定された調整因子に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、且つ、現在の損失フレームのクラスが無声でなく、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含み、且つ、調整モジュール112は、具体的には、現在の損失フレームの低帯域信号エネルギーに従って、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの数が1よりも大きく、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比が現在の損失フレームの利得よりも大きく、および、現在の損失フレームの低帯域信号のスペクトル傾斜と現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、現在の損失フレームの前のフレームの高周波励起エネルギーと現在の損失フレームの高周波励起エネルギーのエネルギー比に従って、現在の損失フレームの利得を調整して、現在の損失フレームの調整された利得を取得するように構成される。
さらに、図11に示される実施形態では、決定モジュール111は、初期の励起調整因子を決定するようにさらに構成され、且つ、調整モジュール111は、利得補正情報に従って、初期の励起調整因子を調整して、調整された励起調整因子を取得し、調整された利得および調整された励起調整因子に従って、初期の高帯域信号を調整して、現在の損失フレームの高帯域信号を取得するようにさらに構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、現在の損失フレームのクラスが無声でなく、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1と等しく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1よりも大きく、且つ、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
さらに、図11に示される実施形態では、利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、調整モジュール112は、具体的には、連続する損失フレームの数が1よりも大きく、現在の損失フレームの高周波励起エネルギーが現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、現在の損失フレームの低帯域信号エネルギーと現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、現在の損失フレームの前のフレームの低帯域信号エネルギーおよび現在の損失フレームの低帯域信号エネルギーに従って、初期の励起調整因子を調整して、調整された励起調整因子を取得するように構成される。
当業者は、方法の実施形態のステップの全てまたは一部は、関連ハードウェアに命令するプログラムによって実施されてよいことを理解することができる。プログラムは、コンピュータ可読記憶媒体内に記憶されてよい。プログラムが動作するとき、方法の実施形態のステップは実行される。前述の記憶媒体は、ROM、RAM、磁気ディスクまたは光ディスク等のプログラムエンコードを記憶することができる任意の媒体を含む。
最後に、前述の実施形態は単に、本発明を限定するのではなく、本発明の技術的解決手段を説明するために意図されていることは留意されるべきである。本発明は、前述の実施形態を参照して詳細に説明されたが、当業者は、本発明の実施形態の技術的解決手段の範囲を逸脱することなく、前述の実施形態で説明された技術的解決手段に対して変更をさらに行うことができ、または、それらのいくつかまたは全ての技術的特徴に対して同等置換をさらに行うことができることを理解するべきである。
101 オーディオ信号
102 符号化パラメータ
103 LPC係数
104 高帯域励起信号
105 サブフレーム利得
106 グローバル利得
107 LSFパラメータ
108 符号化ストリーム
111 決定モジュール
112 調整モジュール

Claims (32)

  1. 損失フレームを処理するための方法であって、前記方法は、
    現在の損失フレームの初期の高帯域信号を決定するステップと、
    前記現在の損失フレームの利得を決定するステップと、
    前記現在の損失フレームの利得調整情報を決定するステップであって、前記利得調整情報は、
    フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、連続する損失フレームの前記数は、前記現在の損失フレームまでに損失した連続するフレームの数である、ステップと、
    前記利得調整情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得するステップと、
    前記調整された利得に従って、前記初期の高帯域信号を調整して、前記現在の損失フレームの高帯域信号を取得するステップとを含む、方法。
  2. 前記利得調整情報は、フレームの低帯域信号エネルギーを含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前記低帯域信号エネルギーと前記現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得するステップと、
    前記現在の損失フレームの前記低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップとを含む、請求項1に記載の方法。
  3. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、且つ、
    前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前記クラスが無声の遷移でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、
    前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記現在の損失フレームの前記前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
    前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップとを含む、請求項1に記載の方法。
  4. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、
    前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前記クラスが無声の遷移でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、且つ、
    前記現在の損失フレームの低帯域信号のスペクトル傾斜が前記損失フレームの前記前のフレームの前記低帯域信号のスペクトル傾斜よりも大きいとき、
    事前に設定された調整因子に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップを含む、請求項1に記載の方法。
  5. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、且つ、
    前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、
    前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記現在の損失フレームの前記前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
    前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップとを含む、請求項1に記載の方法。
  6. 前記利得調整情報は、連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
    連続する損失フレームの前記数が1よりも大きく、且つ、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比が前記現在の損失フレームの前記利得よりも大きいとき、
    前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップとを含む、請求項1に記載の方法。
  7. 前記利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含み、且つ、前記利得補正情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得する前記ステップは、
    前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得するステップと、
    連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比が前記現在の損失フレームの前記利得よりも大きく、および、前記現在の損失フレームの低帯域信号のスペクトル傾斜と前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、
    前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するステップとを含む、請求項1に記載の方法。
  8. 前記現在の損失フレームの利得調整情報を決定する前記ステップの後、前記方法は、
    初期の励起調整因子を決定するステップと、
    前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得するステップとをさらに含み、且つ、
    前記調整された利得に従って、前記初期の高帯域信号を調整して、前記現在の損失フレームの高帯域信号を取得する前記ステップは、
    前記調整された利得および前記調整された励起調整因子に従って、前記初期の高帯域信号を調整して、前記現在の損失フレームの前記高帯域信号を取得するステップを含む、請求項1乃至7のいずれか1項に記載の方法。
  9. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、且つ、
    前記現在の損失フレームのクラスが無声でなく、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、
    前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーおよび前記現在の損失フレームの低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  10. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの前記低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームのクラスが無声であるとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  11. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  12. 前記利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  13. 前記利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの前記高周波励起エネルギーよりも大きいとき、
    前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーおよび前記現在の損失フレームの低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  14. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームのクラスが無声であるとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  15. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  16. 前記利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得する前記ステップは、
    連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、
    前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するステップを含む、請求項8に記載の方法。
  17. 損失フレームを処理するための装置であって、損失フレームを処理するための前記装置は、
    現在の損失フレームの初期の高帯域信号を決定し、前記現在の損失フレームの利得を決定し、前記現在の損失フレームの利得調整情報を決定するように構成される決定モジュールであって、前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数のうちの少なくとも1つを含み、連続する損失フレームの前記数は、前記現在の損失フレームまでに損失した連続するフレームの数である、決定モジュールと、
    前記利得調整情報に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの調整された利得を取得し、前記調整された利得に従って、前記初期の高帯域信号を調整して、前記現在の損失フレームの高帯域信号を取得するように構成される調整モジュールとを含む、装置。
  18. 前記利得調整情報は、フレームの低帯域信号エネルギーを含み、且つ、前記調整モジュールは、具体的には、前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前記低帯域信号エネルギーと前記現在の損失フレームの前のフレームの低帯域信号エネルギーのエネルギー比を取得し、前記現在の損失フレームの前記低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  19. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前記クラスが無声の遷移でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記現在の損失フレームの前記前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  20. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前記クラスが無声の遷移でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも小さく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、且つ、前記現在の損失フレームの低帯域信号のスペクトル傾斜が前記損失フレームの前記前のフレームの前記低帯域信号のスペクトル傾斜よりも大きいとき、事前に設定された調整因子に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  21. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号のスペクトル傾斜および連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、且つ、前記現在の損失フレームのクラスが無声でなく、前記現在の損失フレームの前のフレームの低帯域信号のスペクトル傾斜が第1の閾値よりも大きく、および、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であるとき、前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記現在の損失フレームの前記前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  22. 前記利得調整情報は、連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの前記数が1よりも大きく、且つ、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比が前記現在の損失フレームの前記利得よりも大きいとき、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  23. 前記利得調整情報は、連続する損失フレームの数およびフレームの低帯域信号のスペクトル傾斜を含み、且つ、前記調整モジュールは、具体的には、前記現在の損失フレームの低帯域信号エネルギーに従って、前記現在の損失フレームの前のフレームの高周波励起エネルギーと前記現在の損失フレームの高周波励起エネルギーのエネルギー比を取得し、連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比が前記現在の損失フレームの前記利得よりも大きく、および、前記現在の損失フレームの低帯域信号のスペクトル傾斜と前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜との両方が、第2の閾値よりも大きいとき、前記現在の損失フレームの前記前のフレームの前記高周波励起エネルギーと前記現在の損失フレームの前記高周波励起エネルギーの前記エネルギー比に従って、前記現在の損失フレームの前記利得を調整して、前記現在の損失フレームの前記調整された利得を取得するように構成される、請求項17に記載の損失フレームを処理するための装置。
  24. 前記決定モジュールは、初期の励起調整因子を決定するようにさらに構成され、且つ、
    前記調整モジュールは、前記利得補正情報に従って、前記初期の励起調整因子を調整して、調整された励起調整因子を取得し、前記調整された利得および前記調整された励起調整因子に従って、前記初期の高帯域信号を調整して、前記現在の損失フレームの前記高帯域信号を取得するようにさらに構成される、請求項17乃至23のいずれか1項に記載の損失フレームを処理するための装置。
  25. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きく、前記現在の損失フレームのクラスが無声でなく、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声でないとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  26. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームのクラスが無声であるとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  27. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  28. 前記利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1と等しく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  29. 前記利得調整情報は、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1よりも大きく、且つ、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーよりも大きいとき、前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーおよび前記現在の損失フレームの低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  30. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームのクラスが無声であるとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  31. 前記利得調整情報は、フレームのクラス、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前の最後の正常に受信されたフレームのクラスが無声であるとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
  32. 前記利得調整情報は、フレームの低帯域のスペクトル傾斜、フレームの低帯域信号エネルギーおよび連続する損失フレームの数を含み、且つ、前記調整モジュールは、具体的には、連続する損失フレームの前記数が1よりも大きく、前記現在の損失フレームの高周波励起エネルギーが前記現在の損失フレームの前のフレームの高周波励起エネルギーの半分よりも小さく、前記現在の損失フレームの低帯域信号エネルギーと前記現在の損失フレームの前記前のフレームの低帯域信号エネルギーのエネルギー比が事前に設定された間隔内であり、および、前記現在の損失フレームの前記前のフレームの低帯域信号のスペクトル傾斜が第3の閾値よりも大きいとき、前記現在の損失フレームの前記前のフレームの前記低帯域信号エネルギーおよび前記現在の損失フレームの前記低帯域信号エネルギーに従って、前記初期の励起調整因子を調整して、前記調整された励起調整因子を取得するように構成される、請求項24に記載の損失フレームを処理するための装置。
JP2016572825A 2014-06-25 2015-01-28 損失フレームを処理するための方法および装置 Active JP6439804B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201410291123.5 2014-06-25
CN201410291123.5A CN105225666B (zh) 2014-06-25 2014-06-25 处理丢失帧的方法和装置
PCT/CN2015/071728 WO2015196803A1 (zh) 2014-06-25 2015-01-28 处理丢失帧的方法和装置

Publications (2)

Publication Number Publication Date
JP2017524972A true JP2017524972A (ja) 2017-08-31
JP6439804B2 JP6439804B2 (ja) 2018-12-19

Family

ID=54936693

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016572825A Active JP6439804B2 (ja) 2014-06-25 2015-01-28 損失フレームを処理するための方法および装置

Country Status (14)

Country Link
US (3) US9852738B2 (ja)
EP (2) EP3133596B1 (ja)
JP (1) JP6439804B2 (ja)
KR (1) KR101942411B1 (ja)
CN (2) CN106683681B (ja)
AU (1) AU2015281722B2 (ja)
BR (1) BR112016027113B1 (ja)
CA (1) CA2949266C (ja)
HK (1) HK1219801A1 (ja)
MX (1) MX359500B (ja)
MY (1) MY178408A (ja)
RU (1) RU2666471C2 (ja)
SG (1) SG11201609526RA (ja)
WO (1) WO2015196803A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102423753B1 (ko) * 2015-08-20 2022-07-21 삼성전자주식회사 스피커 위치 정보에 기초하여, 오디오 신호를 처리하는 방법 및 장치
CN108922551B (zh) * 2017-05-16 2021-02-05 博通集成电路（上海）股份有限公司 用于补偿丢失帧的电路及方法
WO2020014517A1 (en) * 2018-07-12 2020-01-16 Dolby International Ab Dynamic eq
JP7130878B2 (ja) * 2019-01-13 2022-09-05 華為技術有限公司 高分解能オーディオコーディング

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005534950A (ja) * 2002-05-31 2005-11-17 ヴォイスエイジ・コーポレーション 線形予測に基づく音声コーデックにおける効率的なフレーム消失の隠蔽のための方法、及び装置
WO2006098274A1 (ja) * 2005-03-14 2006-09-21 Matsushita Electric Industrial Co., Ltd. スケーラブル復号化装置およびスケーラブル復号化方法
WO2007000988A1 (ja) * 2005-06-29 2007-01-04 Matsushita Electric Industrial Co., Ltd. スケーラブル復号装置および消失データ補間方法
JP2011515712A (ja) * 2008-03-28 2011-05-19 フランス・テレコム 階層型復号化構造におけるデジタル音声信号の伝送エラーの隠蔽

Family Cites Families (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5450449A (en) * 1994-03-14 1995-09-12 At&T Ipm Corp. Linear prediction coefficient generation during frame erasure or packet loss
US5699485A (en) * 1995-06-07 1997-12-16 Lucent Technologies Inc. Pitch delay modification during frame erasures
JP3616432B2 (ja) * 1995-07-27 2005-02-02 日本電気株式会社 音声符号化装置
JP3308783B2 (ja) 1995-11-10 2002-07-29 日本電気株式会社 音声復号化装置
US5819217A (en) * 1995-12-21 1998-10-06 Nynex Science & Technology, Inc. Method and system for differentiating between speech and noise
FR2765715B1 (fr) * 1997-07-04 1999-09-17 Sextant Avionique Procede de recherche d'un modele de bruit dans des signaux sonores bruites
FR2774827B1 (fr) * 1998-02-06 2000-04-14 France Telecom Procede de decodage d'un flux binaire representatif d'un signal audio
US6260010B1 (en) * 1998-08-24 2001-07-10 Conexant Systems, Inc. Speech encoder using gain normalization that combines open and closed loop gains
AU4072400A (en) * 1999-04-05 2000-10-23 Hughes Electronics Corporation A voicing measure as an estimate of signal periodicity for frequency domain interpolative speech codec system
JP2000305599A (ja) * 1999-04-22 2000-11-02 Sony Corp 音声合成装置及び方法、電話装置並びにプログラム提供媒体
US6636829B1 (en) 1999-09-22 2003-10-21 Mindspeed Technologies, Inc. Speech communication system and method for handling lost frames
US6574593B1 (en) * 1999-09-22 2003-06-03 Conexant Systems, Inc. Codebook tables for encoding and decoding
US6604070B1 (en) 1999-09-22 2003-08-05 Conexant Systems, Inc. System of encoding and decoding speech signals
DE60117471T2 (de) * 2001-01-19 2006-09-21 Koninklijke Philips Electronics N.V. Breitband-signalübertragungssystem
SE521693C3 (sv) * 2001-03-30 2004-02-04 Ericsson Telefon Ab L M En metod och anordning för brusundertryckning
CN1235192C (zh) * 2001-06-28 2006-01-04 皇家菲利浦电子有限公司 传输系统以及用于接收窄带音频信号的接收机和方法
US6895375B2 (en) 2001-10-04 2005-05-17 At&T Corp. System for bandwidth extension of Narrow-band speech
US7457757B1 (en) * 2002-05-30 2008-11-25 Plantronics, Inc. Intelligibility control for speech communications systems
WO2003107591A1 (en) * 2002-06-14 2003-12-24 Nokia Corporation Enhanced error concealment for spatial audio
KR100728428B1 (ko) * 2002-09-19 2007-06-13 마츠시타 덴끼 산교 가부시키가이샤 오디오 디코딩 장치 및 오디오 디코딩 방법
US20040064308A1 (en) * 2002-09-30 2004-04-01 Intel Corporation Method and apparatus for speech packet loss recovery
US7330812B2 (en) * 2002-10-04 2008-02-12 National Research Council Of Canada Method and apparatus for transmitting an audio stream having additional payload in a hidden sub-channel
KR100501930B1 (ko) * 2002-11-29 2005-07-18 삼성전자주식회사 적은 계산량으로 고주파수 성분을 복원하는 오디오 디코딩방법 및 장치
US6985856B2 (en) 2002-12-31 2006-01-10 Nokia Corporation Method and device for compressed-domain packet loss concealment
WO2004090870A1 (ja) * 2003-04-04 2004-10-21 Kabushiki Kaisha Toshiba 広帯域音声を符号化または復号化するための方法及び装置
US20050004793A1 (en) * 2003-07-03 2005-01-06 Pasi Ojala Signal adaptation for higher band coding in a codec utilizing band split coding
CN1989548B (zh) 2004-07-20 2010-12-08 松下电器产业株式会社 语音解码装置及补偿帧生成方法
JP4977472B2 (ja) * 2004-11-05 2012-07-18 パナソニック株式会社 スケーラブル復号化装置
DK1875463T3 (en) * 2005-04-22 2019-01-28 Qualcomm Inc SYSTEMS, PROCEDURES AND APPARATUS FOR AMPLIFIER FACTOR GLOSSARY
US20060262851A1 (en) * 2005-05-19 2006-11-23 Celtro Ltd. Method and system for efficient transmission of communication traffic
EP1727131A2 (en) * 2005-05-26 2006-11-29 Yamaha Hatsudoki Kabushiki Kaisha Noise cancellation helmet, motor vehicle system including the noise cancellation helmet and method of canceling noise in helmet
US7831421B2 (en) * 2005-05-31 2010-11-09 Microsoft Corporation Robust decoder
US7734462B2 (en) * 2005-09-02 2010-06-08 Nortel Networks Limited Method and apparatus for extending the bandwidth of a speech signal
US8255207B2 (en) * 2005-12-28 2012-08-28 Voiceage Corporation Method and device for efficient frame erasure concealment in speech codecs
CN100571314C (zh) * 2006-04-18 2009-12-16 华为技术有限公司 对丢失的语音业务数据帧进行补偿的方法
CN1983909B (zh) 2006-06-08 2010-07-28 华为技术有限公司 一种丢帧隐藏装置和方法
US8532984B2 (en) * 2006-07-31 2013-09-10 Qualcomm Incorporated Systems, methods, and apparatus for wideband encoding and decoding of active frames
TWI343560B (en) * 2006-07-31 2011-06-11 Qualcomm Inc Systems, methods, and apparatus for wideband encoding and decoding of active frames
US8015000B2 (en) * 2006-08-03 2011-09-06 Broadcom Corporation Classification-based frame loss concealment for audio signals
US8374857B2 (en) 2006-08-08 2013-02-12 Stmicroelectronics Asia Pacific Pte, Ltd. Estimating rate controlling parameters in perceptual audio encoders
US8024192B2 (en) 2006-08-15 2011-09-20 Broadcom Corporation Time-warping of decoded audio signal after packet loss
JP5224666B2 (ja) * 2006-09-08 2013-07-03 株式会社東芝 オーディオ符号化装置
JP4827675B2 (ja) * 2006-09-25 2011-11-30 三洋電機株式会社 低周波帯域音声復元装置、音声信号処理装置および録音機器
CN101155140A (zh) 2006-10-01 2008-04-02 华为技术有限公司 音频流错误隐藏的方法、装置和系统
PT2102619T (pt) * 2006-10-24 2017-05-25 Voiceage Corp Método e dispositivo para codificação de tramas de transição em sinais de voz
CN101286319B (zh) 2006-12-26 2013-05-01 华为技术有限公司 改进语音丢包修补质量的语音编码方法
US8010351B2 (en) * 2006-12-26 2011-08-30 Yang Gao Speech coding system to improve packet loss concealment
US20080208575A1 (en) * 2007-02-27 2008-08-28 Nokia Corporation Split-band encoding and decoding of an audio signal
CN101321033B (zh) 2007-06-10 2011-08-10 华为技术有限公司 帧补偿方法及系统
US9653088B2 (en) 2007-06-13 2017-05-16 Qualcomm Incorporated Systems, methods, and apparatus for signal encoding using pitch-regularizing and non-pitch-regularizing coding
CN101325537B (zh) 2007-06-15 2012-04-04 华为技术有限公司 一种丢帧隐藏的方法和设备
EP2162880B1 (en) * 2007-06-22 2014-12-24 VoiceAge Corporation Method and device for estimating the tonality of a sound signal
US8185388B2 (en) 2007-07-30 2012-05-22 Huawei Technologies Co., Ltd. Apparatus for improving packet loss, frame erasure, or jitter concealment
CN100524462C (zh) * 2007-09-15 2009-08-05 华为技术有限公司 对高带信号进行帧错误隐藏的方法及装置
CN101335003B (zh) * 2007-09-28 2010-07-07 华为技术有限公司 噪声生成装置、及方法
CN101207665B (zh) 2007-11-05 2010-12-08 华为技术有限公司 一种衰减因子的获取方法
KR101235830B1 (ko) * 2007-12-06 2013-02-21 한국전자통신연구원 음성코덱의 품질향상장치 및 그 방법
US8180064B1 (en) * 2007-12-21 2012-05-15 Audience, Inc. System and method for providing voice equalization
CN101588341B (zh) 2008-05-22 2012-07-04 华为技术有限公司 一种丢帧隐藏的方法及装置
EP2410522B1 (en) * 2008-07-11 2017-10-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio signal encoder, method for encoding an audio signal and computer program
US8718804B2 (en) * 2009-05-05 2014-05-06 Huawei Technologies Co., Ltd. System and method for correcting for lost data in a digital audio signal
US8660851B2 (en) * 2009-05-26 2014-02-25 Panasonic Corporation Stereo signal decoding device and stereo signal decoding method
US8428938B2 (en) * 2009-06-04 2013-04-23 Qualcomm Incorporated Systems and methods for reconstructing an erased speech frame
CN101958119B (zh) 2009-07-16 2012-02-29 中兴通讯股份有限公司 一种改进的离散余弦变换域音频丢帧补偿器和补偿方法
GB0919673D0 (en) * 2009-11-10 2009-12-23 Skype Ltd Gain control for an audio signal
WO2011141772A1 (en) * 2010-05-12 2011-11-17 Nokia Corporation Method and apparatus for processing an audio signal based on an estimated loudness
US8744091B2 (en) * 2010-11-12 2014-06-03 Apple Inc. Intelligibility control using ambient noise detection
WO2012070370A1 (ja) * 2010-11-22 2012-05-31 株式会社エヌ・ティ・ティ・ドコモ 音声符号化装置、方法およびプログラム、並びに、音声復号装置、方法およびプログラム
BR112013020324B8 (pt) * 2011-02-14 2022-02-08 Fraunhofer Ges Forschung Aparelho e método para supressão de erro em fala unificada de baixo atraso e codificação de áudio
AU2012218778B2 (en) * 2011-02-15 2016-10-20 Voiceage Evs Llc Device and method for quantizing the gains of the adaptive and fixed contributions of the excitation in a celp codec
EP2681734B1 (en) * 2011-03-04 2017-06-21 Telefonaktiebolaget LM Ericsson (publ) Post-quantization gain correction in audio coding
CN102915737B (zh) 2011-07-31 2018-01-19 中兴通讯股份有限公司 一种浊音起始帧后丢帧的补偿方法和装置
EP3537436B1 (en) * 2011-10-24 2023-12-20 ZTE Corporation Frame loss compensation method and apparatus for voice frame signal
CN104254886B (zh) * 2011-12-21 2018-08-14 华为技术有限公司 自适应编码浊音语音的基音周期
CN103295578B (zh) 2012-03-01 2016-05-18 华为技术有限公司 一种语音频信号处理方法和装置
CN103325373A (zh) * 2012-03-23 2013-09-25 杜比实验室特许公司 用于传送和接收音频信号的方法和设备
CN102833037B (zh) * 2012-07-18 2015-04-29 华为技术有限公司 一种语音数据丢包的补偿方法及装置
WO2014042439A1 (ko) * 2012-09-13 2014-03-20 엘지전자 주식회사 손실 프레임 복원 방법 및 오디오 복호화 방법과 이를 이용하는 장치
CN107481725B (zh) * 2012-09-24 2020-11-06 三星电子株式会社 时域帧错误隐藏设备和时域帧错误隐藏方法
US9123328B2 (en) * 2012-09-26 2015-09-01 Google Technology Holdings LLC Apparatus and method for audio frame loss recovery
CN103854649B (zh) * 2012-11-29 2018-08-28 中兴通讯股份有限公司 一种变换域的丢帧补偿方法及装置
EP2757558A1 (en) * 2013-01-18 2014-07-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Time domain level adjustment for audio signal decoding or encoding
US9711156B2 (en) * 2013-02-08 2017-07-18 Qualcomm Incorporated Systems and methods of performing filtering for gain determination
US9208775B2 (en) * 2013-02-21 2015-12-08 Qualcomm Incorporated Systems and methods for determining pitch pulse period signal boundaries
US20150170655A1 (en) * 2013-12-15 2015-06-18 Qualcomm Incorporated Systems and methods of blind bandwidth extension
JP6318621B2 (ja) * 2014-01-06 2018-05-09 株式会社デンソー 音声処理装置、音声処理システム、音声処理方法、音声処理プログラム
US9697843B2 (en) * 2014-04-30 2017-07-04 Qualcomm Incorporated High band excitation signal generation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005534950A (ja) * 2002-05-31 2005-11-17 ヴォイスエイジ・コーポレーション 線形予測に基づく音声コーデックにおける効率的なフレーム消失の隠蔽のための方法、及び装置
WO2006098274A1 (ja) * 2005-03-14 2006-09-21 Matsushita Electric Industrial Co., Ltd. スケーラブル復号化装置およびスケーラブル復号化方法
WO2007000988A1 (ja) * 2005-06-29 2007-01-04 Matsushita Electric Industrial Co., Ltd. スケーラブル復号装置および消失データ補間方法
JP2011515712A (ja) * 2008-03-28 2011-05-19 フランス・テレコム 階層型復号化構造におけるデジタル音声信号の伝送エラーの隠蔽

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"G.722 (09/12)7 kHz audio-coding within 64 kbit/s", ＩＴＵ−Ｔ規格文書（Ｇシリーズ） G.722, JPN6018006236, 30 September 2012 (2012-09-30), CH, pages 127 - 129, ISSN: 0003746405 *

Also Published As

Publication number Publication date
CN106683681B (zh) 2020-09-25
RU2666471C2 (ru) 2018-09-07
CN106683681A (zh) 2017-05-17
RU2016151461A3 (ja) 2018-07-27
BR112016027113B1 (pt) 2023-01-31
EP3534366A1 (en) 2019-09-04
WO2015196803A1 (zh) 2015-12-30
US20180075853A1 (en) 2018-03-15
MY178408A (en) 2020-10-12
MX2016017007A (es) 2017-05-12
RU2016151461A (ru) 2018-07-27
US20190251980A1 (en) 2019-08-15
MX359500B (es) 2018-09-26
HK1219801A1 (zh) 2017-04-13
EP3133596B1 (en) 2019-01-09
SG11201609526RA (en) 2016-12-29
AU2015281722B2 (en) 2018-02-01
EP3133596A1 (en) 2017-02-22
US20170103764A1 (en) 2017-04-13
EP3133596A4 (en) 2017-05-17
CN105225666A (zh) 2016-01-06
AU2015281722A1 (en) 2016-12-01
CA2949266A1 (en) 2015-12-30
JP6439804B2 (ja) 2018-12-19
US9852738B2 (en) 2017-12-26
US10311885B2 (en) 2019-06-04
EP3534366B1 (en) 2022-01-26
US10529351B2 (en) 2020-01-07
KR101942411B1 (ko) 2019-04-11
CN105225666B (zh) 2016-12-28
KR20160148021A (ko) 2016-12-23
CA2949266C (en) 2019-10-22
BR112016027113A2 (ja) 2017-08-15

Similar Documents

Publication Publication Date Title
US9047863B2 (en) Systems, methods, apparatus, and computer-readable media for criticality threshold control
US20200194010A1 (en) Systems and methods of communicating redundant frame information
US8255207B2 (en) Method and device for efficient frame erasure concealment in speech codecs
US10529351B2 (en) Method and apparatus for recovering lost frames
US11176955B2 (en) Audio coding device, audio coding method, audio coding program, audio decoding device, audio decoding method, and audio decoding program
KR20140005277A (ko) 저-지연 통합 스피치 및 오디오 코딩에서 에러 은닉을 위한 장치 및 방법
EP3055860B1 (en) Gain shape estimation for improved tracking of high-band temporal characteristics
JP2004138756A (ja) 音声符号化装置、音声復号化装置、音声信号伝送方法及びプログラム
US20140236585A1 (en) Systems and methods for determining pitch pulse period signal boundaries
EP3595211B1 (en) Method for processing lost frame, and decoder

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180227

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180508

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181023

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181105

R150 Certificate of patent or registration of utility model

Ref document number: 6439804

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250