JP2014519044A - 線形予測係数量子化方法、サウンド符号化方法、線形予測係数逆量子化方法、サウンド復号化方法、その記録媒体及び電子機器 - Google Patents

線形予測係数量子化方法、サウンド符号化方法、線形予測係数逆量子化方法、サウンド復号化方法、その記録媒体及び電子機器 Download PDF

Info

Publication number
JP2014519044A
JP2014519044A JP2014506341A JP2014506341A JP2014519044A JP 2014519044 A JP2014519044 A JP 2014519044A JP 2014506341 A JP2014506341 A JP 2014506341A JP 2014506341 A JP2014506341 A JP 2014506341A JP 2014519044 A JP2014519044 A JP 2014519044A
Authority
JP
Japan
Prior art keywords
quantization
input signal
scheme
prediction
quantization scheme
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014506341A
Other languages
English (en)
Other versions
JP6178305B2 (ja
JP2014519044A5 (ja
Inventor
ソン,ホ−サン
オ,ウン−ミ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2014519044A publication Critical patent/JP2014519044A/ja
Publication of JP2014519044A5 publication Critical patent/JP2014519044A5/ja
Application granted granted Critical
Publication of JP6178305B2 publication Critical patent/JP6178305B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • G10L19/12Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters the excitation function being a code excitation, e.g. in code excited linear prediction [CELP] vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • G10L19/038Vector quantisation, e.g. TwinVQ audio
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/06Determination or coding of the spectral characteristics, e.g. of the short-term prediction coefficients
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • G10L19/087Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters using mixed excitation models, e.g. MELP, MBE, split band LPC or HVXC
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/167Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/18Vocoders using multiple modes
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/18Vocoders using multiple modes
    • G10L19/22Mode decision, i.e. based on audio signal content versus external parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/06Determination or coding of the spectral characteristics, e.g. of the short-term prediction coefficients
    • G10L19/07Line spectrum pair [LSP] vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L2019/0001Codebooks
    • G10L2019/0004Design or structure of the codebook
    • G10L2019/0005Multi-stage vector quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel

Abstract

低複雑度で効率的にLPC係数を量子化するために、入力信号の予測モード、予測エラー及び伝送チャンネル状態のうち少なくとも一つを考慮し、入力信号について、フレーム間予測を使用しない第1量子化スキームと、入力信号について、フレーム間予測を使用する第2量子化スキームとのうち一つを介して、該入力信号が量子化されるように制御する段階を含む。

Description

本発明は、線形予測係数量子化及び逆量子化に係り、さらに具体的には、低い複雑度で線形予測係数を効率的に量子化する方法、それを採用するサウンド符号化方法、線形予測係数逆量子化方法、それを採用するサウンド復号化方法、電子機器並びにその記録媒体に関する。
音声あるいはオーディオのようなサウンド符号化システムでは、サウンドの短区間周波数特性を表現するために、線形予測符号化(LPC:linear predictive coding)係数が使われる。LPC係数は、入力サウンドをフレーム単位に分け、各フレーム別に予測誤差のエネルギーを最小化させる形態で求められる。ところで、LPC係数は、ダイナミックレンジが大きく、使用されるLPCフィルタの特性が、LPC係数の量子化エラーに非常に敏感であり、フィルタの安定性が保証されるものではない。
そのために、LPC係数を、フィルタの安定性確認が容易であり、補間に有利であり、量子化特性が良好である他の係数に変換して量子化を行うが、主に、線スペクトル周波数(LSF:line spectral frequency)あるいはイミッタンススペクトル周波数(ISF:immittance spectral frequency)に変換して量子化することが好まれている。特に、LSF係数の量子化技法は、周波数領域及び時間領域で有するLSF係数のフレーム間の高相関度を利用することにより、量子化利得を高めることができる。
LSF係数は、短区間サウンドの周波数特性を示し、入力サウンドの周波数特性が急変するフレームの場合、当該フレームのLSF係数も急変する。ところで、LSF係数のフレーム間の高相関度を利用するフレーム間予測器を含む量子化器の場合、急変するフレームについては、適切な予測が不可能であって量子化性能が落ちる。従って、入力サウンドの各フレーム別信号特性に対応して最適化された量子化器を選択する必要がある。
本発明が解決しようとする課題は、低複雑度で、LPC係数を効率的に量子化する方法、それを採用するサウンド符号化方法、LPC係数逆量子化方法、それを採用するサウンド復号化方法、その記録媒体及び電子機器を提供するところにある。
前記課題を解決するための本発明の一実施形態による量子化方法は、入力信号に対して、フレーム間予測を使用しない第1量子化スキームを利用して量子化する段階と、前記入力信号に対して、前記フレーム間予測を使用する第2量子化スキームを利用して量子化する段階と、前記入力信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮し、前記第1量子化スキームと、前記第2量子化スキームとのうち一つを介して、前記入力信号が量子化されるように制御する段階と、を含む。
前記課題を解決するための本発明の一実施形態によるサウンド符号化方法は、入力信号の符号化モードを決定する段階と、前記入力信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮し、フレーム間予測を使用しない第1量子化スキームと、フレーム間予測を使用する第2量子化スキームとのうち一つを利用して量子化する段階と、前記第1量子化スキームと、前記第2量子化スキームとのうち一つを介して量子化された入力信号を、前記符号化モードに対応して符号化する段階と、前記第1量子化スキームによって量子化された結果と前記第2量子化スキームによって量子化された結果のうち一つ、前記入力信号の前記符号化モード、及び前記入力信号の量子化と係わる経路情報を含むビットストリームを生成する段階と、を含む。
前記課題を解決するための本発明の一実施形態による逆量子化方法は、入力信号に対して、フレーム間予測を使用しない第1逆量子化スキームを利用して逆量子化する段階と、前記入力信号に対して、前記フレーム間予測を使用する第2逆量子化スキームを利用して逆量子化する段階と、ビットストリームに含まれた経路情報に基づいて、前記第1逆量子化スキームと、前記第2逆量子化スキームとのうち一つを介して、前記入力信号が逆量子化されるように制御する段階と、を含み、前記ビットストリームに含まれた経路情報は、符号化端で、前記入力信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮して決定する。
前記課題を解決するための本発明の一実施形態によるサウンド復号化方法は、ビットストリームに含まれた線形予測符号化パラメータと符号化モードとを復号化する段階と、前記ビットストリームに含まれた経路情報に基づいて、線形予測符号化パラメータに対して、フレーム間予測を使用しない第1逆量子化スキームと、前記フレーム間予測を使用する第2逆量子化スキームとのうち一つを利用して逆量子化する段階と、前記逆量子化された線形予測符号化パラメータを、前記復号化された符号化モードに対応して復号化する段階と、を含み、前記ビットストリームに含まれた経路情報は、符号化端で、入力信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮して決定される。
前記課題を解決するための本発明の一実施形態による量子化器タイプ決定方法は、入力信号のビット率を第1基準値と比較する段階と、前記入力信号の帯域を第2基準値と比較する段階と、内部サンプリング周波数を第3基準値と比較する段階と、前記一つ以上の比較結果に基づいて、前記入力信号の量子化器タイプを開ループ並びに閉ループのうち一つに決定する段階と、を含む。
前記課題を解決するための本発明の一実施形態による電子機器は、サウンド信号と、符号化されたビットストリームとのうち少なくとも一つを受信したり、あるいは符号化されたサウンド信号と、復元されたサウンドとのうち少なくとも一つを送信する通信部;及び前記サウンド信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮し、フレーム間予測を使用しない第1量子化スキームと、フレーム間予測を使用する第2量子化スキームとのうち一つを介して、前記サウンド信号を量子化し、前記量子化されたサウンド信号を、符号化モードに対応して符号化する符号化モジュール;を含む。
前記課題を解決するための本発明の他の実施形態による電子機器は、サウンド信号と、符号化されたビットストリームとのうち少なくとも一つを受信したり、あるいは符号化されたサウンド信号と、復元されたサウンドとのうち少なくとも一つを送信する通信部;及び前記ビットストリームに含まれた線形予測符号化パラメータと符号化モードとを復号化し、前記ビットストリームに含まれた経路情報に基づいて、フレーム間予測を使用しない第1逆量子化スキームと、前記フレーム間予測を使用する第2逆量子化スキームとのうち一つを利用して、前記復号化された線形予測符号化パラメータを逆量子化し、前記逆量子化された線形予測符号化パラメータを、前記復号化された符号化モードに対応して復号化する復号化モジュール;を含み、前記経路情報は、符号化端で、前記サウンド信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮して決定される。
前記課題を解決するための本発明のさらに他の実施形態による電子機器は、サウンド信号と、符号化されたビットストリームとのうち少なくとも一つを受信したり、あるいは符号化されたサウンド信号と、復元されたサウンドとのうち少なくとも一つを送信する通信部;前記サウンド信号の予測モード、予測エラー及びチャンネル状態のうち少なくとも一つを考慮し、フレーム間予測を使用しない第1量子化スキームと、フレーム間予測を使用する第2量子化スキームとのうち一つを介して、前記サウンド信号を量子化し、前記量子化されたサウンド信号を、符号化モードに対応して符号化する符号化モジュール;及び前記ビットストリームに含まれた線形予測符号化パラメータと符号化モードとを復号化し、前記ビットストリームに含まれた経路情報に基づいて、フレーム間予測を使用しない第1逆量子化スキームと、前記フレーム間予測を使用する第2逆量子化スキームとのうち一つを利用して、前記復号化された線形予測符号化パラメータを逆量子化し、前記逆量子化された線形予測符号化パラメータを、前記復号化された符号化モードに対応して復号化する復号化モジュール;を含む。
本発明によれば、音声信号あるいはオーディオ信号をさらに効率的に量子化するために、音声信号あるいはオーディオ信号の特性によって、複数の符号化モードに分けて、各符号化モードに適用される圧縮率によって、多様なビット数を割り当てるにおいて、各符号化モードに対応して低複雑度で最適の量子化器を選択することができる。
本発明の一実施形態によるサウンド符号化装置の構成を示したブロック図である。 図1に図示された符号化モード選択部で選択される多様な符号化モードの例を示した図面である。 図1に図示された符号化モード選択部で選択される多様な符号化モードの例を示した図面である。 図1に図示された符号化モード選択部で選択される多様な符号化モードの例を示した図面である。 図1に図示された符号化モード選択部で選択される多様な符号化モードの例を示した図面である。 本発明の一実施形態によるLPC量子化部の構成を示したブロック図である。 本発明の一実施形態による加重関数決定部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態による量子化経路決定部の構成を示したブロック図である。 図6に図示された量子化経路決定部の例による動作について説明するフローチャートである。 図6に図示された量子化経路決定部の例による動作について説明するフローチャートである。 本発明の一実施形態による量子化経路決定部の構成を示したブロック図である。 コーデックサービスを提供するとき、ネットワーク端で伝送が可能なチャネルの状態に係わる情報について説明する図面である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 図20は本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。 本発明の一実施形態による量子化器構造選択部の構成について説明する図面である。 本発明の一実施形態による量子化器構造選択方法の動作について説明する図面である。 本発明の一実施形態によるサウンド復号化装置の構成を示したブロック図である。 本発明の一実施形態によるLPC係数逆量子化部の構成を示したブロック図である。 本発明の一実施形態によるLPC係数逆量子化部の詳細的な構成を示したブロック図である。 図25に図示された第1逆量子化スキームと第2逆量子化スキームとの一例を示した図面である。 本発明の一実施形態による量子化方法の動作について説明するフローチャートである。 本発明の一実施形態による逆量子化方法の動作について説明するフローチャートである。 本発明の一実施形態による符号化モジュールを含む電子機器の構成を示したブロック図である。 本発明の一実施形態による復号化モジュールを含む電子機器の構成を示したブロック図である。 本発明の一実施形態による符号化モジュールと復号化モジュールとを含む電子機器の構成を示したブロック図である。
本発明は、多様な変換を加えることができ、さまざまな実施形態を有することができ、特定実施形態を図面に例示し、詳細な説明で具体的に説明する。しかし、それは、本発明を特定の実施形態について限定するものではなく、本発明の技術的思想及び技術範囲に含まれる全ての変換、均等物ないし代替物を含むものであると理解する。本発明についての説明において、関連公知技術についての具体的な説明が、本発明の要旨を不明確にすると判断される場合、その詳細な説明を省略する。
第1、第2のような用語は、多様な構成要素について説明するのに使用されるが、構成要素が用語によって限定されるものではない。用語は、1つの構成要素を他の構成要素から区別する目的のみに使用される。
本発明で使用した用語は、ただ特定の実施形態について説明するために使用されたものであり、本発明を限定する意図ではない。本発明で使用した用語は、本発明での機能を考慮しながら、可能な限り現在広く使用される一般的な用語を選択したが、それは、当分野の当業者の意図、判例、または新たな技術の出現などによって異なりもする。また、特定の場合は、出願人が任意に選定した用語もあり、その場合、当該発明の説明部分で詳しくその意味を記載する。従って、本発明で使用される用語は、単純な用語の名称ではない、その用語が有する意味と、本発明の全般にわたる内容とを基に定義されなければならない。
単数の表現は、文脈上明白に取り立てて意味しない限り、複数の表現を含む。本発明で、「含む」または「有する」のような用語は、明細書上に記載された特徴、数字、段階、動作、構成要素、部品、またはそれらを組み合わせたものが存在するということを指定するものであり、一つまたはそれ以上の他の特徴や数字、段階、動作、構成要素、部品、またはそれらを組み合わせたものの存在または付加の可能性を前もって排除するものではないと理解しなければならない。
以下、本発明の実施形態について、添付図面を参照しつつ詳細に説明し、添付図面を参照して説明するにおいて、同一であるか、あるいは対応する構成要素は、同一の図面番号を付し、それに係わる重複説明は省略する。
図1は、本発明の一実施形態によるサウンド符号化装置の構成を示したブロック図である。図1に図示されたサウンド符号化装置100は、前処理部111、スペクトル及びLP(linear prediction)分析部113、符号化モード選択部115、LPC(linear predictive coding)係数量子化部117、可変モード符号化部119並びにパラメータ符号化部121を含んでもよい。各構成要素は、少なくとも一つ以上のモジュールに一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。ここで、サウンドは、オーディオあるいは音声の信号、あるいはオーディオと音声との混合信号を意味することができるので、以下では、説明の便宜のために、サウンドを音声とする。
図1を参照すれば、前処理部111は、入力される音声信号を前処理することができる。前処理過程を介して、音声信号から所望しない周波数成分が除去されたり、あるいは符号化に有利になるように、音声信号の周波数特性が調整される。具体的には、前処理部111は、ハイパス・フィルタリング(high pass filtering)、プリエンファシス(pre-emphasis)またはサンプリング(sampling)変換などを行うことができる。
スペクトル及び線形予測(LP)分析部113は、前処理された音声信号に対して、周波数ドメインの特性を分析したり、あるいはLP分析を行い、LPC係数を抽出することができる。一般的に、フレーム当たり1回のLP分析が行われるが、さらなる音質向上のために、フレーム当たり2回以上のLP分析も行われる。その場合、1回は、既存のLP分析であるフレームエンド(frame-end)のためのLPであり、残りは、音質向上のための中間サブフレーム(mid-subframe)のためのLPが追加される。そのとき、現在フレームのフレームエンドは、現在フレームを構成するサブフレームにおいて、最後のサブフレームを意味し、以前フレームのフレームエンドは、以前フレームを構成するサブフレームのうち、最後のサブフレームを意味する。一例として、1つのフレームは、4個のサブフレームから構成される。
ここで、中間サブフレームは、以前フレームのフレームエンドである最後のサブフレームと、現在フレームのフレームエンドである最後のサブフレームとの間に存在するサブフレームのうち、一つ以上のサブフレームを意味する。これにより、スペクトル及びLP分析部113は、全2セット以上のLPC係数を抽出することができる。一方、LPC係数は、入力信号が狭帯域(NB:narrowband)である場合、次数10を使用し、広帯域(WB:wideband)である場合、次数16〜20を使用するが、それに限定されるものではない。
符号化モード選択部115は、マルチレート(multi-rate)に対応し、複数個の符号化モードのうち一つを選択することができる。また、符号化モード選択部115は、帯域情報、ピッチ情報または周波数ドメインの分析情報から得られる音声信号の特性を利用して、複数個の符号化モードのうち一つを選択することができる。また、符号化モード選択部115は、マルチレートと、音声信号の特性とを利用して、複数個の符号化モードのうち一つを選択することができる。
LPC係数量子化部117は、スペクトル及びLP分析部113で抽出されたLPC係数を量子化することができる。LPC係数量子化部117は、LPC係数を量子化に適する他の係数に変換して量子化を行うことができる。LPC係数量子化部117は、音声信号の量子化以前に、所定基準に基づいて、フレーム間予測を使用しない第1経路と、フレーム間予測を使用する第2経路と、を含む複数の経路のうち一つを、音声信号の量子化経路として選択し、選択された量子化経路によって、第1量子化スキームと、第2量子化スキームとのうち一つを利用して、量子化することができる。一方、LPC係数量子化部117は、フレーム間予測を使用しない第1量子化スキームによる第1経路、並びにフレーム間予測を使用する第2量子化スキームによる第2経路いずれについても、LPC係数を量子化し、所定基準に基づいて、第1経路及び第2経路のうち1つの量子化結果を選択することができる。
可変モード符号化部119は、LPC係数量子化部117で量子化されたLPC係数を符号化し、ビットストリームを生成する。可変モード符号化部119は、量子化されたLPC係数を、符号化モード選択部115で選択された符号化モードに対応して符号化することができる。一方、可変モード符号化部119は、LPC係数の励起信号を、フレームまたはサブフレームの単位で符号化することができる。
可変モード符号化部119で使用される符号化アルゴリズムの一例としては、CELP(code-excited linear prediction)またはACELP(algebraic CELP)が挙げられる。一方、符号化モードによって、変換符号化アルゴリズムが追加して使用される。CELP技法によって、LPC係数を符号化するための代表的なパラメータは、適応コードブック・インデックス、適応コードブック利得、固定コードブック・インデックス、固定コードブック利得などがある。可変モード符号化部119で符号化された現在フレームは、次のフレームの符号化のために保存される。可変モード符号化部119で生成されたビットストリームは、保存や伝送の目的で使用される。
パラメータ符号化部121は、復号化端で復号化に使用されるパラメータを符号化することができる。望ましくは、符号化モードに対応するパラメータを符号化することができる。
図2Aないし図2Dは、図1に図示された符号化モード選択部115で選択される多様な符号化モードの例を示したものである。図2A及び図2Cは、量子化に割り当てられるビット数が多い場合、すなわち、高ビット率である場合の符号化モードの分類例であり、図2B及び図2Dは、量子化に割り当てられるビット数が少ない場合、すなわち、低ビット率である場合の符号化モードの分類例である。
まず、高ビット率である場合、単純な構造のために、図2Aでのように、音声信号は、一般符号化(GC:generic coding)モードと、トランジション符号化(TC:transition coding)モードとに分類することができる。その場合、無声音符号化(UC:unvoiced coding)モードと、有声音符号化(VC:voiced coding)モードとをGCモードに含めたものである。高比率である場合、図2Cでのように、インアクティブ符号化(IC:inactive coding)モードと、オーディオ符号化(AC:audio coding)モードとをさらに含んでもよい。
一方、低ビット率である場合、図2Bでのように、音声信号は、GCモード、UCモード、VCモード及びTCモードに分類することができる。また、低ビット率である場合、図2Dでと同じように、ICモードとACモードとをさらに含んでもよい。
図2A及び図2Cにおいて、UCモードは、音声信号が、無声音であるか、または無声音と類似した特性を有するノイズの場合に選択される。VCモードは、音声信号が有声音であるときに選択される。TCモードは、音声信号の特性が急変するトランジション区間の信号を符号化するときに使用される。GCモードは、それ以外の信号について符号化される。UCモード、VCモード、TCモード及びGCモードは、ITU−T G.718に記載された定義及び分類基準によるが、それに限定されるものではない。
図2B及び図2Dにおいて、ICモードは、黙音である場合に選択され、ACモードである場合、音声信号の特性がオーディオに近い場合に選択される。
符号化モードは、音声信号の帯域により、さらに細分化される。音声信号の帯域は、例えば、狭帯域(NB)、広帯域(WB)、超広帯域(SWB:super wideband)、全帯域(FB:full band)に分類することができる。NBは、300〜3,400Hzまたは50〜4,000Hzの帯域幅を有し、WBは、50〜7,000Hzまたは50〜8,000Hzの帯域幅を有し、SWBは、50〜14,000Hzまたは50〜16,000Hzの帯域幅を有し、FBは、20,000Hzまでの帯域幅を有することができる。ここで、帯域幅と係わる数値は、便宜上設定されたものであり、それらに限定されるものではない。また、帯域の区分も、さらに簡単であったり、あるいは複雑に設定することができる。
図1の可変モード符号化部119は、図2Aないし図2Dに図示された符号化モードに対応し、LPC係数に対して、互いに異なる符号化アルゴリズムを利用して、符号化を行うことができる。符号化モードの種類及び個数が決定されれば、決定された符号化モードに該当する音声信号を利用して、コードブックをさらに訓練させる必要がある。
下記表1は、4種符号化モードである場合、量子化スキームと構造との一例を示したものである。ここで、フレーム間予測を使用せずに量子化する方式をセーフティーネット(safety-net)スキームと命名し、フレーム間予測を使用して量子化する方式を予測(predictive)スキームと命名する。そして、VQ(vector quantizer)は、ベクトル量子化器、BC−TCQ(block-constrained trellis-coded quantizer)は、ブロック制限されたトレリス符号化量子化器を示したものである。
Figure 2014519044
一方、符号化モードは、適用されるビット率によっても変わる。前述のように、2つのモードを使用する高ビット率で、LPC係数を量子化するために、GCモードで、フレームごとに40ビットまたは41ビットを使用し、TCモードで、フレームごとに46ビットを使用することができる。
図3は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図3に図示されたLPC係数量子化部300は、第1係数変換部311、加重関数決定部313、ISF(immittance spectral frequency)/LSF(Line Spectral Frequency)量子化部315及び第2係数変換部317を含んでもよい。各構成要素は、少なくとも一つ以上のモジュールに一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。
図3を参照すれば、第1係数変換部311は、音声信号の現在フレーム、または以前フレームのフレームエンドをLP分析して抽出されたLPC係数を、他の形態の係数に変換することができる。一例として、第1係数変換部311は、現在フレーム、または以前フレームのフレームエンドに係わるLPC係数を、線スペクトル周波数(LSF)係数と、イミッタンススペクトル周波数(ISF)係数とのうちいずれか1つの形態に変換することができる。そのとき、ISF係数やLSF係数は、LPC係数を、さらに容易に量子化することができる形態を示す。
加重関数決定部313は、LPC係数から変換されたISF係数またはLSF係数を利用して、現在フレームのフレームエンド及び以前フレームのフレームエンドに係わるLPC係数の重要度と係わる加重関数(weighting function)を決定することができる。決定された加重関数は、量子化経路を選択したり、あるいは量子化時に加重エラーを最小化するコードブック・インデックスを探索する過程で使用される。一例として、加重関数決定部313は、大きさ別加重関数と周波数別加重関数を決定することができる。
そして、加重関数決定部313は、周波数帯域、符号化モード及びスペクトル分析情報のうち少なくとも一つを考慮し、加重関数を決定することができる。一例として、加重関数決定部313は、符号化モード別に最適の加重関数を導き出すことができる。そして、加重関数決定部313は、音声信号の周波数帯域によって、最適の加重関数を導き出すことができる。また、加重関数決定部313は、音声信号の周波数分析情報によって、最適の加重関数を導き出すことができる。そのとき、周波数分析情報は、スペクトルチルト情報を含んでもよい。加重関数決定部313については、追って具体的に説明する。
ISF/LSF量子化部315は、現在フレームのフレームエンドのLPC係数が変換されたISF係数またはLSF係数を量子化することができる。ISF/LSF量子化部315は、入力された符号化モードによって、最適量子化インデックスを求めることができる。ISF/LSF量子化部315は、加重関数決定部313で決定された加重関数を利用して、ISF係数またはLSF係数を量子化することができる。ISF/LSF量子化部315は、加重関数決定部313で決定された加重関数を利用して、複数の量子化経路のうち一つを選択し、ISF係数またはLSF係数を量子化することができる。量子化の結果、現在フレームのフレームエンドに係わるISF係数またはLSF係数の量子化インデックスと、量子化されたISF係数(QISF)または量子化されたLSF係数(QLSF)とが求められる。
第2係数変換部317は、量子化されたISF係数(QISF)、または量子化されたLSF係数(QLSF)を、量子化されたLPC係数(QLPC)に変換することができる。
以下、LPC係数のベクトル量子化と加重関数との関係について説明する。
ベクトル量子化は、ベクトル内のエントリー(entry)をいずれも同一の重要度と見なし、二乗誤差距離尺度(squared error distance measure)を利用して、最も少ないエラーを有するコードブック・インデックスを選択する過程を意味する。しかし、LPC係数において、全ての係数の重要度が異なるので、重要な係数のエラーを減少させれば、最終合成信号の知覚的な品質(perceptual quality)が向上する。従って、LSF係数を量子化するとき、復号化装置は、各LPC係数の重要度を表現する加重関数を、二乗誤差距離尺度に適用し、最適のコードブック・インデックスを選択することにより、合成信号の性能を向上させることができる。
本発明の一実施形態によれば、ISFやLSFの周波数情報と、実際のスペクトル強度とを利用して、各ISFまたはLSFが、実際にスペクトル包絡線にいかなる影響を与えるかに係わる強度(magnitude)別加重関数を決定することができる。本発明の一実施形態によれば、周波数ドメインの知覚的な特性及びフォーマットの分布を考慮した周波数別加重関数を強度別加重関数と組み合わせ、さらなる量子化効率を得ることができる。本発明の一実施形態によれば、実際周波数ドメインの強度を使用するので、全体周波数の包絡線情報が良好に反映され、それぞれのISF係数またはLSF係数の加重値を正確に導き出すことができる。
本発明の一実施形態によれば、LPC係数を変換したISFまたはLSFを、ベクトル量子化するとき、各係数の重要度が異なる場合、ベクトル内で、いかなるエントリーが相対的にさらに重要であるかを示す加重関数を決定することができる。そして、符号化するフレームのスペクトルを分析し、エネルギーが大きい部分にさらに大きい加重値を与えることができる加重関数を決定することにより、符号化の正確度を向上させることができる。スペクトルのエネルギーが大きいというのは、時間ドメインで、相関度が高いということを意味する。
そのような加重関数を、エラー関数に適用した例について説明すれば、次の通りである。
まず、入力信号の変動性が大きい場合、フレーム間予測を利用せずに量子化を行うとき、量子化されたISFを介して、コードブック・インデックスを探索するためのエラー関数は、下記数式(1)のように示すことができる。一方、入力信号の変動性が小さい場合、フレーム間予測を利用して量子化を行うとき、量子化されたISFを介して、コードブック・インデックスを探索するためのエラー関数は、下記数式(2)のように示すことができる。コードブック・インデックスは、エラー関数を最小化する値を意味する。
Figure 2014519044
ここで、w(i)は、加重関数を意味する。z(i)とr(i)は、量子化器の入力として使用されて、z(i)は、図3において、ISF(i)から平均値を除去したベクトルであり、r(i)は、z(i)からフレーム間の予測値を除去したベクトルである。従って、Ewerr(k)は、フレーム間予測を行わない場合、コードブック探索のために使用され、Ewerr(p)は、フレーム間予測を行う場合、コードブック探索のために使用される。一方、c(i)は、コードブックを示す。pは、ISF係数の次数を意味し、NBでは、通常10、WBでは、通常16〜20を使用する。
本発明の一実施形態によれば、符号化装置は、LPC係数から変換されたISF係数またはLSF係数の周波数に該当するスペクトル強度を利用した強度別加重値関数と、入力信号の知覚的な特性及びフォーマット分布を考慮した周波数別加重値関数とを組み合わせ、最適の加重値関数を決定することができる。
図4は、本発明の一実施形態による加重関数決定部の構成を示したブロック図である。加重関数決定部400は、スペクトル及びLP分析部410の一部構成要素であるウィンドー処理部421、周波数マッピング部423及び強度計算部425と共に図示されている。
図4を参照すれば、ウィンドー処理部421は、入力信号にウィンドーを適用することができる。ウィンドーは、四角ウィンドー(rectangular window)、ハミングウィンドー(hamming window)、サインウィンドー(sine window)などが使用される。
周波数マッピング部423は、時間ドメインの入力信号を、周波数ドメインの入力信号にマッピングさせることができる。一例として、周波数マッピング部423は、FFT(fast Fourier transform)、MDCT(modified discrete cosine transform)を介して、入力信号を周波数ドメインに変換することができる。
強度計算部425は、周波数ドメインに変換された入力信号に対して、周波数スペクトルビンの強度を計算することができる。周波数スペクトルビンの個数は、加重関数決定部400が、ISFまたはLSFを正規化するための個数と同一である。
スペクトル及びLP分析部410の遂行結果、スペクトル分析情報が、加重関数決定部400に入力される。そのとき、スペクトル分析情報は、スペクトルチルトを含んでもよい。
加重関数決定部400は、LPC係数が変換されたISFまたはLSFを正規化することができる。p次数のISFにおいて、実際に本過程の適用される範囲は、0〜(p−2)までである。通常0〜(p−2)までのISFは、0〜πに存在する。加重関数決定部400は、スペクトル分析情報を利用するために、周波数マッピング部423を介して導き出された周波数スペクトルビンの個数と同一の個数Kに正規化を行うことができる。
加重関数決定部400は、スペクトル分析情報を利用して、中間サブフレームに対して、ISF係数またはLSF係数がスペクトル包絡線に影響を及ぼす強度別加重値関数W(n)を決定することができる。一例として、加重関数決定部400は、ISF係数またはLSF係数の周波数情報と、入力信号の実際スペクトル強度とを利用して、強度別加重関数を決定することができる。そのとき、強度別加重関数は、LPC係数から変換されたISF係数またはLSF係数のために決定される。
そして、加重関数決定部400は、ISF係数またはLSF係数の周波数それぞれに対応する周波数スペクトルビンの強度を利用して、強度別加重関数を決定することができる。
また、加重関数決定部400は、ISF係数またはLSF係数の周波数それぞれに対応するスペクトルビン、及びスペクトルビンの周辺に位置した少なくとも1つの周辺スペクトルビンの強度を利用して、強度別加重関数を決定することができる。そのとき、加重関数決定部400は、スペクトルビン、及び少なくとも1つの周辺スペクトルビンの代表値を抽出し、スペクトル包絡線と係わる強度別加重関数を決定することができる。代表値の例は、ISF係数またはLSF係数の周波数それぞれに対応するスペクトルビン、及びスペクトルビンに係わる少なくとも1つの周辺スペクトルビンの最大値、平均値または中間値でもある。
加重関数決定部400は、ISF係数またはLSF係数の周波数情報を利用して、周波数別加重関数W(n)を決定することができる。具体的には、加重関数決定部400は、入力信号の知覚的な特性及びフォーマット分布を利用して、周波数別加重値関数を決定することができる。そのとき、加重関数決定部400は、バークスケール(bark scale)によって、入力信号の知覚的な特性を抽出することができる。そして、加重関数決定部400は、フォーマットの分布のうち最初のフォーマットに基づいて、周波数別加重関数を決定することができる。
周波数別加重関数の場合、超低周波及び高周波で、相対的に低い加重値を示し、低周波で、一定周波数区間内、例えば、第1フォーマットに該当する区間で、同一強度の加重値を示すことができる。
加重関数決定部400は、強度別加重関数と、周波数別加重関数とを組み合わせ、最終的な加重関数を決定することができる。そのとき、加重関数決定部400は、強度別加重関数と、周波数別加重関数とを乗じるか、あるいは加え、最終的な加重関数を決定することができる。
他の一例として、加重関数決定部400は、入力信号の符号化モード及び周波数帯域情報を考慮し、強度別加重関数と周波数別加重関数とを決定することができる。
そのために、加重関数決定部400は、入力信号の帯域幅を確認し、入力信号の帯域幅がNBである場合とWBである場合とについて、入力信号の符号化モードを確認することができる。入力信号の符号化モードがUCモードである場合、加重関数決定部400は、UCモードについて、強度別加重関数と周波数別加重関数とを決定し、強度別加重関数と周波数別加重関数とを組み合わせることができる。
一方、入力信号の符号化モードがUCモードではない場合、加重関数決定部400は、VCモードについて、強度別加重関数と周波数別加重関数とを決定し、強度別加重関数と周波数別加重関数とを組み合わせることができる。
もし入力信号の符号化モードが、GCモードまたはTCモードである場合、加重関数決定部400は、VCモードと同一の過程を介して、加重関数を決定することができる。
一例として、入力信号をFFT方式によって周波数変換したとき、FFT係数のスペクトル強度を利用した強度別加重関数は、下記数式(3)によって決定される。
Figure 2014519044
一例として、VCモードでの周波数別加重関数は、下記数式(4)によって、UCモードでの周波数別加重関数は、下記数式(5)によって決定される。数式(4)及び数式(5)において、定数は、入力信号の特性によって変更される。
Figure 2014519044
最終的に導き出される加重関数は、下記数式(6)によって決定される。
Figure 2014519044
図5は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図5に図示されたLPC係数量子化部500は、加重関数決定部511、量子化経路決定部513、第1量子化スキーム515及び第2量子化スキーム517を含んでもよい。加重関数決定部511については、図4を介して説明したので、ここでは説明を省略する。
量子化経路決定部513は、入力信号の量子化以前に、所定基準に基づいて、フレーム間予測を使用しない第1経路と、フレーム間予測を使用する第2経路と、を含む複数の経路のうち一つが、入力信号の量子化経路として選択されるように制御することができる。
第1量子化スキーム515は、入力信号の量子化経路として第1経路が選択された場合、量子化経路決定部513を介して提供される入力信号を量子化することができる。第1量子化スキーム515は、入力信号を粗量子化する第1量子化器(図示せず)と、入力信号と、第1量子化器の出力信号との間の量子化エラー信号を精密に量子化する第2量子化器(図示せず)と、を含んでもよい。
第2量子化スキーム517は、入力信号の量子化経路として第2経路が選択された場合、量子化経路決定部513を介して提供される入力信号を量子化することができる。第2量子化スキーム517は、入力信号について、ブロック制限されたトレリス符号化量子化を行う部分と、フレーム間予測部分とを含んでもよい。
ここで、第1量子化スキーム515は、フレーム間予測を使用せずに量子化する方式であり、セーフティーネット・スキームと命名することができる。第2量子化スキーム517は、フレーム間予測を使用して量子化する方式であり、予測スキームと命名することができる。
第1量子化スキーム515と、第2量子化スキーム517は、前記実施形態に限定されるものではなく、後述する多様な実施形態それぞれの第1量子化スキーム及び第2量子化スキームを利用して具現される。
これにより、効率性が高い対話形音声サービスのための低ビット率から、差別化された品質のサービスを提供するための高ビット率まで多様なビット率に対応し、最適の量子化器が選択される。
図6は、本発明の一実施形態による量子化経路決定部の構成を示したブロック図である。図6に図示された量子化経路決定部600は、予測エラー算出部611と、量子化スキーム選択部613とを含んでもよい。
予測エラー算出部611は、フレーム間予測値p(n)、加重関数w(n)、DC値が除去されたLSF係数z(n)を入力にし、多様な方法に基づいて、予測エラーを算出することができる。まず、フレーム間予測器は、第2量子化スキーム、すなわち、予測スキームで使用されるものと同一のものを使用することができる。ここで、AR(auto-regressive)方式と、MA(movingaverage)方式とのうちいずれを使用してもよい。フレーム間予測のための以前フレームの信号z(n)は、量子化された値を使用することもでき、量子化されていない値を使用することもできる。また、予測エラーを求めるとき、加重関数を適用することもあり、適用しないこともある。これにより、全体8種の組み合わせが可能であり、そのうち4種は、次の通りである。
第一に、以前フレームの量子化されたz(n)信号を利用した加重AR予測エラーは、下記数式(7)のように示すことができる。
Figure 2014519044
第二に、以前フレームの量子化されたz(n)信号を利用したAR予測エラーは、下記数式(8)のように示すことができる。
Figure 2014519044
第三に、以前フレームのz(n)信号を利用した加重AR予測エラーは、下記数式(9)のように示すことができる。
Figure 2014519044
第四に、以前フレームのz(n)信号を利用したAR予測エラーは、下記数式(10)のように示すことができる。
Figure 2014519044
ここで、Mは、LSFの次数を意味し、入力音声信号の帯域幅がWBである場合、通常16を使用する。ρ(i)は、AR方式の予測係数を意味する。このように、すぐ前のフレームの情報を利用する場合が一般的であり、ここで求められた予測エラーを利用して、量子化スキームを決定することができる。
一方、以前フレームについてフレームエラーが発生し、以前フレームの情報がない場合に備え、以前フレームの以前フレームを利用して、第2予測エラーを求め、第2予測エラーを利用して、量子化スキームを決定することができる。その場合、第2予測エラーは、前記最初の場合と比べ、下記数式(11)のように示すことができる。
Figure 2014519044
量子化スキーム選択部613は、予測エラー算出部611で求められた予測エラーと、符号化モード決定部115(図1)で求められた符号化モードとのうち少なくとも一つを利用して、現在フレームの量子化スキームを決定する。
図7Aは、図6に図示された量子化経路決定部の一例による動作について説明するフローチャートである。ここで使用される予測モードの例として、0、1、2が可能である。予測モード0は、常にセーフティーネット・スキームを使用する場合を意味し、予測モード1は、いつも予測スキームを使用する場合を意味する。そして、予測モード2は、セーフティーネット・スキームと予測スキームとをスイッチングして使用する場合を意味する。
予測モード0で符号化しなければならない信号の特性は、非静的(non-stationary)である場合である。非静的信号は、毎フレームごとに変化がはんはだしく、予測を行う場合、予測エラーが原信号よりさらに大きくなる現象によって、量子化器の性能低下が生じる。予測モード1で符号化しなければならない信号の特性は、静的(stationary)である。静的信号は、以前フレームとの差が大きくなく、フレーム間相関度が高い。そして、2つの特性が混合している信号については、予測モード2を使用して量子化を行う場合、最適の性能を示すことができる。一方、2つの特性が混合していても、その混合の比率によって、予測モード0または予測モード1と設定することも可能であり、そのとき、予測モード2に設定される混合比率は、実験的にまたはシミュレーションを介して、最適の値に設定される。
図7Aを参照すれば、711段階では、現在フレームの予測モードが「0」であるか否か、すなわち、現在フレームの音声信号が非静的特性を有するか否かを判断する。711段階での判断結果、予測モードが「0」である場合、例えば、TCモードまたはUCモードのように、現在フレームの音声信号が変動性が大きい場合には、フレーム間予測が困難であるので、常にセーフティーネット・スキーム、すなわち、第1量子化スキームを量子化経路として決定する(714段階)。
一方、711段階での判断結果、予測モードが「0」ではない場合、712段階で、予測モードが「1」であるか否か、すなわち、現在フレームの音声信号が静的特性を有するか否かを判断する。712段階での判断結果、予測モードが「1」である場合、フレーム間予測性能にすぐれるので、常に予測スキーム、すなわち、第2量子化スキームを量子化経路として決定する(715段階)。
一方、712段階での判断結果、予測モードが「1」ではない場合、713段階で、予測モードが「2」であると決定し、第1量子化スキームと第2量子化スキームとをスイッチングして使用する。一例として、現在フレームの音声信号が静的特性を有する場合、すなわち、GCモードまたはVCモードであり、予測モードが「2」である場合、予測エラーを考慮し、第1量子化スキームと、第2量子化スキームとのうち一つを、量子化経路として決定する。そのために、713段階では、現在フレームと以前フレームとの間の第1予測エラーが、第1臨界値より大きいか否かを判断する。ここで、第1臨界値は、前もって実験的に、またはシミュレーションを介して、最適の値に決定される。一例を挙げれば、次数が16であるWBの場合、第1臨界値の例として、2,085,975を設定することができる。
713段階での判断結果、第1予測エラーが第1臨界値より大きい場合、第1量子化スキームを量子化経路として決定する(714段階)。一方、713段階での判断結果、第1予測エラーが第1臨界値より小さい場合、予測スキーム、すなわち、第2量子化スキームを量子化経路として決定する(715段階)。
図7Bは、図6に図示された量子化経路決定部の他の例による動作について説明するフローチャートである。
図7Bを参照すれば、731段階ないし733段階は、図7Aの711段階ないし713段階と同一であり、以前フレームの以前フレームと、現在フレームとの間の第2予測エラーを求め、第2臨界値と比較する734段階をさらに追加したものである。ここで、第2臨界値は、前もって実験的に、またはシミュレーションを介して、最適の値に決定される。一例を挙げれば、次数が16であるWBの場合、第2臨界値の例として、(第1臨界値*1.1を設定することができる。
734段階での判断結果、第2予測エラーが第2臨界値より大きい場合、セーフティーネット・スキーム、すなわち、第1量子化スキームを量子化経路として決定する(735段階)。一方、734段階での判断結果、第2予測エラーが第2臨界値より小さい場合、予測スキーム、すなわち、第2量子化スキームを量子化経路として決定する(736段階)。
図7A及び図7Bの実施形態では、予測モードが3種であるものと例として挙げたが、それに限定されるものではない。
一方、量子化スキームを決定するとき、前述の予測モードまたは予測エラー以外に、さらなる情報を利用することができる。
図8は、本発明の一実施形態による量子化経路決定部の構成を示したブロック図である。図8に図示された量子化経路決定部800は、予測エラー算出部811、スペクトル分析部813及び量子化スキーム選択部815を含んでもよい。
予測エラー算出部811は、図6の予測エラー算出部611と同一であるので、具体的な説明は省略する。
スペクトル分析部813は、スペクトル情報を分析し、現在フレームの信号特性を決定する。スペクトル分析部813は、一例として、スペクトル情報のうち、周波数ドメインのスペクトル強度情報を利用して、N個(ここで、Nは、1より大きい整数)の以前フレームと現在フレームとの加重距離(weighted distance)を求め、加重距離が所定臨界値を超える場合、すなわち、フレーム間変動性が大きい場合、量子化スキームをセーフティーネット・スキームとして決定することができる。ここで、Nが大きくなるほど、比較すべき対象が多くなるので、複雑度が高くなる。加重距離Dは、下記数式(12)を利用して求められる。加重距離Dを低複雑度で求めるためには、LSF/ISFによって決定された周波数周辺のスペクトル強度のみを利用して、以前フレームと比較することができる。そのとき、LSF/ISFによって決定された周波数周辺M個の周波数ビンに係わる強度の平均、最大値、中間値が使用される。
Figure 2014519044
ここで、スペクトルの強度情報を利用した加重関数Wk(i)は、前述の数式(3)を介して得られ、数式(3)のW(n)と同一の値である。Dでnは、以前フレームと現在フレームとの差を意味する。n=1である場合には、すぐ以前のフレームと現在フレームとの加重距離を意味し、n=2である場合には、以前2番目のフレームと現在フレームとの加重距離を意味する。そのように求められたD値が所定臨界値を超えるとき、現在フレームが非静的特性を有するといえる。
量子化スキーム選択部815は、予測エラー算出部811から提供される予測エラー、スペクトル分析部813から提供される信号特性、予測モード、及び伝送チャンネル情報を入力にし、現在フレームに係わる量子化経路を選択する。一例として、量子化スキーム選択部815に入力される各情報について優先順位を決め、量子化経路決定時に、順次に考慮される。例えば、伝送チャンネル情報に、ハイFERモード(high FER(frame error rate) mode)が含まれた場合、セーフティーネット・スキーム選択比率をさらに高く設定するか、あるいはセーフティーネット・スキームのみを選択することができる。セーフティーネット・スキーム選択比率は、予測エラーと係わる臨界値を調整し、可変的に設定することができる。
図9は、コーデックサービスを提供するとき、ネットワーク端で伝送可能なチャンネル状態に係わる情報について説明する図面である。
チャンネル状態が良好ではないほどチャンネルエラーが大きくなり、その結果、フレーム間変動性が大きくなり、フレームエラーが生じる。従って、量子化経路として、予測スキームの選択の比率を下げ、セーフティーネット・スキームがさらに多く選択されるように設定する。極端にチャンネル状態が望ましくない場合には、量子化経路をセーフティーネット・スキームによってのみ使用することができる。そのために、伝送チャンネル情報を組み合わせ、チャンネル状態を示す値を1個以上の段階で表現する。段階が高いほど、チャンネルエラーが多く発生する状況を意味する。最も単純な場合は、段階が1個である場合であり、図9に図示されているように、ハイFER(frame error rate)モード決定部911で、チャンネル状態がハイFERモードに決定される場合である。ハイFERモードに決定された場合には、チャンネル状態が非常に不安定であるということを意味するので、セーフティーネット・スキームの選択比率を最も高い状態にするか、あるいはセーフティーネット・スキームのみを利用して符号化を行う。一方、段階が複数個である場合には、セーフティーネット・スキームの選択比率を段階的に高める方向に設定することができる。
一方、図9を参照すれば、ハイFERモード決定部911で、ハイFERモードに決定するアルゴリズムは、例えば、4種情報を介して遂行される。具体的には、4種情報は、(1)物理的階層に伝送されたハイブリッド自動反復要請(HARQ:hybrid automatic repeat request)フィードバックであるファーストフィードバック(FFB:fast feedback)情報、(2)物理的階層よりさらに高い階層に伝送されたネットワーク・シグナリングからフィードバックされたスローフィードバック(SFB:slow feedback:SFB)情報、(3)終端(far end)で、EVSデコーダ913からシグナリングされたインバンド(in-band)であるインバンド・フィードバック(ISB:in-band feedback)情報;及び(4)リダンダント方式(redundant fashion)で伝送される特定クリティカル・フレーム(specific critical frame)のEVSエンコーダ915による選択であるハイセンシティビティー・フレーム(HSF:high sensitivityframe)情報を有することができる。FFB情報及びSFB情報は、EVSコーデックに独立している一方、ISB情報とHSF情報は、EVSコーデックに依存的であり、EVSコーデックのための特定アルゴリズムを要求することができる。
前記4種情報を利用して、チャンネル状態をハイFERモードに決定するアルゴリズムは、一例を挙げ、次のようなコードによって表現される。
Figure 2014519044
前述のように、4種情報のうち一つ以上で処理された分析情報に基づいて、EVSコーデックに、ハイFERモードに進入することを指示することができる。ここで、分析情報は、一例を挙げれば、(1)SFB情報を利用して、Nsフレームの計算された平均エラーレートから導き出されたSFBavg、(2)FFB情報を利用して、Nfフレーム平均の計算された平均エラーレートから導き出されたFFBavg、(3)ISB情報と、それぞれの臨界値であるTs、Tf及びTiを利用して、Niフレームの計算された平均エラーレートから導き出されたISBavgでもある。SFBavg、FFBavg、ISBavgについて、それぞれの臨界値を比べた結果に基づいて、ハイFER動作モードに進入することを決定することができる。そして、全ての条件は、共通してコーデックで、ハイFERモードを支援するするか否かに係わるHiOKを確認することができる。
ここで、ハイFERモード決定部911は、EVSエンコーダ915または他のフォーマットのエンコーダの構成要素としても含まれる。一方、ハイFERモード決定部911は、AVSエンコーダ915または他のフォーマットのエンコーダの構成要素ではなく、外部の他のデバイスで具現される。
図10は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図10に図示されたLPC係数量子化部1000は、量子化経路決定部1010、第1量子化スキーム1030及び第2量子化スキーム1050を含んでもよい。
量子化経路決定部1010は、予測エラーと符号化モードとのうち少なくとも一つに基づいて、セーフティーネット・スキームを含む第1経路と、予測スキームを含む第2経路とのうち一つを、現在フレームの量子化経路として選択する。
第1量子化スキーム1030は、量子化経路として第1経路が選択された場合、フレーム間予測を使用せずに量子化を行うものであり、マルチステージベクトル量子化器(MSVQ:multi-stage vector quantizer)1041と、格子ベクトル量子化器(LVQ:lattice vector quantizer)1043と、を含んでもよい。MSVQ 1041は、望ましくは、2ステージからなる。MSVQ 1041は、DC値が除去されたLSF係数を粗くベクトル量子化して量子化インデックスを生成する。LVQ 1043は、MSVQ 1041から出力される逆量子化されたLSF係数と、DC値が除去されたLSF係数との間のLSF量子化エラーを入力にして量子化を行い、量子化インデックスを生成する。MSVQ 1041の出力と、LVQ 1043の出力は、互いに加えられてDC値が合わせられ、最終量子化されたLSF係数(QLSF)が生成される。第1量子化スキーム1030では、コードブックのためのメモリを多く使用するが、低ビット率で優秀な性能を示すMSVQ 1041と、少ないメモリと低複雑度とで、低ビット率で効率的なLVQ 1043を結合して使用することにより、非常に効率的な量子化器構造を具現することができる。
第2量子化スキーム1050は、量子化経路として第2経路が選択された場合、フレーム間予測を使用して量子化を行うものとして、フレーム内予測器1065を有するブロック制限されたトレリス符号化量子化器(BC−TCQ:block-constrained trellis coding quantizerZ)1063と、フレーム間予測器1061とを含んでもよい。フレーム間予測器1061は、AR方式とMA方式とのうちいずれを使用してもよい。一例としては、一次(1st order)AR方式を適用する。予測係数は、前もって定義され、予測のための過去ベクトルは、以前フレームにおいて、最適ベクトルとして選択されたベクトルを利用する。フレーム間予測器1061の予測値から得られるLSF予測エラーは、フレーム内予測器1065を有するBC−TCQ 1063で量子化される。これにより、高ビット率で少ないメモリ強度と低複雑度とを有し、量子化性能にすぐれるBC−TCQ 1063の特性を最大化させることができる。
結果として、第1量子化スキーム1030と、第2量子化スキーム1050とを利用する場合、入力音声信号の特性に対応し、最適の量子化器を具現することができる。
一方、図10のLPC係数量子化部1000において、一例を挙げ、8KHz帯域のWBを有し、GCモードである音声信号の量子化に41ビットを使用する場合、第1量子化スキーム1830で、量子化経路情報を示す1ビットを除き、MSVQ 1041には、12ビットを、LVQ 1043には、28ビットを割り当てることができる。また、第2量子化スキーム1850のBC−TCQ 1063には、量子化経路情報を示す1ビットを除き、40ビット全部を割り当てることができる。
下記表2は、8KHz帯域のWB音声信号へのビット割り当て例を示している。
Figure 2014519044
図11は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図11に図示されたLPC係数量子化部1100は、図10と反対の構造を有する。
LPC係数量子化部1100は、量子化経路決定部1110、第1量子化スキーム1130及び第2量子化スキーム1150を含んでもよい。
量子化経路決定部1110は、予測エラーと符号化モードとのうち少なくとも一つに基づいて、セーフティーネット・スキームを含む第1経路と、予測スキームを含む第2経路とのうち一つを、現在フレームの量子化経路として選択する。
第1量子化スキーム1130は、量子化経路として第1経路が選択された場合、フレーム間予測を使用せずに量子化を行うものであり、ベクトル量子化器(VQ:vector quantizer)1141と、フレーム内予測器1145を有するBC−TCQ 1143と、を含んでもよい。VQ 1141は、DC値が除去されたLSF係数を粗くベクトル量子化して量子化インデックスを生成する。BC−TCQ 1143は、VQ 1141から出力される逆量子化されたLSF係数と、DC値が除去されたLSF係数との間のLSF量子化エラーを入力にして量子化を行い、量子化インデックスを生成する。VQ 1141の出力と、BC−TCQ 1143の出力は、互いに加えられてDC値が合わせられ、最終量子化されたLSF係数(QLSF)が生成される。第2量子化スキーム1150は、量子化経路として第2経路が選択された場合、フレーム間予測を使用して量子化を行うものであり、LVQ 1163と、フレーム間予測器1161を含んでもよい。フレーム間予測器1161は、図10でのところと同一であるか、あるいは類似して具現することができる。フレーム間予測器1161の予測値から得られるLSF予測エラーは、LVQ 1163で量子化される。
これにより、BC−TCQ 1143は、割り当てられたビット数が少ないので、低複雑度を有し、LVQ 1163は、高ビット率で低複雑度を有するので、全体的に低複雑度で量子化を行うことができる。
一例を挙げ、図11のLPC係数量子化部1100において、8KHz帯域のWBを有し、GCモードである音声信号の量子化に41ビットを使用する場合、第1量子化スキーム1130で量子化経路情報を示す1ビットを除き、VQ 1141には、6ビットを、BC−TCQ 1143には、34ビットを割り当てることができる。また、第2量子化スキーム1150のLVQ 1163には、量子化経路情報を示す1ビットを除き、40ビット全部を割り当てることができる。
下記表3は、8KHz帯域のWB音声信号へのビット割り当て例を示している。
Figure 2014519044
一方、ほとんどの符号化モードに使用されるVQ 1141と係わって最適インデックスは、下記の数式(13)のEwerr(p)を最小化するインデックスを探索する。
Figure 2014519044
ここで、w(i)は、加重関数決定部313(図3)で決定された加重関数、r(i)は、VQ 1141の入力、c(i)は、VQ 1141の出力をそれぞれ示す。すなわち、r(i)とc(i)との加重歪曲を最小化するインデックスが求められる。
そして、BC−TCQ 1143で使用される歪曲尺度d(x,y)は、下記の数式(14)で示すことができる。
Figure 2014519044
一実施形態では、歪曲尺度d(x,y)に加重関数(wk)を適用し、下記の数式(15)のように、加重歪曲(weighted distortion)を求めることができる。
Figure 2014519044
すなわち、BC−TCQ 1143の全てのステージで加重歪曲を求め、最適のインデックスを求める。
図12は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図12に図示されたLPC係数量子化部1200は、量子化経路決定部1210、第1量子化スキーム1230及び第2量子化スキーム1250を含んでもよい。
量子化経路決定部1210は、予測エラーと符号化モードとのうち少なくとも一つに基づいて、セーフティーネット・スキームを含む第1経路と、予測スキームを含む第2経路とのうち一つを、現在フレームの量子化経路として選択する。
第1量子化スキーム1230は、量子化経路として第1経路が選択された場合、フレーム間予測を使用せずに量子化を行うものであり、VQまたはMSVQ 1241と、LVQまたはTCQ 1243とを含んでもよい。VQまたはMSVQ 1241は、DC値が除去されたLSF係数を粗くベクトル量子化して量子化インデックスを生成する。LVQまたはTCQ 1243は、VQまたはMSVQ 1241から出力される逆量子化されたLSF係数と、DC値が除去されたLSF係数との間のLSF量子化エラーを入力にして量子化を行い、量子化インデックスを生成する。VQまたはMSVQ 1241の出力と、LVQまたはTCQ 1243の出力は、互いに加えられてDC値が合わせられ、最終量子化されたLSF係数(QLSF)が生成される。VQまたはMSVQ 1241は、複雑度が高くてメモリ使用量が多いが、ビット効率が高い(good bit error rate)ので、全体的な複雑度を考慮し、ステージの個数を、1個からn個まで増加させることができる。例えば、最初のステージのみを使用する場合、VQになり、2個以上のステージを使用する場合、MSVQになる。一方、LVQまたはTCQ 1243は、低複雑度を有するので、LSF量子化エラーを効率的に量子化することができる。
第2量子化スキーム1250は、量子化経路として第2経路が選択された場合、フレーム間予測を使用して量子化を行うものであり、フレーム間予測器1261と、LVQまたはTCQ 1263と、を含んでもよい。フレーム間予測器1261は、図10でのところと同一であるか、あるいは類似して具現することができる。フレーム間予測器1261の予測値から得られるLSF予測エラーは、LVQまたはTCQ 1263で量子化される。同様に、LVQまたはTCQ 1263は、低複雑度を有するので、LSF予測エラーを効率的に量子化することができる。これにより、全体的に低複雑度で量子化を行うことができる。
図13は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図13に図示されたLPC係数量子化部1300は、量子化経路決定部1310、第1量子化スキーム1330及び第2量子化スキーム1350を含んでもよい。
量子化経路決定部1310は、予測エラーと符号化モードとのうち少なくとも一つに基づいて、セーフティーネット・スキームを含む第1経路と、予測スキームを含む第2経路とのうち一つを、現在フレームの量子化経路として選択する。
第1量子化スキーム1330は、量子化経路として第1経路が選択された場合、フレーム間予測を使用せずに量子化を行うものであり、図12に図示された第1量子化スキーム1330と同一であるので、その説明を省略する。
第2量子化スキーム1350は、量子化経路として第2経路が選択された場合、フレーム間予測を使用して量子化を行うものであり、フレーム間予測器1361、VQまたはMSVQ 1363及びLVQまたはTCQ 1365を含んでもよい。フレーム間予測器1361は、図10でのところと同一であるか、あるいは類似して具現することができる。フレーム間予測器1361の予測値から得られるLSF予測エラーは、VQまたはMSVQ 1363で粗量子化される。LSF予測エラーと、VQまたはMSVQ 1363で逆量子化されたLSF予測エラーとの間のエラーベクトルは、LVQまたはTCQ 1365で量子化される。同様に、LVQまたはTCQ 1365は、低複雑度を有するので、LSF予測エラーを効率的に量子化することができる。これにより、全体的に低複雑度で量子化を行うことができる。
図14は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図14に図示されたLPC係数量子化部1400は、図12に図示されたLPC係数量子化部1200と比較すれば、第1量子化スキーム1430が、LVQまたはTCQ 1243の代わりに、フレーム内予測器1445を有するBC−TCQ 1443を含み、第2量子化スキーム1450が、LVQまたはTCQ 1263のの代わりに、フレーム内予測器1465を有するBC−TCQ 1463を含むという違いがある。
一例を挙げ、図14のLPC係数量子化部1400において、8KHz帯域のWBを有し、GCモードである音声信号の量子化に41ビットを使用する場合、第1量子化スキーム1430では、量子化経路情報を示す1ビットを除き、VQ 1441には、5ビットを、BC−TCQ 1443には、35ビットを割り当てることができる。また、第2量子化スキーム1450のBC−TCQ 1463には、量子化経路情報を示す1ビットを除き、40ビット全部を割り当てることができる。
図15は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図15に図示されたLPC係数量子化部1500は、図13に図示されたLPC係数量子化部1300の具体的な例であり、第1量子化スキーム1530のMSVQ 1541と、第2量子化スキーム1550のMSVQ 1563は、2ステージを有する。
一例を挙げ、図15のLPC係数量子化部1500において、8KHz帯域のWBを有し、GCモードである音声信号の量子化に、41ビットを使用する場合、第1量子化スキーム1530で、量子化経路情報を示す1ビットを除き、2ステージVQ 1541には、6+6=12ビットを、LVQ 1543には、28ビットを割り当てることができる。また、第2量子化スキーム1550の2ステージVQ 1563には、5+5=10ビットを、LVQ 1563には、30ビットを割り当てることができる。
図16A及び図16Bは、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。特に、図16A及び図16BのLPC係数量子化部1610,1630は、セーフティーネット・スキーム、すなわち、第1量子化スキームの構成に使用される。
図16Aに図示されたLPC係数量子化部1610は、VQ 1621と、フレーム内予測器1625を有するTCQまたはBC−TCQ 1623と、を含み、図16Bに図示されたLPC係数量子化部1630は、VQまたはMSVQ 1641と、TCQまたはLVQ 1643と、を含んでもよい。
これにより、VQ 1621、あるいはVQまたはMSVQ 1641は、全体入力ベクトルを、少ないビットで粗量子化し、TCQ 1623、あるいはTCQまたはLVQ 1643は、LSF量子化エラーに対して精密に符号化する。
一方、毎フレームで、セーフティーネットスチーム、すなわち、第1量子化スキームのみを使用する場合には、さらなる性能向上のために、LVA(list Viterbi algorithm)方式を適用することができる。すなわち、第1量子化スキームのみを使用すれば、スイッチング方式に比べ、複雑度で余裕があるので、探索時、複雑度を上昇させ、性能向上をなすLVA方式を適用することができる。LVA方式を一例として挙げ、BC−TCQに適用することにより、複雑度は上昇するが、上昇程度がスイッチング構造の複雑度より低いように設定することができる。
図17Aないし図17Cは、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図であり、特に、加重関数を利用するBC−TCQの構造を示したものである。
図17Aを参照すれば、LPC係数量子化部は、加重関数決定部1710と、フレーム内予測器1723を有するBC−TCQ 1721とからなる量子化スキーム1720を含んでもよい。
図17Bを参照すれば、LPC係数量子化部は、加重関数決定部1730と、フレーム内予測器1745を有するBC−TCQ 1743と、フレーム間予測器1741とからなる量子化スキーム1740を含んでもよい。ここで、BC−TCQ 1743に、40ビットが割り当てられる。
図17Cを参照すれば、LPC係数量子化部は、加重関数決定部1750と、フレーム内予測器1765を有するBC−TCQ 1763と、VQ 1761と、からなる量子化スキーム1760を含んでもよい。ここで、VQ 1761に5ビット、BC−TCQ 1763に40ビットが割り当てられる。
図18は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図18に図示されたLPC係数量子化部1800は、第1量子化スキーム1810と、第2量子化スキーム1830と、量子化経路決定部1850と、を含んでもよい。
第1量子化スキーム1810は、フレーム間予測を使用せずに量子化を行うものであり、量子化性能向上のために、MSVQ 1821と、LVQ 1823と、を組み合わせて使用することができる。MSVQ 1821は、望ましくは、2ステージからなる。MSVQ 1821は、DC値が除去されたLSF係数を粗くベクトル量子化して量子化インデックスを生成する。LVQ 1823は、MSVQ 1821から出力される逆量子化されたLSF係数と、DC値が除去されたLSF係数との間のLSF量子化エラーを入力にして量子化を行い、量子化インデックスを生成する。MSVQ 1821の出力と、LVQ 1823の出力は、互いに加えられてDC値が合わせられ、最終量子化されたLSF係数(QLSF)が生成される。第1量子化スキーム1810では、低ビット率で優秀な性能を示すMSVQ 1821と、低ビット率で効率的なLVQ 1823と、を結合して使用することにより、非常に効率的な量子化器構造を具現することができる。
第2量子化スキーム1830は、フレーム間予測を使用して量子化を行うものであり、フレーム内予測器1845を有するBC−TCQ 1843と、フレーム間予測器1841と、を含んでもよい。フレーム間予測器1841の予測値から得られるLSF予測エラーは、フレーム内予測器1845を有するBC−TCQ 1843で量子化される。これにより、高ビット率で量子化性能にすぐれるBC−TCQ 1843の特性を最大化させることができる。
量子化経路決定部1850は、予測モードと加重歪曲とを考慮し、第1量子化スキーム1810の出力と、第2量子化スキーム1830の出力とのうち一つを選択する。
結果として、第1量子化スキーム1810と、第2量子化スキーム1830とを利用する場合、入力音声信号の特性に対応し、最適の量子化器を具現することができる。一例を挙げ、図18のLPC係数量子化部1800において、8KHz帯域のWBを有し、VCモードである音声信号の量子化に、43ビットを使用する場合、第1量子化スキーム1810で、量子化経路情報を示す1ビットを除き、MSVQ 1821には、12ビットを、LVQ 1823には、30ビットを割り当てることができる。また、第2量子化スキーム1830のBC−TCQ 1843に、量子化経路情報を示す1ビットを除き、42ビット全部を割り当てることができる。
下記表4は、8KHz帯域のWB音声信号へのビット割り当て例を示している。
Figure 2014519044
図19は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図19に図示されたLPC係数量子化部1900は、第1量子化スキーム1910と、第2量子化スキーム1930と、量子化経路決定部1950と、を含んでもよい。
第1量子化スキーム1910は、フレーム間予測を使用せずに量子化を行うものであり、量子化性能向上のために、VQ 1921と、フレーム内予測器1925を有するBC−TCQ 1923と、を組み合わせて使用することができる。
第2量子化スキーム1930は、フレーム間予測を使用して量子化を行うものであり、フレーム内予測器1945を有するBC−TCQ 1943と、フレーム間予測器1941を含んでもよい。
量子化経路決定部1950は、予測モードと、第1量子化スキーム1910及び第2量子化スキーム1930から求められた最適量子化された値とを利用した加重歪曲と、を入力にし、量子化経路を選択する。一例として、現在フレームの予測モードが「0」、すなわち、現在フレームの音声信号が非静的特性を有するか否かを判断する。TCモードまたはUCモードのように、現在フレームの音声信号が変動性が大きい場合には、フレーム間予測が困難であるので、常にセーフティーネット・スキーム、すなわち、第1量子化スキーム1910を量子化経路として決定する。
一方、現在フレームの予測モードが「1」、すなわち、現在フレームの音声信号が非静的特性を有さないGCモードまたはVCモードである場合、予測エラーを考慮し、第1量子化スキーム1910と、第2量子化スキーム1930とのうち一つを量子化経路として決定する。そのために、フレームエラーにロバスト(robust)になるように、第1量子化スキーム1910の加重歪曲が優先的に考慮される。すなわち、第1量子化スキーム1910の加重歪曲の値が前もって定義した臨界値より小さい場合には、第2量子化スキーム1930の加重歪曲の値にかかわらず、第1量子化スキーム1910が選択される。また、単に、加重歪曲の値が小さい量子化スキームを選択するものではなく、同一の加重歪曲の値である場合、フレームエラーを考慮し、第1量子化スキーム1910が選択される。一方、第1量子化スキーム1910の加重歪曲の値が、第2量子化スキーム1930の加重歪曲の値より所定倍数以上大きい場合には、第2量子化スキーム1930が選択される。ここで、所定倍数は、例えば、1.15に設定される。そのように、量子化経路が選択されれば、当該量子化スキームで生成された量子化インデックスを伝送する。
一方、予測モードが3種である場合を考慮し、「0」である場合には、常に第1量子化スキーム1910を選択し、「1」である場合には、常に第2量子化スキーム1930を選択し、「2」である場合には、第1量子化スキーム1910と、第2量子化スキーム1930とをスイッチングし、そののうち一つを量子化経路として決定するように具現することも可能である。
一例を挙げ、図19のLPC係数量子化部1900において、8KHz帯域のWBを有し、GCモードである音声信号の量子化に、37ビットを使用する場合、第1量子化スキーム1910では、量子化経路情報を示す1ビットを除き、VQ 1921には、2ビットを、BC−TCQ 1923には、34ビットを割り当てることができる。また、第2量子化スキーム1930のBC−TCQ 1943には、量子化経路情報を示す1ビットを除き、36ビット全部を割り当てることができる。
下記表5は、8KHz帯域のWB音声信号へのビット割り当て例を示している。
Figure 2014519044
図20は、本発明の一実施形態によるLPC係数量子化部の構成を示したブロック図である。図20に図示されたLPC係数量子化部2000は、第1量子化スキーム2010と、第2量子化スキーム2030と、量子化経路決定部2050と、を含んでもよい。
第1量子化スキーム2010は、フレーム間予測を使用せずに量子化を行うものであり、量子化性能向上のためにVQ 2021と、フレーム内予測器2025を有するBC−TCQ 2023と、を組み合わせて使用することができる。
第2量子化スキーム2030は、フレーム間予測を使用して量子化を行うものであり、LVQ 2043と、フレーム間予測器2041と、を含んでもよい。
量子化経路決定部2050は、符号化モードと、第1量子化スキーム2010及び第2量子化スキーム2030から求められた最適量子化された値を利用した加重歪曲と、を入力にし、量子化経路を選択する。
一例を挙げ、図20のLPC係数量子化部2000において、8KHz帯域のWBを有し、VCモードである音声信号の量子化に、43ビットを使用する場合、第1量子化スキーム2010では、量子化経路情報を示す1ビットを除き、VQ 2021には、6ビットを、BC−TCQ 2023には、36ビットを割り当てることができる。また、第2量子化スキーム2030のBC−TCQ 2043には、量子化経路情報を示す1ビットを除き、42ビット全部を割り当てることができる。
下記表6は、8KHz帯域のWB音声信号へのビット割り当て例を示している。
Figure 2014519044
図21は、本発明の一実施形態による量子化器タイプ選択部の構成について説明する図面である。図21に図示された量子化器タイプ選択部2100は、ビット率決定部2101、帯域決定部2130、内部サンプリング周波数決定部2150及び量子化器タイプ決定部2107を含んでもよい。各構成要素は、少なくとも一つ以上のモジュールに一体化され、少なくとも一つ以上のプロセッサ(図示せず)によって具現される。量子化器タイプ選択部2100は、2種の量子化スキームがスイッチングされる予測モード2で使用される。量子化器タイプ選択部2100は、図1のサウンド符号化装置100のLPC係数量子化部117の構成要素として含まれるか、あるいは図1のサウンド符号化装置100の構成要素として含まれる。
図21を参照すれば、ビット率決定部2110は、音声信号の符号化するビット率(coding bit rate)を決定する。符号化するビット率は、全体フレームについて決定されるか、あるいはフレーム単位で決定される。符号化するビット率によって、量子化器構造が変更される。
帯域決定部2130は、音声信号の帯域(bandwidth)を決定する。音声信号の帯域によって、量子化器構造が変更されもする。
内部サンプリング周波数決定部2150は、量子化器で使用される帯域の上限(upper limit)による内部サンプリング周波数を決定する。音声信号の帯域がWB以上、すなわち、WB、SWBそしてFBである場合、符号化する帯域の上限が、6.4KHzであるか、あるいは8KHzであるかによって、内部サンプリング周波数が可変される。符号化する帯域の上限が6.4KHzである場合、内部サンプリング周波数は、12,800Hzになり、8KHzである場合、16,000Hzになる。一方、帯域の上限は、前記数値に限定されるものではない。
量子化器タイプ決定部2107は、ビット率決定部2110の出力、帯域決定部2130の出力、及び内部サンプリング周波数決定部2150の出力を入力にし、量子化器タイプを開ループ(open loop)と閉ループ(closed-loop)とのうち一つに選択する。量子化器タイプ決定部2107は、符号化するビット率が所定基準値より大きく、音声信号の帯域がWB以上であり、内部サンプリング周波数が、符号化する帯域の上限が16,000Hzである場合、量子化器タイプを開ループに選択することができる。一方、それ以外の場合には、量子化器タイプを閉ループに選択することができる。
図22は、本発明の一実施形態による量子化器タイプ選択方法の動作について説明する図面である。図22において、2201段階では、ビット率が所定基準値より大きいか否かを判断する。ここで、所定基準値の例としては、16.4kbpsに設定されたが、それに限定されるものではない。2201段階での判断結果、ビット率が所定基準値より低いか、あるいは同一である場合、閉ループタイプを選択する(2209段階)。
一方、2201段階での判断結果、ビット率が所定基準値より高い場合、2203段階では、音声信号の帯域がNBより広いか否かを判断する。2203段階での判断結果、音声信号の帯域がNBである場合、閉ループタイプを選択する(2209段階)。
一方、2203段階での判断結果、音声信号の帯域がNBより広い場合、すなわち、WB、SWBそしてFBである場合、2205段階で、内部サンプリング周波数が16,000Hzであるか否かを判断する。2205段階での判断結果、内部サンプリング周波数が16,000Hzではない場合、閉ループタイプを選択する(2209段階)。
一方、2205段階での判断結果、内部サンプリング周波数が16,000Hzである場合、開ループタイプを選択する(2207段階)。
図23は、本発明の一実施形態によるサウンド復号化装置の構成を示したブロック図である。図23を参照すれば、サウンド復号化装置2300は、パラメータ復号化部2311、LPC係数逆量子化部2313、可変モード復号化部2315及び後処理部2319を含んでもよい。サウンド復号化装置2300は、エラー復元部2317をさらに含んでもよい。各構成要素は、少なくとも一つ以上のモジュールに一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。
パラメータ復号化部2311は、ビットストリームから、復号化に使用されるパラメータを復号化することができる。パラメータ復号化部2311は、ビットストリームに符号化モードが含まれる場合、符号化モードと、符号化モードに対応するパラメータとを復号化することができる。復号化された符号化モードに対応し、LPC係数逆量子化と励起復号化とが行われる。
LPC係数逆量子化部2313は、LPCパラメータに含まれた量子化されたISF係数またはLSF係数、ISF量子化エラーまたはLSF量子化エラー、ISF予測エラーまたはLSF予測エラーを逆量子化し、復号化されたLSF係数を生成し、それを変換してLPC係数を生成する。
可変モード復号化部2315は、LPC係数逆量子化部2313で生成されたLPC係数を復号化し、合成信号(synthesized signal)を生成することができる。可変モード復号化部2315は、復号化装置に対応する符号化装置によって、図2Aないし図2Dに図示されているような符号化モードに対応して復号化を行うことができる。
エラー復元部2317は、可変モード復号化部2315での復号化結果、音声信号の現在フレームでエラーが発生したとき、現在フレームを復元するか隠匿することができる。
後処理部2319は、可変モード復号化部2315で生成された合成信号について、多様なフィルタリングと音質向上処理とを遂行し、最終合成信号、すなわち、復元されたサウンドを生成する。
図24は、本発明の一実施形態によるLPC係数逆量子化部の構成を示したブロック図である。図24に図示されたLPC係数逆量子化部2400は、ISF/LSF逆量子化部2411と、係数変換部2413とを含んでもよい。
ISF/LSF逆量子化部2411は、ビットストリームに含まれる量子化経路情報に対応し、LSPパラメータに含まれた量子化されたISF係数またはLSF係数、ISF量子化エラーまたはLSF量子化エラー、ISF予測エラーまたはLSF予測エラーを逆量子化し、復号化されたLSF係数を生成する。
係数変換部2413は、ISF/LSF逆量子化部2411)の逆量子化結果得られる復号化されたISF係数またはLSF係数を、ISP(immittance spectral pairs)またはLSP(linear spectral pairs)に変換し、各サブフレームのために、補間を行う。補間は、以前フレームのISP/LSPと、現在フレームのISP/LSとPを利用して行われる。係数変換部2413は、逆量子化されて補間された各サブフレームのISP/LSPを、LPC係数に変換することができる。
図25は、本発明の一実施形態によるLPC係数逆量子化部の詳細的な構成を示したブロック図である。図25に図示されたLPC係数逆量子化部2500は、量子化経路決定部2511、第1逆量子化スキーム2513及び第2逆量子化スキーム2515を含んでもよい。
量子化経路決定部2511は、ビットストリームに含まれた量子化経路情報に基づいてLPCパラメータを、第1逆量子化スキーム2513と、第2逆量子化スキーム2515とのうち一つに提供することができる。一例として、量子化経路情報は、1ビットで表現されることができる。
第1逆量子化スキーム2513は、LPCパラメータを粗く逆量子化する部分と、LPCパラメータを精密に逆量子化する部分とを含んでもよい。
第2逆量子化スキーム2515は、LPCパラメータについて、ブロック制限されたトレリス符号化逆量子化を行う部分と、予測部分とを含んでもよい。
第1逆量子化スキーム2513と第2逆量子化スキーム2515は、前記実施形態に限定されるものではなく、復号化装置に対応する符号化装置によって、前述の多様な実施形態の各第1量子化スキーム及び第2量子化スキームの逆過程を利用して具現される。
前記LPC係数逆量子化部の構成は、量子化器構造が開ループ方式または閉ループ方式にかかわらず適用することができる。
図26は、図25に図示された第1逆量子化スキームと、第2逆量子化スキームとの一例を示した図面である。図26を参照すれば、第1逆量子化スキーム2610は、符号化端のMSVQ(図示せず)で生成された第1コードブック・インデックスを利用して、LPCパラメータに含まれた量子化されたLSF係数を逆量子化するマルチステージベクトル量子化器(MSVQ)2611と、符号化端のLVQ(図示せず)で生成された第2コードブック・インデックスを利用して、LPCパラメータに含まれたLSF量子化エラーを逆量子化する格子ベクトル量子化器(LVQ)2613と、を含んでもよい。マルチステージベクトル量子化器(MSVQ)2611で得られる逆量子化されたLSF係数と、格子ベクトル量子化器(LVQ)2613で得られる逆量子化されたLSF量子化エラーとを加えた後、所定のDC(direct current)値である平均値を加えれば、最終復号化されたLSF係数が生成される。
第2逆量子化スキーム2630は、符号化端のBC−TCQ(図示せず)で生成された第3コードブック・インデックスを利用して、LPCパラメータに含まれたLSF予測エラーを逆量子化するブロック制限されたトレリス符号化量子化器(BC−TCQ)2631、フレーム内予測器2633及びフレーム間予測器2635を含んでもよい。逆量子化過程は、LSFベクトルのうち最も低いベクトルから始め、フレーム内予測器2633は、復号化されたベクトルを利用して、次の順序のベクトル要素のための予測値を生成する。フレーム間予測器2635は、以前フレームで復号化されたLSF係数を利用して、フレーム間予測を介して、予測値を生成する。ブロック制限されたトレリス符号化逆量子化器(BC−TCQ)2631と、フレーム内予測器2633とを介して得られるLSF係数に、フレーム間予測器2635で得られるフレーム間予測値を加え、さらに所定のDC値である平均値を加えれば、最終復号化されたLSF係数が生成される。
第1逆量子化スキーム2610と、第2逆量子化スキーム2630は、前記実施形態に限定されるものではなく、復号化装置に対応する符号化装置によって、前述の多様な実施形態の各第1量子化スキーム及び第2量子化スキームの逆過程を利用して具現される。
図27は、本発明の一実施形態による量子化方法の動作について説明するフローチャートである。図27を参照すれば、2710段階では、受信されたサウンドの量子化以前に、所定基準に基づいて、受信されたサウンドの量子化経路を選択する。一実施形態では、フレーム間予測を使用しない第1経路と、フレーム間予測を使用する第2経路とのうち一つが選択される。
2730段階では、第1経路及び第2経路のうち選択された量子化経路を確認する。
2750段階では、2730段階での確認結果、量子化経路として第1経路が選択された場合、第1量子化スキームを利用して、受信されたサウンドを量子化する。
2770段階では、2730段階での確認結果、量子化経路として第2経路が選択された場合、第2量子化スキームを利用して、受信されたサウンドを量子化する。
2710段階での量子化経路決定過程は、前述の多様な実施形態を介して遂行される。2750段階及び2770段階での量子化過程は、前述の多様な実施形態の各第1量子化スキーム及び第2量子化スキームを利用して遂行される。
前記実施形態では、選択可能な量子化経路として、第1経路及び第2経路を設定したが、第1経路及び第2経路を含む複数の経路で設定することができ、図27のフローチャートも、設定された複数の経路に対応して変形されもする。
図28は、本発明の一実施形態による逆量子化方法の動作について説明するフローチャートである。図28を参照すれば、2810段階では、ビットストリームに含まれた線形予測符号化(LPC)パラメータを復号化する。
2830段階では、ビットストリームに含まれた量子化経路をチェックし、2750段階では、第1経路及び第2経路のうちチェックされた経路を確認する。
2870段階では、2850段階での確認結果、量子化経路が第1経路である場合、第1逆量子化スキームを利用して、復号化されたLPCパラメータを逆量子化する。
2890段階では、2850段階での確認結果、量子化経路が第2経路である場合、第2逆量子化スキームを利用して、復号化されたLPCパラメータを逆量子化する。
2870段階及び2890段階での逆量子化過程は、復号化装置に対応する符号化装置によって、前述の多様な実施形態の各第1量子化スキーム及び第2量子化スキームの逆過程を利用して遂行される。
前記実施形態では、チェックされた量子化経路として、第1経路及び第2経路を設定したが、第1経路及び第2経路を含む複数の経路で設定することができ、図28のフローチャートも設定された複数の経路に対応して変形されもする。
図27及び図28の方法は、プログラミングされ、少なくとも1つのプロセッシング・デバイスによって遂行される。また、前記実施形態は、望ましくは、フレーム単位で遂行される。
図29は、本発明の一実施形態による符号化モジュールを含む電子機器の構成を示したブロック図である。図29に図示された電子機器2900は、通信部2910、と符号化モジュール2930とを含んでもよい。また、符号化の結果として得られるサウンド・ビットストリームの用途によって、サウンド・ビットストリームを保存する保存部2950をさらに含んでもよい。また、電子機器2900は、マイク2970をさらに含んでもよい。すなわち、保存部2850とマイク2970は、オプションとして具備される。一方、図29に図示された電子機器2900は、任意の復号化モジュール(図示せず)、例えば、一般的な復号化機能を遂行する復号化モジュール、または本発明の一実施形態による復号化モジュールをさらに含んでもよい。ここで、符号化モジュール2930は、電子機器2900に具備される他の構成要素(図示せず)と共に一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。
図29を参照すれば、通信部2910は、外部から提供されるサウンドと、符号化されたビットストリームとのうち少なくとも一つを受信したり、あるいは復元されたサウンドと、符号化モジュール2930の符号化結果として得られるサウンド・ビットストリームとのうち少なくとも一つを送信することができる。
通信部2910は、無線インターネット、無線イントラネット、無線電話網、無線LAN(local area network)、Wi−Fi(wireless fidelity)、Wi−Fiダイレクト(WFD:Wi−Fi direct)、3G(3rd generation)、4G(4th generation)、ブルートゥース(登録商標(Bluetooth)、赤外線通信(IrDA:infrared data association)、RFID(radio frequency identification)、UWB(ultra wideband)、ジグビー(登録商標(Zigbee))、NFC(near field communication)のような無線ネットワーク;または有線電話網、有線インターネットのような有線ネットワークを介して、外部の電子機器とデータを送受信することができるように構成される。
符号化モジュール2930は、通信部2910またはマイク2970を介して提供されるサウンドの量子化以前に、所定基準に基づいて、フレーム間予測を使用しない第1経路と、フレーム間予測を使用する第2経路とのうち一つを、サウンドの量子化経路として選択し、選択された量子化経路によって、第1量子化スキームと、第2量子化スキームとのうち一つを利用してサウンドを量子化し、量子化されたサウンドを符号化し、ビットストリームを生成することができる。
ここで、第1量子化スキームは、受信されたサウンドを粗量子化する第1量子化器(図示せず);及び受信されたサウンドと、第1量子化器の出力信号との間の量子化エラー信号を精密に量子化する第2量子化器(図示せず);を含んでもよい。第1量子化スキームは、望ましくは、受信されたサウンドを量子化するマルチステージベクトル量子化器(MSVQ)(図示せず);及び受信されたサウンドと、マルチステージベクトル量子化器の出力との間のエラー信号を量子化する格子ベクトル量子化器(LVQ)(図示せず);を含んでもよい。また、第1量子化スキームは、前述のように、多様な実施形態のうち一つで具現することができる。
一方、第2量子化スキームは、望ましくは、入力サウンドについて、フレーム間予測を行うフレーム間予測器(図示せず)、予測エラーについて、フレーム内予測を行うフレーム内予測器(図示せず)、及び予測エラーを量子化するブロック制限されたトレリス符号化量子化器(BC−TCQ)(図示せず)を含んでもよい。同様に、第2量子化スキームは、前述のように、多様な実施形態のうち一つで具現することができる。
保存部2950は、符号化モジュール2930で生成される符号化されたビットストリームを保存することができる。一方、保存部2950は、電子機器2900の運用に必要な多様なプログラムを保存することができる。
マイク2970は、ユーザまたは外部のサウンドを、符号化モジュール2930に提供することができる。
図30は、本発明の一実施形態による復号化モジュールを含む電子機器の構成を示したブロック図である。図30に図示された電子機器3000は、通信部3010と、復号化モジュール3030を含んでもよい。また、復号化の結果として得られる復元されたサウンドの用途によって、復元されたサウンドを保存する保存部3050をさらに含んでもよい。また、電子機器3000は、スピーカ3070をさらに含んでもよい。すなわち、保存部3050とスピーカ3070は、オプションとして具備される。一方、図30に図示された電子機器3000は、任意の符号化モジュール(図示せず)、例えば、一般的な符号化機能を遂行する符号化モジュール、または本発明の一実施形態による符号化モジュールをさらに含んでもよい。ここで、復号化モジュール3030は、電子機器3000に具備される他の構成要素(図示せず)と共に一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。
図30を参照すれば、通信部3010は、外部から提供される符号化されたビットストリームと、サウンドとのうち少なくとも一つを受信したり、あるいは復号化モジュール3030の復号化結果として得られる復元されたサウンドと、符号化の結果として得られるサウンド・ビットストリームとのうち少なくとも一つを送信することができる。一方、通信部3010は、図28の通信部3010と、実質的に類似して具現される。
復号化モジュール3030は、通信部3010を介して提供されるビットストリームに含まれた線形予測符号化パラメータを復号化し、ビットストリームに含まれた経路情報に基づいて、フレーム間予測を使用しない第1逆量子化スキームと、フレーム間予測を使用する第2逆量子化スキームとのうち一つを利用して、復号化された線形予測符号化パラメータを逆量子化し、逆量子化された線形予測符号化パラメータを復号化し、復元されたサウンドを生成することができる。ここで、復号化モジュール3030は、ビットストリームに符号化モードが含まれる場合、逆量子化された線形予測符号化パラメータを、復号化された符号化モードに対応して復号化することができる。
ここで、第1逆量子化スキームは、線形予測符号化パラメータを粗く逆量子化する第1逆量子化器(図示せず)と、線形予測符号化パラメータを精密に逆量子化する第2逆量子化器(図示せず)と、を含んでもよい。第1逆量子化スキームは、望ましくは、第1コードブック・インデックスを利用して線形予測符号化パラメータを逆量子化するマルチステージベクトル量子化器(MSVQ)(図示せず);及び第2コードブック・インデックスを利用して線形予測符号化パラメータを逆量子化する格子ベクトル量子化器(LVQ)(図示せず);を含んでもよい。また、第1逆量子化スキームは、図28に説明された第1量子化スキームと可逆的な動作を遂行するので、復号化装置に対応する符号化装置によって、前述のように、第1量子化スキームの多様な実施形態の各逆過程で具現することができる。
一方、第2逆量子化スキームは、望ましくは、第3コードブック・インデックスを利用して、線形予測符号化パラメータを逆量子化するブロック制限されたトレリス符号化量子化器(BC−TCQ)(図示せず)、フレーム内予測器(図示せず)及びフレーム間予測器(図示せず)を含んでもよい。同様に、第2逆量子化スキームは、図28に説明された第2量子化スキームと可逆的な動作を遂行するので、復号化装置に対応する符号化装置によって、前述のように、第2量子化スキームの多様な実施形態の各逆過程で具現することができる。
保存部3050は、復号化モジュール3030で生成される復元されたサウンドを保存することができる。一方、保存部3050は、電子機器3000の運用に必要な多様なプログラムを保存することができる。
スピーカ3070は、復号化モジュール3030で生成される復元されたサウンドを外部に出力することができる。
図31は、本発明の一実施形態による符号化モジュールと、復号化モジュールとを含む電子機器の構成を示したブロック図である。図31に図示された電子機器3100は、通信部31110、符号化モジュール3120及び復号化モジュール3130を含んでもよい。また、符号化の結果として得られるサウンド・ビットストリーム、または復号化の結果として得られる復元されたサウンドの用途によって、サウンド・ビットストリームまたは復元されたサウンドを保存する保存部3140をさらに含んでもよい。また、電子機器3100は、マイク3150またはスピーカ3160をさらに含んでもよい。ここで、符号化モジュール3120と、復号化モジュール3130は、電子機器3100に具備される他の構成要素(図示せず)と共に一体化され、少なくとも1つの以上のプロセッサ(図示せず)によって具現される。
図31に図示された各構成要素は、図29に図示された電子機器2900の構成要素、または図30に図示された電子機器3000の構成要素と重複するので、その詳細な説明は省略する。
図29ないし図31に図示された電子機器2900,3000,3100には、電話、モバイルフォンなどを含む音声通信専用端末;TV(television)、MP3プレーヤなどを含む放送専用装置または音楽専用装置;または音声通信専用端末と、放送専用装置または音楽専用装置のと融合端末装置が含まれるが、それらに限定されるものではない。また、電子機器2900,3000,3100は、クライアント、サーバ、またはクライアントとサーバとの間に配置される変換器として使用される。
一方、電子機器2900,3000,3100が、例えば、モバイルフォンである場合、図示されていないが、キーパッドのようなユーザ入力、ユーザインターフェース、またはモバイルフォンで処理される情報をディスプレイするディスプレイ部;及びモバイルフォンの全般的な機能を制御するプロセッサ;をさらに含んでもよい。また、モバイルフォンは、撮像機能を有するカメラ部と、モバイルフォンで必要とする機能を遂行する少なくとも一つ以上の構成要素と、をさらに含んでもよい。
一方、電子機器2900,3000,3100が、例えば、TVである場合、図示されていないが、キーパッドのようなユーザ入力、受信された放送情報をディスプレイするディスプレイ部;及びTVの全般的な機能を制御するプロセッサ;をさらに含んでもよい。また、TVで必要とする機能を遂行する少なくとも一つ以上の構成要素をさらに含んでもよい。
一方、LPC係数量子化/逆量子化と係わって採用されるBC−TCQと係わる内容は、US7630890号明細書(Block-constrained TCQ method, and method and apparatus for quantizing LSF parameter employing the same in speech coding system)に詳細に説明されている。そして、LVA方式と係わる内容は、US20070233473号明細書(Multi-path trellis coded quantization method and Multi-path trellis coded quantizer using the same)に詳細に説明されている。
前記実施形態による量子化法、逆量子化法、符号化法、及び復号化法は、コンピュータで実行されるプログラムに作成可能であり、コンピュータで読み取り可能な記録媒体を利用して、前記プログラムを動作させる汎用デジタルコンピュータで具現される。また、前述の本発明の実施形態で使用されるデータ構造、プログラム命令またはデータファイルは、コンピュータで読み取り可能な記録媒体に多様な手段を介しても記録される。コンピュータで読み取り可能な記録媒体は、コンピュータ・システムによって読み取り可能なデータが保存される全ての種類の保存装置を含んでもよい。コンピュータで読み取り可能な記録媒体の例としては、ハードディスク、フロッピー(登録商標)ディスク及び磁気テープのような磁気媒体(magnetic media);CD(compact disc)−ROM(read only memory)、DVD(digital versatile disk)のような光記録媒体(optical media);フロプティカルディスク(floptical disk)のような磁気・光媒体(magneto-optical media);及びROM、RAM(random access memory)、フラッシュメモリのようなプログラム命令を保存して遂行するように特別に構成されたハードウェア装置;が含まれる。また、コンピュータで読み取り可能な記録媒体は、プログラム命令、データ構造などを指定する信号を伝送する伝送媒体でもある。プログラム命令の例としては、コンパイラによって作われるような機械語コードだけではなく、インタ−プリタなどを使用し、コンピュータによって実行される高級言語コードを含んでもよい。
以上、本発明の一実施形態は、たとえ限定された実施形態と図面とによって説明されたにしても、本発明の一実施形態は、前述の実施形態に限定されるものではなく、それは、本発明が属する分野で当業者であるならば、そのような記載から、多様な修正及び変形が可能である。従って、本発明のスコープは、前述の説明ではなく、特許請求の範囲に示されており、それと均等であるか、あるいは等価的変形は、いずれも本発明技術的思想の範疇に属するものである。

Claims (21)

  1. 入力信号の予測モード、予測エラー及び伝送チャンネル状態のうち少なくとも一つを考慮し、フレーム間予測を使用しない第1量子化スキームと、フレーム間予測を使用する第2量子化スキームとのうち一つをスイッチングして入力信号を量子化する段階を含む量子化方法。
  2. 前記第1量子化スキームは、前記入力信号を粗量子化する第1量子化プロセス;及び前記入力信号と前記第1量子化プロセスの出力信号との間の量子化エラー信号を精密に量子化する第2量子化プロセス;を含むことを特徴とする請求項1に記載の量子化方法。
  3. 前記第2量子化スキームは、ブロック制限されたトレリス符号化量子化器(BC−TCQ)を含むことを特徴とする請求項1に記載の量子化方法。
  4. 前記ブロック制限されたトレリス符号化量子化器は、加重歪曲を利用して、量子化インデックスを決定することを特徴とする請求項3に記載の量子化方法。
  5. 前記予測エラーは、前記入力信号の重要度と係わる加重関数を利用して、得られることを特徴とする請求項1に記載の量子化方法。
  6. 前記加重関数は、前記入力信号の周波数帯域、符号化モード及びスペクトル分析情報のうち少なくとも一つ以上を利用して決定されることを特徴とする請求項5に記載の量子化方法。
  7. 前記入力信号が、非静的である場合、前記第1量子化スキームが選択されることを特徴とする請求項1に記載の量子化方法。
  8. 前記入力信号が、静的である場合、前記予測エラーを考慮し、前記第1量子化スキームと、前記第2量子化スキームとのうち一つが選択されることを特徴とする請求項1に記載の量子化方法。
  9. 前記入力信号の量子化段階は、
    前記入力信号の予測モードを判断する段階と、
    前記入力信号の予測モードを利用して、前記入力信号の量子化スキームを、前記第1量子化スキームまたは前記第2量子化スキームとして選択する段階と、
    前記入力信号の予測モードを利用して、前記入力信号の量子化スキームが決定されない場合、前記入力信号の現在フレームと以前フレームとから得られた第1予測エラーを利用して、前記入力信号の量子化スキームを、前記第1量子化スキームと、前記第2量子化スキームとのうち一つに決定する段階と、を含むことを特徴とする請求項1に記載の量子化方法。
  10. 前記入力信号の量子化段階は、前記以前フレームにエラーが生じた場合、前記現在フレームと、前記以前フレームの以前フレームとから得られた第2予測エラーを利用して、前記入力信号の量子化スキームを、前記第1量子化スキームと、前記第2量子化スキームとのうち一つに決定する段階を含むことを特徴とする請求項8に記載の量子化方法。
  11. 前記入力信号の量子化段階は、前記伝送チャンネル状態によって、前記第1量子化スキームの選択比率を調節することを特徴とする請求項1に記載の量子化方法。
  12. 前記入力信号の量子化段階は、前記伝送チャンネル状態の安定度が、所定臨界値以下である場合、前記第1量子化スキームだけ選択することを特徴とする請求項11に記載の量子化方法。
  13. ビットストリームに含まれた経路情報に基づいて、フレーム間予測を使用しない第1逆量子化スキームと、フレーム間予測を使用する第2逆量子化スキームとのうち一つをスイッチングし、入力信号を逆量子化する段階を含み、
    前記経路情報は、符号化端で、前記入力信号の予測モード、予測エラー及び伝送チャンネル状態のうち少なくとも一つを考慮し、決定される逆量子化方法。
  14. 前記第1逆量子化スキームは、線形予測符号化パラメータを粗く逆量子化する第1逆量子化プロセスと、前記線形予測符号化パラメータを精密に逆量子化する第2逆量子化プロセスと、を含むことを特徴とする請求項13に記載の逆量子化方法。
  15. 入力信号の符号化モードを決定する段階と、
    予測モード、予測エラー及び伝送チャンネル状態のうち少なくとも一つを考慮し、フレーム間予測を使用しない第1量子化スキームと、フレーム間予測を使用する第2量子化スキームとのうち一つをスイッチングし、前記入力信号を量子化する段階と、
    前記第1量子化スキームと、前記第2量子化スキームとのうち一つを介して量子化された入力信号を、前記符号化モードに対応して符号化する段階と、
    前記第1量子化スキームによって量子化された結果と、前記第2量子化スキームによって量子化された結果とのうち一つ;前記入力信号の前記符号化モード;及び前記入力信号の量子化と係わる経路情報;を含むビットストリームを生成する段階と、を含む符号化方法。
  16. ビットストリームに含まれた線形予測符号化パラメータと、符号化モードとを復号化する段階と、
    前記ビットストリームに含まれた経路情報に基づいて、線形予測符号化パラメータについて、フレーム間予測を使用しない第1逆量子化スキームと、前記フレーム間予測を使用する第2逆量子化スキームとのうち一つを利用して逆量子化する段階と、
    前記逆量子化された線形予測符号化パラメータを、前記復号化された符号化モードに対応して復号化する段階と、を含み、
    前記ビットストリームに含まれた経路情報は、符号化端で、入力信号の予測モード、予測エラー及び伝送チャンネル状態のうち少なくとも一つを考慮し、決定される復号化方法。
  17. 請求項1に記載の方法を遂行するプログラムを記録したコンピュータで読み取り可能な記録媒体。
  18. 請求項13に記載の方法を遂行するプログラムを記録したコンピュータで読み取り可能な記録媒体。
  19. 請求項15に記載の方法を遂行するプログラムを記録したコンピュータで読み取り可能な記録媒体。
  20. 請求項16に記載の方法を遂行するプログラムを記録したコンピュータで読み取り可能な記録媒体。
  21. 入力信号のビット率を第1基準値と比較する段階と、
    前記入力信号の帯域を第2基準値と比較する段階と、
    内部サンプリング周波数を第3基準値と比較する段階と、
    前記一つ以上の比較結果に基づいて、前記入力信号の量子化器タイプを、開ループ並びに閉ループのうち一つに決定する段階と、を含む量子化器タイプ決定方法。
JP2014506341A 2011-04-21 2012-04-23 量子化方法 Active JP6178305B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161477797P 2011-04-21 2011-04-21
US61/477,797 2011-04-21
US201161481874P 2011-05-03 2011-05-03
US61/481,874 2011-05-03
PCT/KR2012/003128 WO2012144878A2 (en) 2011-04-21 2012-04-23 Method of quantizing linear predictive coding coefficients, sound encoding method, method of de-quantizing linear predictive coding coefficients, sound decoding method, and recording medium

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017137448A Division JP2017203997A (ja) 2011-04-21 2017-07-13 線形予測係数量子化方法、サウンド符号化方法、線形予測係数逆量子化方法、サウンド復号化方法、その記録媒体及び電子機器

Publications (3)

Publication Number Publication Date
JP2014519044A true JP2014519044A (ja) 2014-08-07
JP2014519044A5 JP2014519044A5 (ja) 2015-06-18
JP6178305B2 JP6178305B2 (ja) 2017-08-09

Family

ID=47042087

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014506341A Active JP6178305B2 (ja) 2011-04-21 2012-04-23 量子化方法
JP2017137448A Pending JP2017203997A (ja) 2011-04-21 2017-07-13 線形予測係数量子化方法、サウンド符号化方法、線形予測係数逆量子化方法、サウンド復号化方法、その記録媒体及び電子機器

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017137448A Pending JP2017203997A (ja) 2011-04-21 2017-07-13 線形予測係数量子化方法、サウンド符号化方法、線形予測係数逆量子化方法、サウンド復号化方法、その記録媒体及び電子機器

Country Status (15)

Country Link
US (3) US8977544B2 (ja)
EP (2) EP3537438A1 (ja)
JP (2) JP6178305B2 (ja)
KR (2) KR101863688B1 (ja)
CN (3) CN105719654B (ja)
AU (3) AU2012246799B2 (ja)
BR (3) BR122020023363B1 (ja)
CA (1) CA2833874C (ja)
MX (2) MX2013012300A (ja)
MY (1) MY185091A (ja)
RU (3) RU2619710C2 (ja)
SG (1) SG194579A1 (ja)
TW (2) TWI672691B (ja)
WO (1) WO2012144878A2 (ja)
ZA (1) ZA201308709B (ja)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101747917B1 (ko) * 2010-10-18 2017-06-15 삼성전자주식회사 선형 예측 계수를 양자화하기 위한 저복잡도를 가지는 가중치 함수 결정 장치 및 방법
CN105336337B (zh) 2011-04-21 2019-06-25 三星电子株式会社 针对语音信号或音频信号的量化方法以及解码方法和设备
US8977544B2 (en) 2011-04-21 2015-03-10 Samsung Electronics Co., Ltd. Method of quantizing linear predictive coding coefficients, sound encoding method, method of de-quantizing linear predictive coding coefficients, sound decoding method, and recording medium and electronic device therefor
MX346732B (es) 2013-01-29 2017-03-30 Fraunhofer Ges Forschung Cuantificación de señales de audio adaptables por tonalidad de baja complejidad.
PL3046104T3 (pl) 2013-09-16 2020-02-28 Samsung Electronics Co., Ltd. Sposób kodowania sygnału oraz sposób dekodowania sygnału
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
MX2016004705A (es) 2013-10-14 2016-07-18 Microsoft Technology Licensing Llc Caracteristicas del modo de prediccion copia de bloque interno para codificacion y decodificacion de imagen y video.
MX356164B (es) * 2013-11-13 2018-05-16 Fraunhofer Ges Forschung Codificador para codificar una señal de audio, sistema de audio de transmisión y método para determinar valores de corrección.
KR102023138B1 (ko) 2013-12-02 2019-09-19 후아웨이 테크놀러지 컴퍼니 리미티드 인코딩 방법 및 장치
WO2015100726A1 (en) 2014-01-03 2015-07-09 Microsoft Corporation Block vector prediction in video and image coding/decoding
US10074375B2 (en) * 2014-01-15 2018-09-11 Samsung Electronics Co., Ltd. Weight function determination device and method for quantizing linear prediction coding coefficient
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
JP2017512026A (ja) * 2014-03-04 2017-04-27 マイクロソフト テクノロジー ライセンシング,エルエルシー イントラブロックコピー予測におけるブロック反転及びスキップモード
SG10201808285UA (en) * 2014-03-28 2018-10-30 Samsung Electronics Co Ltd Method and device for quantization of linear prediction coefficient and method and device for inverse quantization
JP6270992B2 (ja) * 2014-04-24 2018-01-31 日本電信電話株式会社 周波数領域パラメータ列生成方法、周波数領域パラメータ列生成装置、プログラム及び記録媒体
CN112927703A (zh) * 2014-05-07 2021-06-08 三星电子株式会社 对线性预测系数量化的方法和装置及解量化的方法和装置
US9959876B2 (en) * 2014-05-16 2018-05-01 Qualcomm Incorporated Closed loop quantization of higher order ambisonic coefficients
CN105493505B (zh) 2014-06-19 2019-08-06 微软技术许可有限责任公司 统一的帧内块复制和帧间预测模式
CN111968656B (zh) 2014-07-28 2023-11-10 三星电子株式会社 信号编码方法和装置以及信号解码方法和装置
WO2016030568A1 (en) 2014-08-28 2016-03-03 Nokia Technologies Oy Audio parameter quantization
EP3202150B1 (en) 2014-09-30 2021-07-21 Microsoft Technology Licensing, LLC Rules for intra-picture prediction modes when wavefront parallel processing is enabled
EP3320539A1 (en) * 2015-07-06 2018-05-16 Nokia Technologies OY Bit error detector for an audio signal decoder
CN109690673B (zh) * 2017-01-20 2021-06-08 华为技术有限公司 量化器与量化方法
CN109473116B (zh) * 2018-12-12 2021-07-20 思必驰科技股份有限公司 语音编码方法、语音解码方法及装置
TWI723545B (zh) * 2019-09-17 2021-04-01 宏碁股份有限公司 語音處理方法及其裝置
CN114727109B (zh) * 2021-01-05 2023-03-24 腾讯科技(深圳)有限公司 多媒体的量化处理方法、装置及编码、解码设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08211900A (ja) * 1995-02-01 1996-08-20 Hitachi Maxell Ltd ディジタル音声圧縮方式
JPH09190197A (ja) * 1995-06-07 1997-07-22 At & T Ipm Corp フレーム消失の間のピッチ遅れ修正方法
JP2003022099A (ja) * 2002-04-12 2003-01-24 Matsushita Electric Ind Co Ltd Lspパラメータ符号化復号化装置及び方法
JP2004252462A (ja) * 2003-02-19 2004-09-09 Samsung Electronics Co Ltd ブロック制限されたトレリス符号化量子化方法、ならびに音声符号化システムにおいてそのトレリス符号化量子化方法を採用したラインスペクトル周波数係数の量子化方法及び装置
JP2006510947A (ja) * 2002-12-24 2006-03-30 ノキア コーポレイション 可変ビットレート通話符号化における線形予測パラメータの強力な予測ベクトル量子化方法と装置
JP2009532976A (ja) * 2006-04-04 2009-09-10 サムスン エレクトロニクス カンパニー リミテッド 多重経路トレリス符号化量子化方法およびこれを用いた多重経路トレリス符号化量子化装置
WO2010003564A1 (en) * 2008-07-11 2010-01-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V Low bitrate audio encoding/decoding scheme having cascaded switches
JP2010517065A (ja) * 2007-01-30 2010-05-20 ノキア コーポレイション オーディオ量子化

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62231569A (ja) 1986-03-31 1987-10-12 Fuji Photo Film Co Ltd 予測誤差の量子化方法
JPH0863198A (ja) * 1994-08-22 1996-03-08 Nec Corp ベクトル量子化器
JPH08190764A (ja) 1995-01-05 1996-07-23 Sony Corp ディジタル信号処理方法、ディジタル信号処理装置及び記録媒体
FR2729244B1 (fr) * 1995-01-06 1997-03-28 Matra Communication Procede de codage de parole a analyse par synthese
JP2891193B2 (ja) * 1996-08-16 1999-05-17 日本電気株式会社 広帯域音声スペクトル係数量子化装置
US6889185B1 (en) 1997-08-28 2005-05-03 Texas Instruments Incorporated Quantization of linear prediction coefficients using perceptual weighting
US5966688A (en) * 1997-10-28 1999-10-12 Hughes Electronics Corporation Speech mode based multi-stage vector quantizer
CA2722110C (en) 1999-08-23 2014-04-08 Panasonic Corporation Apparatus and method for speech coding
US6581032B1 (en) * 1999-09-22 2003-06-17 Conexant Systems, Inc. Bitstream protocol for transmission of encoded voice signals
US6604070B1 (en) * 1999-09-22 2003-08-05 Conexant Systems, Inc. System of encoding and decoding speech signals
AU2547201A (en) 2000-01-11 2001-07-24 Matsushita Electric Industrial Co., Ltd. Multi-mode voice encoding device and decoding device
JP3453116B2 (ja) * 2000-09-26 2003-10-06 パナソニック モバイルコミュニケーションズ株式会社 音声符号化方法及び装置
US7031926B2 (en) 2000-10-23 2006-04-18 Nokia Corporation Spectral parameter substitution for the frame error concealment in a speech decoder
JP2002202799A (ja) * 2000-10-30 2002-07-19 Fujitsu Ltd 音声符号変換装置
US6829579B2 (en) * 2002-01-08 2004-12-07 Dilithium Networks, Inc. Transcoding method and system between CELP-based speech codes
KR100914220B1 (ko) * 2002-04-22 2009-08-26 노키아 코포레이션 선 스펙트럴 주파수(lsf) 벡터들의 발생
US7167568B2 (en) 2002-05-02 2007-01-23 Microsoft Corporation Microphone array signal enhancement
CA2388358A1 (en) 2002-05-31 2003-11-30 Voiceage Corporation A method and device for multi-rate lattice vector quantization
US8090577B2 (en) * 2002-08-08 2012-01-03 Qualcomm Incorported Bandwidth-adaptive quantization
JP4292767B2 (ja) 2002-09-03 2009-07-08 ソニー株式会社 データレート変換方法及びデータレート変換装置
CN1186765C (zh) * 2002-12-19 2005-01-26 北京工业大学 2.3kb/s谐波激励线性预测语音编码方法
US7613606B2 (en) * 2003-10-02 2009-11-03 Nokia Corporation Speech codecs
JP4369857B2 (ja) 2003-12-19 2009-11-25 パナソニック株式会社 画像符号化装置および画像符号化方法
WO2005112005A1 (ja) 2004-04-27 2005-11-24 Matsushita Electric Industrial Co., Ltd. スケーラブル符号化装置、スケーラブル復号化装置、およびこれらの方法
DE602006020686D1 (de) * 2005-01-12 2011-04-28 Nippon Telegraph & Telephone Kodierverfahren und dekodierverfahren mit langzeitvorhersage, vorrichtungen, programm und aufzeichnungsmedium dafür
EP1720249B1 (en) * 2005-05-04 2009-07-15 Harman Becker Automotive Systems GmbH Audio enhancement system and method
CN101395661B (zh) 2006-03-07 2013-02-06 艾利森电话股份有限公司 音频编码和解码的方法和设备
GB2436191B (en) * 2006-03-14 2008-06-25 Motorola Inc Communication Unit, Intergrated Circuit And Method Therefor
RU2395174C1 (ru) * 2006-03-30 2010-07-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ и устройство для декодирования/кодирования сигнала видео
WO2007132750A1 (ja) * 2006-05-12 2007-11-22 Panasonic Corporation Lspベクトル量子化装置、lspベクトル逆量子化装置、およびこれらの方法
US8532178B2 (en) 2006-08-25 2013-09-10 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal with inter-view reference picture list construction
ES2532375T3 (es) * 2007-03-14 2015-03-26 Nippon Telegraph And Telephone Corporation Método de control de velocidad binaria de codificación, dispositivo, programa, y medio de grabación que contiene el programa
KR100903110B1 (ko) * 2007-04-13 2009-06-16 한국전자통신연구원 트렐리스 부호 양자화 알고리듬을 이용한 광대역 음성 부호화기용 lsf 계수 양자화 장치 및 방법
WO2009044346A1 (en) * 2007-10-05 2009-04-09 Nokia Corporation System and method for combining adaptive golomb coding with fixed rate quantization
US20090136052A1 (en) 2007-11-27 2009-05-28 David Clark Company Incorporated Active Noise Cancellation Using a Predictive Approach
US20090245351A1 (en) * 2008-03-28 2009-10-01 Kabushiki Kaisha Toshiba Moving picture decoding apparatus and moving picture decoding method
US20090319261A1 (en) 2008-06-20 2009-12-24 Qualcomm Incorporated Coding of transitional speech frames for low-bit-rate applications
ES2683077T3 (es) 2008-07-11 2018-09-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codificador y decodificador de audio para codificar y decodificar tramas de una señal de audio muestreada
BRPI0914056B1 (pt) * 2008-10-08 2019-07-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Esquema de codificação/decodificação de áudio comutado multi-resolução
AU2010305383B2 (en) 2009-10-08 2013-10-03 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Multi-mode audio signal decoder, multi-mode audio signal encoder, methods and computer program using a linear-prediction-coding based noise shaping
PL2473995T3 (pl) * 2009-10-20 2015-06-30 Fraunhofer Ges Forschung Koder sygnału audio, dekoder sygnału audio, sposób dostarczania zakodowanej reprezentacji treści audio, sposób dostarczania dekodowanej reprezentacji treści audio oraz program komputerowy do wykorzystania w zastosowaniach z małym opóźnieniem
US8977544B2 (en) 2011-04-21 2015-03-10 Samsung Electronics Co., Ltd. Method of quantizing linear predictive coding coefficients, sound encoding method, method of de-quantizing linear predictive coding coefficients, sound decoding method, and recording medium and electronic device therefor
CN105336337B (zh) 2011-04-21 2019-06-25 三星电子株式会社 针对语音信号或音频信号的量化方法以及解码方法和设备
JP2017137439A (ja) * 2016-02-04 2017-08-10 株式会社双葉紙器 セラミドとセラミド誘導体との製造方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08211900A (ja) * 1995-02-01 1996-08-20 Hitachi Maxell Ltd ディジタル音声圧縮方式
JPH09190197A (ja) * 1995-06-07 1997-07-22 At & T Ipm Corp フレーム消失の間のピッチ遅れ修正方法
JP2003022099A (ja) * 2002-04-12 2003-01-24 Matsushita Electric Ind Co Ltd Lspパラメータ符号化復号化装置及び方法
JP2006510947A (ja) * 2002-12-24 2006-03-30 ノキア コーポレイション 可変ビットレート通話符号化における線形予測パラメータの強力な予測ベクトル量子化方法と装置
JP2004252462A (ja) * 2003-02-19 2004-09-09 Samsung Electronics Co Ltd ブロック制限されたトレリス符号化量子化方法、ならびに音声符号化システムにおいてそのトレリス符号化量子化方法を採用したラインスペクトル周波数係数の量子化方法及び装置
JP2009532976A (ja) * 2006-04-04 2009-09-10 サムスン エレクトロニクス カンパニー リミテッド 多重経路トレリス符号化量子化方法およびこれを用いた多重経路トレリス符号化量子化装置
JP2010517065A (ja) * 2007-01-30 2010-05-20 ノキア コーポレイション オーディオ量子化
WO2010003564A1 (en) * 2008-07-11 2010-01-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V Low bitrate audio encoding/decoding scheme having cascaded switches

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ITU-T G.718 - FRAME ERROR ROBUST NARROW-BAND AND WIDEBAND EMBEDDED VARIABLE BIT-RATE CODING OF SPEE, [ONLINE], JPN6016021038, 13 June 2008 (2008-06-13), pages 7 - 9 *

Also Published As

Publication number Publication date
JP2017203997A (ja) 2017-11-16
US20150162017A1 (en) 2015-06-11
MX354812B (es) 2018-03-22
CN105719654A (zh) 2016-06-29
ZA201308709B (en) 2021-05-26
AU2016203627B2 (en) 2017-08-31
US20120278069A1 (en) 2012-11-01
JP6178305B2 (ja) 2017-08-09
US10229692B2 (en) 2019-03-12
CN105513602A (zh) 2016-04-20
WO2012144878A2 (en) 2012-10-26
TW201729182A (zh) 2017-08-16
TWI672691B (zh) 2019-09-21
TW201243828A (en) 2012-11-01
TWI591621B (zh) 2017-07-11
MX2013012300A (es) 2013-12-06
RU2675044C1 (ru) 2018-12-14
CN105719654B (zh) 2019-11-05
CN103620676A (zh) 2014-03-05
BR112013027093B1 (pt) 2021-04-13
AU2017268591B2 (en) 2018-11-08
US8977544B2 (en) 2015-03-10
KR101997038B1 (ko) 2019-07-05
WO2012144878A3 (en) 2013-03-14
RU2619710C2 (ru) 2017-05-17
RU2013151673A (ru) 2015-05-27
US20170221494A1 (en) 2017-08-03
EP2700173A2 (en) 2014-02-26
AU2017268591A1 (en) 2017-12-21
CA2833874A1 (en) 2012-10-26
US9626980B2 (en) 2017-04-18
AU2012246799B2 (en) 2016-03-03
CN105513602B (zh) 2019-08-06
CN103620676B (zh) 2016-03-09
KR20180063008A (ko) 2018-06-11
KR101863688B1 (ko) 2018-06-01
CA2833874C (en) 2019-11-05
BR122020023350B1 (pt) 2021-04-20
EP2700173A4 (en) 2014-05-28
BR122020023363B1 (pt) 2021-06-01
EP3537438A1 (en) 2019-09-11
MY185091A (en) 2021-04-30
SG194579A1 (en) 2013-12-30
RU2647652C1 (ru) 2018-03-16
KR20120120086A (ko) 2012-11-01
AU2016203627A1 (en) 2016-06-16
BR112013027093A2 (pt) 2020-08-11

Similar Documents

Publication Publication Date Title
KR101997037B1 (ko) 선형예측계수 양자화장치, 사운드 부호화장치, 선형예측계수 역양자화장치, 사운드 복호화장치와 전자기기
KR101997038B1 (ko) 선형예측계수 양자화방법, 사운드 부호화방법, 선형예측계수 역양자화방법, 사운드 복호화방법, 그 기록매체

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150423

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150423

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160907

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170613

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170713

R150 Certificate of patent or registration of utility model

Ref document number: 6178305

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250