TWI484482B - Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program - Google Patents

Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program Download PDF

Info

Publication number
TWI484482B
TWI484482B TW100112671A TW100112671A TWI484482B TW I484482 B TWI484482 B TW I484482B TW 100112671 A TW100112671 A TW 100112671A TW 100112671 A TW100112671 A TW 100112671A TW I484482 B TWI484482 B TW I484482B
Authority
TW
Taiwan
Prior art keywords
frequency
band
sub
coefficient
signal
Prior art date
Application number
TW100112671A
Other languages
English (en)
Other versions
TW201209807A (en
Inventor
Yuki Yamamoto
Toru Chinen
Hiroyuki Honma
Yuhki Mitsufuji
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201209807A publication Critical patent/TW201209807A/zh
Application granted granted Critical
Publication of TWI484482B publication Critical patent/TWI484482B/zh

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04Time compression or expansion
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0364Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0204Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • G10L21/0388Details of processing therefor
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/18Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/167Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes

Description

信號處理裝置及方法、編碼裝置及方法、解碼裝置及方法以及信號處理程式
本發明係關於一種信號處理裝置及方法、編碼裝置及方法、解碼裝置及方法以及程式,尤其,係關於一種可藉由頻帶之擴大而以更高音質再生音樂信號之信號處理裝置及方法、編碼裝置及方法、解碼裝置及方法以及程式。
近年來,經由網際網路等發送音樂資料之音樂發送服務不斷普及。於該音樂發送服務中,將對音樂信號進行編碼而獲得之編碼資料作為音樂資料發送。作為音樂信號之編碼方法,抑制編碼資料之文件容量而降低位元率,以便於下載時不花費時間之編碼方法成為主流。
作為此種音樂信號之編碼方法,大致存在MP3(MPEG(Moving Picture Experts Group,動畫專業團體)Audio Layer3,音頻動態壓縮第三層)(國際標準規格ISO(International Organization for Standardization,國際標準化組織)/IEC(International Electrotechnical Commission,國際電工委員會)11172-3)等編碼方法或HE-AAC(High Efficiency MPEG4 AAC(Advanced Audio Coding),高效能進階音訊編碼))(國際標準規格ISO/IEC 14496-3)等編碼方法。
於以MP3為代表之編碼方法中,將音樂信號中之人類的耳朵難以感覺到之約15kHz以上之高頻帶(以下,稱為高頻)之信號成分刪除,而對其餘之低頻帶(以下,稱為低頻) 之信號成分進行編碼。以下,將此種編碼方法稱為高頻刪除編碼方法。於該高頻刪除編碼方法中,可抑制編碼資料之文件容量。然而,由於高頻之聲音雖然微小但人類仍可感覺到,故而若由藉由將編碼資料解碼而獲得之解碼後之音樂信號產生聲音並將其輸出,則有時會產生失去原聲所具有之臨場感,或聲音模糊不清等音質之劣化。
相對於此,於以HE-AAC為代表之編碼方法中,自高頻之信號成分中抽選特徵性之資訊,並與低頻之信號成分一併進行編碼。以下,將此種編碼方法稱為高頻特徵編碼方法。於該高頻特徵編碼方法中,由於僅將高頻之信號成分之特徵性之資訊作為與高頻之信號成分相關之資訊而進行編碼,故而可抑制音質之劣化,並且可提高編碼效率。
於由該高頻特徵編碼方法經編碼之編碼資料之解碼中,將低頻之信號成分與特徵性之資訊解碼,並根據解碼後之低頻之信號成分與特徵性之資訊產生高頻之信號成分。以下,將藉由如此根據低頻之信號成分產生高頻之信號成分,而擴大低頻之信號成分之頻帶的技術稱為頻帶擴大技術。
作為頻帶擴大技術之應用例之一,有上述高頻刪除編碼方法之編碼資料之解碼後之後處理。於該後處理中,根據解碼後之低頻之信號成分產生因編碼而失去之高頻之信號成分,藉此擴大低頻之信號成分之頻帶(參照專利文獻1)。再者,以下,將專利文獻1之頻帶擴大之方法稱為專利文獻1之頻帶擴大方法。
於專利文獻1之頻帶擴大方法中,裝置係將解碼後之低頻之信號成分作為輸入信號,根據輸入信號之功率光譜推斷高頻之功率光譜(以下,適當稱為高頻之頻率包絡),並根據低頻之信號成分產生具有該高頻之頻率包絡之高頻之信號成分。
圖1表示作為輸入信號之解碼後之低頻之功率光譜與經推斷之高頻之頻率包絡之一例。
於圖1中,縱軸係以對數表示功率,橫軸表示頻率。
裝置根據與輸入信號相關之編碼方式之種類或採樣頻率、位元率等資訊(以下,稱為旁側資訊),決定高頻之信號成分之低頻端之頻帶(以下,稱為擴大開始頻帶)。其次,裝置將作為低頻之信號成分之輸入信號分割為複數個次頻帶信號。裝置求出分割後之複數個次頻帶信號,即,較擴大開始頻帶更低頻側(以下,簡稱為低頻側)之複數個次頻帶信號各自之功率之關於時間方向之每一群組之平均值(以下,稱為群組功率)。如圖1所示,裝置將低頻側之複數個次頻帶之信號各自之群組功率之平均值設為功率,且,以將擴大開始頻帶之下端之頻率設為頻率之點作為起點。裝置將通過該起點之特定斜度之一次直線推斷為較擴大開始頻帶更高頻側(以下,簡稱為高頻側)之頻率包絡。再者,關於起點之功率方向之位置可由使用者進行調整。裝置根據低頻側之複數個次頻帶之信號產生高頻側之複數個次頻帶之信號之各者,以使其成為經推斷之高頻側之頻率包絡。裝置將已產生之高頻側之複數個次頻帶之信號相 加而作為高頻之信號成分,進而,將低頻之信號成分相加而輸出。藉此,頻帶之擴大後之音樂信號成為更接近於本來之音樂信號者。因此,可再生更高音質之音樂信號。
上述專利文獻1之頻帶擴大方法具有如下優點:可對於各種高頻刪除編碼方法或各種位元率之編碼資料,擴大關於其編碼資料之解碼後之音樂信號的頻帶。
[先前技術文獻] [專利文獻]
[專利文獻1]日本專利特開2008-139844號公報
然而,專利文獻1之頻帶擴大方法於經推斷之高頻側之頻率包絡成為特定斜度之一次直線之方面,即,於頻率包絡之形狀成為固定之方面具有改善之餘地。
即,音樂信號之功率光譜具有各種形狀,根據音樂信號之種類,亦較多地存在大幅度偏離於藉由專利文獻1之頻帶擴大方法所推斷之高頻側之頻率包絡之情形。
圖2表示例如如較強地敲一次鼓時之在時間上伴隨急遽之變化的攻擊性之音樂信號(攻擊性音樂信號)之本來之功率光譜之一例。
再者,於圖2中,藉由專利文獻1之頻帶擴大方法將攻擊性音樂信號中之低頻側之信號成分作為輸入信號,且一併表示由該輸入信號推斷之高頻側之頻率包絡。
如圖2所示,攻擊性音樂信號之本來之高頻側之功率光 譜大致平坦。
相對於此,經推斷之高頻側之頻率包絡具有特定之負斜度,即便於起點處調節為接近於本來之功率光譜之功率,但隨著頻率變高,與本來之功率光譜之差亦會變大。
如此,於專利文獻1之頻帶擴大方法中,經推斷之高頻側之頻率包絡無法以高精度再現本來之高頻側之頻率包絡。其結果,若根據頻帶之擴大後之音樂信號產生聲音並將其輸出,則於聽覺上,有時會較原聲失去聲音之明瞭性。
又,於上述HE-AAC等高頻特徵編碼方法中,使用高頻側之頻率包絡作為所編碼之高頻之信號成分之特徵性資訊,但要求於解碼側以高精度再現本來之高頻側之頻率包絡。
本發明係鑒於此種情況而完成者,可藉由頻帶之擴大,而以更高音質再生音樂信號。
本發明之第1形態之信號處理裝置包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係 數表擴展;高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;以及高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號。
於上述擴展縮小部中,可藉由複製上述係數表中所包含之最高頻率之次頻帶之上述係數,且設為較上述最高頻率更高之頻率之次頻帶之上述係數,而使上述係數表擴展。
於上述擴展縮小部中,可藉由將相較於上述高頻次頻帶信號之次頻帶中之頻率最高之次頻帶更高之頻率之次頻帶之上述係數自上述係數表中刪除,而使上述係數表縮小。
本發明之第1形態之信號處理方法或程式包括如下步驟:將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;將上述低頻編碼資料解碼而產生低頻信號;於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數,而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;以及基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號。
於本發明之第1形態中,將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;將上述低頻編碼資料解碼而產生低頻信號;於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;以及基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號。
本發明之第2形態之信號處理裝置包括:次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之上述係數表與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;以及產生部,其產生包含用以獲得所選擇 之上述係數表之係數資訊的資料。
於上述擴展縮小部中,可藉由複製上述係數表中所包含之最高頻率之次頻帶之上述係數,且設為較上述最高頻率更高之頻率之次頻帶之上述係數,而使上述係數表擴展。
於上述擴展縮小部中,可藉由將相較於上述高頻次頻帶信號之次頻帶中之頻率最高之次頻帶更高之頻率之次頻帶之上述係數自上述係數表中刪除,而使上述係數表縮小。
本發明之第2形態之信號處理方法或程式包括如下步驟:產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於經擴展或縮小之上述係數表與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;以及產生包含用以獲得所選擇之上述係數表之係數資訊的資料。
於本發明之第2形態中,產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使 上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於經擴展或縮小之上述係數表與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;以及產生包含用以獲得所選擇之上述係數表之係數資訊的資料。
本發明之第3形態之解碼裝置包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;以及合成部,其合成上述低頻信號與上述高頻信號,而產生輸出信號。
本發明之第3形態之解碼方法包括如下步驟:將所輸入 之編碼資料非多工化為至少低頻編碼資料與係數資訊;將上述低頻編碼資料解碼而產生低頻信號;於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;以及合成上述低頻信號與上述高頻信號,而產生輸出信號。
於本發明之第3形態中,將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;將上述低頻編碼資料解碼而產生低頻信號;於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於構成上述低頻信號之各次頻帶之低頻次頻帶信號與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;以及合成上述低頻信號與上述高頻信號,而產生輸出信號。
本發明之第4形態之編碼裝置包括:次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之上述係數表與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;高頻編碼部,其對用以獲得所選擇之上述係數表之係數資訊進行編碼而產生高頻編碼資料;低頻編碼部,其對上述輸入信號之低頻信號進行編碼,並產生低頻編碼資料;以及多工化部,其將上述低頻編碼資料與上述高頻編碼資料多工化而產生輸出編碼串。
本發明之第4形態之編碼方法包括如下步驟:產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於經擴展或縮小之上述係數表與上述低頻 次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;對用以獲得所選擇之上述係數表之係數資訊進行編碼而產生高頻編碼資料;對上述輸入信號之低頻信號進行編碼,並產生低頻編碼資料;以及將上述低頻編碼資料與上述高頻編碼資料多工化而產生輸出編碼串。
於本發明之第4形態中,產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於經擴展或縮小之上述係數表與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;對用以獲得所選擇之上述係數表之係數資訊進行編碼而產生高頻編碼資料;對上述輸入信號之低頻信號進行編碼,並產生低頻編碼資料;以及將上述低頻編碼資料與上述高頻編碼資料多工化而產生輸出編碼串。
根據本發明之第1至第4形態,可藉由頻帶之擴大而以更高音質再生音樂信號。
以下,參照圖式對本發明之實施形態進行說明。再者,說明係按照以下順序進行。
1.第1實施形態(於頻帶擴大裝置中應用本發明之情形)
2.第2實施形態(於編碼裝置及解碼裝置中應用本發明之情形)
3.第3實施形態(於高頻編碼資料中包含係數索引之情形)
4.第4實施形態(於高頻編碼資料中包含係數索引與虛擬高頻次頻帶功率差分之情形)
5.第5實施形態(使用評價值選擇係數索引之情形)
6.第6實施形態(共用係數之一部分之情形)
7.第7實施形態(使係數表擴展或縮小之情形)
8.第8實施形態(使用條件不同之寬頻帶指導信號進行學習之情形)
<1. 第1實施形態>
於第1實施形態中,對藉由以高頻刪除編碼方法將編碼資料解碼而獲得之解碼後之低頻之信號成分實施使頻帶擴大之處理(以下,稱為頻帶擴大處理)。
[頻帶擴大裝置之功能性構成例]
圖3表示應用本發明之頻帶擴大裝置之功能性構成例。
頻帶擴大裝置10係將解碼後之低頻之信號成分作為輸入信號,對該輸入信號實施頻帶擴大處理,並將自其結果中 所獲得之頻帶擴大處理後之信號作為輸出信號而輸出。
頻帶擴大裝置10包括低通濾波器11、延遲電路12、帶通濾波器13、特徵值算出電路14、高頻次頻帶功率推斷電路15、高頻信號產生電路16、高通濾波器17、及信號加法器18。
低通濾波器11係以特定之截止頻率過濾輸入信號,作為過濾後之信號,並將低頻之信號成分即低頻信號成分供給至延遲電路12。
延遲電路12係為取得將來自低通濾波器11之低頻信號成分與下述高頻信號成分相加時之同步,而僅延遲固定之延遲時間將低頻信號成分供給至信號加法器18。
帶通濾波器13包含具有分別不同之通帶之帶通濾波器13-1至13-N。帶通濾波器13-i(1≦i≦N)使輸入信號中之特定之通帶之信號通過,且作為複數個次頻帶信號中之1個,供給至特徵值算出電路14及高頻信號產生電路16。
特徵值算出電路14使用來自帶通濾波器13之複數個次頻帶信號與輸入信號之至少任一者,算出1個或複數個特徵值,並將其供給至高頻次頻帶功率推斷電路15。此處,所謂特徵值,係輸入信號之表示作為信號之特徵之資訊。
高頻次頻帶功率推斷電路15基於來自特徵值算出電路14之1個或複數個特徵值,針對每一個高頻次頻帶算出高頻之次頻帶信號之功率即高頻次頻帶功率之推斷值,並將該等供給至高頻信號產生電路16。
高頻信號產生電路16基於來自帶通濾波器13之複數個次 頻帶信號、與來自高頻次頻帶功率推斷電路15之複數個高頻次頻帶功率之推斷值,產生高頻之信號成分即高頻信號成分,並將其供給至高通濾波器17。
高通濾波器17以與低通濾波器11中之截止頻率相對應之截止頻率而過濾來自高頻信號產生電路16之高頻信號成分,並將其供給至信號加法器18。
信號加法器18將來自延遲電路12之低頻信號成分與來自高通濾波器17之高頻信號成分相加,並作為輸出信號而輸出。
再者,於圖3之構成中,為取得次頻帶信號而應用帶通濾波器13,但並不限定於此,例如,亦可應用如專利文獻1中所記載之頻帶分割濾波器。
又,同樣地,於圖3之構成中,為合成次頻帶信號而應用信號加法器18,但並不限定於此,例如,亦可應用如專利文獻1中所記載之頻帶合成濾波器。
[頻帶擴大裝置之頻帶擴大處理]
其次,參照圖4之流程圖對圖3之頻帶擴大裝置之頻帶擴大處理進行說明。
於步驟S1中,低通濾波器11以特定之截止頻率而過濾輸入信號,並將作為過濾後之信號之低頻信號成分供給至延遲電路12。
低通濾波器11可設定任意之頻率作為截止頻率,但於本實施形態中,將特定之頻帶作為下述擴大開始頻帶,與該擴大開始頻帶之下端之頻率相對應而設定截止頻率。因 此,低通濾波器11將作為過濾後之信號之較擴大開始頻帶更低頻之信號成分即低頻信號成分供給至延遲電路12。
又,低通濾波器11亦可根據輸入信號之高頻刪除編碼方法或位元率等編碼參數,而將最適合之頻率設定為截止頻率。作為該編碼參數,例如,可利用專利文獻1之頻帶擴大方法中所採用之旁側資訊。
於步驟S2中,延遲電路12將來自低通濾波器11之低頻信號成分延遲固定之延遲時間而供給至信號加法器18。
於步驟S3中,帶通濾波器13(帶通濾波器13-1至13-N)將輸入信號分割為複數個次頻帶信號,並將分割後之複數個次頻帶信號之各者供給至特徵值算出電路14及高頻信號產生電路16。再者,關於帶通濾波器13之輸入信號之分割處理之詳細情況將於下文敘述。
於步驟S4中,特徵值算出電路14使用來自帶通濾波器13之複數個次頻帶信號與輸入信號之至少任一者,算出1個或複數個特徵值,並將其供給至高頻次頻帶功率推斷電路15。再者,關於特徵值算出電路14之特徵值之算出處理之詳細情況將於下文敘述。
於步驟S5中,高頻次頻帶功率推斷電路15基於來自特徵值算出電路14之1個或複數個特徵值,算出複數個高頻次頻帶功率之推斷值,並將其供給至高頻信號產生電路16。再者,關於高頻次頻帶功率推斷電路15之高頻次頻帶功率之推斷值之算出處理之詳細情況將於下文敘述。
於步驟S6中,高頻信號產生電路16基於來自帶通濾波器 13之複數個次頻帶信號、與來自高頻次頻帶功率推斷電路15之複數個高頻次頻帶功率之推斷值,而產生高頻信號成分,並將其供給至高通濾波器17。此處所謂之高頻信號成分,係較擴大開始頻帶更高頻之信號成分。再者,關於高頻信號產生電路16之高頻信號成分之產生處理之詳細情況將於下文敘述。
於步驟S7中,高通濾波器17藉由過濾來自高頻信號產生電路16之高頻信號成分,而將高頻信號成分中所包含之向低頻返回之成分等之雜訊去除,並將該高頻信號成分供給至信號加法器18。
於步驟S8中,信號加法器18將來自延遲電路12之低頻信號成分與來自高通濾波器17之高頻信號成分相加,並作為輸出信號而輸出。
根據以上處理,可相對於解碼後之低頻之信號成分使頻帶擴大。
其次,對圖4之流程圖之步驟S3至S6之各者之處理的詳細情況進行說明。
[帶通濾波器之處理之詳細情況]
首先,對圖4之流程圖之步驟S3中之帶通濾波器13之處理的詳細情況進行說明。
再者,為方便說明,於以下敘述中將帶通濾波器13之個數N設為N=4。
例如,將輸入信號之奈奎斯特(Nyquist)頻率分割為16等份,將藉此而獲得之16個次頻帶中之一個設為擴大開始頻 帶,並將該等16個次頻帶中之較擴大開始頻帶更低頻之4個次頻帶之各者分別設為帶通濾波器13-1至13-4之通帶。
圖5表示帶通濾波器13-1至13-4之各通帶各自之頻率軸上之配置。
如圖5所示,若將較擴大開始頻帶更低頻之頻帶(次頻帶)中之距高頻第1位之次頻帶之索引設為sb,將第2位之次頻帶之索引設為sb-1,將第I位之次頻帶之索引設為sb-(I-1),則帶通濾波器13-1至13-4分別將較擴大開始頻帶更低頻之次頻帶中之索引為sb至sb-3之次頻帶之各者作為通帶而分配。
再者,於本實施形態中,帶通濾波器13-1至13-4之通帶之各者係設為藉由對輸入信號之奈奎斯特頻率進行16等分而獲得之16個次頻帶中的特定之4個之各者,但並不限定於此,亦可為藉由對輸入信號之奈奎斯特頻率進行256等分而獲得之256個次頻帶中的特定之4個之各者。又,帶通濾波器13-1至13-4各自之頻寬亦可分別不同。
[特徵值算出電路之處理之詳細情況]
其次,對圖4之流程圖之步驟S4中之特徵值算出電路14之處理的詳細情況進行說明。
特徵值算出電路14使用來自帶通濾波器13之複數個次頻帶信號與輸入信號之至少任一者,算出高頻次頻帶功率推斷電路15為算出高頻次頻帶功率之推斷值而使用之1個或複數個特徵值。
更具體而言,特徵值算出電路14根據來自帶通濾波器13 之4個次頻帶信號,針對每一個次頻帶,將次頻帶信號之功率(次頻帶功率(以下,亦稱為低頻次頻帶功率))作為特徵值而算出,並將其供給至高頻次頻帶功率推斷電路15。
即,特徵值算出電路14根據自帶通濾波器13所供給之4個次頻帶信號x(ib,n),藉由以下式(1)求出某一特定時間訊框J中之低頻次頻帶功率power(ib,J)。此處,ib表示次頻帶之索引,n表示離散時間之索引。再者,將1個訊框之試樣數設為FSIZE,且功率係設為以分貝來表現。
如此,藉由特徵值算出電路14而求出之低頻次頻帶功率power(ib,J)係作為特徵值而供給至高頻次頻帶功率推斷電路15。
[高頻次頻帶功率推斷電路之處理之詳細情況]
其次,對圖4之流程圖之步驟S5中之高頻次頻帶功率推斷電路15之處理的詳細情況進行說明。
高頻次頻帶功率推斷電路15基於自特徵值算出電路14所供給之4個次頻帶功率,算出索引為sb+1之次頻帶(擴大開始頻帶)以後之欲擴大之頻帶(頻率擴大頻帶)之次頻帶功率(高頻次頻帶功率)之推斷值。
即,若將頻率擴大頻帶之最高頻之次頻帶之索引設為eb,則高頻次頻帶功率推斷電路15對於索引為sb+1至eb之 次頻帶,推斷(eb-sb)個次頻帶功率。
頻率擴大頻帶中之索引為ib之次頻帶功率之推斷值powerest (ib,J)係使用自特徵值算出電路14所供給之4個次頻帶功率power(ib,J),例如,藉由以下式(2)而表示。
此處,於式(2)中,係數Aib (kb)、Bib 係針對每一個次頻帶ib具有不同值之係數。係數Aib (kb)、Bib 係設為以對於各種輸入信號獲得較佳之值之方式而適當地設定之係數。又,係數Aib (kb)、Bib 亦根據次頻帶sb之變更而變更為最適合之值。再者,關於係數Aib (kb)、Bib 之導出將於下文敘述。
於式(2)中,高頻次頻帶功率之推斷值係藉由使用來自帶通濾波器13之複數個次頻帶信號各自之功率之1次線性結合而算出,但並不限定於此,例如,亦可使用時間訊框J之前後多個訊框之複數個低頻次頻帶功率之線性結合而算出,且亦可使用非線性之函數而算出。
如此,將藉由高頻次頻帶功率推斷電路15而算出之高頻次頻帶功率之推斷值供給至高頻信號產生電路16。
[高頻信號產生電路之處理之詳細情況]
其次,對圖4之流程圖之步驟S6中之高頻信號產生電路 16之處理的詳細情況進行說明。
高頻信號產生電路16根據自帶通濾波器13所供給之複數個次頻帶信號,基於上述式(1)算出各個次頻帶之低頻次頻帶功率power(ib,J)。高頻信號產生電路16使用經算出之複數個低頻次頻帶功率power(ib,J)與藉由高頻次頻帶功率推斷電路15並基於上述式(2)所算出之高頻次頻帶功率之推斷值powerest (ib,J),藉由以下式(3)求出增益量G(ib,J)。
此處,於式(3)中,sbmap (ib)表示將次頻帶ib設為映射對象之次頻帶之情形的映射來源之次頻帶之索引,且由以下式(4)表示。
再者,於式(4)中,INT(a)為將值a之小數點以後捨去之函數。
其次,高頻信號產生電路16利用以下式(5),使藉由式(3)所求出之增益量G(ib,J)乘以帶通濾波器13之輸出,藉此算出增益調整後之次頻帶信號x2(ib,n)。
[數5]
進而,高頻信號產生電路16藉由以下式(6),自與索引為sb-3之次頻帶之下端之頻率相對應的頻率起向與索引為sb之次頻帶之上端之頻率相對應的頻率進行餘弦(cosine)調變,藉此根據增益調整後之次頻帶信號x2(ib,n)算出經餘弦轉換之增益調整後之次頻帶信號x3(ib,n)。
再者,於式(6)中,π表示圓周率。該式(6)係指增益調整後之次頻帶信號x2(ib,n)分別偏移為4個頻帶之高頻側之頻率。
繼而,高頻信號產生電路16藉由以下式(7),根據偏移至高頻側之增益調整後之次頻帶信號x3(ib,n)算出高頻信號成分xhigh (n)。
如此,藉由高頻信號產生電路16,根據基於來自帶通濾波器13之4個次頻帶信號而算出之4個低頻次頻帶功率、及來自高頻次頻帶功率推斷電路15之高頻次頻帶功率之推斷值,而產生高頻信號成分,並將其供給至高通濾波器17。
根據以上處理,對於藉由高頻刪除編碼方法之編碼資料之解碼後所獲得之輸入信號,將根據複數個次頻帶信號所算出之低頻次頻帶功率設為特徵值,並基於該特徵值與適當地加以設定之係數,算出高頻次頻帶功率之推斷值,根據低頻次頻帶功率與高頻次頻帶功率之推斷值適應性地產生高頻信號成分,故而能夠以高精度推斷頻率擴大頻帶之次頻帶功率,且能夠以更高音質再生音樂信號。
於以上敘述中,對特徵值算出電路14僅將根據複數個次頻帶信號所算出之低頻次頻帶功率作為特徵值而算出之例進行了說明,但於此情形時,有時會根據輸入信號之種類而無法以高精度推斷頻率擴大頻帶之次頻帶功率。
因此,特徵值算出電路14亦可藉由算出與頻率擴大頻帶之次頻帶功率之方式(高頻之功率光譜之形狀)相關之較強之特徵值,而以更高精度進行高頻次頻帶功率推斷電路15中之頻率擴大頻帶之次頻帶功率之推斷。
[藉由特徵值算出電路而算出之特徵值之另一例]
圖6表示於某一輸入信號中,如聲樂佔據其大部分之區間即聲樂區間之頻率特性之一例,以及藉由僅將低頻次頻帶功率作為特徵值而算出並推斷高頻次頻帶功率而獲得之高頻之功率光譜。
如圖6所示,於聲樂區間之頻率特性中,較多存在所推斷之高頻之功率光譜位於較原信號之高頻之功率光譜更上之位置之情形。由於人的耳朵易於感覺到人的歌聲之不適感,故而必需於聲樂區間內尤其精度良好地進行高頻次頻 帶功率之推斷。
又,如圖6所示,於聲樂區間之頻率特性方面,較多存在於4.9kHz至11.025kHz之間具有1個較大之凹部之情形。
因此,以下對應用頻率區域內之4.9kHz至11.025kHz中之凹部之程度作為聲樂區間之高頻次頻帶功率之推斷中所使用的特徵值之例進行說明。再者,以下將表示該凹部之程度之特徵值稱為浸入。
以下,對時間訊框J中之浸入dip(J)之算出例進行說明。
首先,對輸入信號中之包含時間訊框J之前後多個訊框之範圍中所包含的2048個試樣區間之信號實施2048點FFT(Fast Fourier Transform,快速傅裏葉轉換),並算出頻率軸上之係數。藉由對所算出之各係數之絕對值實施db(decibel,分貝)轉換而獲得功率光譜。
圖7表示如上所述而獲得之功率光譜之一例。此處,為將功率光譜之微細之成分去除,而例如進行波濾處理以將1.3kHz以下之成分去除。根據波濾處理,藉由將功率光譜之各次元看作時間序列,並施加於低通濾波器而進行過濾處理,藉此可使光譜峰值之微細之成分平滑化。
圖8表示波濾後之輸入信號之功率光譜之一例。於圖8中所示之波濾後之功率光譜中,將相當於4.9kHz至11.025kHz之範圍中所包含之功率光譜之最小值與最大值之差設為浸入dip(J)。
如此,算出與頻率擴大頻帶之次頻帶功率相關之較強之 特徵值。再者,浸入dip(J)之算出例並不限定於上述方法,亦可為其他方法。
其次,對與頻率擴大頻帶之次頻帶功率相關之較強之特徵值之其他算出例進行說明。
[藉由特徵值算出電路而算出之特徵值之又一例]
對於某一輸入信號,於包含攻擊性音樂信號之區間即攻擊區間之頻率特性中,如參照圖2所說明般較多存在高頻側之功率光譜大致平坦之情形。於僅將低頻次頻帶功率作為特徵值而算出之方法中,由於不使用表示包含攻擊區間之輸入信號特有之時間變動之特徵值而推斷頻率擴大頻帶之次頻帶功率,故而難以精度良好地推斷被視為攻擊區間之大致平坦之頻率擴大頻帶之次頻帶功率。
因此,以下,對應用低頻次頻帶功率之時間變動作為攻擊區間之高頻次頻帶功率之推斷中所使用的特徵值之例進行說明。
某一時間訊框J中之低頻次頻帶功率之時間變動powerd (J)係例如藉由以下式(8)而求出。
根據式(8),低頻次頻帶功率之時間變動powerd (J)表示時間訊框J中之4個低頻次頻帶功率之和與時間訊框J之前 一個訊框之時間訊框(J-1)中之4個低頻次頻帶功率之和的比,且該值越大,則訊框間之功率之時間變動越大,即,認為包含於時間訊框J之信號之攻擊性越強。
又,若將圖1中所示之統計之平均功率光譜與圖2中所示之攻擊區間(攻擊性音樂信號)之功率光譜進行比較,則攻擊區間之功率光譜於中波段呈向右上升。於攻擊區間內,較多存在表示此種頻率特性之情形。
因此,以下,對應用上述中波段中之傾斜作為攻擊區間之高頻次頻帶功率之推斷中所使用的特徵值之例進行說明。
某一時間訊框J中之中波段之傾斜slope(J)係例如藉由以下式(9)而求出。
於式(9)中,係數w(ib)為以對高頻次頻帶功率進行加權之方式而調整之加權係數。根據式(9),slope(J)表示對高頻進行加權後之4個低頻次頻帶功率之和與4個低頻次頻帶功率之和的比。例如,於4個低頻次頻帶功率變成相對於中波段之次頻帶之功率之情形時,slope(J)於中波段之功率光譜向右上升時取較大之值,於向右下降時取較小之值。
又,由於較多存在中波段之傾斜於攻擊區間之前後產生較大變動之情形,故而亦可將以以下式(10)所表示之傾斜之時間變動sloped (J)設為攻擊區間之高頻次頻帶功率之推斷中所使用的特徵值。
又,同樣地,亦可將由以下式(11)所表示之上述浸入dip(J)之時間變動dipd (J)設為攻擊區間之高頻次頻帶功率之推斷中所使用的特徵值。
根據以上方法,由於算出與頻率擴大頻帶之次頻帶功率相關之較強之特徵值,故而藉由使用該等,而能夠以更高精度進行高頻次頻帶功率推斷電路15中之頻率擴大頻帶之次頻帶功率之推斷。
於以上敘述中,對算出與頻率擴大頻帶之次頻帶功率相關之較強之特徵值之例進行了說明,以下,對使用如此所算出之特徵值來推斷高頻次頻帶功率之例進行說明。
[高頻次頻帶功率推斷電路之處理之詳細情況]
此處,對將參照圖8而說明之浸入與低頻次頻帶功率用作特徵值而推斷高頻次頻帶功率之例進行說明。
即,於圖4之流程圖之步驟S4中,特徵值算出電路14根據來自帶通濾波器13之4個次頻帶信號,針對每一個次頻帶,算出低頻次頻帶功率與浸入作為特徵值,並將其供給至高頻次頻帶功率推斷電路15。
繼而,於步驟S5中,高頻次頻帶功率推斷電路15基於來自特徵值算出電路14之4個低頻次頻帶功率及浸入,算出高頻次頻帶功率之推斷值。
此處,由於次頻帶功率與浸入中可取之值之範圍(尺度)不同,故而高頻次頻帶功率推斷電路15對浸入之值例如進行如下轉換。
高頻次頻帶功率推斷電路15預先對於大量之數量之輸入信號算出4個低頻次頻帶功率中之最高頻之次頻帶功率與浸入之值,並針對各者求出平均值與標準偏差。此處,將次頻帶功率之平均值設為powerave ,將次頻帶功率之標準偏差設為powerstd ,將浸入之平均值設為dipave ,將浸入之標準偏差設為dipstd
高頻次頻帶功率推斷電路15使用該等值,如以下式(12)所示般轉換浸入之值dip(J),而獲得轉換後之浸入dips (J)。
藉由進行式(12)中所示之轉換,而高頻次頻帶功率推斷電路15可將浸入之值dip(J)轉換為與統計之低頻次頻帶功率之平均值與方差相等之變數(浸入)dips (J),且可使浸入 可取之值之範圍與次頻帶功率可取之值之範圍大致相同。
頻率擴大頻帶中之索引為ib之次頻帶功率之推斷值powerest (ib,J)係使用來自特徵值算出電路14之4個低頻次頻帶功率power(ib,J)與式(12)中所示之浸入dips (J)之線性結合,而例如藉由以下式(13)而表示。
此處,於式(13)中,係數Cib (kb)、Dib 、Eib 係針對每一個次頻帶ib具有不同之值之係數。係數Cib (kb)、Dib 、Eib 係設為以可對各種輸入信號取得較佳之值之方式而適當地加以設定之係數。又,根據次頻帶sb之變更,係數Cib (kb)、Dib 、Eib 亦變更為最適合之值。再者,關於係數Cib (kb)、Dib 、Eib 之導出將於下文敘述。
於式(13)中,高頻次頻帶功率之推斷值係藉由1次線性結合而算出,但並不限定於此,例如,亦可使用時間訊框J之前後多個訊框之複數個特徵值之線性結合而算出,且亦可使用非線性之函數而算出。
根據以上處理,於高頻次頻帶功率之推斷中,藉由將聲樂區間特有之浸入之值用作特徵值,而與僅將低頻次頻帶功率作為特徵值之情形相比,可提高聲樂區間中之高頻次頻帶功率之推斷精度,且利用僅將低頻次頻帶功率作為特 徵值之方法,可降低因推斷為高頻之功率光譜大於原信號之高頻功率光譜而產生之易於被人的耳朵感覺到之不適感,故而能夠以更高音質再生音樂信號。
然而,關於在上述所說明之方法中作為特徵值而算出之浸入(聲樂區間之頻率特性中之凹部之程度),於次頻帶之分割數為16之情形時,頻率解析度較低,故而僅以低頻次頻帶功率難以表現該凹部之程度。
因此,藉由增加次頻帶之分割數(例如分割為16倍之256個),增加帶通濾波器13之頻帶分割數(例如16倍之64個),以及增加由特徵值算出電路14而算出之低頻次頻帶功率之數量(例如16倍之64個),從而可提高頻率解析度,且可僅以低頻次頻帶功率表現凹部之程度。
藉此,認為僅以低頻次頻帶功率而能夠以與將上述浸入用作特徵值之高頻次頻帶功率之推斷大致同等之精度來推斷高頻次頻帶功率。
然而,因增加次頻帶之分割數、頻帶分割數、及低頻次頻帶功率之數量而使計算量增加。若考慮任一種方法均能夠以同等之精度推斷高頻次頻帶功率,則認為不增加次頻帶之分割數,而將浸入用作特徵值來推斷高頻次頻帶功率之方法於計算量方面效率更高。
於以上敘述中,對使用浸入與低頻次頻帶功率推斷高頻次頻帶功率之方法進行了說明,但作為高頻次頻帶功率之推斷中所使用之特徵值,並不限定於該組合,亦可使用上述所說明之特徵值(低頻次頻帶功率、浸入、低頻次頻帶 功率之時間變動、傾斜、傾斜之時間變動、及浸入之時間變動)中之1個或複數個。藉此,於高頻次頻帶功率之推斷中,可進一步提高精度。
又,如上述所說明般,於輸入信號中,藉由將難以推斷高頻次頻帶功率之區間所特有之參數用作高頻次頻帶功率之推斷中所使用之特徵值,而可提高該區間之推斷精度。例如,低頻次頻帶功率之時間變動、傾斜、傾斜之時間變動、及浸入之時間變動為攻擊區間所特有之參數,藉由將該等參數用作特徵值,而可提高攻擊區間之高頻次頻帶功率之推斷精度。
再者,關於使用低頻次頻帶功率與浸入以外之特徵值,即,低頻次頻帶功率之時間變動、傾斜、傾斜之時間變動、及浸入之時間變動進行高頻次頻帶功率之推斷之情形,亦可利用與上述所說明之方法相同之方法推斷高頻次頻帶功率。
再者,此處所示之特徵值之各者之算出方法並不限定於上述所說明之方法,亦可使用其他方法。
[係數Cib (kb)、Dib 、Eib 之求出方法]
其次,對上述式(13)中之係數Cib (kb)、Dib 、Eib 之求出方法進行說明。
作為係數Cib (kb)、Dib 、Eib 之求出方法,為了使係數Cib (kb)、Dib 、Eib 為於推斷頻率擴大頻帶之次頻帶功率之方面對於各種輸入信號均較佳之值,而應用預先藉由寬頻帶之指導信號(以下,稱為寬頻帶指導信號)進行學習,基 於其學習結果來決定之方法。
於進行係數Cib (kb)、Dib 、Eib 之學習時,於較擴大開始頻帶更高頻,應用配置有具有與參照圖5而說明之帶通濾波器13-1至13-4相同之通帶寬度之帶通濾波器的係數學習裝置。係數學習裝置係若輸入寬頻帶指導信號則進行學習。
[係數學習裝置之功能性構成例]
圖9表示進行係數Cib (kb)、Dib 、Eib 之學習之係數學習裝置之功能性構成例。
若輸入至圖9之係數學習裝置20之寬頻帶指導信號之較擴大開始頻帶更低頻之信號成分,為以與編碼時所實施之編碼方式相同之方式對輸入至圖3之頻帶擴大裝置10之頻帶受到限制之輸入信號進行編碼後之信號,則較佳。
係數學習裝置20包括帶通濾波器21、高頻次頻帶功率算出電路22、特徵值算出電路23、及係數推斷電路24。
帶通濾波器21包含具有分別不同之通帶的帶通濾波器21-1至21-(K+N)。帶通濾波器21-i(1≦i≦K+N)使輸入信號中之特定之通帶之信號通過,並作為複數個次頻帶信號中之1個而供給至高頻次頻帶功率算出電路22或特徵值算出電路23。再者,帶通濾波器21-1至21-(K+N)中之帶通濾波器21-1至21-K使較擴大開始頻帶更高頻之信號通過。
高頻次頻帶功率算出電路22對來自帶通濾波器21之高頻之複數個次頻帶信號,針對某一固定之時間訊框之每一個,算出每一個次頻帶之高頻次頻帶功率,並將其供給至 係數推斷電路24。
特徵值算出電路23針對每一個與藉由高頻次頻帶功率算出電路22而算出高頻次頻帶功率之固定之時間訊框相同之時間訊框,算出與藉由圖3之頻帶擴大裝置10之特徵值算出電路14所算出之特徵值相同之特徵值。即,特徵值算出電路23使用來自帶通濾波器21之複數個次頻帶信號與寬頻帶指導信號之至少任一者,算出1個或複數個特徵值,並將其供給至係數推斷電路24。
係數推斷電路24基於每一個固定之時間訊框之來自高頻次頻帶功率算出電路22之高頻次頻帶功率、與來自特徵值算出電路23之特徵值,推斷圖3之頻帶擴大裝置10之高頻次頻帶功率推斷電路15中所使用之係數(係數資料)。
[係數學習裝置之係數學習處理]
其次,參照圖10之流程圖對圖9之係數學習裝置之係數學習處理進行說明。
於步驟S11中,帶通濾波器21將輸入信號(寬頻帶指導信號)分割為(K+N)個次頻帶信號。帶通濾波器21-1至21-K將較擴大開始頻帶更高頻之複數個次頻帶信號供給至高頻次頻帶功率算出電路22。又,帶通濾波器21-(K+1)至21-(K+N)將較擴大開始頻帶更低頻之複數個次頻帶信號供給至特徵值算出電路23。
於步驟S12中,高頻次頻帶功率算出電路22對來自帶通濾波器21(帶通濾波器21-1至21-K)之高頻之複數個次頻帶信號,針對某一固定之時間訊框之每一個,算出每一個次 頻帶之高頻次頻帶功率power(ib,J)。高頻次頻帶功率power(ib,J)係藉由上述式(1)而求出。高頻次頻帶功率算出電路22將經算出之高頻次頻帶功率供給至係數推斷電路24。
於步驟S13中,特徵值算出電路23針對每一個與藉由高頻次頻帶功率算出電路22而算出高頻次頻帶功率之固定之時間訊框相同之時間訊框,算出特徵值。
再者,以下,假定於圖3之頻帶擴大裝置10之特徵值算出電路14中,將低頻之4個次頻帶功率與浸入作為特徵值而算出,於係數學習裝置20之特徵值算出電路23中亦同樣地,作為算出低頻之4個次頻帶功率與浸入者而進行說明。
即,特徵值算出電路23使用來自帶通濾波器21(帶通濾波器21-(K+1)至21-(K+4))之分別與輸入至頻帶擴大裝置10之特徵值算出電路14之4個次頻帶信號相同的頻帶之4個次頻帶信號,算出4個低頻次頻帶功率。又,特徵值算出電路23根據寬頻帶指導信號算出浸入,並基於上述式(12)算出浸入dips (J)。特徵值算出電路23將經算出之4個低頻次頻帶功率與浸入dips (J)作為特徵值而供給至係數推斷電路24。
於步驟S14中,係數推斷電路24基於自高頻次頻帶功率算出電路22與特徵值算出電路23供給至同一時間訊框之(eb-sb)個高頻次頻帶功率與特徵值(4個低頻次頻帶功率及浸入dips (J))之多個組合,進行係數Cib (kb)、Dib 、Eib 之推 斷。例如,係數推斷電路24對於某一高頻之次頻帶之1個,將5個特徵值(4個低頻次頻帶功率及浸入dips (J))設為說明變數,將高頻次頻帶功率之power(ib,J)設為被說明變數,進行使用最小平方法之回歸分析,藉此決定式(13)中之係數Cib (kb)、Dib 、Eib
再者,當然係數Cib (kb)、Dib 、Eib 之推斷方法並不限定於上述方法,亦可應用一般之各種參數鑑定法。
根據以上處理,由於預先使用寬頻帶指導信號,進行高頻次頻帶功率之推斷中所使用之係數之學習,故而可獲得對輸入至頻帶擴大裝置10之各種輸入信號較佳之輸出結果,進而,能夠以更高音質再生音樂信號。
再者,上述式(2)中之係數Aib (kb)、Bib 亦可藉由上述係數學習方法而求出。
於以上敘述中,對在頻帶擴大裝置10之高頻次頻帶功率推斷電路15中,以高頻次頻帶功率之推斷值之各者係藉由4個低頻次頻帶功率與浸入之線性結合而算出作為前提之係數學習處理進行了說明。然而,高頻次頻帶功率推斷電路15中之高頻次頻帶功率之推斷方法並不限定於上述之例,例如,亦可藉由特徵值算出電路14算出浸入以外之特徵值(低頻次頻帶功率之時間變動、傾斜、傾斜之時間變動、及浸入之時間變動)中之1個或複數個,而算出高頻次頻帶功率,且亦可使用時間訊框J之前後複數個訊框之複數個特徵值之線性結合,或使用非線性之函數。即,於係數學習處理中,只要係數推斷電路24可在與關於藉由頻帶 擴大裝置10之高頻次頻帶功率推斷電路15算出高頻次頻帶功率時所使用之特徵值、時間訊框、及函數之條件相同之條件下算出(學習)係數即可。
<2. 第2實施形態>
於第2實施形態中,藉由編碼裝置及解碼裝置實施高頻特徵編碼方法中之編碼處理及解碼處理。
[編碼裝置之功能性構成例]
圖11表示應用本發明之編碼裝置之功能性構成例。
編碼裝置30包括低通濾波器31、低頻編碼電路32、次頻帶分割電路33、特徵值算出電路34、虛擬高頻次頻帶功率算出電路35、虛擬高頻次頻帶功率差分算出電路36、高頻編碼電路37、多工化電路38、及低頻解碼電路39。
低通濾波器31以特定之截止頻率過濾輸入信號,作為過濾後之信號,並將較截止頻率更低頻之信號(以下,稱為低頻信號)供給至低頻編碼電路32、次頻帶分割電路33、及特徵值算出電路34。
低頻編碼電路32對來自低通濾波器31之低頻信號進行編碼,並將自其結果中所獲得之低頻編碼資料供給至多工化電路38及低頻解碼電路39。
次頻帶分割電路33將輸入信號及來自低通濾波器31之低頻信號等分割為具有特定之頻寬之複數個次頻帶信號,並將其供給至特徵值算出電路34或虛擬高頻次頻帶功率差分算出電路36。更具體而言,次頻帶分割電路33將輸入低頻信號而獲得之複數個次頻帶信號(以下,稱為低頻次頻帶 信號)供給至特徵值算出電路34。又,次頻帶分割電路33將輸入輸入信號而獲得之複數個次頻帶信號中之較以低通濾波器31所設定之截止頻率更高頻之次頻帶信號(以下,稱為高頻次頻帶信號)供給至虛擬高頻次頻帶功率差分算出電路36。
特徵值算出電路34使用來自次頻帶分割電路33之低頻次頻帶信號中之複數個次頻帶信號、與來自低通濾波器31之低頻信號之至少任一者,算出1個或複數個特徵值,並將其供給至虛擬高頻次頻帶功率算出電路35。
虛擬高頻次頻帶功率算出電路35基於來自特徵值算出電路34之1個或複數個特徵值,產生虛擬高頻次頻帶功率,並將其供給至虛擬高頻次頻帶功率差分算出電路36。
虛擬高頻次頻帶功率差分算出電路36基於來自次頻帶分割電路33之高頻次頻帶信號、與來自虛擬高頻次頻帶功率算出電路35之虛擬高頻次頻帶功率,計算下述虛擬高頻次頻帶功率差分,並將其供給至高頻編碼電路37。
高頻編碼電路37對來自虛擬高頻次頻帶功率差分算出電路36之虛擬高頻次頻帶功率差分進行編碼,並將自其結果中所獲得之高頻編碼資料供給至多工化電路38。
多工化電路38將來自低頻編碼電路32之低頻編碼資料、與來自高頻編碼電路37之高頻編碼資料多工化,並作為輸出編碼串而輸出。
低頻解碼電路39將來自低頻編碼電路32之低頻編碼資料適當解碼,並將自其結果中所獲得之解碼資料供給至次頻 帶分割電路33及特徵值算出電路34。
[編碼裝置之編碼處理]
其次,參照圖12之流程圖對圖11之編碼裝置30之編碼處理進行說明。
於步驟S111中,低通濾波器31以特定之截止頻率過濾輸入信號,並將作為過濾後之信號之低頻信號供給至低頻編碼電路32、次頻帶分割電路33、及特徵值算出電路34。
於步驟S112中,低頻編碼電路32對來自低通濾波器31之低頻信號進行編碼,並將自其結果中所獲得之低頻編碼資料供給至多工化電路38。
再者,關於步驟S112中之低頻信號之編碼,只要根據編碼效率或所要求之電路規模選擇適當之編碼方式即可,本發明並不依賴於該編碼方式。
於步驟S113中,次頻帶分割電路33將輸入信號及低頻信號等分割為具有特定之頻寬之複數個次頻帶信號。次頻帶分割電路33將輸入低頻信號而獲得之低頻次頻帶信號供給至特徵值算出電路34。又,次頻帶分割電路33將輸入輸入信號而獲得之複數個次頻帶信號中,以低通濾波器31所設定之高於頻帶限制之頻率的頻帶之高頻次頻帶信號供給至虛擬高頻次頻帶功率差分算出電路36。
於步驟S114中,特徵值算出電路34使用來自次頻帶分割電路33之低頻次頻帶信號中之複數個次頻帶信號、與來自低通濾波器31之低頻信號之至少任一者,算出1個或複數個特徵值,並將其供給至虛擬高頻次頻帶功率算出電路 35。再者,圖11之特徵值算出電路34具有與圖3之特徵值算出電路14基本相同之構成及功能,且步驟S114中之處理與圖4之流程圖之步驟S4中之處理基本相同,因此省略其詳細之說明。
於步驟S115中,虛擬高頻次頻帶功率算出電路35基於來自特徵值算出電路34之1個或複數個特徵值,產生虛擬高頻次頻帶功率,並將其供給至虛擬高頻次頻帶功率差分算出電路36。再者,圖11之虛擬高頻次頻帶功率算出電路35具有與圖3之高頻次頻帶功率推斷電路15基本相同之構成及功能,且步驟S115中之處理與圖4之流程圖之步驟S5中之處理基本相同,因此省略其詳細之說明。
於步驟S116中,虛擬高頻次頻帶功率差分算出電路36基於來自次頻帶分割電路33之高頻次頻帶信號、與來自虛擬高頻次頻帶功率算出電路35之虛擬高頻次頻帶功率,計算虛擬高頻次頻帶功率差分,並將其供給至高頻編碼電路37。
更具體而言,虛擬高頻次頻帶功率差分算出電路36對於來自次頻帶分割電路33之高頻次頻帶信號,算出某一固定之時間訊框J中之(高頻)次頻帶功率power(ib,J)。再者,於本實施形態中,使用索引ib識別低頻次頻帶信號之次頻帶與高頻次頻帶信號之次頻帶之全部。次頻帶功率之算出方法可應用與第1實施形態相同之方法,即,使用式(1)之方法。
其次,虛擬高頻次頻帶功率差分算出電路36求出高頻次 頻帶功率power(ib,J)、與時間訊框J中之來自虛擬高頻次頻帶功率算出電路35之虛擬高頻次頻帶功率powerlh (ib,J)之差分(虛擬高頻次頻帶功率差分)powerdiff (ib,J)。虛擬高頻次頻帶功率差分powerdiff (ib,J)係藉由以下式(14)而求出。
於式(14)中,索引sb+1表示高頻次頻帶信號中之最低頻之次頻帶之索引。又,索引eb表示於高頻次頻帶信號中所編碼之最高頻之次頻帶之索引。
如此,將藉由虛擬高頻次頻帶功率差分算出電路36而算出之虛擬高頻次頻帶功率差分供給至高頻編碼電路37。
於步驟S117中,高頻編碼電路37對來自虛擬高頻次頻帶功率差分算出電路36之虛擬高頻次頻帶功率差分進行編碼,並將自其結果中所獲得之高頻編碼資料供給至多工化電路38。
更具體而言,高頻編碼電路37決定將來自虛擬高頻次頻帶功率差分算出電路36之虛擬高頻次頻帶功率差分向量化而成者(以下,稱為虛擬高頻次頻帶功率差分向量)屬於預先所設定之虛擬高頻次頻帶功率差分之特徵空間內之複數個集群中的哪一個集群。此處,某一時間訊框J中之虛擬高頻次頻帶功率差分向量,表示將每一個索引ib之虛擬高 頻次頻帶功率差分powerdiff (ib,J)之值作為向量之各要素而具有之(eb-sb)次元之向量。又,虛擬高頻次頻帶功率差分之特徵空間亦同樣地成為(eb-sb)次元之空間。
繼而,高頻編碼電路37於虛擬高頻次頻帶功率差分之特徵空間內,測定預先所設定之複數個群集之各代表向量與虛擬高頻次頻帶功率差分向量之距離,並求出距離最短之群集之索引(以下,稱為虛擬高頻次頻帶功率差分ID(Identification,標識符)),將其作為高頻編碼資料而供給至多工化電路38。
於步驟S118中,多工化電路38將自低頻編碼電路32所輸出之低頻編碼資料、與自高頻編碼電路37所輸出之高頻編碼資料多工化,並將輸出編碼串輸出。
然而,作為高頻特徵編碼方法中之編碼裝置,於日本專利特開2007-17908號公報中揭示有如下技術:根據低頻次頻帶信號產生虛擬高頻次頻帶信號,且針對每一個次頻帶比較虛擬高頻次頻帶信號與高頻次頻帶信號之功率,為使虛擬高頻次頻帶信號之功率與高頻次頻帶信號之功率一致而算出每一個次頻帶之功率之增益,並將其作為高頻特徵之資訊而包含於編碼串。
另一方面,根據以上處理,作為用以於解碼時推斷高頻次頻帶功率之資訊,只要於輸出編碼串中僅包含虛擬高頻次頻帶功率差分ID即可。即,例如,於預先設定之群集之數量為64之情形時,作為用以於解碼裝置中將高頻信號解碼之資訊,只要針對每一個時間訊框,對編碼串追加6位 元之資訊即可,與日本專利特開2007-17908號公報中所揭示之方法相比,可減少包含於編碼串中之資訊量,故而可使編碼效率進一步提高,進而,能夠以更高音質再生音樂信號。
又,於以上處理中,若計算量充裕,則亦可將藉由低頻解碼電路39將來自低頻編碼電路32之低頻編碼資料解碼而獲得之低頻信號向次頻帶分割電路33及特徵值算出電路34輸入。於解碼裝置之解碼處理中,根據將低頻編碼資料解碼所得之低頻信號算出特徵值,並基於該特徵值推斷高頻次頻帶之功率。因此,於編碼處理中,使基於根據已解碼之低頻信號算出之特徵值而算出之虛擬高頻次頻帶功率差分ID包含於編碼串之方法於解碼裝置之解碼處理中,亦可精度更好地推斷高頻次頻帶功率。因此,能夠以更高音質再生音樂信號。
[解碼裝置之功能性構成例]
其次,參照圖13對與圖11之編碼裝置30相對應之解碼裝置之功能性構成例進行說明。
解碼裝置40包括非多工化電路41、低頻解碼電路42、次頻帶分割電路43、特徵值算出電路44、高頻解碼電路45、解碼高頻次頻帶功率算出電路46、解碼高頻信號產生電路47、及合成電路48。
非多工化電路41將輸入編碼串非多工化為高頻編碼資料與低頻編碼資料,並將低頻編碼資料供給至低頻解碼電路42,將高頻編碼資料供給至高頻解碼電路45。
低頻解碼電路42進行來自非多工化電路41之低頻編碼資料之解碼。低頻解碼電路42將自解碼之結果中所獲得之低頻之信號(以下,稱為解碼低頻信號)供給至次頻帶分割電路43、特徵值算出電路44、及合成電路48。
次頻帶分割電路43將來自低頻解碼電路42之解碼低頻信號等分割為具有特定之頻寬之複數個次頻帶信號,並將所獲得之次頻帶信號(解碼低頻次頻帶信號)供給至特徵值算出電路44及解碼高頻信號產生電路47。
特徵值算出電路44使用來自次頻帶分割電路43之解碼低頻次頻帶信號中之複數個次頻帶信號、與來自低頻解碼電路42之解碼低頻信號之至少任一者,算出1個或複數個特徵值,並將其供給至解碼高頻次頻帶功率算出電路46。
高頻解碼電路45進行來自非多工化電路41之高頻編碼資料之解碼,且使用自其結果中所獲得之虛擬高頻次頻帶功率差分ID,將預先針對每一個ID(索引)而準備之用以推斷高頻次頻帶之功率之係數(以下,稱為解碼高頻次頻帶功率推斷係數)供給至解碼高頻次頻帶功率算出電路46。
解碼高頻次頻帶功率算出電路46基於來自特徵值算出電路44之1個或複數個特徵值、與來自高頻解碼電路45之解碼高頻次頻帶功率推斷係數,算出解碼高頻次頻帶功率,並將其供給至解碼高頻信號產生電路47。
解碼高頻信號產生電路47基於來自次頻帶分割電路43之解碼低頻次頻帶信號、與來自解碼高頻次頻帶功率算出電路46之解碼高頻次頻帶功率,產生解碼高頻信號,並將其 供給至合成電路48。
合成電路48合成來自低頻解碼電路42之解碼低頻信號、與來自解碼高頻信號產生電路47之解碼高頻信號,並作為輸出信號而輸出。
[解碼裝置之解碼處理]
其次,參照圖14之流程圖對圖13之解碼裝置之解碼處理進行說明。
於步驟S131中,非多工化電路41將輸入編碼串非多工化為高頻編碼資料與低頻編碼資料,並將低頻編碼資料供給至低頻解碼電路42,將高頻編碼資料供給至高頻解碼電路45。
於步驟S132中,低頻解碼電路42進行來自非多工化電路41之低頻編碼資料之解碼,並將自其結果中所獲得之解碼低頻信號供給至次頻帶分割電路43、特徵值算出電路44、及合成電路48。
於步驟S133中,次頻帶分割電路43將來自低頻解碼電路42之解碼低頻信號等分割為具有特定之頻寬之複數個次頻帶信號,並將所獲得之解碼低頻次頻帶信號供給至特徵值算出電路44及解碼高頻信號產生電路47。
於步驟S134中,特徵值算出電路44根據來自次頻帶分割電路43之解碼低頻次頻帶信號中之複數個次頻帶信號、與來自低頻解碼電路42之解碼低頻信號之至少任一者,算出1個或複數個特徵值,並將其供給至解碼高頻次頻帶功率算出電路46。再者,圖13之特徵值算出電路44具有與圖3 之特徵值算出電路14基本相同之構成及功能,且步驟S134中之處理與圖4之流程圖之步驟S4中之處理基本相同,故而省略其詳細之說明。
於步驟S135中,高頻解碼電路45進行來自非多工化電路41之高頻編碼資料之解碼,且使用自其結果中所獲得之虛擬高頻次頻帶功率差分ID,將預先針對每一個ID(索引)而準備之解碼高頻次頻帶功率推斷係數供給至解碼高頻次頻帶功率算出電路46。
於步驟S136中,解碼高頻次頻帶功率算出電路46基於來自特徵值算出電路44之1個或複數個特徵值、與來自高頻解碼電路45之解碼高頻次頻帶功率推斷係數,算出解碼高頻次頻帶功率,並將其供給至解碼高頻信號產生電路47。再者,圖13之解碼高頻次頻帶功率算出電路46具有與圖3之高頻次頻帶功率推斷電路15基本相同之構成及功能,且步驟S136中之處理與圖4之流程圖之步驟S5中之處理基本相同,故而省略其詳細之說明。
於步驟S137中,解碼高頻信號產生電路47基於來自次頻帶分割電路43之解碼低頻次頻帶信號、與來自解碼高頻次頻帶功率算出電路46之解碼高頻次頻帶功率,輸出解碼高頻信號。再者,圖13之解碼高頻信號產生電路47具有與圖3之高頻信號產生電路16基本相同之構成及功能,且步驟S137中之處理與圖4之流程圖之步驟S6中之處理基本相同,故而省略其詳細之說明。
於步驟S138中,合成電路48合成來自低頻解碼電路42之 解碼低頻信號、與來自解碼高頻信號產生電路47之解碼高頻信號,並作為輸出信號而輸出。
根據以上處理,藉由使用對應於編碼時預先所算出之虛擬高頻次頻帶功率與實際之高頻次頻帶功率之差分之特徵的解碼時之高頻次頻帶功率推斷係數,而可提高解碼時之高頻次頻帶功率之推斷精度,其結果,能夠以更高音質再生音樂信號。
又,根據以上處理,由於包含於編碼串中之用以產生高頻信號之資訊少至僅有虛擬高頻次頻帶功率差分ID,故而可有效率地進行解碼處理。
於以上敘述中,對應用本發明之編碼處理及解碼處理進行了說明,以下,對於圖11之編碼裝置30之高頻編碼電路37中預先所設定之虛擬高頻次頻帶功率差分之特徵空間內之複數個群集各自之代表向量、與藉由圖13之解碼裝置40之高頻解碼電路45而輸出之解碼高頻次頻帶功率推斷係數之算出方法進行說明。
[虛擬高頻次頻帶功率差分之特徵空間內之複數個群集之代表向量、及與各群集相對應之解碼高頻次頻帶功率推斷係數之算出方法]
作為複數個群集之代表向量及各群集之解碼高頻次頻帶功率推斷係數之求出方法,必需預先準備係數以便可根據於編碼時所算出之虛擬高頻次頻帶功率差分向量,精度良好地推斷解碼時之高頻次頻帶功率。為此,應用如下方法:預先藉由寬頻帶指導信號進行學習,基於其學習結果 決定該等。
[係數學習裝置之功能性構成例]
圖15表示進行複數個群集之代表向量及各群集之解碼高頻次頻帶功率推斷係數之學習的係數學習裝置之功能性構成例。
輸入至圖15之係數學習裝置50之寬頻帶指導信號之以編碼裝置30之低通濾波器31所設定之截止頻率以下之信號成分若為向編碼裝置30之輸入信號通過低通濾波器31,並藉由低頻編碼電路32進行編碼,進而藉由解碼裝置40之低頻解碼電路42進行解碼所得之解碼低頻信號,則較佳。
係數學習裝置50包括低通濾波器51、次頻帶分割電路52、特徵值算出電路53、虛擬高頻次頻帶功率算出電路54、虛擬高頻次頻帶功率差分算出電路55、虛擬高頻次頻帶功率差分聚類電路56、及係數推斷電路57。
再者,由於圖15之係數學習裝置50中之低通濾波器51、次頻帶分割電路52、特徵值算出電路53、及虛擬高頻次頻帶功率算出電路54之各者具備與圖11之編碼裝置30中之低通濾波器31、次頻帶分割電路33、特徵值算出電路34、及虛擬高頻次頻帶功率算出電路35之各者基本相同之構成與功能,故而適當省略其說明。
即,虛擬高頻次頻帶功率差分算出電路55具備與圖11之虛擬高頻次頻帶功率差分算出電路36相同之構成及功能,將經計算之虛擬高頻次頻帶功率差分供給至虛擬高頻次頻帶功率差分聚類電路56,並且將於計算虛擬高頻次頻帶功 率差分時算出之高頻次頻帶功率供給至係數推斷電路57。
虛擬高頻次頻帶功率差分聚類電路56對由來自虛擬高頻次頻帶功率差分算出電路55之虛擬高頻次頻帶功率差分所獲得之虛擬高頻次頻帶功率差分向量進行聚類,並算出各群集中之代表向量。
係數推斷電路57基於來自虛擬高頻次頻帶功率差分算出電路55之高頻次頻帶功率、與來自特徵值算出電路53之1個或複數個特徵值,算出藉由虛擬高頻次頻帶功率差分聚類電路56進行聚類所得之每一個群集之高頻次頻帶功率推斷係數。
[係數學習裝置之係數學習處理]
其次,參照圖16之流程圖對圖15之係數學習裝置50之係數學習處理進行說明。
再者,由於圖16之流程圖中之步驟S151至S155之處理中,除輸入至係數學習裝置50之信號為寬頻帶指導信號以外,其他與圖12之流程圖中之步驟S111、S113至S116之處理相同,故而省略其說明。
即,於步驟S156中,虛擬高頻次頻帶功率差分聚類電路56將由來自虛擬高頻次頻帶功率差分算出電路55之虛擬高頻次頻帶功率差分所獲得之多個(大量之時間訊框)虛擬高頻次頻帶功率差分向量聚類為例如64個群集,並算出各群集之代表向量。作為聚類之方法之一例,例如,可應用藉由k-means(k-均值聚類)法而進行之聚類。虛擬高頻次頻帶功率差分聚類電路56將自進行藉由k-means法之聚類所得 之結果中所獲得之各群集之重心向量設為各群集之代表向量。再者,聚類之方法或群集之數量並不限定於上述者,亦可應用其他方法。
又,虛擬高頻次頻帶功率差分聚類電路56使用時間訊框J中之由來自虛擬高頻次頻帶功率差分算出電路55之虛擬高頻次頻帶功率差分所獲得之虛擬高頻次頻帶功率差分向量,測定與64個代表向量之距離,並決定距離最短之代表向量所屬之群集之索引CID(J)。再者,索引CID(J)係設為取自1起至群集數(於此例中為64)為止之整數值者。虛擬高頻次頻帶功率差分聚類電路56係如此輸出代表向量,又,將索引CID(J)供給至係數推斷電路57。
於步驟S157中,係數推斷電路57針對自虛擬高頻次頻帶功率差分算出電路55及特徵值算出電路53供給至同一時間訊框之(eb-sb)個高頻次頻帶功率與特徵值之多個組合中、每一個具有相同之索引CID(J)(屬於相同之群集)之集合,算出各群集中之解碼高頻次頻帶功率推斷係數。再者,雖然係數推斷電路57之係數之算出方法係設為與圖9之係數學習裝置20中之係數推斷電路24之方法相同者,但當然亦可為其他方法。
根據以上處理,由於預先使用寬頻帶指導信號,而進行於圖11之編碼裝置30之高頻編碼電路37中預先所設定之虛擬高頻次頻帶功率差分之特徵空間內之複數個群集各自之代表向量、與藉由圖13之解碼裝置40之高頻解碼電路45而輸出之解碼高頻次頻帶功率推斷係數之學習,故而可獲得 對於輸入至編碼裝置30之各種輸入信號、及輸入至解碼裝置40之各種輸入編碼串較佳之輸出結果,進而,能夠以更高音質再生音樂信號。
進而,關於信號之編碼及解碼,於編碼裝置30之虛擬高頻次頻帶功率算出電路35或解碼裝置40之解碼高頻次頻帶功率算出電路46中用以算出高頻次頻帶功率之係數資料亦可如下進行處理。即,亦可設為使用根據輸入信號之種類而不同之係數資料,且將該係數預先記錄於編碼串之前端。
例如,可藉由根據語音或爵士樂等信號變更係數資料,而實現編碼效率之提高。
圖17表示如此而獲得之編碼串。
圖17之編碼串A為對語音進行編碼所得者,對語音最適合之係數資料α係記錄於標頭。
相對於此,圖17之編碼串B為對爵士樂進行編碼所得者,對爵士樂最適合之係數資料β係記錄於標頭。
亦可藉由預先利用同種之音樂信號學習而準備此種複數個係數資料,且於編碼裝置30中以如記錄於輸入信號之標頭之類型資訊選擇其係數資料。或者,亦可藉由進行信號之波形解析而判定類型,並選擇係數資料。即,此種信號之類型解析方法並無特別限定。
又,若計算時間允許,亦可使上述學習裝置內置於編碼裝置30中,使用其信號專用之係數進行處理,如圖17之編碼串C所示般,最後將其係數記錄於標頭。
以下說明使用該方法所帶來之優點。
高頻次頻帶功率之形狀,於1個輸入信號內存在多個類似之部位。利用具有多數之輸入信號之此一特徵,並針對每一個輸入信號個別地進行用以推斷高頻次頻帶功率之係數之學習,藉此可降低因高頻次頻帶功率之類似部位之存在而導致之冗餘度,從而可提高編碼效率。又,與以複數個信號統計性地學習用以推斷高頻次頻帶功率之係數相比,能夠以更高精度進行高頻次頻帶功率之推斷。
又,如此,亦可採取如於編碼時將根據輸入信號所學習之係數資料1次插入至多個訊框之形態。
<3. 第3實施形態> [編碼裝置之功能性構成例]
再者,於以上敘述中,說明了將虛擬高頻次頻帶功率差分ID作為高頻編碼資料而自編碼裝置30輸出至解碼裝置40,但用以獲得解碼高頻次頻帶功率推斷係數之係數索引亦可設為高頻編碼資料。
於此種情形時,編碼裝置30例如以如圖18所示之方式構成。再者,於圖18中,對與圖11中之情形相對應之部分附上同一符號,而適當省略其說明。
圖18之編碼裝置30於未設置低頻解碼電路39之方面與圖11之編碼裝置30不同,其他方面相同。
於圖18之編碼裝置30中,特徵值算出電路34使用自次頻帶分割電路33所供給之低頻次頻帶信號,算出低頻次頻帶功率作為特徵值,並供給至虛擬高頻次頻帶功率算出電路 35。
又,於虛擬高頻次頻帶功率算出電路35中,將預先藉由回歸分析而求出之複數個解碼高頻次頻帶功率推斷係數、與確定該等解碼高頻次頻帶功率推斷係數之係數索引建立關聯並加以記錄。
具體而言,作為解碼高頻次頻帶功率推斷係數,預先準備複數個上述式(2)之運算中所使用之各次頻帶之係數Aib (kb)與係數Bib 之組。例如,該等係數Aib (kb)與係數Bib 係使用將低頻次頻帶功率設為說明變數、將高頻次頻帶功率設為被說明變數之最小平方法之回歸分析而預先求出。於回歸分析中,將包含低頻次頻帶信號與高頻次頻帶信號之輸入信號用作寬頻帶指導信號。
虛擬高頻次頻帶功率算出電路35針對每一個記錄之解碼高頻次頻帶功率推斷係數,使用解碼高頻次頻帶功率推斷係數、與來自特徵值算出電路34之特徵值,算出高頻側之各次頻帶之虛擬高頻次頻帶功率,並將其供給至虛擬高頻次頻帶功率差分算出電路36。
虛擬高頻次頻帶功率差分算出電路36將根據自次頻帶分割電路33所供給之高頻次頻帶信號而求出之高頻次頻帶功率、與來自虛擬高頻次頻帶功率算出電路35之虛擬高頻次頻帶功率進行比較。
繼而,虛擬高頻次頻帶功率差分算出電路36進行比較之結果為,將複數個解碼高頻次頻帶功率推斷係數中、獲得最接近於高頻次頻帶功率之虛擬高頻次頻帶功率之解碼高 頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。換言之,選擇獲得於解碼時應再現之輸入信號之高頻信號,亦即最接近於真值之解碼高頻信號的解碼高頻次頻帶功率推斷係數之係數索引。
[編碼裝置之編碼處理]
其次,參照圖19之流程圖對利用圖18之編碼裝置30所進行之編碼處理進行說明。再者,由於步驟S181至步驟S183之處理與圖12之步驟S111至步驟S113之處理相同,故而省略其說明。
於步驟S184中,特徵值算出電路34使用來自次頻帶分割電路33之低頻次頻帶信號算出特徵值,並將其供給至虛擬高頻次頻帶功率算出電路35。
具體而言,特徵值算出電路34進行上述式(1)之運算,對於低頻側之各次頻帶ib(其中,sb-3≦ib≦sb),將訊框J(其中,0≦J)之低頻次頻帶功率power(ib,J)作為特徵值而算出。即,低頻次頻帶功率power(ib,J)係藉由將構成訊框J之低頻次頻帶信號之各試樣之試樣值之均方值對數化而算出。
於步驟S185中,虛擬高頻次頻帶功率算出電路35基於自特徵值算出電路34所供給之特徵值,算出虛擬高頻次頻帶功率,並將其供給至虛擬高頻次頻帶功率差分算出電路36。
例如,虛擬高頻次頻帶功率算出電路35使用作為解碼高頻次頻帶功率推斷係數而預先記錄之係數Aib (kb)及係數Bib 與低頻次頻帶功率power(kb,J)(其中,sb-3≦kb≦sb)進行上述式(2)之運算,而算出虛擬高頻次頻帶功率powerest (ib,J)。
即,將作為特徵值而供給之低頻側之各次頻帶之低頻次頻帶功率power(kb,J)乘以每一個次頻帶之係數Aib (kb),且使乘以係數後之低頻次頻帶功率之和進而與係數Bib 相加,而設為虛擬高頻次頻帶功率powerest (ib,J)。該虛擬高頻次頻帶功率係對於索引為sb+1至eb之高頻側之各次頻帶而算出。
又,虛擬高頻次頻帶功率算出電路35針對每一個預先記錄之解碼高頻次頻帶功率推斷係數算出虛擬高頻次頻帶功率。例如,預先準備係數索引為1至K(其中,2≦K)之K個解碼高頻次頻帶功率推斷係數。於此情形時,針對K個解碼高頻次頻帶功率推斷係數之每一個,算出各次頻帶之虛擬高頻次頻帶功率。
於步驟S186中,虛擬高頻次頻帶功率差分算出電路36基於來自次頻帶分割電路33之高頻次頻帶信號、與來自虛擬高頻次頻帶功率算出電路35之虛擬高頻次頻帶功率,算出虛擬高頻次頻帶功率差分。
具體而言,虛擬高頻次頻帶功率差分算出電路36對於來自次頻帶分割電路33之高頻次頻帶信號,進行與上述式(1)相同之運算,而算出訊框J中之高頻次頻帶功率power(ib,J)。再者,於本實施形態中,使用索引ib識別低頻次頻帶信號之次頻帶與高頻次頻帶信號之次頻帶之全部。
其次,虛擬高頻次頻帶功率差分算出電路36進行與上述式(14)相同之運算,求出訊框J中之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,J)之差分。藉此,針對每一個解碼高頻次頻帶功率推斷係數,對於索引為sb+1至eb之高頻側之各次頻帶,獲得虛擬高頻次頻帶功率差分powerdiff (ib,J)。
於步驟S187中,虛擬高頻次頻帶功率差分算出電路36針對每一個解碼高頻次頻帶功率推斷係數,計算下式(15),並算出虛擬高頻次頻帶功率差分之平方和。
再者,於式(15)中,差分平方和E(J,id)表示對於係數索引為id之解碼高頻次頻帶功率推斷係數所求出之訊框J之虛擬高頻次頻帶功率差分之平方和。又,於式(15)中,powerdiff (ib,J,id)表示對於係數索引為id之解碼高頻次頻帶功率推斷係數所求出之索引為ib之次頻帶之訊框J之虛擬高頻次頻帶功率差分powerdiff (ib,J)。差分平方和E(J,id)係對於K個各解碼高頻次頻帶功率推斷係數而算出。
如此所獲得之差分平方和E(J,id)表示根據實際之高頻信號而算出之高頻次頻帶功率、與使用係數索引為id之解碼高頻次頻帶功率推斷係數而算出之虛擬高頻次頻帶功率之類似之程度。
亦即,表示相對於高頻次頻帶功率之真值之推斷值之誤 差。因此,差分平方和E(J,id)越小,則藉由使用解碼高頻次頻帶功率推斷係數之運算,越可獲得更接近於實際之高頻信號之解碼高頻信號。換言之,可以說差分平方和E(J,id)成為最小之解碼高頻次頻帶功率推斷係數為最適合於輸出編碼串之解碼時所進行之頻帶擴大處理之推斷係數。
因此,虛擬高頻次頻帶功率差分算出電路36於K個差分平方和E(J,id)中,選擇值為最小之差分平方和,並將表示與該差分平方和相對應之解碼高頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。
於步驟S188中,高頻編碼電路37對自虛擬高頻次頻帶功率差分算出電路36所供給之係數索引進行編碼,並將自其結果中所獲得之高頻編碼資料供給至多工化電路38。
例如,於步驟S188中,對係數索引進行熵編碼等。藉此,可壓縮輸出至解碼裝置40之高頻編碼資料之資訊量。再者,只要高頻編碼資料為獲得最適合之解碼高頻次頻帶功率推斷係數之資訊,則可為任何資訊,例如,亦可將係數索引直接設為高頻編碼資料。
於步驟S189中,多工化電路38將自低頻編碼電路32所供給之低頻編碼資料、與自高頻編碼電路37所供給之高頻編碼資料多工化,並輸出自其結果中所獲得之輸出編碼串,從而結束編碼處理。
如此,藉由將低頻編碼資料及對係數索引進行編碼而獲得之高頻編碼資料作為輸出編碼串而輸出,可於接收該輸出編碼串之輸入之解碼裝置40中,獲得最適合於頻帶擴大 處理之解碼高頻次頻帶功率推斷係數。藉此,可獲得更高音質之信號。
[解碼裝置之功能性構成例]
又,將自圖18之編碼裝置30所輸出之輸出編碼串作為輸入編碼串而輸入,且進行解碼之解碼裝置40例如係構成為如圖20所示般。再者,於圖20中,對與圖13中之情形相對應之部分附上同一符號,而省略其說明。
圖20之解碼裝置40於包括非多工化電路41至合成電路48之方面,與圖13之解碼裝置40相同,但於不將來自低頻解碼電路42之解碼低頻信號供給至特徵值算出電路44之方面,與圖13之解碼裝置40不同。
於圖20之解碼裝置40中,高頻解碼電路45中預先記錄有與圖18之虛擬高頻次頻帶功率算出電路35所記錄之解碼高頻次頻帶功率推斷係數相同之解碼高頻次頻帶功率推斷係數。即,作為預先藉由回歸分析而求出之解碼高頻次頻帶功率推斷係數之係數Aib (kb)與係數Bib 之集合係與係數索引建立關聯並加以記錄。
高頻解碼電路45將自非多工化電路41所供給之高頻編碼資料解碼,並將自其結果中所獲得之藉由係數索引而表示之解碼高頻次頻帶功率推斷係數供給至解碼高頻次頻帶功率算出電路46。
[解碼裝置之解碼處理]
其次,參照圖21之流程圖對藉由圖20之解碼裝置40所進行之解碼處理進行說明。
該解碼處理係於自編碼裝置30所輸出之輸出編碼串作為輸入編碼串而供給至解碼裝置40時開始。再者,由於步驟S211至步驟S213之處理與圖14之步驟S131至步驟S133之處理相同,故而省略其說明。
於步驟S214中,特徵值算出電路44使用來自次頻帶分割電路43之解碼低頻次頻帶信號算出特徵值,並將其供給至解碼高頻次頻帶功率算出電路46。具體而言,特徵值算出電路44進行上述式(1)之運算,且對於低頻側之各次頻帶ib,將訊框J(其中,0≦J)之低頻次頻帶功率power(ib,J)作為特徵值而算出。
於步驟S215中,高頻解碼電路45進行自非多工化電路41所供給之高頻編碼資料之解碼,並將自其結果所獲得之係數索引所表示之解碼高頻次頻帶功率推斷係數供給至解碼高頻次頻帶功率算出電路46。即,輸出預先記錄於高頻解碼電路45之複數個解碼高頻次頻帶功率推斷係數中之由藉由解碼而獲得之係數索引所表示之解碼高頻次頻帶功率推斷係數。
於步驟S216中,解碼高頻次頻帶功率算出電路46基於自特徵值算出電路44所供給之特徵值、與自高頻解碼電路45所供給之解碼高頻次頻帶功率推斷係數,算出解碼高頻次頻帶功率,並將其供給至解碼高頻信號產生電路47。
即,解碼高頻次頻帶功率算出電路46使用作為解碼高頻次頻帶功率推斷係數之係數Aib (kb)及係數Bib 、與作為特徵值之低頻次頻帶功率power(kb,J)(其中,sb-3≦kb≦sb)進 行上述式(2)之運算,而算出解碼高頻次頻帶功率。藉此,對於索引為sb+1至eb之高頻側之各次頻帶,獲得解碼高頻次頻帶功率。
於步驟S217中,解碼高頻信號產生電路47基於自次頻帶分割電路43所供給之解碼低頻次頻帶信號、與自解碼高頻次頻帶功率算出電路46所供給之解碼高頻次頻帶功率,產生解碼高頻信號。
具體而言,解碼高頻信號產生電路47使用解碼低頻次頻帶信號進行上述式(1)之運算,且對於低頻側之各次頻帶算出低頻次頻帶功率。繼而,解碼高頻信號產生電路47使用所獲得之低頻次頻帶功率與解碼高頻次頻帶功率進行上述式(3)之運算,而算出高頻側之每一個次頻帶之增益量G(ib,J)。
進而,解碼高頻信號產生電路47使用增益量G(ib,J)與解碼低頻次頻帶信號,進行上述式(5)及式(6)之運算,對於高頻側之各次頻帶而產生高頻次頻帶信號x3(ib,n)。
即,解碼高頻信號產生電路47根據低頻次頻帶功率與解碼高頻次頻帶功率之比,對解碼低頻次頻帶信號x(ib,n)進行振幅調變,其結果,對所獲得之解碼低頻次頻帶信號x2(ib,n)進而進行頻率調變。藉此,將低頻側之次頻帶之頻率成分之信號轉換為高頻側之次頻帶之頻率成分之信號,而獲得高頻次頻帶信號x3(ib,n)。
更詳細而言,如此獲得各次頻帶之高頻次頻帶信號之處理為如下之處理。
將於頻域內連續排列之4個次頻帶稱為頻帶區塊,且以由位於低頻側之索引為sb至sb-3之4個次頻帶構成1個頻帶區塊(以下,特別稱為低頻區塊)之方式而分割頻帶。此時,例如,將包含高頻側之索引為sb+1至sb+4之次頻帶之頻帶設為1個頻帶區塊。再者,以下,尤其將高頻側,即包含索引為sb+1以上之次頻帶之頻帶區塊稱為高頻區塊。
現在,注視構成高頻區塊之1個次頻帶,並產生該次頻帶(以下,稱為注視次頻帶)之高頻次頻帶信號。首先,解碼高頻信號產生電路47確定處於與高頻區塊中之注視次頻帶之位置相同之位置關係中的低頻區塊之次頻帶。
例如,若注視次頻帶之索引為sb+1,則注視次頻帶為高頻區塊中之頻率最低之頻帶,故而處於與注視次頻帶相同之位置關係中之低頻區塊之次頻帶成為索引為sb-3之次頻帶。
如此,若確定處於與注視次頻帶相同之位置關係中之低頻區塊之次頻帶,則使用該次頻帶之低頻次頻帶功率及解碼低頻次頻帶信號、與注視次頻帶之解碼高頻次頻帶功率,而產生注視次頻帶之高頻次頻帶信號。
即,將解碼高頻次頻帶功率與低頻次頻帶功率代入式(3)中,而算出對應於該等功率之比之增益量。繼而,使所算出之增益量乘以解碼低頻次頻帶信號,進而藉由式(6)之運算對乘以增益量後之解碼低頻次頻帶信號進行頻率調變,而設為注視次頻帶之高頻次頻帶信號。
藉由以上處理而獲得高頻側之各次頻帶之高頻次頻帶信 號。於是,解碼高頻信號產生電路47進而進行上述式(7)之運算,而求出所獲得之各高頻次頻帶信號之和,且產生解碼高頻信號。解碼高頻信號產生電路47將所獲得之解碼高頻信號供給至合成電路48,並使處理自步驟S217進入步驟S218。
於步驟S218中,合成電路48合成來自低頻解碼電路42之解碼低頻信號、與來自解碼高頻信號產生電路47之解碼高頻信號,並作為輸出信號而輸出。繼而,其後結束解碼處理。
如上所述,根據解碼裝置40,由藉由輸入編碼串之非多工化而獲得之高頻編碼資料獲得係數索引,並使用由該係數索引所表示之解碼高頻次頻帶功率推斷係數而算出解碼高頻次頻帶功率,故而可使高頻次頻帶功率之推斷精度提高。藉此,能夠以更高音質再生音樂信號。
<4. 第4實施形態> [編碼裝置之編碼處理]
又,於以上敘述中,以高頻編碼資料中僅包含係數索引之情形為例進行了說明,但亦可包含其他資訊。
例如,若使係數索引包含於高頻編碼資料,則可於解碼裝置40側識別獲得最接近於實際之高頻信號之高頻次頻帶功率之解碼高頻次頻帶功率的解碼高頻次頻帶功率推斷係數。
然而,在實際之高頻次頻帶功率(真值)與於解碼裝置40側所獲得之解碼高頻次頻帶功率(推斷值)之間,僅以與藉 由虛擬高頻次頻帶功率差分算出電路36而算出之虛擬高頻次頻帶功率差分powerdiff (ib,J)大致相同之值產生差。
因此,若於高頻編碼資料中不僅包含係數索引,而且包含各次頻帶之虛擬高頻次頻帶功率差分,則可瞭解於解碼裝置40側,解碼高頻次頻帶功率相對於實際之高頻次頻帶功率之大概之誤差。若如此,則可利用該誤差而進一步使高頻次頻帶功率之推斷精度提高。
以下,參照圖22及圖23之流程圖對在高頻編碼資料中包含虛擬高頻次頻帶功率差分之情形時之編碼處理與解碼處理進行說明。
首先,參照圖22之流程圖對藉由圖18之編碼裝置30所進行之編碼處理進行說明。再者,由於步驟S241至步驟S246之處理與圖19之步驟S181至步驟S186之處理相同,故而省略其說明。
於步驟S247中,虛擬高頻次頻帶功率差分算出電路36進行上述式(15)之運算,而針對每一個解碼高頻次頻帶功率推斷係數,算出差分平方和E(J,id)。
繼而,虛擬高頻次頻帶功率差分算出電路36選擇差分平方和E(J,id)中之值最小之差分平方和,並將表示與該差分平方和相對應之解碼高頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。
進而,虛擬高頻次頻帶功率差分算出電路36將對於與所選擇之差分平方和相對應之解碼高頻次頻帶功率推斷係數而求出之各次頻帶之虛擬高頻次頻帶功率差分powerdiff (ib, J)供給至高頻編碼電路37。
於步驟S248中,高頻編碼電路37對自虛擬高頻次頻帶功率差分算出電路36所供給之係數索引及虛擬高頻次頻帶功率差分進行編碼,並將自其結果中所獲得之高頻編碼資料供給至多工化電路38。
藉此,索引為sb+1至eb之高頻側之各次頻帶之虛擬高頻次頻帶功率差分,亦即高頻次頻帶功率之推斷誤差係作為高頻編碼資料而供給至解碼裝置40。
若獲得高頻編碼資料,則其後進行步驟S249之處理而使編碼處理結束,由於步驟S249之處理與圖19之步驟S189之處理相同,故而省略其說明。
如上所述,若於高頻編碼資料中包含虛擬高頻次頻帶功率差分,則於解碼裝置40中,可使高頻次頻帶功率之推斷精度進一步提高,且可獲得更高音質之音樂信號。
[解碼裝置之解碼處理]
其次,參照圖23之流程圖,對藉由圖20之解碼裝置40所進行之解碼處理進行說明。再者,由於步驟S271至步驟S274之處理與圖21之步驟S211至步驟S214之處理相同,故而省略其說明。
於步驟S275中,高頻解碼電路45進行自非多工化電路41所供給之高頻編碼資料之解碼。繼而,高頻解碼電路45將由藉由解碼而獲得之係數索引所表示之解碼高頻次頻帶功率推斷係數、與藉由解碼而獲得之各次頻帶之虛擬高頻次頻帶功率差分供給至解碼高頻次頻帶功率算出電路46。
於步驟S276中,解碼高頻次頻帶功率算出電路46基於自特徵值算出電路44所供給之特徵值、與自高頻解碼電路45所供給之解碼高頻次頻帶功率推斷係數,算出解碼高頻次頻帶功率。再者,於步驟S276中,進行與圖21之步驟S216相同之處理。
於步驟S277中,解碼高頻次頻帶功率算出電路46將解碼高頻次頻帶功率與自高頻解碼電路45所供給之虛擬高頻次頻帶功率差分相加,作為最終之解碼高頻次頻帶功率,並將其供給至解碼高頻信號產生電路47。即,將所算出之各次頻帶之解碼高頻次頻帶功率與相同之次頻帶之虛擬高頻次頻帶功率差分相加。
繼而,其後,進行步驟S278及步驟S279之處理,而使解碼處理結束,由於該等處理與圖21之步驟S217及步驟S218相同,故而省略其說明。
如上所述,解碼裝置40由藉由輸入編碼串之非多工化而獲得之高頻編碼資料獲得係數索引與虛擬高頻次頻帶功率差分。繼而,解碼裝置40使用由係數索引所表示之解碼高頻次頻帶功率推斷係數、與虛擬高頻次頻帶功率差分而算出解碼高頻次頻帶功率。藉此,可使高頻次頻帶功率之推斷精度提高,且能夠以更高音質再生音樂信號。
再者,亦可考慮編碼裝置30與解碼裝置40之間所產生之高頻次頻帶功率之推斷值之差,即虛擬高頻次頻帶功率與解碼高頻次頻帶功率之差(以下,稱為裝置間推斷差)。
於此種情形時,例如,以裝置間推斷差對被設為高頻編 碼資料之虛擬高頻次頻帶功率差分進行修正,或於高頻編碼資料中包含裝置間推斷差,並於解碼裝置40側,藉由裝置間推斷差對虛擬高頻次頻帶功率差分進行修正。進而,亦可預先於解碼裝置40側記錄有裝置間推斷差,解碼裝置40將虛擬高頻次頻帶功率差分與裝置間推斷差相加,而進行修正。藉此,可獲得更接近於實際之高頻信號之解碼高頻信號。
<5. 第5實施形態>
再者,於圖18之編碼裝置30中,說明了虛擬高頻次頻帶功率差分算出電路36將差分平方和E(J,id)作為指標,並自複數個係數索引中選擇最適合者,但亦可使用與差分平方和不同之指標而選擇係數索引。
例如,作為選擇係數索引之指標,亦可使用考慮高頻次頻帶功率與虛擬高頻次頻帶功率之殘差之均方值、最大值、及平均值等之評價值。於此種情形時,圖18之編碼裝置30進行圖24之流程圖中所示之編碼處理。
以下,參照圖24之流程圖對編碼裝置30之編碼處理進行說明。再者,由於步驟S301至步驟S305之處理與圖19之步驟S181至步驟S185之處理相同,故而省略其說明。若進行步驟S301至步驟S305之處理,則針對K個解碼高頻次頻帶功率推斷係數之每一個,算出各次頻帶之虛擬高頻次頻帶功率。
於步驟S306中,虛擬高頻次頻帶功率差分算出電路36針對K個解碼高頻次頻帶功率推斷係數之每一個,算出使用 成為處理對象之當前訊框J之評價值Res(id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36使用自次頻帶分割電路33所供給之各次頻帶之高頻次頻帶信號,進行與上述式(1)相同之運算,而算出訊框J中之高頻次頻帶功率power(ib,J)。再者,於本實施形態中,使用索引ib識別低頻次頻帶信號之次頻帶與高頻次頻帶信號之次頻帶之全部。
若獲得高頻次頻帶功率power(ib,J),則虛擬高頻次頻帶功率差分算出電路36計算下式(16),並算出殘差均方值Resstd (id,J)。
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出訊框J之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,且將該等差分之平方和設為殘差均方值Resstd (id,J)。再者,虛擬高頻次頻帶功率powerest (ib,id,J)表示對於係數索引為id之解碼高頻次頻帶功率推斷係數所求出之索引為ib的次頻帶之訊框J之虛擬高頻次頻帶功率。
繼之,虛擬高頻次頻帶功率差分算出電路36計算下式(17),並算出殘差最大值Resmax (id,J)。
[數17] Resmax (id,J)=maxib {|power(ib,J)-powerest (ib,id,J)|}‧‧‧(17)
再者,於式(17)中,maxib {|power(ib,J)-powerest (ib,id,J)|}表示索引為sb+1至eb之各次頻帶之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分之絕對值中之最大者。因此,將訊框J中之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分之絕對值之最大值設為殘差最大值Resmax (id,J)。
又,虛擬高頻次頻帶功率差分算出電路36計算下式(18),並算出殘差平均值Resave (id,J)。
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出訊框J之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,且求出該等差分之總和。繼而,將以所獲得之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為殘差平均值Resave (id,J)。該殘差平均值Resave (id,J)表示考慮編碼之各次頻帶之推斷誤差之平均值之大小。
進而,若獲得殘差均方值Resstd (id,J)、殘差最大值Resmax (id,J)、及殘差平均值Resave (id,J),則虛擬高頻次頻帶功率差分算出電路36計算下式(19),並算出最終之評價值Res(id,J)。
[數19]Res(id,J)=Resstd (id,J)+Wmax ×Resmax (id,J)+Wave ×Resave (id,J)‧‧‧(19)
即,將殘差均方值Resstd (id,J)、殘差最大值Resmax (id,J)、及殘差平均值Resave (id,J)加權相加,而設為最終之評價值Res(id,J)。再者,於式(19)中,Wmax 及Wave 為預先所設定之權重,例如設為Wmax =0.5,Wave =0.5等。
虛擬高頻次頻帶功率差分算出電路36進行以上處理,而針對K個解碼高頻次頻帶功率推斷係數之每一個,即針對K個係數索引id之每一個,算出評價值Res(id,J)。
於步驟S307中,虛擬高頻次頻帶功率差分算出電路36基於所求出之每一個係數索引id之評價值Res(id,J),選擇係數索引id。
藉由以上處理而獲得之評價值Res(id,J)表示由實際之高頻信號而算出之高頻次頻帶功率、與使用係數索引為id之解碼高頻次頻帶功率推斷係數而算出之虛擬高頻次頻帶功率之類似之程度。亦即,表示高頻成分之推斷誤差之大小。
因此,評價值Res(id,J)越小,則越可藉由使用解碼高頻次頻帶功率推斷係數之運算,而獲得更接近於實際之高頻信號之解碼高頻信號。因此,虛擬高頻次頻帶功率差分算出電路36選擇K個評價值Res(id,J)中、值最小之評價值,並將表示與該評價值相對應之解碼高頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。
若將係數索引輸出至高頻編碼電路37,則其後,進行步驟S308及步驟S309之處理而使編碼處理結束,由於該等處理與圖19之步驟S188及步驟S189相同,故而省略其說明。
如上所述,於編碼裝置30中,使用根據殘差均方值Resstd (id,J)、殘差最大值Resmax (id,J)、及殘差平均值Resave (id,J)所算出之評價值Res(id,J),而選擇最適合之解碼高頻次頻帶功率推斷係數之係數索引。
若使用評價值Res(id,J),則與使用差分平方和之情形相比,可使用更多之評價尺度來評價高頻次頻帶功率之推斷精度,故而可選擇更適當之解碼高頻次頻帶功率推斷係數。藉此,於接收輸出編碼串之輸入之解碼裝置40中,可獲得最適合於頻帶擴大處理之解碼高頻次頻帶功率推斷係數,從而可獲得更高音質之信號。
<變形例1>
又,若針對輸入信號之每一個訊框進行以上所說明之編碼處理,則有時於輸入信號之高頻側之各次頻帶之高頻次頻帶功率之時間性變動較少之穩定部,針對每一個連續之訊框選擇不同之係數索引。
即,於構成輸入信號之穩定部之連續之訊框中,各訊框之高頻次頻帶功率成為大致相同之值,故而於該等訊框中應持續選擇相同之係數索引。然而,於該等連續之訊框之區間內,針對每一個訊框所選擇之係數索引會產生變化,其結果,有時於解碼裝置40側所再生之聲音之高頻成分會變得不穩定。於是,於經再生之聲音中產生聽覺上之不適 感。
因此,於在編碼裝置30中選擇係數索引之情形時,亦可在時間上亦考慮前一個訊框內之高頻成分之推斷結果。於此種情形時,圖18之編碼裝置30進行圖25之流程圖中所示之編碼處理。
以下,參照圖25之流程圖對編碼裝置30之編碼處理進行說明。再者,由於步驟S331至步驟S336之處理與圖24之步驟S301至步驟S306之處理相同,故而省略其說明。
於步驟S337中,虛擬高頻次頻帶功率差分算出電路36算出使用過去訊框與當前訊框之評價值ResP(id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36對於在時間上較處理對象之訊框J更前一個之訊框(J-1),記錄使用最終所選擇之係數索引之解碼高頻次頻帶功率推斷係數而獲得之各次頻帶之虛擬高頻次頻帶功率。此處,所謂最終所選擇之係數索引,係指藉由高頻編碼電路37進行編碼並輸出至解碼裝置40之係數索引。
以下,特別將於訊框(J-1)中所選擇之係數索引id設為idselected (J-1)。又,將使用係數索引idselected (J-1)之解碼高頻次頻帶功率推斷係數而獲得之索引為ib(其中,sb+1≦ib≦eb)之次頻帶之虛擬高頻次頻帶功率設為powerest (ib,idselected (J-1),J-1)而繼續說明。
虛擬高頻次頻帶功率差分算出電路36首先計算下式(20),並算出推斷殘差均方值ResPstd (id,J)。
[數20]
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出訊框(J-1)之虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)、與訊框J之虛擬高頻次頻帶功率powerest (ib,id,J)之差分。繼而,將該等差分之平方和設為推斷殘差均方值ResPstd (id,J)。再者,虛擬高頻次頻帶功率powerest (ib,id,J)表示對於係數索引為id之解碼高頻次頻帶功率推斷係數所求出之索引為ib之次頻帶之訊框J之虛擬高頻次頻帶功率。
由於該推斷殘差均方值ResPstd (id,J)為在時間上連續之訊框間之虛擬高頻次頻帶功率之差分平方和,故而推斷殘差均方值ResPstd (id,J)越小,則高頻成分之推斷值之時間性變化越少。
繼之,虛擬高頻次頻帶功率差分算出電路36計算下式(21),並算出推斷殘差最大值ResPmax (id,J)。
[數21]ResPmax (id,J)=maxib {|powerest (ib,idselected (J-1),J-1)-powerest (ib,id,J)|}‧‧‧(21)
再者,於式(21)中,maxib {|powerest (ib,idselected (J-1),J-1)-powerest (ib,id,J)|}表示索引為sb+1至eb之各次頻帶之虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高 頻次頻帶功率powerest (ib,id,J)之差分之絕對值中之最大者。因此,將在時間上連續之訊框間之虛擬高頻次頻帶功率之差分之絕對值的最大值設為推斷殘差最大值ResPmax (id,J)。
關於推斷殘差最大值ResPmax (id,J),其值越小,則連續之訊框間之高頻成分之推斷結果越接近。
若獲得推斷殘差最大值ResPmax (id,J),則其次虛擬高頻次頻帶功率差分算出電路36計算下式(22),並算出推斷殘差平均值ResPave (id,J)。
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出訊框(J-1)之虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與訊框J之虛擬高頻次頻帶功率powerest (ib,id,J)之差分。繼而,將以各次頻帶之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為推斷殘差平均值ResPave (id,J)。該推斷殘差平均值ResPave (id,J)表示考慮編碼之訊框間之次頻帶之推斷值之差的平均值之大小。
進而,若獲得推斷殘差均方值ResPstd (id,J)、推斷殘差最大值ResPmax (id,J)、及推斷殘差平均值ResPave (id,J),則虛擬高頻次頻帶功率差分算出電路36計算下式(23),並 算出評價值ResP(id,J)。
[數23]ResP(id,J)=ResPstd (id,J)+Wmax ×ResPmax (id,J)+Wave ×ResPave (id,J)‧‧‧(23)
即,將推斷殘差均方值ResPstd (id,J)、推斷殘差最大值ResPmax (id,J)、及推斷殘差平均值ResPave (id,J)加權相加,而設為評價值ResP(id,J)。再者,於式(23)中,Wmax 及Wave 為預先所設定之權重,例如設為Wmax =0.5,Wave =0.5等。
如此,若算出使用過去訊框與當前訊框之評價值ResP(id,J),則處理由步驟S337進入步驟S338。
於步驟S338中,虛擬高頻次頻帶功率差分算出電路36計算下式(24),並算出最終之評價值Resall (id,J)。
[數24]Resall (id,J)=Res(id,J)+Wp (J)×ResP(id,J)‧‧‧(24)
即,將已求出之評價值Res(id,J)與評價值ResP(id,J)加權相加。再者,於式(24)中,Wp (J)為例如藉由下式(25)所定義之權重。
又,式(25)中之powerr (J)為藉由下式(26)所決定之值。
該powerr (J)表示訊框(J-1)與訊框J之高頻次頻帶功率之差分之平均值。又,根據式(25),Wp (J)於powerr (J)為0附近之特定之範圍內之值時,powerr (J)越小則成為越接近於1之值,且當powerr (J)大於特定之範圍之值時為0。
此處,於powerr (J)為0附近之特定範圍內之值之情形時,連續之訊框間之高頻次頻帶功率之差分之平均值於某種程度上較小。換言之,輸入信號之高頻成分之時間性變動較少,輸入信號之當前訊框為穩定部。
權重Wp (J)係輸入信號之高頻成分越穩定,則成為越接近於1之值,相反地高頻成分越不穩定則成為越接近於0之值。因此,於式(24)中所示之評價值Resall (id,J)中,輸入信號之高頻成分之時間性變動越少,則將與更前之訊框內之高頻成分之推斷結果的比較結果作為評價尺度之評價值ResP(id,J)之貢獻率越大。
其結果,於輸入信號之穩定部中,選擇獲得接近於前一個訊框中之高頻成分之推斷結果者之解碼高頻次頻帶功率推斷係數,且於解碼裝置40側,可再生更自然且高音質之聲音。相反地,於輸入信號之非穩定部中,評價值Resall (id,J)中之評價值ResP(id,J)一項為0,獲得更接近於實際之高頻信號之解碼高頻信號。
虛擬高頻次頻帶功率差分算出電路36進行以上處理,針對K個解碼高頻次頻帶功率推斷係數之每一個,算出評價值Resall (id,J)。
於步驟S339中,虛擬高頻次頻帶功率差分算出電路36基於經求出之每一個解碼高頻次頻帶功率推斷係數之評價值Resall (id,J),選擇係數索引id。
藉由以上處理而獲得之評價值Resall (id,J)係使用權重將評價值Res(id,J)與評價值ResP(id,J)線性結合所得者。如上所述,評價值Res(id,J)係值越小,則越可獲得更接近於實際之高頻信號之解碼高頻信號。又,評價值ResP(id,J)係其值越小,則越可獲得更接近於前一個訊框之解碼高頻信號之解碼高頻信號。
因此,評價值Resall (id,J)越小,則越可獲得更合適之解碼高頻信號。因此,虛擬高頻次頻帶功率差分算出電路36選擇K個評價值Resall (id,J)中、值最小之評價值,並將表示與該評價值相對應之解碼高頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。
若選擇係數索引,則其後,進行步驟S340及步驟S341之處理而使編碼處理結束,由於該等處理與圖24之步驟S308及步驟S309相同,故而省略其說明。
如上所述,於編碼裝置30中,使用將評價值Res(id,J)與評價值ResP(id,J)線性結合而獲得之評價值Resall (id,J),而選擇最適合之解碼高頻次頻帶功率推斷係數之係數索引。
若使用評價值Resall (id,J),則與使用評價值Res(id,J)之情形同樣地,可藉由更多之評價尺度,選擇更合適之解碼高頻次頻帶功率推斷係數。而且,若使用評價值Resall (id,J),則於解碼裝置40側,可抑制欲再生之信號之高頻成分之穩定部中之時間性變動,且可獲得更高音質之信號。
<變形例2>
然而,於頻帶擴大處理中,若欲獲得更高音質之聲音,則越是更低頻側之次頻帶在聽覺上越重要。即,於高頻側之各次頻帶中,接近於更低頻側之次頻帶之推斷精度越高,則越可再生更高音質之聲音。
因此,於算出關於各解碼高頻次頻帶功率推斷係數之評價值之情形時,亦可注重更低頻側之次頻帶。於此種情形時,圖18之編碼裝置30進行圖26之流程圖中所示之編碼處理。
以下,參照圖26之流程圖對編碼裝置30之編碼處理進行說明。再者,由於步驟S371至步驟S375之處理與圖25之步驟S331至步驟S335之處理相同,故而省略其說明。
於步驟S376中,虛擬高頻次頻帶功率差分算出電路36針對K個解碼高頻次頻帶功率推斷係數之每一個,算出使用成為處理對象之當前訊框J之評價值ResWband (id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36使用自次頻帶分割電路33所供給之各次頻帶之高頻次頻帶信號,進行與上述式(1)相同之運算,而算出訊框J中之高頻次頻帶功率power(ib,J)。
若獲得高頻次頻帶功率power(ib,J),則虛擬高頻次頻帶功率差分算出電路36計算下式(27),並算出殘差均方值Resstd Wband (id,J)。
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出訊框J之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,且使每一個次頻帶之權重Wband (ib)乘以該等差分。繼而,將乘以權重Wband (ib)後之差分之平方和設為殘差均方值Resstd Wband (id,J)。
此處,權重Wband (ib)(其中,sb+1≦ib≦eb)係例如以下式(28)進行定義。該權重Wband (ib)之值係越是更低頻側之次頻帶則越大。
繼之,虛擬高頻次頻帶功率差分算出電路36算出殘差最大值Resmax Wband (id,J)。具體而言,將使權重Wband (ib)乘以索引為sb+1至eb之各次頻帶之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分所得者中之絕對值之最大值設為殘差最大值Resmax Wband (id,J)。
又,虛擬高頻次頻帶功率差分算出電路36算出殘差平均值Resave Wband (id,J)。
具體而言,對於索引為sb+1至eb之各次頻帶,求出高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分並乘以權重Wband (ib),且求出乘以權重Wband (ib)後之差分之總和。繼而,將以所獲得之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為殘差平均值Resave Wband (id,J)。
進而,虛擬高頻次頻帶功率差分算出電路36算出評價值ResWband (id,J)。即,將殘差均方值Resstd Wband (id,J)、乘以權重Wmax 後之殘差最大值Resmax Wband (id,J)、及乘以權重Wave 後之殘差平均值Resave Wband (id,J)之和設為評價值ResWband (id,J)。
於步驟S377中,虛擬高頻次頻帶功率差分算出電路36算出使用過去訊框與當前訊框之評價值ResPWband (id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36對於在時間上較處理對象之訊框J更前一個之訊框(J-1),記錄使用最終所選擇之係數索引之解碼高頻次頻帶功率推斷係數而獲得之各次頻帶之虛擬高頻次頻帶功率。
虛擬高頻次頻帶功率差分算出電路36首先算出推斷殘差均方值ResPstd Wband (id,J)。即,對於索引為sb+1至eb之高頻側之各次頻帶,求出虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分並乘以權重Wband (ib)。繼而,將乘以權重Wband (ib)後之差分之平方和設為推斷殘差均方值ResPstd Wband (id,J)。
繼之,虛擬高頻次頻帶功率差分算出電路36算出推斷殘差最大值ResPmax Wband (id,J)。具體而言,將使權重Wband (ib)乘以索引為sb+1至eb之各次頻帶之虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分所得者中之絕對值之最大值設為推斷殘差最大值ResPmax Wband (id,J)。
其次,虛擬高頻次頻帶功率差分算出電路36算出推斷殘差平均值ResPave Wband (id,J)。具體而言,對於索引為sb+1至eb之各次頻帶,求出虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,並乘以權重Wband (ib)。繼而,將以乘以權重Wband (ib)後之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為推斷殘差平均值ResPave Wband (id,J)。
進而,虛擬高頻次頻帶功率差分算出電路36求出推斷殘差均方值ResPstd Wband (id,J)、乘以權重Wmax 後之推斷殘差最大值ResPmax Wband (id,J)、及乘以權重Wave 後之推斷殘差平均值ResPave Wband (id,J)之和,設為評價值ResPWband (id,J)。
於步驟S378中,虛擬高頻次頻帶功率差分算出電路36將評價值ResWband (id,J)、與乘以式(25)之權重Wp (J)後之評價值ResPWband (id,J)相加,而算出最終之評價值Resall Wband (id,J)。該評價值Resall Wband (id,J)係針對K個解碼高頻次頻帶功率推斷係數之每一個而算出。
繼而,其後,進行步驟S379至步驟S381之處理而使編碼處理結束,由於該等處理與圖25之步驟S339至步驟S341之處理相同,故而省略其說明。再者,於步驟S379中,選擇K個係數索引中之評價值Resall Wband (id,J)成為最小者。
如此,以注重更低頻側之次頻帶之方式,針對每一個次頻帶進行加權,藉此可於解碼裝置40側獲得更高音質之聲音。
再者,於以上敘述中,說明了基於評價值Resall Wband (id,J)來選擇解碼高頻次頻帶功率推斷係數,但解碼高頻次頻帶功率推斷係數亦可基於評價值ResWband (id,J)而選擇。
<變形例3>
進而,由於人類之聽覺具有適當地感覺振幅(功率)較大之頻帶之特性,故而亦可以注重功率更大之次頻帶之方式,算出關於各解碼高頻次頻帶功率推斷係數之評價值。
於此種情形時,圖18之編碼裝置30進行圖27之流程圖中所示之編碼處理。以下,參照圖27之流程圖對編碼裝置30之編碼處理進行說明。再者,由於步驟S401至步驟S405之處理與圖25之步驟S331至步驟S335之處理相同,故而省略其說明。
於步驟S406中,虛擬高頻次頻帶功率差分算出電路36針對K個解碼高頻次頻帶功率推斷係數之每一個,算出使用成為處理對象之當前訊框J之評價值ResWpower (id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36使用自次頻帶分割電路33所供給之各次頻帶之高頻次頻帶信號, 進行與上述式(1)相同之運算,而算出訊框J中之高頻次頻帶功率power(ib,J)。
若獲得高頻次頻帶功率power(ib,J),則虛擬高頻次頻帶功率差分算出電路36計算下式(29),並算出殘差均方值Resstd Wpower (id,J)。
即,對於索引為sb+1至eb之高頻側之各次頻帶,求出高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,且使每一個次頻帶之權重Wpower (power(ib,J))乘以該等差分。繼而,將乘以權重Wpower (power(ib,J))後之差分之平方和設為殘差均方值Resstd Wpower (id,J)。
此處,權重Wpower (power(ib,J))(其中,sb+1≦ib≦eb)係例如由下式(30)進行定義。上述次頻帶之高頻次頻帶功率power(ib,J)越大,則該權重Wpower (power(ib,J))之值亦越大。
繼之,虛擬高頻次頻帶功率差分算出電路36算出殘差最大值Resmax Wpower (id,J)。具體而言,將使權重Wpower (power(ib,J))乘以索引為sb+1至eb之各次頻帶之高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分所得者中之絕對值之最大值設為殘差最大值Resmax Wpower (id,J)。
又,虛擬高頻次頻帶功率差分算出電路36算出殘差平均值Resave Wpower (id,J)。
具體而言,對於索引為sb+1至eb之各次頻帶,求出高頻次頻帶功率power(ib,J)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分並乘以權重Wpower (power(ib,J)),且求出乘以權重Wpower (power(ib,J))後之差分之總和。繼而,將以所獲得之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為殘差平均值Resave Wpower (id,J)。
進而,虛擬高頻次頻帶功率差分算出電路36算出評價值ResWpower (id,J)。即,將殘差均方值Resstd Wpower (id,J)、乘以權重Wmax 後之殘差最大值Resmax Wpower (id,J)、及乘以權重Wave 後之殘差平均值Resave Wpower (id,J)之和設為評價值ResWpower (id,J)。
於步驟S407中,虛擬高頻次頻帶功率差分算出電路36算出使用過去訊框與當前訊框之評價值ResPWpower (id,J)。
具體而言,虛擬高頻次頻帶功率差分算出電路36對於在時間上較處理對象之訊框J更前一個之訊框(J-1),記錄使用最終所選擇之係數索引之解碼高頻次頻帶功率推斷係數而獲得之各次頻帶之虛擬高頻次頻帶功率。
虛擬高頻次頻帶功率差分算出電路36首先算出推斷殘差 均方值ResPstd Wpower (id,J)。即,對於索引為sb+1至eb之高頻側之各次頻帶,求出虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分並乘以權重Wpower (power(ib,J))。繼而,將乘以權重Wpower (power(ib,J))後之差分之平方和設為推斷殘差均方值ResPstd Wpower (id,J)。
繼之,虛擬高頻次頻帶功率差分算出電路36算出推斷殘差最大值ResPmax Wpower (id,J)。具體而言,將使權重Wpower (power(ib,J))乘以索引為sb+1至eb之各次頻帶之虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)與虛擬高頻次頻帶功率powerest (ib,id,J)之差分所得者中之最大值之絕對值設為推斷殘差最大值ResPmax Wpower (id,J)。
其次,虛擬高頻次頻帶功率差分算出電路36算出推斷殘差平均值ResPave Wpower (id,J)。具體而言,對於索引為sb+1至eb之各次頻帶,求出虛擬高頻次頻帶功率powerest (ib,idselected (J-1),J-1)、與虛擬高頻次頻帶功率powerest (ib,id,J)之差分,並乘以權重Wpower (power(ib,J))。繼而,將以乘以權重Wpower (power(ib,J))後之差分之總和除以高頻側之次頻帶數(eb-sb)而獲得之值之絕對值設為推斷殘差平均值ResPave Wpower (id,J)。
進而,虛擬高頻次頻帶功率差分算出電路36求出推斷殘差均方值ResPstd Wpower (id,J)、乘以權重Wmax 後之推斷殘差最大值ResPmax Wpower (id,J)、及乘以權重Wave 後之推斷殘差平均值ResPave Wpower (id,J)之和,而設為評價值 ResPWpower (id,J)。
於步驟S408中,虛擬高頻次頻帶功率差分算出電路36將評價值ResWpower (id,J)與乘以式(25)之權重Wp (J)後之評價值ResPWpower (id,J)相加,而算出最終之評價值Resall Wpower (id,J)。該評價值Resall Wpower (id,J)係針對K個解碼高頻次頻帶功率推斷係數之每一個而算出。
繼而,其後,進行步驟S409至步驟S411之處理而使編碼處理結束,由於該等處理與圖25之步驟S339至步驟S341之處理相同,故而省略其說明。再者,於步驟S409中,選擇K個係數索引中之評價值Resall Wpower (id,J)成為最小者。
如此,以注重功率較大之次頻帶之方式,針對每一個次頻帶進行加權,藉此可於解碼裝置40側獲得更高音質之聲音。
再者,於以上敘述中,說明了基於評價值Resall Wpower (id,J),選擇解碼高頻次頻帶功率推斷係數,但解碼高頻次頻帶功率推斷係數亦可基於評價值ResWpower (id,J)進行選擇。
<6. 第6實施形態> [係數學習裝置之構成]
然而,於圖20之解碼裝置40中,作為解碼高頻次頻帶功率推斷係數之係數Aib (kb)與係數Bib 之集合係與係數索引建立關聯並加以記錄。例如,若於解碼裝置40中記錄128個係數索引之解碼高頻次頻帶功率推斷係數,則作為記錄該等解碼高頻次頻帶功率推斷係數之記憶體等記錄區域,必 需較大之區域。
因此,亦可將若干解碼高頻次頻帶功率推斷係數之一部分設為共用之係數,而使記錄解碼高頻次頻帶功率推斷係數所必需之記錄區域更小。於此種情形時,藉由學習而求出解碼高頻次頻帶功率推斷係數之係數學習裝置例如係構成為如圖28所示般。
係數學習裝置81包括次頻帶分割電路91、高頻次頻帶功率算出電路92、特徵值算出電路93、及係數推斷電路94。
於該係數學習裝置81中,學習中所使用之樂曲資料等係作為寬頻帶指導信號而供給有複數個。寬頻帶指導信號係包含高頻之複數個次頻帶成分與低頻之複數個次頻帶成分之信號。
次頻帶分割電路91包含帶通濾波器等,將所供給之寬頻帶指導信號分割為複數個次頻帶信號,並供給至高頻次頻帶功率算出電路92及特徵值算出電路93。具體而言,將索引為sb+1至eb之高頻側之各次頻帶之高頻次頻帶信號供給至高頻次頻帶功率算出電路92,將索引為sb-3至sb之低頻側之各次頻帶之低頻次頻帶信號供給至特徵值算出電路93。
高頻次頻帶功率算出電路92算出自次頻帶分割電路91所供給之各高頻次頻帶信號之高頻次頻帶功率,並將其供給至係數推斷電路94。特徵值算出電路93基於自次頻帶分割電路91所供給之各低頻次頻帶信號,將低頻次頻帶功率作為特徵值而算出,並將其供給至係數推斷電路94。
係數推斷電路94使用來自高頻次頻帶功率算出電路92之高頻次頻帶功率、與來自特徵值算出電路93之特徵值進行回歸分析,藉此產生解碼高頻次頻帶功率推斷係數,並將其輸出至解碼裝置40。
[係數學習處理之說明]
其次,參照圖29之流程圖對藉由係數學習裝置81所進行之係數學習處理進行說明。
於步驟S431中,次頻帶分割電路91將所供給之複數個寬頻帶指導信號之各者分割為複數個次頻帶信號。繼而,次頻帶分割電路91將索引為sb+1至eb之次頻帶之高頻次頻帶信號供給至高頻次頻帶功率算出電路92,將索引為sb-3至sb之次頻帶之低頻次頻帶信號供給至特徵值算出電路93。
於步驟S432中,高頻次頻帶功率算出電路92對於自次頻帶分割電路91所供給之各高頻次頻帶信號,進行與上述式(1)相同之運算而算出高頻次頻帶功率,並將其供給至係數推斷電路94。
於步驟S433中,特徵值算出電路93對於自次頻帶分割電路91所供給之各低頻次頻帶信號,進行上述式(1)之運算而將低頻次頻帶功率作為特徵值算出,並將其供給至係數推斷電路94。
藉此,對於複數個寬頻帶指導信號之各訊框,對係數推斷電路94供給高頻次頻帶功率與低頻次頻帶功率。
於步驟S434中,係數推斷電路94進行使用最小平方法之回歸分析,針對索引為sb+1至eb之高頻側之每一個次頻帶 ib(其中,sb+1≦ib≦eb),算出係數Aib (kb)與係數Bib
再者,於回歸分析中,將自特徵值算出電路93所供給之低頻次頻帶功率設為說明變數,將自高頻次頻帶功率算出電路92所供給之高頻次頻帶功率設為被說明變數。又,回歸分析係使用構成供給至係數學習裝置81之所有寬頻帶指導信號的所有訊框之低頻次頻帶功率與高頻次頻帶功率而進行。
於步驟S435中,係數推斷電路94使用經求出之每一個次頻帶ib之係數Aib (kb)與係數Bib ,求出寬頻帶指導信號之各訊框之殘差向量。
例如,係數推斷電路94針對訊框J之每一個次頻帶ib(其中,sb+1≦ib≦eb),自高頻次頻帶功率power(ib,J)中減去乘以係數Aib (kb)後之低頻次頻帶功率power(kb,J)(其中,sb-3≦kb≦sb)之總和與係數Bib 之和而求出殘差。繼而,將包含訊框J之各次頻帶ib之殘差之向量設為殘差向量。
再者,殘差向量係對於構成供給至係數學習裝置81之所有寬頻帶指導信號之所有訊框而算出。
於步驟S436中,係數推斷電路94將對於各訊框所求出之殘差向量歸一化。例如,係數推斷電路94對於各次頻帶ib,求出所有訊框之殘差向量之次頻帶ib之殘差之方差值,且將各殘差向量中之次頻帶ib之殘差除以該方差值之平方根,藉此將殘差向量歸一化。
於步驟S437中,係數推斷電路94藉由k-means法等將經 歸一化之所有訊框之殘差向量聚類。
例如,使用係數Aib (kb)與係數Bib ,將於進行高頻次頻帶功率之推斷時所獲得之所有訊框之平均之頻率包絡稱為平均頻率包絡SA。又,將功率較平均頻率包絡SA更大之特定之頻率包絡設為頻率包絡SH,將功率較平均頻率包絡SA更小之特定之頻率包絡設為頻率包絡SL。
此時,以獲得接近於平均頻率包絡SA、頻率包絡SH、及頻率包絡SL之頻率包絡之係數之殘差向量之各者屬於群集CA、群集CH、及群集CL之方式,進行殘差向量之聚類。換言之,以使各訊框之殘差向量屬於群集CA、群集CH、或群集CL之任一者之方式進行聚類。
於基於低頻成分與高頻成分之相關性推斷高頻成分之頻帶擴大處理中,在其特性上,若使用藉由回歸分析而獲得之係數Aib (kb)與係數Bib 算出殘差向量,則越是更高頻側之次頻帶殘差越大。因此,若直接將殘差向量聚類,則注重高頻側之次頻帶而進行處理。
相對於此,於係數學習裝置81中,可藉由以各次頻帶之殘差之方差值將殘差向量歸一化,而於外觀上使各次頻帶之殘差之方差相等,且可對各次頻帶進行均等之加權而進行聚類。
於步驟S438中,係數推斷電路94選擇群集CA、群集CH、或群集CL中之任一個群集作為處理對象之群集。
於步驟S439中,係數推斷電路94使用屬於作為處理對象之群集而選擇之群集的殘差向量之訊框,藉由回歸分析而 算出各次頻帶ib(其中,sb+1≦ib≦eb)之係數Aib (kb)與係數Bib
即,若將屬於處理對象之群集之殘差向量之訊框稱為處理對象訊框,則將所有處理對象訊框之低頻次頻帶功率與高頻次頻帶功率設為說明變數及被說明變數,並進行使用最小平方法之回歸分析。藉此,針對每一個次頻帶ib獲得係數Aib (kb)與係數Bib
於步驟S440中,係數推斷電路94對於所有處理對象訊框,使用藉由步驟S439之處理而獲得之係數Aib (kb)與係數Bib ,求出殘差向量。再者,於步驟S440中,進行與步驟S435相同之處理,而求出各處理對象訊框之殘差向量。
於步驟S441中,係數推斷電路94進行與步驟S436相同之處理而將由步驟S440之處理所求出之各處理對象訊框之殘差向量歸一化。即,針對每一個次頻帶,以殘差除以方差值之平方根而進行殘差向量之歸一化。
於步驟S442中,係數推斷電路94利用k-means法等將經歸一化之所有處理對象訊框之殘差向量聚類。此處之群集數係以如下方式進行設定。例如,於係數學習裝置81中,於欲產生128個係數索引之解碼高頻次頻帶功率推斷係數之情形時,將對處理對象訊框數乘以128,進而除以所有訊框數而獲得之數設為群集數。此處,所謂所有訊框數,係指供給至係數學習裝置81之所有寬頻帶指導信號之所有訊框之總數。
於步驟S443中,係數推斷電路94求出步驟S442之處理中 所獲得之各群集之重心向量。
例如,藉由步驟S442之聚類而獲得之群集與係數索引相對應,且於係數學習裝置81中,針對每一個群集分配係數索引,而求出各係數索引之解碼高頻次頻帶功率推斷係數。
具體而言,於步驟S438中選擇群集CA作為處理對象之群集,且藉由步驟S442中之聚類獲得F個群集。現在,若注視F個群集中之1個群集CF,則群集CF之係數索引之解碼高頻次頻帶功率推斷係數係設為於步驟S439中對於群集CA所求出之係數Aib (kb)為線性相關項之係數Aib (kb)。又,對步驟S443中所求出之群集CF之重心向量實施步驟S441中進行之歸一化之逆處理(逆歸一化)所得之向量、與步驟S439中所求出之係數Bib 之和為解碼高頻次頻帶功率推斷係數之常數項之係數Bib 。此處所謂之逆歸一化,成為如下處理:例如於步驟S441中進行之歸一化為針對每一個次頻帶以殘差除以方差值之平方根者之情形時,對群集CF之重心向量之各要素乘以與歸一化時相同之值(每一個次頻帶之方差值之平方根)。
亦即,步驟S439中所獲得之係數Aib (kb)與如上所述而求出之係數Bib 之集合成為群集CF之係數索引之解碼高頻次頻帶功率推斷係數。因此,藉由聚類而獲得之F個群集之各者係作為解碼高頻次頻帶功率推斷係數之線性相關項,共用並具有對於群集CA所求出之係數Aib (kb)。
於步驟S444中,係數學習裝置81判定是否將群集CA、 群集CH、及群集CL之所有群集作為處理對象之群集而進行處理。於步驟S444中,於判定為尚且未對所有群集進行處理之情形時,處理返回至步驟S438,重複進行上述處理。即,選擇下一個群集作為處理對象,而算出解碼高頻次頻帶功率推斷係數。
相對於此,於步驟S444中,於判定為對所有群集進行處理之情形時,由於獲得欲求出之特定數量之解碼高頻次頻帶功率推斷係數,故而處理進入步驟S445。
於步驟S445中,係數推斷電路94將經求出之係數索引與解碼高頻次頻帶功率推斷係數輸出並記錄於解碼裝置40,從而使係數學習處理結束。
例如,於輸出至解碼裝置40之解碼高頻次頻帶功率推斷係數中,具有若干作為線性相關項之具有相同之係數Aib (kb)者。因此,係數學習裝置81對該等共用之係數Aib (kb),與確定該係數Aib (kb)之資訊即線性相關項索引(指標)建立關聯,並且對係數索引與線性相關項索引及作為常數項之係數Bib 建立關聯。
繼而,係數學習裝置81將經建立關聯之線性相關項索引(指標)與係數Aib (kb)、以及經建立關聯之係數索引與線性相關項索引(指標)及係數Bib 供給至解碼裝置40,並記錄於解碼裝置40之高頻解碼電路45內之記憶體。如此,於預先記錄複數個解碼高頻次頻帶功率推斷係數時,若於用以記錄各解碼高頻次頻帶功率推斷係數之區域,對於共用之線性相關項預先儲存有線性相關項索引(指標),則可使記錄 區域大幅度縮小。
於此情形時,由於將線性相關項索引與係數Aib (kb)建立關聯而記錄於高頻解碼電路45內之記憶體,故而可根據係數索引獲得線性相關項索引與係數Bib ,進而可根據線性相關項索引獲得係數Aib (kb)。
再者,由本發明之申請人進行解析之結果可知,即便使複數個解碼高頻次頻帶功率推斷係數之線性相關項以3個圖案左右實現共用化,進行頻帶擴大處理後之聲音於聽覺上亦幾乎不存在音質之劣化。因此,根據係數學習裝置81,不會使頻帶擴大處理後之聲音之音質產生劣化,且可使記錄解碼高頻次頻帶功率推斷係數所必需之記錄區域進一步縮小。
如上所述,係數學習裝置81根據所供給之寬頻帶指導信號產生各係數索引之解碼高頻次頻帶功率推斷係數,並將其輸出。
再者,於圖29之係數學習處理中,說明了將殘差向量歸一化,但於步驟S436或步驟S441之一者或兩者中,亦可不進行殘差向量之歸一化。
又,亦可進行殘差向量之歸一化,且不進行解碼高頻次頻帶功率推斷係數之線性相關項之共用化。於此種情形時,於步驟S436中之歸一化處理後,將經歸一化之殘差向量聚類為與欲求出之解碼高頻次頻帶功率推斷係數之數量相同之數量之群集。繼而,使用屬於各群集之殘差向量之訊框,針對每一個群集進行回歸分析,而產生各群集之解 碼高頻次頻帶功率推斷係數。
<7. 第7實施形態> [關於係數表之共有部分]
然而,於以上敘述中,說明了為獲得索引為ib(其中,sb+1≦ib≦eb)之高頻側之次頻帶ib之高頻次頻帶信號,而使用作為解碼高頻次頻帶功率推斷係數之係數Aib (sb-3)至係數Aib (sb)及係數Bib
由於高頻成分包含次頻帶sb+1至次頻帶eb為止之(eb-sb)個次頻帶,故而為獲得包含各次頻帶之高頻次頻帶信號之解碼高頻信號,必需例如圖30中所示之係數集合。
即,圖30之最上側之列之係數Asb+1 (sb-3)至係數Asb+1 (sb)係為獲得次頻帶sb+1之解碼高頻次頻帶功率,而與低頻側之次頻帶sb-3至次頻帶sb之各低頻次頻帶功率相乘之係數。又,圖中,最上側之列之係數Bsb+1 係用以獲得次頻帶sb+1之解碼高頻次頻帶功率的低頻次頻帶功率之線性結合之常數項。
同樣地,圖中,最下側之列之係數Aeb (sb-3)至係數Aeb (sb)係為獲得次頻帶eb之解碼高頻次頻帶功率,而與低頻側之次頻帶sb-3至次頻帶sb之各低頻次頻帶功率相乘之係數。又,圖中,最下側之列之係數Beb 係用以獲得次頻帶eb之解碼高頻次頻帶功率的低頻次頻帶功率之線性結合之常數項。
如此,於編碼裝置30或解碼裝置40中,作為藉由1個係數索引而確定之解碼高頻次頻帶功率推斷係數,預先記錄 有5×(eb-sb)個係數集合。再者,以下,將作為解碼高頻次頻帶功率推斷係數之該等5×(eb-sb)個係數之集合亦稱為係數表。
例如,於欲獲得包含多於(eb-sb)個之數量之次頻帶之解碼高頻信號之情形時,於圖30中所示之係數表中係數不足,而無法適當地獲得解碼高頻信號。相反地,於欲獲得包含少於(eb-sb)個之數量之次頻帶之解碼高頻信號之情形時,於圖30中所示之係數表中,係數過多。
因此,於編碼裝置30或解碼裝置40中,必需根據構成解碼高頻信號之次頻帶之數量,預先記錄大量之係數表,而有時會使預先記錄係數表之記錄區域之尺寸變大。
因此,亦可預先記錄用以獲得預先所設定之次頻帶數之解碼高頻信號之係數表,且進行該係數表之擴展或縮小,藉此與不同之次頻帶數之解碼高頻信號相對應。
具體而言,例如於編碼裝置30或解碼裝置40中,記錄有索引eb=sb+8之情形時之係數表。於此情形時,若使用構成係數表之各係數,則可獲得包含8個次頻帶之解碼高頻信號。
此處,例如,如圖31之左側所示,若欲獲得包含次頻帶sb+1至次頻帶sb+10為止之10個次頻帶之解碼高頻信號,則於編碼裝置30或解碼裝置40中所記錄之係數表中,係數不足。即,次頻帶sb+9與次頻帶sb+10之係數Aib (kb)及係數Bib 不足。
因此,圖中,若如右側所示般使係數表擴展,則可使用 高頻側之次頻帶為8個之情形時之係數表,而適當地獲得包含10個次頻帶之解碼高頻信號。再者,圖中,橫軸表示頻率,縱軸表示功率。又,圖中,左側表示輸入信號之各頻率成分,縱向之線表示高頻側之各次頻帶之邊界。
於圖31之例中,將作為解碼高頻次頻帶功率推斷係數之次頻帶sb+8之係數Asb+8 (sb-3)至係數Asb+8 (sb)與係數Bsb+8 直接用作次頻帶sb+9及次頻帶sb+10之係數。
即,於係數表中,直接複製次頻帶sb+8之係數Asb+8 (sb-3)至係數Asb+8 (sb)與係數Bsb+8 而用作次頻帶sb+9之係數Asb+9 (sb-3)至係數Asb+9 (sb)及係數Bsb+9 。同樣地,於係數表中,直接複製次頻帶sb+8之係數Asb+8 (sb-3)至係數Asb+8 (sb)與係數Bsb+8 而用作次頻帶sb+10之係數Asb+10 (sb-3)至係數Asb+10 (sb)及係數Bsb+10
如此,於使係數表擴展之情形時,係數表內之頻率最高之次頻帶之係數Aib (kb)及係數Bib 係直接用作不足之次頻帶之係數。
再者,即便高頻成分中之次頻帶sb+9或次頻帶sb+10等頻率較高之次頻帶之成分之推斷精度稍微降低,於包含解碼高頻信號與解碼低頻信號之輸出信號之再生時,亦不會產生聽覺上之劣化。
又,係數表之擴展並不限定於複製頻率最高之次頻帶之係數Aib (kb)及係數Bib ,設為其他次頻帶之係數之例,亦可複製係數表之任意之次頻帶之係數,而設為所擴展(不足)之次頻帶之係數。又,所複製之係數並不限定於1個次頻 帶之係數,亦可複製複數個次頻帶之係數,而設為擴展之複數個次頻帶之係數之各者。進而,亦可基於若干次頻帶之係數,而算出所擴展之次頻帶之係數。
相對於此,例如於編碼裝置30或解碼裝置40中,記錄有索引eb=sb+8之情形時之係數表,如圖32之左側所示,產生包含6個次頻帶之解碼高頻信號。再者,圖中,橫軸表示頻率,縱軸表示功率。又,圖中,左側表示輸入信號之各頻率成分,縱向之線表示高頻側之各次頻帶之邊界。
於此情形時,於編碼裝置30或解碼裝置40中並未記錄高頻側之次頻帶數為6個之係數表。因此,圖中,若如右側所示般使係數表縮小,則可使用高頻側之次頻帶為8個之情形時之係數表,而適當地獲得包含6個次頻帶之解碼高頻信號。
於圖32之例中,自作為解碼高頻次頻帶功率推斷係數之係數表中刪除次頻帶sb+7之係數Asb+7 (sb-3)至係數Asb+7 (sb)及係數Bsb+7 與次頻帶sb+8之係數Asb+8 (sb-3)至係數Asb+8 (sb)及係數Bsb+8 。繼而,將刪除次頻帶sb+7與次頻帶sb+8之係數後之包含次頻帶sb+1至次頻帶sb+6為止之6個次頻帶之係數之新的係數表用作解碼高頻次頻帶功率推斷係數,而產生解碼高頻信號。
如此,於使係數表縮小之情形時,將係數表內之不需要之次頻帶,亦即不用於產生解碼高頻信號之次頻帶之係數Aib (kb)及係數Bib 刪除,設為經縮小之係數表。
如上所述,藉由根據欲產生之解碼高頻信號之次頻帶之 數量使編碼裝置或解碼裝置中所記錄之係數表適當地擴展或縮小,而可共用特定之次頻帶數之係數表。藉此,可減小係數表之記錄區域之尺寸。
[編碼裝置之功能性構成例]
於視需要使係數表擴展或縮小之情形時,編碼裝置例如係如圖33所示般構成。再者,於圖33中,對與圖18中之情形相對應之部分附上同一符號,而適當省略其說明。
圖33之編碼裝置111與圖18之編碼裝置30係於編碼裝置111之虛擬高頻次頻帶功率算出電路35中設置有擴展縮小部121之方面不同,其他構成係設為相同之構成。
擴展縮小部121根據將輸入信號之高頻成分分割之次頻帶數,使虛擬高頻次頻帶功率算出電路35中所記錄之係數表擴展或縮小。虛擬高頻次頻帶功率算出電路35視需要使用藉由擴展縮小部121而擴展或縮小之係數表,算出虛擬高頻次頻帶功率。
[編碼處理之說明]
其次,參照圖34之流程圖對藉由編碼裝置111所進行之編碼處理進行說明。再者,由於步驟S471至步驟S474之處理與圖19之步驟S181至步驟S184之處理相同,故而省略其說明。
於步驟S475中,擴展縮小部121根據輸入信號之高頻之次頻帶數,亦即高頻次頻帶信號之數量,使虛擬高頻次頻帶功率算出電路35所記錄之作為解碼高頻次頻帶功率推斷係數之係數表擴展或縮小。
例如,將輸入信號之高頻成分分割為次頻帶sb+1至次頻帶sb+q之q個次頻帶之高頻次頻帶信號。即,基於低頻次頻帶信號,而算出q個次頻帶之虛擬高頻次頻帶功率。
又,於虛擬高頻次頻帶功率算出電路35中,作為解碼高頻次頻帶功率推斷係數,記錄有包含次頻帶sb+1至次頻帶sb+r之r個次頻帶之係數Aib (kb)及係數Bib 的係數表。
於此情形時,擴展縮小部121於q大於r(q>r)時,使虛擬高頻次頻帶功率算出電路35中所記錄之係數表擴展。即,擴展縮小部121複製包含於係數表中之次頻帶sb+r之係數Asb+r (kb)及係數Bsb+r ,並直接設為次頻帶sb+r+1至次頻帶sb+q之各次頻帶之係數。藉此,獲得包含q個次頻帶之係數Aib (kb)及係數Bib 之係數表。
又,擴展縮小部121於q小於r(q<r)時,使虛擬高頻次頻帶功率算出電路35中所記錄之係數表縮小。即,擴展縮小部121將包含於係數表中之次頻帶sb+q+1至次頻帶sb+r之各次頻帶之係數Aib (kb)及係數Bib 刪除。藉此,獲得包含次頻帶sb+1至次頻帶sb+q之各次頻帶之係數Aib (kb)及係數Bib 之係數表。
進而,擴展縮小部121於q等於r(q=r)之情形時,對虛擬高頻次頻帶功率算出電路35中所記錄之係數表既不進行擴展亦不進行縮小。
於步驟S476中,虛擬高頻次頻帶功率算出電路35基於自特徵值算出電路34所供給之特徵值,算出虛擬高頻次頻帶功率,並將其供給至虛擬高頻次頻帶功率差分算出電路 36。
例如,虛擬高頻次頻帶功率算出電路35使用作為解碼高頻次頻帶功率推斷係數而記錄、且視需要藉由擴展縮小部121進行擴展或縮小之係數表與低頻次頻帶功率power(kb,J)(其中,sb-3≦kb≦sb)進行上述式(2)之運算,而算出虛擬高頻次頻帶功率powerest (ib,J)。
即,使作為特徵值而供給之低頻側之各次頻帶之低頻次頻帶功率乘以每一個次頻帶之係數Aib (kb),並使乘以係數後之低頻次頻帶功率之和進而與係數Bib 相加,而設為虛擬高頻次頻帶功率powerest (ib,J)。該虛擬高頻次頻帶功率係對於高頻側之各次頻帶而算出。
又,虛擬高頻次頻帶功率算出電路35針對每一個預先記錄之解碼高頻次頻帶功率推斷係數(係數表)算出虛擬高頻次頻帶功率。例如,預先準備有係數索引為1至K(其中,2≦K)之K個解碼高頻次頻帶功率推斷係數。於此情形時,針對K個解碼高頻次頻帶功率推斷係數之每一個,視需要進行係數表之擴展或縮小,而算出各次頻帶之虛擬高頻次頻帶功率。
如此,若視需要進行係數表之擴展或縮小,則可不侷限於高頻側之次頻帶數,而使用預先記錄之係數表適當地算出次頻帶sb+1至次頻帶eb之虛擬高頻次頻帶功率。而且,於此情形時,能夠以更少之解碼高頻次頻帶功率推斷係數更有效地獲得虛擬高頻次頻帶功率。
若於步驟S476中算出虛擬高頻次頻帶功率,則其後,進 行步驟S477及步驟S478之處理,而算出虛擬高頻次頻帶功率差分之平方和。再者,由於該等處理與圖19之步驟S186及步驟S187之處理相同,故而省略其說明。
再者,於步驟S478中,針對K個解碼高頻次頻帶功率推斷係數之每一個,算出差分平方和E(J,id)。虛擬高頻次頻帶功率差分算出電路36選擇經算出之K個差分平方和E(J,id)中值最小之差分平方和,並將表示與該差分平方和相對應之解碼高頻次頻帶功率推斷係數之係數索引供給至高頻編碼電路37。
如此,若選擇能夠以最高精度推斷高頻信號之係數索引,並將其供給至高頻編碼電路37,則其後,進行步驟S479及步驟S480之處理而使編碼處理結束。再者,由於該等處理與圖19之步驟S188及步驟S189之處理相同,故而省略其說明。
如此,藉由將低頻編碼資料及高頻編碼資料一併作為輸出編碼串而輸出,可於接收該輸出編碼串之輸入之解碼裝置中,獲得最適合於頻帶擴大處理之解碼高頻次頻帶功率推斷係數。藉此,可獲得更高音質之信號。
而且,於編碼裝置111中,由於無需針對每一個分割輸入信號之高頻成分之次頻帶數,預先記錄係數表,故而能夠以較少之係數表更有效地進行聲音之編碼。
再者,表示分割輸入信號之高頻成分之次頻帶數之資訊亦可包含於高頻編碼資料,且表示次頻帶數之資訊亦可作為與輸出編碼串不同之資料而傳送至解碼裝置。
[解碼裝置之功能性構成例]
又,將自圖33之編碼裝置111所輸出之輸出編碼串作為輸入編碼串而輸入、且進行解碼之解碼裝置例如係如圖35所示般構成。再者,於圖35中,對與圖20中之情形相對應之部分附上同一符號,而適當省略其說明。
圖35之解碼裝置151於包括非多工化電路41至合成電路48之方面,與圖20之解碼裝置40相同,但於解碼高頻次頻帶功率算出電路46中設置有擴展縮小部161之方面,與圖20之解碼裝置40不同。
擴展縮小部161視需要使自高頻解碼電路45供給且作為解碼高頻次頻帶功率推斷係數之係數表擴展或縮小。解碼高頻次頻帶功率算出電路46使用視需要經擴展或縮小之係數表,而算出解碼高頻次頻帶功率。
[解碼處理之說明]
其次,參照圖36之流程圖對藉由圖35之解碼裝置151所進行之解碼處理進行說明。再者,由於步驟S511至步驟S515之處理與圖21之步驟S211至步驟S215之處理相同,故而省略其說明。
於步驟S516中,擴展縮小部161視需要使自高頻解碼電路45供給且作為解碼高頻次頻帶功率推斷係數之係數表擴展或縮小。
具體而言,例如藉由解碼高頻次頻帶功率算出電路46算出高頻側之次頻帶sb+1至次頻帶sb+q之q個次頻帶之解碼高頻次頻帶功率。亦即,解碼高頻信號包含q個次頻帶之 成分。
再者,高頻側之次頻帶數「q」既可於解碼裝置151中預先確定,亦可由使用者指定。又,表示高頻側之次頻帶數之資訊既可包含於高頻編碼資料,亦可作為與輸入編碼串不同之資料,而自編碼裝置111中將表示高頻側之次頻帶數之資訊傳送至解碼裝置151。
又,於高頻解碼電路45中,作為解碼高頻次頻帶功率推斷係數,記錄有包含次頻帶sb+1至次頻帶sb+r之r個次頻帶之係數Aib (kb)及係數Bib 之係數表。
於此情形時,擴展縮小部161於q大於r(q>r)時,使自高頻解碼電路45所供給之係數表擴展。即,擴展縮小部161複製包含於係數表中之次頻帶sb+r之係數Asb+r (kb)及係數Bsb+r ,並直接設為次頻帶sb+r+1至次頻帶sb+q之各次頻帶之係數。藉此,獲得包含q個次頻帶之係數Aib (kb)及係數Bib 之係數表。
又,擴展縮小部161於q小於r(q<r)時,使自高頻解碼電路45所供給之係數表縮小。即,擴展縮小部161將包含於係數表中之次頻帶sb+q+1至次頻帶sb+r之各次頻帶之係數Aib (kb)及係數Bib 刪除。藉此,獲得包含次頻帶sb+1至次頻帶sb+q之各次頻帶之係數Aib (kb)及係數Bib 之係數表。
進而,擴展縮小部161於q等於r(q=r)之情形時,對自高頻解碼電路45所供給之係數表既不進行擴展亦不進行縮小。
若視需要使係數表擴展或縮小,則其後,進行步驟S517 至步驟S519之處理而使解碼處理結束,由於該等處理與圖21之步驟S216至步驟S218之處理相同,故而省略其說明。
如上所述,根據解碼裝置151,根據藉由輸入編碼串之非多工化而獲得之高頻編碼資料獲得係數索引,並使用由該係數索引所表示之解碼高頻次頻帶功率推斷係數而算出解碼高頻次頻帶功率,故而可使高頻次頻帶功率之推斷精度提高。藉此,能夠以更高音質再生音樂信號。
而且,於解碼裝置151中,由於無需針對構成解碼高頻信號之次頻帶之數量之每一個預先記錄係數表,故而能夠以較少之係數表更有效地進行聲音之解碼。
<8. 第8實施形態> [關於混合學習方法]
再者,於以上敘述中,準備可與頻帶限制頻率、取樣頻率、編解碼器、編碼演算法之差異相對應之程度之係數集合,但存在表之尺寸變大之問題。對於該問題,研究有如下方法:將各種頻帶限制頻率、取樣頻率、編解碼器、編碼演算法處理音設為輸入,而準備說明變數(自sb-3起至sb)及被說明變數(自sb+1起至eb),並使該等混合而進行學習。藉由該方法,可對各種取樣頻率、編解碼器、編碼演算法之信號,以1個表平均性地精度良好地推斷高頻之功率。
具體而言,例如,如圖37所示,針對條件A至條件D等之每一項條件,根據寬頻帶指導信號求出說明變數與被說明變數,且藉由學習求出解碼高頻次頻帶功率推斷係數 (係數表)。
再者,於圖37中,頻帶限制頻率係指包含於低頻信號或解碼低頻信號中之成分之頻率中之最高頻率,取樣頻率係輸入信號或輸出信號之取樣頻率。又,編解碼器為輸入信號之編碼方式,編碼演算法為聲音之編碼方法。例如,若編碼演算法不同,則解碼低頻信號亦不同,其結果,例如用作被說明變數之低頻次頻帶功率之值等會不同。
於針對每一項條件求出係數表之情形時,於聲音之編碼時或解碼時,根據編解碼器或編碼演算法等條件,自對於其條件而求出之係數表中選擇1個係數表。
如此,若針對每一項條件求出係數表,則於編碼裝置或解碼裝置中,必需針對每一項條件預先記錄大量之係數表,而有時會使預先記錄係數表之記錄區域之尺寸變大。
因此,亦可針對每一項條件混合根據寬頻帶指導信號所求出之說明變數與被說明變數而進行學習,且以自其結果中所獲得之係數表,不侷限於條件,而就平均而言亦可精度良好地推斷高頻次頻帶功率。
[係數學習裝置之功能性構成例]
於此種情形時,藉由學習產生作為解碼高頻次頻帶功率推斷係數之係數表的係數學習裝置例如係如圖38所示般構成。
係數學習裝置191包括次頻帶分割電路201、高頻次頻帶功率算出電路202、特徵值算出電路203、及係數推斷電路204。
於該係數學習裝置191中,例如,將圖37之條件A至條件D等不同之複數個條件之樂曲資料等作為寬頻帶指導信號而供給有複數個。寬頻帶指導信號係包含高頻之複數個次頻帶成分與低頻之複數個次頻帶成分之信號。
次頻帶分割電路201包含帶通濾波器等,將所供給之寬頻帶指導信號分割為複數個次頻帶信號,並供給至高頻次頻帶功率算出電路202及特徵值算出電路203。具體而言,將索引為sb+1至eb之高頻側之各次頻帶之高頻次頻帶信號供給至高頻次頻帶功率算出電路202,將索引為sb-3至sb之低頻側之各次頻帶之低頻次頻帶信號供給至特徵值算出電路203。
高頻次頻帶功率算出電路202算出自次頻帶分割電路201所供給之各高頻次頻帶信號之高頻次頻帶功率,並將其供給至係數推斷電路204。特徵值算出電路203基於自次頻帶分割電路201所供給之各低頻次頻帶信號,將低頻次頻帶功率作為特徵值而算出,並將其供給至係數推斷電路204。
係數推斷電路204使用來自高頻次頻帶功率算出電路202之高頻次頻帶功率、與來自特徵值算出電路203之特徵值進行回歸分析,藉此產生解碼高頻次頻帶功率推斷係數,並將其輸出。
[係數學習處理之說明]
其次,參照圖39之流程圖對藉由係數學習裝置191所進行之係數學習處理進行說明。
於步驟S541中,次頻帶分割電路201將所供給之複數個寬頻帶指導信號之各者分割為複數個次頻帶信號。繼而,次頻帶分割電路201將索引為sb+1至eb之次頻帶之高頻次頻帶信號供給至高頻次頻帶功率算出電路202,將索引為sb-3至sb之次頻帶之低頻次頻帶信號供給至特徵值算出電路203。
此處,供給至次頻帶分割電路201之寬頻帶指導信號係設為取樣頻率等條件不同之複數個樂曲資料等。又,寬頻帶指導信號係以不同之條件,例如不同之頻帶限制頻率分割為低頻次頻帶信號及高頻次頻帶信號。
於步驟S542中,高頻次頻帶功率算出電路202對於自次頻帶分割電路201所供給之各高頻次頻帶信號,進行與上述式(1)相同之運算而算出高頻次頻帶功率,並將其供給至係數推斷電路204。
於步驟S543中,特徵值算出電路203對於自次頻帶分割電路201所供給之各低頻次頻帶信號,進行上述式(1)之運算而將低頻次頻帶功率作為特徵值算出,並將其供給至係數推斷電路204。
藉此,係數推斷電路204中,關於複數個寬頻帶指導信號之各訊框,供給有高頻次頻帶功率與低頻次頻帶功率。
於步驟S544中,係數推斷電路204進行使用最小平方法之回歸分析,針對索引為sb+1至eb之高頻側之次頻帶ib(其中,sb+1≦ib≦eb)之每一個算出係數Aib (kb)與係數Bib
再者,於回歸分析中,將自特徵值算出電路203所供給 之低頻次頻帶功率設為說明變數,將自高頻次頻帶功率算出電路202所供給之高頻次頻帶功率設為被說明變數。又,回歸分析係使用構成供給至係數學習裝置191之所有寬頻帶指導信號的所有訊框之低頻次頻帶功率與高頻次頻帶功率而進行。
於步驟S545中,係數推斷電路204使用經求出之每一個次頻帶ib之係數Aib (kb)與係數Bib ,求出寬頻帶指導信號之各訊框之殘差向量。
例如,係數推斷電路204針對訊框J之每一個次頻帶ib(其中,sb+1≦ib≦eb),自高頻次頻帶功率power(ib,J)中減去乘以係數Aib (kb)後之低頻次頻帶功率power(kb,J)(其中,sb-3≦kb≦sb)之總和與係數Bib 之和而求出殘差。繼而,將包含訊框J之各次頻帶ib之殘差之向量設為殘差向量。
再者,殘差向量係對於構成供給至係數學習裝置191之所有寬頻帶指導信號之所有訊框而算出。
於步驟S546中,係數推斷電路204藉由k-means法等將對於各訊框所求出之殘差向量聚類為若干群集。
又,係數推斷電路204針對每一個群集,求出該群集之重心向量,且對於各訊框之殘差向量,算出群集之重心向量與殘差向量之距離。繼而,係數推斷電路204基於經算出之距離,確定各訊框所屬之群集。即,將具有與訊框之殘差向量之距離最短之重心向量的群集設為該訊框所屬之群集。
於步驟S547中,係數推斷電路204選擇藉由聚類而獲得之複數個群集中之1個群集作為處理對象之群集。
於步驟S548中,係數推斷電路204使用屬於作為處理對象之群集而選擇之群集的殘差向量之訊框,藉由回歸分析而算出各次頻帶ib(其中,sb+1≦ib≦eb)之係數Aib (kb)與係數Bib
即,若將屬於處理對象之群集之殘差向量之訊框稱為處理對象訊框,則將所有處理對象訊框之低頻次頻帶功率與高頻次頻帶功率設為說明變數及被說明變數,並進行使用最小平方法之回歸分析。藉此,針對每一個次頻帶ib獲得係數Aib (kb)與係數Bib
將包含如此而獲得之各次頻帶之係數Aib (kb)與係數Bib 之係數表設為解碼高頻次頻帶功率推斷係數,且將係數索引賦予該解碼高頻次頻帶功率推斷係數。
於步驟S549中,係數學習裝置191判定是否將所有群集作為處理對象之群集而進行處理。於步驟S549中,於判定為尚且未對所有群集進行處理之情形時,處理返回至步驟S547,重複進行上述處理。即,選擇下一個群集作為處理對象,而算出解碼高頻次頻帶功率推斷係數。
相對於此,於步驟S549中,於判定為對所有群集進行處理之情形時,由於獲得欲求出之特定數量之解碼高頻次頻帶功率推斷係數,故而處理進入步驟S550。
於步驟S550中,係數推斷電路204將經求出之係數索引與解碼高頻次頻帶功率推斷係數輸出並記錄於編碼裝置或 解碼裝置,從而使係數學習處理結束。
如上所述,係數學習裝置191根據所供給之寬頻帶指導信號產生各係數索引之解碼高頻次頻帶功率推斷係數(係數表),並將其輸出。如此,使用複數個不同條件之寬頻帶指導信號進行學習,產生係數表,藉此可使係數表之記錄區域之尺寸縮小,並且平均而言可精度良好地推斷高頻次頻帶功率。
上述一系列之處理既可藉由硬體執行,亦可藉由軟體執行。於藉由軟體執行一系列之處理之情形時,構成該軟體之程式係自程式記錄媒體安裝至組裝於專用之硬體之電腦、或藉由安裝各種程式而可執行各種功能之例如通用之個人電腦等中。
圖40係表示利用程式執行上述一系列之處理的電腦之硬體之構成例的方塊圖。
於電腦中,CPU(Central Processing Unit,中央處理單元)501、ROM(Read Only Memory,唯讀記憶體)502、RAM(Random Access Memory,隨機存取記憶體)503係藉由匯流排504而互相連接。
於匯流排504上進而連接有輸入輸出介面505。於輸入輸出介面505上連接有:包含鍵盤、滑鼠、麥克風等之輸入部506;包含顯示器、揚聲器等之輸出部507;包含硬碟或非揮發性記憶體等之記憶部508;包含網路介面等之通訊部509;以及驅動磁碟、光碟、磁光碟或半導體記憶體等可移動媒體511之驅動器510。
於如以上般而構成之電腦中,CPU501例如經由輸入輸出介面505及匯流排504而將記憶部508中所記憶之程式載入至RAM503中並執行,藉此進行上述一系列之處理。
電腦(CPU501)所執行之程式例如係記錄於磁碟(包含軟碟)、光碟(CD-ROM(Compact Disc-Read Only Memory,唯讀光碟),DVD(Digital Versatile Disc,數位影音光碟)等)、磁光碟、或包含半導體記憶體等之套裝軟體媒體即可移動媒體511中,或者,經由區域網路、網際網路、數位衛星廣播等有線或無線之傳輸媒體而提供。
而且,程式可藉由將可移動媒體511安裝於驅動器510上而經由輸入輸出介面505安裝於記憶部508中。又,程式可經由有線或無線之傳輸媒體而由通訊部509接收,並安裝於記憶部508中。此外,程式可預先安裝於ROM502或記憶部508中。
再者,電腦所執行之程式既可為按照本說明書中所說明之順序以時間系列進行處理之程式,亦可為並列地或於進行調用時等必需之時序進行處理之程式。
再者,本發明之實施形態並不限定於上述實施形態,可於不脫離本發明之主旨之範圍內進行各種變更。
10‧‧‧頻帶擴大裝置
11、31、51‧‧‧低通濾波器
12‧‧‧延遲電路
13、13-1至13-N、21、21-1至21-(K+N)‧‧‧帶通濾波器
14、23、34、44、53、93、203‧‧‧特徵值算出電路
15‧‧‧高頻次頻帶功率推斷電路
16‧‧‧高頻信號產生電路
17‧‧‧高通濾波器
18‧‧‧信號加法器
20、50、81、191‧‧‧係數學習裝置
22、92、202‧‧‧高頻次頻帶功率算出電路
24、57、94、204‧‧‧係數推斷電路
30、111‧‧‧編碼裝置
32‧‧‧低頻編碼電路
33、43、52、91、201‧‧‧次頻帶分割電路
35、54‧‧‧虛擬高頻次頻帶功率算出電路
36、55‧‧‧虛擬高頻次頻帶功率差分算出電路
37‧‧‧高頻編碼電路
38‧‧‧多工化電路
39、42‧‧‧低頻解碼電路
40、151‧‧‧解碼裝置
41‧‧‧非多工化電路
45‧‧‧高頻解碼電路
46‧‧‧解碼高頻次頻帶功率算出電路
47‧‧‧解碼高頻信號產生電路
48‧‧‧合成電路
56‧‧‧虛擬高頻次頻帶功率差分聚類電路
121、161‧‧‧擴展縮小部
501‧‧‧CPU
502‧‧‧ROM
503‧‧‧RAM
504‧‧‧匯流排
505‧‧‧輸入輸出介面
506‧‧‧輸入部
507‧‧‧輸出部
508‧‧‧記憶部
509‧‧‧通訊部
510‧‧‧驅動器
511‧‧‧可移動媒體
圖1係表示作為輸入信號之解碼後之低頻之功率光譜、與經推斷之高頻之頻率包絡之一例的圖;圖2係表示在時間上伴隨急遽變化的攻擊性之音樂信號之本來之功率光譜之一例的圖; 圖3係表示本發明之第1實施形態中之頻帶擴大裝置之功能性構成例的方塊圖;圖4係說明圖3之頻帶擴大裝置之頻帶擴大處理之例的流程圖;圖5係表示輸入至圖3之頻帶擴大裝置之信號之功率光譜與帶通濾波器之頻率軸上之配置之圖;圖6係表示聲樂區間之頻率特性與經推斷之高頻之功率光譜之例的圖;圖7係表示輸入至圖3之頻帶擴大裝置之信號之功率光譜之例的圖;圖8係表示圖7之輸入信號之波濾後之功率光譜之例的圖;圖9係表示圖3之頻帶擴大裝置之高頻信號產生電路中所使用之用以進行係數之學習之係數學習裝置之功能性構成例的方塊圖;圖10係說明圖9之係數學習裝置之係數學習處理之例的流程圖;圖11係表示本發明之第2實施形態中之編碼裝置之功能性構成例的方塊圖;圖12係說明圖11之編碼裝置之編碼處理之例的流程圖;圖13係表示本發明之第2實施形態中之解碼裝置之功能性構成例的方塊圖;圖14係說明圖13之解碼裝置之解碼處理之例的流程圖;圖15係表示圖11之編碼裝置之高頻編碼電路中所使用之 代表向量及圖13之解碼裝置之高頻解碼電路中所使用之用以進行解碼高頻次頻帶功率推斷係數之學習之係數學習裝置之功能性構成例的方塊圖;圖16係說明圖15之係數學習裝置之係數學習處理之例的流程圖;圖17係表示圖11之編碼裝置輸出之編碼串之例的圖;圖18係表示編碼裝置之功能性構成例之方塊圖;圖19係說明編碼處理之流程圖;圖20係表示解碼裝置之功能性構成例之方塊圖;圖21係說明解碼處理之流程圖;圖22係說明編碼處理之流程圖;圖23係說明解碼處理之流程圖;圖24係說明編碼處理之流程圖;圖25係說明編碼處理之流程圖;圖26係說明編碼處理之流程圖;圖27係說明編碼處理之流程圖;圖28係表示係數學習裝置之構成例之圖;圖29係說明係數學習處理之流程圖;圖30係對係數表進行說明之圖;圖31係對係數表之擴展進行說明之圖;圖32係對係數表之縮小進行說明之圖;圖33係表示編碼裝置之功能性構成例之方塊圖;圖34係說明編碼處理之流程圖;圖35係表示解碼裝置之功能性構成例之方塊圖; 圖36係說明解碼處理之流程圖;圖37係對混合學習之係數表之共有部分進行說明之圖;圖38係表示係數學習裝置之構成例之圖;圖39係說明係數學習處理之流程圖;及圖40係表示藉由程式執行應用本發明之處理之電腦之硬體之構成例的方塊圖。
10‧‧‧頻帶擴大裝置
11‧‧‧低通濾波器
12‧‧‧延遲電路
13‧‧‧帶通濾波器
13-1‧‧‧帶通濾波器
13-2‧‧‧帶通濾波器
13-N‧‧‧帶通濾波器
14‧‧‧特徵值算出電路
15‧‧‧高頻次頻帶功率推斷電路
16‧‧‧高頻信號產生電路
17‧‧‧高通濾波器
18‧‧‧信號加法器

Claims (14)

  1. 一種信號處理裝置,其包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其係於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號、與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;及高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號。
  2. 如請求項1之信號處理裝置,其中上述擴展縮小部係藉由複製上述係數表中所包含之最高頻率之次頻帶之上述係數,且設為較上述最高頻率更高之頻率之次頻帶之上述係數,而使上述係數表擴展。
  3. 如請求項1之信號處理裝置,其中上述擴展縮小部係藉由將相較於上述高頻次頻帶信號 之次頻帶中之頻率最高之次頻帶更高頻率之次頻帶之上述係數自上述係數表中刪除,而使上述係數表縮小。
  4. 一種信號處理方法,其係信號處理裝置之信號處理方法,該信號處理裝置包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其係於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號、與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;及高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;上述信號處理方法包括如下步驟:上述非多工化部將上述編碼資料非多工化;上述低頻解碼部產生上述低頻信號;上述選擇部選擇上述係數表; 上述擴展縮小部使上述係數表縮小或擴展;上述高頻次頻帶功率算出部算出上述高頻次頻帶功率;及上述高頻信號產生部產生上述高頻信號。
  5. 一種信號處理程式,其係使電腦執行包括如下步驟之處理:將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;將上述低頻編碼資料解碼而產生低頻信號;於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於構成上述低頻信號之各次頻帶之低頻次頻帶信號、與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;及基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號。
  6. 一種信號處理裝置,其包括:次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號、與上述輸入信號之高頻側之複 數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之上述係數表、與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率、與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;及產生部,其產生包含用以獲得所選擇之上述係數表之係數資訊的資料。
  7. 如請求項6之信號處理裝置,其中上述擴展縮小部係藉由複製上述係數表中所包含之最高頻率之次頻帶之上述係數,且設為較上述最高頻率更高之頻率之次頻帶之上述係數,而使上述係數表擴展。
  8. 如請求項6之信號處理裝置,其中上述擴展縮小部係藉由將相較於上述高頻次頻帶信號之次頻帶中之頻率最高之次頻帶更高之頻率之次頻帶之上述係數自上述係數表中刪除,而使上述係數表縮小。
  9. 一種信號處理方法,其係信號處理裝置之信號處理方法,該信號處理裝置包括: 次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號、與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之上述係數表、與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率、與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;及產生部,其產生包含用以獲得所選擇之上述係數表之係數資訊的資料;上述信號處理方法包括如下步驟:上述次頻帶分割部產生上述低頻次頻帶信號與上述高頻次頻帶信號;上述擴展縮小部使上述係數表縮小或擴展;上述虛擬高頻次頻帶功率算出部算出上述虛擬高頻次頻帶功率;上述選擇部選擇上述係數表;及上述產生部產生包含上述係數資訊之資料。
  10. 一種信號處理程式,其係使電腦執行包括如下步驟之處理:產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號、與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;基於經擴展或縮小之上述係數表、與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;及產生包含用以獲得所選擇之上述係數表之係數資訊的資料。
  11. 一種解碼裝置,其包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數 資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號、與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;及合成部,其合成上述低頻信號與上述高頻信號,而產生輸出信號。
  12. 一種解碼方法,其係解碼裝置之解碼方法,該解碼裝置包括:非多工化部,其將所輸入之編碼資料非多工化為至少低頻編碼資料與係數資訊;低頻解碼部,其將上述低頻編碼資料解碼而產生低頻信號;選擇部,其於用於產生高頻信號之包含高頻側之每一個次頻帶之係數的複數個係數表中,選擇藉由上述係數資訊而獲得之係數表;擴展縮小部,其刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展; 高頻次頻帶功率算出部,其基於構成上述低頻信號之各次頻帶之低頻次頻帶信號、與經擴展或縮小之上述係數表,算出構成上述高頻信號之各次頻帶之高頻次頻帶信號之高頻次頻帶功率;高頻信號產生部,其基於上述高頻次頻帶功率與上述低頻次頻帶信號,產生上述高頻信號;及合成部,其合成上述低頻信號與上述高頻信號,而產生輸出信號;上述解碼方法包括如下步驟:上述非多工化部將上述編碼資料非多工化;上述低頻解碼部產生上述低頻信號;上述選擇部選擇上述係數表;上述擴展縮小部使上述係數表縮小或擴展;上述高頻次頻帶功率算出部算出上述高頻次頻帶功率;上述高頻信號產生部產生上述高頻信號;及上述合成部產生上述輸出信號。
  13. 一種編碼裝置,其包括:次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號、與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次 頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之上述係數表、與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;高頻編碼部,其對用以獲得所選擇之上述係數表之係數資訊進行編碼而產生高頻編碼資料;低頻編碼部,其對上述輸入信號之低頻信號進行編碼,並產生低頻編碼資料;及多工化部,其將上述低頻編碼資料與上述高頻編碼資料多工化而產生輸出編碼串。
  14. 一種編碼方法,其係編碼裝置之編碼方法,該編碼裝置包括:次頻帶分割部,其產生輸入信號之低頻側之複數個次頻帶之低頻次頻帶信號、與上述輸入信號之高頻側之複數個次頻帶之高頻次頻帶信號;擴展縮小部,其對於包含高頻側之每一個次頻帶之係數之係數表,刪除若干次頻帶之上述係數而使上述係數表縮小,或基於若干次頻帶之上述係數而產生特定之次頻帶之上述係數,藉此使上述係數表擴展;虛擬高頻次頻帶功率算出部,其基於經擴展或縮小之 上述係數表、與上述低頻次頻帶信號,針對高頻側之每一個次頻帶算出上述高頻次頻帶信號之功率之推斷值即虛擬高頻次頻帶功率;選擇部,其將上述高頻次頻帶信號之高頻次頻帶功率與上述虛擬高頻次頻帶功率進行比較,而選擇複數個上述係數表中之任一個;高頻編碼部,其對用以獲得所選擇之上述係數表之係數資訊進行編碼而產生高頻編碼資料;低頻編碼部,其對上述輸入信號之低頻信號進行編碼,並產生低頻編碼資料;及多工化部,其將上述低頻編碼資料與上述高頻編碼資料多工化而產生輸出編碼串;上述編碼方法包括如下步驟:上述次頻帶分割部產生上述低頻次頻帶信號與上述高頻次頻帶信號;上述擴展縮小部使上述係數表縮小或擴展;上述虛擬高頻次頻帶功率算出部算出上述虛擬高頻次頻帶功率;上述選擇部選擇上述係數表;上述高頻編碼部產生上述高頻編碼資料;上述低頻編碼部產生上述低頻編碼資料;及上述多工化部產生上述輸出編碼串。
TW100112671A 2010-04-13 2011-04-12 Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program TWI484482B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010092689 2010-04-13
JP2011017230 2011-01-28
JP2011072381A JP5609737B2 (ja) 2010-04-13 2011-03-29 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
TW201209807A TW201209807A (en) 2012-03-01
TWI484482B true TWI484482B (zh) 2015-05-11

Family

ID=44798678

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100112671A TWI484482B (zh) 2010-04-13 2011-04-12 Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program

Country Status (12)

Country Link
US (2) US8949119B2 (zh)
EP (1) EP2562754B1 (zh)
JP (1) JP5609737B2 (zh)
KR (1) KR101801996B1 (zh)
CN (1) CN102822891B (zh)
BR (1) BR112012025580A2 (zh)
CO (1) CO6561766A2 (zh)
ES (1) ES2534749T3 (zh)
MY (1) MY168695A (zh)
RU (1) RU2563160C2 (zh)
TW (1) TWI484482B (zh)
WO (1) WO2011129305A1 (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8284955B2 (en) 2006-02-07 2012-10-09 Bongiovi Acoustics Llc System and method for digital signal processing
US11431312B2 (en) 2004-08-10 2022-08-30 Bongiovi Acoustics Llc System and method for digital signal processing
US10848118B2 (en) 2004-08-10 2020-11-24 Bongiovi Acoustics Llc System and method for digital signal processing
US10158337B2 (en) 2004-08-10 2018-12-18 Bongiovi Acoustics Llc System and method for digital signal processing
US10848867B2 (en) 2006-02-07 2020-11-24 Bongiovi Acoustics Llc System and method for digital signal processing
US10701505B2 (en) 2006-02-07 2020-06-30 Bongiovi Acoustics Llc. System, method, and apparatus for generating and digitally processing a head related audio transfer function
JP5754899B2 (ja) 2009-10-07 2015-07-29 ソニー株式会社 復号装置および方法、並びにプログラム
JP5850216B2 (ja) 2010-04-13 2016-02-03 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5609737B2 (ja) 2010-04-13 2014-10-22 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5652658B2 (ja) 2010-04-13 2015-01-14 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP6075743B2 (ja) 2010-08-03 2017-02-08 ソニー株式会社 信号処理装置および方法、並びにプログラム
JP5707842B2 (ja) 2010-10-15 2015-04-30 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
JP5743137B2 (ja) 2011-01-14 2015-07-01 ソニー株式会社 信号処理装置および方法、並びにプログラム
JP5942358B2 (ja) 2011-08-24 2016-06-29 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
JP5975243B2 (ja) 2011-08-24 2016-08-23 ソニー株式会社 符号化装置および方法、並びにプログラム
JP6037156B2 (ja) 2011-08-24 2016-11-30 ソニー株式会社 符号化装置および方法、並びにプログラム
RU2725416C1 (ru) 2012-03-29 2020-07-02 Телефонактиеболагет Лм Эрикссон (Пабл) Расширение полосы частот гармонического аудиосигнала
RU2649944C2 (ru) 2012-07-02 2018-04-05 Сони Корпорейшн Устройство декодирования, способ декодирования, устройство кодирования, способ кодирования и программа
CN103474079A (zh) * 2012-08-06 2013-12-25 苏州沃通信息科技有限公司 一种语音编码方法
JP6305694B2 (ja) * 2013-05-31 2018-04-04 クラリオン株式会社 信号処理装置及び信号処理方法
US9883318B2 (en) 2013-06-12 2018-01-30 Bongiovi Acoustics Llc System and method for stereo field enhancement in two-channel audio systems
JP6531649B2 (ja) 2013-09-19 2019-06-19 ソニー株式会社 符号化装置および方法、復号化装置および方法、並びにプログラム
US9906858B2 (en) 2013-10-22 2018-02-27 Bongiovi Acoustics Llc System and method for digital signal processing
RU2764260C2 (ru) 2013-12-27 2022-01-14 Сони Корпорейшн Устройство и способ декодирования
US10820883B2 (en) 2014-04-16 2020-11-03 Bongiovi Acoustics Llc Noise reduction assembly for auscultation of a body
US10200711B2 (en) 2015-03-27 2019-02-05 Qualcomm Incorporated Motion vector derivation in video coding
US11565365B2 (en) * 2017-11-13 2023-01-31 Taiwan Semiconductor Manufacturing Co., Ltd. System and method for monitoring chemical mechanical polishing
JP2019164106A (ja) * 2018-03-20 2019-09-26 本田技研工業株式会社 異音検出装置および検出方法
JP2019164107A (ja) * 2018-03-20 2019-09-26 本田技研工業株式会社 異音判定装置および判定方法
KR20200143707A (ko) 2018-04-11 2020-12-24 본지오비 어커스틱스 엘엘씨 오디오 향상 청력 보호 시스템
CN110660409A (zh) * 2018-06-29 2020-01-07 华为技术有限公司 一种扩频的方法及装置
US10959035B2 (en) 2018-08-02 2021-03-23 Bongiovi Acoustics Llc System, method, and apparatus for generating and digitally processing a head related audio transfer function
KR20210153455A (ko) 2020-06-10 2021-12-17 김승찬 농가용 간편 비가림 시설
TWI763207B (zh) * 2020-12-25 2022-05-01 宏碁股份有限公司 聲音訊號處理評估方法及裝置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03254223A (ja) * 1990-03-02 1991-11-13 Eastman Kodak Japan Kk アナログデータ伝送方式
TW453046B (en) * 1999-10-11 2001-09-01 Jang Jen Cheng A technique for speech camouflage based on sub-band division
TWI243615B (en) * 2004-10-11 2005-11-11 Ind Tech Res Inst System for enhancing compression ratio of scalable video coding and method thereof
TWI268665B (en) * 2002-07-19 2006-12-11 Nec Corp Audio decoding device, decoding method and program
JP2007171821A (ja) * 2005-12-26 2007-07-05 Sony Corp 信号符号化装置及び方法、信号復号装置及び方法、並びにプログラム及び記録媒体
JP2008139844A (ja) * 2006-11-09 2008-06-19 Sony Corp 周波数帯域拡大装置及び周波数帯域拡大方法、再生装置及び再生方法、並びに、プログラム及び記録媒体
TW200926148A (en) * 2007-11-06 2009-06-16 Nokia Corp An encoder
WO2010024371A1 (ja) * 2008-08-29 2010-03-04 ソニー株式会社 周波数帯域拡大装置及び方法、符号化装置及び方法、復号化装置及び方法、並びにプログラム

Family Cites Families (154)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4628529A (en) 1985-07-01 1986-12-09 Motorola, Inc. Noise suppression system
JPH1020888A (ja) 1996-07-02 1998-01-23 Matsushita Electric Ind Co Ltd 音声符号化・復号化装置
US6073100A (en) 1997-03-31 2000-06-06 Goodridge, Jr.; Alan G Method and apparatus for synthesizing signals using transform-domain match-output extension
SE512719C2 (sv) 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
CN1144179C (zh) 1997-07-11 2004-03-31 索尼株式会社 声音信号解码方法和装置、声音信号编码方法和装置
US6424938B1 (en) * 1998-11-23 2002-07-23 Telefonaktiebolaget L M Ericsson Complex signal activity detection for improved speech/noise classification of an audio signal
SE9903553D0 (sv) 1999-01-27 1999-10-01 Lars Liljeryd Enhancing percepptual performance of SBR and related coding methods by adaptive noise addition (ANA) and noise substitution limiting (NSL)
US6829360B1 (en) 1999-05-14 2004-12-07 Matsushita Electric Industrial Co., Ltd. Method and apparatus for expanding band of audio signal
SE0001926D0 (sv) * 2000-05-23 2000-05-23 Lars Liljeryd Improved spectral translation/folding in the subband domain
SE0004163D0 (sv) 2000-11-14 2000-11-14 Coding Technologies Sweden Ab Enhancing perceptual performance of high frequency reconstruction coding methods by adaptive filtering
JP2002268698A (ja) 2001-03-08 2002-09-20 Nec Corp 音声認識装置と標準パターン作成装置及び方法並びにプログラム
SE0101175D0 (sv) 2001-04-02 2001-04-02 Coding Technologies Sweden Ab Aliasing reduction using complex-exponential-modulated filterbanks
JP4231987B2 (ja) 2001-06-15 2009-03-04 日本電気株式会社 音声符号化復号方式間の符号変換方法、その装置、そのプログラム及び記憶媒体
US7260541B2 (en) 2001-07-13 2007-08-21 Matsushita Electric Industrial Co., Ltd. Audio signal decoding device and audio signal encoding device
US6988066B2 (en) 2001-10-04 2006-01-17 At&T Corp. Method of bandwidth extension for narrow-band speech
US6895375B2 (en) 2001-10-04 2005-05-17 At&T Corp. System for bandwidth extension of Narrow-band speech
CN100395817C (zh) * 2001-11-14 2008-06-18 松下电器产业株式会社 编码设备、解码设备和解码方法
JP3926726B2 (ja) * 2001-11-14 2007-06-06 松下電器産業株式会社 符号化装置および復号化装置
JP3870193B2 (ja) 2001-11-29 2007-01-17 コーディング テクノロジーズ アクチボラゲット 高周波再構成に用いる符号器、復号器、方法及びコンピュータプログラム
DE60323331D1 (de) 2002-01-30 2008-10-16 Matsushita Electric Ind Co Ltd Verfahren und vorrichtung zur audio-kodierung und -dekodierung
JP2003255973A (ja) 2002-02-28 2003-09-10 Nec Corp 音声帯域拡張システムおよび方法
US20030187663A1 (en) 2002-03-28 2003-10-02 Truman Michael Mead Broadband frequency translation for high frequency regeneration
US7447631B2 (en) 2002-06-17 2008-11-04 Dolby Laboratories Licensing Corporation Audio coding system using spectral hole filling
JP4728568B2 (ja) 2002-09-04 2011-07-20 マイクロソフト コーポレーション レベル・モードとラン・レングス/レベル・モードの間での符号化を適応させるエントロピー符号化
JP3881943B2 (ja) 2002-09-06 2007-02-14 松下電器産業株式会社 音響符号化装置及び音響符号化方法
SE0202770D0 (sv) 2002-09-18 2002-09-18 Coding Technologies Sweden Ab Method for reduction of aliasing introduces by spectral envelope adjustment in real-valued filterbanks
EP1543307B1 (en) 2002-09-19 2006-02-22 Matsushita Electric Industrial Co., Ltd. Audio decoding apparatus and method
US7330812B2 (en) 2002-10-04 2008-02-12 National Research Council Of Canada Method and apparatus for transmitting an audio stream having additional payload in a hidden sub-channel
JP4657570B2 (ja) * 2002-11-13 2011-03-23 ソニー株式会社 音楽情報符号化装置及び方法、音楽情報復号装置及び方法、並びにプログラム及び記録媒体
EP2665294A2 (en) 2003-03-04 2013-11-20 Core Wireless Licensing S.a.r.l. Support of a multichannel audio extension
US7318035B2 (en) 2003-05-08 2008-01-08 Dolby Laboratories Licensing Corporation Audio coding systems and methods using spectral component coupling and spectral component regeneration
US20050004793A1 (en) * 2003-07-03 2005-01-06 Pasi Ojala Signal adaptation for higher band coding in a codec utilizing band split coding
KR20050027179A (ko) 2003-09-13 2005-03-18 삼성전자주식회사 오디오 데이터 복원 방법 및 그 장치
US7844451B2 (en) 2003-09-16 2010-11-30 Panasonic Corporation Spectrum coding/decoding apparatus and method for reducing distortion of two band spectrums
BRPI0415464B1 (pt) 2003-10-23 2019-04-24 Panasonic Intellectual Property Management Co., Ltd. Aparelho e método de codificação de espectro.
KR100587953B1 (ko) 2003-12-26 2006-06-08 한국전자통신연구원 대역-분할 광대역 음성 코덱에서의 고대역 오류 은닉 장치 및 그를 이용한 비트스트림 복호화 시스템
EP3336843B1 (en) 2004-05-14 2021-06-23 Panasonic Intellectual Property Corporation of America Speech coding method and speech coding apparatus
KR20070012832A (ko) 2004-05-19 2007-01-29 마츠시타 덴끼 산교 가부시키가이샤 부호화 장치, 복호화 장치 및 이들의 방법
EP1749296B1 (en) 2004-05-28 2010-07-14 Nokia Corporation Multichannel audio extension
KR100608062B1 (ko) * 2004-08-04 2006-08-02 삼성전자주식회사 오디오 데이터의 고주파수 복원 방법 및 그 장치
US7716046B2 (en) 2004-10-26 2010-05-11 Qnx Software Systems (Wavemakers), Inc. Advanced periodic signal enhancement
US20060106620A1 (en) 2004-10-28 2006-05-18 Thompson Jeffrey K Audio spatial environment down-mixer
SE0402651D0 (sv) 2004-11-02 2004-11-02 Coding Tech Ab Advanced methods for interpolation and parameter signalling
US7769584B2 (en) 2004-11-05 2010-08-03 Panasonic Corporation Encoder, decoder, encoding method, and decoding method
KR20070084002A (ko) 2004-11-05 2007-08-24 마츠시타 덴끼 산교 가부시키가이샤 스케일러블 복호화 장치 및 스케일러블 부호화 장치
KR100657916B1 (ko) 2004-12-01 2006-12-14 삼성전자주식회사 주파수 대역간의 유사도를 이용한 오디오 신호 처리 장치및 방법
EP1840874B1 (en) 2005-01-11 2019-04-10 NEC Corporation Audio encoding device, audio encoding method, and audio encoding program
RU2376657C2 (ru) 2005-04-01 2009-12-20 Квэлкомм Инкорпорейтед Системы, способы и устройства для высокополосного предыскажения шкалы времени
ATE421845T1 (de) 2005-04-15 2009-02-15 Dolby Sweden Ab Zeitliche hüllkurvenformgebung von entkorrelierten signalen
US20070005351A1 (en) * 2005-06-30 2007-01-04 Sathyendra Harsha M Method and system for bandwidth expansion for voice communications
JP4899359B2 (ja) 2005-07-11 2012-03-21 ソニー株式会社 信号符号化装置及び方法、信号復号装置及び方法、並びにプログラム及び記録媒体
KR100813259B1 (ko) 2005-07-13 2008-03-13 삼성전자주식회사 입력신호의 계층적 부호화/복호화 장치 및 방법
WO2007026821A1 (ja) 2005-09-02 2007-03-08 Matsushita Electric Industrial Co., Ltd. エネルギー整形装置及びエネルギー整形方法
WO2007037361A1 (ja) 2005-09-30 2007-04-05 Matsushita Electric Industrial Co., Ltd. 音声符号化装置および音声符号化方法
CN102623014A (zh) 2005-10-14 2012-08-01 松下电器产业株式会社 变换编码装置和变换编码方法
JP4950210B2 (ja) 2005-11-04 2012-06-13 ノキア コーポレイション オーディオ圧縮
JP4863713B2 (ja) 2005-12-29 2012-01-25 富士通株式会社 雑音抑制装置、雑音抑制方法、及びコンピュータプログラム
US7953604B2 (en) * 2006-01-20 2011-05-31 Microsoft Corporation Shape and scale parameters for extended-band frequency coding
US7590523B2 (en) 2006-03-20 2009-09-15 Mindspeed Technologies, Inc. Speech post-processing using MDCT coefficients
WO2007114291A1 (ja) 2006-03-31 2007-10-11 Matsushita Electric Industrial Co., Ltd. 音声符号化装置、音声復号化装置、およびこれらの方法
US20100161323A1 (en) 2006-04-27 2010-06-24 Panasonic Corporation Audio encoding device, audio decoding device, and their method
JP2007316254A (ja) 2006-05-24 2007-12-06 Sony Corp オーディオ信号補間方法及びオーディオ信号補間装置
KR20070115637A (ko) 2006-06-03 2007-12-06 삼성전자주식회사 대역폭 확장 부호화 및 복호화 방법 및 장치
US8010352B2 (en) 2006-06-21 2011-08-30 Samsung Electronics Co., Ltd. Method and apparatus for adaptively encoding and decoding high frequency band
US8260609B2 (en) 2006-07-31 2012-09-04 Qualcomm Incorporated Systems, methods, and apparatus for wideband encoding and decoding of inactive frames
EP2063418A4 (en) 2006-09-15 2010-12-15 Panasonic Corp AUDIO CODING DEVICE AND AUDIO CODING METHOD
JP4918841B2 (ja) 2006-10-23 2012-04-18 富士通株式会社 符号化システム
US8295507B2 (en) 2006-11-09 2012-10-23 Sony Corporation Frequency band extending apparatus, frequency band extending method, player apparatus, playing method, program and recording medium
KR101565919B1 (ko) 2006-11-17 2015-11-05 삼성전자주식회사 고주파수 신호 부호화 및 복호화 방법 및 장치
CN101548318B (zh) 2006-12-15 2012-07-18 松下电器产业株式会社 编码装置、解码装置以及其方法
RU2394283C1 (ru) * 2007-02-14 2010-07-10 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способы и устройства для кодирования и декодирования объектно-базированных аудиосигналов
JP2008261978A (ja) 2007-04-11 2008-10-30 Toshiba Microelectronics Corp 再生音量自動調整方法
US8015368B2 (en) 2007-04-20 2011-09-06 Siport, Inc. Processor extensions for accelerating spectral band replication
KR101355376B1 (ko) 2007-04-30 2014-01-23 삼성전자주식회사 고주파수 영역 부호화 및 복호화 방법 및 장치
WO2009001874A1 (ja) 2007-06-27 2008-12-31 Nec Corporation オーディオ符号化方法、オーディオ復号方法、オーディオ符号化装置、オーディオ復号装置、プログラム、およびオーディオ符号化・復号システム
WO2009004727A1 (ja) 2007-07-04 2009-01-08 Fujitsu Limited 符号化装置、符号化方法および符号化プログラム
JP5045295B2 (ja) 2007-07-30 2012-10-10 ソニー株式会社 信号処理装置及び方法、並びにプログラム
US8041577B2 (en) 2007-08-13 2011-10-18 Mitsubishi Electric Research Laboratories, Inc. Method for expanding audio signal bandwidth
JP5183741B2 (ja) 2007-08-27 2013-04-17 テレフオンアクチーボラゲット エル エム エリクソン(パブル) ノイズ補充と帯域拡張との間の遷移周波数の適合
CN101790756B (zh) 2007-08-27 2012-09-05 爱立信电话股份有限公司 瞬态检测器以及用于支持音频信号的编码的方法
CA2698031C (en) 2007-08-27 2016-10-18 Telefonaktiebolaget Lm Ericsson (Publ) Method and device for noise filling
WO2009054393A1 (ja) * 2007-10-23 2009-04-30 Clarion Co., Ltd. 高域補間装置および高域補間方法
JP4733727B2 (ja) 2007-10-30 2011-07-27 日本電信電話株式会社 音声楽音擬似広帯域化装置と音声楽音擬似広帯域化方法、及びそのプログラムとその記録媒体
KR101373004B1 (ko) 2007-10-30 2014-03-26 삼성전자주식회사 고주파수 신호 부호화 및 복호화 장치 및 방법
JP5404412B2 (ja) 2007-11-01 2014-01-29 パナソニック株式会社 符号化装置、復号装置およびこれらの方法
JP5547081B2 (ja) 2007-11-02 2014-07-09 華為技術有限公司 音声復号化方法及び装置
US20090132238A1 (en) 2007-11-02 2009-05-21 Sudhakar B Efficient method for reusing scale factors to improve the efficiency of an audio encoder
CN101868821B (zh) * 2007-11-21 2015-09-23 Lg电子株式会社 用于处理信号的方法和装置
US8688441B2 (en) 2007-11-29 2014-04-01 Motorola Mobility Llc Method and apparatus to facilitate provision and use of an energy value to determine a spectral envelope shape for out-of-signal bandwidth content
WO2009081568A1 (ja) * 2007-12-21 2009-07-02 Panasonic Corporation 符号化装置、復号装置および符号化方法
US20100280833A1 (en) 2007-12-27 2010-11-04 Panasonic Corporation Encoding device, decoding device, and method thereof
ATE518224T1 (de) 2008-01-04 2011-08-15 Dolby Int Ab Audiokodierer und -dekodierer
CN101925953B (zh) 2008-01-25 2012-06-20 松下电器产业株式会社 编码装置、解码装置以及其方法
KR101413968B1 (ko) 2008-01-29 2014-07-01 삼성전자주식회사 오디오 신호의 부호화, 복호화 방법 및 장치
US8433582B2 (en) 2008-02-01 2013-04-30 Motorola Mobility Llc Method and apparatus for estimating high-band energy in a bandwidth extension system
US20090201983A1 (en) 2008-02-07 2009-08-13 Motorola, Inc. Method and apparatus for estimating high-band energy in a bandwidth extension system
WO2009110738A2 (ko) 2008-03-03 2009-09-11 엘지전자(주) 오디오 신호 처리 방법 및 장치
KR101449434B1 (ko) 2008-03-04 2014-10-13 삼성전자주식회사 복수의 가변장 부호 테이블을 이용한 멀티 채널 오디오를부호화/복호화하는 방법 및 장치
ES2898865T3 (es) 2008-03-20 2022-03-09 Fraunhofer Ges Forschung Aparato y método para sintetizar una representación parametrizada de una señal de audio
KR20090122142A (ko) 2008-05-23 2009-11-26 엘지전자 주식회사 오디오 신호 처리 방법 및 장치
US8498344B2 (en) 2008-06-20 2013-07-30 Rambus Inc. Frequency responsive bus coding
JP2010007927A (ja) 2008-06-25 2010-01-14 Sumitomo Heavy Ind Ltd 駆動回路
PL3246918T3 (pl) 2008-07-11 2023-11-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Dekoder audio, sposób dekodowania sygnału audio oraz program komputerowy
BRPI0910792B1 (pt) 2008-07-11 2020-03-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. "sintetizador de sinal de áudio e codificador de sinal de áudio"
JP5203077B2 (ja) 2008-07-14 2013-06-05 株式会社エヌ・ティ・ティ・ドコモ 音声符号化装置及び方法、音声復号化装置及び方法、並びに、音声帯域拡張装置及び方法
CN102099855B (zh) 2008-08-08 2012-09-26 松下电器产业株式会社 频谱平滑化装置、编码装置、解码装置、通信终端装置、基站装置以及频谱平滑化方法
WO2010028299A1 (en) 2008-09-06 2010-03-11 Huawei Technologies Co., Ltd. Noise-feedback for spectral envelope quantization
WO2010028292A1 (en) 2008-09-06 2010-03-11 Huawei Technologies Co., Ltd. Adaptive frequency prediction
US8352279B2 (en) 2008-09-06 2013-01-08 Huawei Technologies Co., Ltd. Efficient temporal envelope coding approach by prediction between low band signal and high band signal
US8798776B2 (en) 2008-09-30 2014-08-05 Dolby International Ab Transcoding of audio metadata
GB0822537D0 (en) 2008-12-10 2009-01-14 Skype Ltd Regeneration of wideband speech
GB2466201B (en) 2008-12-10 2012-07-11 Skype Ltd Regeneration of wideband speech
CN101770776B (zh) 2008-12-29 2011-06-08 华为技术有限公司 瞬态信号的编码方法和装置、解码方法和装置及处理系统
PL3598447T3 (pl) * 2009-01-16 2022-02-14 Dolby International Ab Transpozycja harmonicznych rozszerzona o iloczyn wektorowy
US8457975B2 (en) 2009-01-28 2013-06-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio decoder, audio encoder, methods for decoding and encoding an audio signal and computer program
JP4945586B2 (ja) 2009-02-02 2012-06-06 株式会社東芝 信号帯域拡張装置
US8463599B2 (en) 2009-02-04 2013-06-11 Motorola Mobility Llc Bandwidth extension method and apparatus for a modified discrete cosine transform audio coder
JP5564803B2 (ja) 2009-03-06 2014-08-06 ソニー株式会社 音響機器及び音響処理方法
EP2239732A1 (en) 2009-04-09 2010-10-13 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Apparatus and method for generating a synthesis audio signal and for encoding an audio signal
CO6440537A2 (es) 2009-04-09 2012-05-15 Fraunhofer Ges Forschung Aparato y metodo para generar una señal de audio de sintesis y para codificar una señal de audio
JP5223786B2 (ja) 2009-06-10 2013-06-26 富士通株式会社 音声帯域拡張装置、音声帯域拡張方法及び音声帯域拡張用コンピュータプログラムならびに電話機
US8515768B2 (en) 2009-08-31 2013-08-20 Apple Inc. Enhanced audio decoder
JP5754899B2 (ja) 2009-10-07 2015-07-29 ソニー株式会社 復号装置および方法、並びにプログラム
US8600749B2 (en) * 2009-12-08 2013-12-03 At&T Intellectual Property I, L.P. System and method for training adaptation-specific acoustic models for automatic speech recognition
US8447617B2 (en) 2009-12-21 2013-05-21 Mindspeed Technologies, Inc. Method and system for speech bandwidth extension
KR101423737B1 (ko) 2010-01-21 2014-07-24 한국전자통신연구원 오디오 신호의 디코딩 방법 및 장치
JP5375683B2 (ja) 2010-03-10 2013-12-25 富士通株式会社 通信装置および電力補正方法
EP2555188B1 (en) 2010-03-31 2014-05-14 Fujitsu Limited Bandwidth extension apparatuses and methods
JP5850216B2 (ja) 2010-04-13 2016-02-03 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5652658B2 (ja) 2010-04-13 2015-01-14 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5609737B2 (ja) 2010-04-13 2014-10-22 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
CN103069484B (zh) 2010-04-14 2014-10-08 华为技术有限公司 时/频二维后处理
PL2596497T3 (pl) 2010-07-19 2014-10-31 Dolby Int Ab Przetwarzanie sygnałów audio podczas rekonstrukcji wysokiej częstotliwości
US9047875B2 (en) 2010-07-19 2015-06-02 Futurewei Technologies, Inc. Spectrum flatness control for bandwidth extension
US8560330B2 (en) * 2010-07-19 2013-10-15 Futurewei Technologies, Inc. Energy envelope perceptual correction for high band coding
JP6075743B2 (ja) 2010-08-03 2017-02-08 ソニー株式会社 信号処理装置および方法、並びにプログラム
JP2012058358A (ja) 2010-09-07 2012-03-22 Sony Corp 雑音抑圧装置、雑音抑圧方法およびプログラム
JP5707842B2 (ja) 2010-10-15 2015-04-30 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
WO2012052802A1 (en) 2010-10-18 2012-04-26 Nokia Corporation An audio encoder/decoder apparatus
JP5743137B2 (ja) 2011-01-14 2015-07-01 ソニー株式会社 信号処理装置および方法、並びにプログラム
JP5704397B2 (ja) 2011-03-31 2015-04-22 ソニー株式会社 符号化装置および方法、並びにプログラム
JP5942358B2 (ja) 2011-08-24 2016-06-29 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
JP6037156B2 (ja) 2011-08-24 2016-11-30 ソニー株式会社 符号化装置および方法、並びにプログラム
JP5975243B2 (ja) 2011-08-24 2016-08-23 ソニー株式会社 符号化装置および方法、並びにプログラム
JP5845760B2 (ja) 2011-09-15 2016-01-20 ソニー株式会社 音声処理装置および方法、並びにプログラム
EP2761618B1 (en) 2011-09-29 2016-11-30 Dolby International AB High quality detection in fm stereo radio signals
CN104205210A (zh) 2012-04-13 2014-12-10 索尼公司 解码设备和方法、音频信号处理设备和方法以及程序
JP5997592B2 (ja) 2012-04-27 2016-09-28 株式会社Nttドコモ 音声復号装置
RU2649944C2 (ru) 2012-07-02 2018-04-05 Сони Корпорейшн Устройство декодирования, способ декодирования, устройство кодирования, способ кодирования и программа
TWI517142B (zh) 2012-07-02 2016-01-11 Sony Corp Audio decoding apparatus and method, audio coding apparatus and method, and program
CN103748629B (zh) 2012-07-02 2017-04-05 索尼公司 解码装置和方法、编码装置和方法以及程序
BR112014004128A2 (pt) 2012-07-02 2017-03-21 Sony Corp dispositivo e método de decodificação, dispositivo e método de codificação, e, programa
JP2014123011A (ja) 2012-12-21 2014-07-03 Sony Corp 雑音検出装置および方法、並びに、プログラム
JP6531649B2 (ja) 2013-09-19 2019-06-19 ソニー株式会社 符号化装置および方法、復号化装置および方法、並びにプログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03254223A (ja) * 1990-03-02 1991-11-13 Eastman Kodak Japan Kk アナログデータ伝送方式
TW453046B (en) * 1999-10-11 2001-09-01 Jang Jen Cheng A technique for speech camouflage based on sub-band division
TWI268665B (en) * 2002-07-19 2006-12-11 Nec Corp Audio decoding device, decoding method and program
TWI243615B (en) * 2004-10-11 2005-11-11 Ind Tech Res Inst System for enhancing compression ratio of scalable video coding and method thereof
JP2007171821A (ja) * 2005-12-26 2007-07-05 Sony Corp 信号符号化装置及び方法、信号復号装置及び方法、並びにプログラム及び記録媒体
JP2008139844A (ja) * 2006-11-09 2008-06-19 Sony Corp 周波数帯域拡大装置及び周波数帯域拡大方法、再生装置及び再生方法、並びに、プログラム及び記録媒体
TW200926148A (en) * 2007-11-06 2009-06-16 Nokia Corp An encoder
WO2010024371A1 (ja) * 2008-08-29 2010-03-04 ソニー株式会社 周波数帯域拡大装置及び方法、符号化装置及び方法、復号化装置及び方法、並びにプログラム

Also Published As

Publication number Publication date
US8949119B2 (en) 2015-02-03
US9659573B2 (en) 2017-05-23
EP2562754B1 (en) 2015-03-18
BR112012025580A2 (pt) 2016-06-28
TW201209807A (en) 2012-03-01
MY168695A (en) 2018-11-29
CN102822891B (zh) 2014-05-07
EP2562754A4 (en) 2013-12-18
US20130030818A1 (en) 2013-01-31
RU2012142674A (ru) 2014-04-10
KR20130042474A (ko) 2013-04-26
CN102822891A (zh) 2012-12-12
ES2534749T3 (es) 2015-04-28
CO6561766A2 (es) 2012-11-15
WO2011129305A1 (ja) 2011-10-20
KR101801996B1 (ko) 2017-11-27
JP5609737B2 (ja) 2014-10-22
US20150120307A1 (en) 2015-04-30
RU2563160C2 (ru) 2015-09-20
EP2562754A1 (en) 2013-02-27
JP2012168495A (ja) 2012-09-06

Similar Documents

Publication Publication Date Title
TWI484482B (zh) Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program
TWI480863B (zh) Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and program product
TWI479481B (zh) Encoding apparatus and method, decoding apparatus and method, and program
TWI480862B (zh) Band expanding apparatus and method, coding apparatus and method, decoding apparatus and method, and program
TWI484484B (zh) Signal processing apparatus and method, coding apparatus and method, decoding apparatus and method, and signal processing program
JP6508551B2 (ja) 復号装置および方法、並びにプログラム

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees