TW201137859A - Sound signal processing apparatus, sound encoding apparatus and sound decoding apparatus - Google Patents

Sound signal processing apparatus, sound encoding apparatus and sound decoding apparatus Download PDF

Info

Publication number
TW201137859A
TW201137859A TW99135730A TW99135730A TW201137859A TW 201137859 A TW201137859 A TW 201137859A TW 99135730 A TW99135730 A TW 99135730A TW 99135730 A TW99135730 A TW 99135730A TW 201137859 A TW201137859 A TW 201137859A
Authority
TW
Taiwan
Prior art keywords
qmf
coefficient
acoustic signal
sequence
adjustment
Prior art date
Application number
TW99135730A
Other languages
English (en)
Other versions
TWI509596B (zh
Inventor
Tomokazu Ishikawa
Takeshi Norimatsu
Kok Seng Chong
Huan Zhou
hai-shan Zhong
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW201137859A publication Critical patent/TW201137859A/zh
Application granted granted Critical
Publication of TWI509596B publication Critical patent/TWI509596B/zh

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04Time compression or expansion
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • G10L21/0388Details of processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Circuit For Audible Band Transducer (AREA)

Description

201137859 六、發明說明: 【發明所屬之技彳椅領域】 發明領域 本發明係關於將聲響信號及聲音信號(以下稱為聲響 信號)作數位信號處理的聲響信號處理裝置。
L· mT 'J 發明背景 以將聲響彳s號在時間軸上作壓縮或作擴展的技術而 言,有一種稱為相角音碼器(PhaseV〇c〇der)的技術。非專利 文獻1所揭示的相角音碼器裝置係在經數位化的聲響信號 適用咼速傅立葉轉換(FFT : Fast Fourier Transform)或短時 間傅立葉轉換(STFT . Short Time Fourier Transform),在頻 率領域實現時間方向的伸縮處理(時間擴展處理)、及音高轉 換處理(音高調節處理)等。 音高(pitch)亦被稱為音高頻率,意指聲音的高低。時間 擴展處理係不會改變聲響信號的纟高而將聲響信號的時間 長作伸縮的處理。音高調節處理係頻率調變處理之例係 不會改變聲響信號的時間長而改變聲響信號的音高的處 理。音高調節處理亦被稱為音高擴展處理。 若聲響信號的再生速度被單純變更時,聲響信號的時 間長及音高之雙方即被變更。另—方面,亦會有未改變音 高而作時間㈣後的聲響錢的再生速度被變更,藉此使 聲響信號的a相長恢㈣狀,純有聲響信號的音高被轉 換的情形。因此,在音高調節(pitch shift)處理係有包含時 201137859 間擴展處理的情形。相反地,在時間擴展處理亦有包含音 高調節處理的情形。如上所示時間擴展處理與音高調節處 理係具有對應關係。 時間擴展處理係無須改變將輸入聲響信號作F F T所得 的頻譜信號的局部頻譜特性,而可使輸入聲響信號的繼續 時間(再生時間)改變。其原理如以下所示。 (a) 執行時間擴展處理的聲響信號處理裝置係首先將輸 入聲響信號分割成一定時間間隔,每間隔一定時間(例如每 隔1024取樣〕即進行解析。此時,聲響信號處理裝置係在 作分割後的時間單位内,每隔比分割時間單位為更短的時 間間隔(例如128取樣)使其重疊來處理輸入聲響信號。在 此,將所重疊的時間間隔稱為躍程尺寸(Hop Size)。 在第30A圖中,輸入信號的躍程尺寸為Ra。此外,藉由 相角音碼器處理所被計算出的輸出聲響信號亦成為時間間 隔重疊一定取樣數的聲響信號。在第30B圖中,輸出聲響信 號的躍程尺寸為心。若作時間擴展時,成為Rs>Ra,若作時 間壓縮時,則成為尺〆!^。在此,以時間擴展的情形(Rs>Ra) 為例加以說明。將時間擴展的比例r定義如式1所示。 [數式1] r存 (式1) K.s (b) 如上所述,分割成一定時間間隔且呈重疊狀態的各 時間區塊信號大部分具有在時間上呈同調(Coherent)的型 式(pattern)。因此,聲響信號處理裝置係對各時間區塊信號 4 201137859 施行頻率轉換。典型而言,聲響信號處理裝置係將輸入的 各時間區塊信號作頻率轉換而調整相位資訊。之後,聲響 仏唬處理裝置係將頻率領域的信號恢復成時間領域的信 號,來作為輸出的時間區塊信號。 知照上述原理,至此為止的古典相角音碼器裝置係使 用STFT來進行㈣率領域的轉換,在頻率領域的各種調整 處理之後,進行短_傅立葉逆轉換。接著,藉此實現時 間轉換及音高㈣處理。接著,針對挪了基礎的處理加以 說明。 ⑴解析 首先,聲響信號處理裝置係按每個以躍程尺寸^所重 疊的時間區塊單位,執行窗長L的解析窗函數。具體而言, 聲響信號處理裝置係將各區塊使用附而轉換成頻率:領 域。例如,eN)的點的頻率特性係藉由式2予 出。 [數式2] (式2) ’以範圍 X{uRa,k) = = \X(uRa^. 在此,h⑻係解析窗函數,k係表示頻率指數 而吕,為k=0,…,L-1。此外,Wimk係藉由: [數式3]
Wn,k =e_j2細kiL 予以計算出。 (2)調整 201137859 二如上所不所計算出的頻率信號的相位資訊,亦即調整 刚的相位資訊係設為。在調整相⑽㈣中聲響信 號處理蓑置係以下列方法來計算頻率指數為_頻率成^ ^uRwk)。 首先,為了計算頻率成分«k),聲響信號處理褒置 係按照式3來計算屬於呈連續的解析點的㈣&與< 的相 位信號的增加部分Δ(ρι^。 [數式4] Δί»; = φ^αΛ)-φ{{η - \)Ra,k)-RaQk ( = } (式 3)
L 由於以時間間隔Ra來計算增加部分△外u,因此聲響信 號處理裝置係可按照式4⑽算各解成分—r』)。 [數式5] a{uR-k)^+~i^^[-n,n))(式 4) 接著,聲響信號處理裝置係藉由式5來計算合成點uRs 的相位。 ^(URS> k)=^(u-1)Rs) k)+Rs.w(uRaj k)(式 5) (3)再合成 聲響信號處理裝置係對所有頻率指數計算出藉由Μ 所計算出的頻率信號的振幅! x(uRa,k) !與調整後的相位 9(uRs,k)。接著,聲響信號處理裝置係使用逆fft轉換,將
頻率Μ料間信號再合成。再合成係按照式6來執行。 [數式6J 201137859 x{uRs,m) = Y^X^R^k} eM,,R-k) W[mk h(k) (式 6) k = 0 聲響信號處理裝置係將予以再合成的時間區塊信號插 入在合成點uRs。接著,聲響信號處理裝置係藉由將經合成 輸出的信號、及在之前的區塊作合成輸出的信號進行重疊 加算,而生成時間擴展信號。與前區塊之合成輸出的重疊 加算係顯示於式7。 [數式7] }(“尺 = +w) + i(w/?s.,m)(m = 0,…,Z-1) (式 7) 上述的3個步驟亦關於解析點(U+1)心予以施行。接 著,上述3個步驟係對所有輸入信號區塊反覆進行。以該結 果而言,聲響信號處理裝置係可計算以擴展比Rs/Ra作時間 擴展後的信號。 其中,為了補正經時間擴展的信號的振幅方向的調變 (時間上的擺動),窗函數h(m)係必須滿足電力補償 (power-complemntary)條件。 以與時間擴展相對應的處理而言,有音高調節處理。 音高調節處理係未改變信號的經過時間而改變信號的音高 的方法。改變數位聲響信號的音高的簡單方法係將輸入信 號作抽減(resample)。音高調節處理亦可與時間擴展處理加 以組合。例如,聲響信號處理裝置亦可在時間擴展處理之 後,在原本的輸入信號的時間長作resample。 另一方面,亦存在有直接照原樣計算音高調節處理的 手法。計算音高調節處理的手法,一般而言係有發生相較 201137859 於在時間軸的resample處理為極為惡劣的副作用的情形,但 是在本發明中並不詳述該内容。 其中,時間擴展的處理係有藉由擴展比,而形成為時 間壓縮處理的情形。因此,在此,時間擴展的表現係表示 時間伸縮,包含時間壓縮。 (先前技術文獻) (非專利文獻) (非專利文獻 l)Improved Phase Vocoder Time-Scale
Modification of Audio (IEEE Trans ASP Vol. 7 No.3, May 1989) C發明内容3 發明概要 發明欲解決之課題 但是,如上所述’為了以由FFT及逆FFT所構成的古典 相角音碼器裝置來實現高品質的時間擴展,必須設定較為 細微的躍程尺寸。因此,結果必須以龐大的次數來實施FFT 及逆FFT,運算量較大。 此外,聲響信號處理裝置係有在時間擴展處理之後, 執行與時間擴展處理不同的處理的情形。此時,聲響信號 處理裝置係必須將時間領域的信號轉換成解析用領域的信 號。例如,以如上所示之解析用領域而言,係有在時間軸 方向與頻率軸方向之雙方具有成分的QMF(Quadrature Mirror Filter)領域。QMF領域由於在時間軸方向與頻率軸方 向之雙方具有成分,因此亦有被稱為合成複領域、合成頻 201137859 率領域、子頻帶領域、或頻率子頻帶領域等的情形。 一般而言,複QMF濾波器組(filterbank)係將時間領域 的信號轉換成在時間軸與頻率軸之雙方具有成分的合成複 領域的手法之一。典型而言,QMF濾波器組係被使用在 Spectral Band Replication (SBR)技術、Parametric Stereo (PS)、及 Spatial Audio Coding (SAC)等參數型(Parametric Based)的音頻編碼方法。在該等編碼所使用的QMF濾波器 組係具有將按每個子頻帶以複數個値所表現的頻率領域的 信號作2倍超取樣(oversampling)的特性。此係用以未發生折 返失真而實現處理子頻帶頻率領域的信號的規格。 以下再稍微詳加敘述。QMF解析濾波器組係將輸入信 號的實數値的離散時間信號x(n)轉換成子頻帶頻率領域的 複信號sk(n)。sk(n)係藉由式8予以計算出。 [數式8] sM) = i:x{M-n-l)p{l)eJ^t,+a) (式 8) /=0 在此,p(n)係具有low-pass特性的L-1次原型濾波器的脈 衝響應。α係相位參數,Μ係子頻帶數。此外,k係表示子 頻帶的指數,k=0,l,...,M-l。 在此’將藉由QMF解析渡波器組而被分割成子頻帶頻 帶的信號的信號稱為QMF係數。QMF係數大部分在參數編 碼手法中’在合成處理的前階段作調整。 QMF合成濾波器組係藉由將QMF係數前頭的M個係數 墊零(zero padding)(將値以〇填埋),來計算出子頻帶信號 201137859 s’k(n)。接著,QMF合成濾波器組係按照式9來計算出時間 信號x’(n)。 [數式9]
在此,β係表示相位參數。 在以上案例,以大致滿足輸入的實數値信號χ(η)的再合 成可能條件(perfect reconstruction)的方式,設計出以實數値 所構成的線性相位原型濾波器係數p(n)及相位參數。 如上所述,QMF轉換係時間軸方向與頻率軸方向的混 合轉換。亦即,可抽出信號所含的頻率成分、及表示每個 時間的頻率變化的資訊。接著,頻率成分係可按照子頻帶 及單位時間來作抽出。在此,將單位時間稱為時槽。 在第31圖中詳細圖示。實數的輸入信號係被分割成長 度L及躍程尺寸Μ相重疊的區塊。在QMF解析處理中,各區 塊係被轉換成Μ個複子頻帶信號形成為1個時槽的形式(第 31圖的上段)。如此一來,時間領域的L取樣的信號被轉換 成L個複QMF係數。該複QMF係數係如第31圖的中段所 示’由L/Μ個時槽及Μ個子頻帶所構成。各時槽係使用比該 時槽更為之前的(L/M-1)個時槽的QMF係數,以QMF合成處 理而與Μ個實數時間信號相合成(第31圖的下段)。 與上述STFT同樣地,聲響信號處理裝置係可藉由時間 解析力與頻率解析力原本的組合,在QMF領域計算出某瞬 間的頻率信號。 201137859 此外,聲響信號處理裝置係可從由L/M個時槽及Μ個子 頻帶所構成的複QMF係數區塊,來計算與某時槽的相位資 訊相鄰接的時槽的相位資訊之間的相位差。例如,某時槽 的相位資訊與相鄰接的時槽的相位資訊之間的相位差係以 式10予以計算出。 (式 1〇) Δφ( η ’ 1〇 = φ( η ’ k) —φ( η — 1,k) (式 10) 在此,cp(n,k)係表示相位資訊。η係表示時槽指數, n=0,l,...,L/M-l。k係表示子頻帶指數,k=0,l,...,M-l。 在時間擴展處理之後,會有聲響信號在如上所示之 QMF領域予以信號處理的情形。但是,此時,聲響信號處 理裝置係除了伴隨運算量大的FPT及逆FFT的時間擴展處 理以外,亦必須要進行將時間領域的信號轉換成QMF領域 的信號的處理。因此,運算量會更加增加。 因此,本發明之目的在提供一種可以低運算量來實現 聲響信號處理的聲響信號處理裝置。 用以欲解決課題之手段 為解決上述課題,本發明之聲響信號處理裝置係使用 預定的調整係數而將輸入聲響信號列進行轉換的聲響信號 處理裝置,其具備有:濾波器組,使用QMF(Quadrature Mirror Filter)解析濾波器,將前述輸入聲響信號列轉換成 QMF係數列;及調整部,使前述QMF係數列依據前述預定 的調整係數來進行調整。 藉此,在QMF領域實行聲響信號處理。因此,由於未 201137859 使用運算量較大之習知的聲響信號處理,因此運算量會減 低。 此外,亦可前述調整部係由經調整的前述QMF係數 列,以可獲得以預定的時間伸縮比作時間伸縮的前述輸入 聲響信號列的方式,依據表示前述預定的時間伸縮比的前 述預定的調整係數來調整前述QMF係數列。 藉此,相當於聲響信號的時間伸縮的處理係在QMF領 域被執行。因此,由於未使用運算量較大之習知的時間伸 縮處理,因此運算量會減低。 此外,亦可前述調整部係由經調整的前述QMF係數 列,以可獲得以預定的頻率調變比作頻率調變的前述輸入 聲響信號列的方式,依據表示前述預定的頻率調變比的前 述預定的調整係數來調整前述QMF係數列。 藉此,相當於聲響信號的頻率調變的處理係在QMF領 域被執行。因此,由於未使用運算量較大之習知的頻率調 變處理,因此運算量會減低。 此外,亦可前述濾波器組係將前述輸入聲響信號列按 每個時間間隔逐次轉換成前述QMF係數列,藉此生成每隔 前述時間間隔的前述QMF係數列,前述調整部係具備有: 計算電路,按每個前述時間間隔所生成的前述QMF係數列 的每個時槽及每個子頻帶計算出相位資訊;及調整電路, 使每個前述時槽及每個前述子頻帶的前述相位資訊依據前 述預定的調整係數來進行調整,藉此調整前述Q M F係數列。 藉此,QMF係數的相位資訊係按照調整係數而被適當 12 201137859 調整。 此外,亦可前述調整電路係按每個前述子頻帶,使依 據前述QMF係數列的最初時槽的前述相位資訊、與前述預 定的調整係數所計算出的値,加上每個前述時槽的前述相 位資訊,藉此調整每個前述時槽的前述相位資訊。 藉此,相位資訊係按每個時槽,按照調整係數來作適 當調整。 此外,亦可前述計算電路係另外按每個前述時間間隔 所生成的前述Q M F係數列的每個前述時槽及每個前述子頻 帶來計算出振幅資訊,前述調整電路係另外使每個前述時 槽及每個前述子頻帶的前述振幅資訊依據前述預定的調整 係數來進行調整,藉此調整前述QMF係數列。 藉此,QMF係數的振幅資訊係按照調整係數來作適當 調整。 此外,亦可前述調整部係另外具備有頻帶限制部,其 係在前述QMF係數列調整前或調整後,由前述QMF係數列 取出與預先訂定的頻帶寬度相對應的新的QMF係數列。 藉此,僅取得所需頻率頻帶的QMF係數。 此外,亦可前述調整部係將調整前述QMF係數列的比 例按每個子頻帶作加權,且按每個前述子頻帶調整前述 QMF係數列。 藉此,按照頻率頻帶,來適當調整QMF係數。 此外,亦可前述調整部係另外具備有領域轉換群,其 在前述QMF係數列調整前或調整後,將前述QMF係數列轉 13 201137859 換成時間及頻率的解析力不同的新的QMF係數列。 藉此’ QMF係數列係被轉換成具有與處理相對應的子 頻帶數的QMF係數列。 此外,亦可前述調整部係由調整前的前述QMF係數列 檢測過渡成分,將所檢測出的前述過渡成分由調整前的前 述QMF係數列取出,調整所取出的前述過渡成分’將經調 整的前述過渡成分恢復成調整後的前述QMF係數列,藉此 調整前述QMF係數列。 藉此,抑制因不適於時間擴展處理的過渡成分所造成 的影響。 此外’亦可前述聲響信號處理裝置係另外具備有:高 域生成部’由調整後的前述QMF係數列,使用預先訂定的 轉換係數’生成屬於與比與調整前的前述QMF係數列相對 應的頻率頻帶為更高的高頻率頻帶相對應的新的QMf係數 列的高域係數列;及高域補充部,使用屬於與前述脫落頻 帶的兩側相鄰接的頻帶的前述高域係數列,來補充屬於前 述高頻率頻帶之中未藉由前述高域生成部來生成前述高域 係數列的頻率頻帶的脫落頻帶的係數。 藉此,取得與高頻率頻帶相對應的qmf係數。 此外,本發明之聲響編碼裝置係將第丨聲響信號列進行 編碼的聲響編碼裝置,亦可具備有:第丨濾波器組,使用 QMF(QUadratUre Mirror Filter)解析濾波器,將前述第丨聲響 信號列轉換成第1QMF係數列;減頻取樣部,藉由將前述第 1聲響信號列進行減頻取樣,而生成第2聲響信號列;心編 201137859 碼部’將前述第2聲響信號列進行編碼;第2濾波器組,使 用解析濾波器,將前述第2聲響信號列轉換成第2qmf 係數列;調整部,使前述第2QMF係數列依據預定的調整係 數來進行調整;第2編碼部,藉由將前述第1QMF係數列與 經調整的前述第2QMF係數列作比較,生成解碼所使用的參 數’來對前述參數進行編碼;及重疊部,將經編碼的前述 第2聲響信號列 、及經編碼的前述參數加以重疊。 藉此’使用在QMF領域的聲響信號處理,來編碼聲響 #旒。因此,由於未使用運算量較大的習知聲響信號處理, 因此運算量會減低。此外,藉由在QMF領域的聲響信號處 理所得的q M F係數並不會被轉換成時間領域的聲響信號, 而被使用在後段的處理。因此,更加減低運算量。 匕外本發明之聲響解碼裝置,係由所被輸入的位元 流,將第1冑響信號列進行解碼的聲響解碼裝i,亦可具備 有刀離。卩由所被輸入的前述位元流,分離成經編碼的 :數與經編碼的第2聲響信號列;第1解碼部,將經編碼的 月』述’數進行解媽;第2解碼部,將經編碼的前述第2聲響 仏號列進行解碼;第1 m組,使用QMF(Quadrature
Mfr)解析渡波器,將藉由前述第2解碼部所被解碼 的刖述第2聲響信號列轉換成QMF係數列;調整部,使前述 QMF係數列依據預定的調整係數來進行調整;高域生成 部’使用轉’前述參數,由調整後的前述QMF係數列, ^成屬於,比與調整前的前述QMF係數列相對應的頻率頻 ^更4 4率頻帶相對應_的Q M F係數列的高域係數 15 201137859 列;及第2濾波器組,使用QMF合成濾波器,將前述高域係 數列、及調整前的前述QMF係數列轉換成時間領域的前述 第1聲響信號列。 藉此,使用在QMF領域的聲響信號處理,來編碼聲響 仏號。因此,由於未使用運算量較大的習知聲響信號處理, 因此運算量會減低。此外,藉由在QMF領域的聲響信號處 理所得的QMF係數並不會被轉換成時間領域的聲響信號, 而被使用在後段的處理。因此,更加減低運算量。 此外’本發明之聲響信號處理方法係使用預定的調整 係數,將輸入聲響信號列進行轉換的聲響信號處理方法’ 亦可包含:轉換步驟,使用QMF(Quadrature Mirror Filter) 解析濾波器,將前述輸入聲響信號列轉換成QMF係數列; 及調整步驟’使前述QMF係數列依據前述預定的調整係數 來進行調整。 藉此,本發明之聲響信號處理裝置被作為聲響信號處 理方法加以實現。 此外,本發明之聲響編碼方法係將第1聲響信號列進行 編碼的聲響編碼方法,亦可包含:第1轉換步驟,使用 QMF(Quadrature Mirror Filter)解析濾波器,將前述第1聲響 信號列轉換成第1QMF係數列;減頻取樣步驟,藉由將前述 第1聲響信號列進行減頻取樣,生成第2聲響信號列;第1編 碼步驟,將前述第2聲響信號列進行編碼;第2轉換步驟, 使用QMF解析濾波器,將前述第2聲響信號列轉換成第 2QMF係數列;調整步驟,使前述第2QMF係數列依據預定 16 201137859 的調整係數來進行調整;第2編碼步驟,將前述第1QMF係 數列與經調整的前述第2QMF係數列作比較,藉此生成解碼 所使用的參數,而將前述參數進行編碼;及重疊步驟,將 經編碼的前述第2聲響信號列與經編碼的前述參數進行重 疊。 藉此,本發明之聲響編碼裝置被作為聲響編碼方法加 以實現。 此外,本發明之聲響解碼方法係由所被輸入的位元 流,將第1聲響信號列進行解碼的聲響解碼方法,亦可包 含:分離步驟,由所被輸入的前述位元流,分離成經編碼 的參數與經編碼的第2聲響信號列;第1解碼步驟,將經編 碼的前述參數進行解碼;第2解碼步驟,將經編碼的前述第 2聲響信號列進行解碼;第1轉換步驟,使用QMF(Quadrature Mirror Filter)解析濾波器,將藉由前述第2解碼步驟所被解 碼的前述第2聲響信號列轉換成QMF係數列;調整步驟,使 前述QMF係數列依據預定的調整係數來進行調整;高域生 成步驟,使用經解碼的前述參數,由調整後的前述QMF係 數列,生成屬於與比與調整前的前述QMF係數列相對應的 頻率頻帶更高的高頻率頻帶相對應的新的Q M F係數列的高 域係數列;及第2轉換步驟,使用QMF合成濾波器,將前述 高域係數列、及調整前的前述QMF係數列轉換成時間領域 的前述第1聲響信號列。 藉此,本發明之聲響解碼裝置被作為聲響解碼方法加 以實現。 17 201137859 此外,本發明之程式亦可為用以使電腦執行前述聲響 信號處理方法所包含的步驟的程式。 藉此,本發明之聲響信號處理方法被作為程式加以實 現。 此外,本發明之程式亦可為用以使電腦執行前述聲響 編碼方法所包含的步驟的程式。 藉此,本發明之聲響編碼方法被作為程式加以實現。 此外,本發明之程式亦可為用以使電腦執行前述聲響 解碼方法所包含的步驟的程式。 藉此,本發明之聲響解碼方法被作為程式加以實現。 此外,本發明之積體電路係使用預定的調整係數,來 轉換輸入聲響信號列的積體電路,亦可具備有:濾波器組, 使用QMF(Quadrature Mirror Filter)解析濾波器,將前述輸 入聲響信號列轉換成QMF係數列;及調整部,使前述QMF 係數列依據預定的調整係數來進行調整。 藉此,本發明之聲響信號處理裝置被作為積體電路加 以實現。 此外,本發明之積體電路係將第1聲響信號列進行編碼 的積體電路,亦可具備有:第1濾波器組,使用 QMF(Quadrature Mirror Filter)解析濾、波器,將前述第1聲響 信號列轉換成第1QMF係數列;減頻取樣部,藉由將前述第 1聲響信號列進行減頻取樣而生成第2聲響信號列;第1編碼 部,將前述第2聲響信號列進行編碼;第2濾波器組,使用 QMF解析濾波器,將前述第2聲響信號列轉換成第2QMF係 18 201137859 數列;調整部,使前述第2QMF係數列依據預定的調整係數 來進行調整;第2編碼部,將前述第1QMF係數列與經調整 的前述第2QMF係數列作比較,藉此生成解碼所使用的參 數,來對前述參數進行編碼;及重疊部,將經編碼的前述 第2聲響信號列與經編碼的前述參數加以重疊。 藉此,本發明之聲響編碼裝置被作為積體電路加以實 現。 此外,本發明之積體電路係由所被輸入的位元流,將 第1聲響信號列進行解碼的積體電路,亦可具備有:分離 部,由所被輸入的前述位元流,分離成經編碼的參數與經 編碼的第2聲響信號列;第1解碼部,將經編碼的前述參數 進行解碼;第2解碼部,將經編碼的前述第2聲響信號列進 行解碼;第1濾波器組,使用QMF(Quadrature Mirror Filter) 解析濾波器,將藉由前述第2解碼部所被解碼的前述第2聲 響信號列轉換成QMF係數列;調整部,使前述QMF係數列 依據預定的調整係數來進行調整;高域生成部,使用經解 碼的前述參數,由調整後的前述QMF係數列,生成屬於與 比與調整前的前述QMF係數列相對應的頻率頻帶更高的高 頻率頻帶相對應的新的QMF係數列的高域係數列;及第2 濾波器組,使用QMF合成濾波器,將前述高域係數列、及 調整前的前述QMF係數列轉換成時間領域的前述第1聲響 信號列。 藉此,本發明之聲響解碼裝置被作為積體電路加以實 現0 19 201137859 發明效果 藉由本發明,可以低運算量來實現聲響信號處理。 圖式簡單說明 第1圖係顯示實施形態1之聲響信號處理裝置的構成 圖。 第2圖係顯示實施形態1之時間擴展處理的說明圖。 第3圖係顯示聲響解碼裝置的構成圖。 第4圖係顯示實施形態1之頻率調變電路的構成圖。 第5A圖係顯示實施形態2之QMF係數區塊的說明圖。 第5B圖係顯示在QMF領域之每個時槽的能量分布圖。 第5C圖係顯示在QMF領域之每個子頻帶的能量分布 圖。 第6A圖係顯示對應過渡成分的時間擴展處理的第1模 式的說明圖。 第6B圖係顯示對應過渡成分的時間擴展處理的第2模 式的說明圖。 第6C圖係顯示對應過渡成分的時間擴展處理的第3模 式的說明圖。 第7A圖係顯示實施形態2之過渡成分抽出處理的說明 圖。 第7 B圖係顯示實施形態2之過渡成分挿入處理的說明 圖。 第8圖係顯示過渡位置與QMF相位遷移比例的線性關 係圖。 20 201137859 第9圖係顯示實施形態2之時間擴展處理的流程圖。 第10圖係顯示實施形態2之時間擴展處理的變形例的 流程圖。 第11圖係顯示實施形態3之時間擴展處理的說明圖。 第12圖係顯示實施形態4之時間擴展處理的說明圖。 第13圖係顯示貫施形嘘5之聲響信號處理裝置的構成 圖。 第14圖係顯示實施形態5之聲響信號處理裝置之第丄變 形例的構成圖。 第15圖係顯示實施形態5之聲響信號處理裝置之第2變 形例的構成圖。 第16 A圖係顯示藉由重新取樣處理予以音高調節處理 後的輸出的圖。 第16B圖係顯示藉由時間擴展處理所被期待的輸出的 圖。 第16C圖係顯示藉由時間擴展處理而錯誤輸出的圖。 第17圖係顯示實施形態6之聲響信號處理裝置的構成 圖。 第18圖係顯示實施形態6之Q M F領域轉換處理的概念 圖。 第19圖係顯示實施形態6之頻率調變處理的流程圖。 第20Α圖係顯示QMF原型濾波器的振幅響應的圖。 第20Β圖係顯示頻率與振幅的關係圖。 第21圖係顯示實施形態6之聲響編碼裝置的構成圖。 21 201137859 第22圖係顯示音質評估的說明圖。 第23A圖係顯示實施形態7之聲響信號處理裝置的構成 圖。 第23B圖係顯示實施形態7之聲響信號處理裝置的處理 的流程圖。 第24圖係顯示實施形態7之聲響信號處理裝置之變形 例的構成圖。 第25圖係顯示實施形態7之聲響編碼裝置的構成圖。 第2 6圖係顯示實施形態7之聲響編碼裝置的處理的流 程圖。 第27圖係顯示實施形態7之聲響解碼裝置的構成圖。 第2 8圖係顯示實施形態7之聲響解碼裝置的處理的流 程圖。 第2 9圖係顯示實施形態7之聲響解碼裝置之變形例的 構成圖。 第3 0 A圖係顯示時間擴展處理前之聲響信號之狀態的 說明圖。 第3 0 B圖係顯示時間擴展處理後之聲響信號之狀態的 說明圖。 第31圖係顯示QMF解析處理及QMF合成處理的說明 圖。 【實施方式3 用以實施發明之形態 以下,一面參照圖示,一面說明本發明之實施形態。 22 201137859 (實施形態1) 實施形態1之聲響信號處理裝置係對所被輸入的聲響 信號’進行QMF轉換,進行相位調整,且施行逆qmf轉換, 藉此實現時間擴展處理。 第1圖係實施形態1之聲響信號處理裝置的構成圖。首 先’ QMF解析濾波器組9 〇 1係將所被輸入的聲響信號轉換成 QMF係數X(m,n)。在此,m係表示子頻帶指數,η係表示時 槽指數。調整電路902係調整利用轉換所得的QMF係數。以 下關於以調整電路902的調整加以說明。式11係將調整前的 各QMF係數’使用各自的振幅及相位來予以表現。 [數式1〇] X{m, n) = r{m, η) exp(y · a(m,«)) (式 11) r(m,n)係表示振幅資訊,a(m,n)係表示相位資訊。調整 電路902係將相位資訊a(m,n)調整為相位資訊 [數式11] a(m,n) 。調整電路902係藉由調整後的相位資訊與調整前的振幅資 訊r(m,n),按照式12來計算新的QMF係數。 [數式12] X(m,n) = r(m,η) Qxp(j a(m,n)) (式 12) 最後,Q M F合成濾波器組903係將在式12中所計算出的 新QMF係數轉換成時間信號。以下關於調整相位資訊的手 法加以說明。 在實施形態1中,Q M F基礎的時間擴展處理係由以下所 23 201137859 示之步驟所構成。亦即,時間擴展處理係由:(!)調整相位 資訊的步驟、及(2)根據QMF轉換的加法定理,執行在QMF 領域的重疊加算的步驟所構成。 以下係關於時間擴展的說明,將2L取樣的實數値的時 間信號以擴展係數s進行時間擴展時之例。qmf解析濾波器 組901係將例如2L取樣的實數値的時間信號,轉換成由 2L/M個時槽及Μ個子頻帶所構成的係數。亦即, Q M F解析濾波器組9 01係將2 L取樣的實數値的時間信號轉 換成合成頻率領域的QMF係數。 以與STFT基礎的時間擴展方法相同的方式’藉由qmf 轉換所計算出的QMF係數係在調整相位資訊的前段,容易 受到解析窗函數的影響。在實施形態1中,以下列3步驟來 實現對QMF係數的轉換。 (1) 藉由解析窗函數h(n)(窗長L)被轉換成QMF領域 用,計算出QMP領域用的解析窗函數H(v,k)(由L/M個時槽 與Μ個子頻帶所構成)。 (2) 所計算出的解析窗函數H(v,k)係藉由下式而簡化。 [數式13] Λ/-Ι (v)-- v = 0,…,厶/Λ/-1) *=〇 (3)QMF解析濾波器組901係藉由X(m,k)=X(m,k) · H〇(w)(在此,w=mod(m,L/M)、mod()係計算出剩餘的運算) 而計算出QMF係數。 原本的QMF係數係如第2圖的上段所示以l/M個時 24 201137859 槽,由躍私尺寸按每1時槽作重疊的L/M+1個QMF區塊所構 成。 6周整電路902係為了確實避免相位資訊呈非連續,而將 調整前的各QMF區塊的相位資訊進行調整,而構成新的 QMF區塊。亦即,當第μ個與第μ+l個QMF區塊相重疊時, 新QMF區塊的相<立資訊係必須知· s取樣點中確保連續性 (s為擴展係數)。此若以時間領域言之,相當於確保跳點^ · Μ · s(peN)中的連續性。 調整電路902係將調整前的各QMF區塊的相位資訊 (pu(k),由屬於複數的QMf係數x(u,k)(時槽指數 U=〇,,",2L/M_卜子頻帶指數k=0,l,...,M-l)所計算出。如第2 圖的中段所不,調整電路9〇2係將各qmF區塊由時槽由舊到 新的順序來進行運算,而生成新的QMF區塊。各QMF區塊 係分別以不同的模樣圖示。第2圖係顯示以2時槽份的躍程 尺寸錯開的處理的情形。 第η個(n=l,...,L/M+l)新QMF區塊的相位資訊係表現為 q>u(n)(k)(時槽指數u=〇,. ,L/M_i,子頻帶指數k=〇, 1,._·,Μ-1)。新的相位資訊%⑻(k)係因時間擴展後的新qmf 區塊被重新配置在何處而不同。 第1個QMF區塊X⑴(u,k)(u=0,…,L/M-1)被重新配置 時,該QMF區塊的新相位資訊⑻係與調整前的qMF區 塊的相位資訊cpu(k)相同。亦即,新的相位資訊队⑴化)係以 予以計算出。 第2個QMF區塊X(2)(u,k)(u=〇,…,l/M- 1)係移動s時槽的 25 201137859 躍程尺寸而予以重新配置(第2圖係顯示2時槽的情形)。此 時’區塊前頭的頻率成分係必須與第1個新QMF區塊X(1)(u,k) 的第s個時槽呈連續。因此,x(2)(u,k)的第1個時槽的頻率成 分係與原本的QMF區塊的第2個時槽的頻率成分相一致。亦 即’新的相位資訊tpu(2)(k)係以φ〇(2)(1〇=φ〇(1)(1ί)+Δφι(1<)予以計 算出。 由於第1個時槽的相位資訊改變,因此剩下的相位 資訊亦按照原本的QMF區塊的相位資訊來作調整。亦 即,新的相位資 Mtpu(2)(k)係以 (u=0,…,L/M-1)予以計算出。 在此’ Δφ/ΐί)係以予以計算出’為 調整前的QMF區塊的相位差。 調整電路902係將以上過程反覆L/M+1次,生成調整後 的QMF區塊。亦即,第m個(m=3,…,L/M+1)新QMF區塊的 調整後的相位資訊cpu(m)(k)係在式13及式14中予以計算出。 Ψ〇⑽(k)=ψ〇(ην 丨)(k)+Δφηι-丨(k) (式 13) v|/u(m)(k)=\)/u.l(m)(k) + ~m+u.l(k)(u = 1,…,L/M— 1)(式 14) 調整電路902係在新QMF區塊的振幅資訊使用原本的 QMF區塊的振幅資訊,藉此可計算出新QMF區塊的QMF係 數。 調整電路902亦可藉由依QMF領域的第偶數個子頻帶 與第奇數個子頻帶而異的調整方法,來調整相位資訊。例 如’在諧波構造強(音調強)的聲響信號中,係在QMF領域 中’相位差資訊(△9(11,1<;)=^(11,1^)-9(11-1,1〇)按每個頻率成分而 26 201137859 異。此時’調整電路902係藉由式15來決定瞬時頻率成分 co(n,k)。 [數式14] ω{ηΛ)Λ arg(Ap(w,灸)一 ;r) k is even k is odd (式 15) 在此’ princarg(a)係表示α的轉換,定義成如式16所示。 princarg(a)=mod(a+7c,-27i)+H (式 16) mod(a,b)係表示將a除以b的餘數。 若將該等彙整,上述相位調整方法中的相位差資訊 △cpu(k)係藉由式17予以計算出。 [數式15] k is even k is odd (式 17) 此外,QMF合成濾波器組903係為了削減時間擴展處理 的運算量’亦可不對新QMF區塊的各個適用QMF合成處 理。取而代之,QMF合成濾波器組903係將新QMF區塊彳乍重 疊加算’對所得的信號,適用QMF合成處理。 以與STFT基礎的擴展處理相同的方式,藉由qmf轉換 所計算出的QMF係數係在進行重疊加算的前階段,容易受 到合成窗函數的影響。因此,與上述解析窗函數同樣地又 w=mod(u,L/M))來實現。 在QMF轉換中係成立加法定理,因此遺+1個所有 QMF區塊係彳以s時槽的躍程尺寸作重叠加算。重疊加算結 27 201137859 果的Y(u,k)係以式18予以計算出。 Y(ns-l-u » k) = Y(nS + u,k)-|-X<-.(u , k 〇=〇 , , L/M , u=],, L/M’k=〇’l,···,Μ-1) (式 18) QMF合成濾波器組903係藉由在上述Y(u,k)適用qMF 合成濾波器,而可生成最終時間擴展後的聲響信號。可對 原本的信號施行s倍的時間擴展處理,由Y(u,k)的時間指數u 的範圍亦可明顯得知。 如上述式12所示,在實施形態丨中,調整電路9〇2係在 QMF領域進行相位調整及振幅調整。至此亦如所述所示, QMF解析濾波器組901係將按每個單位時間作區分的聲響 信號以QMF濾波器逐次轉換成qMF係數(qMF區塊)。接 著,調整電路902係以按照預先指定的擴展率(s倍,例如 s=2,3,4 4)而保持母個相鄰qmf區塊的相位及振幅的連續 性的方式,來調整各QMF區塊的振幅及相位。藉此實現相 角音碼器處理。 QMF合成濾波器組903係將在(5層領域作相角音碼器 處理的QMF係數轉換成時間領域的信號。藉此,可得被擴 展成s倍的時間領域的聲響信號。此外,藉由時間擴展處理 的後段的信號處理,QMF係數會有較為方便的情形。例如, 亦可對在QMF領域作相角音碼器處理的QMF係數施行根據 SBR技術的頻帶擴大處理等任何聲響處理。接著,後段的 信號處理之後,QMF合成濾波器組903亦可採取轉換成時間 領域之聲響信號的構成。 第3圖所示構成係如上所示之組合之—例。此係將在 28 201137859 QMF領域的相角音碼器處理、與聲響信號的頻帶擴大技術 加以組合的聲響解碼裝置之—例。以下說明使用相角音瑪 器處理的聲響解碼裴置的構成。 分離部係將輸入的位元流分離成供高域生成之用 的參數:及供低域解碼之用的編碼資訊。參數解碼部謂 係將供高域生紅用的參數進行解碼。解碼部⑽係由供 低域解碼之用的編碼資訊’將低域成分的聲響信號進行解 碼。QMF解析濾波器組1203係將經解碼的聲響信號轉換成 QMF領域的聲響信號。 頻率調變電路1205及時間擴展電路12〇4係對QMF領域 的聲響信號施行前述相角音碼器處理。之後,高域生成電 路1206係使賴高域生成之㈣參數來线高域頻率成分 的信號。等高線調整電路1208係對高域成分的頻率等高線 進行調整。QMF合成濾波器組丨2〇9係將qmf領域中的低域 成分及高域成分的聲響信號轉換成時間領域的聲響信號。 其中,在上述低域成分的編碼處理或解碼處理亦可使 用]\^丑0-八八(3方式、]\4?丑〇-1^)^3等聲響編碼方式,或者 亦可使用ACELP等聲音編碼方式。 此外,調整電路902亦可在QMF領域進行相角音碼器處 理時,在藉由式12所為之調整後的qMF係數的計算,按每 個QMF區塊之子頻帶指數進行加權運算。藉此,調整電路 902亦可利用具有按每個子頻帶指數而異的値的調變係數 來進行調變。例如’在與高域頻率相對應的子頻帶指數中, 會有在擴展時失真變大的聲響信號。調整電路902亦可使用 29 201137859 如減小聲響信號的調變係數。 此外,以在QMF領域進行相角音碼器處理的其他構成 而言’聲響信號處理裝置亦可在QMF解析濾波器組901的後 段另外具備有其他QMF解析濾波器組。僅以QMF解析濾波 器組901會有低域的頻率解析力低的情形。此時,即使對包 含較多低域成分的聲響信號施行相角音碼器處理,亦未獲 得充分的效果。 因此’為了使低域成分的頻率解析力提升,亦可使用 供解析低域部分(例如qMF解析濾波器組9〇1的輸出所包含 的全QMF區塊的一半)之用的其他QMF解析濾波器組。藉 此,頻率解析力會提升為2倍。結果,調整電路902係施行 如上所述之在QMF領域的相角音碼器(phase v〇c〇de〇處 理。藉此,在維持音質的情形下,運算量及記憶體消耗量 的削減效果會變高。 第4圖係顯示使QMF領域的解析力提升的構成例圖。 Q M F合成遽波器組2 4 〇!係暫時以Q M F合成纽器將輸入的 聲響信號合成。之後’ QMF解析渡波器組2術係以2倍解析 度的Q M F解析渡波器來計算qMF係數。並列構成對形成為2 倍解析力的QMF領域的信號進行2倍的時間擴展、及2倍、3 倍或4倍的音高調節處理的相角音碼器處理電路⑻時間 擴展電路2403、第2時間擴展電路2侧及第辦間擴展電路 2405)。 接著,各相角音碼器處理電路係以2倍的解析度,統一 進行擴展比例不同的相角音碼器處理。接著,合併電路屢 30 201137859 係將經相角音碼器處理的信號合成。 藉由QMF濾波器所為之相角音碼器處理係由上述可 知,與STFT基礎的相角音碼器處理相比較,並不需要使用 運算量較大的FFT處理。因此,存在有可大幅削減運算量的 顯著效果。 (實施形態2) 以實施形態2而言,敘述將藉由實施形態1所記載之區 塊基礎所得之時間軸擴展方法加以擴張的形態。實施形態2 之聲響信號處理裝置係具備有與第1圖所示實施形態1之聲 響信號處理裝置相同的構成要素。接著,為了避免因上述 相位資訊的不連續所造成的影響,相位資訊的計算係以下 列2種方法來進行。 (a) 調整電路902係以在調整後的QMF區塊中,相重疊的 時槽的相位資訊在區塊間呈連續的方式調整相位資訊。亦 即,調整電路902係藉由來調整 相位資訊。 (b) 調整電路902係在調整後的各QMF區塊中,以在區 塊内呈連續的時槽間,相位資訊呈連續的方式來調整相位 資訊。亦即,調整電路902係藉由…㈣㈨唧^丨⑽⑻+一^-丨㈨ (在此,u=l,...,L/M-l)來調整相位資訊。 上述中,相位資訊的調整方法係假定按照音調較強的 成分,相位資訊由調整前的QMF區塊產生變化。 但是,實際上,上述假定並不一定經常正確。典型而 言,當原本的信號為在聲響上呈過渡的信號時,上述假定 31 201137859 並不正確。過渡信號係在時間領域有尖銳的攻擊音等非固 定形式的信號。藉由在相位資訊與頻率成分之間假定一定 的關係,可知如下情形。亦即,若離散地大量包含有音調 強的成分’而且在短時間間隔的期間包含有間隔大的頻率 成分時,會難以處理過渡信號。結果,藉由伸縮處理,會 生成具有可感覺的聲響上的失真的輸出信號。 在實施形態2中,為了處理將包含大量過渡信號的信號 進行擴展處理時所發生的上述問題,伴隨實施形態1之相位 資訊之調整的時間伸縮處理被變形成可與音調強的信號與 過渡信號之雙方相對應的時間伸縮處理。 首先,調整電路902係將有可能成為潛在問題的時間伸 縮處理除外,因此以QMF領域來檢測過渡信號所包含的過 渡成分。 檢測過渡狀態的手法係有各種手法,在為數眾多的文 獻中所揭示。在實施形態2中係顯示檢測在QMF區塊之過渡 響應的2個簡單手法。 第5A圖係用以關於對藉由qMF轉換所計算出的QMF 區塊X(u,k)(2L/M個時槽、Μ個子頻帶)進行時間擴展的情形 加以說明的說明圖。第1個手法係按照每個前述QMF區塊的 能量値的變化來檢測過渡狀態的方法,第2個手法係在頻率 轴檢測母個QMF區塊的振幅值的變化的方法。 第1個檢測方法係如下所示。調整電路9〇2係如第5Β圖 所示,按各QMF區塊的每個時槽來計算能量値e〇〜E2l/m i。 第5C圖係顯示每個子頻帶的能量値的圖。調整電路9〇2係按 32 201137859 每個時槽將能量値的差分計算為dEu=Eu+rEu(在此, u=0,...,2L/M-2)。藉由預定的臨限値T〇,若為 [數式16] ^->T0(je[〇,2L/M-2] > dE^O) j , 的情形,在第i個時槽中檢測過渡成分。 第2個檢測方法係如下所示。Q M F區塊所包含的所有時 槽及子頻帶的振幅為A(u,k)時,關於各時槽,振幅資訊的等 高線被計算為: [數式17] Γ Μ 啦〇,k) ,. . n
Fu =—^ (在此,u=0,.._,2L/M-l) Σ雄,灸) k=0 。若藉由預定的臨限值乃與乃,FpT,, [數式18] min(v4(/,A:))^ T2 k 時,則在第i個時槽中檢測過渡成分。 若在第u〇個時槽檢測到過渡成分時,上述相位資訊的 擴展處理係對包含第u〇個時槽的新QMF區塊予以修正。 擴展處理的修正係有2個目的。其一係為了在任意相位 資訊擴展處理中,避開第u〇個時槽的處理。另一者係為了 在假設第u〇個時槽未被作任何處理而予以略過時,保持 QMF區塊内及QMF區塊間的連續性。為了達成該等2個目 的,前述相位資訊擴展處理係修正成如下所示。 在第m個新QMF區塊(m=2,...,L/M+l)中,其相位(pu(m>(k) 33 201137859 係如下所示。 (a)若為m<u〇<m+L/M-1的情形,為了擔保在QMF區塊 内的相位資訊的連續性,相位%⑽(k)係以下式予以計算(第 6A 圖)。 [數式19] if u ^u0or uyuQ+\ if w = w0 if w = w〇 +1 d)+△〜+„_ 丨 <P,l〇(k) ¥u-iih) + ^m+tl_x{k) + Αφιη+ιι.2(^) (b)若為m=U()而且mod(u〇,s)=0的情形,為了由任意相位 資汛處理來避開第U))個時槽的處理,相位啊㈣^)係以下式 予以計算(第6B圖)。 [數式20] rim、(J^=<pu〇(k、 此外,為了擔保在QMF區塊間之相位資訊的連續性,相位 φι(ηι)(1〇係以下式予以計算。 [數式21] = wthk) + , · (Αφ,ι〇 (k)+ Αφ,^)) (C)若為m=u〇而且m〇d(u〇,s)/0的情形,為了由任意相位 資訊處理來避開第U()個時槽的處理,相位听㈣以)係以下气 予以計算(第6C圖)。 [數式22] Ψ〇"\^ = φιι〇(^ 此外,為了擔保在QMF區塊間的相位資訊的連續性,相位 φι(π1)(1〇係以下式予以計算。 [數式23] 34 201137859 ψ\ \k) = + 5 · Αφυα (k) 實際上’由聲響的觀點來看,對上述過渡信號的擴展 處理並不理想的情形亦不少。調整電路902亦可取代不對過 渡k號進打擴展處理’而在由qMF區塊去除掉過渡信號成 分之後再施行擴展處理,對經擴展處理的QMF區塊,送回 才剛去除掉的過渡信號。 在第7A圖及第7B圖係顯示上述處理。在此,說明藉由 QMF轉換所计算A的QMF區塊信號x(u,k)(假定具有L/M個 時槽及Μ個子頻帶)予以時間擴展的情形,而且以上述過渡 信號檢測方法在第u〇個時槽檢測出過渡信號的情形。各區 塊的時間擴展係以下列步驟予以實施。 (1) 調整電路902係由QMF區塊去除第u〇個時槽成分,將 所取出的第u〇個時槽進行填塞“〇”或作“内挿,,處理。 (2) 調整電路902係將新QMF區塊的信號按照上述擴展 方法而擴展至s · L/M個時槽。 (3) 調整電路902係將在上述(1)中所去除的時槽的信號, 插入在以上述(2)作擴展後的區塊的位置(第s . u〇個時槽的 位置)。 在此,上述手法亦為第S · UG個時槽非為對過渡響應成 分之適當位置時的單純例。此係由於QMF轉換的時間解析 力較低之故。 為了實現更為高音質的時間擴展電路,必須將上述單 純化之例加以擴張。接著,必須要有過渡響應成分的正確 位置。實際上,QMF領域的若干資訊、例如振幅資訊及相 35 201137859 位遷移資訊等係有用於用以特定過渡響應成分的正確位 置。 過渡響應成分的位置(以下稱為過渡位置)係以藉由檢 測各QMF區塊的信號的振幅成分及相位遷移f訊之各個的 2個步驟來作特定為佳。說明僅在t〇時刻存在脈衝ο,㈣ 成分的情形。脈衝成分係過渡響應成分的典型例。 首先,調整電路902係藉由在QMF頻帶計算出各QMF 區塊的振幅資訊,來進行過渡位置t()的粗略推定。 若考慮到上述QMF轉換的手續,可知如下情形。亦即, 由於進行解析窗處理,因此脈衝成分係跨及qMF領域的複 數時槽而造成影響。藉由解析該等時槽的振幅値分布,可 知存在有以下2個情形。 (1) 若第no個時槽具有較高能量(振幅値的平方)時,調整 電路902係作為(η〇-5) · 64-32<ί〇<(η〇-5) · 64+32來推定過渡 位置t〇。 (2) 若第n〇-l個與第n〇個時槽為大致相同能量時,調整電 路902係作為tQ=(nG-5) · 64-32來推定過渡位置t〇。 (n〇-5)係表示在QMF解析濾波器組9〇1使其延遲5個時 槽份。此外,上述(2)的情形下,調整電路9〇2係可僅藉由振 幅解析來正確決定過渡位置。 接著,上述(1)的情形下,調整電路902係可藉由使用 QMF頻帶的相位資訊,而更有效率地決定過渡位置。。 以下’說明對第個時槽内的相位資訊 (让=0,1,_..,]^-1)進行解析的情形。以271作巡迴(1"〇1111(1)的相位 36 201137859 資訊cp(nQ,k)的遷移比例係必須在過渡位置t〇、與最接近過渡 位置t〇的左(在時間上為過去)時槽、或者第n〇個時槽的中間 位置之間具有完全線性關係。亦即,成立k · 。在 此,相位遷移比例為 [數式24] 二—c/(unwrapd,。 dk unwrap(P)係使弧度相位p以2π作巡迴,而修正兀以上之 變化的函數。CQ為常數。 △ t係過渡位置t Q、與最接近過渡位置t()的左(在時間上為 過去)時槽、或者第n〇個時槽的距離。亦即,Δί係藉由式19 予以計算出。 [數式25] (式 19) A/=k-(k-5)-64-32) ifgo^O . ί {〇 ~(n〇 -5)-64 otherwise 上述參數之例係藉由式2〇所示之值 [數式26] c〇 = -1.5953 3.117 if g〇^〇 otherwise /: = 0.0491. (式 20) 第8圖係顯示位於過渡位置10與Q MF相位遷移比例g〇之 間的線性關係圖。如第8圖所示,只要n◦(能量最高的時槽的 指數)為固定,則t〇與g〇係以一對一相對應。 根據上述,說明其他例。此係在QMF領域中,在正在 進行時間擴展處理的期間處理過渡成分的手法。若與上述 37 201137859 簡易手法相比較,本手法係在以下方面具有優點。亦即 本手法係可正確檢測原本的信號的過渡位置。此外, 法亦可連存在經時間擴展的過渡成分的時槽連同適當手 位資訊一起檢測出。本手法的詳細内容記載如下。 再中, 本手法的順序亦在第9圖中顯示為流程圖。 時間信 號 QMF解析遽波器組901係接收所被輸入的 展對象 x(n)(S2001)。QMF解析濾波器組901係由作為時間才廣 的時間信號x(n),計算QMF區塊X(m,k)(S2002)。在此 的振幅為r(m,k) ’相位貧訊為(p(m,k)。當在該qmf區 過渡成分的信號時,最適時間擴展手法係如下所$。t 3 (a)調整電路902係根據能量分布,藉由式2丨來檢測存在 過渡信號的時槽m〇(S2003)。 [數式27] m0 = max m (Κ-\ \ΣΚ777,*) (式 21) \*=ο ) (b)調整電路902係推定存在過渡響應的時槽之中過渡 響應較為顯著的時槽的相位遷移比例 [數式28] (S2004)。亦即’調整電路902係推定時槽的相位角叫與相位 遷移比例 [數式29] 泣0 〇 (c)調整電路902係以式22來計算多項式殘差。 38 201137859 [數式30]
(d) 調整電路902係按照式23來決定過渡位置tG(S2005)。 [數式31] J(w。-5)_64-32 + round((-1.5953-c70)/尺)if nr。〆0 0 [ (w0 - 5). 64 + round((3.117 - στ。)/< 尺) otherwise 在此,常數K係K=0.049卜 (e) 調整電路902係按照式24來決定呈過渡狀態的領域 (S2006) ° [數式32]
m0 if mod(y。,64) = 0 wQ_l,w〇,m〇+l otherwise (式 24) 調整電路902係使用純量值,在呈過渡狀態的領域内, 按照式25來減小QMF係數(S2007)。 [數式33] X(m,k) = a X(m,k) if m e T0 (式 25) α為小的値,例如α=0.001。 (f) 調整電路9 02係對未呈過渡狀態的Q M F區塊施行平 常的時間擴展處理(S2008)。 (g) 調整電路902係如下所示,計算過渡位置s · tG中的新 的時槽及相位遷移比例。 <i>調整電路902係藉由m丨=ceil((s · t〇-32)/64)+5來計算 出經時間擴展的時槽指數1^(82009)。在此,ceil係四捨五 入成最為接近的整數的處理。 39 201137859 0調整電路902係按照式26來計算過渡位置、與新時 槽最為接近的左(在時間上為過去)的位置的距離。
Atj — s · t〇 — (nil — 5) · 64 + 32 (式 26) <ii>調整電路902係以式27來計算新的相位遷移比例。 [數式34] _{ -1.5953-^:^/, if 0<Δ/, ^31 1 [3.117--(Δ/, -3l) otherwise (h)調整電路902係將過渡響應顯著的時槽叫下的QMF 係數重新合成。 時槽m,的振幅係繼承擴展前的時槽m〇的振幅。調整電 路902根據新的相位遷移比例與相位差,藉由式28來計算出 相位資訊(S2010)。 [數式35]
(式 28) 接著,調整電路902係以式29來計算出新的QMF係數 (S2011)。 [數式36] X{mx, k) = r(m0,k) exp{j · φ{τηχ,k)) (式 29) (i)調整電路902係以式30來決定新的過渡領域(S2013)。 [數式37]
m, if A,丨=32 mx - +1 otherwise (式 30) ⑴在重新決定的過渡領域 [數式38] 40 201137859 Ά 中包含有複數時槽時,調整電路902係藉由式31而將該等時 槽的相位重新調整(S2015)。 [數式39] φ(ηι^ - \,k)- φ{τηχ +1, A:)= unwrap(A^)- (cr, + π)· k-w0 unwrap(A外)_ (% - π) ·灸-ω0 if 0<Δί, ^31 otherwise (式 31) 接著,調整電路902係按照式32而將由如上所示所調整 的時槽所構成的QMF區塊係數重新合成。 [數式40] X(m, -\,k)=r{mQ-\,k)-^(j^{mx -Ι,Α:)) (式32) 丨 +l,A:) = r(w0 +l,A:)_exp(_/'彡(w 丨 +1,众)) 最後,調整電路902係輸出經時間擴展處理的QMF區塊 (S2012)。 以運算量的觀點來看,為了檢測過渡位置所執行的上 述(a)〜(d)亦可直接利用時間領域下的過渡響應檢測手法 來置換。例如,用以在時間領域檢測過渡位置的過渡位置 檢測部(未圖示)被配置在QMF解析濾波器組901的前段。接 著,以在時間領域下的過渡響應檢測手法而言為典型的順 序係如下所示。 (1) 過渡位置檢測部係將時間信號χ(η)=(η=0,1,…,N · L〇-1)分割成長度L〇的N個區段。 (2) 過渡位置檢測部係將各區段的能量計算為如下所 示。 41 201137859 [數式41] 五,(0= Σ4) « = /·/-0 (3) 過渡位置檢測部係將*體區段的能量按照E|t(i)=a • Eu(i-l)+(l-a) · Es(i)來計算。 (4) 若Es(i)/Eu(i)>Rl ’切冰,則過渡位置檢測部係判 斷第1個區段係包含有過渡響應成分的過渡區段。在此,Ri 及R2係預定的臨限值。 (5) 過渡位置檢測部係藉由t〇=(i+〇 5) · L〇計算出過渡區 段的正中位置來作為最終過渡位置的概算位置。 若使用時間領域的過渡成分檢測,第9圖的流程圖係變 更成如第10圖所示。 其中’與實施形態1同樣地,亦可為將實施形態2之聲 響信號處理與QMF領域下之其他聲響處理加以組合的構 成。例如’ QMF解析濾波器組9〇1係將按每個單位時間作區 隔的聲響信號以QMF濾波器逐次轉換成qmf係數(QMF區 塊)。接著,調整電路902係以按照預先指定的擴展率(s倍, 例如s=2,3,4等)來保持相鄰每個qmf區塊的相位及振幅的 連續性的方式,調整各QMF區塊的振幅及相位。藉此,實 現相角音碼器處理。 QMF合成據波器組903係將在QMF領域經相角音碼器 處理的QMF係數轉換成時間領域的信號。藉此可得被擴展 為s倍的時間領域的聲響信號。此外,藉由時間擴展處理的 後段的信號處理,會有qMF係數較為方便的情形。例如, 42 201137859 S::在QMF領域經相角音碼器處理的qmf係數施行根據 獄技術的頻帶擴大處料任何聲響處理。接著,在後段 破處理之後’ q M F合錢波驗烟亦可採取轉換成時 間領域之聲響信號的構成。 第3圖所不之構成係如上所示之組合之一例。此係將在 QMF錢的相角音碼#處理、與聲響信號的頻帶擴大技術 加以組合之聲響解碼裝置之—例。以下說明使用相角音碼 器處理的聲響解碼裝置的構成。 分離部1201係將輸入的位元流分離成供高域生成之用 的參數與供低域解碼之用的編碼資m。參數解碼部12〇7係 將供尚域生成之用的參數進行解碼。解碼部12〇2係由供低 域解碼之用的編碼資訊將低域成分的聲響信號進行解碼。 QMF解析濾波器組1203係將經解碼的聲響信號轉換成qmf 領域的聲響信號。 頻率調變電路1205及時間擴展電路1204係對QMF領域 的聲響信號施行前述相角音碼器處理。之後,高域生成電 路1206係使用供高域生成之用的參數而生成高域頻率成分 的信號。等高線調整電路1208係調整高域成分的頻率等高 線。QMF合成濾波器組12〇9係將QMF領域中的低域成分及 高域成分的聲響信號轉換成時間領域的聲響信號。 其中,在上述低域成分的編碼處理或解碼處理係可使 用MPEG-AAC方式、MPEG-Layer3等聲響編碼方式,或者 亦可使用ACELP等聲音編碼方式。 此外,以QMF領域進行相角音碼器處理的其他構成而 43 201137859 吕’聲響信號處理裝置亦可在QMF解析濾波器組9〇1的後段 另外具備有其他QMF解析濾波器組。若僅以QMF解析濾波 器,’且901,會有低域的頻率解析力低的情形。此時,即使對 包含較多低域成分的聲響信號施行相角音碼器處理,亦無 法獲得充分效果。 因此,為了使低域成分的頻率解析力提升,亦可使用 用以解析低域部分(例如qmf解析濾波器組9〇1的輸出所包 含的全QMF區塊的-半)的其他QMF解析遽波器組。藉此, 頻率解析力提升為2倍。此外,調整電路9〇2係施行如上所 述在QMF領域的相角音碼器處理。藉此,在維持音質的情 形下,直接提高運算量及記憶體消耗量的削減效果。 第4圖係顯示使QMF領域的解析力提升的構成例圖。 Q M F合成濾波器組2 401係將輸入的聲響信號暫時以Q mf合 成濾波器加以合成。之後,qmf解析濾波器組24〇2係以2 倍解析度的QMF解析濾波器來計算qmf係數。對已形成為2 倍分解析度的的QMF領域的信號,並列構成進行2倍的時間 擴展、及進行2倍、3倍或4倍的音高調節處理的相角音碼器 處理電路(第1時間擴展電路2403、第2時間擴展電路^⑽及 第3時間擴展電路2405)。 接著,各相角音碼器處理電路係以2倍的解析声,統一 進行擴展比例不同的相角音碼器處理。接著,合併電路2仙6 係將經相角音碼器處理的信號加以合成。 其中,實施形態2之聲響信號處理裝置亦可具備如下所 示之構成。 44 201137859 調整電路9 0 2亦可按照輸入的聲響信號的音調(聲響調 波構造的大小)與聲響信號的過渡特性而靈活調整。調整電 路902亦可藉由在QMF領域的係數檢測過渡信號,來調整相 位資訊。調整電路902亦可以確保相位資訊之連續性的方 式,而且以QMF領域的係數的過渡信號成分不會變化的方 式來調整相位資訊。調整電路902係亦可將與避開時間伸縮 的過渡信號成分相關連的QMF係數,恢復成將過渡信號成 分作擴展或壓縮的QMF係數,藉此調整相位資訊。 聲響信號處理裝置亦可另外具備有:檢測輸入信號之 過渡特性的檢測部、及施行將藉由檢測部所檢測出的過渡 成分減弱的處理的衰減器。衰減器係被配備在調整相位的 前段。調整電路902係在時間擴展處理後,將已施行減弱處 理的過渡成分擴張。衰減器亦可藉由調整頻率領域的係數 的振幅値,來減弱過渡成分。 調整電路902亦可針對經時間擴展的過渡成分,使頻率 領域的振幅增加,來調整相位,藉此將經時間擴展的過渡 成分擴張。 (實施形態3) 實施形態3之聲響信號處理裝置係對所被輸入的聲響 信號進行QMF轉換,對QMF係數進行相位調整及振幅調 整,藉此實現時間擴展及頻率調變處理。 實施形態3之聲響信號處理裝置係具備有與第1圖所示 實施形態1之聲響信號處理裝置相同的構成要素。QMF解析 濾波器組901係將輸入的聲響信號轉換成QMF係數 45 201137859 X(m,n)。調整電路902係調整QMF係數。調整前的Qmf係數 X(m,n)係使用振幅及相位,表現成如式33所示。 [數式42] X(m, n) = r(m, η) · exp(y · a(m, n)) (式 3 3 ) 相位資訊a(m,n)係利用調整電路902予以調整而成為下 式: [數式43] a{m,n) 。調整電路902係藉由調整後的相位資訊與原本的振幅資*扎 r(m,n),按照式34來計算新QMF係數。 [數式44] X(m,n) = r(m,n)· exp(j a η)) (式 3 4) 最後,QMF合成濾波器組903係將以式34所計算出的新 QMF係數轉換成時間信號。其中,實施形態3之聲響信號處 理裝置亦可未施行QMF合成滤、波器’而將新QMF係數直接 照原樣輸出至後段的其他聲響信號處理裝置。後段的聲響 信號處理裝置係例如執行根據S B R技術的聲響信號處理 等。 與實施形態1不同之處在於,如第11圖所示’若時間擴 展係數為s,在原本的QMF頻帶的時槽之後被插入(s-1)個假 想時槽。 此時,調整電路902係必須維持原本的聲響信號的音 高。此外,調整電路902係必須以避開聽感上的音質劣化的 方式來計算出相位資訊。例如,若將原本的QMF區塊的相 46 201137859 位資訊設為cpn(k)(時槽指數n=l,...,L/M、子頻帶指數k=0, 1,…,Μ-1)時,調整電路902係以式35來計算上述假想時槽中 之調整後的新的相位資訊。
Vq(k) = M/q-i(k) + Acp„(k) (q = s · (n—1) +1,…,s . η、n= 1,…,L/M) (式35) 在此,與實施形態1同樣地,計算出相位差 A9n(k)=9n(k)-9n.,(k) ° 此外,相位差Acpn(k)亦可以式36來計算出。 [數式45]
(式 36) 所被挿入的時槽的振幅資訊係利用以在所挿入的交界 部呈連續的方式,將在前的時槽與在後的時槽之間作線性 補充(内挿)的値所構成。例如,若將原本的QMF區塊設為 an(k),所被#入的假想時槽的振幅資訊係藉由式37予以線 性補充。 [數式46] rqik) = ^h3
n-^--{q~s-(n-1))+0^ (k) ·η、n = '[,…,LIΜ) (式 37) QMF合成濾波器組903係將藉由如上所示插入假想時 槽所構成的新Q M F區塊與實施形態1同樣地轉換成時間領 域的信號。藉此,計算出作時間擴展的信號。其中,如上 所述,實施形態3之聲響信號處理裝置亦可未施行Q M F合成 濾波器組,而將新QMF係數直接照原樣輸出至後段的聲響 47 201137859 信號處理裝置。 實施形態3之聲響信號處理裝置亦未使用FFT運算,與 STFT基礎的相角音碼器處理相比,以壓倒性少的運算量來 實現同等的效果。 (實施形態4) 實施形態4之聲響信號處理裝置係對所被輸入的聲響 信號,進行QMF轉換,且對qmf係數進行相位調整。接著, 實施形態4之聲響信號處理裝置係藉由按每一個子頻帶來 處理原本的QMF區塊,藉此實現時間擴展處理。 實施形態4之聲響信號處理裝置係具備有與第1圖所示 實施形態1之聲響信號處理裝置相同的構成要素。()1^17解析 濾波器組901係將輸入的聲響信號轉換成qmf係數 X(m,n)。調整電路902係調整QMF係數。調整前的qmf係數 X(m,η)係使用振幅及相位而表現成如式38所示。 [數式47] X(m,n)=r(m,n\ exp〇' -a(m,n)) (式 3 8) 相位資訊a(m,η)係以調整電路902予以調敏 ’ ,而為下 [數式48] a{m,n) 。調整電路902係藉由調整後的相位資訊愈 /、原本的振幅資訊 r(m,n),按照式39來計算新的QMF係數。 [數式49] (式 39) X(m,n)= r{m, η) exp(y ci(m, n)) 48 201137859 最後,QMF合成濾波器組903係將在式39所計算出的新 QMF係數轉換成時間信號。其中,實施形態4之聲響信號處 理裝置亦可未施行QMF合成慮波’而將新qmf係數直接照 原樣輸出至後段的其他聲響信號處理裝置。後段的聲響信 號處理裝置係例如執行根據S B R技術的聲響信號處理等。 在QMF轉換係會有將所被輸入的聲響信號轉換成具有 時間特性的合成頻率領域的作用。因此,STFT基礎的時間 擴展手法亦可適用於QMF區塊的時間特性。 與實施形態1不同之處在於,如第12圖所示,將原本的 QMF區塊按每個子頻帶進行時間擴展。 原本的QMF區塊係由l/M個時槽與Μ個子頻帶所構 成。各QMF區塊由Μ個純量值所構成,各純量值係將經時 資訊以L/M個的係數構成。 在實施形態4中,STFT基礎的時間擴展手法係對各子 頻帶的純量值直接適用。亦即,調整電路902係將各子頻帶 的純量值進行連續FFT轉換,調整相位資訊,而施行逆 FFT。藉此,調整電路902係計算新的子頻帶的純量值。其 中’ §亥時間擴展處理由於按每個子頻帶來執行,因此運算 量並不大。 例如,若時間擴展係數為2時(將聲響信號擴展為2倍的 時間時)’調整電路902係按每個躍程尺寸Ra而反覆上述的 處理。結果,實現原本的QMF區塊的子頻帶包含2 · L/M個 係數的時間擴展。調整電路902係藉由反覆上述步驟,可將 原本的QMF區塊轉換成2倍長度的QMF區塊。 49 201137859 Q M F合成濾波器組9 03係將如此所得之新Q M F區塊與 時間信號加以合成。藉此,實施形態4之聲響信號處理裝置 係可將原本的時間信號作時間擴展成具有其2倍長度的時 間信號。其中,在此,將實施形態4之聲響信號處理方法稱 為子頻帶基礎的時間擴展手法。 以上,根據複數個實施形態來敘述使用3個不同手法的 時間擴展處理。表1係將該等運算量(複雜性評估: Complexity Measurement)的大小加以整理的比較表。 [表1]
時間擴展法 j 复雜性評估 (時間領域輸出) 複雜性評估 (QMF領域輸出) STFT基礎 %/2.'0巨拙.[ 2·log2(l).I + 2.1og2(l.%)·!.% QMF區塊 (實施形態1) 4|〇g2(z.)i 2-log2(z)l 假想QMF時槽 (實施形態3) 4-|〇82(^)i 2 1og2(l)l 子頻帶基礎 (實施形態4) 4]o^^yR:2,〇uyjL 2\og2(L)-L + yK2\og2(yM)L 可知3個時間擴展手法的運算量均比古典S T F T基礎的 時間擴展手法為非常少。此係基於若以STFT基礎的時間擴 展手法,係進行以内部進行迴圈的處理之故。在QMF基礎 中並未進行如上所示之迴圈處理。 (實施形態5) 在實施形態5中,與實施形態1〜4相同地,實現在QMF 領域的時間擴展。不同之處在於,如第13圖所示,在QMF 領域調整QMF係數之處。 QMF解析濾波器組1001係為了實現時間伸縮及頻率調 變之雙方’而將輪入聲響信號轉換成qMF係數。接著,調 50 201137859 整電路1002係與實施形態1〜4同樣地’進行所得qmf係數 的相位調整。 接著,QMF頻帶轉換器1003係將經調整的qMF係數轉 換成新QMF係數。帶通慮波器1004係視需要而在qmf領域 實施頻帶限制。頻帶限制係在使折返失真減低時為所需。 最後,QMF合成慮波器組1005係將新QMF係數轉換成時間 領域的信號。 其中,實施形態5之聲響信號處理裝置亦可未施行QMF 合成渡波,而將新QMF係數直接照原樣輸出至後段的其他 聲響信號處理裝置。後段的聲響信號處理裝置係執行例如 根據SBR技術的聲響信號處理等。以上為實施形態5的概 要。 第14圖所示之構成係藉由將QMF頻帶的相位及振幅進 行轉換處理,來實現設為對象的聲響信號的時間伸縮處理 及頻率調變處理的構成。 首先,QMF解析渡波器組1801為了實現時間伸縮及頻 率調變之雙方,而將聲響信號轉換成QMF係數。頻率調變 電路1803係對如此所得的QMF係數,在QMF領域實施頻率 調變處理。屬於帶通濾波器的頻帶限制濾波器1802在頻率 調變處理前,有為了去除折返失真而施加頻帶限制的情形。 接著,頻率調變電路1803係將相位轉換處理及振幅轉 換處理對複數QMF區塊連續適用,藉此進行頻率調變處 理。接著,時間擴展電路1804係進行藉由頻率調變處理所 生成的QMF係數的時間伸縮處理。時間伸縮處理係以與實 51 201137859 施形態1等相同的方法來實現。 其中,雖然被記載有頻率調變電路 :1:::序:_構成,是該等接續順:= 之 :匕亦可在時間擴展電_顿行時 後’由頻率調變電路刪施行頻率調變處理。 =,QMF合成渡波器k咖係將已施行頻率調變廣 伸祕理的QMF係數轉換成新的聲響信號。新合 聲響信號係與原本的_信號作比較,而形成為朝時間奉 方向及頻率軸方向作伸縮的信號。 其中’第14圖所示之聲響信號處理裝置亦可未施^ QMF合成纽,而將新qMF/^數直接照原樣輸出至後段命 其他聲響彳5號處理裝置。後段的聲響信號處理裝置係執个 例如根據SBR技術的聲響信號處理等。 在實施形態1〜4中係顯示時間擴展方法。實施形態5之 聲響#號處理裝置的構成係在該等實施形態之聲響信號處 理裝置的構成加上藉由音尚擴展處理所為之頻率調變處理 的構成。用以將時間或頻率調整成理想狀態有幾種手法。 但是’古典音高擴展處理,亦即將經時間擴展的信號作重 新取樣(抽減)的方法若照原樣並無法適用在頻率調變處理。 第14圖所示之聲響信號處理裝置係在藉由qmF解析濾 波器組1801所為之處理之後,在QMF領域上實現音高擴展 處理。藉由QMF解析濾波器組1801的處理,時間領域的預 定的信號成分(特定頻率中的正弦波成分)會成為2個不同的 QMF子頻帶的信號。因此,之後’由1個QMF係數區塊,針 52 201137859 對頻率與振幅之雙方,將正確的信號成分作分離而進行音 高轉換乃極為困難。 因此,實施形態5之聲響信號處理裝置亦可變形成音高 擴展處理在更早之前實施的構成。亦即,如第15圖所示, 形成為在QMF解析滤波器組的前段’將時間領域的輸入信 號重新取樣的構成。在第15圖中,.重新取樣部500將聲響信 號重新取樣,QMF解析濾波器組504將聲響信號轉換成QMF 係數,時間擴展電路調整QMF係數。 第15圖所示之重新取樣部500係由以下3個模組所構 成。亦即,重新取樣部500係具備有:(1)M倍的升頻取樣部 5〇1、(2)用以抑制折返失真的低通濾波器502、及(3)D倍的 減頻取樣部503。亦即’重新取樣部500係在QMF解析濾波 器組504的處理之前,將輸入的原信號重新取樣成係數M/D 倍。藉此’重新取樣部500係將全體的QMF領域的頻率成分 形成為Μ/D倍。 右需要複數次音局擴展處理時,例如需要2倍盘3彳立之 雙方的音高擴展處理時,以以下所示之處理為最佳。為了 使不同倍率的重新取樣處理整合,需要有具有按照各自的 重新取樣處理而不同的延遲量的複數延遲電路。該等延遲 電路係在合成被音高擴展處理成2倍或3倍的輪出信號之 前’先實施時間調整。 以下說明將包含低域的信號,藉由2倍或3倍的音高擴 展處理’將頻率頻帶擴張的情形。為了實現該情形,聲樂 信號處理裝置縣實施賴取樣處理。第16A圖係顯示經: 53 201137859 同擴展處理的輸出的圖。第16A圖的縱軸表示頻率軸,橫軸 表示時間軸。 聲響信號處理裝置係藉由重新取樣處理,生成包含低 域的信號(第16 A圖的最粗黑線)的2倍(第丨6 a圖的粗黑線) 及3倍(第16A圖的淺黑線)音高擴展處理後的信號。若在時 員或^生偏移,則在2倍的音高擴展處理信號會有心時間 的延遲時間,在3倍的音高擴展處理信號會有山時間的延遲 時間。 聲響信號處理裝置係為了獲得高頻帶的信號,而將原 本的L唬、具有2倍頻率頻帶的信號、及具有3倍頻率頻帶 的L嬈分別作時間擴展為2倍、3倍及4倍。結果,聲響信號 處理裝置係可將該等信號的合成信號如第16B圖所示生成 為高頻帶的信號。 其中,若發生時間偏移,如第16〇圖所示,延遲量的不 致亦直接照原樣被音高擴展,因此在高頻帶信號亦會有 發生埋延量不__致的問題的情形q述複數延遲電路係以 減低時間偏移的方式來實施時間調整。 亦可照原樣貫施上述重新取樣方法。但是,為了更加 削減上述處理的運算量,低通濾波器5〇2亦可藉由多相濾波 器、且來貫現。若低通濾波器502的次數較高時,為了削減運 算里’亦可根據折疊原理’而在附領域實現低通渡波器 502。 此外,若M/D<l.〇,亦即藉由音高擴展處理而使音高變 门時後段的QMF解析濾波器組5〇4與時間擴展電路5〇5中 54 201137859 的運算量會大於重新取樣處理所需的處理量。因此,藉由 更換時間擴展及重新取樣處理的順序,使運算量削減。 此外,在第15圖中,重新取樣部500被設在qmf解析淚 波器組504的前段。此係基於為了將當對特定音源(例如單 一正弦波等)施行音高擴展處理時所發生的音質劣化防止 成最小限度之故。在QMF解析濾波器組504的處理後再實施 音高調節處理時,原本的聲響信號所包含的正弦波信號會 形成為被分離成複數QMF區塊的狀態。因此,若對該信號 施行音高調節處理,原本的正弦波信號會擴散至多數qmf 區塊。 亦即,對於單-正弦波等特殊音源,若以上述構成進 二重新取樣處理者為佳。但是,在_般聲響信號的音高調 節處理僅輸入單-正弦波,係幾乎等同沒有。因此,成為 運算量增大要m的重新取樣處理亦可予以省略。 口。此外聲響仏號處理裝置亦可為對藉由Ο·解析滤、波 Γ、且0 4崎之q M F係數直接施行音高擴展處理的構成。在 =構f的㈣下’經施行音高擴展處理的聲響信號的品 ^右為早正弦波等特殊音源,會有稍微差劣的情形。 疋八有如上所不構成的聲響信號處理裝置係可對除此 卜的叙聲響化號保持充分的品質。鐘於該情形,藉由 省略重新取樣處理,而省略處理量非常大的處理部。因此, 全體的處理量被削減。 •,接者’聲響信號處理裝置亦可配合適用用途,而以適 當組合來構成。 55 201137859 (實施形態6) 貫施形態6之聲響k號處理裝置係與實施形態$相同, 進行在Q M F領域的時間伸縮及頻率調變處理。在實施形態6 中未使用在實施形態5中所使用的重新取樣處理,即為與實 施形態5不同之處。實施形態6之聲響信號處理裝置係具備 有第13圖所示之聲響信號處理裝置之構成要素。 第13圖所示之聲響信號處理裂置係進行時間伸縮處理 及頻率調變處理之雙方。因此’ QMF解析濾波器組1〇〇1係 將聲響信號轉換成QMF係數。接著,調整電路1〇〇2係將所 得QMF係數如實施形態1〜4之記載所示進行相位調整。 接著,QMF領域轉換器1003係將經調整的qMF係數轉 換成新QMF係數。帶通渡波器1004係視需要在qmf領域實 施頻帶限制。頻帶限制係必須在使折返失真減低時進行。 最後,QMF合成濾波器組1005係將新QMF係數轉換成時間 領域的信號。 其中’實施形態6之聲響信號處理裝置亦可未施行qmf 合成濾波’而將新QMF係數直接照原樣輸出至後段的其他 聲響信號處理裝置。後段的聲響信號處理裝置係例如執行 根據SBR技術的聲響信號處理等。以上為實施形態6的全體 構成。 實施形態6之聲響信號處理裝置係關於藉由音高擴展 處理所為之頻率調變處理,進行與實施形態5不同的處理。 為了將音高進行伸縮而藉此施行頻率調變處理,將時 間領域的聲響信號重新取樣的手法乃為非常單純。但是, 56 201137859 為了抑制折返失真所需之低通濾波器在構成上乃為必須。 因此,因低通濾波器而發生延遲。一般而言,為了提高重 新取樣處理的精度,必須要有次數較大的低通濾波器。另 一方面,若次數較大,則濾波器的延遲會變大。 因此,第17圖所示之實施形態6之聲響信號處理裝置係 具備有在QMF領域轉換係數構成的QMF領域轉換器6 0 3。接 著,藉由QMF領域轉換器603,執行與重新取樣處理不同的 音向調節處理。 QMF解析濾波器組601係由輸入的時間信號計算qmf 係數。與實施形態1〜5同樣地’時間擴展電路602係將所計 算出的QMF係數進行時間擴展。qmf領域轉換器603係對經 時間擴展的QMF係數施行音高擴展處理。 如第18圖所示’ QMF領域轉換器603係未重新使用QMF 合成濾波器及QMF解析濾波器,將某qMF領域的qMF係數 直接轉換成頻率及時間的解析力分別不同的其他qMF領域 的QMF係數。如第18圖所示,QMF領域轉換器6〇3係可將由 Μ個子頻帶及L/M個時槽所構成的某QMF區塊,轉換成由N 個子頻帶與L/N個時槽所構成的新qMF區塊。 QMF領域轉換器603係可改變時槽數及子頻帶數。接 著,該輸出信號的時間及頻率的解析力係由輸入信號予以 ’錢。因此,為了同時實現時間擴展處理及音高擴展處理 之雙方’必須計算出新的時間擴展係數。例如,若將所希 望的時間擴展係數設為s,將所希望的音高擴展係數設為 w ’則新的時間擴展係數係以 57 201137859 [數式50] ? = 5 · w 予以計算。 第17圖係顯示實現時間擴屐處理與音高擴展處理之雙 方的構成圖。其中’第17圖所示之聲響信號處理裝置係以 時間擴展處理(時間擴展電路6〇2)與音高擴展處理_f領 域轉換11603)的順序所構成。但是,聲響信號處理裝置亦 可為先進行音高擴展處理,之後再進行時間擴展處理的構 成。在此,假設有L個輸入取樣。 QMF解析濾波器組601係由L個取樣計算出由M個子頻 可及L/M個時槽所構成的QMF區塊。時間擴展電路602係由 如上所示所計算出的QMF區塊的各qmf係數,計算出由μ 個子頻帶及
[數式51] s-L/M 個時槽所構成的QMP區塊。最後,QMF領域轉換器603係將 經擴展的QMF區塊轉換成由w · Μ個子頻帶及s · L/Μ個時 槽所構成的其他QMF區塊(若w>l.〇 ’最小的Μ個子頻帶會 成為最後的輸出信號)。 QMF領域轉換器6〇3的處理係相當於將QMF合成濾波 器組及QMF解析濾波器組的運算處理作數學上的壓縮。聲 響信號處理裝置係形成為當使用QMF合成濾波器組及Q MF 解析渡波器組來進行運算時,在内部包含延遲電路的構 成。與其相比,具備有QMF頻帶轉換器603的聲響信號處理 58 201137859 《置係可肖1丨減運算延遲及運算量。例如,聲響信號處理裝 置:當將子頻帶指數為Sk㈣,.,Μ_υ的子頻帶轉換成子 [數式52] S'^QMF_ANAwM(QMF_SYNM(Sk,P)p , =QMF_comert{Sk,PM,PwM) 丫 ’ * (式 4〇) 在此,Pm與PwM係分別表示Qmf*析濾波器組與QMF 合成濾波器組的原型函數。 接著,關於音高調節處理之其他例加以敘述。與上述 所述之音高調節處理不同,聲響信號處理裝置係如下所示 來進行處理。 (a) 聲響彳s號處理裝置係將擴展處理前的QMF區塊所包 含的信號的頻率成分進行檢測。 (b) 聲響信號處理裝置係藉由預定的轉換係數來將頻率 移位。供頻率移位之用的單純方法係將前述轉換係數乘以 輸入信號的音高的方法。 (c) 聲響信號處理裝置係構成所希望的移位頻率成分下 的新QMF區塊。 聲響信號處理裝置係對藉由qMF轉換所被計算出的 QMF區塊,藉由式41來計算信號的頻率成分ω(η1〇。 [數式53] ω(ηΛ) = \ Princ^M^k))^^k kiseven [princ arg(A^(n, k)-n)l π+ k k is odd (式 41) 在此,princarg(ct)係表示α中的基礎頻率。此外,△wn k) 59 201137859 係Δφ(η,1ί)= (p(n,k)-cp(n-i,k) ’ 表示同一子頻帶k中的2個QMF 成分的相位差。 所希望的擴展後的基礎頻率係使用轉換係數p Q (假定 Ρ〇>1),作為P〇 · co(n,k)予以計算。 音高的擴展及壓縮(一併稱為移位)的本質在於將所希 望的頻率成分建構在移位後的qMF區塊上。音高調節處理 係如第19圖所示,亦可以下列步驟予以實現。 (a) 首先’聲響信號處理裝置係將移位後的qmf區塊初 期化(S1301)。聲響信號處理裝置係將所有QMF區塊中的相 位(p(n,k)及振幅r|(n,k)設定為〇。 (b) 接著,聲響信號處理裝置係將子頻帶反覆轉換係數 P〇份,藉此決定子頻帶的交界(sl3〇2)。若為Pq>1,聲響信 號處理裝置為了避免折返失真,將較低者的子鮮交界^ 作為klb=o而進行計算’將較高者的子頻帶交界u作為 kub=floor(M/P〇)而進行計算。 此係因為所有頻率成分均被包含在 [數式54] 下限:
2M 、上限:
户〇 2M) 之故。 ⑷聲響信號處理裝置係對位於[kibkub]的第j個子頻 帶將移位處理後的頻率p0 . _,j)映射在指數 q(n)=mimd(P0 ·咖卿邮)。 ⑷聲響信號處理裝置係重新建構新的"(n,_的 60 201137859 相位及振幅⑻鳩)。在此’聲響信號處理裝置係藉由式Μ 來计鼻新的振幅。 [數式55] (式 42) 位0 <l{n) is even q{n) is odd ‘,+)) = η(«,+)) + r。(《,_/).七。丄 2y 函數F()容後詳述。 聲響信號處理裝置係藉由式43來計算新的相 [數式56] +,+))=| 1 /2 · -】,+))+(释)-1).旬 \\12·{ψ{η, q(n)) + ψ(η-\, q(n)) + (df{n) -1). ^ (式 43) 在此,則提為“包含”df(n)=P〇· c〇(n,j)_q(n)及 φ(ηεϊ(η)) 的調整。聲響信號處理裝置係加算複數次2π,俾以保證_π Scp(n,q(n))<7t。 (e)聲響信號處理裝置係將關於所希望的頻率成分p〇 . ®(n,j)的子頻帶指數 [數式57] 映射在藉由式44所計算出的子頻帶(S1307)。 [數式58] 咖)={中卜 Μ.4")、(+1 /2 式 U(«) -1 if Ρ〇· ω(η, j) <q(n)+m ( ⑴聲響信號處理裝置係重新建構新的區塊 [數式59] 201137859 («,?(》)) 的相位絲幅(S13G8)°接著’聲響信號處縣置係藉由式 45而δ十算出新的振幅。 [數式60] ‘咖))=+,咖))+咖—η;(式 45) 函數F()容後詳述。 聲響信號處理裝置係藉由式46來計算新的相位。 [數式61] (式 46) ¥{n,q{n)) = ¥{n,q(n))-W(n - ],9(η)) + ψ(η _ ^W)+ ^ 前提為“包含” [數式62]
HnMn)) 俾以保證 的調整。聲響信號處理裝置係加算複數次2π, [數式63] (g)聲響信號處理裝置在暫時處理[k|b,kub]的範圍所包 έ的所有子頻號之後,由於ρ〇>ι,因此會有新qMF區 塊所包含的値成為“0”的情形。聲響信號處理裝置係對如上 所不之區塊,將各自的相位資訊以成為“非〇”的方式進行線 性補充。此外,聲響信號處理裝置係根據相位資訊來補充 各自的振幅(S1310)。 (h)聲響信號處理裝置係將新qMF區塊的振幅及相位 資訊轉換成複係數的區塊信號(S1311)。 62 201137859 關於上述振幅調整及補充,在此省略說明。該等雙方 係相關於在QMF領域中的信號的頻率成分與振幅之間的關 係性之故。 正弦的音調強的信號係如上述(c)及(e)所示’也許會發 生2個不同的QMF子頻帶的信號成分。其解析結果,該等2 個子頻帶中的振幅的關係係依據QMF解析渡波器組(QMF 轉換)的原型濾波器。 例如,QMF解析濾波器組(QMF轉換)係以在 MPEGSurround及HE-AAC方式所使用的濾波器組為前提。 第20A圖係顯示原型濾波器p(n)(濾波器長640取樣)的振幅 響應的圖。為了大致完全達成重新建構性,該振幅響應係 在頻率[-0·5,0.5]的外側急遽衰減。以該原型濾波器為基 準,具有Μ個頻帶數的複QMF解析濾波器組的係數係定義 為: [數式64] 此時,複濾波器組係在第k個子頻帶中,以頻率中央成 為k+1/2的方式所構成。第施圖係顯示被抽減的頻率響應 的圖。為方便起見,第k]個子頻帶的振幅特性係在第曰細 圖的左側以折線表示’第k+1個子㈣的振幅特性係在第 20B圖的右側以折線表示。 如第厕圖所示,在頻率他别训)的成分中若 為(XdfWk+WW,則分別提供第k個與第k+1個子頻帶的 63 201137859 2個區塊。此外,若為_1<df=f〇_(k+1/2)<〇,則提供第k-l個 與第k個子頻帶的2個區塊(參照上述(e))。與其相對應的振 幅係依據頻率f0與第k個子頻帶的中央頻率的差、及子頻帶 濾-波器的振幅。 子頻帶的振幅F(df)係在-l$df<l中呈對稱的函數,以 [數式65] 0 Λ: = -1 F(x)= F(-x) = x = _1/2 1 x = 0 來表示。 2個區塊以相同頻率存在,因此該等相位差係必須滿足 下式 [數式66] ^ψ{η,^(η)) = Αιμ(η,ς(η)) + π 。(參照上述(f)) 由以上可知,振幅的補充處理並非應該作為線性補充 來處理。取而代之,在信號的頻率成分與振幅資訊之間的 關係應如上所述。 如上所述,在實施形態6中係進行在QMF領域的相位調 整及振幅調整。至此亦如所述所示,聲響信號處理裝置係 將按每個單位時間所被區分的聲響信號以QMF濾波器組逐 次轉換成QMF領域的係數(QMF區塊)。接著,音響信號處 理裝置係以按照預先指定的擴展率(s倍,例如s=2,3,4等)來 保持相鄰的每個QMF區塊的相位及振幅的連續性的方式來 64 201137859 調整各QMF區塊的振幅及相位。藉此, 係實現相角音碼器處理。 聲響信號處理裝置
形。在如上所示之情形下’後段的其他聲鲤 使用QMF係數的情 ^聲響信號處理裝置 亦可對在QMF4M_相肖音碼⑽叫 施行根據SBR技術的頻帶擴大處理等任何聲響處理。接 著’如上所示之後段的其他聲響信號處理可利用 Q—合成濾波器組而將qMF係數轉換成時間領域的聲響信 號。 第3圖所示之構成係該組合之—例。此係將在qmf領域 的相角音碼器處理與聲響信號的頻帶擴大技術加以組合的 聲響解碼裝置之-例。以下說明使用相角音碼器處理的聲 響解碼裝置的構成。 刀離部1201係將輪入的位元流分離成供高域生成之用 的參數與供低域解碼之_編碼資訊。參數解碼部12〇7係 將供円域生成之用的參數進行解碼。解碼部12G2係由供低 /解I之用的編碼資訊將低域成分的聲響信號進行解碼。 Q M F解析料^組⑽係將經解碼的聲響信號轉換成〇 μ f 領域的音響信號。 頻率調憂電路1205及時間擴展電路12〇4係對QMF領域 的聲響信號施行前述相角音碼器處理。之後,高域生成電 65 201137859 路1206係使用供咼域生成之用的參數來生成高域頻率成分 的信號。等高線調整電路1208係將高域成分的頻率等高線 進行調整。QMF合成濾波器組1209係將QMF領域中的低域 成分及高域成分的聲響信號轉換成時間領域的聲響信號。 其中’在上述低域成分的編碼處理或解碼處理亦可使 用MPEG-AAC方式、MPEG-Layer3等聲響編碼方式,或者 可使用ACELP等聲音編碼方式。 此外’當以QMF頻帶進行相角音碼器處理時,關於調 變係數r(m,n),亦可按每個(^娜區塊的子頻帶指數(m,n)進 行加權。藉此’ QMF係數係利用按每個子頻帶指數具有不 同的值的δ周變係數予以调變。例如,在與高域頻率相對應 的子頻帶指數中,有在擴展時,聲響信號的失真變大的情 形。對如上所示之子頻帶指數,使用使擴展比例變小的擴 展係數。 此外’以在QMF領域進行相角音碼器處理的其他構成 而言,聲響信號處理裝置亦可在QMF解析濾波器組的後段 另外具備有其他QMF解析濾波器組。若僅以第iQMF解析濾 波器組,會有低域的頻率解析力低的情形。此時,即使對 包含較多低域成分的聲響信號施行相角音碼器處理,亦無 法獲得充分效果。 因此’為了使低域成分的頻率解析力提升,亦可使用 用以解析低域部分(例如第1QMF解析濾波器組的輸出所包 含的全QMF區塊的一半)的第2QMF解析濾波器組。藉此, 頻率解析力提升為2倍。此外,藉由施行上述在qMF領域的 66 201137859 相角音碼器處理,在維持音皙声 % η守曰為的情形下,直接提高運算量 及記憶體消耗量的削減效果。 第4圖係顯示使qMf領域的解析力提升的構成例圖。 QMF合成渡波器組24_將輸人的聲響信號暫時以QMF合 成據波器加以合成。之後,QMF解析據波11組2402係以2 倍解析度的QMF解析遽波器來計算⑽係數。對已形成為2 倍分解析度的QMF領域的信號,並列構成進行2倍的時間擴 及進行24。3倍或4倍的音高調節處理的相角音碼器處 理電路(第1時間擴展電路細、第2時間擴展電路及第 3時間擴展電路2405)。 接著,各相角音碼器處理電路係以2倍⑽析度,統一 進行擴展關列的相角音碼聽理。接著,合併電路2 * 〇6 係將經相角音碼器處理的錢加以合成。 關於將至此為止所說明的時間擴展處理及音高擴展處 里使用在聲響k號之編碼裝置之例,說明如下。 第21圖係顯示使用時間擴展處理及音高擴展處理來將 聲響信號進行編碼的聲響編碼裝置的構成圖。第21圖所示 之聲響編碼裝置係將按每個一定數的取樣作分割的聲響信 號進行訊框處理。 首先,減頻取樣部1102係將聲響信號進行減頻取樣, 藉此生成僅包含低域頻率成分的信號。編碼部1103係將僅 包含s玄低域的聲響信號,使用以MPEG-A AC、MPEG-Layer3 或AC3方式等所代表的聲響編碼方式來進行編碼,藉此生 成編碼資訊。此外,同時,QMF解析濾波器組1104係將僅 67 201137859 包含低域成分的聲響彳§號轉換成Qmf係數。另一方面,qmf 解析濾波器組u〇1係將包含全頻帶成分的聲響信號轉換成 QMF係數。 時間擴展電路1105及頻率調變電路1106係將已將僅包 含低域成分的聲響信號轉換成QMF領域的信號(qMf係數) 調整成如上述複數實施形態所示,而生成高域的假想QMp 係數。 參數計算部1107係將上述假想的高域QMF係數、與包 含全頻帶成分的QMF係數(實際的qMF係數)作比較,藉此 計算出高域成分的等高線資訊。重疊部1108係將所計算出 的等高線資訊與編碼資訊相重疊。 第3圖係顯示聲響解碼裝置之構成圖。第3圖所示之聲 響解碼裝置係接收以上述音響編碼裝置所編碼的編碼資訊 而解碼成聲響信號的裝置。分離部1201係將所接收到的編 碼資訊分離成第1編碼資訊與第2編碼資訊。參數解碼部 1207係將第2編碼資訊轉換成高域的QMF係數的等高線資 訊。另一方面,解碼部1202係由第1編碼資訊,將僅包含低 域成分的聲響信號進行解碼。QMF解析濾波器組1203係將 經解碼的聲響信號轉換成僅包含低域成分的QMF係數。接 著,時間擴展電路1204及頻率調變電路1205係對僅包含該 低域成分的QMF係數,如上述複數實施形態所示,將時間 及音高進行調整《藉此,生成包含高域成分的假想QMF係 數。 等高線調整電路1208及高域生成電路1206係將包含高 68 201137859
域成分的假想QMF係數’根據所接收到的第2編碼資訊所包 含的等高線資訊來進行調整。QMF合成濾波器組1209係將 經調整的QMF係數與低域的qMF係數加以合成。接著, QMF合成濾波器組12〇9係將所得的合成QMF係數,以qMF 合成濾波器轉換成包含低域成分與高域成分之雙方的時間 領域的聲響信號。 如上所示’聲響編碼裝置係將時間伸縮比作為編碼資 訊來進行傳送。聲響解碼裝置係使用時間伸縮比來將聲響 信號進行解碼。藉此,聲響編碼裝置係可按每個訊框使時 間伸縮比作各種變化。因此,高域成分的控制變得較為靈 活。因此,達成高編碼效率。 第22圖係顯示使用習知的SFTF基礎的時間擴展電路及 頻率調變電路的情形、及使用QMF基礎的時間擴展電路及 頻率調變電路的情形,進行音質比較實驗的結果的圖。第 22圖所示之結果係根據位元率為16kbps、單聲道信號的條 件下的實驗。此外,該結果係根據藉由MUSHRA(Multiple Stimuli with Hidden Reference and Anchor)法所為之評估。 在第22圖中,縱軸係表示與STFT方式的音質差,橫軸 係表示具有不同的聲響特性的複數音源。由第22圖可知’ 與SFTF基礎的方式相比較,亦使QMF基礎的方式以大致同 等的音質來作編碼及解碼。本實驗中所使用的音源係在編 碼及解碼時尤其容易發生劣化的音源◊因此可知對於除此 之外的一般聲響信號,亦一面具有同等性能,一面進行編 碼及解碼。 69 201137859 如上所示,本發明之聲響信號處理裝置係在QMF領域 中進行時間擴展處理及音高擴展處理。本發明之聲響信號 處理與古典STFT基礎的時間擴展處理及音高擴展處理相 比,係使用QMF濾波器予以實現。因此’本發明之聲響信 號處理並不需要使用運算量大的FFT’而可以較少的運算量 來實現同等的效果。此外,在STFT基礎中’由於需要實施 藉由躍程尺寸所為之處理,因此會發生處理延遲。在QMF 基礎中,QMF濾波器的處理延遲非常短。因此,本發明之 聲響信號處理裝置亦具備有可使處理延遲非常小的優異優 點。 (實施形態7) 第23A圖係顯示實施形態7之聲響信號處理裝置的構成 圖。第23A圖所示之聲響信號處理裝置係具備有:濾波器組 2601及調整部2602。濾波器組2601係進行與第1圖所示之 QMF解析濾波器組901等相同的動作。調整部2602係進行與 第1圖所示之調整電路902等相同的動作。接著,第23A圖所 示之聲響信號處理裝置係使用預定的調整係數來轉換輸入 聲響信號列。在此,預定的調整係數係相當於時間伸縮比、 頻率調變比、及將該等加以組合的比率的任一者。 第23B圖係顯示第23 A圖所示之聲響信號處理裝置的 處理的流程圖。濾波器組2601係使用QMF解析濾波器而將 輸入聲響信號列轉換成qMF係數列(S26〇丨)。調整部26〇2係 使QMF係數列依據預定的調整係數來進行調整(S26〇2)。 例如,調整部2602係由經調整的QMF係數列,以可得 70 201137859 以預先訂定的時間伸縮比作時間伸縮的輸入聲響信號列的 方式,使QMF係數列的相位資訊及振幅資訊依據表示預先 訂定的時間伸縮比的調整係數來進行調整。或者,調整部 2602係由經調整的QMF係數列,以可得以預先訂定的頻率 調變比作頻率調變(音高調節)的輸入聲響信號列的方式,使 QMF係數列的相位資訊及振幅資訊依據表示預先訂定的頻 率調變比的調整係數來進行調整。 第24圖係顯示第23 A圖所示之聲響信號處理裝置之變 形例的構成圖。第24圖所示之聲響信號處理襞置係除了第 23A圖所示之聲響信號處理裝置以外,另外具備有高域生成 部2705及高域補充部2706。此外,調整部2602係具備有: 頻▼限制部27〇1、計算電路2702、調整電路2703及頻帶轉 換器2704。 濾波器組2601係將輸入聲響信號列按每個一定時間間 隔逐次轉換成QMF係數列,藉此生成每隔一定時間間隔的 QMF係數列。計算電路2702係按每隔一定時間間隔所生成 的QMF係數列的每個時槽及每個子頻帶,計算出相位資訊 及振幅資訊。調整電路2703係使每個時槽及每個子頻帶的 相位資訊依據預定的調整係數來進行調整,藉此調整QMF 係數列的相位資訊及振幅資訊。 頻V限制部2 701係進行與第14圖所示之頻帶限制濾波 器1802相同的動作。亦即,頻帶限制部27〇1係在QMF係數 列調整前,由QMF係數列取出與預先訂定的頻帶寬度相對 應的新的QMF係數列。頻帶轉換器2704係進行與第17圖所 71 201137859 示之QMF領域轉換器相同的動作。亦即,領域轉換器27〇4 係在QMF係數列調整後,將qMF係數列轉換成時間及頻率 的解析力分別不同的新的QMF係數列。 其中’頻帶限制部2701亦可在QMF係數列調整後,由 QMF係數列取出與預先訂定的頻帶寬度相對應的新的qmf 係數列。此外’領域轉換器2704亦可在QMF係數列調整前, 將QMF係數列轉換成時間及頻率的解析力分別不同的新的 QMF係數列。 高域生成部2705係進行與第3圖所示之高域生成電路 1206相同的動作。亦即,高域生成部2705係由調整後的QMF 係數列’使用預先訂定的轉換係數,生成屬於與比與調整 前的QMF係數列相對應的頻率頻帶為更高的高頻率頻帶相 對應的新的QMF係數列的高域係數列。 尚域補充部2706係進行與第3圖所示之等高線調整電 路1208相同的動作。亦即,高域補充部27〇6係將屬於高頻 率頻帶中未藉由高域生成部2705來生成高域係數列的頻率 頻帶的脫落頻帶的係數’使用屬於與脫落頻帶兩側相鄰接 的頻帶的兩域係數列來進行補充。 第25圖係顯示實施形態7之聲響編碼裝置的構成圖。第 25圖所示之音響編碼裝置係具備有:減頻取樣部28〇2、第工 濾波器組2801、第2濾波器組2804、第1編碼部2 u j、第2編 碼部2807、調整部2806、及重疊部2808。篦:κ固〜 乐25圖所示之聲 響編碼裝置係進行與第21圖所示之聲響編碼裝置相同的動 作。接著’第25圖所示之構成要素係與第21圖所示之構成 72 201137859 要素相對應。 亦即’減頻取樣部2802係進行與減頻取樣部11〇2相同 的動作。第1濾波器組2801係進行與qMF解析濾波器組hoi 相同的動作。第2濾波器組2804係進行與qMF解析濾波器組 1104相同的動作。第丨編碼部28〇3係進行與編碼部丨丨们相同 的動作。第2編碼部2807係進行與參數計算部11〇7相同的動 作。5周整部2806係進行與時間擴展電路11〇5相同的動作。 重疊部2808係進行與重疊部11〇8相同的動作。 第26圖係顯不第25圖所示之聲響編碼裝置的處理的流 程圖。 首先,第1濾波器組2801係使用qMF解析濾波器而將聲 響信號列轉換成QMF係數列(S2901)。接著,減頻取樣部 2802係藉由將聲響信號列進行減頻取樣,而生成新的聲響 信號列(S2902)。接著,第1編碼部28〇3係將所生成的新的聲 響信號列進行編碼(S2903)。接著,第2濾波器組28〇4係使用 QMF解析濾波器而將所生成的新的聲響信號列轉換成第 2QMF係數列(S2904)。 接著,調整部2806係使第2QMF係數列依據預定的調整 係數來進行調整(S2905)。預定的調整係數係如上所述,係 相當於時間伸縮比、頻率調變比、及將該等組合而成的比 率的任一者。 接著,第2編碼部2807係藉由將第1 qMF係數列與經調 整的第2QMF係數列作比較,生成解碼所使用的參數,而將 所生成的參數進行編碼(S2906)。接著,重疊部28〇8係將經 73 201137859 編碼的聲響信號列、與經編碼的參數相重疊(S2907)。 第27圖係顯示實施形態7之聲響解碼裝置的構成圖。第 27圖所不之聲響解碼裝置係具備有:分離部3001、第1解碼 部30〇7、第2解碼部3〇〇2、第丨濾波器組3〇〇3、第2濾波器組 3009、調整部3004及高域生成部3006。第27圖所示之聲響 解碼裝置係進行與第3圖所示之聲響解碼裝置相同的動 作。接著’第27圖所示之構成要素係與第3圖所示之構成要 素相對應。 亦即’分離部3〇〇1係進行與分離部1201相同的動作。 第1解碼部3007係進行與參數解碼部12〇7相同的動作。第2 解碼部3002係進行與解碼部i2〇2相同的動作。第【渡波器組 3003係進行與qMf解析濾波器組12〇3相同的動作。第2濾波 器組3_係進行與QMF合成濾波器組12〇9相同的動作。調 整部30G4係進行與時間擴展電路12()4相同的動作。高域生 成部3006係進行與高域生成電路1206相同的動作。 第28圖係顯示第27圖所示之聲響解碼裝置的處理的流 程圖。 首先,分離部3001係由所被輸入的位元流,將經編碼 的參數與經編碼的聲響信號列進行分離(s贿)。接著第i 解碼部丽鱗經編碼的參數進行解碼(SMGl)。接著,第2 •馬部3002係將經編碼的聲響信號列進行解碼(_3)。接 著,第1濾波器組3003係使用QMF解析濾波器,將藉由第2 解碼。P3002所被解媽的聲響信號列轉換成係數列 (S3104)〇 74 201137859 接著,調整部3004係使QMF係數列依據預定的調整係 數來進行調整(S3105)。預定的調整係數係如上所述,相當 於時間伸縮比、頻率調變比、及將該等加以組合的比率的 任一者。 接著,高域生成部3006係由經調整的QMF係數列,使 用經解碼的參數,生成屬於與比與QMF係數相對應的頻率 頻帶為更高的高頻率頻帶相對應的新的Q M F係數列的高域 係數列(S3106)。接著,第2濾波器組3009係使用QMF合成 濾波器而將Q M F係數列與高域係數列轉換成時間領域的聲 響#號列。 第29圖係顯示第27圖所示之聲響解碼裝置之變形例的 構成圖。第29圖所示之聲響解碼裝置係具備有:解碼部 2501、QMF解析濾波器組2502、頻率調變電路2503、結合 部2504、高頻重新建構部2505、及QMF合成濾波器組2506。 解碼部2501係由位元流而將聲響信號進行解碼。QMF 解析濾波器組2502係將經解碼後的聲響信號轉換成qmf係 數。頻率調變電路2503係對QMF係數施行頻率調變處理。 該頻率調變電路2503係具備有第4圖所示之構成要素。如第 4圖所示’在頻率調變處理中,以内部執行時間擴展處理。 接著,結合部2504係將由QMF解析濾波器組2502所得之 QMF係數、及由頻率調變電路25〇3所得之qmf係數相結 合。高頻重新建構部2505係由所結合的QMF係數而將與高 域相對應的QMF係數重新建構。QMF合成濾波器組2506係 將由高頻重新建構部2 5 0 5所得之Q M F係數轉換成音響信 75 201137859 號。 本發明之聲響信號處理裝置與STFT基礎的相角音碼 器處理相比,可削減運算量。此外,聲響信號處理裝置係 為了在QMF領域輸出信號,而可在SBR技術或Parametric Stereo等參數編碼處理中,解除頻帶轉換的非效率性。接 著,聲響信號處理裝置亦可削減領域轉換運算所需之記憶 體容量。 以上係根據複數個實施形態來說明本發明之聲響信號 處理裝置、聲響編碼裝置及聲響解碼裝置,但是本發明並 非限定於該等實施形態。對該等實施形態,該技術領域熟 習該項技術者可施行可思及的變形的形態、及將該等實施 形態中的構成要素任意組合所實現的其他形態亦被包含在 本發明中。 例如,亦可由其他處理部來執行特定的處理部所執行 的處理。此外,亦可變更執行處理的順序,亦可並行執行 複數的處理。 此外,本發明不僅可作為聲響信號處理裝置、聲響編 碼裝置或聲響解碼裝置來加以實現,亦可作為將構成聲響 信號處理裝置、聲響編碼裝置或聲響解碼裝置的處理手段 作為步驟的方法來加以實現。接著,本發明係可作為使電 腦執行該等方法所包含的步驟的程式來加以實現。此外, 本發明係可作為記錄有該程式之CD-ROM等電腦可讀取記 録媒體來加以實現。 此外,聲響信號處理裝置、聲響編碼裝置或聲響解碼 76 201137859 裝置所包含之複數構成要素亦可作為屬於積體電路的 LSI(Large Scale Integration)予以實現。該等構成要素係可 個別予以1晶片化,亦可以包含一部分或全部的方式予以1 晶片化。在此係形成為LSI,但是亦會有因積體度的不同’ 而被稱為IC(Integrated Circuit)、系統LSI、超級LSI或超LSI 的情形。 此外,積體電路化的手法並非侷限於LSI,亦可利用專 用電路或通用處理器來實現。亦可利用可程式的 FPGA(Field Programmable Gate Array)、或者可將LSI内部的 電路單元的連接及設定重新構成的可重新架構處理器 (ReConflgurable Processor)。 此外,若藉由半導體技術的進歩或所衍生的其他技術 而置換成L SI的積體電路化的技術登場,當然亦可使用該技 術,來進行聲響信號處理裝置、聲響編碼裝置或聲響解碼 裝置所包含的構成要素的積體電路化。 產業之可利用性 本發明之聲響信號處理裝置係有用於音頻記錄器、音 頻播放器、行動電話等。 【圖式簡單說明】 第1圖係顯示實施形態1之聲燮俨 车a彳5唬處理裝置的構成 圖。 第2圖係顯示實施形態1之時間擴展處理的說明圖。 第3圖係顯示聲響解碼裝置的構成圖 第4圖係顯示實施形態【之頻率調變電路的構成圖。
S 77 201137859 第5A圖係顯示實施形態2之QMF係數區塊的說明圖。 第5B圖係顯示在QMF領域之每個時槽的能量分布圖。 第5C圖係顯示在QMF領域之每個子頻帶的能量分布 圖。 第6A圖係顯示對應過渡成分的時間擴展處理的第1模 式的說明圖。 第6B圖係顯示對應過渡成分的時間擴展處理的第2模 式的說明圖。 第6 C圖係顯示對應過渡成分的時間擴展處理的第3模 式的說明圖。 第7A圖係顯示實施形態2之過渡成分抽出處理的說明 圖。 第7B圖係顯示實施形態2之過渡成分挿入處理的說明 圖。 第8圖係顯示過渡位置與QMF相位遷移比例的線性關 係圖。 第9圖係顯示實施形態2之時間擴展處理的流程圖。 第10圖係顯示實施形態2之時間擴展處理的變形例的 流程圖。 第11圖係顯示實施形態3之時間擴展處理的說明圖。 第12圖係顯示實施形態4之時間擴展處理的說明圖。 第13圖係顯示實施形態5之聲響信號處理裝置的構成 圖。 第14圖係顯示實施形態5之聲響信號處理裝置之第1變 78 201137859 形例的構成圖。 第15圖係顯示實施形態5之聲響信號處理裝置之第2變 形例的構成圖。 第16A圖係顯示藉由重新取樣處理予以音高調節處理 後的輸出的圖。 第16B圖係顯示藉由時間擴展處理所被期待的輸出的 圖。 第16C圖係顯示藉由時間擴展處理而錯誤輸出的圖。 第17圖係顯示實施形態6之聲響信號處理裝置的構成 圖。 第18圖係顯示實施形態6之QMF領域轉換處理的概念 圖。 第19圖係顯示實施形態6之頻率調變處理的流程圖。 第20A圖係顯示QMF原型濾波器的振幅響應的圖。 第20B圖係顯示頻率與振幅的關係圖。 第21圖係顯示實施形態6之聲響編碼裝置的構成圖。 第22圖係顯示音質評估的說明圖。 第23A圖係顯示實施形態7之聲響信號處理裝置的構成 圖。 第23B圖係顯示實施形態7之聲響信號處理裝置的處理 的流程圖。 第24圖係顯示實施形態7之聲響信號處理裝置之變形 例的構成圖。 第25圖係顯示實施形態7之聲響編碼裝置的構成圖。 79 201137859 第2 6圖係顯示實施形態Θ聲響編碼裝置的處理的流 程圖。 第27圖係顯示實施形態Ρ聲響解碼裝置的構成圖。 第28圖係顯示實施形態7之聲響解碼裝置的處理的流 程圖。 第29圖係顯示實施形態7之聲響解碼裝置之變形例的 構成圖。 第30Α圖係顯示時間擴展處理前之聲響信號之狀態的 說明圖。 第3 0 Β圖係顯示時間擴展處理後之聲響信號之狀態的 說明圖。 第31圖係顯示qmf解析處理及QMF合成處理的說明 圖。 【主要元件符號說明】 902、 1002、2703...調整電路 903、 1005、1209、1805、240卜 2506…QMF合成濾波器組 1004.. .帶通濾波器 1103.. .編碼部 1106、 1205、1803、2503 ...頻率調變電路 1107、 ··參數計算部 1108、 2808·.·重疊部 1201、3001··.分離部 500.·.重新取樣部 501··.升頻取樣部 502…低通濾波器 503'1102、2802...減頻取樣部 504、 601、901、1〇〇1、lioi、 1104、1203、1801、2402、 2502…QMF解析濾波器組 505、 602、1105、1204、1804 ...時間擴展電路 603、1003...QMF領域轉換器 80 201137859 1202、2501…解碼部 1206.. .南域生成電路 1207.. .參數解碼部 1208.. .等高線調整電路 1802…頻帶限制濾波器 2403.. .第1時間擴展電路 2404.. .第2時間擴展電路 2405.. .第3時間擴展電路 2406.. .合併電路 2504.. .結合部 2505.. .高頻重新建構部 2601.. .濾波器組 2602、2806、3004·.·調整部 2701.. .頻帶限制部 2702.. .計算電路 2703.. .調整電路 2704…領域轉換器 2705、3006...高域生成部 2706.. .高域補充部 2801、3003…第1濾波器組 2803.. .第1編碼部 2804、3009…第2濾波器組 2807.. .第2編碼部 3002…第2解碼部 3007.. .第1解碼部 81

Claims (1)

  1. 201137859 七、申請專利範圍: 1. 一種聲響信號處理裝置,係使用預定之調整係數而將輸 入聲響信號列進行轉換的聲響信號處理裝置,其特徵 為: 具備有: 滤波器組,係使用 QMF(Quadrature Mirror Filter)解 析濾波器,將前述輸入聲響信號列轉換成QMF係數列 者;及 調整部,使前述QMF係數列依據依據前述預定的調 整係數來進行調整。 2. 如申請專利範圍第1項之聲響信號處理裝置,其中,前 述調整部係由經調整之前述QMF係數列,以可獲得以預 定的時間伸縮比作時間伸縮的前述輸入聲響信號列的 方式,依據依據表示前述預定的時間伸縮比的前述預定 的調整係數來調整前述QMF係數列。 3. 如申請專利範圍第1項之聲響信號處理裝置,其中,前 述調整部係由經調整的前述QMF係數列,以可獲得以預 定的頻率調變比作頻率調變的前述輸入聲響信號列的 方式,依據表示前述預定的頻率調變比的前述預定的調 整係數來調整前述QMF係數列。 4. 如申請專利範圍第1項至第3項中任一項之聲響信號處 理裝置,其中,前述濾波器組係將前述輸入聲響信號列 按每個時間間隔逐次轉換成前述QMF係數列,藉此生成 每隔前述時間間隔的前述QMF係數列, 82 201137859 前述調整部係具備有: 計算電路,按每個前述時間間隔所生成的前述QMF 係數列的每個時槽及每個子頻帶計算出相位資訊;及 調整電路,使每個前述時槽及每個前述子頻帶的前 述相位資訊依據前述預定的調整係數來進行調整,藉此 調整前述QMF係數列。 5. 如申請專利範圍第4項之聲響信號處理裝置,其中,前 述調整電路係按每個前述子頻帶,使依據前述QMF係數 列的最初時槽的前述相位資訊、與前述預定的調整係數 所計算出的値,加上每個前述時槽的前述相位資訊,藉 此調整每個前述時槽的前述相位資訊。 6. 如申請專利範圍第4項或第5項之聲響信號處理裝置,其 中,前述計算電路係進一步按每個前述時間間隔所生成 的前述Q M F係數列的每個前述時槽及每個前述子頻帶 來計算出振幅資訊, 前述調整電路係進一步使每個前述時槽及每個前 述子頻帶的前述振幅資訊依據前述預定的調整係數來 進行調整,藉此調整前述QMF係數列。 7. 如申請專利範圍第1項至第6項中任一項之聲響信號處 理裝置,其中,前述調整部係進一步具備有頻帶限制 部,其係在前述QMF係數列調整前或調整後,由前述 QMF係數列取出與預先訂定的頻帶寬度相對應的新的 QMF係數列。 8. 如申請專利範圍第1項至第7項中任一項之聲響信號處 83 201137859 理裝置,其中,前述調整部係將調整前述QMF係數列的 比例按每個子頻帶作加權,且按每個前述子頻帶調整前 述QMF係數列。 9. 如申請專利範圍第1項至第8項中任一項之聲響信號處 理裝置,其中,前述調整部係進一步具備有領域轉換 器,其在前述QMF係數列調整前或調整後,將前述QMF 係數列轉換成時間及頻率的解析力不同的新的QMF係 數列。 10. 如申請專利範圍第1項至第9項中任一項之聲響信號處 理裝置,其中,前述調整部係由調整前的前述QMF係數 列檢測過渡成分,將所檢測出的前述過渡成分由調整前 的前述QMF係數列取出,調整所取出的前述過渡成分, 將經調整的前述過渡成分恢復成調整後的前述Q M F係 數列,藉此調整前述QMF係數列。 11. 如申請專利範圍第1項至第10項中任一項之聲響信號處 理裝置,其中,前述聲響信號處理裝置係進一步具備有: 高域生成部,由調整後的前述QMF係數列,使用預 先訂定的轉換係數,生成屬於與比與調整前的前述QMF 係數列相對應的頻率頻帶為更高的高頻率頻帶相對應 的新的QMF係數列的高域係數列;及 高域補充部,於前述高頻率頻帶之中,使用屬於與 前述脫落頻帶的兩側相鄰接的頻帶的前述高域係數 列,來補充屬未藉由前述高域生成部來生成前述高域係 數列的頻率頻帶的脫落頻帶的係數。 84 201137859 12. —種聲響編碼裝置,係將第1聲響信號列進行編碼的聲 響編碼裝置,其特徵為具備有: 第 1濾波器組,使用 QMF(Quadrature Mirror Filter) 解析濾波器,將前述第1聲響信號列轉換成第1Q M F係數 列; 減頻取樣部,藉由將前述第1聲響信號列進行減頻 取樣,而生成第2聲響信號列; 第1編碼部,將前述第2聲響信號列進行編碼; 第2濾波器組,使用QMF解析濾波器,將前述第2 聲響信號列轉換成第2QMF係數列; 調整部,使前述第2QMF係數列依據預定的調整係 數來進行調整; 第2編碼部,藉由將前述第1QMF係數列與經調整的 前述第2QMF係數列作比較,生成解碼所使用的參數, 來對前述參數進行編碼;及 重疊部,將經編碼的前述第2聲響信號列、及經編 碼的前述參數加以重疊。 13. —種聲響解碼裝置,係由所被輸入的位元流,將第1聲 響信號列進行解碼的聲響解碼裝置,其特徵為具備有: 分離部,由所被輸入的前述位元流,分離成經編碼 的參數與經編碼的第2聲響信號列; 第1解碼部,將經編碼的前述參數進行解碼; 第2解碼部,將經編碼的前述第2聲響信號列進行解 碼; 85 201137859 第1濾波器組,使用 QMF(Quadrature Mirror Filter) 解析;慮波器,將藉由前述第2解碼部所被解碼的前述第2 聲響信號列轉換成QMF係數列; δ周整部’使前述qmf係數列依據預定的調整係數來 進行調整; 高域生成部’使用經解碼的前述參數,由調整後的 月〗述QMF係數列’生成屬於與比與調整前的前述QMF 係數列相對應的頻率頻帶更高的高頻率頻帶相對應的 新的QMF係數列的高域係數列;及 第2渡波器組’使用QMF合成渡波器,將前述高域 係數列、及調整前的前述Q MF係數列轉換成時間領域的 前述第1聲響信號列。 14· 一種聲響信號處理方法,係使用預定的調整係數,將輸 入聲響信號列進行轉換的聲響信號處理方法,其特徵為 包含: 轉換步驟’使用 QMF(Quadrature Mirror Filter)解析 遽波器’將前述輸入聲響信號列轉換成QMF係數列;及 調整步驟’使前述qMF係數列依據前述預定的調整 係數來進行調整。 ’種聲響編碼方法’係將第1聲響信號列進行編碼的聲 響編碼方法,其特徵為包含: 第1轉換步驟’使用QMF(Quadrature Mirror Filter) 解析濾波器,將前述第1聲響信號列轉換成第丨Q M F係數 列; 86 201137859 減頻取樣步驟,藉由將前述第1聲響信號列進行減 頻取樣,生成第2聲響信號列; 第1編碼步驟,將前述第2聲響信號列進行編碼; 第2轉換步驟,使用QMF解析濾波器,將前述第2 聲響信號列轉換成第2QMF係數列; 調整步驟,使前述第2QMF係數列依據預定的調整 係數來進行調整; 第2編碼步驟,將前述第1QMF係數列與經調整的前 述第2QMF係數列作比較,藉此生成解碼所使用的參 數,而將前述參數進行編碼;及 重疊步驟,將經編碼的前述第2聲響信號列與經編 碼的前述參數進行重疊。 16.—種聲響解碼方法,係由所被輸入的位元流,將第1聲 響信號列進行解碼的聲響解碼方法,其特徵為包含: 分離步驟,由所被輸入的前述位元流,分離成經編 碼的參數與經編碼的第2聲響信號列; 第1解碼步驟,將經編碼的前述參數進行解碼; 第2解碼步驟,將經編碼的前述第2聲響信號列進行 解碼; 第 1 轉換步驟,使用 QMF(Quadrature Mirror Filter) 解析濾波器,將藉由前述第2解碼步驟所被解碼的前述 第2聲響信號列轉換成QMF係數列; 調整步驟,使前述QMF係數列依據預定的調整係數 來進行調整; 87 201137859 高域生成步驟,使用經解碼的前述參數,由調整後 的前述QMF係數列,生成屬於與比與調整前的前述QMF 係數列相對應的頻率頻帶更高的高頻率頻帶相對應的 新的QMF係數列的高域係數列;及 第2轉換步驟,使用QMF合成濾波器,將前述高域 係數列、及調整前的前述Q M F係數列轉換成時間領域的 前述第1聲響信號列。 17. —種程式,係用以使如申請專利範圍第14項之聲響信號 處理方法所包含的步驟執行於電腦的程式。 18. —種程式,係用以使如申請專利範圍第15項之聲響信號 處理方法所包含的步驟執行於電腦的程式。 19. 一種程式,係用以使如申請專利範圍第16項之聲響信號 處理方法所包含的步驟執行於電腦的程式。 20. —種積體電路,係使用預定的調整係數,來轉換輸入聲 響信號列的積體電路,其特徵為具備有: 濾·波器組,使用 QMF(Quadrature Mirror Filter)解析 濾波器,將前述輸入聲響信號列轉換成QMF係數列;及 調整部,使前述QMF係數列依據預定的調整係數來 進行調整。 21. —種積體電路,係將第1聲響信號列進行編碼的積體電 路,其特徵為具備有: 第 1 濾、波器組,使用 QMF(Quadrature Mirror Filter) 解析濾波器,將前述第1聲響信號列轉換成第1Q M F係數 列; 88 201137859 減頻取樣部,藉由將前述第1聲響信號列進行減頻 取樣而生成第2聲響信號列; 第1編碼部,將前述第2聲響信號列進行編碼; 第2濾波器組,使用QMF解析濾波器,將前述第2 聲響信號列轉換成第2QMF係數列; 調整部,使前述第2QMF係數列依據預定的調整係 數來進行調整; 第2編碼部,將前述第1QMF係數列與經調整的前述 第2QMF係數列作比較,藉此生成解碼所使用的參數, 來對前述參數進行編碼;及 重疊部,將經編碼的前述第2聲響信號列與經編碼 的前述參數加以重疊。 22. —種積體電路,係由所被輸入的位元流,將第1聲響信 號列進行解碼的積體電路,其特徵為具備有: 分離部,由所被輸入的前述位元流,分離成經編碼 的參數與經編碼的第2聲響信號列; 第1解碼部,將經編碼的前述參數進行解碼; 第2解碼部,將經編碼的前述第2聲響信號列進行解 碼, 第 1濾波器組,使用 QMF(Quadrature Mirror Filter) 解析濾波器,將藉由前述第2解碼部所被解碼的前述第2 聲響信號列轉換成QMF係數列; 調整部,使前述QMF係數列依據預定的調整係數來 進行調整; 89 201137859 高域生成部,使用經解碼的前述參數,由調整後的 前述QMF係數列,生成屬於與比與調整前的前述QMF 係數列相對應的頻率頻帶更高的高頻率頻帶相對應的 新的QMF係數列的高域係數列;及 第2濾波器組,使用QMF合成濾波器,將前述高域 係數列、及調整前的前述Q M F係數列轉換成時間領域的 前述第1聲響信號列。 90
TW099135730A 2009-10-21 2010-10-20 A sound signal processing device, a sound coding device, and a sound decoding device TWI509596B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009242603 2009-10-21
JP2010005282 2010-01-13
JP2010059784 2010-03-16

Publications (2)

Publication Number Publication Date
TW201137859A true TW201137859A (en) 2011-11-01
TWI509596B TWI509596B (zh) 2015-11-21

Family

ID=43900037

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099135730A TWI509596B (zh) 2009-10-21 2010-10-20 A sound signal processing device, a sound coding device, and a sound decoding device

Country Status (6)

Country Link
US (1) US9026236B2 (zh)
EP (2) EP2704143B1 (zh)
JP (1) JP5422664B2 (zh)
CN (1) CN102257567B (zh)
TW (1) TWI509596B (zh)
WO (1) WO2011048792A1 (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MY152376A (en) * 2010-03-09 2014-09-15 Fraunhofer Ges Forschung Improved magnitude response and temporal alignment in phase vocoder based bandwidth extension for audio signals
JP5807453B2 (ja) * 2011-08-30 2015-11-10 富士通株式会社 符号化方法、符号化装置および符号化プログラム
EP2631906A1 (en) * 2012-02-27 2013-08-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Phase coherence control for harmonic signals in perceptual audio codecs
JP2014041240A (ja) * 2012-08-22 2014-03-06 Pioneer Electronic Corp タイムスケーリング方法、ピッチシフト方法、オーディオデータ処理装置およびプログラム
JP6289507B2 (ja) 2013-01-29 2018-03-07 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ エネルギー制限演算を用いて周波数増強信号を生成する装置および方法
TWI546799B (zh) * 2013-04-05 2016-08-21 杜比國際公司 音頻編碼器及解碼器
US9514761B2 (en) 2013-04-05 2016-12-06 Dolby International Ab Audio encoder and decoder for interleaved waveform coding
US9609451B2 (en) * 2015-02-12 2017-03-28 Dts, Inc. Multi-rate system for audio processing
CN106297813A (zh) * 2015-05-28 2017-01-04 杜比实验室特许公司 分离的音频分析和处理
US9613628B2 (en) 2015-07-01 2017-04-04 Gopro, Inc. Audio decoder for wind and microphone noise reduction in a microphone array system
CN106454449A (zh) * 2016-10-25 2017-02-22 深圳芯智汇科技有限公司 主音箱、从音箱及路由器控制同步播放音频的方法
CN108429713B (zh) * 2017-02-13 2020-06-16 大唐移动通信设备有限公司 一种数据压缩方法及装置
EP3382700A1 (en) 2017-03-31 2018-10-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for post-processing an audio signal using a transient location detection
EP3382701A1 (en) * 2017-03-31 2018-10-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for post-processing an audio signal using prediction based shaping
US10726828B2 (en) * 2017-05-31 2020-07-28 International Business Machines Corporation Generation of voice data as data augmentation for acoustic model training
US20190074805A1 (en) * 2017-09-07 2019-03-07 Cirrus Logic International Semiconductor Ltd. Transient Detection for Speaker Distortion Reduction
CN111093302B (zh) * 2019-11-26 2023-05-12 深圳市奋达科技股份有限公司 音箱灯光控制方法和音箱
US11317203B2 (en) * 2020-08-04 2022-04-26 Nuvoton Technology Corporation System for preventing distortion of original input signal
TWI763207B (zh) * 2020-12-25 2022-05-01 宏碁股份有限公司 聲音訊號處理評估方法及裝置
US20230143318A1 (en) * 2021-11-09 2023-05-11 Landis+Gyr Innovations, Inc. Sampling rate converter with line frequency and phase locked loops for energy metering

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0287741B1 (en) * 1987-04-22 1993-03-31 International Business Machines Corporation Process for varying speech speed and device for implementing said process
JP3491425B2 (ja) * 1996-01-30 2004-01-26 ソニー株式会社 信号符号化方法
SE512719C2 (sv) 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
US20030182106A1 (en) * 2002-03-13 2003-09-25 Spectral Design Method and device for changing the temporal length and/or the tone pitch of a discrete audio signal
US7627056B1 (en) * 2002-03-29 2009-12-01 Scientific Research Corporation System and method for orthogonally multiplexed signal transmission and reception on a non-contiguous spectral basis
US7160619B2 (en) 2003-10-14 2007-01-09 Advanced Energy Technology Inc. Heat spreader for emissive display device
KR101117336B1 (ko) 2004-05-19 2012-03-08 파나소닉 주식회사 오디오 신호 부호화 장치 및 오디오 신호 복호화 장치
CA2572805C (en) * 2004-07-02 2013-08-13 Matsushita Electric Industrial Co., Ltd. Audio signal decoding device and audio signal encoding device
WO2006027038A2 (en) * 2004-09-09 2006-03-16 Fujitsu Siemens Computers, Inc. Computer arrangement for providing services for clients over a network
AU2006232364B2 (en) 2005-04-01 2010-11-25 Qualcomm Incorporated Systems, methods, and apparatus for wideband speech coding
TWI317933B (en) 2005-04-22 2009-12-01 Qualcomm Inc Methods, data storage medium,apparatus of signal processing,and cellular telephone including the same
DE602006010323D1 (de) 2006-04-13 2009-12-24 Fraunhofer Ges Forschung Audiosignaldekorrelator
DE602007013026D1 (de) 2006-04-27 2011-04-21 Panasonic Corp Audiocodierungseinrichtung, audiodecodierungseinrichtung und verfahren dafür
BRPI0715559B1 (pt) 2006-10-16 2021-12-07 Dolby International Ab Codificação aprimorada e representação de parâmetros de codificação de objeto de downmix multicanal
US7647229B2 (en) * 2006-10-18 2010-01-12 Nokia Corporation Time scaling of multi-channel audio signals
EP2093757A4 (en) * 2007-02-20 2012-02-22 Panasonic Corp MULTIPLEX DECODING DEVICE, MULTIPLEX DECODING METHOD, PROGRAM, AND SEMICONDUCTOR INTEGRATED CIRCUIT
KR101513028B1 (ko) * 2007-07-02 2015-04-17 엘지전자 주식회사 방송 수신기 및 방송신호 처리방법
CA2699316C (en) 2008-07-11 2014-03-18 Max Neuendorf Apparatus and method for calculating bandwidth extension data using a spectral tilt controlled framing
JP5326465B2 (ja) * 2008-09-26 2013-10-30 富士通株式会社 オーディオ復号方法、装置、及びプログラム
AU2010209673B2 (en) * 2009-01-28 2013-05-16 Dolby International Ab Improved harmonic transposition
PL2545553T3 (pl) * 2010-03-09 2015-01-30 Fraunhofer Ges Forschung Urządzenie i sposób do przetwarzania sygnału audio z użyciem zrównania granicy obszaru

Also Published As

Publication number Publication date
EP2704143A3 (en) 2014-04-02
EP2360688B1 (en) 2018-12-05
US20120022676A1 (en) 2012-01-26
CN102257567B (zh) 2014-05-07
JP5422664B2 (ja) 2014-02-19
EP2360688A4 (en) 2013-09-04
WO2011048792A1 (ja) 2011-04-28
CN102257567A (zh) 2011-11-23
US9026236B2 (en) 2015-05-05
TWI509596B (zh) 2015-11-21
EP2360688A1 (en) 2011-08-24
EP2704143B1 (en) 2015-01-07
EP2704143A2 (en) 2014-03-05
JPWO2011048792A1 (ja) 2013-03-07

Similar Documents

Publication Publication Date Title
TW201137859A (en) Sound signal processing apparatus, sound encoding apparatus and sound decoding apparatus
JP6701429B2 (ja) 高調波転換
RU2547220C2 (ru) Устройство и способ для генерирования высокочастотного аудиосигнала с применением адаптивной избыточной дискретизации
RU2582061C2 (ru) Способ расширения ширины полосы, устройство расширения ширины полосы, программа, интегральная схема и устройство декодирования аудио
RU2386179C2 (ru) Способ и устройство для кодирования речевых сигналов с расщеплением полосы
JP5854520B2 (ja) オーディオ信号用の位相ボコーダに基づく帯域幅拡張方法における改善された振幅応答及び時間的整列のための装置及び方法
JP6672322B2 (ja) オーディオ処理のためのマルチレートシステム
EP2402940B9 (en) Encoder, decoder, and method therefor
US20100207689A1 (en) Noise suppression device, its method, and program
US20100250260A1 (en) Encoder
RU2452044C1 (ru) Устройство, способ и носитель с программным кодом для генерирования представления сигнала с расширенным диапазоном частот на основе представления входного сигнала с использованием сочетания гармонического расширения диапазона частот и негармонического расширения диапазона частот
RU2772356C2 (ru) Усовершенствованное гармоническое преобразование на основе блока поддиапазонов
JP2007228349A (ja) サンプリング周波数変換方法、そのプログラム及びその記録媒体