JP4627548B2 - Bandwidth expansion device, bandwidth expansion method, and bandwidth expansion program - Google Patents

Bandwidth expansion device, bandwidth expansion method, and bandwidth expansion program Download PDF

Info

Publication number
JP4627548B2
JP4627548B2 JP2007534478A JP2007534478A JP4627548B2 JP 4627548 B2 JP4627548 B2 JP 4627548B2 JP 2007534478 A JP2007534478 A JP 2007534478A JP 2007534478 A JP2007534478 A JP 2007534478A JP 4627548 B2 JP4627548 B2 JP 4627548B2
Authority
JP
Japan
Prior art keywords
band
frequency
extension
signal
spectrum
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007534478A
Other languages
Japanese (ja)
Other versions
JPWO2007029796A1 (en
Inventor
光弥 駒村
孝 三橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
TechExperts Inc
Original Assignee
Pioneer Corp
TechExperts Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Corp, TechExperts Inc filed Critical Pioneer Corp
Publication of JPWO2007029796A1 publication Critical patent/JPWO2007029796A1/en
Application granted granted Critical
Publication of JP4627548B2 publication Critical patent/JP4627548B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Transmitters (AREA)

Description

本発明は、オーディオ信号などのデジタル信号の周波数帯域を拡張する帯域拡張技術に関する。   The present invention relates to a band extension technique for extending a frequency band of a digital signal such as an audio signal.

帯域制限されたオーディオ信号や圧縮符号化信号などのデジタル信号の周波数帯域を拡張して高品質の広帯域信号を生成するための帯域拡張技術が多数提案されている。このような帯域拡張技術は、たとえば、狭い電話帯域にある音声信号の周波数帯域を拡張して高品質の音声信号を再生したり、MP3(MPEG−1 Audio Layer 3)などの圧縮方式で圧縮符号化された低品質のオーディオ信号の帯域を拡張して高音域を持つ信号を再生したりする場合に適用され得るものである。
オーディオ信号の帯域拡張技術として非線形処理を用いた技術が知られている。たとえば、特許文献(国際公開番号WO00/70769)に開示されている非線形処理を用いた帯域拡張技術においては、オーバサンプリング型ローパスフィルタが、原信号であるオーディオ信号にフィルタリングを施してサンプリング周波数fsの略1/2の周波数以上の成分を減衰させる。次いで、非線形処理回路が、オーバサンプリング型ローパスフィルタの出力に非線形処理を施すことで高調波成分を生成し、この高調波成分を含むデジタル・オーディオ信号を出力する。さらに、高域通過フィルタが、前記デジタル・オーディオ信号にフィルタリングを施して高周波数成分すなわち拡張帯域成分を生成する。この高周波数成分は、オーバサンプリング型ローパスフィルタの出力に加算され、これにより、周波数帯域が拡張された信号が生成されることとなる。しかしながら、前記非線形処理回路は、非線形処理を行うので、高調波成分だけでなく、複数の周波数成分の和音成分や差音成分などの混変調成分も発生させるが、この混変調成分は、原信号の周波数成分とは無関係な成分であり信号品質を低下させるという問題がある。
非線形処理を使用しない帯域拡張技術としては、たとえば、非特許文献(H.Yasukawa,“Spectrum Broadening of Telephone Band Signals Using Multirate Processing for Speech Quality Enhancement,”IEICE Transactions on Fundamentals Electronics,Communications and Computer Sciences,Vol.E78−A,No.8,pp.996−998,1995.)に開示されている技術が知られている。図1は、この非特許文献に開示される帯域拡張装置100の構成を概略的に示す図である。この帯域拡張装置100は、アップサンプラ101、高域通過フィルタ(HPF)102A、整形フィルタ103A、レベル調整器104A、低域通過フィルタ(LPF)102B、遅延器103B、レベル調整器104Bおよび加算器105で構成されている。
アップサンプラ101は、入力信号に2倍のレートでアップサンプリングを施す。たとえば、図2Aに示される周波数スペクトル(ω:角周波数)を持つ入力信号に2倍のレートでアップサンプリングを施した場合、図2Bに示される周波数スペクトルを持つアップサンプリング信号が生成される。低域通過フィルタ102Bは、アップサンプラ101から供給されるアップサンプリング信号にフィルタリングを施してベースバンド成分を生成する。ベースバンド成分は遅延器103Bで遅延され、レベル調整器104Bでレベル調整された後に加算器105に供給される。たとえば、|ω|<π/2の通過帯域を有する低域通過フィルタ102Bが、図2Bに示されるアップサンプリング信号にフィルタリングを施した場合、図2Cに示されるスペクトルを持つベースバンド成分が得られる。
他方、高域通過フィルタ102Aは、アップサンプラ101から供給されるアップサンプリング信号にフィルタリングを施して拡張帯域成分を生成する。この拡張帯域成分は、整形フィルタ103Aで整形され、レベル調整器104Aでレベル調整された後に加算器105に供給される。加算器105は、レベル調整器104Bから供給されたベースバンド成分に、レベル調整器104Aから供給された拡張帯域成分を加算して帯域拡張信号を生成することとなる。たとえば、|ω|>π/2の通過帯域を有する高域通過フィルタ102Aが、図2Bに示されるアップサンプリング信号にフィルタリングを施した場合、図2Dに示されるスペクトルを持つ拡張帯域成分が得られる。この拡張帯域成分と図2Cのベースバンド成分とを加算すると、図2Eに示されるスペクトルを持つ帯域拡張信号が生成されることとなる。
しかしながら、図2Eに示す通り、帯域拡張信号は、ベースバンド成分のスペクトルに対してスペクトルが反転した拡張帯域成分を含むので、ω=±π/2の周波数でベースバンド成分と拡張帯域成分とが滑らかに接続しないという問題点がある。また、拡張帯域成分のスペクトルは、ベースバンド成分のスペクトルに対して反転しているので、レベル調整器104A,104Bは、ベースバンド成分と拡張帯域成分の各レベルを適切なレベルに調整するのが難しいという問題点もある。したがって、上記非特許文献の技術では、高品質で自然な音質の帯域拡張信号を生成することが難しい。
Many band expansion techniques for generating a high-quality wideband signal by expanding the frequency band of a digital signal such as a band-limited audio signal or compression-encoded signal have been proposed. Such a band expansion technique, for example, reproduces a high-quality audio signal by extending the frequency band of an audio signal in a narrow telephone band, or compresses a compressed code using a compression method such as MP3 (MPEG-1 Audio Layer 3). The present invention can be applied to the case where a signal having a high sound range is reproduced by expanding the band of the low quality audio signal.
A technique using nonlinear processing is known as an audio signal band extending technique. For example, in a band expansion technique using nonlinear processing disclosed in a patent document (International Publication No. WO00 / 70769), an oversampling low-pass filter performs filtering on an audio signal that is an original signal to obtain a sampling frequency fs. A component having a frequency of approximately ½ or more is attenuated. Next, the nonlinear processing circuit generates a harmonic component by performing nonlinear processing on the output of the oversampling low-pass filter, and outputs a digital audio signal including the harmonic component. Further, a high-pass filter filters the digital audio signal to generate a high frequency component, that is, an extended band component. This high frequency component is added to the output of the oversampling type low pass filter, thereby generating a signal with an expanded frequency band. However, since the non-linear processing circuit performs non-linear processing, it generates not only harmonic components but also multi-modulation components such as chord components and difference sound components of a plurality of frequency components. This is a component unrelated to the frequency component of the signal, and there is a problem that the signal quality is degraded.
The bandwidth extension technique that does not use non-linear processing, for example, non-patent document (H.Yasukawa, "Spectrum Broadening of Telephone Band Signals Using Multirate Processing for Speech Quality Enhancement," IEICE Transactions on Fundamentals Electronics, Communications and Computer Sciences, Vol. E78-A, No. 8, pp. 996-998, 1995.) is known. FIG. 1 is a diagram schematically showing a configuration of a band extending apparatus 100 disclosed in this non-patent document. The band extending apparatus 100 includes an upsampler 101, a high-pass filter (HPF) 102A, a shaping filter 103A, a level adjuster 104A, a low-pass filter (LPF) 102B, a delay unit 103B, a level adjuster 104B, and an adder 105. It consists of
The upsampler 101 upsamples the input signal at a double rate. For example, when upsampling is performed on an input signal having the frequency spectrum (ω: angular frequency) shown in FIG. 2A at a double rate, an upsampling signal having the frequency spectrum shown in FIG. 2B is generated. The low-pass filter 102B performs filtering on the upsampling signal supplied from the upsampler 101 to generate a baseband component. The baseband component is delayed by the delay unit 103B, level-adjusted by the level adjuster 104B, and then supplied to the adder 105. For example, when the low-pass filter 102B having a pass band of | ω | <π / 2 filters the upsampling signal shown in FIG. 2B, a baseband component having the spectrum shown in FIG. 2C is obtained. .
On the other hand, the high-pass filter 102A filters the upsampling signal supplied from the upsampler 101 to generate an extended band component. The extended band component is shaped by the shaping filter 103A, level-adjusted by the level adjuster 104A, and then supplied to the adder 105. The adder 105 adds the extension band component supplied from the level adjuster 104A to the baseband component supplied from the level adjuster 104B to generate a band extension signal. For example, when the high-pass filter 102A having a pass band of | ω |> π / 2 filters the upsampling signal shown in FIG. 2B, an extended band component having the spectrum shown in FIG. 2D is obtained. . When the extension band component and the baseband component of FIG. 2C are added, a band extension signal having the spectrum shown in FIG. 2E is generated.
However, as shown in FIG. 2E, the band extension signal includes an extension band component whose spectrum is inverted with respect to the spectrum of the baseband component, so that the baseband component and the extension band component have a frequency of ω = ± π / 2. There is a problem of not connecting smoothly. Further, since the spectrum of the extended band component is inverted with respect to the spectrum of the baseband component, the level adjusters 104A and 104B may adjust the levels of the baseband component and the extended band component to appropriate levels. There is also a problem that it is difficult. Therefore, it is difficult to generate a high-quality and natural sound quality band extension signal with the technology of the above-mentioned non-patent document.

上記に鑑みて本発明の目的は、非線形処理を使用せずに高品質の帯域拡張信号を生成し得る帯域拡張装置、帯域拡張方法および帯域拡張プログラムを提供する点にある。
本発明の第1の態様による帯域拡張装置は、入力信号の周波数帯域を拡張するものである。この帯域拡張装置は、前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するベースバンド処理部と、前記入力信号から拡張帯域成分を生成する拡張帯域処理部と、前記ベースバンド信号に前記拡張帯域成分を混合する混合部と、を備え、前記拡張帯域処理部は、前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するスペクトル反転部と、前記反転信号にアップサンプリングを施すアップサンプラと、前記アップサンプラの出力にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成する帯域通過フィルタと、を含む。
本発明の第2の態様による帯域拡張方法は、入力信号の周波数帯域を拡張するものである。この帯域拡張方法は、(a)前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するステップと、(b)前記入力信号から拡張帯域成分を生成するステップと、(c)前記ベースバンド信号に前記拡張帯域成分を混合するステップと、を備え、前記ステップ(b)は、(b−1)前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するステップと、(b−2)前記反転信号にアップサンプリングを施すステップと、(b−3)前記ステップ(b−2)でアップサンプリングされた反転信号にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成するステップと、を含む。
本発明の第3の態様による帯域拡張プログラムは、入力信号の周波数帯域を拡張する帯域拡張処理をプロセッサに実行させるものである。前記帯域拡張処理は、前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するベースバンド処理と、前記入力信号から拡張帯域成分を生成する拡張帯域処理と、前記ベースバンド信号に前記拡張帯域成分を混合する混合処理と、を備え、前記拡張帯域処理は、前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するスペクトル反転処理と、前記反転信号にアップサンプリングを施すアップサンプリング処理と、前記アップサンプラの出力にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成するフィルタ処理と、を含む。
In view of the above, an object of the present invention is to provide a band expansion apparatus, a band expansion method, and a band expansion program that can generate a high-quality band expansion signal without using nonlinear processing.
The band extending apparatus according to the first aspect of the present invention extends the frequency band of an input signal. The band extending apparatus performs baseband processing on the input signal, generates a baseband signal limited to a predetermined frequency band by filtering the upsampled signal, and the input signal. An extension band processing unit that generates an extension band component from the baseband signal, and a mixing unit that mixes the extension band component with the baseband signal. The extension band processing unit is a band obtained from the input signal or the input signal. A spectrum inversion unit that inverts the spectrum of the signal to generate an inverted signal, an upsampler that upsamples the inverted signal, and a high frequency band of the baseband signal by filtering the output of the upsampler The frequency band component having a frequency that is substantially the same as the end frequency at the low end is the extension band. Including a band-pass filter to generate a minute, the.
The band extending method according to the second aspect of the present invention extends the frequency band of the input signal. The band extension method includes (a) generating a baseband signal limited to a predetermined frequency band by upsampling the input signal and filtering the upsampled signal; and (b) Generating an extension band component from the input signal; and (c) mixing the extension band component with the baseband signal, wherein the step (b) includes (b-1) the input signal or Inverting the spectrum of the band signal obtained from the input signal to generate an inverted signal; (b-2) performing upsampling on the inverted signal; and (b-3) the step (b-2). By filtering the inverted signal upsampled in step 1, the frequency is substantially the same as the frequency at the high end of the frequency band of the baseband signal. And generating a component of a frequency band with the frequency as low-frequency end as the extended band component, a.
The bandwidth extension program according to the third aspect of the present invention causes a processor to execute bandwidth extension processing for extending the frequency bandwidth of an input signal. The band extension processing includes: baseband processing for performing upsampling on the input signal and generating a baseband signal limited to a predetermined frequency band by filtering the upsampled signal; and from the input signal An extension band process for generating an extension band component; and a mixing process for mixing the extension band component with the baseband signal, wherein the extension band process is a spectrum of the band signal obtained from the input signal or the input signal. The spectrum inversion processing for generating an inverted signal by inverting the up-sampling processing for up-sampling the inverted signal, and filtering the output of the up-sampler to the high-frequency end of the frequency band of the baseband signal The frequency band component having a low frequency end that is substantially the same frequency as the frequency is expanded. Comprising a filter to generate a band component, a.

図1は、従来の帯域拡張装置の構成を概略的に示す図であり、
図2A〜図2Eは、従来の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図3は、本発明に係る第1実施例の帯域拡張装置の構成を概略的に示す機能ブロック図であり、
図4A〜図4Cは、第1実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図5A〜図5Eは、第1実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図6Aおよび図6Bは、第1実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図7Aおよび図7Bは、第1実施例の帯域拡張方法に従って生成された帯域拡張信号の周波数スペクトルと原信号の周波数スペクトルとを示す図であり、
図8は、混合係数の算出方法の他の例を説明するための周波数スペクトルを示す図であり、
図9は、混合係数の算出方法のさらに他の例を説明するための図であり、
図10は、本発明に係る第2実施例の帯域拡張装置の構成を概略的に示す機能ブロック図であり、
図11A〜図11Dは、第2実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図12Aおよび図12Bは、第2実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図13は、本発明に係る第3実施例の帯域拡張装置の構成を概略的に示す機能ブロック図であり、
図14A〜図14Fは、第3実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図15は、本発明に係る第4実施例の帯域拡張装置の構成を概略的に示す機能ブロック図であり、
図16は、第4実施例の帯域拡張装置で使用される混合部の構成を概略的に示す図であり、
図17A〜図17Dは、第4実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図18A〜図18Gは、第4実施例の帯域拡張方法を説明するための周波数スペクトルを概略的に示す図であり、
図19A〜図19Cは、種々の適用例を示す図である。
FIG. 1 is a diagram schematically showing a configuration of a conventional bandwidth extension apparatus,
2A to 2E are diagrams schematically illustrating a frequency spectrum for explaining a conventional band extension method.
FIG. 3 is a functional block diagram schematically showing the configuration of the bandwidth extension apparatus according to the first embodiment of the present invention.
4A to 4C are diagrams schematically showing frequency spectra for explaining the band extending method of the first embodiment.
5A to 5E are diagrams schematically showing frequency spectra for explaining the band extending method of the first embodiment.
6A and 6B are diagrams schematically showing a frequency spectrum for explaining the band extension method of the first embodiment,
7A and 7B are diagrams showing the frequency spectrum of the band extension signal generated according to the band extension method of the first embodiment and the frequency spectrum of the original signal,
FIG. 8 is a diagram illustrating a frequency spectrum for explaining another example of the calculation method of the mixing coefficient,
FIG. 9 is a diagram for explaining still another example of the calculation method of the mixing coefficient,
FIG. 10 is a functional block diagram schematically showing the configuration of the bandwidth extension apparatus according to the second embodiment of the present invention.
FIG. 11A to FIG. 11D are diagrams schematically showing a frequency spectrum for explaining the band extending method of the second embodiment,
12A and 12B are diagrams schematically showing a frequency spectrum for explaining the band extending method of the second embodiment,
FIG. 13 is a functional block diagram schematically showing the configuration of the bandwidth extension apparatus according to the third embodiment of the present invention.
FIG. 14A to FIG. 14F are diagrams schematically showing frequency spectra for explaining the band extending method of the third embodiment,
FIG. 15 is a functional block diagram schematically showing the configuration of the bandwidth extension apparatus according to the fourth embodiment of the present invention.
FIG. 16 is a diagram schematically showing a configuration of a mixing unit used in the band extending apparatus of the fourth embodiment.
FIG. 17A to FIG. 17D are diagrams schematically showing frequency spectra for explaining the band extending method of the fourth embodiment,
FIG. 18A to FIG. 18G are diagrams schematically showing a frequency spectrum for explaining the band extending method of the fourth embodiment,
19A to 19C are diagrams showing various application examples.

本出願は、日本国特許出願第2005−260541号を基礎とし、この基礎出願の内容を引用して援用するものである。
以下、本発明に係る種々の実施例について説明する。
This application is based on Japanese Patent Application No. 2005-260541 and is incorporated herein by reference.
Hereinafter, various embodiments according to the present invention will be described.

1.第1実施例
図3は、本発明に係る第1実施例の帯域拡張装置1の構成を概略的に示す機能ブロック図である。帯域拡張装置1は、ベースバンド処理部10、係数決定部20、拡張帯域処理部30および混合部40で構成されている。ベースバンド処理部10は、入力信号x(n)(nは整数)の系列にアップサンプリングを施し、当該アップサンプリングされた信号系列にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号x(n)を生成する。入力信号x(n)は、オーディオ信号などのデジタル信号である。
ベースバンド処理部10は、アップサンプラ11、低域通過フィルタ(LPF)12および遅延器13を有している。アップサンプラ11は、N倍のレート(Nは2以上の整数)すなわちNのファクタで入力信号x(n)の系列にアップサンプリングを施してアップサンプリング信号x(n)の系列を生成する。低域通過フィルタ12は、|ω|<π/N(ωは角周波数)の通過帯域を有し、アップサンプリング信号x(n)の系列にフィルタリングを施して、−π/N〜+π/Nの周波数帯域に制限されたフィルタ信号x(n)の系列を生成する。遅延器13は、所定の遅延時間だけフィルタ信号x(n)を遅延させ、その遅延信号をベースバンド信号として出力する。図4A〜図4Cに、Nが「2」である場合の周波数スペクトルを例示する。図4Aに示される入力信号x(n)が供給された場合、アップサンプラ11は、2倍のレートすなわち2のファクタで入力信号x(n)にアップサンプリングを施して、図4Bに示される周波数スペクトルを有するアップサンプリング信号x(n)を生成する。低域通過フィルタ12は、図4Bのアップサンプリング信号x(n)にフィルタリングを施して、−π/2〜+π/2の周波数帯域に制限されたフィルタ信号x(n)を生成することとなる。
他方、拡張帯域処理部30は、入力信号x(n)の系列から拡張帯域成分z(n)を生成する機能を有する。この拡張帯域処理部30は、高域通過フィルタ(HPF)31、ダウンサンプラ32、スペクトル反転部33、アップサンプラ34および帯域通過フィルタ(BPF)35を有している。高域通過フィルタ31は、|ω|>π/2の通過帯域(第2周波数帯域)を有し、入力信号x(n)の系列にフィルタリングを施してフィルタ信号x(n)の系列を生成する。次いで、ダウンサンプラ32は、1/2倍のレートすなわち2のファクタでフィルタ信号x(n)の系列にダウンサンプリングを施して、ダウンサンプリング信号すなわち帯域信号x(n)の系列を生成する。図5A〜図5Bに周波数スペクトルを例示する。図4Aに示される入力信号x(n)が供給された場合、|ω|>π/2の通過帯域を有する高域通過フィルタ31は、図5Aに示される周波数スペクトルを持つフィルタ信号x(n)を生成する。また、ダウンサンプラ32は、1/2倍のレートすなわち2のファクタでフィルタ信号x(n)にダウンサンプリングを施して、図5Bに示される周波数スペクトルを持つダウンサンプリング信号x(n)を生成することとなる。
スペクトル反転部33は、ダウンサンプリング信号x(n)のスペクトルを反転して反転信号z(n)を生成する。以下に数式を用いて説明するように、「スペクトル反転」とは、信号の周波数スペクトルを角周波数πだけシフトさせることを意味する。ダウンサンプリング信号x(n)の極性を1つ置きに反転させた信号が反転信号z(n)となるので、ダウンサンプリング信号x(n)と反転信号z(n)との間の関係は、次式(1)で表現される。
(n)=x(n)×(−1)=x(n)exp(−jnπ). (1)
ここで、jは、虚数単位(j=−1)であり、Lは、フーリエ変換のサンプル数であり正整数である。よって、反転信号z(n)の離散フーリエ変換Z(k)は次のように展開される。

Figure 0004627548
したがって、X(k)をダウンサンプリング信号x(n)の離散フーリエ変換としたとき、次式(2)が成立する。
Figure 0004627548
式(2)によれば、周波数領域(frequency domain)において、Z(k)は、X(k)をL/2点すなわち角周波数πだけシフトさせたものである。したがって、「スペクトル反転」とは、信号の周波数スペクトルを角周波数πだけシフトさせることを意味する。
次に、図3を参照すると、アップサンプラ34は、2×N倍のレートすなわち2×Nのファクタで反転信号z(n)の系列にアップサンプリングを施して、アップサンプリング信号z(n)の系列を生成する。さらに、帯域通過フィルタ35は、2π/(2×N)<|ω|<3π/(2×N)の通過帯域を有し、アップサンプリング信号z(n)の系列にフィルタリングを施すことで拡張帯域成分z(n)の系列を生成する。この拡張帯域成分z(n)の帯域の低域端(低域側端部)の周波数がベースバンド信号x(n)の帯域の高域端(高域側端部)の周波数と略同一になるように、帯域通過フィルタ35のフィルタ特性(通過帯域、阻止域および遮断周波数など)が構成されている。本実施例の場合、拡張帯域成分z(n)の低域端の周波数は略±2π/(2×N)であり、ベースバンド信号x(n)の高域端の周波数も±π/Nであるので、両周波数は略一致することとなる。
図5C〜図5EにNが「2」である場合の周波数スペクトルを例示する。このとき、スペクトル反転部33は、図5Bのダウンサンプリング信号x(n)のスペクトルを反転して、図5Cに示されるスペクトルを持つ反転信号z(n)を生成する。また、アップサンプラ34は、4倍のレートすなわち4のファクタで反転信号z(n)にアップサンプリングを施して、図5Dに示されるスペクトルを持つアップサンプリング信号z(n)を生成する。そして、2π/4<|ω|<3π/4の通過帯域を有する帯域通過フィルタ35は、アップサンプリング信号z(n)にフィルタリングを施して、図5Eに示されるスペクトルを持つ拡張帯域成分からなるフィルタ信号z(n)を生成することとなる。かかる場合、図4Cに示したベースバンド信号x(n)の帯域の高域端の周波数±π/2は、図5Eの拡張帯域成分z(n)の低域端の周波数±π/2と一致する。
上記のベースバンド信号x(n)と拡張帯域成分z(n)とは、混合部40で混合される。係数決定部20は、入力信号x(n)の周波数スペクトルを算出しこれに基づいて拡張帯域成分z(n)に乗ずるべき混合係数を決定する処理ブロックである。係数決定部20は、FFT部(高速フーリエ変換部)21、スペクトル算出部22および係数算出部23を有している。FFT部21は、入力信号x(n)の系列を高速フーリエ変換して周波数領域の信号系列を算出する。また、スペクトル算出部22は、FFT部21から供給された周波数領域の信号系列に基づいて入力信号x(n)の周波数スペクトルを算出する。係数算出部23は、スペクトル算出部22で算出された周波数スペクトルに基づいて、π/2〜πの周波数範囲で線形または非線形の回帰曲線を算出し、この回帰曲線を利用して混合係数を算出することができる。具体的には、回帰曲線として、1次関数で表現された線形の回帰直線を使用すればよい。
第1実施例の場合、入力信号x(n)から、図5Aに示されるような周波数帯域(第2周波数帯域π/2〜π)の成分が抽出され、かかる成分が、ダウンサンプリング、スペクトル反転、アップサンプリングおよびフィルタリングを施されることで、図5Eに示されるような拡張帯域成分z(n)が生成される。よって、混合係数C(n)は、低域端の周波数ω=π/2またはその近傍の点での回帰曲線のスペクトル値Lに対する、高域端の周波数ω=πまたはその近傍の点での回帰曲線のスペクトル値Lの比率L/Lで与えられる。
図6Aは、入力信号x(n)の周波数スペクトルと回帰曲線Lとを例示する図である。スペクトル曲線Cに基づいてπ/2〜πの周波数範囲の回帰曲線Lが算出されている。この周波数スペクトルはデシベル(dB)で示されているので、ω=π/2の点での振幅をVA、ω=πの点での振幅をVBで表すとき、混合係数C(n)は、C(n)=L/L、L=10(VB/20)、L=10(VA/20)、で与えられる。
混合部40は、乗算器41と加算器42とで構成されている。乗算器41は、係数決定部20から供給された混合係数C(n)を拡張帯域成分z(n)に乗算し、加算器42は、その乗算結果を、ベースバンド処理部10から供給されたベースバンド信号に加算する。その加算結果として帯域拡張信号y(n)が生成される。図6Bに、Nが「2」である場合の帯域拡張信号y(n)の周波数スペクトルを示す。この帯域拡張信号y(n)は、図4Cのベースバンド信号x(n)に図5Eの拡張帯域成分z(n)を混合した信号である。
図7Aは、サンプリング周波数fsが11025Hzである場合の原信号の周波数スペクトル(横軸:Hz)の測定値を例示するグラフであり、図7Bは、第1実施例の帯域拡張装置1を用いてこの原信号の周波数帯域を拡張し、その結果得た帯域拡張信号の周波数スペクトルの測定値を例示するグラフである。図7Bによれば、ベースバンド信号と拡張帯域成分とが滑らかに接続していることが分かる。
上記の通り、第1実施例の帯域拡張装置1は、周波数帯域が制限された帯域信号x(n)をダウンサンプリングして得られる帯域信号x(n)のスペクトルを反転している。帯域拡張装置1は、さらに、その反転信号z(n)をアップサンプリングし、当該アップサンプリングされた信号z(n)にフィルタリングを施すことで、ベースバンド信号x(n)の周波数帯域の高域端の周波数π/Nと略同一の周波数を低域端とする拡張帯域の成分z(n)を生成しており、かかる拡張帯域成分z(n)がベースバンド信号x(n)に混合される。このような帯域拡張装置1は、帯域信号x(n)のスペクトルを反転しているので、スペクトル反転を行わない従来技術と比べると、拡張帯域成分z(n)とベースバンド信号x(n)との接続性が良好になり、出力信号y(n)の品質向上が可能になる。
さらに、帯域拡張装置1は、入力信号x(n)の周波数スペクトルに基づいて、拡張帯域成分z(n)に乗ずるべき混合係数C(n)を算出しているので、拡張帯域成分をベースバンド信号に滑らかに接続することができ、高品質で自然な周波数スペクトルを持つ帯域拡張信号y(n)を生成することが可能になる。
次に、混合係数C(n)の算出方法の他の例について説明する。この算出法では、低域端の周波数ω=π/2を含む狭帯域Δωにおける複数点のスペクトル値の第1平均<L>と、高域端の周波数ω=πを含む狭帯域Δωにおける複数点のスペクトル値の第2平均<L>とが算出され、次いで、これら第1平均<L>と第2平均<L>との比率が混合係数C(n)として算出される。図8は、算出方法を説明するための周波数スペクトルを例示するグラフである。かかる場合、狭帯域Δωにおけるスペクトル値の第1平均<VA>と、狭帯域Δωにおけるスペクトル値の第2平均<VB>とが算出される。周波数スペクトルはデシベル(dB)で示されているので、混合係数C(n)は、C(n)=<L>/<L>、<L>=10(<VB>/20)、<L>=10(<VA>/20)、で与えられる。
上記算出法を採用すれば、係数算出部23は、周波数スペクトルの回帰曲線を必要としないので、少ない演算量で混合係数C(n)を算出することができ、低消費電力化も実現できる。
また、混合係数C(n)のさらに他の算出法を図9を参照しつつ説明する。図9は、図3に示した係数決定部20に代わる係数決定部20Dの構成を概略的に示す機能ブロック図である。この係数決定部20Dは、帯域通過フィルタ(BPF)24A,24Bと、2乗和算出部25A,25Bと、係数演算部26とで構成されている。一方の帯域通過フィルタ24Aは、低域端の周波数ω=π/2を含む所定の狭帯域のみを通過帯域として有し、他方の帯域通過フィルタ(BPF)24Bは、高域端の周波数ω=πを含む所定の狭帯域のみを通過帯域して有している。2乗和算出部25A,25Bは、それぞれ、帯域通過フィルタ24A,24Bの出力の2乗和<A>,<B>を所定のサンプル期間T毎に繰り返し算出する。たとえば、帯域通過フィルタ24Aの出力値の系列がA1,A2,A3,…であれば、2乗和<A>は、(A1)+(A2)+(A3)+…となる。そして、係数演算部26は、それら2乗和の比率の平方根値(<B>/<A>)(1/2)を混合係数C(n)として算出することとなる。
上記係数決定部20Dは、フーリエ変換と周波数スペクトルとを必要とせず、帯域通過フィルタ24A,24Bは、必ずしもFIRフィルタ(有限長インパルス応答フィルタ)で構成する必要はないのでタップ数の少ないIIRフィルタ(無限長インパルス応答フィルタ)で構成することが可能である。したがって、係数決定部20Dは、図3の係数決定部20と比べて少ない演算量で混合係数C(n)を算出することができ、低消費電力化を実現できる。
2.第2実施例
次に、本発明に係る第2実施例の帯域拡張装置および帯域拡張方法を説明する。図10は、第2実施例の帯域拡張装置2の構成を概略的に示す機能ブロック図である。なお、図10と図3とで同一符号を付された構成要素は、同一機能または同一構成を有するものとして、その詳細な説明を省略する。
図10を参照すると、第2実施例の帯域拡張装置2は、ベースバンド処理部10、係数決定部20Aおよび拡張帯域処理部30Aを有している。ベースバンド処理部10は、上記の通り、入力信号x(n)の系列にアップサンプリングを施し、当該アップサンプリングされた信号系列にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号x(n)を生成する。
拡張帯域処理部30Aは、入力信号x(n)の系列から拡張帯域成分z(n)を生成する機能を有する。この拡張帯域処理部30Aは、スペクトル反転部33、アップサンプラ36および帯域通過フィルタ37を有している。スペクトル反転部33は、入力信号x(n)のスペクトルを反転して反転信号z(n)を生成する。アップサンプラ36は、N倍のレートすなわちNのファクタで反転信号z(n)の系列をアップサンプリングしてアップサンプリング信号z(n)の系列を生成する。帯域通過フィルタ37は、π/N<|ω|<2π/Nの通過帯域を有し、アップサンプリング信号z(n)の系列にフィルタリングを施して拡張帯域成分であるフィルタ信号z(n)の系列を生成する。この拡張帯域成分z(n)は混合部40に供給される。
図11A〜図11Dに、Nが「2」である場合の周波数スペクトルを例示する。かかる場合、図11Aに示される入力信号x(n)が供給された場合、スペクトル反転部33は、入力信号x(n)のスペクトルを反転して、図11Bに示される周波数スペクトルを持つ反転信号z(n)を生成する。アップサンプラ36は、2倍のレートすなわち2のファクタで反転信号z(n)の系列にアップサンプリングを施して、図11Cに示されるスペクトルを持つアップサンプリング信号z(n)を生成する。また、帯域通過フィルタ37は、π/2<|ω|<πの通過帯域を有し、図11Dに示される周波数スペクトルを持つ拡張帯域成分z(n)を生成することとなる。
一方、係数決定部20Aは、FFT部21、スペクトル算出部22および係数算出部23Aを有している。係数算出部23Aは、スペクトル算出部22で算出された周波数スペクトルに基づいて、0〜πの周波数範囲で線形または非線形の回帰曲線を算出し、この回帰曲線を利用して混合係数を算出することができる。具体的には、回帰曲線として、1次関数で表現された線形の回帰直線を使用すればよい。
第2実施例の場合、入力信号x(n)の全周波数帯域の成分にアップサンプリングおよびフィルタリングを施すことで、図11Dに示されるような拡張帯域成分z(n)が生成される。よって、混合係数C(n)は、入力信号x(n)の周波数帯域の低域端の周波数ω=0またはその近傍の点での回帰曲線のスペクトル値Lに対する、高域端の周波数ω=πまたはその近傍の点での回帰曲線のスペクトル値Lの比率L/Lで与えられる。
図12Aは、入力信号x(n)の周波数スペクトルと回帰曲線Lとを例示する図である。スペクトル曲線Cのうち、0〜πの周波数範囲の回帰曲線Lが算出されている。この周波数スペクトルはデシベル(dB)で示されているので、ω=0の点での振幅をVA、ω=πの点での振幅をVBで表すとき、混合係数C(n)は、C(n)=L/L、L=10(VB/20)、L=10(VA/20)、で与えられる。
なお、上記係数決定部20Aの算出方法の代わりに、図8および図9でそれぞれ示した算出法を適用して混合係数C(n)を算出してもよい。かかる場合、低域端の周波数をω=0に設定し、高域端の周波数をω=πに設定して、図8および図9で示した算出法を適用すればよい。
混合部40では、乗算器41は、係数決定部20Aから供給された混合係数C(n)を拡張帯域成分z(n)に乗算し、加算器42は、その乗算結果を、ベースバンド処理部10から供給されたベースバンド信号に加算する。その加算結果として帯域拡張信号y(n)が生成される。図12Bに、N=2の場合の帯域拡張信号y(n)の周波数スペクトルを示す。この帯域拡張信号y(n)は、ベースバンド信号に図11Dの拡張帯域成分z(n)が混合された信号である。
上記の通り、第2実施例の帯域拡張装置2は、入力信号x(n)のスペクトルを反転し、その反転信号z(n)をアップサンプリングし、当該アップサンプリングされた信号z(n)にフィルタリングを施すことで、ベースバンド信号x(n)の周波数帯域の高域端の周波数π/Nと略同一の周波数を低域端とする拡張帯域の成分z(n)を生成しており、かかる拡張帯域成分z(n)がベースバンド信号x(n)に混合される。このような帯域拡張装置2は、入力信号x(n)のスペクトルを反転しているので、スペクトル反転を行わない従来技術と比べると、拡張帯域成分z(n)とベースバンド信号x(n)との接続性が良好になり、出力信号y(n)の品質向上が可能になる。
さらに、帯域拡張装置2は、入力信号x(n)の周波数スペクトルに基づいて拡張帯域成分z(n)に乗ずるべき混合係数C(n)を算出しているので、拡張帯域成分をベースバンド信号に滑らかに接続することができ、高品質で自然な周波数スペクトルを持つ帯域拡張信号y(n)を生成することが可能である。
3.第3実施例
次に、本発明に係る第3実施例の帯域拡張装置および帯域拡張方法を説明する。図13は、第3実施例の帯域拡張装置3の構成を概略的に示す機能ブロック図である。なお、図13と図3とで同一符号を付された構成要素は、同一機能または同一構成を有するものとして、その詳細な説明を省略する。
図13を参照すると、第3実施例の帯域拡張装置3は、ベースバンド処理部10、係数決定部20B、第1拡張帯域処理部30および第2拡張帯域処理部50を有している。ベースバンド処理部10は、上記の通り、入力信号x(n)の系列にアップサンプリングを施し、当該アップサンプリングされた信号系列にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号x(n)を生成するものである。第1拡張帯域処理部30は、入力信号x(n)の系列から第1の拡張帯域成分z(n)を生成する機能を有する。
第2拡張帯域処理部50は、アップサンプラ51と帯域通過フィルタ(BPF)52とを有している。アップサンプラ51は、第1拡張帯域処理部30のダウンサンプラ32から供給されたダウンサンプリング信号x(n)の系列に、2×N倍のレートすなわち2×Nのファクタでアップサンプリングを施してアップサンプリング信号xU2(n)の系列を生成する。帯域通過フィルタ(BPF)52は、3π/(2×N)<|ω|<4π/(2×N)の通過帯域を有し、アップサンプリング信号xU2(n)の系列にフィルタリングを施して第2の拡張帯域成分x(n)を生成する。
図14A〜図14Eに、N=2の場合の周波数スペクトルを例示する。図4Aに示されるスペクトルを持つ入力信号x(n)が供給された場合、ベースバンド処理部10は、図14Aに示されるスペクトルを持つベースバンド信号x(n)を出力し、第1拡張帯域処理部30は、図14Bに示されるスペクトルを持つ第1の拡張帯域成分z(n)を出力する。第1拡張帯域処理部30のダウンサンプラ32は、図14Cに示されるスペクトルを持つダウンサンプリング信号x(n)を、第2拡張帯域処理部50のアップサンプラ51に供給する。よって、アップサンプラ51は、図14Dに示されるスペクトルを持つアップサンプリング信号xU2(n)を生成する。帯域通過フィルタ52は、3π/4<|ω|<πの通過帯域を有し、図14Eに示されるスペクトルを持つ第2の拡張帯域成分x(n)を出力することとなる。
係数決定部20Bは、図3の係数算出部23と略同一の構成および機能を有し、第1混合係数C(n)と、その2乗の値である第2混合係数C(n)とを混合部40Bに供給する。混合部40Bにおいて、第1乗算器41Aは、第1の拡張帯域成分z(n)に第1混合係数C(n)を乗算してその乗算結果を加算器43に供給する一方、第2乗算器41Bは、第2の拡張帯域成分x(n)に第2混合係数C(n)を乗算してその乗算結果を加算器43に供給する。加算器43は、ベースバンド処理部10から供給されたベースバンド信号にそれら乗算結果を加算することで帯域拡張信号y(n)を生成する。図14Fに、N=2の場合の帯域拡張信号y(n)の周波数スペクトルを示す。図14Fの帯域拡張信号y(n)は、図14Aのベースバンド信号x(n)に、図14Bの第1の拡張帯域成分z(n)と図14Eの第2の拡張帯域成分x(n)とが混合された信号である。
上記の通り、第3実施例の帯域拡張装置3は、第1実施例の帯域拡張装置1(図3)の構成に加えて、第2の拡張帯域成分x(n)を生成する第2拡張帯域処理部50を有するので、周波数帯域がさらに拡張された出力信号y(n)を得ることが可能になる。
4.第4実施例
次に、本発明に係る第4実施例の帯域拡張装置および帯域拡張方法を説明する。図15は、第4実施例の帯域拡張装置4の構成を概略的に示す機能ブロック図である。なお、図15と図3とで同一符号を付された構成要素は、同一機能または同一構成を有するものとして、その詳細な説明を省略する。
図15を参照すると、第4実施例の帯域拡張装置4は、ベースバンド処理部10、係数決定部20C、第1拡張帯域処理部30C、第2拡張帯域処理部50Cおよび混合部40Cを有している。図16には混合部40Cの構成が概略的に示されている。ベースバンド処理部10は、上記の通り、入力信号x(n)の系列にアップサンプリングを施し、当該アップサンプリングされた信号系列にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号x(n)を生成するものである。
第1拡張帯域処理部30Cは、入力信号x(n)の系列から、複数の第1サブ帯域成分z,…,zN−1を拡張帯域成分として生成する機能を有する。第1拡張帯域処理部30Cは、高域通過フィルタ(HPF)31、ダウンサンプラ32、スペクトル反転部33およびアップサンプラ34を有し、さらに、各々が互いに異なる通過帯域を有する複数の帯域通過フィルタ(BPF)35,…,35N−1からなるフィルタバンクを有している。k番目(kは1〜N−1の整数)の帯域通過フィルタ35は、2kπ/(2N)<|ω|<(2k+1)π/(2N)の通過帯域を有している。これら帯域通過フィルタ35,…,35N−1は、アップサンプラ34からのアップサンプリング信号z(n)にフィルタリングを施して、周波数帯域が制限された複数の第1サブ帯域成分z,…,zN−1を生成し乗算部44に供給する。
一方、第2拡張帯域処理部50Cは、アップサンプラ51を有し、さらに、各々が互いに異なる通過帯域を有する複数の帯域通過フィルタ(BPF)52,…,52N−1からなるフィルタバンクを有している。k番目(kは1〜N−1の整数)の帯域通過フィルタ52は、(2k+1)π/(2N)<|ω|<(2k+2)π/(2N)の通過帯域を有している。アップサンプラ51は、ダウンサンプラ32からのダウンサンプリング信号x(n)の系列に、2×N倍のレートすなわち2×Nのファクタでアップサンプリングを施してアップサンプリング信号xU2(n)の系列を生成する。帯域通過フィルタ52,…,52N−1は、アップサンプリング信号xU2(n)の系列にフィルタリングを施して、周波数帯域が制限された複数の第2サブ帯域成分x,…,xN−1を生成し乗算部44に供給する。
帯域通過フィルタ35,…,35N−1のフィルタ特性と帯域通過フィルタ52,…,52N−1のフィルタ特性とは、第1および第2サブ帯域成分z,…,zN−1,x,…,xN−1の周波数帯域が略連続するように構成される。帯域通過フィルタ35,52,35,52,…,35N−1および52N−1の通過帯域は連続している。これより、帯域拡張信号y(n)の周波数帯域が不連続にならず、滑らかに連続することとなる。
図17A〜図17Dおよび図18A〜図18Gに、N=4の場合の周波数スペクトルを例示する。これら周波数スペクトルは、0〜πの周波数範囲でのみ示されているが、−π〜0の周波数範囲においても、それら周波数スペクトルとω=0の点に関して鏡像関係にある周波数スペクトル(図示せず)が存在するものとする。図17Aに示されるようにスペクトルを持つ入力信号x(n)が供給された場合、ベースバンド処理部10は、図17Bに示されるように0〜π/4に帯域制限されたスペクトルを持つベースバンド信号x(n)を出力する。第1拡張帯域処理部30Cにおいて、ダウンサンプラ32は、図17Cに示されるスペクトルを持つダウンサンプリング信号x(n)を出力し、スペクトル反転部33は、図17Dに示されるスペクトルを持つ反転信号z(n)を出力する。
かかる場合、帯域通過フィルタ35,35,35は、それぞれ、図18A,図18B,図18Cに示されるスペクトルを持つ第1サブ帯域成分z,z,zを出力する。他方、帯域通過フィルタ52,52,52は、それぞれ、図18D,図18E,図18Fに示されるスペクトルを持つ第2サブ帯域成分x,x,xを出力する。図18A〜図18Fに示される第1および第2サブ帯域成分z,x,z,x,z,xの周波数帯域は連続していることが分かる。
係数決定部20Cは、図3の係数決定部20が与える混合係数C(n)と同じ混合係数Cを生成するとともに、C,C,…,C2N−2の混合係数を算出する。これら混合係数のデータCDは混合部40Cに供給される。
混合部40Cは、図16に例示されるように、第1サブ帯域成分用の乗算器45,…,45N−1と、第2サブ帯域成分用の乗算器46,…,46N−1とを有する。第1サブ帯域成分用の乗算器45,45,…,45N−1には、それぞれ、第1サブ帯域成分z,z,…,zN−1が入力し、且つ、これら乗算器45,45,…,45N−1には、それぞれ、乗算係数C,C,…,C2N−3が与えられている。他方、第2サブ帯域成分用の乗算器46,46,…,46N−1には、それぞれ、第2サブ帯域成分x,x,…,xN−1が入力し、且つ、これら乗算器46,46,…,46N−1には、それぞれ、乗算係数C,C,…,C2N−2が与えられている。加算器43は、乗算器45,…,45N−1,46,…,46N−1の全出力をベースバンド信号に加算して帯域拡張信号y(n)を生成する。
結果として、図18Gに例示されるように、帯域拡張信号y(n)の周波数スペクトルにおいて、第1サブ帯域成分と第2サブ帯域成分とが交互に配列した拡張帯域成分が形成されることとなる。
上記の通り、第4実施例の帯域拡張装置4は、第1拡張帯域処理部30Cおよび第2拡張帯域処理部50Cがそれぞれフィルタバンク35〜35N−1および52,…,52N−1を有するので、高品質で自然な周波数スペクトルを持つ帯域拡張信号y(n)を生成することが可能である。
5.適用例
上記第1〜第4実施例の帯域拡張装置1〜4を種々の機器に適用することができる。図19A〜図19Cは、帯域拡張装置1の適用例を概略的に示す図である。図19Aを参照すると、帯域拡張装置1(または帯域拡張装置2〜4)は、音声信号処理部60とD/A変換器(DAC)61との間に接続されている。音声信号処理部60は、たとえば、PCM符号化などの音声信号処理を行うブロックである。帯域拡張装置1は、音声信号処理部60から供給された信号の周波数帯域を拡張し、その帯域拡張信号をD/A変換器61に供給することができる。
図19Bの例では、帯域拡張装置1(または帯域拡張装置2〜4)は、携帯電話機や光ディスク再生装置などに組み込まれたデコーダ62と、D/A変換器(DAC)63との間に接続されている。帯域拡張装置1は、デコーダ62から供給された復号化信号の周波数帯域を拡張し、その帯域拡張信号をD/A変換器63に供給することができる。
図19Cの例では、帯域拡張装置1(または帯域拡張装置2〜4)は、AMチューナやFMチューナなどのチューナ64と、D/A変換器(DAC)67との間に接続されている。チューナ64の出力は、低域通過フィルタ(LPF)65でフィルタリングを施され、A/D変換器(ADC)66でA/D変換される。帯域拡張装置1は、A/D変換器66のデジタル出力の周波数帯域を拡張し、その帯域拡張信号をD/A変換器67に供給する。
また、上記の第1〜第4実施例の帯域拡張装置1〜4の全構成または一部構成をハードウェアで実現してもよいし、或いは、CPUなどのプロセッサで実行されるプログラムで実現してもよい。1. First embodiment
FIG. 3 is a functional block diagram schematically showing the configuration of the bandwidth extension device 1 according to the first embodiment of the present invention. The band extension device 1 includes a baseband processing unit 10, a coefficient determination unit 20, an extension band processing unit 30, and a mixing unit 40. The baseband processing unit 10 performs upsampling on a sequence of input signals x (n) (n is an integer), and baseband signal limited to a predetermined frequency band by filtering the upsampled signal sequence. x L (N) is generated. The input signal x (n) is a digital signal such as an audio signal.
The baseband processing unit 10 includes an upsampler 11, a low-pass filter (LPF) 12, and a delay device 13. The upsampler 11 performs upsampling on the sequence of the input signal x (n) at a rate N times (N is an integer equal to or greater than 2), that is, a factor of N, and performs an upsampling signal x U The sequence (n) is generated. The low-pass filter 12 has a pass band of | ω | <π / N (ω is an angular frequency), and the upsampling signal x U Filter signal x which is filtered to the frequency band of −π / N to + π / N by filtering the sequence (n) L The sequence (n) is generated. The delay unit 13 outputs the filter signal x for a predetermined delay time. L (N) is delayed and the delayed signal is output as a baseband signal. FIG. 4A to FIG. 4C illustrate frequency spectra when N is “2”. When the input signal x (n) shown in FIG. 4A is supplied, the upsampler 11 up-samples the input signal x (n) at a double rate, that is, a factor of 2 to obtain the frequency shown in FIG. 4B. Upsampling signal x with spectrum U (N) is generated. The low-pass filter 12 generates the upsampling signal x in FIG. 4B. U Filter signal x which is filtered to (n) and limited to a frequency band of −π / 2 to + π / 2 L (N) will be generated.
On the other hand, the extension band processing unit 30 calculates the extension band component z from the sequence of the input signal x (n). B (N) has a function of generating. The extended band processing unit 30 includes a high pass filter (HPF) 31, a down sampler 32, a spectrum inversion unit 33, an up sampler 34, and a band pass filter (BPF) 35. The high-pass filter 31 has a pass band (second frequency band) of | ω |> π / 2, and performs filtering on the sequence of the input signal x (n) to filter signal x H The sequence (n) is generated. The downsampler 32 then passes the filter signal x at a rate of 1/2, or a factor of two. H The downsampling signal, that is, the band signal x is applied to the series (n) by downsampling. D The sequence (n) is generated. 5A to 5B illustrate frequency spectra. When the input signal x (n) shown in FIG. 4A is supplied, the high-pass filter 31 having a pass band of | ω |> π / 2 is used as the filter signal x having the frequency spectrum shown in FIG. 5A. H (N) is generated. The downsampler 32 also outputs the filter signal x at a rate of ½, that is, a factor of 2. H The downsampling signal x having the frequency spectrum shown in FIG. D (N) will be generated.
The spectrum reversing unit 33 receives the downsampling signal x D Invert the signal z by inverting the spectrum of (n) D (N) is generated. As will be described below using mathematical expressions, “spectrum inversion” means that the frequency spectrum of a signal is shifted by an angular frequency π. Downsampling signal x D A signal obtained by inverting every other polarity of (n) is an inverted signal z. D Since (n), the downsampling signal x D (N) and inverted signal z D The relationship between (n) is expressed by the following equation (1).
z D (N) = x D (N) x (-1) n = X D (N) exp (-jnπ). (1)
Where j is an imaginary unit (j 2 = −1), and L is the number of samples of Fourier transform and is a positive integer. Therefore, the inverted signal z D Discrete Fourier transform Z of (n) D (K) is expanded as follows.
Figure 0004627548
Therefore, X D (K) downsampling signal x D When the discrete Fourier transform of (n) is used, the following equation (2) is established.
Figure 0004627548
According to Equation (2), in the frequency domain, Z D (K) is X D (K) is shifted by L / 2 point, that is, the angular frequency π. Therefore, “spectrum inversion” means that the frequency spectrum of the signal is shifted by the angular frequency π.
Referring now to FIG. 3, the upsampler 34 receives the inverted signal z at a rate of 2 × N, that is, a factor of 2 × N. D The upsampling signal z is obtained by upsampling the series (n). U The sequence (n) is generated. Further, the bandpass filter 35 has a passband of 2π / (2 × N) <| ω | <3π / (2 × N), and the upsampling signal z U By applying filtering to the sequence (n), the extended band component z B The sequence (n) is generated. This extended band component z B The frequency at the lower end (lower end) of the band (n) is the baseband signal x L The filter characteristics (pass band, stop band, cutoff frequency, etc.) of the band pass filter 35 are configured so as to be substantially the same as the frequency of the high band end (high band side end) of the band (n). In this embodiment, the extended band component z B The frequency at the lower end of (n) is approximately ± 2π / (2 × N), and the baseband signal x L Since the frequency at the high end of (n) is also ± π / N, both frequencies are substantially the same.
FIG. 5C to FIG. 5E illustrate frequency spectra when N is “2”. At this time, the spectrum inversion unit 33 performs the downsampling signal x in FIG. 5B. D Inverted signal z having the spectrum shown in FIG. 5C by inverting the spectrum of (n) D (N) is generated. The upsampler 34 also has an inverted signal z at a quadruple rate, that is, a factor of 4. D Upsampling signal z having the spectrum shown in FIG. U (N) is generated. The bandpass filter 35 having a passband of 2π / 4 <| ω | <3π / 4 is connected to the upsampling signal z. U (N) is subjected to filtering, and a filter signal z consisting of an extended band component having the spectrum shown in FIG. 5E B (N) will be generated. In such a case, the baseband signal x shown in FIG. L The frequency ± π / 2 at the high end of the band (n) is the extension band component z in FIG. 5E. B This coincides with the frequency ± π / 2 at the lower end of (n).
The above baseband signal x L (N) and extended band component z B (N) is mixed in the mixing unit 40. The coefficient determination unit 20 calculates the frequency spectrum of the input signal x (n), and based on this, the expansion band component z B It is a processing block for determining a mixing coefficient to be multiplied by (n). The coefficient determination unit 20 includes an FFT unit (fast Fourier transform unit) 21, a spectrum calculation unit 22, and a coefficient calculation unit 23. The FFT unit 21 performs a fast Fourier transform on the input signal x (n) sequence to calculate a frequency domain signal sequence. The spectrum calculation unit 22 calculates the frequency spectrum of the input signal x (n) based on the frequency domain signal sequence supplied from the FFT unit 21. The coefficient calculation unit 23 calculates a linear or non-linear regression curve in a frequency range of π / 2 to π based on the frequency spectrum calculated by the spectrum calculation unit 22, and calculates a mixing coefficient using the regression curve. can do. Specifically, a linear regression line expressed by a linear function may be used as the regression curve.
In the case of the first embodiment, components of the frequency band (second frequency band π / 2 to π) as shown in FIG. 5A are extracted from the input signal x (n), and these components are down-sampled and spectrum inverted. Is subjected to upsampling and filtering, so that the extended band component z as shown in FIG. B (N) is generated. Therefore, the mixing coefficient C (n) is the spectral value L of the regression curve at the low-frequency end frequency ω = π / 2 or a point in the vicinity thereof. A Is the spectral value L of the regression curve at the frequency ω = π at the high end or near the point B Ratio L B / L A Given in.
FIG. 6A shows the frequency spectrum of the input signal x (n) and the regression curve L. R FIG. Spectral curve C S Regression curve L in the frequency range of π / 2 to π based on R Is calculated. Since this frequency spectrum is expressed in decibels (dB), when the amplitude at the point of ω = π / 2 is expressed as VA and the amplitude at the point of ω = π is expressed as VB, the mixing coefficient C (n) is C (n) = L B / L A , L B = 10 (VB / 20) , L A = 10 (VA / 20) , Given in.
The mixing unit 40 includes a multiplier 41 and an adder 42. The multiplier 41 converts the mixing coefficient C (n) supplied from the coefficient determination unit 20 into the extension band component z. B Multiplying (n), the adder 42 adds the multiplication result to the baseband signal supplied from the baseband processing unit 10. As a result of the addition, a band extension signal y (n) is generated. FIG. 6B shows the frequency spectrum of the band extension signal y (n) when N is “2”. This band extension signal y (n) is the baseband signal x in FIG. 4C. L (N) shows the extended band component z in FIG. 5E. B (N) is a mixed signal.
FIG. 7A is a graph illustrating the measured value of the frequency spectrum (horizontal axis: Hz) of the original signal when the sampling frequency fs is 11025 Hz, and FIG. 7B uses the band extension device 1 of the first embodiment. It is a graph which illustrates the measured value of the frequency spectrum of the band extension signal obtained by extending the frequency band of the original signal. FIG. 7B shows that the baseband signal and the extended band component are smoothly connected.
As described above, the band extending apparatus 1 according to the first embodiment uses the band signal x whose frequency band is limited. H Band signal x obtained by down-sampling (n) D The spectrum of (n) is inverted. The band extension device 1 further includes the inverted signal z D (N) is upsampled, and the upsampled signal z U By applying filtering to (n), the baseband signal x L The component z of the extension band having the low frequency end substantially the same as the frequency π / N at the high frequency end of the frequency band (n) B (N), and such an extended band component z B (N) is the baseband signal x L (N) is mixed. Such a band extension device 1 is configured to transmit the band signal x D Since the spectrum of (n) is inverted, compared with the prior art that does not perform spectrum inversion, the extended band component z B (N) and baseband signal x L The connectivity with (n) becomes good, and the quality of the output signal y (n) can be improved.
Further, the band extension device 1 determines the extension band component z based on the frequency spectrum of the input signal x (n). B Since the mixing coefficient C (n) to be multiplied by (n) is calculated, the extension band component can be smoothly connected to the baseband signal, and the band extension signal y (n having a high-quality and natural frequency spectrum can be obtained. ) Can be generated.
Next, another example of the method for calculating the mixing coefficient C (n) will be described. In this calculation method, a narrow band Δω including the low-frequency end frequency ω = π / 2. A First average of spectral values of multiple points at <L A > And a narrow band Δω including the frequency ω = π at the high end. B Second average of spectral values at multiple points in <L B > And then these first averages <L A > And second average <L B > Is calculated as the mixing coefficient C (n). FIG. 8 is a graph illustrating a frequency spectrum for explaining the calculation method. In such a case, the narrow band Δω A The first average <VA> of spectral values at and the narrow band Δω B A second average <VB> of the spectrum values at is calculated. Since the frequency spectrum is shown in decibels (dB), the mixing coefficient C (n) is C (n) = <L B >> / <L A >, <L B > = 10 (<VB> / 20) , <L A > = 10 (<VA> / 20) , Given in.
If the above calculation method is employed, the coefficient calculation unit 23 does not need a frequency curve regression curve, so the mixing coefficient C (n) can be calculated with a small amount of calculation, and low power consumption can also be realized.
Further, still another method for calculating the mixing coefficient C (n) will be described with reference to FIG. FIG. 9 is a functional block diagram schematically showing the configuration of a coefficient determination unit 20D that replaces the coefficient determination unit 20 shown in FIG. The coefficient determination unit 20D includes band pass filters (BPF) 24A and 24B, square sum calculation units 25A and 25B, and a coefficient calculation unit 26. One band-pass filter 24A has only a predetermined narrow band including a low-frequency end frequency ω = π / 2 as a pass band, and the other band-pass filter (BPF) 24B has a high-frequency end frequency ω = It has only a predetermined narrow band including π as a pass band. The sum of squares calculation units 25A and 25B respectively calculate the sum of squares of the outputs of the bandpass filters 24A and 24B <A 2 >, <B 2 > Is repeatedly calculated every predetermined sample period T. For example, if the output value series of the band pass filter 24A is A1, A2, A3,. 2 > (A1) 2 + (A2) 2 + (A3) 2 + ... Then, the coefficient calculation unit 26 calculates the square root value (<B 2 >> / <A 2 >) (1/2) Is calculated as a mixing coefficient C (n).
The coefficient determination unit 20D does not require Fourier transform and frequency spectrum, and the band-pass filters 24A and 24B do not necessarily have to be configured with FIR filters (finite-length impulse response filters). Infinite length impulse response filter). Therefore, the coefficient determination unit 20D can calculate the mixing coefficient C (n) with a smaller amount of calculation than the coefficient determination unit 20 of FIG. 3, and can realize low power consumption.
2. Second embodiment
Next, a band extending apparatus and a band extending method according to the second embodiment of the present invention will be described. FIG. 10 is a functional block diagram schematically showing the configuration of the band extending apparatus 2 of the second embodiment. It should be noted that the components denoted by the same reference numerals in FIG. 10 and FIG. 3 have the same function or the same configuration, and detailed description thereof is omitted.
Referring to FIG. 10, the band extending apparatus 2 of the second embodiment includes a baseband processing unit 10, a coefficient determining unit 20A, and an extended band processing unit 30A. As described above, the baseband processing unit 10 performs upsampling on the sequence of the input signal x (n) and performs filtering on the upsampled signal sequence to thereby limit the baseband signal x limited to a predetermined frequency band. L (N) is generated.
The extension band processing unit 30A extracts the extension band component z from the sequence of the input signal x (n). H (N) has a function of generating. The extended band processing unit 30A includes a spectrum inversion unit 33, an upsampler 36, and a band pass filter 37. The spectrum inversion unit 33 inverts the spectrum of the input signal x (n) to generate an inversion signal z (n). The upsampler 36 upsamples the sequence of the inverted signal z (n) at a rate N times, that is, a factor of N, to upsample the signal z U The sequence (n) is generated. The bandpass filter 37 has a passband of π / N <| ω | <2π / N, and the upsampling signal z U Filter signal z which is an extension band component by filtering the sequence of (n) B The sequence (n) is generated. This extended band component z B (N) is supplied to the mixing unit 40.
FIG. 11A to FIG. 11D illustrate frequency spectra when N is “2”. In such a case, when the input signal x (n) shown in FIG. 11A is supplied, the spectrum inversion unit 33 inverts the spectrum of the input signal x (n) and has the frequency spectrum shown in FIG. 11B. z (n) is generated. The upsampler 36 upsamples the series of inverted signals z (n) at a double rate or factor of 2 to produce an upsampled signal z having the spectrum shown in FIG. 11C. U (N) is generated. The bandpass filter 37 has a passband of π / 2 <| ω | <π, and an extended band component z having a frequency spectrum shown in FIG. 11D. B (N) will be generated.
On the other hand, the coefficient determination unit 20A includes an FFT unit 21, a spectrum calculation unit 22, and a coefficient calculation unit 23A. The coefficient calculation unit 23A calculates a linear or non-linear regression curve in a frequency range of 0 to π based on the frequency spectrum calculated by the spectrum calculation unit 22, and calculates a mixing coefficient using the regression curve. Can do. Specifically, a linear regression line expressed by a linear function may be used as the regression curve.
In the case of the second embodiment, by performing upsampling and filtering on the components of the entire frequency band of the input signal x (n), the extended band component z as shown in FIG. 11D. B (N) is generated. Therefore, the mixing coefficient C (n) is the spectral value L of the regression curve at a frequency ω = 0 at the lower end of the frequency band of the input signal x (n) or a point in the vicinity thereof. A Is the spectral value L of the regression curve at the frequency ω = π at the high end or near the point B Ratio L B / L A Given in.
FIG. 12A shows the frequency spectrum of the input signal x (n) and the regression curve L. R FIG. Spectral curve C S Among them, the regression curve L in the frequency range of 0 to π R Is calculated. Since this frequency spectrum is expressed in decibels (dB), when the amplitude at the point of ω = 0 is expressed as VA and the amplitude at the point of ω = π is expressed as VB, the mixing coefficient C (n) is expressed as C ( n) = L B / L A , L B = 10 (VB / 20) , L A = 10 (VA / 20) , Given in.
Note that the mixing coefficient C (n) may be calculated by applying the calculation methods shown in FIGS. 8 and 9 instead of the calculation method of the coefficient determination unit 20A. In such a case, the calculation method shown in FIGS. 8 and 9 may be applied by setting the frequency at the low band end to ω = 0 and the frequency at the high band end to ω = π.
In the mixing unit 40, the multiplier 41 converts the mixing coefficient C (n) supplied from the coefficient determination unit 20A into the extension band component z. B Multiplying (n), the adder 42 adds the multiplication result to the baseband signal supplied from the baseband processing unit 10. As a result of the addition, a band extension signal y (n) is generated. FIG. 12B shows the frequency spectrum of the band extension signal y (n) when N = 2. This band extension signal y (n) is added to the baseband signal as an extension band component z in FIG. 11D. B (N) is a mixed signal.
As described above, the band extending apparatus 2 of the second embodiment inverts the spectrum of the input signal x (n), up-samples the inverted signal z (n), and the up-sampled signal z U By applying filtering to (n), the baseband signal x L The component z of the extension band having the low frequency end substantially the same as the frequency π / N at the high frequency end of the frequency band (n) B (N), and such an extended band component z B (N) is the baseband signal x L (N) is mixed. Since such a band extending apparatus 2 inverts the spectrum of the input signal x (n), compared to the conventional technique that does not perform spectrum inversion, the expanded band component z B (N) and baseband signal x L The connectivity with (n) becomes good, and the quality of the output signal y (n) can be improved.
Further, the band extension device 2 generates an extension band component z based on the frequency spectrum of the input signal x (n). B Since the mixing coefficient C (n) to be multiplied by (n) is calculated, the extension band component can be smoothly connected to the baseband signal, and the band extension signal y (n having a high-quality and natural frequency spectrum can be obtained. ) Can be generated.
3. Third embodiment
Next, a band extending apparatus and a band extending method according to a third embodiment of the present invention will be described. FIG. 13 is a functional block diagram schematically showing the configuration of the band extending apparatus 3 of the third embodiment. It should be noted that the components denoted by the same reference numerals in FIGS. 13 and 3 have the same function or the same configuration, and detailed description thereof is omitted.
Referring to FIG. 13, the bandwidth extension device 3 of the third embodiment includes a baseband processing unit 10, a coefficient determination unit 20 </ b> B, a first extension band processing unit 30, and a second extension band processing unit 50. As described above, the baseband processing unit 10 performs upsampling on the sequence of the input signal x (n) and performs filtering on the upsampled signal sequence to thereby limit the baseband signal x limited to a predetermined frequency band. L (N) is generated. The first extension band processing unit 30 calculates the first extension band component z from the sequence of the input signal x (n). B (N) has a function of generating.
The second extension band processing unit 50 includes an up sampler 51 and a band pass filter (BPF) 52. The upsampler 51 includes a downsampling signal x supplied from the downsampler 32 of the first extension band processing unit 30. D The upsampling signal x is obtained by upsampling the sequence (n) at a rate of 2 × N, that is, a factor of 2 × N. U2 The sequence (n) is generated. The band pass filter (BPF) 52 has a pass band of 3π / (2 × N) <| ω | <4π / (2 × N), and the upsampling signal x U2 The second extension band component x is obtained by filtering the sequence (n). B (N) is generated.
14A to 14E illustrate frequency spectra in the case of N = 2. When the input signal x (n) having the spectrum shown in FIG. 4A is supplied, the baseband processing unit 10 performs the baseband signal x having the spectrum shown in FIG. 14A. L (N) is output, and the first extension band processing unit 30 outputs the first extension band component z having the spectrum shown in FIG. 14B. B (N) is output. The downsampler 32 of the first extension band processing unit 30 includes a downsampling signal x having the spectrum shown in FIG. 14C. D (N) is supplied to the upsampler 51 of the second extension band processing unit 50. Therefore, the upsampler 51 has the upsampling signal x having the spectrum shown in FIG. 14D. U2 (N) is generated. The band pass filter 52 has a pass band of 3π / 4 <| ω | <π, and has a second extension band component x having a spectrum shown in FIG. 14E. B (N) is output.
The coefficient determination unit 20B has substantially the same configuration and function as the coefficient calculation unit 23 of FIG. 3, and includes a first mixing coefficient C (n) and a second mixing coefficient C (n) that is a square value thereof. 2 Are supplied to the mixing unit 40B. In the mixing unit 40B, the first multiplier 41A includes a first extension band component z B (N) is multiplied by the first mixing coefficient C (n) and the result of the multiplication is supplied to the adder 43, while the second multiplier 41B includes the second extension band component x. B (N) to the second mixing coefficient C (n) 2 And the multiplication result is supplied to the adder 43. The adder 43 adds the multiplication results to the baseband signal supplied from the baseband processing unit 10 to generate the band extension signal y (n). FIG. 14F shows the frequency spectrum of the band extension signal y (n) when N = 2. The band extension signal y (n) in FIG. 14F is the baseband signal x in FIG. 14A. L (N) includes the first extension band component z in FIG. 14B. B (N) and the second extension band component x of FIG. 14E B (N) is a mixed signal.
As described above, the band extending apparatus 3 of the third embodiment has the second extended band component x in addition to the configuration of the band extending apparatus 1 (FIG. 3) of the first embodiment. B Since the second extension band processing unit 50 that generates (n) is included, it is possible to obtain an output signal y (n) whose frequency band is further extended.
4). Fourth embodiment
Next, a band extending apparatus and a band extending method according to the fourth embodiment of the present invention will be described. FIG. 15 is a functional block diagram schematically showing the configuration of the band extending device 4 of the fourth embodiment. It should be noted that the components denoted by the same reference numerals in FIG. 15 and FIG. 3 have the same function or the same configuration and will not be described in detail.
Referring to FIG. 15, the bandwidth expansion device 4 of the fourth embodiment includes a baseband processing unit 10, a coefficient determination unit 20C, a first expansion band processing unit 30C, a second expansion band processing unit 50C, and a mixing unit 40C. ing. FIG. 16 schematically shows the configuration of the mixing unit 40C. As described above, the baseband processing unit 10 performs upsampling on the sequence of the input signal x (n) and performs filtering on the upsampled signal sequence to thereby limit the baseband signal x limited to a predetermined frequency band. L (N) is generated.
The first extension band processing unit 30C receives a plurality of first subband components z from the sequence of input signals x (n). 1 , ..., z N-1 Is generated as an extended band component. The first extended band processing unit 30C includes a high pass filter (HPF) 31, a down sampler 32, a spectrum inversion unit 33, and an up sampler 34, and a plurality of band pass filters (each having a different pass band). BPF) 35 1 , ..., 35 N-1 A filter bank consisting of The kth (k is an integer from 1 to N-1) bandpass filter 35 k Has a passband of 2kπ / (2N) <| ω | <(2k + 1) π / (2N). These band pass filters 35 1 , ..., 35 N-1 Is the upsampling signal z from the upsampler 34 U A plurality of first subband components z whose frequency band is limited by filtering (n) 1 , ..., z N-1 Is generated and supplied to the multiplication unit 44.
On the other hand, the second extension band processing unit 50C includes an upsampler 51, and a plurality of band pass filters (BPF) 52 each having a different pass band. 1 , ..., 52 N-1 A filter bank consisting of k-th band-pass filter 52 (k is an integer of 1 to N−1) k Has a passband of (2k + 1) π / (2N) <| ω | <(2k + 2) π / (2N). The upsampler 51 receives the downsampling signal x from the downsampler 32. D The upsampling signal x is obtained by upsampling the sequence (n) at a rate of 2 × N, that is, a factor of 2 × N. U2 The sequence (n) is generated. Band pass filter 52 1 , ..., 52 N-1 Is the upsampling signal x U2 A plurality of second subband components x whose frequency band is limited by filtering the sequence (n) 1 , ..., x N-1 Is generated and supplied to the multiplication unit 44.
Band pass filter 35 1 , ..., 35 N-1 Filter characteristics and bandpass filter 52 1 , ..., 52 N-1 Filter characteristics of the first and second subband components z 1 , ..., z N-1 , X 1 , ..., x N-1 Are configured to be substantially continuous. Band pass filter 35 1 , 52 1 , 35 2 , 52 2 , ..., 35 N-1 And 52 N-1 The passband is continuous. As a result, the frequency band of the band extension signal y (n) is not discontinuous and is continuously continuous.
17A to 17D and FIGS. 18A to 18G illustrate frequency spectra in the case of N = 4. These frequency spectra are shown only in the frequency range of 0 to π, but also in the frequency range of -π to 0, the frequency spectrum (not shown) that has a mirror image relationship with respect to the frequency spectrum and the point of ω = 0. Shall exist. When an input signal x (n) having a spectrum is supplied as shown in FIG. 17A, the baseband processing unit 10 has a base having a spectrum whose band is limited to 0 to π / 4 as shown in FIG. 17B. Band signal x L (N) is output. In the first extension band processing unit 30C, the downsampler 32 receives the downsampling signal x having the spectrum shown in FIG. 17C. D (N) is output, and the spectrum inversion unit 33 outputs the inverted signal z having the spectrum shown in FIG. 17D. D (N) is output.
In such a case, the band pass filter 35 1 , 35 2 , 35 3 Are the first subband components z having the spectra shown in FIGS. 18A, 18B, and 18C, respectively. 1 , Z 2 , Z 3 Is output. On the other hand, the bandpass filter 52 1 , 52 2 , 52 3 Are the second subband components x having the spectra shown in FIGS. 18D, 18E, and 18F, respectively. 1 , X 2 , X 3 Is output. First and second subband components z shown in FIGS. 18A to 18F 1 , X 1 , Z 2 , X 2 , Z 3 , X 3 It can be seen that the frequency band of is continuous.
The coefficient determination unit 20C generates the same mixing coefficient C as the mixing coefficient C (n) given by the coefficient determination unit 20 in FIG. 2 , C 3 , ..., C 2N-2 The mixing coefficient is calculated. The mixing coefficient data CD is supplied to the mixing unit 40C.
As illustrated in FIG. 16, the mixing unit 40C includes a multiplier 45 for the first subband component. 1 , ..., 45 N-1 And a multiplier 46 for the second subband component 1 , ..., 46 N-1 And have. Multiplier 45 for the first subband component 1 , 45 2 , ..., 45 N-1 Respectively, the first subband component z 1 , Z 2 , ..., z N-1 And the multiplier 45 1 , 45 2 , ..., 45 N-1 Includes multiplication coefficients C and C, respectively. 3 , ..., C 2N-3 Is given. On the other hand, the multiplier 46 for the second subband component 1 , 46 2 , ..., 46 N-1 Respectively, the second subband component x 1 , X 2 , ..., x N-1 And the multiplier 46 1 , 46 2 , ..., 46 N-1 Respectively, the multiplication coefficient C 2 , C 4 , ..., C 2N-2 Is given. The adder 43 is a multiplier 45. 1 , ..., 45 N-1 , 46 1 , ..., 46 N-1 Are added to the baseband signal to generate a band extension signal y (n).
As a result, as illustrated in FIG. 18G, an extension band component in which the first subband component and the second subband component are alternately arranged is formed in the frequency spectrum of the band extension signal y (n). Become.
As described above, in the band expansion device 4 of the fourth embodiment, the first expansion band processing unit 30C and the second expansion band processing unit 50C are respectively connected to the filter bank 35. 1 ~ 35 N-1 And 52 1 , ..., 52 N-1 Therefore, it is possible to generate the band extension signal y (n) having a high-quality and natural frequency spectrum.
5. Application examples
The band extending apparatuses 1 to 4 of the first to fourth embodiments can be applied to various devices. 19A to 19C are diagrams schematically illustrating an application example of the band extending device 1. Referring to FIG. 19A, the bandwidth extension device 1 (or bandwidth extension devices 2 to 4) is connected between the audio signal processing unit 60 and the D / A converter (DAC) 61. The audio signal processing unit 60 is a block that performs audio signal processing such as PCM encoding. The band extension device 1 can extend the frequency band of the signal supplied from the audio signal processing unit 60 and supply the band extension signal to the D / A converter 61.
In the example of FIG. 19B, the bandwidth extension device 1 (or bandwidth extension devices 2 to 4) is connected between a decoder 62 incorporated in a mobile phone, an optical disk playback device or the like, and a D / A converter (DAC) 63. Has been. The band extension device 1 can extend the frequency band of the decoded signal supplied from the decoder 62 and supply the band extension signal to the D / A converter 63.
In the example of FIG. 19C, the band extension device 1 (or the band extension devices 2 to 4) is connected between a tuner 64 such as an AM tuner or an FM tuner and a D / A converter (DAC) 67. The output of the tuner 64 is filtered by a low-pass filter (LPF) 65 and A / D converted by an A / D converter (ADC) 66. The band extension device 1 extends the frequency band of the digital output of the A / D converter 66 and supplies the band extension signal to the D / A converter 67.
Further, all or part of the bandwidth extension apparatuses 1 to 4 of the first to fourth embodiments may be realized by hardware, or may be realized by a program executed by a processor such as a CPU. May be.

Claims (22)

入力信号の周波数帯域を拡張する帯域拡張装置であって、
前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するベースバンド処理部と、
前記入力信号から拡張帯域成分を生成する拡張帯域処理部と、
前記ベースバンド信号に前記拡張帯域成分を混合する混合部と、を備え、
前記拡張帯域処理部は、
前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するスペクトル反転部と、
前記反転信号にアップサンプリングを施すアップサンプラと、
前記アップサンプラの出力にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成する帯域通過フィルタと、
を含むことを特徴とする帯域拡張装置。
A bandwidth expansion device for expanding the frequency band of an input signal,
A baseband processing unit that performs upsampling on the input signal and generates a baseband signal limited to a predetermined frequency band by filtering the upsampled signal;
An extension band processing unit that generates an extension band component from the input signal;
A mixing unit that mixes the extension band component with the baseband signal,
The extended bandwidth processing unit
A spectrum inversion unit for generating an inverted signal by inverting the spectrum of the input signal or a band signal obtained from the input signal;
An upsampler for upsampling the inverted signal;
A band pass filter that generates, as the extension band component, a frequency band component having a frequency that is substantially the same as the frequency at the high frequency end of the frequency band of the baseband signal by filtering the output of the upsampler When,
A band extending apparatus comprising:
請求項1記載の帯域拡張装置であって、
前記スペクトル反転部は、前記帯域信号のスペクトルを反転して前記反転信号を生成し、
前記拡張帯域処理部は、
前記入力信号にフィルタリングを施して第2周波数帯域に制限されたフィルタ信号を生成する第2の帯域通過フィルタと、
前記フィルタ信号にダウンサンプリングを施して前記帯域信号を得るダウンサンプラと、を含むことを特徴とする帯域拡張装置。
The bandwidth extension apparatus according to claim 1,
The spectrum inversion unit generates the inverted signal by inverting the spectrum of the band signal,
The extended bandwidth processing unit
A second band pass filter that filters the input signal to generate a filter signal limited to a second frequency band;
And a downsampler for downsampling the filter signal to obtain the band signal.
請求項2記載の帯域拡張装置であって、前記ダウンサンプラは、2のファクタで前記ダウンサンプリングを実行することを特徴とする帯域拡張装置。3. The band extending apparatus according to claim 2, wherein the down sampler performs the down sampling with a factor of two. 請求項2または3記載の帯域拡張装置であって、前記入力信号の周波数スペクトルと前記周波数スペクトルの回帰曲線とを算出し、前記回帰曲線を用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
4. The band extending apparatus according to claim 2, wherein a frequency spectrum of the input signal and a regression curve of the frequency spectrum are calculated, and a mixing coefficient to be multiplied by the extension band component is determined using the regression curve. A coefficient determination unit;
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項4記載の帯域拡張装置であって、前記係数決定部は、前記回帰曲線を用いて、前記第2周波数帯域の高域端の周波数またはその近傍の周波数での第1のスペクトル値と、前記第2周波数帯域の低域端の周波数またはその近傍の周波数での第2のスペクトル値とを取得し、前記第1および第2のスペクトル値の比率を前記混合係数として算出することを特徴とする帯域拡張装置。5. The band extension apparatus according to claim 4, wherein the coefficient determination unit uses the regression curve, and a first spectrum value at a frequency at a high frequency end of the second frequency band or a frequency in the vicinity thereof, Obtaining a second spectral value at a frequency at a lower end of the second frequency band or a frequency in the vicinity thereof, and calculating a ratio of the first and second spectral values as the mixing coefficient, To expand the bandwidth. 請求項2または3記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記係数決定部は、前記周波数スペクトルを用いて、前記第2周波数帯域の高域端の周波数またはその近傍の周波数での第1のスペクトル値と、前記第2周波数帯域の低域端の周波数またはその近傍の周波数での第2のスペクトル値とを取得し、前記第1および第2のスペクトル値の比率を前記混合係数として算出するものであり、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extension apparatus according to claim 2 or 3, further comprising a coefficient determination unit that calculates a frequency spectrum of the input signal and determines a mixing coefficient to be multiplied by the extension band component using the frequency spectrum.
The coefficient determination unit uses the frequency spectrum to determine a first spectrum value at a frequency at or near the high frequency end of the second frequency band and a frequency at the low frequency end of the second frequency band or A second spectral value at a frequency in the vicinity thereof, and a ratio of the first and second spectral values is calculated as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項2または3記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記係数決定部は、前記周波数スペクトルを用いて、前記第2周波数帯域の高域端の周波数を含む所定の狭帯域におけるスペクトル値の第1平均と、前記第2周波数帯域の低域端の周波数を含む所定の狭帯域におけるスペクトル値の第2平均とを算出し、前記第1および第2平均の比率を前記混合係数として算出するものであり、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extension apparatus according to claim 2 or 3, further comprising a coefficient determination unit that calculates a frequency spectrum of the input signal and determines a mixing coefficient to be multiplied by the extension band component using the frequency spectrum.
The coefficient determination unit uses the frequency spectrum to calculate a first average of spectrum values in a predetermined narrow band including a frequency at a high frequency end of the second frequency band and a frequency at a low frequency end of the second frequency band. And calculating a second average of spectral values in a predetermined narrow band including the ratio of the first and second averages as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項2または3記載の帯域拡張装置であって、前記拡張帯域成分に乗ずるべき混合係数を決定する係数決定部をさらに備え、
前記係数決定部は、
前記第2周波数帯域の高域端の周波数を含む所定の狭帯域を通過帯域として有し前記入力信号にフィルタリングを施す第1帯域通過フィルタと、
前記第2周波数帯域の低域端の周波数を含む所定の狭帯域を通過帯域として有し前記入力信号にフィルタリングを施す第2帯域通過フィルタと、
前記第1帯域通過フィルタの出力の2乗和を所定のサンプル期間に亘って算出し且つ前記第2帯域通過フィルタの出力の2乗和を前記サンプル期間に亘って算出して前記2乗和の比率の平方根値を前記混合係数として算出する演算部と、を含み、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extension apparatus according to claim 2 or 3, further comprising a coefficient determination unit that determines a mixing coefficient to be multiplied by the extension band component,
The coefficient determination unit
A first bandpass filter for filtering the input signal having a predetermined narrowband including a frequency at the high end of the second frequency band as a passband;
A second bandpass filter that filters the input signal with a predetermined narrowband including a low-end frequency of the second frequency band as a passband;
The sum of squares of the output of the first bandpass filter is calculated over a predetermined sample period, and the sum of squares of the output of the second bandpass filter is calculated over the sample period to calculate the sum of squares. An arithmetic unit that calculates a square root value of the ratio as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項1記載の帯域拡張装置であって、前記入力信号の周波数スペクトルと前記周波数スペクトルの回帰曲線とを算出し、前記回帰曲線を用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記スペクトル反転部は、前記入力信号のスペクトルを反転して前記反転信号を生成し、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
2. The band extension apparatus according to claim 1, wherein a frequency spectrum of the input signal and a regression curve of the frequency spectrum are calculated, and a coefficient determination for determining a mixing coefficient to be multiplied by the extension band component using the regression curve. Further comprising
The spectrum inversion unit inverts the spectrum of the input signal to generate the inverted signal,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項9記載の帯域拡張装置であって、前記係数決定部は、前記回帰曲線を用いて、前記入力信号の周波数帯域の高域端の周波数またはその近傍の周波数での第1のスペクトル値と、前記入力信号の周波数帯域の低域端の周波数またはその近傍の周波数での第2のスペクトル値とを取得し、前記第1および第2のスペクトル値の比率を前記混合係数として算出することを特徴とする帯域拡張装置。10. The band extending apparatus according to claim 9, wherein the coefficient determination unit uses the regression curve to calculate a first spectrum value at a frequency at a high frequency end of the frequency band of the input signal or a frequency in the vicinity thereof. Obtaining a second spectral value at a frequency at or near a lower end of the frequency band of the input signal, and calculating a ratio of the first and second spectral values as the mixing coefficient. A bandwidth extension device. 請求項1記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記スペクトル反転部は、前記入力信号のスペクトルを反転して前記反転信号を生成し、
前記係数決定部は、前記周波数スペクトルを用いて、前記入力信号の周波数帯域の高域端の周波数またはその近傍の周波数での第1のスペクトル値と、前記入力信号の周波数帯域の低域端の周波数またはその近傍の周波数での第2のスペクトル値とを取得し、前記第1および第2のスペクトル値の比率を前記混合係数として算出するものであり、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extending apparatus according to claim 1, further comprising a coefficient determining unit that calculates a frequency spectrum of the input signal and determines a mixing coefficient to be multiplied by the extended band component using the frequency spectrum.
The spectrum inversion unit inverts the spectrum of the input signal to generate the inverted signal,
The coefficient determination unit uses the frequency spectrum to determine a first spectrum value at a frequency at or near a high frequency end of the frequency band of the input signal and a low frequency end of the frequency band of the input signal. A second spectral value at a frequency or a frequency in the vicinity thereof, and a ratio of the first and second spectral values is calculated as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項1記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて前記拡張帯域成分に乗じるべき混合係数を決定する係数決定部をさらに備え、
前記スペクトル反転部は、前記入力信号のスペクトルを反転して前記反転信号を生成し、
前記係数決定部は、前記周波数スペクトルを用いて、前記入力信号の周波数帯域の高域端の周波数を含む所定の狭帯域におけるスペクトル値の第1平均と、前記入力信号の周波数帯域の低域端の周波数を含む所定の狭帯域におけるスペクトル値の第2平均とを算出し、前記第1および第2平均の比率を前記混合係数として算出するものであり、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extending apparatus according to claim 1, further comprising a coefficient determining unit that calculates a frequency spectrum of the input signal and determines a mixing coefficient to be multiplied by the extended band component using the frequency spectrum.
The spectrum inversion unit inverts the spectrum of the input signal to generate the inverted signal,
The coefficient determination unit uses the frequency spectrum, and uses a first average of spectrum values in a predetermined narrow band including a frequency at a high band end of the frequency band of the input signal, and a low band end of the frequency band of the input signal. And calculating a second average of the spectrum values in a predetermined narrow band including the frequency, and calculating a ratio of the first and second averages as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項1記載の帯域拡張装置であって、前記拡張帯域成分に乗ずるべき混合係数を決定する係数決定部をさらに備え、
前記スペクトル反転部は、前記入力信号のスペクトルを反転して前記反転信号を生成し、
前記係数決定部は、
前記入力信号の周波数帯域の高域端の周波数を含む所定の狭帯域を通過帯域として有し前記入力信号にフィルタリングを施す第1帯域通過フィルタと、
前記入力信号の周波数帯域の低域端の周波数を含む所定の狭帯域を通過帯域として有し前記入力信号にフィルタリングを施す第2帯域通過フィルタと、
前記第1帯域通過フィルタの出力の2乗和を所定のサンプル期間に亘って算出し且つ前記第2帯域通過フィルタの出力の2乗和を前記サンプル期間に亘って算出して前記2乗和の比率の平方根値を前記混合係数として算出する演算部と、を含み、
前記混合部は、前記拡張帯域成分に前記混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extending apparatus according to claim 1, further comprising a coefficient determining unit that determines a mixing coefficient to be multiplied by the extended band component,
The spectrum inversion unit inverts the spectrum of the input signal to generate the inverted signal,
The coefficient determination unit
A first band pass filter that filters the input signal with a predetermined narrow band including a frequency at the high end of the frequency band of the input signal as a pass band;
A second bandpass filter for filtering the input signal having a predetermined narrowband including a frequency at a lower end of the frequency band of the input signal as a passband;
The sum of squares of the output of the first bandpass filter is calculated over a predetermined sample period, and the sum of squares of the output of the second bandpass filter is calculated over the sample period to calculate the sum of squares. An arithmetic unit that calculates a square root value of the ratio as the mixing coefficient,
The band extension device, wherein the mixing unit multiplies the extension band component by the mixing coefficient and adds the multiplication result to the baseband signal.
請求項2または3記載の帯域拡張装置であって、前記入力信号から第2の拡張帯域成分を生成する第2の拡張帯域処理部をさらに備え、
前記第2の拡張帯域処理部は、
前記拡張帯域処理部に含まれる前記ダウンサンプラから供給された前記帯域信号にアップサンプリングを施すアップサンプラと、
前記アップサンプラの出力にフィルタリングを施すことで、前記拡張帯域成分の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記第2の拡張帯域成分として生成する帯域通過フィルタと、を含み、
前記混合部は、前記ベースバンド信号に前記拡張帯域成分と前記第2の拡張帯域成分とを混合することを特徴とする帯域拡張装置。
The band extension apparatus according to claim 2 or 3, further comprising a second extension band processing unit that generates a second extension band component from the input signal,
The second extension bandwidth processing unit
An upsampler for upsampling the band signal supplied from the downsampler included in the extended band processing unit;
A band pass that generates a frequency band component having a frequency that is substantially the same as the frequency of the high band edge of the extension band component as the low band edge by filtering the output of the upsampler as the second band extension component. A filter, and
The mixing unit mixes the extension band component and the second extension band component with the baseband signal.
請求項14記載の帯域拡張装置であって、前記入力信号の周波数スペクトルと前記周波数スペクトルの回帰曲線とを算出し、前記回帰曲線を用いて、前記拡張帯域成分に乗ずるべき第1混合係数と前記第2の拡張帯域成分に乗ずるべき第2混合係数とを決定する係数決定部をさらに備え、
前記混合部は、前記拡張帯域成分に前記第1混合係数を乗算し且つ前記第2の拡張帯域成分に前記第2混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
15. The band extending apparatus according to claim 14, wherein a frequency spectrum of the input signal and a regression curve of the frequency spectrum are calculated, and using the regression curve, the first mixing coefficient to be multiplied by the extension band component and the A coefficient determination unit for determining a second mixing coefficient to be multiplied by the second extension band component;
The mixing unit multiplies the extension band component by the first mixing coefficient and multiplies the second extension band component by the second mixing coefficient and adds the multiplication result to the baseband signal. Bandwidth expansion device.
請求項14記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて、前記拡張帯域成分に乗ずるべき第1混合係数と前記第2の拡張帯域成分に乗ずるべき第2混合係数とを決定する係数決定部をさらに備え、
前記混合部は、前記拡張帯域成分に前記第1混合係数を乗算し且つ前記第2の拡張帯域成分に前記第2混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
15. The band extending apparatus according to claim 14, wherein a frequency spectrum of the input signal is calculated, and the first mixing coefficient to be multiplied by the extension band component and the second extension band component are multiplied by using the frequency spectrum. A coefficient determination unit for determining a power second mixing coefficient;
The mixing unit multiplies the extension band component by the first mixing coefficient and multiplies the second extension band component by the second mixing coefficient and adds the multiplication result to the baseband signal. Bandwidth expansion device.
請求項2または3記載の帯域拡張装置であって、前記入力信号から第2の拡張帯域成分を生成する第2の拡張帯域処理部をさらに備え、
前記拡張帯域処理部に含まれる前記帯域通過フィルタは、前記アップサンプラの出力にフィルタリングを施すことで、互いに異なる周波数帯域に制限された複数の第1サブ帯域成分を前記拡張帯域成分として生成するフィルタバンクで構成されており、
前記第2の拡張帯域処理部は、
前記拡張帯域処理部に含まれる前記ダウンサンプラから供給された前記帯域信号にアップサンプリングを施すアップサンプラと、
前記アップサンプラの出力にフィルタリングを施すことで、互いに異なる周波数帯域に制限された複数の第2サブ帯域成分を前記第2の拡張帯域成分として生成するフィルタバンクと、を含み、
前記混合部は、前記ベースバンド信号に前記第1サブ帯域成分と前記第2サブ帯域成分とを混合することを特徴とする帯域拡張装置。
The band extension apparatus according to claim 2 or 3, further comprising a second extension band processing unit that generates a second extension band component from the input signal,
The bandpass filter included in the extension band processing unit generates a plurality of first subband components limited to different frequency bands as the extension band components by filtering the output of the upsampler. Consists of banks,
The second extension bandwidth processing unit
An upsampler for upsampling the band signal supplied from the downsampler included in the extended band processing unit;
A filter bank that generates a plurality of second subband components limited to different frequency bands as the second extension band components by filtering the output of the upsampler,
The band extender characterized in that the mixing unit mixes the first subband component and the second subband component with the baseband signal.
請求項17記載の帯域拡張装置であって、前記第1サブ帯域成分の周波数帯域と前記第2サブ帯域成分の周波数帯域とは連続することを特徴とする帯域拡張装置。18. The band extending apparatus according to claim 17, wherein the frequency band of the first subband component and the frequency band of the second subband component are continuous. 請求項17または18記載の帯域拡張装置であって、前記入力信号の周波数スペクトルと前記周波数スペクトルの回帰曲線とを算出し、前記回帰曲線を用いて、前記第1サブ帯域成分にそれぞれ乗ずるべき複数の第1混合係数と前記第2サブ帯域成分にそれぞれ乗ずるべき複数の第2混合係数とを決定する係数決定部をさらに備え、
前記混合部は、前記第1サブ帯域成分にそれぞれ前記第1混合係数を乗算し且つ前記第2サブ帯域成分にそれぞれ前記第2混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
The band extending apparatus according to claim 17 or 18, wherein a frequency spectrum of the input signal and a regression curve of the frequency spectrum are calculated, and a plurality of the first subband components to be multiplied by using the regression curve. A coefficient determining unit that determines a first mixing coefficient and a plurality of second mixing coefficients to be respectively multiplied by the second subband component;
The mixing unit multiplies the first subband component by the first mixing coefficient, and multiplies the second subband component by the second mixing coefficient, and adds the multiplication result to the baseband signal. A bandwidth expansion apparatus characterized by that.
請求項17または18記載の帯域拡張装置であって、前記入力信号の周波数スペクトルを算出し、前記周波数スペクトルを用いて、前記第1サブ帯域成分にそれぞれ乗ずるべき複数の第1混合係数と前記第2サブ帯域成分にそれぞれ乗ずるべき複数の第2混合係数とを決定する係数決定部をさらに備え、
前記混合部は、前記第1サブ帯域成分にそれぞれ前記第1混合係数を乗算し且つ前記第2サブ帯域成分にそれぞれ前記第2混合係数を乗算して当該乗算結果を前記ベースバンド信号に加算することを特徴とする帯域拡張装置。
19. The band extending apparatus according to claim 17, wherein a frequency spectrum of the input signal is calculated, and a plurality of first mixing coefficients to be multiplied by the first subband component are calculated using the frequency spectrum. A coefficient determining unit that determines a plurality of second mixing coefficients to be multiplied by the two subband components,
The mixing unit multiplies the first subband component by the first mixing coefficient, and multiplies the second subband component by the second mixing coefficient, and adds the multiplication result to the baseband signal. A bandwidth expansion apparatus characterized by that.
入力信号の周波数帯域を拡張する帯域拡張方法であって、
(a)前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するステップと、
(b)前記入力信号から拡張帯域成分を生成するステップと、
(c)前記ベースバンド信号に前記拡張帯域成分を混合するステップと、を備え、
前記ステップ(b)は、
(b−1)前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するステップと、
(b−2)前記反転信号にアップサンプリングを施すステップと、
(b−3)前記ステップ(b−2)でアップサンプリングされた反転信号にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成するステップと、を含むことを特徴とする帯域拡張方法。
A bandwidth expansion method for extending the frequency band of an input signal,
(A) performing upsampling on the input signal and filtering the upsampled signal to generate a baseband signal limited to a predetermined frequency band;
(B) generating an extension band component from the input signal;
(C) mixing the extension band component with the baseband signal,
The step (b)
(B-1) inverting the spectrum of the input signal or a band signal obtained from the input signal to generate an inverted signal;
(B-2) performing upsampling on the inverted signal;
(B-3) A frequency having a low frequency end that is substantially the same as the frequency at the high frequency end of the frequency band of the baseband signal by filtering the inverted signal upsampled in step (b-2). Generating a band component as the extension band component.
入力信号の周波数帯域を拡張する帯域拡張処理をプロセッサに実行させる帯域拡張プログラムであって、
前記帯域拡張処理は、
前記入力信号にアップサンプリングを施し、当該アップサンプリングされた信号にフィルタリングを施すことで所定の周波数帯域に制限されたベースバンド信号を生成するベースバンド処理と、
前記入力信号から拡張帯域成分を生成する拡張帯域処理と、
前記ベースバンド信号に前記拡張帯域成分を混合する混合処理と、を備え、
前記拡張帯域処理は、
前記入力信号または前記入力信号から得られる帯域信号のスペクトルを反転して反転信号を生成するスペクトル反転処理と、
前記反転信号にアップサンプリングを施すアップサンプリング処理と、
前記アップサンプラの出力にフィルタリングを施すことで前記ベースバンド信号の周波数帯域の高域端の周波数と略同一の周波数を低域端とする周波数帯域の成分を前記拡張帯域成分として生成するフィルタ処理と、を含むことを特徴とする帯域拡張プログラム。
A bandwidth extension program for causing a processor to execute a bandwidth extension process for extending a frequency band of an input signal,
The bandwidth extension process includes:
Baseband processing for performing upsampling on the input signal and generating a baseband signal limited to a predetermined frequency band by filtering the upsampled signal;
Extended band processing for generating an extended band component from the input signal;
A mixing process for mixing the baseband signal with the extension band component,
The extended bandwidth processing is
Spectrum inversion processing for generating an inverted signal by inverting the spectrum of the input signal or a band signal obtained from the input signal;
An upsampling process for upsampling the inverted signal;
Filter processing for generating, as the extension band component, a frequency band component having a frequency that is substantially the same as the frequency at the high band edge of the frequency band of the baseband signal by filtering the output of the upsampler. And a bandwidth extension program.
JP2007534478A 2005-09-08 2006-09-01 Bandwidth expansion device, bandwidth expansion method, and bandwidth expansion program Expired - Fee Related JP4627548B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005260541 2005-09-08
JP2005260541 2005-09-08
PCT/JP2006/317795 WO2007029796A1 (en) 2005-09-08 2006-09-01 Band extending device, band extending method, band extending program

Publications (2)

Publication Number Publication Date
JPWO2007029796A1 JPWO2007029796A1 (en) 2009-03-19
JP4627548B2 true JP4627548B2 (en) 2011-02-09

Family

ID=37835911

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007534478A Expired - Fee Related JP4627548B2 (en) 2005-09-08 2006-09-01 Bandwidth expansion device, bandwidth expansion method, and bandwidth expansion program

Country Status (2)

Country Link
JP (1) JP4627548B2 (en)
WO (1) WO2007029796A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012108680A3 (en) * 2011-02-08 2012-11-22 엘지전자 주식회사 Method and device for bandwidth extension

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2209116B8 (en) * 2007-10-23 2014-08-06 Clarion Co., Ltd. Device and method for high-frequency range interpolation of an audio signal
JP5197278B2 (en) * 2008-10-02 2013-05-15 クラリオン株式会社 High range complementer
CN105745706B (en) * 2013-11-29 2019-09-24 索尼公司 Device, methods and procedures for extending bandwidth
JP6401521B2 (en) 2014-07-04 2018-10-10 クラリオン株式会社 Signal processing apparatus and signal processing method
JP6693551B1 (en) * 2018-11-30 2020-05-13 株式会社ソシオネクスト Signal processing device and signal processing method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001521648A (en) * 1997-06-10 2001-11-06 コーディング テクノロジーズ スウェーデン アクチボラゲット Enhanced primitive coding using spectral band duplication
JP2002536679A (en) * 1999-01-27 2002-10-29 コーディング テクノロジーズ スウェーデン アクチボラゲット Method and apparatus for improving performance of source coding system
JP2003256000A (en) * 2001-12-25 2003-09-10 Matsushita Electric Ind Co Ltd Telephone device
JP2003534577A (en) * 2000-05-23 2003-11-18 コーディング テクノロジーズ スウェーデン アクチボラゲット Improved spectral shift / folding in the subband domain

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001521648A (en) * 1997-06-10 2001-11-06 コーディング テクノロジーズ スウェーデン アクチボラゲット Enhanced primitive coding using spectral band duplication
JP2002536679A (en) * 1999-01-27 2002-10-29 コーディング テクノロジーズ スウェーデン アクチボラゲット Method and apparatus for improving performance of source coding system
JP2003534577A (en) * 2000-05-23 2003-11-18 コーディング テクノロジーズ スウェーデン アクチボラゲット Improved spectral shift / folding in the subband domain
JP2003256000A (en) * 2001-12-25 2003-09-10 Matsushita Electric Ind Co Ltd Telephone device

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012108680A3 (en) * 2011-02-08 2012-11-22 엘지전자 주식회사 Method and device for bandwidth extension
CN103460286A (en) * 2011-02-08 2013-12-18 Lg电子株式会社 Method and apparatus for bandwidth extension
CN103460286B (en) * 2011-02-08 2015-07-15 Lg电子株式会社 Method and apparatus for bandwidth extension
US9589568B2 (en) 2011-02-08 2017-03-07 Lg Electronics Inc. Method and device for bandwidth extension

Also Published As

Publication number Publication date
WO2007029796A1 (en) 2007-03-15
JPWO2007029796A1 (en) 2009-03-19

Similar Documents

Publication Publication Date Title
JP4627548B2 (en) Bandwidth expansion device, bandwidth expansion method, and bandwidth expansion program
US8971551B2 (en) Virtual bass synthesis using harmonic transposition
US7587254B2 (en) Dynamic range control and equalization of digital audio using warped processing
JP4423300B2 (en) Noise suppressor
JP5098569B2 (en) Bandwidth expansion playback device
US20070299655A1 (en) Method, Apparatus and Computer Program Product for Providing Low Frequency Expansion of Speech
JP2002504279A (en) Continuous frequency dynamic range audio compressor
EP2209116A1 (en) High range interpolation device and high range interpolation method
US20110137646A1 (en) Noise Suppression Method and Apparatus
WO2003019534A1 (en) Bandwidth extension of a sound signal
US9076437B2 (en) Audio signal processing apparatus
JP4649859B2 (en) Signal processing apparatus and method, recording medium, and program
JPWO2003003345A1 (en) Apparatus and method for interpolating frequency components of a signal
EP2720477B1 (en) Virtual bass synthesis using harmonic transposition
JP4906858B2 (en) Bandwidth expansion apparatus and method
WO2008047793A1 (en) High frequency signal interpolating method and high frequency signal interpolating apparatus
JP4701392B2 (en) High-frequency signal interpolation method and high-frequency signal interpolation device
JP2009223210A (en) Signal band spreading device and signal band spreading method
JP2007272059A (en) Audio signal processing apparatus, audio signal processing method, program and recording medium
JP4661667B2 (en) Audio signal processing apparatus, audio signal processing method, program, and storage medium
US10477314B2 (en) Dynamic audio enhancement using an all-pass filter
JP6903242B2 (en) Frequency band expansion device, frequency band expansion method, and frequency band expansion program
US7312729B2 (en) Universal sampling rate converter in electronic devices and methods
US8301281B2 (en) High-frequency signal interpolation apparatus and high-frequency signal interpolation method
JP5711645B2 (en) Audio signal output apparatus and audio signal output method

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101102

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101105

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131119

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees