JPH08123484A - 信号合成方法および信号合成装置 - Google Patents

信号合成方法および信号合成装置

Info

Publication number
JPH08123484A
JPH08123484A JP6265324A JP26532494A JPH08123484A JP H08123484 A JPH08123484 A JP H08123484A JP 6265324 A JP6265324 A JP 6265324A JP 26532494 A JP26532494 A JP 26532494A JP H08123484 A JPH08123484 A JP H08123484A
Authority
JP
Japan
Prior art keywords
frequency band
signal
wideband
information
spectrum
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP6265324A
Other languages
English (en)
Other versions
JP3189598B2 (ja
Inventor
Yoshihisa Nakato
良久 中藤
Mineo Tsushima
峰生 津島
Takeshi Norimatsu
武志 則松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP26532494A priority Critical patent/JP3189598B2/ja
Publication of JPH08123484A publication Critical patent/JPH08123484A/ja
Application granted granted Critical
Publication of JP3189598B2 publication Critical patent/JP3189598B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

(57)【要約】 【目的】 帯域制限された入力信号を、入力信号の持つ
周波数帯域を包含する広い周波数帯域を有する広帯域信
号に変換することで高音質な信号を合成する信号合成装
置を提供する。 【構成】 帯域制限された入力信号を音響分析してスペ
クトル情報を抽出する音響分析器101と、学習データ
から狭帯域スペクトル情報を抽出する狭帯域データ処理
器102と、学習データから広帯域スペクトル情報を抽
出する広帯域データ処理器103と、狭帯域スペクトル
情報と広帯域スペクトル情報から写像関数を推定する写
像関数推定器104と、入力信号のスペクトル情報を写
像関数で広帯域化して広帯域化スペクトル情報に変換す
る広帯域化器105と、広帯域化スペクトル情報から入
力信号の周波数帯域を包含する広い周波数帯域を有する
広帯域信号を合成する信号合成器106とを備えた構成
を有する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、ある周波数帯域に帯域
制限された入力信号を、入力信号の持つ周波数帯域を包
含するような広い周波数帯域を有する広帯域信号に変換
することで高音質な信号を合成する信号合成方法および
装置に関する。
【0002】
【従来の技術】アナログ電話による通信の大部分は、N
TTの管轄する公衆回線網を通して行われているが、回
線の物理的な制約により300Hzから3.4kHzに
帯域制限されており、300Hz以下の低域部分と3.
4kHz以上の高域部分が失われることによる音質劣化
が起こる。そこで回線はそのままで、アナログ電話音声
のみを高品質化する技術が切望されており、最近この問
題に関する研究が最近始まりつつある。
【0003】例えば、Y.Cheng、D.O'Shaughnessy、P.Me
rmelctein:"Statical Recovery ofWide-band Speech f
rom Narrowband Speech",Proc. ICSLP,pp.1577-1580,
(1992).による方法である。この方法は、狭帯域音声
のスペクトルから広帯域な音声スペクトルを直接的に推
定する方法であるが、処理量が多いため実用化は困難で
あると考えられる。
【0004】また、吉田、阿部:“コードブックマッピ
ングによる狭帯域音声から広帯域音声の復元法”,音響
学会講演論文集,1−8−18,pp.179-180,(1993.3).
がある。この方法は狭帯域音声と広帯域音声のコードブ
ックの対応付けを基本にしており、VQして得られた電
話音声のコードに対する広帯域コードを広帯域コードブ
ックから引き出すことで間接的に広帯域スペクトルを求
め、さらにピッチでLPC合成することにより広帯域音
声を得ているため、ベクトル量子化歪による合成音の劣
化が大きく、また処理量も比較的多い。
【0005】
【発明が解決しようとする課題】上記したように、上述
した高品質化技術のうち、前者の方法では、処理量が大
きいため実用化は困難であると考えられる。また、後者
の方法では、ベクトル量子化歪による合成音の劣化が大
きく、また処理量も比較的多い。
【0006】本発明は、上記の課題を解決するもので、
ある周波数帯域に帯域制限された入力信号を、入力信号
の持つ周波数帯域を包含するような広い周波数帯域を有
する広帯域信号に変換し、合成することにより、通信回
線により帯域制限されたアナログ電話や帯域制限された
携帯電話の帯域を広げ、通話品質を向上させることを可
能にする信号合成方法および装置を提供することを目的
とする。
【0007】また、本発明は、あらかじめ多量の学習用
データから狭帯域スペクトル情報を広帯域スペクトル情
報に変換する写像関数を推定しておき、これにより入力
音声のスペクトル包絡情報を広帯域化スペクトル情報へ
と直接的に変換することにより、高音質な信号が得られ
る、高性能でしかも簡単な構成による信号合成方法およ
び装置を提供することを目的とする。
【0008】
【課題を解決するための手段】上記目的を達成するため
に、本発明の信号合成方法は、特定の周波数帯域に帯域
制限された入力信号を、前記入力信号の周波数帯域を包
含する広い周波数帯域を有する広帯域信号に変換する信
号合成方法であって、あらかじめ多量の学習用データか
ら前記入力信号と同じ周波数帯域の狭帯域信号を作成
し、前記狭帯域信号を音響分析により狭帯域スペクトル
情報を抽出し、また前記多量の学習用データから前記入
力信号の周波数帯域を包含する広い周波数帯域を有する
広帯域信号を作成し、前記広帯域信号を音響分析により
広帯域スペクトル情報を抽出し、前記狭帯域スペクトル
情報と前記広帯域スペクトル情報との関係を写像関数と
して推定しておき、前記入力信号をフレーム毎に音響分
析することにより入力スペクトル情報を抽出し、前記入
力スペクトル情報を前記写像関数により広帯域化した広
帯域化スペクトル情報を算出し、前記算出後の広帯域化
スペクトル情報から前記入力信号の周波数帯域を包含す
る広い周波数帯域を有する広帯域信号を合成することを
特徴とするものである。
【0009】また、上記目的を達成するために、本発明
の信号合成装置は、ある特定の周波数帯域に制限された
入力信号をフレーム毎に音響分析することによりスペク
トル情報を抽出する音響分析器と、あらかじめ多量の学
習用データから前記入力信号と同じ周波数帯域の狭帯域
信号を作成し、前記狭帯域信号を前記音響分析器により
音響分析して狭帯域スペクトル情報を抽出する狭帯域デ
ータ処理器と、また前記多量の学習用データから前記入
力信号の周波数帯域を包含する広い周波数帯域を有する
広帯域信号を作成し、前記広帯域信号を前記音響分析器
により音響分析して広帯域スペクトル情報を抽出する広
帯域データ処理器と、前記狭帯域スペクトル情報と前記
広帯域スペクトル情報との関係を写像関数として推定す
る写像関数推定器と、前記入力信号のスペクトル情報を
前記写像関数推定器で推定した写像関数により広帯域化
した広帯域化スペクトル情報を算出する広帯域化器と、
前記算出後の広帯域化スペクトル情報から前記入力信号
の周波数帯域を包含する広い周波数帯域を有する広帯域
信号を合成する信号合成器を備えたものである。
【0010】
【作用】本発明は、上記した構成により、ある周波数帯
域に帯域制限された入力信号を、入力信号の持つ周波数
帯域を包含する広い周波数帯域を有する広帯域信号に変
換するため、あらかじめ多量の学習用データから狭帯域
スペクトル情報を広帯域スペクトル情報へと変換する写
像関数を推定しておき、これにより入力音声のスペクト
ル包絡情報を広帯域化スペクトル情報へと変換している
ので、高音質な信号が得られ、しかも高性能で簡単な構
成による帯域制限された信号の広帯域化が可能となる。
【0011】
【実施例】携帯電話をはじめとする通信端末の高度化が
進み、その際通話品質の議論が盛んになされている。電
話は多くの人にとって、なくてはならない重要な通信手
段であり、その品質を向上させることは非常に重要な研
究課題である。
【0012】本発明の信号合成方法および装置は、回線
特性のため劣化したアナログ電話音声を広帯域化するこ
とによる高音質化のみならず、ビットレートの制限のた
めに帯域制限されたディジタル信号の広帯域化をも実現
する信号合成方法および信号合成装置である。たとえ
ば、携帯電話をはじめとするディジタル無線電話では、
アナログ電話に比較して0.3〜3.4kHzの電話帯域
音声の品質はある程度保持できるものの、ビットレート
の制限のため3.4kHz以上の高域部分は伝達されな
いという原理的な制約がある。本発明は、この帯域制限
された信号をもとの広帯域な信号に戻すための方法と装
置を提供するものである。以下、帯域制限された音声を
広帯域化する本発明の第1の実施例について説明する。
【0013】図1は本発明の第1の実施例の全体構成を
示すブロック構成図である。図1において、101は信
号をフレーム毎に音響分析してスペクトル情報を抽出す
る音響分析器で、例えばフレーム毎にPSE分析して得
られるケプストラム係数を算出する。また、フレーム毎
にケプストラム分析して得られるケプストラム係数や、
或いはフレーム毎にウェーブレット変換して得られる係
数などを用いても、信号の周波数軸上の特性を表現して
いる特徴量であることには代わりないので、使用しても
何等差し支えない。また、これらの係数を求める方法は
すでに公知であり、例えば、PSE分析に関しては、中
島、鈴木:“パワースペクトル包絡(PSE)音声分析
・合成系”,日本音響学会誌,44巻、11号,pp.824-83
2,(1988)に詳しく記載されており、またケプストラム
分析に関しては、L.R.RabinerとR.W.Schaferの共著、鈴
木久喜訳の、”音声のディジタル信号処理(上)
(下)”、コロナ社、に記載されている。ウェーブレッ
ト変換に関しては、河原:“ウェーブレット解析の聴覚
研究への応用”,日本音響学会誌,47巻、6号,pp.424-
429,(1991)、に記載されている。
【0014】102は、あらかじめ多量の学習用データ
からフィルタ処理により狭帯域信号を作成し、音響分析
器101により狭帯域スペクトル情報を抽出する狭帯域
データ処理器である。ここで言うフィルタ処理とは、広
帯域化しようとしている入力音声が何らかの帯域制限を
受けた際の伝送特性やフィルタ等に相当するフィルタ特
性を学習データに与えるための処理のことである。
【0015】103は、学習用データから理想的なスペ
クトル特性を持つ広帯域スペクトル情報を抽出するため
の広帯域データ処理器である。学習用データとしては例
えば、ある標準話者1名の様々に発声した音声を用いて
もよいし、さらに、複数の話者のデータを用いること
で、話者の発声の変動に強い写像関数を作成する時に有
用である。
【0016】104は、狭帯域スペクトル情報と広帯域
スペクトル情報との関係を写像関数として推定する写像
関数推定器であり、推定する写像関数として、本実施例
では線形写像によるスペクトル変換を行う。さらに、線
形写像以外に2次変換や、ニューラルネットワークなど
の非線形変換を用いても、狭帯域スペクトルから広帯域
スペクトルを直接的に変換している点では同じなので何
等差し支えない。2次変換に関しては、F.Class、A.Kal
tenmeier、P.Regel、and K.Trottler:"Fast speaker a
daptation for speech recognition systems",Proc. IE
EE ICASSP,pp.133-136,(Apr.1990)に記載されてお
り、またニューラルネットワークによる変換は、磯、麻
生、吉田、渡辺:”ニューラルネットワークによる話者
適応”、音響学会講演論文集,1−6−16,(1989.3)
に記載されている。
【0017】次に105は、入力信号のスペクトル情報
を音響分析器101により抽出し、このスペクトル情報
を写像関数で直接的に広帯域化して広帯域化スペクトル
情報に変換する広帯域化器であり、さらに106はこの
広帯域化スペクトル情報から入力信号の周波数帯域を包
含する広い周波数帯域を有する広帯域信号を合成する信
号合成器である。
【0018】以下、本発明の第1の実施例について、図
1のブロック構成図を参照しながら詳細に説明する。こ
こでは音響信号として、音声データを用いる。勿論、音
声以外の音響信号、たとえば音楽や画像信号なども使用
できる。まず、音声が電話回線やあるいは帯域制限フィ
ルタなどを通ってから音響分析器101に入力される
と、音響分析器101ではフレームiでのM次のPSE
ケプストラム係数Ci(M)が抽出される。一定の時間間隔
は、ここでは例えばサンプリング周波数を8KHz(帯
域幅4KHz)としたとき、160点(20ms)であ
り、この時間単位をフレームと呼ぶ。一方、広帯域化後
の広帯域信号では、サンプリング周波数を16KHz
(帯域幅8KHz)として、320点(20ms)とす
れば良い。
【0019】一方、狭帯域データ処理器102では、あ
らかじめ用意した多数の学習用音声データをフィルタ処
理して狭帯域信号を作成する。フィルタとしては、たと
えば電話回線の特性を模擬したものや、ディジタル化の
際に使用する低域通過フィルタ等を模擬したものを使用
する。この処理により、入力音声と学習用音声を同じ環
境で得た共通のデータとして扱うことが可能になる。さ
らにこの狭帯域信号から前述の音響分析器101により
狭帯域スペクトル情報を抽出する。また、広帯域データ
処理器103は前述の多数の学習用データをフィルタ処
理しないで、最も理想的な信号すなわち広帯域信号を作
成し、この広帯域信号から音響分析器101により広帯
域スペクトル情報を抽出する部分である。以上の処理手
順を図2に示す。
【0020】次に、写像関数推定器104では、狭帯域
スペクトル情報と広帯域スペクトル情報との関係を写像
関数として推定する。本実施例では写像関数として線形
写像を用い、狭帯域スペクトル情報から広帯域スペクト
ル情報へスペクトル変換を行う。具体的には、写像関数
{A} の推定には、入力されたスペクトル情報xiの変換
後の広帯域化スペクトル情報ziと目標となる広帯域ス
ペクトル情報yiとの間の差の二乗誤差を最小化するこ
とで推定する。すなわち、全学習データの全フレームに
おける(数1)で与えられる目的関数を最小化すること
で求められる。
【0021】
【数1】
【0022】ただし、{A} はM×M次元のマトリック
スであり、yiとziはM次元のベクトルである。
【0023】この推定で用いる広帯域スペクトル情報と
狭帯域スペクトル情報は同じ学習音声データから求めて
いるので、フレーム毎に完全に一対一に対応づけするこ
とができ、いわゆる話者適応などで用いられる教師あり
の学習よりもさらに強力な対応付けといえる。
【0024】次に105は、iフレーム目の入力信号の
スペクトル情報xi を音響分析器101により抽出し、
写像関数{A}で広帯域化スペクトル情報zi に変換する
広帯域化器である。具体的には、(数2)により変換を
行う。
【0025】
【数2】
【0026】最後に、音声合成器106において、広帯
域化スペクトル情報から広帯域信号をPSE合成により
音声合成する。
【0027】以上のように、本実施例の構成によれば、
比較的簡単な構成で、帯域制限された入力信号を、広い
周波数帯域を有する広帯域信号に正確に変換することが
できる信号合成装置を提供することができる。
【0028】次に、本発明の第2の実施例について説明
する。図3は本実施例の全体構成を示すブロック構成図
である。本実施例は、第1の実施例よりさらに高性能な
装置例である。本実施例が第1の実施例と大きく異なる
部分、すなわち本実施例において最も重要な部分は、入
力信号のスペクトル情報をいくつかの部分空間に選別
し、それぞれ区分化した複数の部分空間毎に直接的に写
像を行う部分であり、より精密なスペクトル写像が実現
できることにある。ここでも写像関数としては、線形写
像、2時変換、あるいはニューラルネットワークなどの
非線形変換のいずれを用いても差し支えない。また、他
のスペクトルの変換方法として、クラスタリング処理に
よりいくつかのコードに離散化された符号帳を用いて、
狭帯域コードから広帯域コードへと写像する方法があ
り、コードの頻度とスペクトルとの重ね合わせを用いる
ことでより正確なスペクトル変換が可能となる方法も考
えられる。本実施例においては、写像関数として線形写
像を用いることにする。
【0029】以下、本発明の第2の実施例について、図
3のブロック構成図を参照しながら詳細に説明する。図
3において、201は信号をフレーム毎に、例えばPS
E分析等をして得られるスペクトル情報を抽出する音響
分析器である。狭帯域データ処理器202および広帯域
データ処理器203の構成は第1の実施例と同様であ
る。204は、狭帯域データ処理器202で得られた狭
帯域スペクトル情報を類似したスペクトルのグループに
クラスタリングし、各グループを代表的に表現するいく
つかの代表コードを持つ狭帯域符号帳を作成する狭帯域
符号帳作成器である。この代表コードにより、スペクト
ル情報をコード数個の部分空間に区分化する。クラスタ
リング方法としては、代表的なものとしてベクトル量子
化法があり、多量のデータ(母集団)の特徴を少ないデ
ータで効率的に表現することが可能となる。
【0030】以下、本実施例ではクラスタリングのアル
ゴリズムとしてベクトル量子化法を用いることとする。
また符号帳を作成する方法としては、LindeらのL
BGアルゴリズム (Y.Linde, A.buzo and R.M.Gray :"
An algorithm for vector quantizer design",IEEE Tra
ns.Commun.,COM-28,1,pp.84-95(Jan.1980))が代表的な
手法としてある。また別のクラスタリング方法として
は、音声をいくつかの音韻毎にグループ分けして、各音
韻毎のスペクトル情報の平均値と標準偏差を求めてお
き、各音韻に対応する写像関数により広帯域化すること
も可能である。この時グループ分けの際に用いる距離尺
度としては、音韻毎の平均値と標準偏差を用いた統計的
距離、たとえばマハラノビス距離や対数尤度などが有効
である。そして、広帯域化の際には、音韻毎の写像関数
により変換を行うことで、各音韻のスペクトル特徴に基
づいた変換が可能となる。このように、音声データ中の
話者の特徴空間(スペクトル空間)を効率的に表現して
いる方法であれば、いかなる手法を用いても差し支えな
い。
【0031】205は、狭帯域データ処理器202で得
られた狭帯域スペクトル情報が狭帯域符号帳中のどの代
表コードに最も近い距離にあるかを判定し、最も近い距
離にある狭帯域スペクトル情報をその代表コードに対す
る狭帯域スペクトル情報とし、これを全学習用データに
亘って行うことで狭帯域スペクトル情報群を作成する狭
帯域データ蓄積器である。実際に、ベクトル量子化によ
り狭帯域スペクトル情報群を作成する際には、まずjフ
レーム目の狭帯域スペクトル情報xjに対するk番目の
コードVk(コード数L)に対する量子化歪 Djkは、
(数3)で計算される。
【0032】
【数3】
【0033】ただし、xj、VkはM次元のベクトル(M
次元の特徴量)である。そして、この歪が最も小さいコ
ードがjフレーム目の狭帯域スペクトル情報に対するコ
ードになる。この狭帯域スペクトル情報とコードとの対
応関係を全ての学習データについて調べ、各コード毎の
狭帯域スペクトル情報群を作成する。さらに206は、
すでに明かな狭帯域スペクトル情報と広帯域スペクトル
情報との時間対応関係から、この狭帯域スペクトル情報
とコードとの対応関係を全ての学習データについて調
べ、各コード毎の広帯域スペクトル情報群を作成する広
帯域データ蓄積器である。
【0034】207は、この狭帯域スペクトル情報群と
広帯域スペクトル情報群とを用いて写像関数を推定する
写像関数推定器である。図4に、写像関数として線形写
像を用いた場合の、写像関数の推定方法を示す。以下、
その具体的な手順を[ステップ1]〜[ステップ5]に
示す。 [ステップ1]学習用音声データから得られた広帯域信
号と狭帯域信号から、それぞれのスペクトル情報を音響
分析器により抽出する。 [ステップ2]LBGアルゴリズムにより、[ステップ
1]で求めた狭帯域スペクトルから狭帯域符号帳を作成
する。ここでは距離尺度としてユークリッド距離を用い
るが、絶対値距離や他の歪尺度など種々考えられ、入力
信号の特徴量が狭帯域符号帳中のどのコードに対応する
かを決定する意味ではどのような距離尺度を用いても差
し支えない。 [ステップ3]狭帯域スペクトル情報を狭帯域符号帳に
よりベクトル量子化して対応するコードを検索し、各コ
ード(各部分空間の代表点)に対応する狭帯域スペクト
ル情報を蓄積し、部分空間毎の狭帯域スペクトル情報群
(クラスタ)を作成する。 [ステップ4]狭帯域スペクトル情報と広帯域スペクト
ル情報の時間対応をとることにより、各コードに対応す
る広帯域スペクトル情報を蓄積し、広帯域スペクトル情
報群を求める。 [ステップ5]各クラスタ毎(部分空間毎)の広帯域ス
ペクトル情報と狭帯域スペクトル情報との組を教師デー
タとして、写像関数を推定する。
【0035】具体的には、例えばk番目のコードに対応
する写像関数{Ak} の推定は、入力信号のスペクトル情
報の変換後のスペクトル情報、すなわち広帯域化スペク
トル情報ziと目標となる広帯域スペクトル情報yiとの
間の差の二乗誤差を最小化することにより推定される。
具体的には、全学習データの全フレームに関する目的関
数、(数4)により求められる。
【0036】
【数4】
【0037】ただし、{Ak} はM×M次元のマトリック
スであり、{yi}と{zi}はM次元のベクトルである。
【0038】この推定で用いる広帯域スペクトル情報と
狭帯域スペクトル情報は同じ学習音声データから求めて
いるので、フレーム毎に完全に一対一に対応づけするこ
とができる。この推定方法は、いわゆる話者適応などで
用いられる教師ありの学習よりもさらに強力な対応付け
といえる。この(数4)を解くと写像関数{Ak} は(数
5)のように与えられる。
【0039】
【数5】
【0040】ただし、Rのs行t列の小行列をRstとする
と、RstとBmはそれぞれ(数6)、(数7)で与えら
れる。
【0041】
【数6】
【0042】
【数7】
【0043】次に208は、入力信号のスペクトル情報
を音響分析器201により抽出し、このスペクトル情報
が狭帯域符号帳中のどの代表コードに最も近い距離にあ
るかを判定するコード判定器である。具体的な処理は、
狭帯域データ蓄積器205の中で行っている、狭帯域ス
ペクトル情報に最も近い狭帯域符号帳中の代表コードを
判定する手続きと同様である。そして209は、コード
判定器208で得られたコードに対応する写像関数で、
入力信号のスペクトル情報を広帯域化する広帯域化器で
ある。具体的には、狭帯域スペクトルxi を広帯域スペ
クトルzi へと変換する方法として、スペクトル空間を
M個の部分空間{Ωk} に分割し、各部分空間毎にあらか
じめ推定しておいた変換行列Ak により線形写像を行
い、更にそれらを(数9)のような重み係数wikで補間
した(数8)により広帯域化を行う。
【0044】
【数8】
【0045】
【数9】
【0046】ここで、部分空間{Ωk}はベクトル量子化
符号帳の代表点{Vk} との最小距離で分類され、またp
は内挿の平滑度を制御するパラメータである。また、上
記の説明でスペクトル空間をM個の代表点でファジィ区
分化したと考えれば、内挿パラメータpはファジネスと
(数10)の関係がある。
【0047】
【数10】
【0048】このように、各部分空間毎の線形写像で変
換したスペクトル情報を重み係数で補間すなわち内挿す
ることで、より精密な変換あるいは広帯域化が行える。
ここで、重み係数で補間せずに、入力信号のスペクトル
情報を最も近い部分空間の写像関数で変換してもよい。
さらに部分空間数が1の場合には、第1の実施例の場合
と全く同じになる。
【0049】210は、この広帯域化スペクトル情報を
用いて入力信号の周波数帯域を包含する広い周波数帯域
を有する広帯域信号をPSE合成により合成する音声合
成器である。
【0050】このように、帯域制限された信号のスペク
トル情報(狭帯域スペクトル)から元の信号のスペクト
ル情報(広帯域スペクトル)を推定することを考えると
き、音声ならば音韻や個人差などに相当する個々のスペ
クトルの持つ特徴を踏まえて、いくつかのグループ毎に
スペクトル変換を施せば、誤差の少ない正確な変換が可
能になると考えられる。
【0051】ここで以下に、本方式におけるスペクトル
情報の広帯域化の手順を示す。 [ステップ1]帯域制限された信号(狭帯域信号)を音
響分析し、スペクトル情報を抽出する。 [ステップ2]入力のスペクトル情報を、あらかじめ求
めておいた狭帯域符号帳によりベクトル量子化し、どの
空間に属すスペクトル情報であるか(対応コード)を求
める。 [ステップ3]学習用音声を用いてあらかじめ作成して
おいた写像関数の中で、[ステップ2]で得られた対応
コードに対応する写像関数により入力スペクトル情報を
変換し、広帯域化スペクトル情報を求める。 [ステップ4]広帯域化スペクトル包絡から合成により
広帯域信号を得る。
【0052】以下に、実際に本実施例によりコンピュー
タシミュレーション実験した結果を示す。写像関数とし
ては、線形写像を用いて実験している。音声データは、
東北大−松下音声データベース中の男性10名と女性1
0名が発声した212単語の単語音声であり、同一話者
内の10〜100番目の100単語をの推定に用い、そ
れ以外の101〜130番目の30単語を評価に用いる
こととする。収録条件としては、防音室で1インチマイ
クロフォンで収録後、80Hzの遮断周波数を持つハイ
パスフィルタと9kHzの遮断周波数を持つローパスフ
ィルターに通した後、サンプリング周波数24kHzで
A/D変換され、12bitに量子化されている。本実
験では、元の音声データベース(24kHzサンプリン
グ)をフィルタリング処理して狭帯域音声(帯域幅0.
3〜3.4kHz、8kHzサンプリング)および広帯
域音声(帯域幅0.05〜7.4kHz、16kHzサン
プリング)をそれぞれ作成して実験に使用している。ま
た、スペクトル情報としては線形予測分析により得られ
る15次のLPCケプストラム係数を用いた。この係数
は、スペクトルの包絡情報を表現している。音声の分析
条件は1−0.98z- 1の固定プリエンファシスを施
し、20msのハミング窓にて10msのフレーム周期
で係数を抽出している。本報告では、分析窓、分析周期
等の条件は狭帯域・広帯域音声とも共通とし、分析次数
等が異なることによる影響をできるだけ排除した。また
入力スペクトル情報が、どの部分空間に属しているかを
判定するために用いる狭帯域符号帳は、LBGアルゴリ
ズムにより求めた。
【0053】最初に、内挿パラメータの値をp=∞、す
なわち内挿を行わないとき(最小距離分類による空間分
割)の部分空間数Mとスペクトル距離との関係を、学習
単語数Nをいろいろ変えて調べた。図5が男性10名の
場合、図6が女性10名の場合の平均スペクトル距離で
あり、それぞれ学習単語数が10、30、50、100
単語の場合を示している。それぞれの図において、横軸
は部分空間数を表し、縦軸は平均スペクトル距離[d
B]を示している。この結果、男女とも同じような傾向
を示しており、部分空間数を増加させるにしたがってス
ペクトル歪は減少し、ある部分空間数において最小値を
取ることが伺える。学習単語数毎の最適な部分空間数
は、N=10、30、50、100のとき、それぞれM
=2、8、8、16となり、本手法の有効性が確認でき
た。結局、N=100、M=16の場合の平均スペクト
ル距離は、男性平均で3.81dB、女性平均で3.59
dBとなり、空間分割しない場合(M=1)と比較して
それぞれ0.62dB、0.47dB向上している。
【0054】次に、学習単語数をN=100として、部
分空間数を固定したときの内挿パラメータの効果を調べ
た。図7は男性10名の、また図8は女性10名の内挿
パラメータと平均スペクトル距離との関係を示したもの
である。それぞれの図において、横軸が内挿パラメータ
の値を、縦軸が平均スペクトル距離を示している。その
結果、各部分空間毎の内挿パラメータの最適値が存在
し、M=2、4、8、16、32のときはそれぞれp=
2.0、2.0、2.0、0.2、0.5となり、内挿しな
い場合(Inf)に比較して約0.1dB程度向上して
いる。結局、N=100、M=16、p=0.2 の場合
に平均スペクトル距離が最小となり、男性平均で3.7
2dB、女性平均で3.49dBとなり、内挿しないと
きと比較してそれぞれ0.09dB、0.10dB向上し
ている。よってスペクトル距離を最小にする条件は、
(N、M、p)=(100、16、0.2) の場合とな
る。
【0055】以上のように、本実施例の構成によれば、
帯域制限された入力信号を広い周波数帯域を有する広帯
域信号に正確に変換することができる信号合成装置を提
供することができる。
【0056】次に、本発明の第3の実施例について説明
する。図9は本実施例の全体構成を示すブロック構成図
である。本実施例には、第1の実施例、第2の実施例と
共通する部分は多いが、本実施例が第1、第2の実施例
と大きく異なる部分は、入力信号のスペクトル情報とし
て、LPC分析(線形予測分析)により得られる情報、
すなわちスペクトル包絡情報と音源情報であり、これら
を別々に広帯域化するところにある。ここでスペクトル
包絡情報としては、例えば線形予測係数、PARCOR
係数、反射係数、LSP係数、LPCケプストラム係
数、LPCメルケプストラム係数等が考えられる。例え
ば線形予測係数、PARCOR係数、反射係数、LPC
ケプストラム係数、LPCメルケプストラム係数などの
特徴量に関しては、L.R.RabinerとR.W.Schaferの共著、
鈴木久喜訳の、”音声のディジタル信号処理(上)
(下)”、コロナ社、に詳しく記載されている。またL
SP係数に関しては、F.K.Soong,B.H.Juang:"Line Spe
ctrum Pair(LSP) and Speech Data Compression",Proc.
ICASSP,84,pp.1.10.1-1.10.4、に記載されている。これ
らは全て音声のスペクトル上の特徴を表現しているの
で、いずれの係数を用いても差し支えない。本実施例で
は、線形予測係数を使用することにする。また音源情報
の表現の方法としては、ピッチやマルチパルス列、音源
符号帳を用いる方法等、種々考えられるが、これらはす
べて音声のLPC分析後に得られる残差波形を非線形表
現したものに相当するので、いずれの情報を用いても差
し支えない。ピッチやマルチパルス列に関しては、古
井:”音響・音声工学”、近代科学社に詳しく記載され
ている。また音源符号帳に関しては、小野:“音声符号
化技術の最近の進展”,日本音響学会誌,48巻、1号,p
p.52-59,(1992)に記載されている。本実施例では以
下、音源情報として音源符号帳を用いる方法を使用する
ことにする。
【0057】以下、本発明の第3の実施例について、図
9のブロック構成図を参照しながら詳細に説明する。図
9において、301は信号をフレーム毎に音声分析して
スペクトル情報として線形予測係数と音源コードを抽出
する音声分析器である。具体的には、伝送路やフィルタ
によって帯域制限された音響信号が入力されると、フレ
ームiにおけるM次の線形予測係数Ai(M)が線形予測分
析により求められる。また音源符号帳は、乱数から発生
させた白色雑音を用いて用意に作成することができる。
【0058】次に、第2の実施例と同様に学習用データ
から音声分析器301を用いて狭帯域スペクトル包絡情
報と狭帯域音源符号帳を抽出し、同様に学習用データか
ら音声分析器301により広帯域スペクトル包絡情報と
広帯域音源符号帳を抽出する。そして、狭帯域スペクト
ル包絡情報から狭帯域包絡符号帳を作成すると同時に、
この狭帯域スペクトル包絡情報と広帯域スペクトル包絡
情報とから包絡写像関数を第2の実施例と同様に推定す
る。本実施例では、狭帯域音源符号帳と広帯域音源符号
帳とから、さらに音源写像関数を推定する。すなわち、
それぞれの符号帳内のコードの時間軸を合わせ込んでお
き、各符号帳内のコードの対応関係をあらかじめ音源写
像関数として求めておくことで、狭帯域音源情報から広
帯域音源情報に変換することが可能になる。
【0059】302は、まず入力信号の音声分析器30
1により得られたスペクトル包絡情報を狭帯域包絡符号
帳でコード化し、どの部分空間に属しているかを判定す
る包絡符号判定器であり、303は、得られたスペクト
ル包絡情報を包絡写像関数を使って広帯域化して広帯域
化スペクトル情報に変換する包絡広帯域化器である。3
02は第2の実施例のコード判定器と、また303は第
2の実施例の広帯域化器と同じ働きをする。
【0060】304は、入力信号の音声分析器301に
より得られた音源情報を狭帯域音源符号帳で符号化する
音源符号判定器であり、305はこのとき得られた狭帯
域音源コードに対応する広帯域音源コードを探索し、こ
のコードから広帯域化音源情報に変換する音源広帯域化
器である。音源コードの探索は、たとえばあらかじめ作
成しておいた狭帯域音源符号帳中の音源コードjと、前
述したM次の線形予測係数を用いて合成したiフレーム
における合成音声をsj(i)とすると、元の音声s(i)
との(数11)のような差の二乗誤差を最小化する音源
コードkを見つけることで、実現できる。
【0061】
【数11】
【0062】そして、この狭帯域音源コードと時間的に
対応する広帯域音源コードを広帯域音源符号帳中から見
つけだすことで、音源の広帯域化が可能になる。
【0063】306は、求めた広帯域化スペクトル包絡
情報と広帯域化音源情報とを用いてLPC合成により、
入力信号の周波数帯域を包含する広い周波数帯域を有す
る広帯域信号を合成する音声合成器である。
【0064】以上のように、本実施例によれば、上記の
構成により帯域制限された入力信号を広い周波数帯域を
有する広帯域信号に正確に変換することができる信号合
成装置を提供することができる。
【0065】次に、本発明の第4の実施例について説明
する。図10は本実施例の全体構成を示すブロック構成
図である。本実施例には、第2の実施例と共通する部分
が多く、共通する部分については、詳しい説明は割愛す
る。本実施例が第2の実施例と大きく異なる部分は、第
2の実施例では線形写像により広帯域化スペクトル情報
を求めていたのに対し、本実施例では広帯域コードの重
みづけ加算により広帯域化スペクトル情報求めている部
分である。具体的には、本実施例では入力信号のスペク
トル情報を狭帯域符号帳を用いてベクトル量子化して狭
帯域コードを求め、このコードに対応する広帯域コード
をあらかじめ作成しておいた頻度テーブルから頻度の大
きい順に検索し、この広帯域コードと頻度との重みづけ
加算を行うことで広帯域化スペクトル包絡情報に変換し
ている。
【0066】以下、本発明の第4の実施例について、図
10のブロック構成図を参照しながら詳細に説明する。
図10において、401は信号をフレーム毎に音響分析
して得られるスペクトル情報を抽出する音声分析器であ
る。402の狭帯域データ処理器および403の広帯域
データ処理器の構成は第2の実施例と同様である。40
4は、狭帯域データ処理器402で得られた狭帯域スペ
クトル情報を類似したスペクトルのグループにクラスタ
リングし、各グループを代表的に表現するいくつかの代
表コードを持つ狭帯域符号帳を作成する狭帯域符号帳作
成器である。
【0067】405は、狭帯域データ処理器402で得
られた狭帯域スペクトル情報が狭帯域符号帳中のどの代
表コードに最も近い距離にあるかを判定し、最も近い距
離にある狭帯域スペクトル情報をその代表コードに対す
る狭帯域スペクトル情報とし、これを全学習用データに
亘って行うことで各コード毎の狭帯域スペクトル情報の
集合すなわち狭帯域スペクトル情報群を作成する狭帯域
データ蓄積器である。さらに406は、この狭帯域スペ
クトル情報とコードとの対応関係を用いて、すでに明か
な狭帯域スペクトル情報と広帯域スペクトル情報との時
間対応関係から、広帯域スペクトル情報とコードとの対
応関係を全ての学習データについて調べ、各コード毎の
広帯域スペクトル情報の集合すなわち広帯域スペクトル
情報群を作成する広帯域データ蓄積器である。いずれ
も、第2の実施例と同様である。
【0068】407は、広帯域スペクトル情報群を用い
て各コード毎の平均広帯域スペクトル情報を算出して広
帯域符号帳を作成し、さらに特定の狭帯域コードに対応
した広帯域コードの数を頻度として算出し、これを全て
の狭帯域コードに対して行い頻度テーブルを作成する頻
度テーブル作成器である。ここで用いる広帯域スペクト
ル情報と狭帯域スペクトル情報は同じ学習音声データか
ら求めているので、フレーム毎に完全に一対一に対応づ
けすることができる。
【0069】408は、入力信号のスペクトル情報を音
声分析器401により抽出し、このスペクトル情報が狭
帯域符号帳中のどのコードに最も近い距離にあるかを判
定するコード判定器である。具体的な処理は、第2の実
施例の狭帯域データ蓄積器205の中で行っている手続
きと同様である。そして409は、コード判定器408
で得られた狭帯域コードに対応する広帯域コードにより
入力信号のスペクトル情報を広帯域化する広帯域化器で
ある。具体的には、iフレームにおける入力信号のスペ
クトル情報xiを狭帯域符号帳{Xk}でベクトル量子化
したときの狭帯域コード番号をmとすると、コード番号
mに対する各広帯域コード毎の頻度H(m,l)、但し(l
=1〜L)を変換テーブルの中から求め、この頻度と広
帯域符号帳{Yl}中の各広帯域コードとの重み付け加
算を(数12)のように行うことで広帯域化スペクトル
iへと変換する。
【0070】
【数12】
【0071】ここで、(数12)において復元時のコー
ド数を符号帳中の全コード数L以下に制限することによ
って、計算量を削減し、必要以上のスペクトルの平滑化
を防ぐことができる。
【0072】410は、求めた広帯域化スペクトル情報
を用いて入力信号の周波数帯域を包含する広い周波数帯
域を有する広帯域信号を合成する音声合成器である。
【0073】以上のように、本実施例によれば、上記の
構成により帯域制限された入力信号を広い周波数帯域を
有する広帯域信号に正確に変換することができる信号合
成装置を提供することができる。
【0074】
【発明の効果】以上の実施例から明らかなように、本発
明によれば、ある特定の周波数帯域に制限された入力信
号を一定フレーム毎に音響分析することによりスペクト
ル情報を抽出し、あらかじめ多量の学習用データから前
記入力信号と同じ周波数帯域の狭帯域信号を作成し、前
記狭帯域信号を音響分析により狭帯域スペクトル情報を
抽出し、また前記多量の学習用データから前記入力信号
の周波数帯域を包含する広い周波数帯域を有する広帯域
信号を作成し、前記広帯域信号を音響分析により広帯域
スペクトル情報を抽出し、前記狭帯域スペクトル情報と
前記広帯域スペクトル情報との関係を写像関数として推
定しておき、前記入力信号のスペクトル情報を前記写像
関数により広帯域化した広帯域化スペクトル情報を算出
し、前記算出後の広帯域化スペクトル情報から前記入力
信号の周波数帯域を包含する広い周波数帯域を有する広
帯域信号を合成するするように構成しているので、比較
的簡単な構成で、帯域制限された入力信号を入力信号の
持つ周波数帯域を包含するような広い周波数帯域を有す
る広帯域信号に正確に変換することができる信号合成方
法および装置を提供することができる。
【図面の簡単な説明】
【図1】本発明の第1の実施例における信号合成装置の
全体構成を示すブロック図
【図2】本発明の第1の実施例における信号合成装置の
狭帯域データ処理器、広帯域データ処理器による処理手
順を説明するための図
【図3】本発明の第2の実施例における信号合成装置の
全体構成を示すブロック図
【図4】本発明の第2の実施例における信号合成装置の
写像関数として線形写像を用いた場合の写像関数の推定
方法を説明するための図
【図5】本発明の実施例において、内挿を行わないとき
の部分空間数Mとスペクトル距離との関係(男性10
名)を示した図
【図6】本発明の実施例において、内挿を行わないとき
の部分空間数Mとスペクトル距離との関係(女性10
名)を示した図
【図7】本発明の実施例において、学習単語数をN=1
00として、部分空間数を固定したときの内挿パラメー
タと平均スペクトル距離との関係(男性10名)を示し
た図
【図8】本発明の実施例において、学習単語数をN=1
00として、部分空間数を固定したときの内挿パラメー
タと平均スペクトル距離との関係(女性10名)を示し
た図
【図9】本発明の第3の実施例における信号合成装置の
全体構成を示すブロック図
【図10】本発明の第4の実施例における信号合成装置
の全体構成を示すブロック図
【符号の説明】
101 音響分析器 102 狭帯域データ処理器 103 広帯域データ処理器 104 写像関数推定器 105 広帯域化器 106 信号合成器

Claims (38)

    【特許請求の範囲】
  1. 【請求項1】特定の周波数帯域に帯域制限された入力信
    号を、前記入力信号の周波数帯域を包含する広い周波数
    帯域を有する広帯域信号に変換する信号合成方法であっ
    て、 あらかじめ多量の学習用データから前記入力信号と同じ
    周波数帯域の狭帯域信号を作成し、前記狭帯域信号を音
    響分析により狭帯域スペクトル情報を抽出し、また前記
    多量の学習用データから前記入力信号の周波数帯域を包
    含する広い周波数帯域を有する広帯域信号を作成し、前
    記広帯域信号を音響分析により広帯域スペクトル情報を
    抽出し、 前記狭帯域スペクトル情報と前記広帯域スペクトル情報
    との関係を写像関数として推定しておき、 前記入力信号をフレーム毎に音響分析することにより入
    力スペクトル情報を抽出し、前記入力スペクトル情報を
    前記写像関数により広帯域化した広帯域化スペクトル情
    報を算出し、 前記算出後の広帯域化スペクトル情報から前記入力信号
    の周波数帯域を包含する広い周波数帯域を有する広帯域
    信号を合成することを特徴とする信号合成方法。
  2. 【請求項2】写像関数を用いて入力信号の周波数帯域を
    包含する周波数帯域を有する広帯域信号を推定する方法
    として、 あらかじめ多量の学習用データから前記入力信号と同じ
    周波数帯域を有する狭帯域スペクトル情報を抽出し、同
    時に前記狭帯域スペクトル情報を類似したスペクトル毎
    にクラスタリングにより適当なグループ毎に分割して、
    前記狭帯域スペクトル情報の各グループを代表的に表現
    するいくつかの代表コードを持つ狭帯域符号帳を作成
    し、 前記狭帯域スペクトル情報が前記狭帯域符号帳中のどの
    代表コードに最も近い距離にあるかを判定し、最も近い
    距離にある狭帯域スペクトル情報をその代表コードに対
    する狭帯域スペクトル情報とし、これを全学習用データ
    に亘って行うことで狭帯域スペクトル情報群として蓄積
    し、 また前記狭帯域スペクトル情報と時間的に対応づけされ
    る広帯域スペクトル情報を前記代表コード毎に選別し、
    これを全学習用データに亘って行うことで広帯域スペク
    トル情報群として蓄積し、 前記狭帯域スペクトル情報群と前記広帯域スペクトル情
    報群を用いて各代表コード毎の写像関数を作成し、 前記入力信号のスペクトル情報を抽出し、前記スペクト
    ル情報が前記狭帯域符号帳中のどの代表コードに最も近
    い距離にあるかを判定し、判定された代表コードに対応
    する写像関数を用いて、前記入力信号のスペクトル情報
    を前記入力信号の周波数帯域を包含する広い周波数帯域
    を有する広帯域化スペクトル情報に変換し、 前記入力信号の周波数帯域を包含する広い周波数帯域を
    有する広帯域信号を合成することを特徴とする請求項1
    記載の信号合成方法。
  3. 【請求項3】写像関数を用いて入力信号の周波数帯域を
    包含する周波数帯域を有する広帯域信号を推定する方法
    として、 あらかじめ多量の学習用データから前記入力信号と同じ
    周波数帯域を有する狭帯域スペクトル情報を抽出し、同
    時に前記狭帯域スペクトル情報を類似したスペクトル毎
    にクラスタリングにより適当なグループ毎に分割して、
    前記狭帯域スペクトル情報の各グループを代表的に表現
    するいくつかの代表コードを持つ狭帯域符号帳を作成
    し、 前記狭帯域スペクトル情報が前記狭帯域符号帳中のどの
    代表コードに最も近い距離にあるかを判定し、最も近い
    距離にある狭帯域スペクトル情報をその代表コードに対
    する狭帯域スペクトル情報とし、これを全学習用データ
    に亘って行うことで狭帯域スペクトル情報群として蓄積
    し、 また前記狭帯域スペクトル情報と時間的に対応づけされ
    る広帯域スペクトル情報を前記代表コード毎に選別し、
    これを全学習用データに亘って行うことで広帯域スペク
    トル情報群として蓄積し、 前記狭帯域スペクトル情報群と前記広帯域スペクトル情
    報群を用いて前記代表コード毎の写像関数を作成し、 前記入力信号のスペクトル情報を抽出し、前記スペクト
    ル情報と前記狭帯域符号帳中の各代表コードとの距離計
    算して得られた距離を計算し、前記入力信号の狭帯域ス
    ペクトル情報を前記狭帯域符号帳中の各代表コードに対
    応する写像関数を用いて前記入力信号の周波数帯域を包
    含する広い周波数帯域を有する広帯域化スペクトル情報
    に変換し、各代表コード毎に得られた前記距離と各代表
    コード毎に得られた前記広帯域化スペクトル情報との重
    みづけ加算により、前記入力信号の周波数帯域を包含す
    る広い周波数帯域を有する広帯域化スペクトル情報に変
    換し、 前記入力信号の周波数帯域を包含する広い周波数帯域を
    有する広帯域信号を合成することを特徴とすることを請
    求項1記載の信号合成方法。
  4. 【請求項4】特定の周波数帯域に帯域制限された入力信
    号を、前記入力信号の周波数帯域を包含する広い周波数
    帯域を有する広帯域信号に変換する信号合成方法であっ
    て、 あらかじめ多量の学習用データからフィルタ処理により
    前記入力信号の周波数帯域と同じ周波数帯域を有する狭
    帯域信号を作成し、前記狭帯域信号からフレーム毎に音
    響分析により狭帯域スペクトル情報を抽出し、また同様
    に前記学習用データからフィルタ処理により前記入力信
    号の周波数帯域を包含する周波数帯域を有する広帯域信
    号を作成し、前記広帯域信号からフレーム毎に音響分析
    して得られる広帯域スペクトル情報を抽出し、 前記狭帯域スペクトル情報から各音韻毎の平均値と、各
    音韻毎の標準偏差とを算出しておき、 前記各音韻毎の平均値と標準偏差とを用い前記狭帯域ス
    ペクトル情報がどの音韻に最も近い距離にあるかを判定
    し、最も近い距離にある狭帯域スペクトル情報をその音
    韻に対する狭帯域スペクトル情報とし、これを全学習用
    データに亘って行うことで狭帯域スペクトル情報群とし
    て蓄積し、 また前記狭帯域スペクトル情報と時間的に対応づけされ
    る前記広帯域スペクトル情報を用いて、各音韻毎の広帯
    域スペクトル情報として選別し、これを全学習用データ
    に亘って行うことで広帯域スペクトル情報群として蓄積
    し、 前記狭帯域スペクトル情報と前記広帯域スペクトル情報
    を用いて各音韻毎の写像関数を推定しておき、 前記入力信号をフレーム毎に音響分析して入力スペクト
    ル情報を抽出し、前記入力スペクトル情報が前記各音韻
    毎の平均値と標準偏差とを用いて、どの音韻であるかを
    判定し、あらかじめ設定しておいた音韻に関してのみ、
    前記音韻の写像関数により前記入力信号の周波数帯域を
    包含する広い周波数帯域を有する広帯域スペクトル情報
    に変換し、 入力信号を広帯域信号に変換することを特徴とする信号
    合成方法。
  5. 【請求項5】入力スペクトル情報を広帯域化スペクトル
    情報に変換する方法として、前記入力スペクトル情報と
    各音韻との距離を前記各音韻毎の平均値と標準偏差とを
    用いて計算し、前記入力信号のスペクトル情報を前記狭
    帯域符号帳中の各音韻に対応する写像関数を用いて前記
    入力信号の周波数帯域を包含する広い周波数帯域を有す
    る広帯域化スペクトル情報に変換し、各音韻毎に得られ
    た前記距離と各音韻毎に得られた前記広帯域化スペクト
    ル情報との重みづけ加算により、前記入力信号の周波数
    帯域を包含する広い周波数帯域を有する広帯域化スペク
    トル情報に変換し、 前記入力信号の周波数帯域を包含する広い周波数帯域を
    有する広帯域信号を合成することを特徴とすることを請
    求項4記載の信号合成方法。
  6. 【請求項6】写像関数を用いて前記入力信号の周波数帯
    域を包含する周波数帯域を有する広帯域信号を推定する
    方法として、 あらかじめ多量の学習用データから前記入力信号と同じ
    周波数帯域の狭帯域信号を作成し、前記狭帯域信号を音
    響分析して得られる狭帯域スペクトル情報をベクトル量
    子化して狭帯域符号帳を作成し、同様に前記多量の学習
    用データから前記入力信号の周波数帯域を包含する広帯
    域信号の広帯域スペクトル情報をベクトル量子化して広
    帯域符号帳を作成し、 前記学習用データから得た狭帯域スペクトル情報を前記
    狭帯域符号帳でベクトル量子化して得られる狭帯域コー
    ド列を作成し、一方前記学習用データから得た広帯域ス
    ペクトル情報を前記広帯域符号帳でベクトル量子化して
    広帯域コード列を作成し、前記狭帯域コード列と前記広
    帯域コード列との時間対応から、各コード同士の対応の
    頻度を示した頻度テーブルを作成しておき、 前記入力信号を音響分析して得られるスペクトル情報を
    前記狭帯域符号帳を用いてベクトル量子化したときの狭
    帯域コードに対応する広帯域コードを前記頻度テーブル
    から頻度の高いものから順に検索し、前記広帯域コード
    の表す広帯域スペクトル情報と前記頻度テーブルで与え
    られる頻度との重みづけ加算により、前記入力信号の周
    波数帯域を包含する広い周波数帯域を有する広帯域化ス
    ペクトル情報に変換し、 前記入力信号の周波数帯域を包含する広い周波数帯域を
    有する広帯域信号を合成することを特徴とする請求項1
    記載の信号合成方法。
  7. 【請求項7】特定の周波数帯域に帯域制限された入力信
    号と、前記入力信号から推定した前記入力信号の周波数
    帯域を包含する広い周波数帯域を有する広帯域信号を、
    周波数軸上あるいは時間軸上で重畳することにより高品
    質の広帯域信号を得ることを特徴とする請求項1、請求
    項2、請求項3、請求項4、請求項6のいずれかに記載
    の信号合成方法。
  8. 【請求項8】特定の周波数帯域に帯域制限された入力信
    号を前記入力信号の周波数帯域を包含する広い周波数帯
    域に変換する方法として、前記入力信号の周波数帯域以
    外の周波数帯域に関してのみ推定を行い、前記入力信号
    の周波数帯域外の周波数帯域を有する帯域外信号を求
    め、前記入力信号と前記帯域外信号とを周波数軸上ある
    いは時間軸上で重畳することにより高品質の広帯域信号
    を得ることを特徴とする請求項1、請求項2、請求項
    3、請求項4、請求項6のいずれかに記載の信号合成方
    法。
  9. 【請求項9】入力信号として音声信号を用いることを特
    徴とする請求項1、請求項2、請求項3、請求項4、請
    求項6のいずれかに記載の信号合成方法。
  10. 【請求項10】写像関数として線形写像を用いることを
    特徴とする請求項1、請求項2、請求項3、請求項4、
    請求項6のいずれかに記載の信号合成方法。
  11. 【請求項11】写像関数として2次変換を用いることを
    特徴とする請求項1、請求項2、請求項3、請求項4、
    請求項6のいずれかに記載の信号合成方法。
  12. 【請求項12】写像関数としてニューラルネットワーク
    を含む非線形写像を用いることを特徴とする請求項1、
    請求項2、請求項3、請求項4、請求項6のいずれかに
    記載の信号合成方法。
  13. 【請求項13】クラスタリングする方法としてベクトル
    量子化を用いることを特徴とする請求項2または請求項
    3記載の信号合成方法。
  14. 【請求項14】スペクトル情報として信号をフレーム毎
    に音響分析することにより得られるスペクトル包絡情報
    と音源情報を用いることを特徴とする請求項1、請求項
    2、請求項3、請求項4、請求項6のいずれかに記載の
    信号合成方法。
  15. 【請求項15】信号から得られるスペクトル情報とし
    て、フレーム毎にPSE分析して得られるケプストラム
    係数を用いることで前記入力信号の周波数帯域を包含す
    る広い周波数帯域を有する広帯域信号を得ることを特徴
    とする請求項1、請求項2、請求項3、請求項4、請求
    項6のいずれかに記載の信号合成方法。
  16. 【請求項16】信号から得られるスペクトル情報とし
    て、フレーム毎にケプストラム分析して得られるケプス
    トラム係数を用いることで前記入力信号の周波数帯域を
    包含する広い周波数帯域を有する広帯域信号を得ること
    を特徴とする請求項1、請求項2、請求項3、請求項
    4、請求項6のいずれかに記載の信号合成方法。
  17. 【請求項17】信号から得られるスペクトル情報とし
    て、フレーム毎にウェーブレット変換して得られる特徴
    量を用いることで前記入力信号の周波数帯域を包含する
    広い周波数帯域を有する広帯域信号を得ることを特徴と
    する請求項1、請求項2、請求項3、請求項4、請求項
    6のいずれかに記載の信号合成方法。
  18. 【請求項18】特定の周波数帯域に帯域制限された入力
    信号を、前記入力信号の周波数帯域を包含する広い周波
    数帯域を有する広帯域信号に変換する信号合成装置にお
    いて、特定の周波数帯域に制限された入力信号をフレー
    ム毎に音響分析することによりスペクトル情報を抽出す
    る音響分析器と、あらかじめ多量の学習用データから前
    記入力信号と同じ周波数帯域の狭帯域信号を作成し、前
    記狭帯域信号を前記音響分析器により音響分析して狭帯
    域スペクトル情報を抽出する狭帯域データ処理器と、ま
    た前記多量の学習用データから前記入力信号の周波数帯
    域を包含する広い周波数帯域を有する広帯域信号を作成
    し、前記広帯域信号を前記音響分析器により音響分析し
    て広帯域スペクトル情報を抽出する広帯域データ処理器
    と、前記狭帯域スペクトル情報と前記広帯域スペクトル
    情報との関係を写像関数として推定する写像関数推定器
    と、前記入力信号のスペクトル情報を前記写像関数推定
    器で推定した写像関数により広帯域化した広帯域化スペ
    クトル情報を算出する広帯域化器と、前記算出後の広帯
    域化スペクトル情報から前記入力信号の周波数帯域を包
    含する広い周波数帯域を有する広帯域信号を合成する信
    号合成器を備えたことを特徴とする信号合成装置。
  19. 【請求項19】特定の周波数帯域に帯域制限された入力
    信号を、前記入力信号の周波数帯域を包含する広い周波
    数帯域を有する広帯域信号に変換する信号合成装置にお
    いて、特定の周波数帯域に制限された入力信号をフレー
    ム毎に音響分析することによりスペクトル包絡情報と音
    源情報を抽出する音響分析器と、あらかじめ多量の学習
    用データから前記入力信号と同じ周波数帯域の狭帯域信
    号を作成し、前記狭帯域信号を前記音響分析器により音
    響分析して狭帯域スペクトル包絡情報と狭帯域音源情報
    を抽出する狭帯域データ処理器と、また前記多量の学習
    用データから前記入力信号の周波数帯域を包含する広い
    周波数帯域を有する広帯域信号を作成し、前記広帯域信
    号を前記音響分析器により音響分析して広帯域スペクト
    ル包絡情報と広帯域音源情報を抽出する広帯域データ処
    理器と、前記狭帯域スペクトル包絡情報と前記広帯域ス
    ペクトル包絡情報との関係を包絡写像関数として推定す
    る包絡写像関数推定器と、前記狭帯域音源情報と前記広
    帯域音源情報との関係を音源写像関数として推定する音
    源写像関数推定器と、前記入力信号のスペクトル包絡情
    報を包絡写像関数推定器で推定した包絡写像関数により
    広帯域化した広帯域化スペクトル包絡情報を算出する包
    絡広帯域化器と、前記入力信号の音源情報を前記音源写
    像関数推定器で推定した音源写像関数により広帯域化し
    た広帯域化音源情報を算出する音源広帯域化器と、前記
    算出後の広帯域化スペクトル包絡情報と広帯域化音源情
    報から前記入力信号の周波数帯域を包含する広い周波数
    帯域を有する広帯域信号を合成する信号合成器を備えた
    ことを特徴とする信号合成装置。
  20. 【請求項20】特定の周波数帯域に帯域制限された入力
    音声を、前記入力音声の周波数帯域を包含する広い周波
    数帯域を有する広帯域音声に変換する信号合成装置にお
    いて、特定の周波数帯域に制限された入力音声をフレー
    ム毎に音声分析することによりスペクトル包絡情報と音
    源情報を抽出する音声分析器と、あらかじめ多量の学習
    用音声データから前記入力音声と同じ周波数帯域の狭帯
    域音声を作成し、前記狭帯域音声を前記音声分析器によ
    り音声分析して狭帯域スペクトル包絡情報と狭帯域音源
    情報を抽出する狭帯域データ処理器と、また前記多量の
    学習用音声データから前記入力音声の周波数帯域を包含
    する広い周波数帯域を有する広帯域音声を作成し、前記
    広帯域音声を前記音声分析器により音響分析して広帯域
    スペクトル包絡情報と広帯域音源情報を抽出する広帯域
    データ処理器と、前記狭帯域スペクトル包絡情報と前記
    広帯域スペクトル包絡情報との関係をスペクトル包絡写
    像関数として推定する包絡写像関数推定器と、前記狭帯
    域音源情報と前記広帯域音源情報との関係を音源写像関
    数として推定する音源写像関数推定器と、前記入力音声
    のスペクトル包絡情報を包絡写像関数推定器で推定した
    包絡写像関数により広帯域化した広帯域化スペクトル包
    絡情報を算出する包絡広帯域化器と、前記入力音声の音
    源情報を前記音源写像関数推定器で推定した音源写像関
    数により広帯域化した広帯域化音源情報を算出する音源
    広帯域化器と、前記算出後の広帯域化スペクトル包絡情
    報と広帯域化音源情報から前記入力音声の周波数帯域を
    包含する広い周波数帯域を有する広帯域音声を合成する
    音声合成器を備えたことを特徴とする信号合成装置。
  21. 【請求項21】特定の周波数帯域に制限された入力音声
    を音声分析して得たスペクトル包絡情報から前記入力音
    声の周波数帯域を包含する広い周波数帯域を有する広帯
    域なスペクトル包絡情報を推定する方法として、あらか
    じめ多量の学習用音声データから前記入力音声と同じ周
    波数帯域を有する狭帯域スペクトル包絡情報を抽出する
    狭帯域データ処理器と、前記多量の学習用音声データか
    ら前記入力音声の周波数帯域を包含する広い周波数帯域
    を有する広帯域スペクトル包絡情報を抽出する広帯域デ
    ータ処理器と、前記狭帯域スペクトル包絡情報を類似し
    たスペクトル包絡毎にクラスタリングして適当なグルー
    プ毎に分割し、前記狭帯域スペクトル包絡情報を代表的
    に表現するいくつかの代表コードを持つ狭帯域符号帳を
    作成する狭帯域符号帳作成器と、前記狭帯域スペクトル
    包絡情報が前記狭帯域符号帳中のどの代表コードに最も
    近い距離にあるかを判定し、それぞれの代表コードに対
    して最も近い距離にある狭帯域スペクトル包絡情報を各
    代表コード毎に全学習用データに亘って蓄積し、狭帯域
    スペクトル包絡情報群を作成する狭帯域データ蓄積器
    と、また前記狭帯域スペクトル包絡情報群中の狭帯域ス
    ペクトル包絡情報と時間的に対応づけされる広帯域スペ
    クトル包絡情報を各代表コード毎に全学習用データに亘
    って蓄積し、広帯域スペクトル包絡情報群を作成する広
    帯域データ蓄積器と、前記狭帯域スペクトル包絡情報群
    と前記広帯域スペクトル包絡情報群とを用いて各代表コ
    ード毎の写像関数を推定する写像関数推定器と、前記入
    力音声のスペクトル包絡情報が前記狭帯域符号帳中のど
    の代表コードに最も近い距離にあるかを判定するコード
    判定器と、前記入力音声のスペクトル包絡情報が最も近
    い距離にあると判定された代表コードに対応する写像関
    数を用いて、前記入力音声のスペクトル包絡情報を前記
    入力音声の周波数帯域を包含する広い周波数帯域を有す
    る広帯域化スペクトル包絡情報に変換する包絡広帯域化
    器とを備えたことを特徴とする請求項20記載の信号合
    成装置。
  22. 【請求項22】特定の周波数帯域に制限された入力音声
    を音響分析して得たスペクトル包絡情報から前記入力音
    声の周波数帯域を包含する広い周波数帯域を有する広帯
    域なスペクトル包絡情報を推定する方法として、あらか
    じめ多量の学習用音声データから前記入力音声と同じ周
    波数帯域を有する狭帯域スペクトル包絡情報を抽出する
    狭帯域データ処理器と、前記多量の学習用音声データか
    ら前記入力音声の周波数帯域を包含する広い周波数帯域
    を有する広帯域スペクトル包絡情報を抽出する広帯域デ
    ータ処理器と、前記狭帯域スペクトル包絡情報を類似し
    たスペクトル包絡毎にクラスタリングして適当なグルー
    プ毎に分割し、前記狭帯域スペクトル包絡情報を代表的
    に表現するいくつかの代表コードを持つ狭帯域符号帳を
    作成する狭帯域符号帳作成器と、前記狭帯域スペクトル
    包絡情報が前記狭帯域符号帳中のどの代表コードに最も
    近い距離にあるかを判定するコード判定器と、前記コー
    ド判定器においてそれぞれの代表コードに対して最も近
    い距離にある狭帯域スペクトル包絡情報を各代表コード
    毎に全学習用データに亘って蓄積し、狭帯域スペクトル
    包絡情報群を作成する狭帯域データ蓄積器と、また前記
    狭帯域スペクトル包絡情報群中の狭帯域スペクトル包絡
    情報と時間的に対応づけされる広帯域スペクトル包絡情
    報を各代表コード毎に全学習用データに亘って蓄積し、
    広帯域スペクトル包絡情報群を作成する広帯域データ蓄
    積器と、前記広帯域データ蓄積器により得られた前記狭
    帯域スペクトル包絡情報群と前記広帯域スペクトル包絡
    情報群とを用いて各代表コード毎の写像関数を推定する
    写像関数推定器と、前記入力音声のスペクトル包絡情報
    と前記狭帯域符号帳中の各代表コードとの距離を計算し
    て距離値を計算する距離計算器と、前記入力音声のスペ
    クトル包絡情報を前記狭帯域符号帳中の各代表コードに
    対応する写像関数を用いて前記入力音声の周波数帯域を
    包含する広い周波数帯域を有する広帯域化スペクトル包
    絡情報に変換する包絡広帯域化器と、さらに各代表コー
    ド毎に前記距離計算器により得られた前記距離値と各代
    表コード毎に前記包絡広帯域化器により得られた前記広
    帯域化スペクトル包絡情報との重みづけ加算により広帯
    域化スペクトル包絡情報に変換する重みづけ加算器とを
    備えたことを特徴とする請求項20記載の信号合成装
    置。
  23. 【請求項23】特定の周波数帯域に帯域制限された入力
    音声を、前記入力音声の周波数帯域を包含する広い周波
    数帯域を有する広帯域音声に変換する信号合成装置にお
    いて、あらかじめ多量の学習用データからフィルタ処理
    により前記入力音声の周波数帯域と同じ周波数帯域を有
    する狭帯域音声を作成し、前記狭帯域音声からフレーム
    毎に音声分析により狭帯域スペクトル包絡情報を抽出す
    る狭帯域データ処理器と、同様に前記学習用データから
    フィルタ処理により前記入力信号の周波数帯域を包含す
    る周波数帯域を有する広帯域信号を作成し、前記広帯域
    信号からフレーム毎に音声分析して得られる広帯域スペ
    クトル包絡情報を抽出する広帯域データ処理器と、前記
    狭帯域スペクトル包絡情報から各音韻毎の平均値と、各
    音韻毎の標準偏差とを算出する音韻標準パターン作成器
    と、前記各音韻毎の平均値と標準偏差とを用い前記狭帯
    域スペクトル情報がどの音韻に最も近い距離にあるかを
    判定し、最も近い距離にある狭帯域スペクトル情報をそ
    の音韻に対する狭帯域スペクトル情報とし、これを全学
    習用データに亘って選別し、狭帯域スペクトル情報群と
    して蓄積する狭帯域データ蓄積器と、また前記狭帯域ス
    ペクトル情報と時間的に対応づけされる前記広帯域スペ
    クトル情報を用いて、各音韻毎の広帯域スペクトル情報
    を選別し、これを全学習用データに亘って行うことで広
    帯域スペクトル情報群として蓄積する広帯域データ蓄積
    器と、前記狭帯域スペクトル情報群と前記広帯域スペク
    トル情報群を用いて各音韻毎の写像関数を推定する写像
    関数推定器と、前記入力信号をフレーム毎に音声分析し
    て入力スペクトル包絡情報を抽出し、前記各音韻毎の平
    均値と標準偏差とを用いて、前記入力スペクトル情報と
    前記各音韻との距離を計算する距離計算器と、さらに前
    記入力信号のスペクトル情報を各音韻に対応する写像関
    数を用いて前記入力信号の周波数帯域を包含する広い周
    波数帯域を有する広帯域化スペクトル情報に変換し、各
    音韻毎に得られた前記距離と各音韻毎に得られた前記広
    帯域化スペクトル情報との重みづけ加算により、前記入
    力信号の周波数帯域を包含する広い周波数帯域を有する
    広帯域化スペクトル情報に変換する広帯域化器と、前記
    広帯域化スペクトル情報を用いて前記入力信号の周波数
    帯域を包含する広い周波数帯域を有する広帯域信号を合
    成することを特徴とする請求項20記載の信号合成装
    置。
  24. 【請求項24】写像関数として線形写像を用いることを
    特徴とする請求項20、請求項21、請求項22、請求
    項23のいずれかに記載の信号合成装置。
  25. 【請求項25】写像関数として2次変換を用いることを
    特徴とする請求項20、請求項21、請求項22、請求
    項23のいずれかに記載の信号合成装置。
  26. 【請求項26】写像関数としてニューラルネットワーク
    を含む非線形変換を用いることを特徴とする請求項2
    0、請求項21、請求項22、請求項23のいずれかに
    記載の信号合成装置。
  27. 【請求項27】写像関数としてコードブック写像を用い
    ることを特徴とする請求項20、請求項21、請求項2
    2、請求項23のいずれかに記載の信号合成装置。
  28. 【請求項28】特定の周波数帯域に制限された入力音声
    を音声分析して得たスペクトル包絡情報から前記入力音
    声の周波数帯域を包含する広い周波数帯域を有する広帯
    域なスペクトル包絡情報を推定する方法として、あらか
    じめ多量の学習用音声データから前記入力音声と同じ周
    波数帯域を有する狭帯域スペクトル包絡情報を抽出する
    狭帯域データ処理器と、前記多量の学習用音声データか
    ら前記入力音声の周波数帯域を包含する広い周波数帯域
    を有する広帯域スペクトル包絡情報を抽出する広帯域デ
    ータ処理器と、前記狭帯域データ処理器から得られる狭
    帯域スペクトル包絡情報をベクトル量子化して狭帯域符
    号帳を作成する狭帯域符号帳作成器と、同様に前記広帯
    域データ処理器から得られる前記広帯域スペクトル包絡
    情報をベクトル量子化して広帯域符号帳を作成する広帯
    域符号帳作成器と、前記学習用音声データから同一時刻
    に得られた狭帯域スペクトル包絡情報と広帯域スペクト
    ル包絡情報とをそれぞれ前記狭帯域符号帳と前記広帯域
    符号帳とでベクトル量子化して狭帯域コードおよび広帯
    域コードを求めるベクトル量子化器と、前記狭帯域コー
    ドおよび広帯域コードの対応頻度を全学習音声データに
    ついて抽出し、各符号同士の対応の頻度を示した頻度テ
    ーブルを作成する頻度テーブル作成器と、前記入力音声
    のスペクトル包絡情報を前記狭帯域符号帳を用いてベク
    トル量子化したときのコードに対応する広帯域コードを
    前記頻度テーブルから頻度の高いものから順に検索する
    コード検索器と、前記広帯域コードの持つスペクトル包
    絡情報と前記頻度テーブルで与えられる頻度との重みづ
    け加算を頻度の高いものから適当な個数分行い、広帯域
    化スペクトル包絡情報を回復する重みづけ加算器とを備
    えたことを特徴とする請求項20記載の信号合成装置。
  29. 【請求項29】特定の周波数帯域に帯域制限された入力
    音声と、前記入力音声から推定した前記入力音声の周波
    数帯域を包含する広い周波数帯域を有する広帯域音声
    を、周波数軸上あるいは時間軸上で重畳することにより
    高品質の広帯域音声を得ることを特徴とする請求項2
    0、請求項21、請求項22、請求項23、請求項28
    のいずれかに記載の信号合成装置。
  30. 【請求項30】特定の周波数帯域に帯域制限された入力
    音声を前記入力音声の周波数帯域を包含する広い周波数
    帯域に変換する方法として、前記入力音声の周波数帯域
    以外の周波数帯域に関してのみ推定を行い、前記入力音
    声と前記帯域外音声とを周波数軸上あるいは時間軸上で
    重畳することにより高品質の広帯域音声を得ることを特
    徴とする請求項20、請求項21、請求項22、請求項
    23、請求項28のいずれかに記載の信号合成装置。
  31. 【請求項31】スペクトル包絡情報として、フレーム毎
    にLPC分析することで得られる線形予測係数を用いる
    ことで入力信号の周波数帯域を包含する広い周波数帯域
    を有する広帯域音声を得ることを特徴とする請求項2
    0、請求項21、請求項22、請求項23、請求項28
    のいずれかに記載の信号合成装置。
  32. 【請求項32】スペクトル包絡情報として、フレーム毎
    にLPC分析することで得られるPARCOR係数を用
    いることで前記入力信号の周波数帯域を包含する広い周
    波数帯域を有する広帯域音声を得ることを特徴とする請
    求項20、請求項21、請求項22、請求項23、請求
    項28のいずれかに記載の信号合成装置。
  33. 【請求項33】スペクトル包絡情報として、フレーム毎
    にLPC分析して得られるLSP係数を用いることで前
    記入力信号の周波数帯域を包含する広い周波数帯域を有
    する広帯域音声を得ることを特徴とする請求項20、請
    求項21、請求項22、請求項23、請求項28のいず
    れかに記載の信号合成装置。
  34. 【請求項34】特定の周波数帯域に制限された入力信号
    から得られる音源情報を非線形に歪ませる非線形変換器
    と、前記入力信号の音源情報を前記入力信号の周波数帯
    域を包含する広い周波数帯域を有する広帯域音源情報へ
    変換する音源広帯域化器とを備えたことを特徴とする請
    求項19または請求項20記載の信号合成装置。
  35. 【請求項35】入力信号を前記入力信号の周波数帯域を
    包含する広い周波数帯域を有する広帯域信号へと変換す
    るため、音源情報を非線形に歪ませて変換する方法とし
    て、あらかじめ多量の学習用データから前記入力信号の
    周波数帯域と同じ周波数帯域を有する狭帯域音声から狭
    帯域音源情報を抽出する狭帯域音源抽出器と、前記入力
    信号の周波数帯域を包含する広い周波数帯域を有する広
    帯域音声から広帯域音源情報を抽出する広帯域音源抽出
    器と、前記狭帯域音源情報を代表的に表現するいくつか
    の狭帯域音源コードを求める狭帯域音源符号帳作成器
    と、前記広帯域音源情報を代表的に表現するいくつかの
    広帯域音源コードを求める広帯域音源符号帳作成器と、
    前記狭帯域音源コードと前記広帯域音源コードとの対応
    関係を音源写像関数としてあらかじめ学習させる音源写
    像関数推定器と、前記入力信号から抽出した音源情報を
    前記狭帯域音源符号帳で量子化し、得られたコード番号
    から前記音源写像関数を用いて広帯域音源符号帳の中か
    ら広帯域音源コードを検索する音源コード検索器と、前
    記広帯域音源コードにより前記入力信号の周波数帯域を
    包含する広い周波数帯域を有する広帯域化音源情報へと
    変換する音源広帯域化器を備えたことを特徴とする請求
    項19または請求項20記載の信号合成装置。
  36. 【請求項36】音源写像関数としてコードブック写像を
    用いることを特徴とする請求項35記載の信号合成装
    置。
  37. 【請求項37】特定の周波数帯域に制限された入力信号
    から得られる音源情報として、フレーム毎のピッチおよ
    びパワーを用い、前記ピッチおよび前記パワーを抽出す
    るピッチ抽出器およびパワー算出器を有し、前記入力信
    号の音源情報を前記入力信号の周波数帯域を包含する広
    い周波数帯域を有する広帯域音源情報へ変換する音声こ
    とを特徴とする請求項19、請求項20、請求項34、
    請求項35のいずれかに記載の信号合成装置。
  38. 【請求項38】入力信号を前記入力信号の周波数帯域を
    包含する広い周波数帯域を有する広帯域信号へと変換す
    るため、音源情報を非線形に歪ませて変換する方法とし
    て、前記音源情報から得られたマルチパルス列を用いる
    信号合成装置であって、あらかじめ多量の学習用データ
    から前記入力信号の周波数帯域と同じ周波数帯域を有す
    る狭帯域音声から狭帯域マルチパルス列を抽出する狭帯
    域音源抽出器と、前記入力信号の周波数帯域を包含する
    広い周波数帯域を有する広帯域音声から広帯域マルチパ
    ルス列を抽出する広帯域音源抽出器と、前記狭帯域マル
    チパルス列と前記広帯域マルチパルス列との対応関係を
    音源写像関数としてあらかじめ学習させる音源写像関数
    推定器と、前記入力信号から抽出したマルチパルス列を
    前記音源写像関数を用いて広帯域マルチパルス列に変換
    するパルス列変換器と、前記パルス列変換器で得られた
    前記広帯域マルチパルス列を用いて、入力信号の周波数
    帯域を包含する広い周波数帯域を有する広帯域音声を合
    成する音声合成器を備えたことを特徴とする請求項1
    9、請求項20、請求項34、請求項35のいずれかに
    記載の信号合成装置。
JP26532494A 1994-10-28 1994-10-28 信号合成方法および信号合成装置 Expired - Lifetime JP3189598B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP26532494A JP3189598B2 (ja) 1994-10-28 1994-10-28 信号合成方法および信号合成装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP26532494A JP3189598B2 (ja) 1994-10-28 1994-10-28 信号合成方法および信号合成装置

Publications (2)

Publication Number Publication Date
JPH08123484A true JPH08123484A (ja) 1996-05-17
JP3189598B2 JP3189598B2 (ja) 2001-07-16

Family

ID=17415612

Family Applications (1)

Application Number Title Priority Date Filing Date
JP26532494A Expired - Lifetime JP3189598B2 (ja) 1994-10-28 1994-10-28 信号合成方法および信号合成装置

Country Status (1)

Country Link
JP (1) JP3189598B2 (ja)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002508526A (ja) * 1998-03-25 2002-03-19 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー 狭帯域言語信号からの広帯域言語合成
JP2002140078A (ja) * 2000-10-31 2002-05-17 Sony Corp 情報処理装置および情報処理方法、プログラム記録媒体、並びにデータ記録媒体
WO2004025625A1 (ja) * 2002-09-12 2004-03-25 Sony Corporation 信号処理システム、信号処理装置および方法、記録媒体、並びにプログラム
JP2006087082A (ja) * 2004-09-17 2006-03-30 Microsoft Corp 多感覚音声強調のための方法および装置
KR100574031B1 (ko) * 1997-10-23 2006-12-01 소니 가부시끼 가이샤 음성합성방법및장치그리고음성대역확장방법및장치
JP2007328268A (ja) * 2006-06-09 2007-12-20 Kddi Corp 音楽信号の帯域拡張方式
KR100865860B1 (ko) * 2000-11-09 2008-10-29 코닌클리케 필립스 일렉트로닉스 엔.브이. 보다 높은 지각의 품질을 위한 전화 음성의 광대역 확장
JP2010079275A (ja) * 2008-08-29 2010-04-08 Sony Corp 周波数帯域拡大装置及び方法、符号化装置及び方法、復号化装置及び方法、並びにプログラム
WO2012050023A1 (ja) * 2010-10-15 2012-04-19 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
WO2014017315A1 (ja) * 2012-07-27 2014-01-30 ソニー株式会社 周波数帯域拡大装置および方法、並びにプログラム
US8706497B2 (en) 2009-12-28 2014-04-22 Mitsubishi Electric Corporation Speech signal restoration device and speech signal restoration method
KR101468560B1 (ko) * 2013-12-16 2014-12-04 국방과학연구소 마할라노비스 거리 기반 레이더 신호에 대한 이상치 펄스 탐지 방법
JP2016048391A (ja) * 2010-04-13 2016-04-07 ソニー株式会社 信号処理装置および方法、並びにプログラム
US9679580B2 (en) 2010-04-13 2017-06-13 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
US9691410B2 (en) 2009-10-07 2017-06-27 Sony Corporation Frequency band extending device and method, encoding device and method, decoding device and method, and program
US9875746B2 (en) 2013-09-19 2018-01-23 Sony Corporation Encoding device and method, decoding device and method, and program
JP2019008206A (ja) * 2017-06-27 2019-01-17 日本放送協会 音声帯域拡張装置、音声帯域拡張統計モデル学習装置およびそれらのプログラム
US10692511B2 (en) 2013-12-27 2020-06-23 Sony Corporation Decoding apparatus and method, and program
WO2021090465A1 (ja) * 2019-11-08 2021-05-14 日本電信電話株式会社 帯域拡張装置、帯域拡張方法、およびプログラム
CN114882867A (zh) * 2022-04-13 2022-08-09 天津大学 基于滤波器组频率区分的深度网络波形合成方法及装置

Cited By (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100574031B1 (ko) * 1997-10-23 2006-12-01 소니 가부시끼 가이샤 음성합성방법및장치그리고음성대역확장방법및장치
JP2002508526A (ja) * 1998-03-25 2002-03-19 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー 狭帯域言語信号からの広帯域言語合成
US7636692B2 (en) 2000-10-31 2009-12-22 Sony Corporation Information processing apparatus, information processing method, program recording medium, and data recording medium
JP2002140078A (ja) * 2000-10-31 2002-05-17 Sony Corp 情報処理装置および情報処理方法、プログラム記録媒体、並びにデータ記録媒体
US7853527B2 (en) 2000-10-31 2010-12-14 Sony Corporation Information processing apparatus, information processing method, program recording medium, and data recording medium
KR100865860B1 (ko) * 2000-11-09 2008-10-29 코닌클리케 필립스 일렉트로닉스 엔.브이. 보다 높은 지각의 품질을 위한 전화 음성의 광대역 확장
US7986797B2 (en) 2002-09-12 2011-07-26 Sony Corporation Signal processing system, signal processing apparatus and method, recording medium, and program
US7668319B2 (en) 2002-09-12 2010-02-23 Sony Corporation Signal processing system, signal processing apparatus and method, recording medium, and program
CN1302457C (zh) * 2002-09-12 2007-02-28 索尼株式会社 信号处理系统、信号处理设备和方法
WO2004025625A1 (ja) * 2002-09-12 2004-03-25 Sony Corporation 信号処理システム、信号処理装置および方法、記録媒体、並びにプログラム
JP2006087082A (ja) * 2004-09-17 2006-03-30 Microsoft Corp 多感覚音声強調のための方法および装置
KR101153093B1 (ko) * 2004-09-17 2012-06-11 마이크로소프트 코포레이션 다감각 음성 향상을 위한 방법 및 장치
JP2007328268A (ja) * 2006-06-09 2007-12-20 Kddi Corp 音楽信号の帯域拡張方式
JP2010079275A (ja) * 2008-08-29 2010-04-08 Sony Corp 周波数帯域拡大装置及び方法、符号化装置及び方法、復号化装置及び方法、並びにプログラム
US9691410B2 (en) 2009-10-07 2017-06-27 Sony Corporation Frequency band extending device and method, encoding device and method, decoding device and method, and program
JP5535241B2 (ja) * 2009-12-28 2014-07-02 三菱電機株式会社 音声信号復元装置および音声信号復元方法
DE112010005020B4 (de) 2009-12-28 2018-12-13 Mitsubishi Electric Corporation Sprachsignal-Wiederherstellungsvorrichtung und Sprachsignal-Wiederherstellungsverfahren
US8706497B2 (en) 2009-12-28 2014-04-22 Mitsubishi Electric Corporation Speech signal restoration device and speech signal restoration method
JP2016048391A (ja) * 2010-04-13 2016-04-07 ソニー株式会社 信号処理装置および方法、並びにプログラム
US10381018B2 (en) 2010-04-13 2019-08-13 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
US10546594B2 (en) 2010-04-13 2020-01-28 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
US10297270B2 (en) 2010-04-13 2019-05-21 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
US10224054B2 (en) 2010-04-13 2019-03-05 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
US9679580B2 (en) 2010-04-13 2017-06-13 Sony Corporation Signal processing apparatus and signal processing method, encoder and encoding method, decoder and decoding method, and program
RU2589293C2 (ru) * 2010-10-15 2016-07-10 Сони Корпорейшн Устройство и способ кодирования, устройство и способ декодирования и программа
JP2012083678A (ja) * 2010-10-15 2012-04-26 Sony Corp 符号化装置および方法、復号装置および方法、並びにプログラム
RU2630384C1 (ru) * 2010-10-15 2017-09-07 Сони Корпорейшн Устройство и способ декодирования и носитель записи программы
US9767824B2 (en) 2010-10-15 2017-09-19 Sony Corporation Encoding device and method, decoding device and method, and program
US9536542B2 (en) 2010-10-15 2017-01-03 Sony Corporation Encoding device and method, decoding device and method, and program
WO2012050023A1 (ja) * 2010-10-15 2012-04-19 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
TWI479481B (zh) * 2010-10-15 2015-04-01 Sony Corp Encoding apparatus and method, decoding apparatus and method, and program
US10236015B2 (en) 2010-10-15 2019-03-19 Sony Corporation Encoding device and method, decoding device and method, and program
US9177563B2 (en) 2010-10-15 2015-11-03 Sony Corporation Encoding device and method, decoding device and method, and program
US10381019B2 (en) 2012-07-27 2019-08-13 Sony Corporation Frequency band extension apparatus, frequency band extension method, and program
US10134418B2 (en) 2012-07-27 2018-11-20 Sony Corporation Frequency band extension apparatus, frequency band extension method, and program
WO2014017315A1 (ja) * 2012-07-27 2014-01-30 ソニー株式会社 周波数帯域拡大装置および方法、並びにプログラム
US9875746B2 (en) 2013-09-19 2018-01-23 Sony Corporation Encoding device and method, decoding device and method, and program
KR101468560B1 (ko) * 2013-12-16 2014-12-04 국방과학연구소 마할라노비스 거리 기반 레이더 신호에 대한 이상치 펄스 탐지 방법
US10692511B2 (en) 2013-12-27 2020-06-23 Sony Corporation Decoding apparatus and method, and program
US11705140B2 (en) 2013-12-27 2023-07-18 Sony Corporation Decoding apparatus and method, and program
JP2019008206A (ja) * 2017-06-27 2019-01-17 日本放送協会 音声帯域拡張装置、音声帯域拡張統計モデル学習装置およびそれらのプログラム
WO2021090465A1 (ja) * 2019-11-08 2021-05-14 日本電信電話株式会社 帯域拡張装置、帯域拡張方法、およびプログラム
CN114882867A (zh) * 2022-04-13 2022-08-09 天津大学 基于滤波器组频率区分的深度网络波形合成方法及装置
CN114882867B (zh) * 2022-04-13 2024-05-28 天津大学 基于滤波器组频率区分的深度网络波形合成方法及装置

Also Published As

Publication number Publication date
JP3189598B2 (ja) 2001-07-16

Similar Documents

Publication Publication Date Title
JP2956548B2 (ja) 音声帯域拡大装置
EP0718820B1 (en) Speech coding apparatus, linear prediction coefficient analyzing apparatus and noise reducing apparatus
JP3189598B2 (ja) 信号合成方法および信号合成装置
US6219642B1 (en) Quantization using frequency and mean compensated frequency input data for robust speech recognition
JP3680380B2 (ja) 音声符号化方法及び装置
JP3810608B2 (ja) 音声レコグナイザーのためのトレーニング方法
US6347297B1 (en) Matrix quantization with vector quantization error compensation and neural network postprocessing for robust speech recognition
JP4005154B2 (ja) 音声復号化方法及び装置
EP1995723B1 (en) Neuroevolution training system
JPH07271394A (ja) 確実な電話音声認識のための信号バイアスの除去
JP2003514263A (ja) マッピング・マトリックスを用いた広帯域音声合成
JPH075892A (ja) 音声認識方法
US5943647A (en) Speech recognition based on HMMs
EP1465153A2 (en) Method and apparatus for formant tracking using a residual model
EP0475759B1 (en) Phoneme discrimination method
Qian et al. Combining equalization and estimation for bandwidth extension of narrowband speech
Bauer et al. A statistical framework for artificial bandwidth extension exploiting speech waveform and phonetic transcription
JP4696418B2 (ja) 情報検出装置及び方法
JP2013109274A (ja) 目標話者学習方法、その装置及びプログラム
JPH08248994A (ja) 声質変換音声合成装置
JPH10254473A (ja) 音声変換方法及び音声変換装置
Yağli et al. Artificial bandwidth extension of spectral envelope with temporal clustering
JP3250604B2 (ja) 音声認識方法および装置
Sivaraman et al. Speech Bandwidth Expansion For Speaker Recognition On Telephony Audio.
Chakraborty et al. An automatic speaker recognition system

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090518

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100518

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110518

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110518

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120518

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120518

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 12

EXPY Cancellation because of completion of term