JP2006084666A - 韻律生成装置及び韻律生成プログラム - Google Patents
韻律生成装置及び韻律生成プログラム Download PDFInfo
- Publication number
- JP2006084666A JP2006084666A JP2004268199A JP2004268199A JP2006084666A JP 2006084666 A JP2006084666 A JP 2006084666A JP 2004268199 A JP2004268199 A JP 2004268199A JP 2004268199 A JP2004268199 A JP 2004268199A JP 2006084666 A JP2006084666 A JP 2006084666A
- Authority
- JP
- Japan
- Prior art keywords
- prosody
- pattern
- prosodic
- phrase
- similar
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
【解決手段】 入力された文章を言語解析して得られる言語解析結果及び文節列から韻律を生成する韻律生成装置において、前記文節列から規則的な韻律パターンを生成する規則モデル韻律生成手段と、前記規則モデル韻律生成手段により得られる韻律パターン及び前記言語解析結果に基づいて、自然発声の韻律パターン及びその言語解析結果が予め蓄積されているデータベースから類似文節列の候補を抽出し、抽出された類似文節列の類似度を設定する類似文節抽出手段と、前記類似文節抽出手段により得られる類似文節列の候補と、前記規則モデル韻律生成手段により得られる韻律パターンとに基づいて、韻律パターンを結合する韻律パターン結合手段とを有することにより、上記課題を解決する。
【選択図】 図1
Description
江藤雅哉ほか、"生成過程モデルと統計的手法による基本周波数パターンの生成"、電子情報通信学会、SP2001−15(2001−5). 龍嶋岳彦ほか、"代表パターンコードブックを用いた基本周波数制御法"、電子情報通信学会論文誌 D−II Vol.J85−D−II No.6 pp.976−986、2002年6月. 片江伸之ほか、"文型−韻律データベースを用いた定型文音声合成システム"、日本音響学会講演論文集 pp275−276、平成8年3月.
本発明は、入力される読み上げ文章等を言語解析し、更に予め設定される規則的な生成モデルに基づいて韻律パターンを生成する(以下、規則モデルによる韻律パターンという)。その後、読み上げ文章を文節列に分解し、「文節毎に言語的に類似する文節」であり、「規則モデルによる韻律パターンに類似する韻律パターンで発声された文節」を、予め自然発声した音声と、その音響分析の結果、及びその文章の言語解析結果等が蓄積された韻律データベース等から抽出し、その文節の類似度を設定する。
図1は、本発明における韻律生成装置の機能構成の一例を示す図である。図1の韻律生成装置10は、言語解析手段11と、規則モデル韻律生成手段12と、類似文節抽出手段13と、韻律データベース14と、韻律パターン結合手段15とを有するよう構成されている。
ここで、上述した類似文節抽出手段13における類似度の設定について具体的に説明する。文節の類似度は、「言語解析による言語的な類似性」と、「その文節を発声した音声の韻律パターンと規則的に求めた韻律パターンとの類似性」の両方の結果に基づいて設定する。
Sph=(1/N1)Σwδ ・・・(1)
また、韻律データベース中の各音素の平均継続時間長が類似する音素の組み合わせ(重複を認める)を求め、同じカテゴリーに含まれる場合は、その類似する距離に応じて0〜1の値を返す。
Sac=(1/N2)Σwδ ・・・(2)
Sp=(1/N3)Σwδ・・・(3)
Spp=(1/N4)Σδ ・・・(4)
Sdr=(1/N5)Σwf(Xti−Xri) ・・・(5)
Sf0=(1/N6)Σwf(Xti−Xri) ・・・(6)
次に、韻律パターン結合の具体的な方法について説明する。ここで、韻律パターンの結合とは、候補となった韻律パターンを規則モデルによる韻律パターンに合わせ込むことにより、滑らかな文章にすることである。以下に合わせ込みの例を示す。
Ri=Tri/Tti ・・・(7)
ここで、本発明における韻律パターンの生成が実行可能なコンピュータのハードウェア構成例について図を用いて説明する。図5は、本発明における韻律生成が実現可能なハードウェア構成の一例を示す図である。
図6は、本発明における韻律生成プログラムを用いた韻律生成処理手順を示す一例のフローチャートである。
図7は、言語的に類似する文節列を抽出する処理手順を示す一例のフローチャートである。まず、分解された文節列の1つを入力し、文節を構成する形態素の子音、短母音、長母音、促音、撥音の組み合わせと音素パターンとの類似度を設定する(S61)。次に、文節を構成する形態素の品詞、アクセント型の類似度を設定する(S62)。また、文節を構成する助詞等からなる付属語のモーラ数及び品詞、その言語的な意味から判断して類似度を設定する(S63)。
次に、規則的な韻律パターンに類似する韻律パターンを有する文節列を抽出する処理手順について説明する。図8は、規則的な韻律パターンとの類似度抽出処理手順を示す一例のフローチャートである。
11 言語解析手段
12 規則モデル韻律生成手段
13 類似文節抽出手段
14 韻律データベース
15 韻律パターン結合手段
21 入力装置
22 出力装置
23 ドライブ装置
24 補助記憶装置
25 メモリ装置
26 CPU
27 ネットワーク接続装置
28 記録媒体
Claims (10)
- 入力された文章を言語解析して得られる言語解析結果及び文節列から韻律を生成する韻律生成装置において、
前記文節列から規則的な韻律パターンを生成する規則モデル韻律生成手段と、
前記規則モデル韻律生成手段により得られる韻律パターン及び前記言語解析結果に基づいて、自然発声の韻律パターン及びその言語解析結果が予め蓄積されているデータベースから類似文節列の候補を抽出し、抽出された類似文節列の類似度を設定する類似文節抽出手段と、
前記類似文節抽出手段により得られる類似文節列の候補と、前記規則モデル韻律生成手段により得られる韻律パターンとに基づいて、韻律パターンを結合する韻律パターン結合手段とを有することを特徴とする韻律生成装置。 - 前記類似文節抽出手段は、
文節列を構成する形態素毎のモーラ数、アクセント型、及び品詞に基づいて、前記類似文節列の類似度を設定することを特徴とする請求項1に記載の韻律生成装置。 - 前記類似文節抽出手段は、
文節列を構成する付属語のモーラ数及び品詞、その言語的な意味に基づいて、前記類似文節列の類似度を設定することを特徴とする請求項1又は2に記載の韻律生成装置。 - 前記類似文節抽出手段は、
子音、母音、長母音、促音、撥音の各音素の単独又は組み合わせに基づいて、前記類似文節列の類似度を設定することを特徴とする請求項1乃至3の何れか1項に記載の韻律生成装置。 - 前記類似文節抽出手段は、
前記規則モデル韻律生成手段により得られる韻律パターンに含まれる基本周波数パターンと、前記類似文節列の韻律パターン情報に含まれる基本周波数パターンとに基づいて、前記類似文節列の類似度を設定することを特徴とする請求項1乃至4の何れか1項に記載の韻律生成装置。 - 前記類似文節抽出手段は、
前記規則モデル韻律生成手段により得られる韻律パターンに含まれる各音素の継継続時間長と、前記類似文節列の各音素の継続時間長とに基づいて、前記類似文節列の類似度を設定することを特徴とする請求項1乃至5の何れか1項に記載の韻律生成装置。 - 前記韻律パターン結合手段は、
前記規則モデル韻律生成手段により得られる基本周波数パターンと、前記類似文節列の基本周波数パターンとのそれぞれの最大値と最小値の平均値に基づいて、前記類似文節列の基本周波数パターンを調整することを特徴とする請求項5に記載の韻律生成装置。 - 前記韻律パターン結合手段は、
前記入力された文章を言語解析して得られる文節列における各文節の自立語の母音、長母音、子音と母音、及び子音と長母音毎に得られる平均継続時間長に基づいて、前記類似文節列の各音素の継続時間長を調整することを特徴とする請求項1乃至7の何れか1項に記載の韻律生成装置。 - 前記韻律パターン結合手段は、
前記入力された文章を言語解析して得られる文節列における各文節の自立語の母音、長母音、子音と母音、及び子音と長母音毎に得られる音素組について、前記音素組の時間長と前記類似文節列の各音素の時間長が伸張もしくは収縮のどちらか一方向に時間長を調整することで一致する場合にのみ、最も変形率が小さい音素の変化率に基づいて、前記類似文節列の各音素の継続時間長を調整することを特徴とする請求項1乃至8の何れか1項に記載の韻律生成装置。 - 入力された文章を言語解析して得られる言語解析結果及び文節列から韻律を生成する韻律生成処理をコンピュータに実行させるための韻律生成プログラムにおいて、
前記文節列から規則的な韻律パターンを生成する規則モデル韻律生成処理と、
前記規則モデル韻律生成処理により得られる韻律パターン及び前記言語解析結果に基づいて、自然発声の韻律パターン及びその言語解析結果が予め蓄積されているデータベースから類似文節列の候補を抽出し、抽出された類似文節列の類似度を設定する類似文節抽出処理と、
前記類似文節抽出処理により得られる類似文節列の候補と、前記規則モデル韻律生成手段により得られる韻律パターンとに基づいて、韻律パターンを結合する韻律パターン結合処理とをコンピュータに実行させることを特徴とする韻律生成プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004268199A JP4542400B2 (ja) | 2004-09-15 | 2004-09-15 | 韻律生成装置及び韻律生成プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004268199A JP4542400B2 (ja) | 2004-09-15 | 2004-09-15 | 韻律生成装置及び韻律生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006084666A true JP2006084666A (ja) | 2006-03-30 |
JP4542400B2 JP4542400B2 (ja) | 2010-09-15 |
Family
ID=36163249
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004268199A Expired - Fee Related JP4542400B2 (ja) | 2004-09-15 | 2004-09-15 | 韻律生成装置及び韻律生成プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4542400B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009122382A (ja) * | 2007-11-14 | 2009-06-04 | Fujitsu Ltd | 韻律生成装置、韻律生成方法、および、韻律生成プログラム |
JP2011191528A (ja) * | 2010-03-15 | 2011-09-29 | Mitsubishi Electric Corp | 韻律作成装置及び韻律作成方法 |
JP2011197542A (ja) * | 2010-03-23 | 2011-10-06 | Mitsubishi Electric Corp | 韻律パターン生成装置 |
JP2013072957A (ja) * | 2011-09-27 | 2013-04-22 | Toshiba Corp | 文書読み上げ支援装置、方法及びプログラム |
CN115994532A (zh) * | 2023-03-22 | 2023-04-21 | 暗链科技(深圳)有限公司 | 语料分类方法、非易失性可读存储介质及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000056788A (ja) * | 1998-08-03 | 2000-02-25 | Hitachi Ltd | 音声合成装置の韻律制御方法 |
JP2000284799A (ja) * | 1999-03-31 | 2000-10-13 | Toshiba Corp | 音声信号伝送装置および音声信号伝送方法 |
JP2001166787A (ja) * | 1999-12-03 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 音声合成装置および自然言語処理方法 |
WO2003019528A1 (fr) * | 2001-08-22 | 2003-03-06 | International Business Machines Corporation | Procede de production d'intonation, dispositif de synthese de signaux vocaux fonctionnant selon ledit procede et serveur vocal |
JP2003271171A (ja) * | 2002-03-14 | 2003-09-25 | Matsushita Electric Ind Co Ltd | 音声合成方法、音声合成装置および音声合成プログラム |
-
2004
- 2004-09-15 JP JP2004268199A patent/JP4542400B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000056788A (ja) * | 1998-08-03 | 2000-02-25 | Hitachi Ltd | 音声合成装置の韻律制御方法 |
JP2000284799A (ja) * | 1999-03-31 | 2000-10-13 | Toshiba Corp | 音声信号伝送装置および音声信号伝送方法 |
JP2001166787A (ja) * | 1999-12-03 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 音声合成装置および自然言語処理方法 |
WO2003019528A1 (fr) * | 2001-08-22 | 2003-03-06 | International Business Machines Corporation | Procede de production d'intonation, dispositif de synthese de signaux vocaux fonctionnant selon ledit procede et serveur vocal |
JP2003271171A (ja) * | 2002-03-14 | 2003-09-25 | Matsushita Electric Ind Co Ltd | 音声合成方法、音声合成装置および音声合成プログラム |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009122382A (ja) * | 2007-11-14 | 2009-06-04 | Fujitsu Ltd | 韻律生成装置、韻律生成方法、および、韻律生成プログラム |
JP2011191528A (ja) * | 2010-03-15 | 2011-09-29 | Mitsubishi Electric Corp | 韻律作成装置及び韻律作成方法 |
JP2011197542A (ja) * | 2010-03-23 | 2011-10-06 | Mitsubishi Electric Corp | 韻律パターン生成装置 |
JP2013072957A (ja) * | 2011-09-27 | 2013-04-22 | Toshiba Corp | 文書読み上げ支援装置、方法及びプログラム |
CN115994532A (zh) * | 2023-03-22 | 2023-04-21 | 暗链科技(深圳)有限公司 | 语料分类方法、非易失性可读存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
JP4542400B2 (ja) | 2010-09-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100590553B1 (ko) | 대화체 운율구조 생성방법 및 장치와 이를 적용한음성합성시스템 | |
US8219398B2 (en) | Computerized speech synthesizer for synthesizing speech from text | |
US7155390B2 (en) | Speech information processing method and apparatus and storage medium using a segment pitch pattern model | |
US7010489B1 (en) | Method for guiding text-to-speech output timing using speech recognition markers | |
JPH10116089A (ja) | 音声合成用の基本周波数テンプレートを収容する韻律データベース | |
Kayte et al. | Hidden Markov model based speech synthesis: A review | |
JP3587048B2 (ja) | 韻律制御方法及び音声合成装置 | |
JP2001282279A (ja) | 音声情報処理方法及び装置及び記憶媒体 | |
JP4632384B2 (ja) | 音声情報処理装置及びその方法と記憶媒体 | |
JP2009139677A (ja) | 音声処理装置及びそのプログラム | |
JP6669081B2 (ja) | 音声処理装置、音声処理方法、およびプログラム | |
JP4542400B2 (ja) | 韻律生成装置及び韻律生成プログラム | |
Lobanov et al. | Language-and speaker specific implementation of intonation contours in multilingual TTS synthesis | |
JP4829605B2 (ja) | 音声合成装置および音声合成プログラム | |
Jeerapradit et al. | HMM-based Thai singing voice synthesis system | |
JP3681111B2 (ja) | 音声合成装置、音声合成方法および音声合成プログラム | |
Iyanda et al. | Development of a Yorúbà Textto-Speech System Using Festival | |
Lobanov et al. | TTS-Synthesizer as a Computer Means for Personal Voice Cloning (On the example of Russian) | |
Cheng et al. | HMM-based mandarin singing voice synthesis using tailored synthesis units and question sets | |
JP4575798B2 (ja) | 音声合成装置及び音声合成プログラム | |
Yong et al. | Low footprint high intelligibility Malay speech synthesizer based on statistical data | |
JP2000056788A (ja) | 音声合成装置の韻律制御方法 | |
Sherpa et al. | Pioneering Dzongkha text-to-speech synthesis | |
Astrinaki et al. | sHTS: A streaming architecture for statistical parametric speech synthesis | |
Gu et al. | Combining HMM spectrum models and ANN prosody models for speech synthesis of syllable prominent languages |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100407 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100601 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100625 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130702 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140702 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |