JP2002351791A - 電子メール通信装置、電子メール通信方法および電子メール通信プログラム - Google Patents

Abstract

(57)【要約】 【課題】 従来の電子メール通信装置は、音声入力端か
ら入力された音声が正しく認識処理されない場合には、
認識結果に誤りが多く生じ、正しい返信メールデータが
得られない等の課題があった。 【解決手段】 電子メールを送受信するメール送受信部
１と、音声合成を行う音声合成文章データ４と音声認識
に関わる語彙データ５と音声認識を指示する音声認識命
令６とを出力するメール文解析部３と、音声を出力する
音声合成部７と、認識辞書１０を作成し出力する認識辞
書作成部９と、音声認識命令６に従って入力する音声に
対して認識処理を行う音声認識部１２と、認識結果１３
と受信メールデータ２とに基づいて返信メールデータ１
５を出力する返信メール作成部１４とを備えるものであ
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、受信した電子メ
ールを音声で出力し、返信する電子メールを音声で入力
する電子メール通信装置、電子メール通信方法および電
子メール通信プログラムに関するものである。

【０００２】

【従来の技術】図５は、従来の電子メール通信装置の構
成を示すブロック図であり、特開平３−２８９８５４号
公報に開示された電子メールシステムの一例を示してい
る。図５において、１０１はＬＡＮやモデム等を介して
電子メールを送受信するメール送受信部、１０２はメー
ル送受信部１０１から出力する受信メールデータ、１０
３は受信メールデータ１０２に基づいて出力先を切替え
る音声入出力切替部、１０４は音声入出力切替部１０３
から出力する音声合成文章データ、１０５は音声入出力
切替部１０３から出力する音声認識命令、１０６は音声
合成文章データ１０４に基づいて音声合成を行い音声を
出力する音声合成部、１０７は音声を入力する音声入力
端、１０８は音声認識命令１０５に基づいて音声入力端
１０７から入力する音声に対して認識処理を行う音声認
識部、１０９は音声認識部１０８から出力する認識結
果、１１０は認識結果１０９と受信メールデータ１０２
とから返信する電子メールを作成しメール送受信部１０
１に出力する返信メール作成部、１１１は返信メール作
成部１１０から出力する返信メールデータである。

【０００３】次に動作について説明する。メール送受信
部１０１が受信した電子メールは、受信メールデータ１
０２として音声入出力切替部１０３に出力する。音声入
出力切替部１０３は、受信メールデータ１０２に含まれ
る音声認識開始を示す文字コードを検出するまで、受信
メールデータ１０２を音声合成文章データ１０４として
音声合成部１０６に出力する。音声入出力切替部１０３
から音声合成文章データ１０４を入力した音声合成部１
０６は、音声合成文章データ１０４に基づいて音声合成
を行い音声を出力する。

【０００４】また、音声入出力切替部１０３が、受信メ
ールデータ１０２に含まれる音声認識開始を示す文字コ
ードを検出した場合には、音声合成文章データ１０４を
音声合成部１０６に出力することを停止し、音声の出力
を止める。次に、音声認識部１０８に音声認識命令１０
５を出力する。音声認識部１０８は、音声入出力切替部
１０３から入力した音声認識命令１０５に基づいて音声
入力端１０７から入力する音声に対して認識処理を行
い、認識結果１０９を出力する。

【０００５】次に、返信メール作成部１１０は、認識結
果１０９と受信メールデータ１０２とから返信する電子
メールを作成し、メール送受信部１０１に返信メールデ
ータ１１１を出力する。

【０００６】次に実施例について説明する。例えば、メ
ール送受信部１０１が出力した受信メールデータ１０２
が次に示すような場合について説明する。

【０００７】会議に出席できますか ＃ どうもありがとうございます

【０００８】上記のように、１行目末の「＃」が音声認
識開始を示す文字コードとすると、先ず、音声入出力切
替部１０３は、「会議に出席できますか」までを音声合
成文章データ１０４として音声合成部１０６に出力す
る。音声合成部１０６は、音声合成文章データ１０４に
基づいて音声合成を行い、「会議に出席できますか」を
音声として出力する。次に、音声入出力切替部１０３
は、音声認識開始を示す文字コード「＃」を検出するこ
とによって、音声合成文章データ１０４の出力を停止
し、音声認識部１０８に音声認識命令１０５を出力す
る。

【０００９】次に、音声認識部１０８は、音声認識命令
１０５に基づいて音声入力端１０７から入力する音声に
対して認識処理を行う。認識処理が終了した場合には、
音声入出力切替部１０３が、２行目の「どうもありがと
うございます」を音声合成文章データ１０４として音声
合成部１０６に出力する。音声合成部１０６は、音声合
成文章データ１０４に基づいて音声合成を行い、「どう
もありがとうございます」を音声として出力する。次
に、音声認識部１０８において、音声入力端１０７から
入力された音声である「はい、出席します」が正しく認
識処理され、認識結果１０９として「はい、出席しま
す」を返信メール作成部１１０に出力した場合には、返
信メール作成部１１０が、認識結果１０９と受信メール
データ１０２とから返信する電子メールとして次に示す
ような返信メールデータ１１１を出力する。

【００１０】＞会議に出席できますか はい、出席します ＞どうもありがとうございます

【００１１】返信メール作成部１１０は、上記のような
返信する電子メールである返信メールデータ１１１をメ
ール送受信部１０１に出力する。次に、メール送受信部
１０１は、受信メールデータ１０２の送信者に対して返
信メールデータ１１１を電子メールとして返信する。

【００１２】以上説明したように、従来の電子メール通
信装置は、キーボード等の操作を行うことなく、返信す
る電子メールの作成と送信とを行うことができる。

【００１３】

【発明が解決しようとする課題】従来の電子メール通信
装置は以上のように構成されているので、音声認識部に
おいて、音声入力端から入力された音声が正しく認識処
理されない場合には、認識結果に誤りが多く生じるの
で、返信する電子メールとしての正しい返信メールデー
タが得られないという課題があった。

【００１４】また、従来の電子メール通信装置は、音声
認識部において、精度の高い認識処理を実現するために
は、処理速度が速いＣＰＵ（中央演算処理装置）や大容
量のメモリ（主記憶装置）等が必要となるので、携帯電
話等の小型の通信機器に搭載することが困難であるとい
う課題があった。

【００１５】さらに、従来の電子メール通信装置は、受
信メールデータに基づいて、音声入出力切替部が、音声
合成部と音声認識部とを切替えて駆動させるという動作
に限られているので、認識結果によって音声合成を変化
させたり、電子メールの送信者がメールの文章中に挿入
する特殊記号（顔文字や記号、マーク、キャラクタ等）
が有する感情表現を、電子メールの受信者に伝えること
ができない等の課題があった。

【００１６】この発明は上記のような課題を解決するた
めになされたもので、音声認識部における認識処理の対
象となる語彙を含めて作成された電子メールから、認識
処理の対象となる語彙を抽出し、認識辞書を作成するこ
とによって、精度の高い認識処理を実現する電子メール
通信装置、電子メール通信方法および電子メール通信プ
ログラムを得ることを目的とする。

【００１７】また、この発明は、受信した電子メールの
受信メールデータに基づいて、音声認識部が出力する認
識結果に応じた音声合成や返信する電子メールの作成を
行うことによって、音声認識部が出力する認識結果によ
って変化する電子メールの作成を行うことができる電子
メール通信装置、電子メール通信方法および電子メール
通信プログラムを得ることを目的とする。

【００１８】さらに、この発明は、受信した電子メール
の受信メールデータに基づいて、電子メール通信装置が
有する種々の機能を操作することによって、電子メール
の送信者によって電子メールの文章中に挿入される特殊
記号が有する感情表現を、電子メールの受信者に伝える
ことができる電子メール通信装置、電子メール通信方法
および電子メール通信プログラムを得ることを目的とす
る。

【００１９】

【課題を解決するための手段】この発明に係る電子メー
ル通信装置は、受信した電子メールを受信メールデータ
として出力し返信メールデータが入力した際には電子メ
ールを送信するメール送受信手段と、受信メールデータ
を解析することによって音声合成を行う部分と音声認識
に関わる部分とを判断し、音声合成を行う部分は音声合
成文章データとして出力し、音声認識に関わる部分は語
彙データとして出力すると共に、音声認識を指示する音
声認識命令を出力するメール文解析手段と、音声合成文
章データに基づいて音声合成を行い音声を出力する音声
合成手段と、音響モデルに基づいて語彙データの認識辞
書を作成し出力する認識辞書作成手段と、音声認識命令
に従って音声入力端から入力する音声に対して認識辞書
によって制限された認識処理を行うことにより認識結果
を出力する音声認識手段と、認識結果と受信メールデー
タとに基づいて返信する電子メールを作成し返信メール
データを出力する返信メール作成手段とを備えるもので
ある。

【００２０】この発明に係る電子メール通信装置は、音
声符号化命令に従って音声入力端から入力する音声を符
号化することによって音声符号化データを作成し出力す
る音声符号化手段を備え、メール文解析手段が、受信メ
ールデータを解析することによって音声符号化命令を出
力し、返信メール作成手段が、認識結果，受信メールデ
ータ及び音声符号化データとに基づいて返信する電子メ
ールを作成し返信メールデータを出力するようにしたも
のである。

【００２１】この発明に係る電子メール通信装置は、操
作命令に従って出力・表示機能を操作する端末操作手段
を備え、メール文解析手段が、受信メールデータを解析
することによって操作命令を出力するようにしたもので
ある。

【００２２】この発明に係る電子メール通信装置は、メ
ール文解析手段が、音声認識手段から出力する認識結果
の内容に応じて受信メールデータを解析する部分を変更
するようにしたものである。

【００２３】この発明に係る電子メール通信方法は、受
信した電子メールを受信メールデータとして出力するス
テップと、受信メールデータを解析することによって音
声合成を行う部分と音声認識に関わる部分とを判断し、
音声合成を行う部分は音声合成文章データとして出力
し、音声認識に関わる部分は語彙データとして出力する
と共に、音声認識を指示する音声認識命令を出力するス
テップと、音声合成文章データに基づいて音声合成を行
い音声を出力するステップと、音響モデルに基づいて語
彙データの認識辞書を作成し出力するステップと、音声
認識命令に従って音声入力端から入力する音声に対して
認識辞書によって制限された認識処理を行うことにより
認識結果を出力するステップと、認識結果と受信メール
データとに基づいて返信する電子メールを作成し返信メ
ールデータを出力するステップと、返信メールデータが
入力した際には受信メールデータに対する返信の電子メ
ールとして送信するステップとを有するものである。

【００２４】この発明に係る電子メール通信方法は、受
信メールデータを解析することによって音声符号化命令
を出力するステップと、音声符号化命令に従って音声入
力端から入力する音声を符号化することによって音声符
号化データを作成し出力するステップと、認識結果，受
信メールデータ及び音声符号化データとに基づいて返信
する電子メールを作成し返信メールデータを出力するス
テップとを有するようにしたものである。

【００２５】この発明に係る電子メール通信方法は、受
信メールデータを解析することによって操作命令を出力
するステップと、操作命令に従って出力・表示機能を操
作するステップとを有するようにしたものである。

【００２６】この発明に係る電子メール通信方法は、認
識結果の内容に応じて受信メールデータを解析する部分
を変更するステップを有するようにしたものである。

【００２７】この発明に係る電子メール通信プログラム
は、コンピュータに受信した電子メールを受信メールデ
ータとして出力するステップと、受信メールデータを解
析することによって音声合成を行う部分と音声認識に関
わる部分とを判断し音声合成を行う部分は音声合成文章
データとして出力し音声認識に関わる部分は語彙データ
として出力すると共に音声認識を指示する音声認識命令
を出力するステップと、音声合成文章データに基づいて
音声合成を行い音声を出力するステップと、音響モデル
に基づいて語彙データの認識辞書を作成し出力するステ
ップと、音声認識命令に従って音声入力端から入力する
音声に対して認識辞書によって制限された認識処理を行
うことにより認識結果を出力するステップと、認識結果
と受信メールデータとに基づいて返信する電子メールを
作成し返信メールデータを出力するステップと、返信メ
ールデータが入力した際には受信メールデータに対する
返信の電子メールとして送信するステップとを実行させ
るものである。

【００２８】この発明に係る電子メール通信プログラム
は、コンピュータに受信メールデータを解析することに
よって音声符号化命令を出力するステップと、音声符号
化命令に従って音声入力端から入力する音声を符号化す
ることによって音声符号化データを作成し出力するステ
ップと、認識結果，受信メールデータ及び音声符号化デ
ータとに基づいて返信する電子メールを作成し返信メー
ルデータを出力するステップとを実行させるものであ
る。

【００２９】この発明に係る電子メール通信プログラム
は、コンピュータに受信メールデータを解析することに
よって操作命令を出力するステップと、操作命令に従っ
て出力・表示機能を操作するステップとを実行させるも
のである。

【００３０】この発明に係る電子メール通信プログラム
は、コンピュータに認識結果の内容に応じて受信メール
データを解析する部分を変更するステップを実行させる
ものである。

【００３１】

【発明の実施の形態】以下、この発明の実施の一形態を
説明する。 実施の形態１．図１は、この発明の実施の形態１による
電子メール通信装置の構成を示すブロック図である。図
１において、１はＬＡＮやモデム等を介して電子メール
を送受信するメール送受信部（メール送受信手段）、２
はメール送受信部１から出力する受信メールデータ、３
は受信メールデータ２に対して解析処理を行うメール文
解析部（メール文解析手段）、４はメール文解析部３が
受信メールデータ２の解析結果に基づいて出力する音声
合成文章データ、５はメール文解析部３が受信メールデ
ータ２の解析結果に基づいて出力する語彙データ、６は
メール文解析部３が受信メールデータ２の解析結果に基
づいて出力する音声認識命令、７は音声合成文章データ
４に基づいて音声合成を行い音声を出力する音声合成部
（音声合成手段）、８は音響モデルが記憶されている音
響モデルメモリ、９は語彙データ５に基づいて音響モデ
ルメモリ８に記憶されている音響モデルを用いて認識辞
書を作成する認識辞書作成部、１０は認識辞書作成部９
が作成し出力する認識辞書、１１は音声を入力する例え
ばマイク等の音声入力端、１２は音声認識命令６及び認
識辞書１０に基づいて音声入力端１１から入力する音声
に対して認識処理を行う音声認識部（音声認識手段）、
１３は音声認識部１２が出力する認識結果、１４は認識
結果１３と受信メールデータ２とから返信する電子メー
ルを作成しメール送受信部１に出力する返信メール作成
部（返信メール作成手段）、１５は返信メール作成部１
４から出力された返信メールデータである。なお、音響
モデルメモリ８と認識辞書作成部９とから認識辞書作成
手段が構成される。

【００３２】次に動作について説明する。メール送受信
部１が受信した電子メールは、受信メールデータ２とし
てメール文解析部３に出力される。メール文解析部３
は、受信メールデータ２の解析処理として、音声合成を
行う部分と音声認識に関わる部分とを判断する。音声合
成を行う部分は音声合成文章データ４として音声合成部
７に出力し、音声認識に関わる部分は語彙データ５とし
て認識辞書作成部９に出力し、同時に音声認識命令６を
音声認識部１２に出力する。音声合成部７は、音声合成
文章データ４に基づいて音声合成を行い音声を出力す
る。また、認識辞書作成部９は、音響モデルメモリ８を
接続することによって認識辞書１０を作成し音声認識部
１２に出力する。

【００３３】次に、音声認識部１２は、メール文解析部
３が出力した音声認識命令６に基づいて、音声入力端１
１から入力する音声に対して認識処理を行い、認識結果
１３を出力する。次に、返信メール作成部１４は、認識
結果１３と受信メールデータ２とから返信する電子メー
ルを作成し、メール送受信部１に返信メールデータ１５
を出力する。

【００３４】次に実施例について説明する。実施の形態
１による電子メール通信装置が、次に示すような文章の
電子メールを受信した場合について説明する。

【００３５】Ｔｏ： ｘｘｘ＠ａａａ．ｃｏｍ Ｆｒｏｍ： ｏｏ＠ｂｂｂ．ｃｏ．ｊｐ Ｓｕｂｊｅｃｔ： 明日の会議について ： ： ――― ○○です。 明日の会議に出られますか？ ＜はいｏｒいいえ＞ 了解しました。

【００３６】上記のような電子メールを受信した場合、
メール送受信部１は、上記電子メールの本文の部分を受
信メールデータ２としてメール文解析部３に出力する。
メール文解析部３は、受信メールデータ２の解析処理と
して、音声合成を行う部分と音声認識に関わる部分とを
判断する。つまり、メール文解析部３は、受信メールデ
ータ２において、「○○です。明日の会議に出られます
か？」の部分を音声合成文章データ４として音声合成部
７に出力する。音声合成部７は、音声合成文章データ４
に基づいて、音声合成を行い、「○○です。明日の会議
に出られますか？」の部分を音声として出力する。次
に、メール文解析部３は、カギ括弧（＜＞）でくくられ
た部分を音声認識に関わる部分と判断し、カギ括弧内の
「はいｏｒいいえ」において、「ｏｒ」を区切り記号と
して抽出する単語群、「はい」と「いいえ」を音声認識
に関わる語彙データ５として認識辞書作成部９に出力す
る。また、メール文解析部３は、音声認識命令６を音声
認識部１２に出力する。

【００３７】次に、認識辞書作成部９は、音響モデルメ
モリ８に記憶されている音響モデル、例えば日本語に現
れる各音素について複数の話者の音声データにより学習
されたＨＭＭ（Ｈｉｄｄｅｎ Ｍａｒｃｏｖ Ｍｏｄｅ
ｌ）のような音素モデルを接続することによって、語彙
データ５の「はい」と「いいえ」についての単語モデル
を作成し、認識辞書１０として音声認識部１２に出力す
る。次に、音声認識部１２は、メール文解析部３から出
力する音声認識命令６に基づいて、認識辞書作成部９が
出力する認識辞書１０を用いて、音声入力端１１から入
力する音声に対して認識処理を行い、認識結果１３を返
信メール作成部１４に出力する。

【００３８】次に、メール文解析部３は、認識処理が終
了した場合には、受信メールデータ２の「了解しまし
た。」の部分を音声合成文章データ４として音声合成部
７に出力する。音声合成部７は、音声合成文章データ４
に基づいて音声合成を行い、「了解しました。」を音声
として出力する。次に、返信メール作成部１４は、認識
結果１３として、例えば「はい」が入力された場合に
は、認識結果１３と受信メールデータ２とから返信する
電子メールとして次に示すような返信メールデータ１５
を出力する。

【００３９】＞○○です。 ＞明日の会議に出られますか？ はい ＞了解しました。

【００４０】返信メール作成部１４は、上記のような返
信する電子メールである返信メールデータ１５をメール
送受信部１に出力する。次に、メール送受信部１は、受
信メールデータ２の送信者に対して返信メールデータ１
５を電子メールとして返信する。

【００４１】以上説明したように、この実施の形態１に
よる電子メール通信装置は、受信した電子メールを受信
メールデータ２として出力し返信メールデータ１５が入
力した際には電子メールを送信するメール送受信部１
と、受信メールデータ２を解析することによって音声合
成を行う部分と音声認識に関わる部分とを判断し、音声
合成を行う部分は音声合成文章データ４として出力し、
音声認識に関わる部分は語彙データ５として出力すると
共に、音声認識を指示する音声認識命令６を出力するメ
ール文解析部３と、音声合成文章データ４に基づいて音
声合成を行い音声を出力する音声合成部７と、音響モデ
ルに基づいて語彙データ５の認識辞書１０を作成し出力
する認識辞書作成部９と、音声認識命令６に従って音声
入力端１１から入力する音声に対して認識辞書１０によ
って制限された認識処理を行うことにより認識結果１３
を出力する音声認識部１２と、認識結果１３と受信メー
ルデータ２とに基づいて返信する電子メールを作成し返
信メールデータ１５を出力する返信メール作成部１４と
を備えるものである。

【００４２】また、以上の説明では、この実施の形態１
を電子メール通信装置としたが、この電子メール通信装
置の各構成要素が行う処理過程を備えた電子メール通信
方法として、この実施の形態１を実現することもでき
る。

【００４３】即ち、この実施の形態１による電子メール
通信方法は、受信した電子メールを受信メールデータ２
として出力するステップと、受信メールデータ２を解析
することによって音声合成を行う部分と音声認識に関わ
る部分とを判断し、音声合成を行う部分は音声合成文章
データ４として出力し、音声認識に関わる部分は語彙デ
ータ５として出力すると共に、音声認識を指示する音声
認識命令６を出力するステップと、音声合成文章データ
４に基づいて音声合成を行い音声を出力するステップ
と、音響モデルに基づいて語彙データ５の認識辞書１０
を作成し出力するステップと、音声認識命令６に従って
音声入力端１１から入力する音声に対して認識辞書１０
によって制限された認識処理を行うことにより認識結果
１３を出力するステップと、認識結果１３と受信メール
データ２とに基づいて返信する電子メールを作成し返信
メールデータ１５を出力するステップと、返信メールデ
ータが入力した際には受信メールデータ２に対する返信
の電子メールとして送信するステップとを有するもので
ある。

【００４４】また、この実施の形態１による電子メール
通信方法は、その方法をコンピュータで実行するための
電子メール通信プログラムとして実現することもでき
る。

【００４５】即ち、この実施の形態１による電子メール
通信プログラムは、受信した電子メールを受信メールデ
ータ２として出力するステップと、受信メールデータ２
を解析することによって音声合成を行う部分と音声認識
に関わる部分とを判断し、音声合成を行う部分は音声合
成文章データ４として出力し、音声認識に関わる部分は
語彙データ５として出力すると共に、音声認識を指示す
る音声認識命令６を出力するステップと、音声合成文章
データ４に基づいて音声合成を行い音声を出力するステ
ップと、音響モデルに基づいて語彙データ５の認識辞書
１０を作成し出力するステップと、音声認識命令６に従
って音声入力端１１から入力する音声に対して認識辞書
１０によって制限された認識処理を行うことにより認識
結果１３を出力するステップと、認識結果１３と受信メ
ールデータ２とに基づいて返信する電子メールを作成し
返信メールデータ１５を出力するステップと、返信メー
ルデータが入力した際には受信メールデータ２に対する
返信の電子メールとして送信するステップとをコンピュ
ータで実行するようにしたものである。

【００４６】以上のように、この実施の形態１によれ
ば、音声合成を行う部分と音声認識に関わる部分とを判
断し音声認識に関わる部分は語彙データ５として認識辞
書作成部９に出力するメール文解析部３と、音響モデル
に基づいて語彙データ５の認識辞書１０を作成し出力す
る認識辞書作成部９と、音声入力端１１から入力する音
声に対して認識辞書１０で制限された認識処理を行う音
声認識部１２とを備えるようにしたので、音声認識部１
２における音声の認識処理が、認識対象となる認識辞書
１０に制限されて行われるから、認識処理の精度が向上
し正しい認識結果１３が出力されるという効果が得られ
る。

【００４７】なお、この実施の形態１において、音声認
識に関わる部分をカギ括弧で表現した場合について説明
したが、これに限られるものではなく、他の記号や記述
子、記述ルールを用いてもよい。また、音響モデルはＨ
ＭＭのような音素モデルに限られるものではなく、他の
音声単位、例えば音素片、半音節、音節、単語などにつ
いてのモデルであってもよい。

【００４８】実施の形態２．図２は、この発明の実施の
形態２による電子メール通信装置の構成を示すブロック
図である。図２において、図１と同一符号は同一または
相当部分を示すのでその説明を省略する。但し、３は音
声認識部１２から出力する認識結果１３が入力される点
で、図１に符号３を付して示したものとは異なるメール
文解析部（メール文解析手段）である。

【００４９】次に動作について説明する。実施の形態２
におけるメール送受信部１，音声合成部７，音響モデル
メモリ８，認識辞書作成部９，音声認識部１２，返信メ
ール作成部１４に係る動作及び奏する効果は、実施の形
態１と同様であるのでその説明を省略する。

【００５０】メール文解析部３は、実施の形態１におい
て説明した動作に加えて、音声認識部１２から出力され
た認識結果１３が入力した場合には、認識結果１３を受
信メールデータ２の解析に用いる。つまり、メール文解
析部３は、受信メールデータ２の解析処理として、音声
合成文章データ４の抽出、音声認識における語彙データ
５の抽出、認識結果１３に依存して処理を行う部分とに
分ける処理を行う。

【００５１】次に実施例について説明する。実施の形態
２による電子メール通信装置が、次に示すような文章の
電子メールを受信した場合について説明する。

【００５２】○○です。いつものメンバーで、居酒屋△
△で飲んでます。 これますか？ ＜はいｏｒいいえ＞ ＜ｒｅｓｕｌｔ＞ ＜ｉｆはい＞ 何時に来られますか？ ＜しちじｏｒはちじｏｒくじ＞ では、待ってます。 ＜￥ｉｆはい＞ ＜ｉｆいいえ＞ では、また次の機会に。 ＜￥ｉｆいいえ＞ ＜￥ｒｅｓｕｌｔ＞

【００５３】上記のような電子メールを受信した場合、
メール送受信部１は、上記電子メールを受信メールデー
タ２としてメール文解析部３に出力する。メール文解析
部３は、受信メールデータ２の解析処理として、先ず、
「○○です。いつものメンバーで、居酒屋△△で飲んで
ます。これますか？」の部分を音声合成文章データ４と
して音声合成部７に出力し、音声合成部７は音声として
出力する。次に、カギ括弧内の「はいｏｒいいえ」の部
分を語彙データ５として認識辞書作成部９に出力し、認
識辞書１０が作成される。

【００５４】次に、メール文解析部３は、＜ｒｅｓｕｌ
ｔ＞を検出することによって、＜ｒｅｓｕｌｔ＞と＜￥
ｒｅｓｕｌｔ＞とに挟まれた部分を認識結果１３に依存
して処理を行う部分と判断し、音声認識部１２から認識
結果１３が入力するまで待機する。認識結果１３が入力
した場合には、＜ｒｅｓｕｌｔ＞と＜￥ｒｅｓｕｌｔ＞
とに挟まれた部分についての解析処理を行う。なお、こ
の実施の形態２における実施例では、＜ｉｆ［認識結果
１３の内容］＞と＜￥ｉｆ［認識結果１３の内容］＞と
に挟まれた部分が、認識結果１３に依存した処理を示す
部分である。

【００５５】次に、メール文解析部３は、認識結果１３
が「はい」である場合には、＜ｉｆはい＞と＜￥ｉｆは
い＞とに挟まれている「何時に来られますか？＜しちじ
ｏｒはちじｏｒくじ＞では、待ってます。」の部分に対
して解析処理を行い、認識結果１３が「いいえ」である
場合には、＜ｉｆいいえ＞と＜￥ｉｆいいえ＞とに挟ま
れている「では、また次の機会に。」の部分に対して解
析処理を行う。

【００５６】認識結果１３が「はい」である場合には、
メール文解析部３は、「何時に来られますか？」の部分
を音声合成文章データ４として音声合成部７に出力し、
音声合成部７は音声として出力する。次に、メール文解
析部３は、「＜しちじｏｒはちじｏｒくじ＞」の部分が
音声認識における語彙データ５が記述されている部分と
判断し、「ｏｒ」で区切られた「しちじ」，「はち
じ」，「くじ」を語彙データ５として認識辞書作成部９
に出力する。また、音声認識命令６を音声認識部１２に
出力する。

【００５７】次に、認識辞書作成部９は、音響モデルメ
モリ８に記憶されている音響モデルを用いて、「しち
じ」，「はちじ」，「くじ」のそれぞれについて単語モ
デルを作成し、認識辞書１０として音声認識部１２に出
力する。次に、音声認識部１２は、認識辞書１０を用い
て音声入力端１１から入力する音声に対して認識処理を
行い、認識結果１３として、例えば「はちじ」を出力す
る。次に、メール文解析部３は、認識処理が終了した場
合には、「では、待ってます。」を音声合成文章データ
４として音声合成部７に出力し、音声合成部７は音声と
して出力する。次に、返信メール作成部１４は、認識結
果１３と受信メールデータ２とから返信する電子メール
として次に示すような返信メールデータ１５を出力す
る。

【００５８】＞○○です。いつものメンバーで、居酒屋
△△で飲んでます。 ＞これますか？ はい ＞何時に来られますか？ はちじ ＞では、待ってます。

【００５９】認識結果１３が「いいえ」である場合に
は、「では、また次の機会に。」を音声合成文章データ
４として音声合成部７に出力し、音声合成部７は音声と
して出力する。次に、返信メール作成部１４は、認識結
果１３と受信メールデータ２とから返信する電子メール
として次に示すような返信メールデータ１５を出力す
る。

【００６０】＞○○です。いつものメンバーで、居酒屋
△△で飲んでます。 ＞これますか？ いいえ ＞では、また次の機会に。

【００６１】返信メール作成部１４は、上記のような返
信する電子メールである返信メールデータ１５をメール
送受信部１に出力する。次に、メール送受信部１は、受
信メールデータ２の送信者に対して返信メールデータ１
５を電子メールとして返信する。

【００６２】以上説明したように、この実施の形態２に
よる電子メール通信装置は、実施の形態１による電子メ
ール通信装置に加えて、メール文解析手段が、音声認識
手段から出力する認識結果の内容に応じて受信メールデ
ータを解析する部分を変更するようにしたものである。

【００６３】また、以上の説明では、この実施の形態２
を電子メール通信装置としたが、この電子メール通信装
置の各構成要素が行う処理過程を備えた電子メール通信
方法として、この実施の形態２を実現することもでき
る。

【００６４】即ち、この実施の形態２による電子メール
通信方法は、実施の形態１による電子メール通信方法に
加えて、認識結果１３の内容に応じて受信メールデータ
２を解析する部分を変更するステップを有するようにし
たものである。

【００６５】また、この実施の形態２による電子メール
通信方法は、その方法をコンピュータで実行するための
電子メール通信プログラムとして実現することもでき
る。

【００６６】即ち、この実施の形態２による電子メール
通信プログラムは、実施の形態１による電子メール通信
プログラムに加えて、認識結果１３の内容に応じて受信
メールデータ２を解析する部分を変更するステップをコ
ンピュータで実行するようにしたものである。

【００６７】以上のように、この実施の形態２によれ
ば、実施の形態１と同様の効果を奏すると共に、受信メ
ールデータ２の解析処理として音声合成文章データ４の
抽出，音声認識における語彙データ５の抽出，認識結果
１３に依存して処理を行う部分とに分ける処理を行うメ
ール文解析部３を備えるようにしたので、認識結果１３
の内容に応じた音声の出力や返信する電子メールの作成
ができるという効果が得られる。

【００６８】なお、この実施の形態２において、認識結
果１３に依存して処理を行う部分を判断するために、＜
ｒｅｓｕｌｔ＞と＜￥ｒｅｓｕｌｔ＞とを用いて該当す
る部分を挟む場合について説明したが、これに限られる
ものではなく、他の記号や記述子、記述ルールを用いて
もよい。また、認識結果１３の内容に依存して処理を行
う部分を判断するために、＜ｉｆ［認識結果１３の内
容］＞と＜￥ｉｆ［認識結果１３の内容］＞とを用いて
該当する部分を挟む場合について説明したが、これに限
られるものではなく、他の記号や記述子、記述ルールを
用いてもよい。

【００６９】実施の形態３．図３は、この発明の実施の
形態３による電子メール通信装置の構成を示すブロック
図である。図３において、図２と同一符号は同一または
相当部分を示すのでその説明を省略する。但し、３は後
述する音声符号化部に音声符号化命令を出力する点で、
図２に符号３を付して示したものとは異なるメール文解
析部（メール文解析手段）である。図３において、２１
はメール文解析部３から出力する音声符号化命令、２２
は音声符号化命令２１に基づいて音声入力端１１から入
力する音声を符号化する音声符号化部（音声符号化手
段）、２３は音声符号化部２２が符号化した音声符号化
データである。

【００７０】次に動作について説明する。実施の形態３
におけるメール送受信部１，音声合成部７，音響モデル
メモリ８，認識辞書作成部９，音声認識部１２，返信メ
ール作成部１４に係る動作及び奏する効果は、実施の形
態２と同様であるのでその説明を省略する。

【００７１】メール文解析部３は、実施の形態２におい
て説明した動作に加えて、受信メールデータ２の解析処
理として、受信メールデータ２に含まれる音声符号化命
令２１を表す記述子の検出と音声符号化命令２１の出力
とを行う。次に、音声符号化部２２は、音声符号化命令
２１に基づいて、音声入力端１１から入力する音声を符
号化する処理を行い、音声符号化データ２３を返信メー
ル作成部１４に出力する。

【００７２】次に実施例について説明する。実施の形態
３による電子メール通信装置が、次に示すような文章の
電子メールを受信した場合について説明する。

【００７３】明日の夕食の希望があれば、どうぞ。 ＜ｒｅｃ１０＞ どうもありがとう。

【００７４】上記のような電子メールを受信した場合、
メール送受信部１は、上記電子メールを受信メールデー
タ２としてメール文解析部３に出力する。メール文解析
部３は、受信メールデータ２の解析処理として、先ず、
「明日の夕食の希望があれば、どうぞ。」の部分を音声
合成文章データ４として音声合成部７に出力し、音声合
成部７は音声として出力する。次に、メール文解析部３
は、音声符号化命令２１を表す＜ｒｅｃ１０＞を検出
し、音声入力端１１から入力する音声を１０秒間だけ音
声符号化を行うように音声符号化部２２に音声符号化命
令２１を出力する。なお、音声符号化命令２１の記述子
は、＜ｒｅｃ［符号化時間（秒）］＞として表してい
る。

【００７５】次に、音声符号化部２２は、メール文解析
部３が出力した音声符号化命令２１に基づいて、音声入
力端１１から入力する音声を１０秒間だけ音声符号化を
行う。この時、音声符号化部２２が用いる符号化方式
は、例えばＡＤＰＣＭ，ＣＥＬＰ，ＶＣＥＬＰなどを用
いる。但し、この発明の実施の形態３による電子メール
通信装置が、携帯電話等の小型の通信機器に搭載される
場合には、当該通信機器が用いている符号化方式を利用
することによって、機器全体の構成を簡略化するとよ
い。次に、音声符号化部２２は、音声入力端１１から入
力する音声を符号化した音声符号化データ２３を返信メ
ール作成部１４に出力する。

【００７６】次に、メール文解析部３は、音声符号化部
２２による音声の符号化が終了した場合に、「どうもあ
りがとう。」を音声合成文章データ４として音声合成部
７に出力し、音声合成部７は音声として出力する。次
に、返信メール作成部１４は、認識結果１３，受信メー
ルデータ２及び音声符号化データ２３から返信する電子
メールとして、例えば音声入力端１１から入力した音声
が「寒いので鍋物が食べたい」である場合には、次に示
すような返信メールデータ１５を出力する。

【００７７】＞明日の夕食の希望があれば、どうぞ。 ［符号化データ「寒いので鍋物が食べたい」］ ＞どうもありがとう。

【００７８】返信メールデータ１５に挿入される音声符
号化データ２３は、ＵＵＥＮＣＯＤＥでキャラクタ化し
た符号化データを挿入してもよいし、ＭＩＭＥ形式で挿
入してもよい。返信メール作成部１４は、上記のような
返信する電子メールである返信メールデータ１５をメー
ル送受信部１に出力する。次に、メール送受信部１は、
受信メールデータ２の送信者に対して返信メールデータ
１５を電子メールとして返信する。

【００７９】以上説明したように、この実施の形態３に
よる電子メール通信装置は、実施の形態２による電子メ
ール通信装置に加えて、音声符号化命令２１に従って音
声入力端１１から入力する音声を符号化することによっ
て音声符号化データ２３を作成し出力する音声符号化部
２２を備え、メール文解析部３が、受信メールデータ２
を解析することによって音声符号化命令２１を出力し、
返信メール作成部１４が、認識結果１３，受信メールデ
ータ２及び音声符号化データ２３とに基づいて返信する
電子メールを作成し返信メールデータ１５を出力するよ
うにしたものである。

【００８０】また、以上の説明では、この実施の形態３
を電子メール通信装置としたが、この電子メール通信装
置の各構成要素が行う処理過程を備えた電子メール通信
方法として、この実施の形態３を実現することもでき
る。

【００８１】即ち、この実施の形態３による電子メール
通信方法は、実施の形態２による電子メール通信方法に
加えて、受信メールデータ２を解析することによって音
声符号化命令２１を出力するステップと、音声符号化命
令２１に従って音声入力端１１から入力する音声を符号
化することによって音声符号化データ２３を作成し出力
するステップと、認識結果１３，受信メールデータ２及
び音声符号化データ２３とに基づいて返信する電子メー
ルを作成し返信メールデータ１５を出力するステップと
を有するようにしたものである。

【００８２】また、この実施の形態３による電子メール
通信方法は、その方法をコンピュータで実行するための
電子メール通信プログラムとして実現することもでき
る。

【００８３】即ち、この実施の形態３による電子メール
通信プログラムは、実施の形態２による電子メール通信
プログラムに加えて、受信メールデータ２を解析するこ
とによって音声符号化命令２１を出力するステップと、
音声符号化命令２１に従って音声入力端１１から入力す
る音声を符号化することによって音声符号化データ２３
を作成し出力するステップと、認識結果１３，受信メー
ルデータ２及び音声符号化データ２３とに基づいて返信
する電子メールを作成し返信メールデータ１５を出力す
るステップとをコンピュータで実行するようにしたもの
である。

【００８４】以上のように、この実施の形態３によれ
ば、実施の形態２と同様の効果を奏すると共に、音声入
力端１１から入力する音声を符号化することによって音
声符号化データ２３を作成し出力する音声符号化部２２
を備えるようにしたので、音声認識部１２が認識結果１
３として文字列に変換できないような音声に対しても返
信メールデータ１５に挿入することが可能になるという
効果が得られる。

【００８５】なお、この実施の形態３において、音声符
号化命令２１の記述子は、＜ｒｅｃ［符号化時間
（秒）］＞として説明したが、これに限られるものでは
なく、他の記号や記述子、記述ルールを用いてもよい。

【００８６】実施の形態４．図４は、この発明の実施の
形態４による電子メール通信装置の構成を示すブロック
図である。図４において、図３と同一符号は同一または
相当部分を示すのでその説明を省略する。但し、３は後
述する端末操作部に操作命令を出力する点で、図３に符
号３を付して示したものとは異なるメール文解析部（メ
ール文解析手段）である。図４において、３１はメール
文解析部３が出力する操作命令、３２は操作命令３１に
基づいて電子メール通信装置が搭載された端末が有する
種々の出力・表示機能を操作する端末操作部（端末操作
手段）である。

【００８７】次に動作を説明する。実施の形態４におけ
るメール送受信部１，音声合成部７，音響モデルメモリ
８，認識辞書作成部９，音声認識部１２，返信メール作
成部１４，音声符号化部２２に係る動作及び奏する効果
は、実施の形態３と同様であるのでその説明を省略す
る。

【００８８】メール文解析部３は、実施の形態３におい
て説明した動作に加えて、受信メールデータ２の解析処
理として、受信メールデータ２に含まれる操作命令３１
を表す記述子の検出と操作命令３１の出力とを行う。次
に、端末操作部３２は、操作命令３１に基づいて、電子
メール通信装置が搭載された端末が有する種々の出力・
表示機能を操作する。なお、実施の形態４による電子メ
ール通信装置の操作命令３１は、例えば電子メール通信
装置を携帯電話に搭載した場合では、音楽を奏でる、振
動する、液晶画面のライトを点滅させる等の操作を行う
命令を表しているものである。

【００８９】次に実施例について説明する。実施の形態
４による電子メール通信装置が携帯電話に搭載されてお
り、次に示すような文章の電子メールを受信した場合に
ついて説明する。

【００９０】＜ｍｕｓｉｃ Ｃ４Ｄ４Ｅ３＞ こんにちは、△△です。 今日は雪が降って寒かった＜ｖｉｂ３＞ですが、 明日は晴＜ｌｏｎ０．５＞れ＜ｌｏｎ０．５＞そ＜ｌｏ
ｎ０．５＞うですね。

【００９１】上記の電子メールにおいて、＜ｍｕｓｉｃ
［メロディのデータ］＞は音楽を奏でる命令の記述子で
あり、＜ｖｉｂ［振動時間（秒）］＞は振動する命令の
記述子であり、＜ｌｏｎ［点灯時間（秒）］＞及び＜ｌ
ｏｆｆ［消灯時間（秒）］＞は液晶画面のライトを点灯
したり消灯したりする命令の記述子である。

【００９２】上記のような電子メールを受信した場合、
メール送受信部１は、上記電子メールを受信メールデー
タ２としてメール文解析部３に出力する。メール文解析
部３は、受信メールデータ２の解析処理として、先ず、
＜ｍｕｓｉｃ Ｃ４Ｄ４Ｅ３＞の部分を音を鳴らす操作
命令３１として端末操作部３２に出力する。次に、端末
操作部３２は、Ｃ４に対応する端末の操作として、Ｃに
対応する「ド」の音を４に対応する四分音符の長さで鳴
らし、Ｄ４に対応する端末の操作として、Ｄに対応する
「レ」の音を４に対応する四分音符の長さで鳴らし、最
後にＥ３に対応する端末の操作として、Ｅに対応する
「ミ」の音を３に対応する二分音符の長さで鳴らす。

【００９３】音を鳴らす操作命令３１は、「ＣＤＥＦＧ
ＡＢ」が音程の「ドレミファソラシ」に対応しており、
シャープやフラットは、Ｃ＃やＢｂのようにアルファベ
ットの後ろに＃やｂを付けて表現している。また、１オ
クターブ高い音は、Ｃ＋のようにアルファベットの後ろ
に＋を付けて表現し、１オクターブ低い音は、Ｃ−のよ
うにアルファベットの後ろに−を付けて表現している。
また、音の長さは、音程の後ろに数字を付けることによ
って表現し、４が四分音符、３が二分音符、２が全音
符、５が八分音符、６が十六分音符にそれぞれ対応して
いる。

【００９４】次に、メール文解析部３は、「こんにち
は、△△です。今日は雪が降って寒かった」の部分を音
声合成文章データ４として音声合成部７に出力し、音声
合成部７は音声として出力する。次に、メール文解析部
３は、＜ｖｉｂ３＞の部分を端末を振動させる操作命令
３１として端末操作部３２に出力する。次に、端末操作
部３２は、３秒間だけ端末のバイブレーションを駆動す
る。

【００９５】次に、メール文解析部３は、「ですが、明
日は晴（は）」の部分を音声合成文章データ４として音
声合成部７に出力し、音声合成部７は音声として出力す
る。次に、メール文解析部３は、＜ｌｏｎ０．５＞の部
分を液晶画面のライトを点灯させる操作命令３１として
端末操作部３２に出力する。次に、端末操作部３２は、
液晶画面のライトを０．５秒間だけ点灯する。

【００９６】次に、メール文解析部３は、「れ」の部分
を音声合成文章データ４として音声合成部７に出力し、
音声合成部７は音声として出力する。次に、メール文解
析部３は、＜ｌｏｎ０．５＞の部分を液晶画面のライト
を点灯させる操作命令３１として端末操作部３２に出力
する。次に、端末操作部３２は、液晶画面のライトを
０．５秒間だけ点灯する。

【００９７】次に、メール文解析部３は、「そ」の部分
を音声合成文章データ４として音声合成部７に出力し、
音声合成部７は音声として出力する。次に、メール文解
析部３は、＜ｌｏｎ０．５＞の部分を液晶画面のライト
を点灯させる操作命令３１として端末操作部３２に出力
する。次に、端末操作部３２は、液晶画面のライトを
０．５秒間だけ点灯する。次に、メール文解析部３は、
最後の「うですね。」の部分を音声合成文章データ４と
して音声合成部７に出力し、音声合成部７は音声として
出力する。

【００９８】また、受信メールデータ２において、一般
的に電子メールで用いられる記号（「！」や「？！」な
ど）や顔文字（「（＾ｏ＾」や「（＾＾；」など）に対
して、上述した音楽，振動及び液晶画面のライトの点灯
・消灯などの端末が有する種々の出力・表示機能を操作
するように予め操作命令３１を定義しておいた場合で
は、メール文解析部３が、受信メールデータ２の解析処
理において当該記号や当該顔文字を検出した際に、定義
された操作命令３１を端末操作部３２に出力することが
できる。つまり、電子メールの送信者が電子メールの文
章中に挿入する特殊記号（上述した記号や顔文字）が有
する感情表現を、音楽や振動等を用いて電子メールの受
信者に伝えることができる。

【００９９】以上説明したように、この実施の形態４に
よる電子メール通信装置は、実施の形態３による電子メ
ール通信装置に加えて、操作命令３１に従って出力・表
示機能を操作する端末操作部３２を備え、メール文解析
部３が、受信メールデータ２を解析することによって操
作命令３１を出力するようにしたものである。

【０１００】また、以上の説明では、この実施の形態４
を電子メール通信装置としたが、この電子メール通信装
置の各構成要素が行う処理過程を備えた電子メール通信
方法として、この実施の形態４を実現することもでき
る。

【０１０１】即ち、この実施の形態４による電子メール
通信方法は、実施の形態３による電子メール通信方法に
加えて、受信メールデータ２を解析することによって操
作命令３１を出力するステップと、操作命令３１に従っ
て出力・表示機能を操作するステップとを有するように
したものである。

【０１０２】また、この実施の形態４による電子メール
通信方法は、その方法をコンピュータで実行するための
電子メール通信プログラムとして実現することもでき
る。

【０１０３】即ち、この実施の形態４による電子メール
通信プログラムは、実施の形態３による電子メール通信
プログラムに加えて、受信メールデータ２を解析するこ
とによって操作命令３１を出力するステップと、操作命
令３１に従って出力・表示機能を操作するステップとを
コンピュータで実行するようにしたものである。

【０１０４】以上のように、この実施の形態４によれ
ば、操作命令３１に基づいて電子メール通信装置が搭載
された端末が有する種々の出力・表示機能を操作する端
末操作部３２を備えるようにしたので、電子メール通信
装置が搭載された端末（実施例における携帯電話）が有
する種々の出力・表示機能を操作できるから、電子メー
ルの送信者が電子メールの文章中に挿入する感情表現
を、容易に電子メールの受信者に伝えることができると
いう効果が得られる。

【０１０５】なお、この実施の形態４において、＜ｍｕ
ｓｉｃ［メロディのデータ］＞は音楽を奏でる命令の記
述子であり、＜ｖｉｂ［振動時間（秒）］＞は振動する
命令の記述子であり、＜ｌｏｎ［点灯時間（秒）］＞及
び＜ｌｏｆｆ［消灯時間（秒）］＞は液晶画面のライト
を点灯したり消灯したりする命令の記述子であるとして
説明したが、これに限られるものではなく、他の記号や
記述子、記述ルールを用いてもよい。

【０１０６】

【発明の効果】以上のように、この発明によれば、受信
した電子メールを受信メールデータとして出力し返信メ
ールデータが入力した際には電子メールを送信するメー
ル送受信手段と、受信メールデータを解析することによ
って音声合成を行う部分と音声認識に関わる部分とを判
断し、音声合成を行う部分は音声合成文章データとして
出力し、音声認識に関わる部分は語彙データとして出力
すると共に、音声認識を指示する音声認識命令を出力す
るメール文解析手段と、音声合成文章データに基づいて
音声合成を行い音声を出力する音声合成手段と、音響モ
デルに基づいて語彙データの認識辞書を作成し出力する
認識辞書作成手段と、音声認識命令に従って音声入力端
から入力する音声に対して認識辞書によって制限された
認識処理を行うことにより認識結果を出力する音声認識
手段と、認識結果と受信メールデータとに基づいて返信
する電子メールを作成し返信メールデータを出力する返
信メール作成手段とを備えるように構成したので、音声
認識手段における音声の認識処理が、認識対象となる認
識辞書に制限されて行われるから、認識処理の精度が向
上し正しい認識結果が出力されるという効果がある。

【０１０７】この発明によれば、音声符号化命令に従っ
て音声入力端から入力する音声を符号化することによっ
て音声符号化データを作成し出力する音声符号化手段を
備え、メール文解析手段が、受信メールデータを解析す
ることによって音声符号化命令を出力し、返信メール作
成手段が、認識結果，受信メールデータ及び音声符号化
データとに基づいて返信する電子メールを作成し返信メ
ールデータを出力するように構成したので、音声認識手
段が認識結果として文字列に変換できないような音声に
対しても返信メールデータに挿入することが可能になる
という効果がある。

【０１０８】この発明によれば、操作命令に従って出力
・表示機能を操作する端末操作手段を備え、メール文解
析手段が、受信メールデータを解析することによって操
作命令を出力するように構成したので、電子メール通信
装置が搭載された端末が有する種々の出力・表示機能を
操作できるから、電子メールの送信者が電子メールの文
章中に挿入する感情表現を、容易に電子メールの受信者
に伝えることができるという効果がある。

【０１０９】この発明によれば、メール文解析手段が、
音声認識手段から出力する認識結果の内容に応じて受信
メールデータを解析する部分を変更するように構成した
ので、認識結果の内容に応じた音声の出力や返信する電
子メールの作成ができるという効果がある。

【０１１０】この発明によれば、受信した電子メールを
受信メールデータとして出力するステップと、受信メー
ルデータを解析することによって音声合成を行う部分と
音声認識に関わる部分とを判断し、音声合成を行う部分
は音声合成文章データとして出力し、音声認識に関わる
部分は語彙データとして出力すると共に、音声認識を指
示する音声認識命令を出力するステップと、音声合成文
章データに基づいて音声合成を行い音声を出力するステ
ップと、音響モデルに基づいて語彙データの認識辞書を
作成し出力するステップと、音声認識命令に従って音声
入力端から入力する音声に対して認識辞書によって制限
された認識処理を行うことにより認識結果を出力するス
テップと、認識結果と受信メールデータとに基づいて返
信する電子メールを作成し返信メールデータを出力する
ステップと、返信メールデータが入力した際には受信メ
ールデータに対する返信の電子メールとして送信するス
テップとを実行させるように構成したので、音声の認識
処理が認識対象となる認識辞書に制限されて行われるか
ら、認識処理の精度が向上し正しい認識結果が出力され
るという効果を奏する。また、音声の認識処理が認識対
象となる認識辞書に制限されて行われるから、認識処理
の精度が向上し正しい認識結果が出力されるコンピュー
タで実行可能なプログラムを得ることができるという効
果がある。

【０１１１】この発明によれば、受信メールデータを解
析することによって音声符号化命令を出力するステップ
と、音声符号化命令に従って音声入力端から入力する音
声を符号化することによって音声符号化データを作成し
出力するステップと、認識結果，受信メールデータ及び
音声符号化データとに基づいて返信する電子メールを作
成し返信メールデータを出力するステップとを実行させ
るように構成したので、認識結果として文字列に変換で
きないような音声に対しても返信メールデータに挿入す
ることが可能になるという効果を奏する。また、認識結
果として文字列に変換できないような音声に対しても返
信メールデータに挿入することが可能になるコンピュー
タで実行可能なプログラムを得ることができるという効
果がある。

【０１１２】この発明によれば、受信メールデータを解
析することによって操作命令を出力するステップと、操
作命令に従って出力・表示機能を操作するステップとを
実行させるように構成したので、端末が有する種々の出
力・表示機能を操作できるから、電子メールの送信者が
電子メールの文章中に挿入する感情表現を、容易に電子
メールの受信者に伝えることができるという効果を奏す
る。また、端末が有する種々の出力・表示機能を操作で
きるから、電子メールの送信者が電子メールの文章中に
挿入する感情表現を、容易に電子メールの受信者に伝え
ることができるコンピュータで実行可能なプログラムを
得ることができるという効果がある。

【０１１３】この発明によれば、認識結果の内容に応じ
て受信メールデータを解析する部分を変更するステップ
を実行させるように構成したので、認識結果の内容に応
じた音声の出力や返信する電子メールの作成ができると
いう効果を奏する。また、認識結果の内容に応じた音声
の出力や返信する電子メールの作成ができるコンピュー
タで実行可能なプログラムを得ることができるという効
果がある。

【図面の簡単な説明】

【図１】 この発明の実施の形態１による電子メール通
信装置の構成を示すブロック図である。

【図２】 この発明の実施の形態２による電子メール通
信装置の構成を示すブロック図である。

【図３】 この発明の実施の形態３による電子メール通
信装置の構成を示すブロック図である。

【図４】 この発明の実施の形態４による電子メール通
信装置の構成を示すブロック図である。

【図５】 従来の電子メール通信装置の構成を示すブロ
ック図である。

【符号の説明】 １ メール送受信部（メール送受信手段）、２ 受信メ
ールデータ、３ メール文解析部（メール文解析手
段）、４ 音声合成文章データ、５ 語彙データ、６
音声認識命令、７ 音声合成部（音声合成手段）、８
音響モデルメモリ、９ 認識辞書作成部、１０ 認識辞
書、１１ 音声入力端、１２ 音声認識部（音声認識手
段）、１３ 認識結果、１４ 返信メール作成部（返信
メール作成手段）、１５ 返信メールデータ、２１ 音
声符号化命令、２２ 音声符号化部（音声符号化手
段）、２３ 音声符号化データ、３１ 操作命令、３２
端末操作部（端末操作手段）。

フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｇ１０Ｌ 19/00 Ｇ１０Ｌ 9/18 Ａ

Claims (12)

【特許請求の範囲】
1. 【請求項１】 受信した電子メールを受信メールデータ
   として出力し、返信メールデータが入力した際には電子
   メールを送信するメール送受信手段と、 前記受信メールデータを解析することによって音声合成
   を行う部分と音声認識に関わる部分とを判断し、音声合
   成を行う部分は音声合成文章データとして出力し、音声
   認識に関わる部分は語彙データとして出力すると共に、
   音声認識を指示する音声認識命令を出力するメール文解
   析手段と、 前記音声合成文章データに基づいて音声合成を行い音声
   を出力する音声合成手段と、 音響モデルに基づいて前記語彙データの認識辞書を作成
   し出力する認識辞書作成手段と、 前記音声認識命令に従って、音声入力端から入力する音
   声に対して前記認識辞書によって制限された認識処理を
   行うことにより認識結果を出力する音声認識手段と、 前記認識結果と前記受信メールデータとに基づいて、返
   信する電子メールを作成し前記返信メールデータを出力
   する返信メール作成手段とを備える電子メール通信装
   置。
2. 【請求項２】 音声符号化命令に従って音声入力端から
   入力する音声を符号化することによって音声符号化デー
   タを作成し出力する音声符号化手段を備え、メール文解
   析手段は、受信メールデータを解析することによって前
   記音声符号化命令を出力し、返信メール作成手段は、認
   識結果，前記受信メールデータ及び前記音声符号化デー
   タとに基づいて返信する電子メールを作成し返信メール
   データを出力することを特徴とする請求項１記載の電子
   メール通信装置。
3. 【請求項３】 操作命令に従って出力・表示機能を操作
   する端末操作手段を備え、メール文解析手段は、受信メ
   ールデータを解析することによって前記操作命令を出力
   することを特徴とする請求項１または請求項２記載の電
   子メール通信装置。
4. 【請求項４】 メール文解析手段は、音声認識手段が出
   力する認識結果の内容に応じて、受信メールデータを解
   析する部分を変更することを特徴とする請求項１から請
   求項３のうちのいずれか１項記載の電子メール通信装
   置。
5. 【請求項５】 受信した電子メールを受信メールデータ
   として出力するステップと、 前記受信メールデータを解析することによって音声合成
   を行う部分と音声認識に関わる部分とを判断し、音声合
   成を行う部分は音声合成文章データとして出力し、音声
   認識に関わる部分は語彙データとして出力すると共に、
   音声認識を指示する音声認識命令を出力するステップ
   と、 前記音声合成文章データに基づいて音声合成を行い音声
   を出力するステップと、 音響モデルに基づいて前記語彙データの認識辞書を作成
   し出力するステップと、 前記音声認識命令に従って、音声入力端から入力する音
   声に対して前記認識辞書によって制限された認識処理を
   行うことにより認識結果を出力するステップと、 前記認識結果と前記受信メールデータとに基づいて、返
   信する電子メールを作成し返信メールデータを出力する
   ステップと、 前記返信メールデータが入力した際には前記受信メール
   データに対する返信の電子メールとして送信するステッ
   プとを有する電子メール通信方法。
6. 【請求項６】 受信メールデータを解析することによっ
   て音声符号化命令を出力するステップと、前記音声符号
   化命令に従って音声入力端から入力する音声を符号化す
   ることによって音声符号化データを作成し出力するステ
   ップと、認識結果，前記受信メールデータ及び前記音声
   符号化データとに基づいて返信する電子メールを作成し
   返信メールデータを出力するステップとを有することを
   特徴とする請求項５記載の電子メール通信方法。
7. 【請求項７】 受信メールデータを解析することによっ
   て操作命令を出力するステップと、前記操作命令に従っ
   て出力・表示機能を操作するステップとを有することを
   特徴とする請求項５または請求項６記載の電子メール通
   信方法。
8. 【請求項８】 認識結果の内容に応じて、受信メールデ
   ータを解析する部分を変更するステップを有することを
   特徴とする請求項５から請求項７のうちのいずれか１項
   記載の電子メール通信方法。
9. 【請求項９】 コンピュータに受信した電子メールを受
   信メールデータとして出力するステップと、 前記受信メールデータを解析することによって音声合成
   を行う部分と音声認識に関わる部分とを判断し、音声合
   成を行う部分は音声合成文章データとして出力し、音声
   認識に関わる部分は語彙データとして出力すると共に、
   音声認識を指示する音声認識命令を出力するステップ
   と、 前記音声合成文章データに基づいて音声合成を行い音声
   を出力するステップと、 音響モデルに基づいて前記語彙データの認識辞書を作成
   し出力するステップと、 前記音声認識命令に従って、音声入力端から入力する音
   声に対して前記認識辞書によって制限された認識処理を
   行うことにより認識結果を出力するステップと、 前記認識結果と前記受信メールデータとに基づいて、返
   信する電子メールを作成し返信メールデータを出力する
   ステップと、 前記返信メールデータが入力した際には前記受信メール
   データに対する返信の電子メールとして送信するステッ
   プとを実行させるための電子メール通信プログラム。
10. 【請求項１０】 コンピュータに受信メールデータを解
    析することによって音声符号化命令を出力するステップ
    と、前記音声符号化命令に従って音声入力端から入力す
    る音声を符号化することによって音声符号化データを作
    成し出力するステップと、認識結果，前記受信メールデ
    ータ及び前記音声符号化データとに基づいて返信する電
    子メールを作成し返信メールデータを出力するステップ
    とを実行させることを特徴とする請求項９記載の電子メ
    ール通信プログラム。
11. 【請求項１１】 コンピュータに受信メールデータを解
    析することによって操作命令を出力するステップと、前
    記操作命令に従って出力・表示機能を操作するステップ
    とを実行させることを特徴とする請求項９または請求項
    １０記載の電子メール通信プログラム。
12. 【請求項１２】 コンピュータに認識結果の内容に応じ
    て、受信メールデータを解析する部分を変更するステッ
    プを実行させることを特徴とする請求項９から請求１１
    のうちのいずれか１項記載の電子メール通信プログラ
    ム。