JPH0823345A - マルチメディア欠落情報補完メール方法及びマルチメディア欠落情報補完メール装置 - Google Patents

Abstract

(57)【要約】 【目的】 本発明の目的は、メディア変換によって欠落
した情報を別の手段で救済することが可能なマルチメデ
ィア欠落情報補完メール方法及びマルチメディア欠落情
報補完メール装置を提供することである。 【構成】 本発明は、一定時間メールボックスに受信し
た電子メールが残っていることを確認後、電子メールよ
り文字情報、画像情報、音声情報毎にメールボックスの
記憶手段に格納し、格納されている音声情報または、画
像情報をアクセスするためのアクセス情報を、記憶手段
内に格納されている画像情報または、音声情報に付加し
て受信側の端末装置に送信し、受信側の端末装置がアク
セス情報に基づいてメールセンタに音声情報または、画
像情報をアクセスする。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、マルチメディア欠落情
報補完メール方法及びマルチメディア欠落情報補完メー
ル装置に係り、特に、文字、画像、音声を含むマルチメ
ディア情報をメールセンタを介して電子メールを送受信
通信端末間で送受信する場合に、種々のマルチメディア
データを扱うためのマルチメディア欠落情報補完メール
方法及びマルチメディア欠落情報補完メール装置に関す
る。

【０００２】

【従来の技術】図１９は、従来のマルチメディア通信を
示す。同図に示す通信形態として、電子メールを例とす
る通信を示す。送信側端末装置１０から音声データを含
むマルチメディア電子メールを、受信側端末装置３０で
あるファクシミリ端末に送信する場合には、文字データ
及び画像データは送信することができる。このとき、音
声データが欠落するため、受信側端末装置３０は、この
音声データは破棄し、文字データ及び画像データを受信
する。

【０００３】また、送信側端末装置１０から画像データ
を含む電子メールを、受信側の電話端末３１からのアク
セス要求に応じて再生する場合に、電子メールボックス
２１より電子メールの文字部分を抽出し、文字音声変換
部２２で音声変換して電話端末３１に送信する。このと
き画像データが欠落するが受信側端末装置３０はこの画
像データは破棄し、音声データ及び文字データが変換さ
れた音声データを受信する。

【０００４】

【発明が解決しようとする課題】しかしながら、上記従
来の技術においては、文字データ以外に、画像データ、
音声データを扱うことが可能な電子メールは存在してい
るが、電子メールに含まれるメディアを扱うことができ
ない端末装置で読み出そうとすると、以下のような問題
がある。

【０００５】第１に、音声データを含むマルチメディア
電子メールを、ファクシミリ端末装置に送信する場合
に、文字データと画像データは送信できるが、音声デー
タが欠落するため、例えば、画像データのみが出力され
ても、当該画像データに対応する音声が聞けないという
問題がある。

【０００６】第２に、画像データを含むマルチメディア
電子メールを、電話端末を利用してアクセスされ、これ
を再生する場合に、文字データ部分は文字音声変換手段
により変換可能であるが、現状では画像データ部分につ
いては、音声変換が不可能である。これは、現在の技術
では、完全な音声認識や、画像理解ができないという状
況であり、以下の表１に示すように、“×”で示すメデ
ィア間の変換は現状では不可能である。

【０００７】

【表１】 つまり、文字データから画像データまたは音声データに
は変換可能であるが、画像データから文字データまたは
音声データへの変換、及び音声データから文字データま
たは画像データへの変換は、不可能であることを示して
いる。従って、データ属性間の変換が不可能な場合に
は、当該データは欠落することになる。

【０００８】本発明は、上記の点に鑑みなされたもの
で、メディア変換の限界を認識しつつ、メディア変換に
よって欠落した情報を別の手段で救済することが可能な
マルチメディア欠落情報補完メール方法及びマルチメデ
ィア欠落情報補完メール装置を提供することを目的とす
る。

【０００９】また、本発明の更なる目的は、メールボッ
クスに格納されている情報をマルチメディア情報のう
ち、音声情報が扱えない端末装置である場合に、音声情
報が欠落しないマルチメディア欠落情報補完メール方法
及びマルチメディア欠落情報補完メール装置を提供する
ことを目的とする。

【００１０】また、本発明の更なる目的は、受信者側の
ユーザがマルチメディアを扱うことができる端末を所有
しない場合に、代替メディアを用いても欠落する情報が
発生しないようなマルチメディア欠落情報補完メール方
法及びマルチメディア欠落情報補完メール装置を提供す
ることを目的とする。

【００１１】

【課題を解決するための手段】図１は、本発明の原理を
説明するためのシーケンスチャート（その１）である。

【００１２】本発明のマルチメディア欠落情報補完メー
ル方法は、送信側である送信側の端末装置から文字情
報、画像情報、音声情報を含む情報（以下、マルチメデ
ィア情報）を扱う蓄積型通信メッセージ（電子メール）
を文字情報、画像情報、音声情報毎に格納するメールボ
ックスを有するメールセンタを介して受信側の端末装置
に送信する場合に、送信側の端末装置から送信されたマ
ルチメディア情報をメールセンタで受信し（ステップ
１）、一定時間メールボックスに電子メールが残ってい
ることを確認後、電子メールより文字情報、画像情報、
音声情報毎にメールボックスの記憶手段に格納し（ステ
ップ２）、格納されている音声情報（又は、画像情報）
をアクセスするためのアクセス情報を記憶手段内に格納
された画像情報（又は、音声情報）に付加して（ステッ
プ３）受信側の端末装置（ファクシミリ端末）に送信し
（ステップ４）、受信側の端末装置がアクセス情報に基
づいてメールセンタに音声情報（または、画像情報）を
アクセスする（ステップ５）。

【００１３】図２は、本発明の原理を説明するためのシ
ーケンスチャート（その２）である。本発明は、メール
センタにて、画像情報を受信側の端末装置に送信する場
合に、記憶手段に登録されている文字情報を画像情報に
変換し（ステップ１０）、記憶手段に登録されている画
像情報と合成し（ステップ１１）、合成された画像情報
に音声情報の有無情報を付与し（ステップ１２）、受信
側の端末装置にファクシミリ送信を行い（ステップ１
３）、ファクシミリ送信された情報に音声情報が存在す
る旨が表示されている場合に（ステップ１４）、電話端
末によりアクセス情報に基づいてメールセンタにアクセ
スし（ステップ１５）、メールセンタより音声情報を取
得する。

【００１４】図３は、本発明の原理を説明するためのシ
ーケンスチャート（その３）である。本発明は、メール
センタにてメールボックスの電子メールから文字情報を
抽出して音声情報に変換し（ステップ２１）、変換され
た音声情報にアクセス情報を付加して（ステップ２２）
電話端末に出力し（ステップ２３）、受信側のファクシ
ミリ端末よりアクセス情報を入力し（ステップ２４）、
アクセス情報に基づいてメールセンタにアクセスし（ス
テップ２５）、画像情報をメールセンタよりファクシミ
リ通信により取得する（ステップ２６）。

【００１５】また、上記のアクセス情報として、記憶手
段に格納されている音声情報または画像情報の所定のア
クセス番号及び連絡番号を用いる。

【００１６】また、本発明は、受信側の端末装置が音声
情報の授受が可能である場合に、メールセンタにて電子
メールに音声情報が含まれている場合には、音声情報に
アクセス情報を付与して記憶手段に蓄積し、音声情報が
含まれている旨を受信側の端末装置に送信し、受信側の
端末装置に音声情報が存在するメッセージを表示し、受
信側の端末装置から音声メッセージ出力指示が入力され
ると、メールセンタの記憶手段に蓄積されている音声情
報をアクセス情報により検索し、音声情報を受信側の端
末装置に出力する。

【００１７】図４は、本発明の原理構成図である。本発
明のマルチメディア欠落情報補完メール装置は、文字情
報、画像情報及び音声情報を同時に扱う蓄積型通信であ
る電子メールとして通信する通信端末１０、３１、３２
と、通信端末毎にメールボックスを有し、通信端末１
０、３１、３２からのメールの送信、配信を行うメール
センタ２０と、メールセンタ２０に接続され、メールボ
ックスの情報のうち音声情報を抽出し、蓄積する音声情
報蓄積手段４００と、メールセンタ２０に接続され、メ
ールボックスの情報のうち、文字情報を画像情報に変換
し、変換した画像情報と、メールボックスの画像情報を
合成し、合成された画像情報に音声情報蓄積手段４００
をアクセスするためのアクセス情報を付加して蓄積する
画像情報蓄積手段５００と、通信端末３２に対して画像
情報蓄積手段５００に蓄積されている画像情報をファク
シミリ通信により送出するファクシミリ通信手段６００
と、ファクシミリ通信手段６００により取得した画像情
報に付与されているアクセス情報に基づいて音声情報蓄
積手段４００の音声情報を取得する電話端末３１とを有
する。

【００１８】また、本発明は、文字情報、画像情報及び
音声情報を同時に扱う蓄積型通信である電子メールとし
て通信する通信端末１０、３１、３２と、通信端末毎に
メールボックスを有し、通信端末からのメールの送信、
配信を行うメールセンタ２０と、メールセンタ２０に接
続され、メールボックスの情報のうち画像情報を抽出
し、蓄積する画像情報蓄積手段５００と、音声によりメ
ールボックスに蓄積されている情報の取得要求を発行す
る電話端末３１と、電話端末３１より情報取得要求が発
行された場合に、メールボックスに蓄積されている文字
情報を音声情報に変換し、変換された音声情報とメール
ボックスの音声情報を合成し、画像情報をアクセスする
ためのアクセス情報を合成された音声情報に付加して電
話端末３１に送信する音声情報送信手段７００と、音声
情報送信手段７００により取得したアクセス情報に基づ
いて画像情報蓄積手段５００に蓄積されている画像情報
を検索し、ファクシミリ通信により送出するファクシミ
リ通信手段６００とを有する。

【００１９】

【作用】本発明は、アクセスする場合に、欠落する情報
が音声情報部分である場合に、文字情報を画像情報に変
換し、音声情報をアクセスするためのアクセス情報を付
与して受信側の端末装置に送信し、受信側でこの画像情
報を読み取り、読み取った内容より当該アクセス情報を
抽出し、そのアクセス情報を電話端末より入力する。即
ち、電話端末よりダイヤルすることによりメールセンタ
に接続され、受話器より音声情報を聴くことが可能であ
る。

【００２０】また、本発明は、受信側の端末装置におい
て音声情報の出力が可能であれば、端末装置に音声情報
がメールセンタ内のメールボックス内に存在しているこ
とを表示し、受信側の端末装置より所定の出力操作を行
うことにより、音声情報が取得できる。

【００２１】また、本発明は、アクセス場合に、欠落す
る情報が画像情報部分である場合に、文字情報を音声情
報に変換し、当該音声情報に画像情報のアクセス情報を
付与して電話端末に出力し、これをユーザが聴取し、フ
ァクシミリ装置より当該アクセス情報を入力して、画像
情報をファクシミリ装置に出力させるものである。

【００２２】これにより、マルチメディアデータを扱う
ことが可能な端末装置を所有していない場合でも、電話
端末とファクシミリ装置を用いて、電子メールの情報を
取得することができる。

【００２３】このように、本発明は、欠落する情報が音
声情報か画像情報であるかにより、言い換えれば情報を
取得しようとする端末装置の種類により、欠落するする
情報を補完する。

【００２４】さらに、本発明は、音声情報も扱うことが
可能な通信端末装置を使用する場合には、音声情報が存
在するメッージを表示しておき、音声情報出力指示を入
力することにより、音声情報を取得できる。

【００２５】

【実施例】以下、図面と共に本発明の実施例を詳細に説
明する。

【００２６】図５は、本発明の一実施例のマルチメディ
アシステムの構成を示す。同図において、マルチメディ
ア欠落情報補完メールシステムは、送信側通信端末装置
１０、ユーザ不在や端末の故障等により受信可能な状態
にない受信側端末装置３０（但し、本発明の情報補完方
法では、受信側端末装置３０は必須構成要件ではな
い）、メールセンタ２０、通信網５０、電話端末３１、
ファクシミリ端末３２、メールセンタ２０に接続されて
いるメール操作装置群４０より構成される。

【００２７】メール操作装置群４０は、メールセンタ２
０内のメールボックスに格納されているメールの情報を
抽出する情報抽出部２３、文字情報を画像情報に変換す
る文字画像変換装置２４、音声情報を蓄積する音声蓄積
装置２５、文字情報を音声情報に変換する文字音声変換
装置２６、画像情報を蓄積する画像蓄積装置２７、時間
情報を取得するための時計２８、回線に対して発信動作
を実行する回線発信装置２９より構成される。

【００２８】送信側端末装置１０及び受信側端末装置３
０は、マルチメディアの情報を送受信できる通信機能を
有し、メールセンタ２０と通信する機能を有する。

【００２９】図６は、本発明の一実施例のメールセンタ
の構成を示す。メールセンタ２０は、メール操作装置群
４０を制御するための欠落情報補完制御装置２０１、メ
ールボックス２０２、及びメールセンタ２０に収容され
ているユーザの情報が格納されているユーザ情報データ
ベース２０４を有する。

【００３０】本実施例では、メールセンタ２０は、通信
網５０に対して回線発信装置２９により操作される回線
制御により発信し、通信網５０に接続されているファク
シミリ端末３２にファクシミリ出力用の情報を送信す
る。送信先のファクシミリ番号は、電子メール利用者の
ユーザ登録により予め格納されているユーザ情報データ
ベース２０２を検索することにより、指定されたユーザ
の最寄りのファクシミリ番号を取得する。

【００３１】メールセンタ２０に接続されている情報抽
出部２３は、メールセンタ２０の欠落情報補完制御装置
２０１の制御により、送信側端末装置１０から送信され
たメール内の、種々の情報種別を判定することにより、
文字情報部分、画像情報部分及び音声情報部分を認識し
て抽出する。文字画像変換装置２４は、情報抽出部２３
で抽出された文字情報が欠落情報補完制御装置２０１の
制御により入力されると、画像情報に変換する。文字音
声変換装置２６は、情報抽出部２３で検出された文字情
報が同様に、欠落情報補完制御装置２０１の制御により
入力されると、音声情報に変換する。

【００３２】音声蓄積装置２５は、情報抽出部２３で抽
出された音声情報を蓄積する。また、音声蓄積装置２５
は、音声情報と共に、当該音声情報に対応するように格
納位置情報（アクセス情報）も格納される。図７は、本
発明の一実施例の音声蓄積装置の構成を示す。同図に示
す音声蓄積装置２５は、制御部２５１、通信制御部２５
２、音声メール管理テーブル用メモリ２５３及び音声記
憶部２５４より構成される。通信制御部２５２がメール
センタ２０との間で音声情報の送受信を行い、音声情報
を音声記憶部２５４に蓄積する。音声情報を蓄積する際
に、メールセンタ２０より連絡番号を取得し、音声メー
ル管理テーブル用メモリ２５３に格納する。音声記憶部
２５４に蓄積される音声情報は、音声メール管理テーブ
ル２５３に格納された連絡番号を制御部２５１が検索
し、当該連絡番号と対応させて音声記憶部２５４の領域
が指定され、音声情報が蓄積される。

【００３３】画像蓄積装置２７は、マルチメディアの情
報に含まれる画像情報を蓄積する。図８は、本発明の一
実施例の画像蓄積装置の構成を示す。同図に示す画像蓄
積装置２７は、制御部２７１、通信制御部２７２、画像
メール管理テーブル用メモリ２７３及び画像記憶部２７
４より構成される。同図の構成において、メールセンタ
２０から通信制御部２７２を介して画像情報が入力され
ると、制御部２７１はメールセンタ２０より入力された
画像情報を画像記憶部２７４に登録すると共に、画像記
憶部２７４に登録した画像情報の登録位置情報を画像メ
ール管理テーブル用メモリ２７３に記録する。

【００３４】時計２８は、その時点における時刻情報を
得て、送信側端末装置１０から送信された電子メールの
情報を、メールセンタ２０内の受信側端末装置３０に対
応するメールボックス２０２に格納してからの経過時間
を測定する。

【００３５】図９は、本発明の一実施例のマルチメディ
ア電子メールのデータ構成例を示す。同図に示すデータ
構成は、宛先情報１１０、ヘッダ１２０及びボディ１３
０より構成される。ボディ１３０は、各情報に対応する
メディアの種別情報を当該情報と共に格納する。同図に
おいて、ボディ１３０はメディア種別１３１と文字情報
１３２、メディア種別１３３と画像情報１３４、メディ
ア種別１３５と音声情報１３６により構成される。例え
ば、文字情報１３２に対応するメディア種別を“１”、
画像情報１３４に対応するメディア種別を“２”、音声
情報に対応するメディア種別を“３”とする。これによ
り、情報抽出部２３は、このメディア種別１３１、１３
３、１３４を参照することにより、情報の種別を判定す
る。

【００３６】［第１の実施例］以下に第１の実施例とし
て、メールセンタ２０のメールボックス２０２に蓄積さ
れている送信側端末装置１０より送信された文字情報、
画像情報及び音声情報を受信側端末装置３０に送信する
場合に、音声情報を補完する場合について説明する。本
実施例では、受信側のユーザが所持している端末装置
は、ファクシミリ端末３２と電話端末３１であるとす
る。

【００３７】図１０は、本発明の第１の実施例のシステ
ム構成を示す。送信側端末装置１０及び受信側端末装置
３０は、マルチメディアの情報を送受信できる通信機能
を有し、メールセンタ２０と通信するものとし、同図の
例においては、送信側端末装置１０が電子メール（以
下、メールと記す）をメールセンタ２０に送信し、送信
された情報は、メールセンタ２０のメールボックス２０
２に蓄積される。メールセンタ２０の欠落情報補充制御
装置２０１は、メールボックス２０２に蓄積されている
情報のうち、文字情報を文字画像変換装置２４により画
像情報に変換するように制御する。変換された画像情報
は回線発信装置２９を介してファクシミリ端末３１に送
信する。このとき、メールボックス２０２に蓄積されて
いるメールのメディア種別１３５及び音声情報１３６に
データが存在する場合には、ファクシミリ端末３１に送
信するデータに音声情報が存在する旨と連絡番号を付加
して送信する。

【００３８】受信側のユーザがファクシミリ端末３１に
出力された結果を見て、送信されたデータに音声情報の
存在を示す表示がある場合には、ユーザが電話端末３２
よりメールセンタ２０により指定されている連絡番号に
発呼し、発呼先より音声情報を取得する。

【００３９】図１１は、本発明の第１の実施例のメール
センタの動作の概要を示すフローチャートである。

【００４０】ステップ１０１）送信側端末装置１０は、
受信側端末装置３０宛の文字情報、音声情報及び画像情
報を含むマルチメディアメール（以下、メールと記す）
を通信網５０を介してメールセンタ２０に送信する。

【００４１】ステップ１０２）メールセンタ２０は、メ
ールの宛先情報１１０を参照して受信側の端末に対応す
るメールボックス２０２にメールを格納する。

【００４２】ステップ１０３）さらに、メールセンタ２
０は、メールボックス２０２にメールが送信された時点
からの経過時間を時計２８を用いて測定する。

【００４３】ステップ１０４）メールセンタ２０は、時
計２８による測定の結果、受信側の端末が、受信したメ
ールを取り出さないまま所定の時間が経過している場合
には、受信者の最寄りのファクシミリ番号及び受信側端
末装置３０のアクセス番号をユーザ情報データベース２
０４より取得する。さらに、送信側ユーザ情報データベ
ース２０５より送信側端末の識別情報を取得する。メー
ルセンタ２０は、これらのファクシミリ番号及び送信側
の識別情報を図９に示す形式のヘッダ１２０に設定し、
画像蓄積装置２７に蓄積する。

【００４４】ステップ１０５）メールセンタ２０は、メ
ールボックス２０２に格納されているメールの内容よ
り、テキスト部分（文字情報）を抽出し、文字画像変換
装置２４により画像情報に変換する。変換された画像情
報とメールボックス２０２に格納されている画像情報と
合成し、画像蓄積装置２７に蓄積する。また、メールセ
ンタ２０のメールボックス２０２に格納されている情報
に音声情報１３６に情報が格納されている場合には、受
信側が音声情報を取得するための所定の連絡番号（電話
番号）も併せて蓄積する。

【００４５】ステップ１０６）メールセンタ２０は、ス
テップ１０５で合成され、画像蓄積装置２７に蓄積され
ている画像情報を回線発信装置２９を介して、ステップ
１０４で取得したファクシミリ番号に基づいて、それぞ
れの端末に送信する。

【００４６】ステップ１０７）メールセンタ２０から画
像情報を取得したファクシミリ端末３２は、取得した情
報を出力する。

【００４７】ステップ１０８）受信側端末装置３０また
は、ファクシミリ端末３２に音声情報が存在する旨のメ
ッセージが表示されている場合に、ユーザが電話端末３
１により所定のアクセス番号に発呼して、受話器より音
声情報を取得する。

【００４８】上記のステップ１０５において、メールセ
ンタ２０が受信側のファクシミリ端末３２に画像情報を
送信する場合の画像蓄積装置２７の動作を説明する。図
１２は、本発明の一実施例の画像蓄積装置に画像情報を
登録する動作のフローチャートである。

【００４９】ステップ１０５１）メールセンタ２０の欠
落情報補完制御装置２０１は、メールボックス２０２に
格納されているメールより、メディア種別を参照して文
字情報を抽出し、文字画像変換装置２４に出力する。

【００５０】ステップ１０５２）文字画像変換装置２４
は、入力された文字情報を画像情報に変換し、画像蓄積
装置２７に出力する。

【００５１】ステップ１０５３）また、欠落情報補完制
御装置２０１は、メールボックス２０２に格納されてい
るメールより、メディア種別を参照して画像情報を抽出
し、画像蓄積装置２７に出力する。画像蓄積装置２７
は、制御部２７１により文字画像変換装置２４で変換さ
れた画像情報と、抽出された画像情報を合成し、画像記
憶部２７４に出力する。

【００５２】ステップ１０５４）図１３は、本発明の第
１の実施例の画像記憶部に格納されるデータの構成例を
示す。画像記憶部３７４は、合成された画像情報をファ
クシミリ通信用の画像データとして合成情報格納位置３
４６に格納する。ここで、メディア種別“４”は、ファ
クシミリ通信用合成情報を意味する。さらに、ステップ
１０４で取得したファクシミリ番号等の宛先情報格納位
置３１０、送信側端末装置１０の識別情報及び受信側端
末装置３０の識別情報等をヘッダ部３２０に格納する。
メールボックス２０２中に抽出された画像情報及び文字
情報と共に音声情報が存在する場合には、音声情報存在
フラグ３３１に“１”を設定し、存在しない場合には、
“０”とする。

【００５３】ステップ１０５５）通信制御部２７２は、
制御部２７１にファクシミリ端末装置番号と、メールの
ヘッダ欄１２０に設定されている送信側端末の識別情報
や情報のタイトルを管理情報として送信する。

【００５４】ステップ１０５７）制御部２７１は、通信
制御部２７２より上記の管理情報を取得すると、画像メ
ール管理テーブル用メモリ２７３に格納する。

【００５５】上記の図１２の処理により登録された情報
を受信側のファクシミリ端末に送信する場合には、以下
の図１４に示す処理を行う。図１４は、本発明の第１の
実施例の画像情報を受信側のファクシミリ端末３２に送
信する動作のフローチャートである。

【００５６】ステップ１０６１）メールセンタ２０は、
画像蓄積装置２７の通信制御部２７２にメール転送要求
を入力する。

【００５７】ステップ１０６２）画像蓄積装置２７の通
信制御部２７２は、メールセンタ２０のメール転送要求
指示により、制御部２７１に指示情報を通知する。制御
部２７１は、画像メール管理テーブル用メモリ２７３よ
り指示情報に対応する管理情報を検索すると共に、画像
記憶部２７４より指示情報に対応する画像情報を取得
し、通信制御部２７２に転送する。ファクシミリ通信を
行う場合には、図１３に示すメディア種別“４”の合成
情報と、音声情報存在フラグ３３１が“１”である場合
には、音声情報存在メッセージ３３２を抽出して転送す
る。

【００５８】ステップ１０６３）通信制御部２７２は、
管理情報と画像情報を回線発信装置２９に送出する。

【００５９】ステップ１０６４）回線発信装置２９は、
管理情報に含まれるファクシミリ番号に対して、合成情
報及び音声情報存在メッセージを送信する。

【００６０】これにより、欠落する音声情報を補完する
ために、ファクシミリ送信する合成情報（画像情報）に
所定の音声情報存在メッセージとして連絡番号を付加し
て送信し、受信側のファクシミリ装置の出力時にユーザ
が認識することにより、当該連絡番号により連絡をと
る。

【００６１】上記のフローチャートは、メールセンタ２
０が送信する受信側の端末装置は、ファクシミリ端末３
２の例であるが、受信側において、文字、画像、音声等
の種々の情報を受信可能な端末装置３０を用いる場合に
は、メールセンタ２０のメールボックス２０２に格納さ
れているメールの文字情報、画像情報は変換せずに、そ
のまま回線発信装置２９を介して受信側端末装置３０に
送信する。

【００６２】また、図１２に示すフローチャートのステ
ップ１０５３において、合成される前の文字情報をボデ
ィ部３４０の文字情報格納位置３４２に格納し、同様に
合成される前の画像情報を画像情報格納位置３４４に格
納する。また、ステップ１０５３において制御部２７１
により合成された合成情報は合成情報格納位置３４６に
格納される。これにより、格納された文字情報及び画像
情報はそれぞれ受信側端末装置３０に送信することがで
き、合成情報格納位置３４６に格納されている合成情報
は、ファクシミリ通信に使用することが可能である。

【００６３】このとき、メール中に音声情報が存在する
場合には、音声情報を音声蓄積装置２５に登録すると共
に、登録した領域の位置情報を音声メール管理テーブル
用メモリ２５３に登録する。さらに、メールセンタ２０
は、画像情報に音声情報が存在する旨の通知情報を付与
して送信するものとする。ユーザは、受信側端末装置３
０のディスプレイに通知情報が表示されていれば、マウ
スをクリックする等して音声情報の出力要求をメールセ
ンタ２０に行う。これにより、メールセンタ２０の欠落
情報補充制御装置２０１は、音声蓄積装置２５に格納さ
れている音声情報を取得して受信側端末装置３０に送信
する。ユーザは受信側端末装置３０よりメールセンタ２
０の音声情報をアクセスして聴く。

【００６４】図１５は、本発明の第１の実施例の受信側
の出力例を示す。

【００６５】同図（Ａ）は受信側端末装置３０のディス
プレイに表示された例であり、同図（Ｂ）は受信側のフ
ァクシミリ端末３２に出力された例である。同図に示す
情報は、画像蓄積装置２７の画像記憶部２７４及び画像
メール管理テーブル用メモリ２７３より取得する。

【００６６】同図（Ａ）において、ヘッダ部分ａは、画
像蓄積装置２７のヘッダ３２０より取得した情報であ
り、送信側端末装置１０の送信者の識別情報（名前等）
と受信側の識別情報及びその画像情報のタイトル等が記
載される。

【００６７】ボディ部分ｂの文字情報部分は、画像記憶
部２７４の合成情報格納位置３４６に格納されていた情
報であり、ファクシミリ通信及び端末との通信のために
文字画像変換装置２４により画像情報に変換された部分
である。画像情報部分ｃは、画像記憶部２７４の画像情
報格納位置に３４４に格納されている情報である。

【００６８】図１５（Ａ）の左下に表示されている“音
声メッセージ再生”表示は、メールンタ２０の音声蓄積
装置２５に音声情報が蓄積されている場合に表示され
る。即ち、画像蓄積装置２７の画像記憶部２７４の音声
情報存在フラグ３３１が“１”である場合に、表示され
る。この“音声メッセージ再生”をクリックすることに
より、音声メッセージが再生される。

【００６９】図１５（Ｂ）はファクシミリ端末３２に出
力された例であるが、左下に出力されている“音声メッ
セージ再生”の表示と共に、『音声メッセージがありま
す。

【００７０】アクセス番号０３−３５０９−０００１，
連絡番号１２３４５６７８』が表示されている。ユーザ
は、この表示に従って電話端末３１よりアクセスするこ
とにより、メールセンタ２０の音声蓄積装置２５に蓄積
されている音声情報が再生され、聴くことが可能とな
る。なお、上記の表示されるメッセージは、システム側
で付与してもよいし、または、画像記憶部２７４の音声
情報存在メッセージ３３２に予め格納しておき、転送す
ることにより表示する方法でもよい。

【００７１】次に、上記の図１１のフローチャートのス
テップ１０８に対応する受信側からの音声情報のアクセ
スがあった場合の動作について説明する。

【００７２】図１６は、本発明の第１の実施例の音声情
報のアクセス動作のシーケンスチャートである。同図に
示す動作は受信側のユーザがファクシミリ端末３２に出
力された“音声情報有り”の表示をみて、電話端末３１
により音声情報をアクセスする場合を示す。

【００７３】ステップ１０８１）受信側の電話端末３１
を用いてユーザが所定のアクセス番号に通信網５０を介
してアクセスする。

【００７４】ステップ１０８２）メールセンタ２０は、
ユーザからのアクセスを受け付けると、音声蓄積装置２
５に対してユーザから入力された連絡番号に基づいて出
力指示を行う。

【００７５】ステップ１０８３）音声蓄積装置２５の制
御部２５１は、連絡番号により音声メール管理テーブル
用メモリ２５３を参照して、音声記憶部２５４に蓄積さ
れている音声情報を取得する。取得した音声情報を再生
して、通信制御部２５２に渡す。

【００７６】ステップ１０８４）通信制御部２５２は、
取得した音声情報を回線発信装置２９を介してユーザの
電話端末３１に送出する。

【００７７】なお、連絡番号に対応する音声情報を再生
する時に、受信者とメールセンタ２０との間において予
め暗証番号を指定しておき、暗号番号が合致した場合の
み音声情報を再生する方法も考えられる。

【００７８】上記ように、マルチメディア電子メールの
音声部分を記録しておき、受信者に音声情報がメールボ
ックス中に存在していることを通知し、電話端末３１か
らアクセスされた際に再生することが可能である。ま
た、電話端末３１を用いずに、受信端末装置３０使用時
において、音声情報が存在するメッセージが出力されて
いる場合に、音声情報を出力する所定の操作を行い、メ
ールセンタ２０の音声蓄積装置２５をアクセスして音声
情報を再生する。

【００７９】このように、本実施例によれば、文字情報
及び画像情報を送信する際に欠落する音声情報が、音声
蓄積装置２５蓄積されているため、受信側からシステム
により付与されているアクセス番号によりアクセスされ
た場合に、回線を介して音声情報を送出することが可能
となる。

【００８０】［第２の実施例］次に、本発明の第２の実
施例について説明する。本実施例は、上述の第１の実施
例と同様の構成を用いて、マルチメディア電子メールを
ファクシミリ端末３２に出力するのではなく、ユーザよ
り電話端末３１を用いてアクセスされた場合に、メール
を音声で提供する例を示す。本実施例は、受信者がマル
チメディア端末を所持していない場合等を想定してい
る。

【００８１】図１７は、本発明の第２の実施例のシステ
ム構成を示す。同図に示すシステムは、送信側端末装置
１０、受信側の電話端末３１、メールセンタ２０、メー
ル操作装置郡４０より構成される。

【００８２】図１８は、本発明の第２の実施例の動作の
シーケンスチャートを示す。同図において、メールセン
タ２０のメールボックス２０２には、送信側端末装置１
０よりすでに電子メールが送信されており、蓄積されて
いるものとし、受信側より電話端末３１及びファクシミ
リ端末３２を用いてメールボックス２０２の内容を取得
するものとする。

【００８３】ステップ２０１）まず、受信側のユーザが
電話端末３１を用いてメールセンタに所定の番号により
アクセスする。

【００８４】ステップ２０２）メールセンタ２０の欠落
情報補完制御装置２３１は、受信側からのアクセスを受
け付けると、情報抽出部２３に画像情報抽出の指示を発
行する。情報抽出部２３によりメールボックス２０２に
蓄積されている画像情報を抽出し、画像情報蓄積装置２
７に蓄積する。

【００８５】ステップ２０３）次に、メールセンタ２０
の欠落情報補完制御装置２３１は、情報抽出部２３に文
字情報抽出の指示を発行する。情報抽出部２３は、メー
ルボックス２０２に蓄積されている文字情報を抽出し、
文字音声変換装置２６に出力する。 ステップ２０４）文字音声変換装置２６は、抽出された
文字情報を音声情報に変換し、ステップ２０２で蓄積さ
れている画像情報をアクセスするためのアクセス番号と
連絡番号を付加して回線発信装置２９を介してアクセス
元の電話端末３１に送出する。

【００８６】ステップ２０５）ユーザは、電話端末３１
によりアクセス番号と連絡番号が付与された音声情報を
受け取ると、ファクシミリ端末３２よりアクセス番号と
連絡番号を用いてメールセンタ２０に画像情報の送信要
求を発行する。

【００８７】ステップ２０６）メールセンタ２０が、フ
ァクシミリ端末３２より画像情報の送信要求を受け取る
と、欠落情報補完制御部２０１は、画像蓄積装置２７に
対して蓄積されている画像情報の送信指示を行う。

【００８８】ステップ２０７）画像蓄積装置２７は、蓄
積されている画像情報を回線発信装置２９を介してファ
クシリ端末３２に送信する。

【００８９】なお、上記のステップ２０２以降の処理
は、受信側の電話端末３１よりアクセスされてから実行
されているが、この例に限定されることなく、メールボ
ックス２０２にメールが蓄積された時点で画像蓄積装置
２７に画像情報を蓄積しておいてもよい。

【００９０】また、受信側のユーザからアクセス要求が
発行される前に、文字音声変換装置２６により文字情報
から音声情報に変換された情報を音声蓄積装置２６に予
め蓄積しておき、アクセス要求が入力された時点で音声
情報を読出し、電話端末３１に送出してもよい。

【００９１】このように、電話端末３１からアクセスさ
れた場合に画像情報が欠落するが、文字情報を音声情報
に変換してアクセス元に送信する際に、画像情報を取得
するためのアクセス番号と連絡番号を付与して電話端末
３１に送出することにより、ファクシミリ端末３２から
入力されるアクセス番号と連絡番号に基づいてメールセ
ンタ２０は、連絡番号に対応する画像情報を画像情報蓄
積部２７より読み出して受信側に提供することが可能と
なる。

【００９２】なお、本発明は、上記実施例に限定される
ことなく、特許請求の範囲で種々変更や応用が可能であ
る。

【００９３】

【発明の効果】上述のように本発明によれば、マルチメ
ディア電子メール文字部分を画像情報に変換して、ファ
クシミリ送信すると共に、音声部分をそのまま音声蓄積
装置に登録し、電話端末からアクセスして音声情報を取
得することができるため、従来メディア変換において欠
落していた音声情報を補完してユーザ受信することが可
能となる。

【００９４】また、本発明によれば、文字部分を音声に
変換して電話端末からのアクセスにも応えると共に、画
像部分を画像蓄積装置に蓄積することにより、ファクシ
ミリ端末から取り出すことが可能となる。これにより、
従来、メディア変換において欠落していた画像情報を補
完してユーザが受信可能となる。

【００９５】また、本発明によれば、受信者がマルチメ
ディアが扱えるような端末を最初から所持していない場
合や、所持していても故障して使用できない場合には、
ファクシミリと電話端末により補完を通して文字・音声
・画像の情報を取得することができる。これにより、従
来は、欠落していた情報についても、組合せによって総
合的に情報に欠落が生じないように受信側に具備されて
いる代替のメディアを用いてメールボックスの情報を送
信することが可能である。

【図面の簡単な説明】

【図１】本発明の原理説明図である。

【図２】本発明の原理説明図である。

【図３】本発明の原理構成図である。

【図４】本発明の原理構成図である。

【図５】本発明の一実施例のマルチメディアシステムの
構成図である。

【図６】本発明の一実施例のメールネタの構成図であ
る。

【図７】本発明の一実施例の音声蓄積装置の構成図であ
る。

【図８】本発明の一実施例の画像蓄積装置の構成図であ
る。

【図９】本発明の一実施例のマルチメディア電子メール
のデータ構成例を示す図である。

【図１０】本発明の第１の実施例のシステム構成図であ
る。

【図１１】本発明の第１の実施例のメールセンタの動作
の概要を示すフローチャートである。

【図１２】本発明の第１の実施例の画像蓄積装置に画像
情報を登録する動作のフローチャートである。

【図１３】本発明の第１の実施例の画像記憶部に格納さ
れるデータの構成例を示す図である。

【図１４】本発明の第１の実施例の画像情報を受信側に
送信する動作のフローチャートである。

【図１５】本発明の第１の実施例の受信側の出力例を示
す図である。

【図１６】本発明の第１の実施例の音声情報のアクセス
動作のシーケンスチャートである。

【図１７】本発明の第２の実施例のシステム構成図であ
る。

【図１８】本発明の第２の実施例の動作のシーケンスチ
ャートである。

【図１９】従来のマルチメディア通信を示す図である。

【符号の説明】

１０ 送信側端末装置 ２０ メールセンタ ２３ 情報抽出部 ２４ 文字画像変換装置 ２５ 音声蓄積装置 ２６ 文字音声変換装置 ２７ 画像蓄積装置 ２８ 時計 ２９ 回線発信装置 ３０ 受信側端末装置 ３１ 電話端末 ３２ ファクシミリ端末 ４０ メール操作装置群 １００ メールボックス内データ １１０ 宛先情報 １２０ ヘッダ １３０ ホディ １３１ メディア種別 １３２ テキスト情報 １３３ メディア種別 １３４ 画像情報 １３５ メディア種別 １３６ 音声情報 ２０１ 欠落情報補完制御装置 ２０２ メールボックス ２０４ ユーザ情報データベース ２５１ 制御部 ２５２ 通信制御部 ２５３ 音声メール管理テーブル用メモリ ２５４ 音声記憶装置 ２７１ 制御部 ２７２ 通信制御部 ２７３ 画像メール管理テーブル用メモリ ２７４ 画像記憶部 ３００ 画像記憶部に格納されるデータ ３１０ 宛先情報 ３２０ ヘッダ ３３１ 音声情報存在フラグ ３３２ 音声情報存在メッセージ ３４０ ボディ ３４１ メディア種別 ３４２ 文字情報格納位置 ３４３ メディア種別 ３４４ 画像情報格納位置 ３４５ メディア種別 ３４６ 合成情報格納位置 ４００ 音声情報蓄積手段 ５００ 画像情報蓄積手段 ６００ ファクシミリ通信手段 ７００ 音声情報送信手段

Claims (8)

【特許請求の範囲】
1. 【請求項１】 送信側である送信側の端末装置から文字
   情報、画像情報、音声情報を含む情報（以下、マルチメ
   ディア情報）を扱う蓄積型通信メッセージ（電子メー
   ル）を該文字情報、該画像情報、該音声情報毎に格納す
   るメールボックスを有するメールセンタを介して受信側
   である受信側の端末装置に送信する場合に、 該送信側の端末装置から送信された該マルチメディア情
   報を該メールセンタで受信し、 一定時間該メールボックスに該電子メールが残っている
   ことを確認後、該電子メールより文字情報、画像情報、
   音声情報毎に該メールボックスの該記憶手段に格納し、 格納されている音声情報または、画像情報をアクセスす
   るためのアクセス情報を、該記憶手段内に格納されてい
   る画像情報または、音声情報に付加して該受信側の端末
   装置に送信し、 該受信側の端末装置が該アクセス情報に基づいて該メー
   ルセンタに該音声情報または、該画像情報をアクセスす
   ることを特徴とするマルチメディア欠落情報補完メール
   方法。
2. 【請求項２】 前記メールセンタにて、前記画像情報を
   前記受信側の端末装置に送信する場合に、前記記憶手段
   に登録されている前記文字情報を画像情報に変換し、前
   記記憶手段に登録されている前記画像情報と合成し、 合成された画像情報に音声情報の有無情報を付与し、前
   記受信側の端末装置にファクシミリ送信を行い、 ファクシミリ送信された情報に音声情報が存在する旨が
   表示されている場合に、電話端末により前記アクセス情
   報に基づいて前記メールセンタより前記音声情報を取得
   する請求項１記載のマルチメディア欠落情報補完メール
   方法。
3. 【請求項３】 前記メールセンタにて前記メールボック
   スの該電子メールから文字情報を抽出して音声情報に変
   換し、 変換された該音声情報に前記アクセス情報を付加して前
   記電話端末に出力し、 前記受信側のファクシミリ端末より前記アクセス情報を
   入力し、 前記アクセス情報に基づいて前記メールセンタにアクセ
   スし、前記画像情報をファクシミリ通信により取得する
   請求項１記載のマルチメディア欠落情報補完メール方
   法。
4. 【請求項４】 前記アクセス情報として、記憶手段に格
   納されている前記音声情報または、前記画像情報の所定
   のアクセス番号及び連絡番号を用いる請求項１記載のマ
   ルチメディア欠落情報補完メール方法。
5. 【請求項５】 前記受信側の端末装置が前記音声情報の
   授受が可能である場合に、 前記メールセンタにて該電子メールに音声情報が含まれ
   ている場合には、該音声情報にアクセス情報を付与して
   前記記憶手段に蓄積し、該音声情報が含まれている旨を
   前記受信側の端末装置に送信し、 前記受信側の端末装置に該音声情報が存在するメッセー
   ジを表示し、 前記受信側の端末装置から音声情報出力指示が入力され
   ると、前記メールセンタの前記記憶手段に蓄積されてい
   る音声情報を該アクセス情報により検索し、 該音声情報を前記受信側の端末装置に出力する請求項１
   記載のマルチメディア欠落情報補完メール方法。
6. 【請求項６】 文字情報、画像情報及び音声情報を同時
   に扱う蓄積型通信である電子メールとして通信する通信
   端末と、 該通信端末毎にメールボックスを有し、該通信端末から
   のメールの送信、配信を行うメールセンタと、 該メールセンタに接続され、該メールボックスの情報の
   うち音声情報を抽出し、蓄積する音声情報蓄積手段と、 メールセンタに接続され、該メールボックスの情報のう
   ち、文字情報を画像情報に変換し、該変換した画像情報
   と、メールボックスの画像情報を合成し、合成された画
   像情報に該音声情報蓄積手段をアクセスするためのアク
   セス情報を付加して蓄積する画像情報蓄積手段と、 該通信端末に対して該画像情報蓄積手段に蓄積されてい
   る該画像情報をファクシミリ通信により送出するファク
   シミリ通信手段と、 該ファクシミリ通信手段により取得した該画像情報に付
   与されている該アクセス情報に基づいて該音声情報蓄積
   手段の該音声情報を取得する電話端末とを有することを
   特徴とするマルチメディア欠落情報補完メール装置。
7. 【請求項７】 文字情報、画像情報及び音声情報を同時
   に扱う蓄積型通信である電子メールの通信を行う通信端
   末と、 該通信端末に対応するメールボックスを有し、該通信端
   末からのメールの送信、配信を行うメールセンタと、 該メールセンタに接続され、該メールボックスの情報の
   うち画像情報を抽出し、蓄積する画像情報蓄積手段と、 音声により該メールボックスに蓄積されている情報の取
   得要求を発行する電話端末と、 該電話端末より該情報取得要求が発行された場合に、該
   メールボックスに蓄積されている文字情報を音声情報に
   変換し、変換された音声情報とメールボックスの音声情
   報を合成し、該画像情報をアクセスするためのアクセス
   情報を合成された音声情報に付加して該電話端末に送信
   する音声情報送信手段と、 該音声情報送信手段により取得した該アクセス情報に基
   づいて該画像情報蓄積手段に蓄積されている該画像情報
   を検索し、ファクシミリ通信により送出するファクシミ
   リ通信手段とを有することを特徴とするマルチメディア
   欠落情報補完メール装置。
8. 【請求項８】 前記アクセス情報として、記憶手段に格
   納されている前記音声情報または前記画像情報の所定の
   アクセス番号及び連絡番号を用いる請求項６及び７記載
   のマルチメディア欠落情報補完メール装置。