JP3244014B2 - マルチメディア変換装置および変換方式 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、音声やテキスト、
画像など多様な情報媒体（メディア）を統合するマルチ
メディア通信において、異なるメディアに情報形式を変
換するメディア変換装置に関するものである。

【０００２】

【従来の技術】マルチメディア通信において異種メディ
ア間で通信をかわすには、情報形式等を変換するメディ
ア変換が必要となる。従来より、この種のメディア変換
装置として、例えば特開平４−３０２５６１号公報に開
示されたマルチメディア通信システムは、音声端末、テ
キスト端末、画像通信端末の各種メディアを接続した通
信システムに、音声−テキスト等、異種メディア間のメ
ディア変換をおこなう信号処置装置と、相手端末のメデ
ィアに対応した信号に変換すべく上記信号処理装置を制
御し変換された信号を受信対象の端末装置に送る交換手
段とを備えたものである。従来のメディア変換装置は、
メディア変換をおこなう信号処理装置を介することによ
り異なるメディア相互間通信を可能としていた。

【０００３】

【発明が解決しようとする課題】しかしながら従来のメ
ディア変換装置は、メディア変換の品質、詳しくはメデ
ィア変換の処理時間や精度を意識することなくマルチメ
ディア変換が行われていたために次のような問題があっ
た。第１の問題点は、従来のメディア変換装置では、必
ずしも受信者の期待する処理時間または精度でメディア
変換の結果が得られるとは限らないことである。これ
は、従来のメディア変換装置においてはメディア変換手
段たる信号処理装置の処理時間と精度が固定的であるの
に対し、メディア変換の処理時間と精度に対する受信者
の要求は通信の内容やその情報によって異なるからであ
る。処理時間を優先させるメディア変換装置では精度が
落ち、精度を優先させるメディア変換装置では処理時間
が増大してしまうが、従来はこのような処理時間と精度
とのトレードオフを受信者は決定することができなかっ
た。

【０００４】第２の問題点は、メディア変換を行う特定
のアルゴリズムの特徴が反映されることにより、メディ
ア変換装置に入力するデータによってはメディア変換の
結果の精度が落ちてしまうことである。例えば理想的環
境において精度の高いアルゴリズムを用いたとしても、
ノイズに頑健でなかったりする場合がある。このような
場合にはマルチメディア通信を行う上で十分な品質のメ
ディア変換をおこなうことが困難となる場合がある。ま
た、第３の問題点として、特に処理時間を優先してリア
ルタイムでメディア変換を行う装置では、１つのメディ
ア変換処理でメディア変換装置が専有されてしまうため
にその間は他の送信者からのデータを受付ないことであ
る。したがって、従来のメディア変換装置を複数のユー
ザで使用することができなかった。

【０００５】本発明の目的は、ユーザ、特に受信者が期
待する品質でメディア変換を行うメディア変換装置を提
供することにある。また、本発明の他の目的は、様々な
入力データに対しても、メディア変換の特定のアルゴリ
ズムの特性に左右されないメディア変換を行うことであ
る。本発明はさらに、複数のユーザにより使用すること
ができるメディア変換装置を提供することを目的とす
る。

【０００６】

【課題を解決するための手段】上述の目的を達成するた
めに、本発明にかかるマルチメディア変換装置は、異種
メディア間で通信を行う際にメディア変換を行うマルチ
メディア変換装置において、それぞれ異なるアルゴリズ
ムによって前記データを他の情報形式に異なる品質でメ
ディア変換する複数の信号処理部を備え、前記複数の信
号処理部による複数のメディア変換結果の一部を選択し
前記受信者に送信するようにしたものである。ここで信
号処理部において行われるメディア変換は、マルチメデ
ィア通信において必要となるメディア変換のすべてを含
むものとし、例えば音声信号をテキストデータに変換す
る音声認識処理や、テキストデータを音声データに変換
する音声合成処理、画像データからテキストデータに情
報形式を変換する文字認識処理などを含むものとする。
また、メディア変換結果の品質とは、主に処理時間と精
度とによって評価されるものとする。ここで精度とは、
受信したデータの意味する内容を正確に含む度合をいう
ものとする。

【０００７】本発明において各信号処理部はそれぞれの
アルゴリズムに基づいて処理時間優先のメディア変換結
果や精度優先のメディア変換結果を出力する。したがっ
て本発明に係るマルチメディア変換装置は、例えば処理
時間を優先する結果、精度を優先する結果といった複数
の結果を導き出し、その中からユーザ、特に受信者が希
望するメディア変換結果を選択し提供するものである。
これによって処理時間を要求する受信者には短時間で結
果を提供することができ、精度を要求する受信者にはよ
り正確な結果を提供することができる。なお、メディア
変換処理を行う信号処理部は、上記受信部から直接デー
タを入力するようにしても良いが、このデータを一時的
に蓄積するバッファを設け、このバッファからデータを
読み込むようにしても良いことは言うまでもない。特に
精度を優先したアルゴリズムを持った信号処理部はメデ
ィア変換処理の速度が異なる場合があるので、バッファ
を介してデータを入力するのが好ましい。

【０００８】本発明にかかるマルチメディア変換装置に
おいては、異なるアルゴリズムによって得られた複数の
メディア変換結果を受信者に送信するものであるが、請
求項２に記載されたマルチメディア変換装置は、送信部
において受信者からメディア変換の品質に関する指示を
受信し、前記指示に基づいて適当な品質のメディア変換
結果を受信者に送信するものである。このように送信部
がいわば受信者との通信機能を有することによって、受
信者は自分が要求する品質に関する指示を与え、期待す
る品質のメディア変換結果の提供をよりスムーズにする
ことができる。

【０００９】また、本発明にかかるマルチメディア変換
装置のうち、特に請求項３に記載された発明は、上記複
数のメディア変換結果の中から処理時間優先のメディア
変換結果を選択し送信することを特徴とするものであ
る。また、請求項４に記載されたマルチメディア変換装
置は特に上記複数のメディア変換結果の中から精度優先
のメディア変換結果を選択し送信することを特徴とす
る。また、送信部が受信者からの指示を受け付ける場合
は、受信者の要求に応じてそれぞれ受信者の期待する処
理時間または精度のメディア変換結果を選択する。

【００１０】本発明にかかるマルチメディア変換装置に
おいては、精度優先のメディア変換結果を送信する際
に、送信部が複数のメディア変換結果から精度優先のア
ルゴリズムにより得たものを単に選択するようにしても
良いが、請求項５に記載されたマルチメディア変換装置
は、上記複数のメディア変換結果から総合的に判断し、
より精度の高いメディア変換結果を導出する判定部を備
えたものである。このように複数の異なったアルゴリズ
ムから導き出された結果から総合的に判断することによ
って、特定のアルゴリズムの特性の影響を排除し、いか
なる入力データに対してもアルゴリズムに左右されない
メディア変換結果を提供することができる。

【００１１】また、本発明のうち請求項６に記載された
マルチメディア変換装置は、上記複数の信号処理部が、
受信部で受信したデータを他の情報形式にリアルタイム
でメディア変換する処理時間優先信号処理部と、前記デ
ータを前記他の情報形式に異なるアルゴリズムによって
それぞれ精度優先でメディア変換する複数の精度優先信
号処理部とからなり、前記判定部は、前記精度優先信号
処理部より得られた複数のメディア変換結果に基づき精
度の高いメディア変換結果を導出するものであり、その
送信部は、まず前記高速信号処理部より得られるメディ
ア変換結果を前記受信者に送信し、前記受信者から精度
を優先する旨の指示に基づいて前記判定部が導出した精
度の高いメディア変換結果を送信し直すことを特徴とす
る。本発明においては、受信者は最初に処理時間優先の
メディア変換結果を受信する。この処理時間優先のメデ
ィア変換結果が受信者を満足させるだけの品質、特に精
度を満たしていない場合には、受信者は精度優先のメデ
ィア変換結果を要求すべくマルチメディア変換装置に指
示を出す。マルチメディア変換装置はこの指示を送信部
において受信することにより判定部が出力する精度優先
のメディア変換結果を受信者に送信する。

【００１２】また、請求項７に記載されたマルチメディ
ア変換装置は、上記判定部が、受信部で受信されたデー
タを参照し、複数のメディア変換結果の中から前記受信
データに適したアルゴリズムを有する信号処理部のメデ
ィア変換結果を選択するものである。すなわち、本発明
はメディア変換結果の選択に際してその受信データの性
質や状態とメディア変換のアルゴリズムの関係を考慮す
ることにより、適切なアルゴリズムでメディア変換され
た結果を選択するものである。これによって、例えば受
信データに重畳したノイズを考慮することによりノイズ
に頑健なメディア変換ができる。

【００１３】また請求項８に記載された発明は、受信部
において受信されたデータを一時蓄積するバッファを備
え、上記複数の信号処理部は前記バッファに蓄積された
データを他の情報形式にメディア変換する一方、前記受
信部は複数のユーザを収容したマルチメディア変換装置
であって、このマルチメディア変換装置が一のユーザに
より使用されているときに他のユーザからのデータの着
信があった場合、前記データを一時的にバッファに蓄積
し、前記一のユーザによる使用が終了した後に前記バッ
ファに蓄積された前記他のユーザからのデータについて
メディア変換を行うことを特徴とする。これによって一
つのメディア変換装置を複数のユーザで使用することが
できるとともに、他のユーザはデータの再送出をする必
要がなくなる。

【００１４】また請求項９に記載された発明は、複数の
上述したマルチメディア変換装置から構成されるマルチ
メディア変換システムである。すなわち、これら複数の
マルチメディア変換装置は複数のユーザを収容したネッ
トワークに接続されており、各マルチメディア変換装置
の前記受信部は、そのマルチメディア変換装置が一のユ
ーザにより使用されているときに他のユーザ（送信者）
からのデータの着信があった場合、そのデータを上記ネ
ットワークを介して使用されていない他のマルチメディ
ア変換装置へ転送する。これによって一つのメディア変
換装置が使用中であっても、使用されていない他のチャ
ネルに送信者からのデータを自動的に転送することによ
ってこれを受け付け、メディア変換を行うことができ
る。したがって、送信者はデータの再送出をする必要が
ない。

【００１５】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して説明する。図１は、本発明の第１の実
施の形態であって、ネットワーク２０，５０に接続され
た二つのマルチメディア変換装置３０，４０を示し、こ
れら二つのマルチメディア変換装置は、マルチメディア
変換システムを構成している。ここでマルチメディア変
換装置３０は、ネットワーク２０を介して入力データを
受信する受信部３１、データを一時蓄積するデータ蓄積
バッファ３２、異なるアルゴリズムによってメディア変
換を行う３つの信号処理部３３，３４，３５、これら信
号処理部３３，３４，３５におけるメディア変換結果か
ら精度優先のメディア変換結果を導出する判定部３６、
および信号処理部３３のメディア変換結果または判定部
３６が導出したメディア変換結果のいずれかをネットワ
ーク５０に送出する送信部３７から構成されている。も
う一つのマルチメディア変換装置４０もこれと同様の構
成を持つ。以下、マルチメディア変換装置３０を例にそ
の動作を説明する。

【００１６】図１においてマルチメディア変換装置３０
の受信部３１は、送信端末１０より送信された入力デー
タをネットワーク２０を介して受信する。受信部３１で
受信された入力データは、信号処理部３３に送られると
同時にデータ蓄積バッファ３２にも送られる。信号処理
部３３は高速アルゴリズムにより上記画像データをリア
ルタイムで他のデータ形式にメディア変換した後、その
結果を送信部３７へ送る。なお、高速アルゴリズムは、
精度よりも処理時間を優先したメディア変換アルゴリズ
ムである。送信部３７は、信号処理部３３より受け取っ
たメディア変換結果を受信装置６０に宛ててネットワー
ク５０に送出する。

【００１７】一方前述のデータ蓄積バッファ３２に蓄積
された入力データは、信号処理部３４，３５に送られ
る。信号処理部３４，３５は、それぞれアルゴリズム
Ａ，アルゴリズムＢといった異なるメディア変換アルゴ
リズムにより入力データを上記他のデータ形式にメディ
ア変換する。信号処理部３３，３４，３５の各々が出力
するメディア変換結果は判定部３６に渡される。判定部
３６は３種類のアルゴリズムによるメディア変換結果を
総合して精度優先のメディア変換結果を導出するもので
ある。この精度優先のメディア変換結果の導出に際して
は、例えば、信号処理部３３，３４，３５が文字画像デ
ータをテキストデータに変換する文字認識処理を行う場
合を考えると、異なるアルゴリズムによって得た複数の
テキストデータを比較し、結果の異なる部分を並列表記
したものを精度優先のメディア変換結果として導出する
ことなどが考えられる。このように導出された精度優先
のメディア変換結果は前述の送信部３７に送られ、送信
部３７はこの精度優先のメディア変換結果を、先に送出
した処理時間優先のメディア変換結果に続けて受信装置
６０に宛ててネットワーク５０に送出する。これによっ
て受信者は、高速アルゴリズムによるメディア変換結果
をリアルタイムで得られるとともに、精度優先のメディ
ア変換結果を得ることもでき、受信者は自分の期待する
品質に近いものを選択することができる。

【００１８】上記第１の実施の形態では、処理時間優先
の結果と精度優先の結果の両方を受信者に提供する場合
について説明したが、送信部３７は「処理時間優先のメ
ディア変換結果のみを送信」、「精度優先のメディア変
換結果のみを送信」、「処理時間優先のメディア変換結
果を受信した受信者からの要求があった場合に精度優先
のメディア変換結果を送信」などのモードでメディア変
換結果を送信するようにしても良い。また、本実施の形
態では、精度を優先する結果を出す際に高遠アルゴリズ
ムと２つのアルゴリズムＡ，Ｂを用いる場合について説
明したが、アルゴリズムの数はこれに制限されるもので
はない。したがって、マルチメディア変換装置が持つ信
号処理部の数は特に３に限定されるものではない。

【００１９】上述のようなマルチメディア変換装置３０
が複数のユーザを収容した場合の動作は次のようなもの
である。例として高速アルゴリズムをもった信号処理部
３３が送信端末１０と受信装置６０の間で使用中である
ときに送信端末１１と受信装置６１との間でメディア変
換通信を行う場合を考える。このような場合には、送信
端末１１からのデータはデータ蓄積バッファ３２へ一時
的に蓄積される。そして高速アルゴリズム３３で送信端
末１０と受信装置６０の間の処理が終わったときに、デ
ータ蓄積バッファ３２に蓄積された送信端末１１からの
データが信号処理部３３に読み込まれ、送信端末１１と
受信端末６１との間のメディア変換処理が開始される。

【００２０】また、図１に示すような２つのマルチメデ
ィア変換装置３０，４０からなる２チャンネルのマルチ
メディア変換システムにおいて複数のユーザを収容した
場合の動作は次のようなものである。同様に信号処理部
３３が送信端末１０と受信装置６０の間で使用中である
ときに送信端末１１と受信装置６１との間でメディア変
換通信を行う場合を考えると、送信端末１１からのデー
タは受信部３０から処理を行っていない他のメディア変
換装置４０へ転送される。転送されたデータは、マルチ
メディア変換装置４０において同様にメディア変換処理
をうける。

【００２１】以上、送信端末１０と受信装置６０の１対
１の通信と、送信端末１１と受信装置６１の１対１の通
信の競合を例に説明を行ったが、本発明においては、送
信端末および受信装置の数には制限はなく、また「１対
１通信」だけでなく、「１対ｎ通信」、「ｎ対１通
信」、「ｎ対ｎ通信」についても同様に行われる。ま
た、メディア変換システムのチャネル数についても２チ
ャネルで説明しているが、チャネル数がこれに限定され
るものではないことは言うまでもない。

【００２２】次に本発明の第２の実施の形態について図
２，図３および図４を参照して説明する。本実施の形態
は、本発明を音声認識に適応した場合であって、ボイス
メールを電子メールに変換するサービスを提供するメデ
ィア変換装置である。図２にその構成を示す。マルチメ
ディア変換装置１３０の電話受信部１３１は、電話機１
１０から入力された音声信号を電話網１２０を介して受
信する。音声蓄積バッファ１３２は受信された音声信号
を一時蓄積するものである。マルチメディア変換装置１
３０は、３つの信号処理部１３３，１３４，１３５を備
えている。そのうち音声認識部１３３は処理時間を優先
した音声認識アルゴリズム（高速）を有し、電話受信部
１３１で受信した音声信号をリアルタイムでテキストデ
ータにメディア変換し、このメディア変換結果を判定部
１３６と電子メール送信部１３７に出力している。電子
メール送信部１３７は、音声認識部１３３において処理
時間優先のメディア変換結果をインターネット１５０を
介してメールサーバ１６０に送信する。一方、他の二つ
の音声認識部１３４，１３５はそれぞれ精度優先の異な
る音声認識アルゴリズムＡ，Ｂによってテキストデータ
を判定部１３６に入力している。

【００２３】このようなメディア変換装置の動作を図
３，図４に示すフローチャートを参照して説明する。送
信者は電話機１１０により電話網１２０を介して発信を
行い（ステップ３００）、電話受信部１３１が呼を受け
取ることによりメディア変換装置１３０と接続される
（ステップ３０１）。送信者が電話網を介して宛先の電
子メールアドレスを音声で入力すると（ステップ３０
２）、その音声データは電話受信部１３１から音声認織
部１３３へ送られると同時に音声蓄積バッファ１３２へ
送られ蓄積される（ステップ３０４）。

【００２４】音声認識部１３３では音声データとして入
力された電子メールアドレスを音声認識することによっ
てテキストデータに変換する（ステップ３０３）。その
変換結果として得られた電子メールアドレスは電子メー
ル送信部１３７に送られる。電子メール送信部１３７は
音声認識の結果で得られた電子メールアドレス、が存在
するか否かをインターネット１５０を介してメールサー
バ１６０に問い合わせる（ステップ３０６）。メールア
ドレスが存在する場合には電子メールのヘッダを形成し
（ステップ３０８）、存在しない場合は認識誤りがあっ
たものとして、ステップ３０９に進み精度優先の方法で
再度音声認識を行う。

【００２５】精度優先の音声認識の方法は次のようなも
のである。音声蓄積バッファに蓄積されている電子メー
ルアドレスの音声データ（ステップ３０９）を音声認識
部１３４および音声認識部１３５に入力し、音声認識ア
ルゴリズムＡおよびＢの異なる複数のアルゴリズムで音
声認識を行う（ステップ３１０およびステップ３１
１）。その結果得られたテキストデータは判定部１３６
へ送られ、これら二つの異なるアルゴリズムによって得
られた音声認識結果から総合的に判断して一つの電子メ
ールアドレスを導出する（ステップ３１２）。上記ステ
ップ３１２において二つの音声認識結果から総合的に判
断する場合、判定部１３６はまず音声認識部１３４，１
３５から得られたテキストデータを単語ごとに比較す
る。その結果、同一のメディア変換結果が得られた場合
にはそのテキストデータが精度優先の音声認識結果とな
る。また、結果が一致しない場合には、電話回線１２０
を介して受信した音声データの音声特徴パラメータとあ
らかじめ用意された参照データの音声特徴パラメータと
のベクトル距離が算出され、このベクトル距離に基づい
てより精度の高いメディア変換結果が導出される。

【００２６】ここでベクトル距離に基づいて精度優先の
メディア変換結果を導出する手順を図５を参照してより
詳しく説明すると次のようになる。一般的に、音声認識
アルゴリズムは、音声データの入力と同時に入力音声の
音声特徴パラメータを算出し、これをあらかじめ記憶装
置に蓄積された複数の単語または音韻の参照データの音
声特徴パラメータと比較して入力音声データと各上記参
照データとの間の音声特徴パラメータに関するベクトル
距離を算出している。図５（ａ）は、例として５個の参
照データと、ある音声入力に対して音声認識アルゴリズ
ムＡ，Ｂがそれぞれ導き出した各参照データとのベクト
ル距離を表している。この音声特徴パラメータ空間にお
けるベクトル距離は二つのデータ間の類似度を示してい
ると考えることができる。各アルゴリズムは最もベクト
ル距離の小さい参照データ、詳しくは音声特徴パラメー
タ空間内で入力音声データに最も近い参照データを認識
結果として出力している。これによれば、アルゴリズム
Ａ，Ｂは図５（ａ）に示すようにそれぞれ「あかい」、
「あおい」を認識結果としている。上述の認識結果およ
びベクトル距離は判定部１３６に送られる。本実施の形
態において判定部１３６は、このベクトル距離（類似
度）の積を各参照データ毎に計算し、その値に基づいて
精度優先のメディア変換結果を導出する。図５（ｂ）
は、図５（ａ）に示したベクトル距離の積とそれに基づ
く総合的な判定結果を示している。すなわち図５（ｂ）
によれば、各参照データに対してアルゴリズムＡ，Ｂに
よって得られたベクトル距離（類似度）の積が算出さ
れ、判定部１３６からはその値が最も小さい「あおい」
が認識結果として出力される。このようにして二つのア
ルゴリズムより得られた認識結果を総合的に判断し、精
度優先の認識結果を導出している。

【００２７】上述のようにして判定部１３６で得られた
結果は電子メール送信部１３７に送られ（ステップ３１
３）、再度、判定部１３６で得られた電子メールアドレ
スが存在するか、インターネット１５０を介してメール
サーバ１６０に問い合わせる（ステップ３１４）。メー
ルアドレスが存在する場合には電子メールのヘッダを形
成し（ステップ３０８）、存在しない場合は送信者へ音
声による電子メールアドレスの再入力を促す（ステップ
３１６）。

【００２８】音声認識の結果得られたメールアドレスが
存在し、電子メールのヘッダが形成されると、次にメッ
セージの送信である。送信者は電話網１２０を介してメ
ッセージを音声で入力する（ステップ４００、図４参
照）。その音声データは電話受信部１３１から音声認識
部１３３へ送られると同時に音声蓄積バッファ１３２へ
送られ蓄積される（ステップ４０２）。音声認識部１３
３では音声によって入力されたメッセージを高速の音声
認識アルゴリズムを用いて音声認識し（ステップ４０
１）、その結果は電子メール送信部１３７に送られる
（ステップ４０３）。電子メール送信部１３７は音声認
識部１３３における音声認識の結果で得られたテキスト
データ（メッセージ）を、インターネット１５０を介し
てメールサーバ１６０に電子メールで送信する（ステッ
プ４０４）。

【００２９】受信者は電子メールの内容を読み、認識誤
りのために意味があいまいであったり、正確な内容を知
りたい場合には、インターネット１５０を介して電子メ
ール送信部へ精度優先結果の要求を行うことができる
（ステップ４０５）。受信者より精度優先結果の要求を
受信すると、音声蓄積バッファ１３２に蓄積されている
音声のメッセージを二つの音声認識部１３４および１３
５に入力する（ステップ４０６）。音声認識部１３４お
よび１３５は精度優先の音声認識アルゴリズムＡおよび
音声認識アルゴリズムＢでそれぞれ音声認識を行い（ス
テップ４０７およびステップ４０８）、その結果を判定
部１３６へ入力する。判定部１３６は上述したようにこ
れら二つの結果を総合的に判断することで精度優先のテ
キストデータを導出する（ステップ４０９）。判定部１
３６で得られた精度優先の音声認識結果は電子メール送
信部１３７に送られ（ステップ４１０）、再度、電子メ
ールとして送信される（ステップ４１１）。

【００３０】次に本発明の第３の実施の形態について図
６および図７を参照して説明する。本実施の形態は、上
述した第２の実施の形態にかかる複数のマルチメディア
変換装置から構成され、複数のユーザ間で競合する場合
に適応することができるマルチメディア変換システムで
ある。具体的には、図６に示すように、図２に示した音
声認識装置１３０と同一の構成を有する音声認識装置１
４０を備え、ボイスメールを電子メールに変換するサー
ビスを２チャンネルで行うものである。

【００３１】このようなマルチメディア変換システムに
おいて、特に複数のユーザ間で競合した場合の動作につ
いて図７のフローチャートを参照して説明する。たとえ
ば、電話機１１０とメールサーバ１６０間でメディア変
換通信が行われているときに、電話機１１１とメールサ
ーバ１６１間でメデイア変換通信を行う場合を考える。
電話機１１０とメールサーバ１６０間でメディア変換通
信が行われている最中に電話機１１１からの呼が電話網
１２０を介して着信すると（ステップ６００）、その呼
は電話受信部１３１で受け取られる（ステップ６０
１）。続いて電話機１１１からメールアドレス（または
メッセージ）が音声により入力されると（ステップ６０
２）、電話受信部１３１は音声認識部１３３が使用中で
あるかどうかを確認する（ステップ６０３）。音声認識
部１３３が使用中でなければ音声認識部１３３において
通常の音声認識を行う（ステップ６０８）。

【００３２】これに対し音声認識部１３３が電話機１１
０とメールサーバ１６０間で使用中である場合には、電
話受信部１３１は他のチャネルの音声認識装置１４０が
使用中かどうか確認する。他のチャネルの音声認識装置
１４０が使用されていなかったら、電話機１１１からの
音声データを音声認識装置１４０へ転送する（スッテブ
６０５）。音声認識装置１４０も使用中であった場合に
は、電話機１１１からの音声データを音声蓄積バッファ
１３２に蓄積し（ステップ６０６）、音声認識部１３３
が電話機１１０とメールサーバ１６０間の音声認識が終
了してから（ステップ６０７）、電話機１１１からの音
声データを音声蓄積バッファ１３２から受け取り音声認
識部１３３において音声認識を行う（ステップ６０
８）。

【００３３】以上のように本実施の形態に係るマルチメ
ディア変換システムは、複数のユーザからのメディア変
換通信が競合する場合でも扱うことができる。なお、音
声認識部１３３や他の音声認識装置１４０が使用中であ
るか否かを確認したり、他のチャンネルにデータを転送
する電話受信部１３１の機能は、図示はしないが、通信
プログラムを記憶したメモリとそのプログラムに基づく
制御を行うＣＰＵとＩ／Ｆを備えたＭＰＵを備えること
で実現することができる。

【００３４】以上の実施の形態において、メディア変換
アルゴリズムを持った信号処理部３３，３４，３５およ
び音声認識部１３３，１３４，１３５は、それぞれ、ア
ルゴリズムを実現するプログラムと汎用のコンピュータ
によって構成することもできるが、専用ハードウェアに
よって構成してもよい。複数のメディア変換結果を総合
し精度優先のメディア変換結果を導出する判定部３６，
１３６も同様にソフトウェアまたは専用ハードウェアの
いずれでもその機能を実現しても良い。また、上述した
実施の形態においては、マルチメディア変換の例として
音声認識によるボイスメール（音声データ）から電子メ
ール（テキストデータ）へのメディア変換をあげたが、
その他にも音声合成、文字認識などがメディア変換とし
て考えられることは言うまでもない。

【００３５】

【発明の効果】本発明のマルチメディア変換装置は、処
理時間優先のメディア変換と精度優先のメディア変換を
行うことにより、ユーザ、特に受信者が期待する品質の
メディア変換結果を提供することが可能となる。特に、
請求項２に記載された発明によれば、受信者の指示によ
り受け取るデータを選択することができるため、受信者
の意志により処理時間優先の結果を選択すればメディア
変換の結果をスピーディーに得ることができ、精度優先
の結果を選択すれば正確なメディア変換の結果が得るこ
とがきるようになる。

【００３６】また、本発明のうち特に請求項６に記載し
た発明によれば、判定部が精度優先信号処理部より得ら
れた複数のメディア変換結果に基づき精度の高いメディ
ア変換結果を導出する。さらに請求項７に記載された発
明によれば、上記判定部が受信データの状態に適したア
ルゴリズムを有する信号処理部のメディア変換結果を選
択する。したがって、特定のアルゴリズムの特徴のみが
反映されメディア変換結果の精度が低下することを防止
し、様々な入力データに対しても、メディア変換の特定
のアルゴリズムの特性に左右されないメディア変換を行
うことができる。

【００３７】また、請求項８または請求項９に記載され
た発明によれば、メディア変換装置が他のユーザに占有
されていた場合も、一時的にバッファに蓄積するか、リ
ソースの空いている他のチャネルに転送することによっ
てデータを受け付けることができる。したがって、複数
のユーザで一台のマルチメディア変換装置または変換シ
ステムを使用することができ、ユーザ、特に送信者がリ
ソースが開放されるまで待たされたり、送信者が再度デ
ータを送る必要がなくなる。

【図面の簡単な説明】

【図１】 本発明の第１の実施の形態にかかるマルチメ
ディア変換装置の構成を説明する図である。

【図２】 第２の実施の形態にかかる音声変換装置の構
成を説明する図である。

【図３】 上記第２の実施の形態にかかる音声変換装置
の動作を説明するフローチャートである。

【図４】 図３とともに上記第２の実施の形態にかかる
音声変換装置の動作を説明するフローチャートである。

【図５】 精度優先のメディア変換結果を導出する方法
を説明するための図である。

【図６】 第３の実施の形態にかかるマルチメディア変
換システムの構成を説明する図である。

【図７】 上記第３の実施の形態にかかるマルチメディ
ア変換システムの動作を説明するフローチャートであ
る。

【符号の説明】

１０…送信装置、１１…送信装置、２０…ネットワー
ク、３０…メディア変換装置、３１…受信部、３２…デ
ータ蓄積バッファ、３３、３４、３５…信号処理部、３
６…判定部、３７…送信部、４０…メディア変換装置、
５０…ネットワーク、６０…受信装置、６１…受信装
置、１１０、１１１…電話機、１２０…電話網、１３０
…メディア変換装置（音声認織装置）、１３１…電話受
信部、１３２…音声蓄積バッファ、１３３、１３４、１
３５…音声認識部、１３６…判定部、１３７…電子メー
ル送信部、１４０…メディア変換装置（音声認織装
置）、１５０…インターネット、１６０、１６１…メー
ルサーバ。

Claims (9)

(57)【特許請求の範囲】
1. 【請求項１】 異種メディア間で通信を行う際にメディ
   ア変換を行うマルチメディア変換装置において、 通信回線を介してデータを受信する受信部と、 それぞれ異なるアルゴリズムによって前記データを他の
   情報形式に異なる品質でメディア変換する複数の信号処
   理部と、 前 記複数の信号処理部による複数のメディア変換結果の
   中から受信者により選択されたメディア変換結果を前記
   受信者に送信する送信部と、 を備えたことを特徴とするマルチメディア変換装置。
2. 【請求項２】 請求項１に記載されたマルチメディア変
   換装置において、 前記送信部は、 受信者からメディア変換の品質に関する指示を受信し、
   前記指示に基づいて適当な品質のメディア変換結果を選
   択し前記受信者に送信することを特徴とするマルチメデ
   ィア変換装置。
3. 【請求項３】 請求項１または請求項２に記載されたマ
   ルチメディア変換装置において、 前記送信部は、 前記複数のメディア変換結果の中から前記受信者の期待
   する処理時間のメディア変換結果を選択し送信すること
   を特徴とするマルチメディア変換装置。
4. 【請求項４】 請求項１または請求項２に記載されたマ
   ルチメディア変換装置において、 前記送信部は、 前記複数のメディア変換結果の中から前記受信者の期待
   する精度のメディア変換結果を選択し送信することを特
   徴とするマルチメディア変換装置。
5. 【請求項５】 異種メディア間で通信を行う際にメディ
   ア変換を行うマルチメディア変換装置において、 通信回線を介してデータを受信する受信部と、 それぞれ異なるアルゴリズムによって前記データを他の
   情報形式に異なる品質でメディア変換する複数の信号処
   理部と、 前記複数のメディア変換結果の品質を判定し、品質の高
   いメディア変換結果を導出する判定部と、 前記判定部において導出された前記メディア変換結果を
   選択して前記受信者に送信する送信部とを備えたことを
   特徴とするマルチメディア変換装置。
6. 【請求項６】 請求項５に記載されたマルチメディア変
   換装置において、 前記複数の信号処理部は、 前記受信部で受信したデータを他の情報形式にリアルタ
   イムでメディア変換する処理時間優先信号処理部と、 前記データを前記他の情報形式に異なるアルゴリズムに
   よってそれぞれ精度優先でメディア変換する複数の精度
   優先信号処理部とからなり、 前記判定部は、 前記精度優先信号処理部より得られた複数のメディア変
   換結果に基づき精度の高いメディア変換結果を導出し、 前記送信部は、 前記高速信号処理部より得られるメディア変換結果を前
   記受信者に送信し、前記受信者から精度を優先する旨の
   指示に基づいて前記判定部が導出した精度の高いメディ
   ア変換結果を送信し直すことを特徴とするマルチメディ
   ア変換装置。
7. 【請求項７】 請求項５または請求項６に記載されたマ
   ルチメディア変換装置において、 前記判定部は、 前記受信部で受信されたデータを参照し、前記複数のメ
   ディア変換結果の中から前記受信データに適したアルゴ
   リズムを有する信号処理部のメディア変換結果を選択す
   ることを特徴とするマルチメディア変換装置。
8. 【請求項８】 請求項１乃至請求項７のいずれかに記載
   されたマルチメディア変換装置において、 前記受信部において受信された前記データを一時蓄積す
   るバッファを備え、 前記受信部は、 複数のユーザを収容し、 前記マルチメディア変換装置が一のユーザにより使用さ
   れているときに他のユーザからのデータの着信があった
   場合、前記データを一時的にバッファに蓄積し、前記ユ
   ーザによる使用が終了した後に前記バッファに蓄積され
   た前記他のユーザからのデータについてメディア変換を
   行うことを特徴とするマルチメディア変換装置。
9. 【請求項９】 複数のユーザを収容したネットワーク内
   に設置された複数のマルチメディア変換装置から構成さ
   れるマルチメディア変換方式において、 前記複数のマルチメディア変換装置は、 請求項１乃至請求項８のいずれかに記載されたマルチメ
   ディア変換装置であり、 前記各マルチメディア変換装置の前記受信部は、 前記マルチメディア変換装置が一のユーザにより使用さ
   れているときに他のユーザからのデータの着信があった
   場合、前記ネットワークを介して前記他のユーザからの
   データを使用されていない他のマルチメディア変換装置
   へ転送することを特徴とするマルチメディア変換方式。