JP3923712B2

JP3923712B2 - Message exchange system and recording medium

Info

Publication number: JP3923712B2
Application number: JP2000239424A
Authority: JP
Inventors: 功治宮田; 重俊横山; 竜也中村
Original assignee: NTT Data Corp
Current assignee: NTT Data Corp
Priority date: 2000-08-08
Filing date: 2000-08-08
Publication date: 2007-06-06
Anticipated expiration: 2020-08-08
Also published as: JP2002057693A

Description

【０００１】
【発明の属する技術分野】
この発明は、例えば、インスタントメッセージサービスのように、ネットワーク上で、ある利用者端末から送信されたメッセージを他の利用者端末へ配信するサービスを提供するメッセージ交換システムに係り、特に簡易に受信者の所望するメディア種別によるメッセージの配信を実現し得るメッセージ交換システムおよび記録媒体に関する。
【０００２】
【従来の技術】
ネットワーク上でのコミュニケーション手段として、例えばインターネット上で、コミュニケーションを開始する前に、コミュニケーションしたい相手の状況を把握し、適切なメディアでのコミュニケーションを可能とするシステムとして例えばインスタントメッセージサービスが既に存在する。コミュニケーションのメディアとしては、音声情報による音声メッセージ、テキスト情報によるショートメッセージおよび通常の電子メール（Ｅメール）等のテキストメッセージ、並びにイメージによるイメージメッセージなどがある。
【０００３】
このようなインスタントメッセージを利用するユーザは、全てのユーザの状態を管理しているサーバに接続し、サーバに対して自分のコミュニケーション状態を設定する。コミュニケーション状態には、［オンライン（ｏｎｌｉｎｅ）］、［オフライン（ｏｆｆｌｉｎｅ）］、［アウェイ（ａｗａｙ）］、［ドントディスターブ（ｄｏｎ'ｔｄｉｓｔｕｒｂ）］および［チャット（ｃｈａｔ）］等がある。ユーザは、これらの状態をメニューにより選択することによって、サーバに状態を設定する。サーバに設定することによって、自分の状態を自分以外の（そのインスタントメッセージサービスの）利用者に提示する。送信者は、メッセージの送信前に、送信相手についての状態情報を確認することによって、適切なコミュニケーションメディアを選択して、メッセージを送信することができる。
【０００４】
また、Ｅメール等のテキストデータから音声データへの変換、あるいは音声データからテキストデータへ音声認識などのメディア変更のための装置、および音声メッセージの録音や種々のメディアフォーマットによる操作ガイダンスを行う装置なども販売されている（例えば、ＮＴＴＤＡＴＡ製マルチメディアカードＶｏｉｓｔａｇｅ、ＯＫＩ製ボイス＆ファクシミリメールシステムＩ−Ｏ−Ｘ５５００等）。
【０００５】
【発明が解決しようとする課題】
ところで、従来のインスタントメッセージサービスは、受信者がコミュニケーション状態を自ら設定することになっている。また、インスタントメッセージサービスでは、音声会話、ショートメッセージ（チャット）、留守番電話、およびＥメール等のように、種々のメッセージメディアを用いることができる。多くの場合、受信者には、受信者の個人的な事情または受信に使用するシステムによる制限等により、コミュニケーションに利用して欲しいメッセージメディアというものが存在する。このため、コミュニケーションメッセージの発信者は、メッセージの送信前に、コミュニケーションを取ろうとする相手である受信者の状態をメッセージ送信前に確認することによって、受信者が望むメッセージメディアを予測し、それを選択してメッセージを送信する。このようにして、受信者に対しメッセージによるコミュニケーションを実行する。
【０００６】
ここで、図２０を参照して、従来のインスタントメッセージサービスのためのシステムの概略を説明する。図２０に示すように、状態管理システム１０１は、例えばネットワーク上に設置される。利用者、すなわち受信者および発信者は、それぞれ端末装置としてのコンピュータ１０２および１０３を、ネットワークを介して状態管理システム１０１に接続している。状態管理システム１０１は、状態データベース（状態ＤＢ）１１１、メディアデータベース（メディアＤＢ）１１２およびコミュニケーションデータベース（コミュニケーションＤＢ）１１３を備えている。状態管理システム１０１は、これら状態データベース１１１、メディアデータベース１１２およびコミュニケーションデータベース１１３を、それぞれ用いて状態確認機能、メディア選択機能およびコミュニケーション機能を実現している。
【０００７】
この図２０のシステムを用いたコミュニケーションに際しては、受信者は、コンピュータ１０２を操作して、状態管理システム１０１の状態データベース１１１に個人状態を設定する。また、同時にメディアデータベース１１２に、その受信者が利用することを所望するメディアを設定するようにしても良い。発信者は、コンピュータ１０３を操作して、状態管理システム１０１の状態データベース１１１に基づくメッセージを送信しようとする相手の状態を参照する。このとき、メディアデータベース１１２により、相手の所望するメディアを参照することができることもある。このようにして、発信者は、相手の所望するメディアを確認または予測し、コンピュータ１０３を操作して、状態管理システム１０１のコミュニケションデータベース１１３に対して該当するメディアにてメッセージを発信する。受信者は、発信者から送信されたメッセージを状態管理システム１０１のコミュニケションデータベース１１３からコンピュータ１０２を介してメッセージを受信する。
【０００８】
また、特開平９−１３５２６４号公報には、Ｅメール受信者が、受信したＥメールのテキストを、所望に応じて、音声情報として読み上げさせるためのシステムが記載されている。特開平９−１３５２６４号公報に開示されたシステムは、Ｅメールのテキストに高精度の読み・韻律情報を付与させるためのテキスト変換サーバと、付与された高精度の読み・韻律情報を用いてテキストに基づく音声情報を生成する音声出力サーバとを有している。Ｅメール受信者は、高精度の読み・韻律情報を生成させるか否か、読み・韻律情報を生成させるＥメールの選択情報、および音声読み上げに使用する音声出力デバイス等を予め設定しておく。Ｅメール受信者が、受信Ｅメールの高精度の読み上げを希望する場合には、受信Ｅメールをテキスト変換サーバに転送し、返送された高精度の読み・韻律情報が付与されたＥメールを、設定された音声出力デバイスで音声読み上げさせる。音声出力デバイスとしては、ローカルな音声合成装置または音声出力サーバが用いられる。ここで、音声出力サーバを用いる場合には、高精度の読み・韻律情報が付与されたＥメールを音声出力サーバに転送し、音声出力サーバから返送される音声情報を再生することになる。
【０００９】
この特開平９−１３５２６４号公報に示されたシステムは、Ｅメール受信後にテキストから音声へメディア変換するものであり、テキスト変換サーバおよび音声出力デバイスにおけるメディア変換は、テキストから音声へのメディア変換に限られており、Ｅメール受信者から変換のために転送された場合に変換する。すなわち、この場合、メディア変換に関しては、Ｅメール受信者は、発信者であり、この発信者の選択によってのみメディア変換される。
【００１０】
したがって、従来のシステムにおいては、次のような問題がある。
（１）送信メディア形態は、発信者の選択に依存しているため、受信者は、自ら所望する形態にそぐわないメディア形態で発信者からのメッセージを受ける可能性がある。
（２）発信者は相手の状態を予測して自らメディア形態を選択するが、そのメディア形態は、発信者が望む形態でない可能性がある。
（３）発信者のコミュニケーション機器によるメディア形態の制限がある場合には、受信者の望むメディア形態でメッセージを送信することができない可能性がある。
【００１１】
この発明は、上述した事情に鑑みてなされたもので、発信者の発信するメッセージのメディア形態にかかわらず、受信者が所望に応じて予め設定したメディア形態でメッセージを受信することができ、メディア形態に制限のある利用者端末によっても広範囲のメッセージの授受が可能となるメッセージ交換システムおよびコンピュータ読み取り可能な記録媒体を提供することを目的とする。
【００１２】
上記目的を達成するため、この発明の第１の観点にかかる環境管理支援システムは、
ある利用者端末から送信されたメッセージを他の利用者端末へ配信するサービスを提供するメッセージ交換システムであって、
利用者端末からその利用者が受信を所望するメッセージのメディア種別を登録する受信メディア登録手段と、
利用者端末からのメッセージの送信時に、その送信メッセージの宛先利用者について登録された受信メディア種別を調べるメディア種別参照手段と、
前記メディア種別参照手段により得られた前記宛先利用者の登録受信メディア種別が、前記送信メッセージのメディア種別と異なるときは、その送信メッセージを登録された受信メディア種別の変換メッセージに変換するとともに、その変換メッセージを発信側の所望するメディア種別にて発信側に送信し、発信側にメディア変換された送信内容を確認させるメディア変換手段と、
前記宛先利用者に、前記送信メッセージおよび変換メッセージのうちの一方を用いて、前記登録受信メディア種別に対応するメッセージを送信するメッセージ送信手段と、
を具備することを特徴とする。
【００１３】
前記受信メディア登録手段により登録される利用者毎の受信メディア種別を格納するデータベース手段をさらに含み、前記メディア種別参照手段は前記データベース手段を参照して宛先利用者の登録受信メディア種別を調べるようにしてもよい。
【００１４】
前記メディア変換手段は、登録された受信メディア種別に変換された送信メッセージを発信者側の所望するメディア種別に変換し、変換した送信メッセージとメッセージ内容を確認することを依頼する旨の通知とを発信側に送信し、発信側からメッセージ内容を確認した旨の通知を受信し、
前記メッセージ送信手段は、前記メディア変換手段が発信側からメッセージ内容を確認した旨の通知を受信したことに応答して前記宛先利用者に、前記送信メッセージ又は変換メッセージを用いて、前記登録受信メディア種別に対応するメッセージを送信してもよい。
【００１６】
この発明の第１の観点に係るメッセージ交換システムは、利用者端末からその利用者が受信を所望するメッセージのメディア種別を受信メディア登録手段に予め登録し、利用者端末からのメッセージの送信時に、メディア種別参照手段により、その送信メッセージの宛先利用者について登録された受信メディア種別を調べ、メディア種別参照手段により得られた宛先利用者の登録受信メディア種別が、送信メッセージのメディア種別と異なるときは、メディア変換手段によって、その送信メッセージを登録された受信メディア種別の変換メッセージに変換して、メッセージ送信手段により、送信メッセージおよび変換メッセージのうちの登録受信メディア種別に対応する一方を用いて、宛先利用者にメッセージを送信する。このメッセージ交換システムでは、メッセージを受信者の指定するメディア形態に変換して配信するので、発信者の発信するメッセージのメディア形態にかかわらず、受信者が所望に応じて予め設定したメディア形態でメッセージを受信することができ、メディア形態に制限のある利用者端末によっても広範囲のメッセージの授受が可能となる。
【００１７】
この発明の第２の観点によるコンピュータ読み取り可能な記録媒体は、
コンピュータを、
利用者端末からその利用者が受信を所望するメッセージのメディア種別を登録する受信メディア登録手段、
利用者端末からのメッセージの送信時に、その送信メッセージの宛先利用者について登録された受信メディア種別を調べるメディア種別参照手段、
前記メディア種別参照手段により得られた前記宛先利用者の登録受信メディア種別が、前記送信メッセージのメディア種別と異なるときは、その送信メッセージを登録された受信メディア種別の変換メッセージに変換するとともに、その変換メッセージを発信側の所望するメディア種別にて発信側に送信し、発信側にメディア変換された送信内容を確認させるメディア変換手段、
および前記宛先利用者に、前記送信メッセージおよび変換メッセージのうちの一方を用いて、前記登録受信メディア種別に対応するメッセージを送信するメッセージ送信手段、
として機能させるためのプログラムを記録している。
【００１８】
前記受信メディア登録手段により登録される利用者毎の受信メディア種別を格納するデータベース手段をさらに含み、前記メディア種別参照手段は前記データベース手段を参照して宛先利用者の登録受信メディア種別を調べさせることとしてもよい。
【００１９】
前記メディア変換手段に、登録された受信メディア種別に変換された送信メッセージを発信者側の所望するメディア種別へ変換させ、変換させた送信メッセージとメッセージ内容を確認することを依頼する旨の通知とを発信側へ送信させ、発信側からメッセージ内容を確認した旨の通知を受信させ、
前記メッセージ送信手段に、前記メディア変換手段が発信側からメッセージ内容を確認した旨の通知を受信したことに応答して前記宛先利用者へ、前記送信メッセージ又は変換メッセージを用いて、前記登録受信メディア種別に対応するメッセージを送信させてもよい。
【００２０】
この発明の第２〜第４の観点に係るコンピュータ読み取り可能な記録媒体に記録されたプログラムでは、メッセージを受信者の指定するメディア形態に変換して配信するので、発信者の発信するメッセージのメディア形態にかかわらず、受信者が所望に応じて予め設定したメディア形態でメッセージを受信することができ、メディア形態に制限のある利用者端末によっても広範囲のメッセージの授受が可能となる。
【００２１】
【発明の実施の形態】
以下、この発明の実施の形態を図面を参照して説明する。すなわち、図１〜図１９を参照して、この発明の実施の形態に係るメッセージ交換システムを説明する。
【００２２】
図１は、この発明の実施の形態に係るメッセージ交換システムの構成を模式的に示している。
【００２３】
図１に示すメッセージ交換システムは、サーバ１、第１の通信機器２および第２の通信機器３を備えている。第１の通信機器２は、この場合、受信者用の利用者端末（装置）であり、第２の通信機器３は、この場合、発信者用の利用者端末装置である。サーバ１は、これら通信機器２および３に、ネットワークを介して結合されており、発信側である第２の通信機器３から受信側である第１の通信機器２へのメッセージ交換を実現する。
【００２４】
サーバ１は、状態確認部、メディア選択部およびメディア変換部を有している。状態確認部は、状態データベース（状態ＤＢ）１１を有する。この状態データベース１１は、例えば通信機器２からの設定により受信等に対する個人状態を示す個人状態情報を登録するとともに、通信機器３から送信時等に相手の個人状態を確認する際に参照される。メディア選択部は、メディアデータベース（メディアＤＢ）１２を有している。メディアデータベース１２は、例えば通信機器２からの設定により受信時に希望するメディア形態を登録する。メディア変換部は、受信データベース（受信ＤＢ）１３、自動応答データベース（自動応答ＤＢ）１４、メディア変換装置１５、および変換後データベース（変換後ＤＢ）１６を有している。受信データベース１３は、発信時に、メディアデータベース１２を参照して調べた宛先となる受信者の所望するメディア形態と共に、自動応答データベース１４に基づく発信者との対話的操作により受信される送信メッセージを格納する。メディア変換装置１５は、受信データベース１３に格納された送信メッセージを指定されたメディア形態に必要に応じて変換して変換後データベース１６に格納する。
【００２５】
変換後データベース１６は、必要に応じて変換し格納したメッセージを宛先の受信者に対応する通信機器２に配信する。メディア変換装置１５は、ハードウェアにより構成してもよいが、その機能の一部または全部をソフトウェアにより構成して、そのソフトウェアの実行により所要の機能を達成するようにしてもよい。
【００２６】
すなわち、このメッセージ交換システムにおいては、概ね、次のような手順に従ってメッセージの交換が行われることになる。
【００２７】
・まず、事前に受信者側がコミュニケーション状態とメディアを決定し、システム、つまりサーバ１の状態データベース１１およびメディアデータベース１２に登録する。具体的には、例えば、劇場および映画館等では携帯電話のマナーモードあるいはメールでの受付を登録し、高速道路および電車等による高速移動中は携帯電話のドライブモードおよび留守番電話受付を登録し、オフィスでの自席パソコン利用時はメール受付を登録し、自宅での家族用電話利用時は、音声受け付けを登録するなどする。
【００２８】
・受信者側の状態とメディアは、受信者の状況が変わる毎に受信者によって変更される。
・発信者は受信者の状態を確認して、コミュニケーションの内容を決定し、発信者自身の望むメディアにより、受信者宛のメッセージをシステム（サーバ１）へ送信する。
・システム（サーバ１）は、宛先すなわち受信者の選択しているメディアを確認し、送信メッセージのメディア形態が一致していなければ、発信者からのメッセージを受信者の所望するメッセージ形態に変換し、受信者に対して配信する。
【００２９】
以下にこの実施の形態によるメッセージ交換システムで実現するシステムの主としてサーバ１における処理の流れを簡単に説明する。なお、図１に示す（１）〜（６）の動作は、以下における（１）〜（６）の各項にそれぞれ対応している。
（１）メッセージ受信者が、アクセス可能、アクセス不可能、および緊急連絡のみ受付などの自分のコミュニケーション状態をシステム（サーバ１の状態データベース１１）に設定する。
（２）メッセージ受信者が、状況に応じた自分が受けたいメディア形態をシステム（サーバ１のメディアデータベース１２）に設定する。この場合のメディア形態としては、例えば、音声（リアルタイム音声）、メール（テキスト）、ボイスメール（留守番電話）、およびメール（蓄積タイプ）等がある。
【００３０】
（３）メッセージ発信者が、システム（サーバ１の状態データベース１１）からメッセージ受信者つまり宛先のコミュニケーションに対する状態を取得する。
（４）メッセージ発信者は、発信者にとって望ましいメディア（例えば、音声（リアルタイム音声）、メール（テキスト）等）を利用して、システムに対してメッセージを発信する。受信者によりメディアが指定されていた場合、それぞれのメディアに対応して、システムと発信者との間で対話的にやり取りされる場合もある。例えば、指定されたメディアが留守番電話の場合には、録音を促す自動応答メッセージに従って音声通話を録音するなどのやりとりが必要となる。
【００３１】
（５）システムによって蓄積された発信者からのメッセージを、メディアデータベース１２に登録された受信者の設定したメディアに変換する。
（６）システム（サーバ１の変換後データベース１６に蓄積された変換されたメッセージは、受信者の設定したメディアにより、即時あるいは受信者が望む時間に受信者に送信される。
【００３２】
このようなシステムを利用することにより、受信者は受信者が望むメディアでメッセージを受け取ることが可能となる。また、発信者は発信者が望むメディアでメッセージを送信することが可能となる。さらに、一部のコミュニケーションツールは、例えば電話は、音声のみ、ファクシミリ（ＦＡＸ）は文字図形パターン入力のみ、およびメール専用端末は文字入力のみなど、取り扱うメディア形態に制限がある。このように様々な制限を持つコミュニケーションツール等で、これまでメッセージを送信することができなかった、利用者に対して機器の持つメディアに適合させてコミュニケーションをとることが可能となる。
【００３３】
以下、上述し且つ図１に示した実施の形態によるメッセージ交換システムについて、さらに具体的に且つ詳細に説明する。
【００３４】
このメッセージ交換システムは、図２に全体を模式的に示すようなシステムとして構成される。すなわち、図２に示すサーバＳは、図１に示すサーバ１に相当する。複数のサービス利用者の利用者端末Ｃ１、Ｃ２およびＣ３等は、携帯電話網Ｎ１、一般電話網Ｎ２およびインターネットＮ３等のネットワークを介してサーバＳに接続されている。これら利用者端末Ｃ１、Ｃ２およびＣ３等は、サーバＳに対するクライアントとして機能し、いずれもメッセージの発信者にも、メッセージの受信者にもなり得る。したがって、図１において説明した通信機器２および３は、これら利用者端末Ｃ１、Ｃ２およびＣ３等のいずれかに相当する。
【００３５】
次に、図１に示したメッセージ交換システムのさらに具体的な動作について説明する。
【００３６】
《前処理》
この発明に従ったメッセージ交換の処理を行う前に、このサービスの利用者はこのメッセージ交換サービスのシステムに登録し、システムヘの認証処理が済んでいること、発信者に何らかの手段で受信者の情報が渡り、発信者の住所録に受信者が登録されていることが必要となる。発信者の住所録とは、このメッセージ交換サービスにより、発信者が、コミュニケーション状態および利用メディア形態を知ることが可能な相手の一覧である。
【００３７】
以下に、図３および図４を参照して、発信者が受信者をこのシステムの住所録に登録するまでの流れを説明する。まず、図３を参照して発信者と受信者がシステムに認証されるまでの前処理について、その処理の流れを説明する。なお、図３に示す（１）〜（５）および（１′）〜（５′）の動作は、以下における（１）〜（５）の各項にそれぞれ対応している。
【００３８】
（１）サービス利用者、つまり発信者および受信者の両者、は、このメッセージ交換システムに対してメッセージ交換サービスを利用することを登録する。
（２）このシステムのサーバ１内のシステムイベント制御部１０Ａは現行会員のＩＤを検索して、ユニークな（唯一の）ＩＤ（識別情報）を割り振り、会員データベース（会員ＤＢ）１０Ｂに、そのＩＤとランダムに作成されたパスワードとを保存する（パスワードはランダムに作成されたものだけではなく、利用者が任意に指定した文字列を利用する場合もある）。
【００３９】
（３）システムイベント制御部１０ＡはユニークなＩＤおよびパスワードをサービス利用者（この場合の発信者および受信者の双方）に通知する。
（４）サービス利用者は、通知されたＩＤおよびパスワードを利用し、システムに対して認証を行う。
【００４０】
（５）認証成功後、サービス利用者はシステムイベント制御部１０Ａに対し、利用者のコミュニケーションに対する状態、および望ましいコミュニケーションメディア形態について設定登録する。
【００４１】
次に、図４を参照して発信者が、自分の個人住所録に受信者を登録するまでの前処理について、その処理の流れを説明する。なお、図４に示す（１）〜（７）の動作は、以下における（１）〜（７）の各項にそれぞれ対応している。
【００４２】
（１）受信者は、何らかのコミュニケーション手段（例えば、直接会っての会話、電話、手紙、Ｅメール等）を利用して、発信者に対して受信者のこのメッセージ交換システムにおけるＩＤ番号を通知する。
（２）発信者は、このシステムに対して認証を行う。
（３）認証成功後、発信者はシステムイベント制御部１０Ａに対して、先に通知された受信者のＩＤ番号を与えて問い合わせを行う。
（４）システムイベント制御部１０Ａは、会員データベース１０Ｂに対して問い合わせを行い、与えられたＩＤ番号に付随する個人情報を取得する。
【００４３】
（５）システムイベント制御部１０Ａは、発信者に対し、問い合わせのあったＩＤ番号の詳細情報を通知する。
（６）発信者は、受信者から先に通知されたＩＤが正しいことを確認し、システムイベント制御部１０Ａに対し、発信者の住所録１０Ｃヘの受信者のＩＤ番号の登録を依頼する。
（７）システムイベント制御部１０Ａは、依頼されたＩＤを発信者用の住所録１０Ｃに追加する。
【００４４】
《メッセージ交換時の全体処理》
次に、図５を参照して、このメッセージ交換システムにおけるメッセージ交換時の全体の処理を説明する。ここでは、受信者が、既に望むメディアを設定した状態で、発信者が受信者に対してメッセージを送付し、受信者が発信者からのメッセージを受け取るまでの処理について、発信者の音声によるメッセージをメールに変換して受信者に届けるまでの処理を例にとって説明する。この場合も、図５に示す（１）〜（１２）の動作は、以下における（１）〜（１２）の各項にそれぞれ対応している。
【００４５】
（１）発信者は、コミュニケーションしようとする相手の受信者の状態を確認する。
（２）発信者は、このシステムに対して受信者宛にコミュニケーシヨンすることを通知する。
（３）このシステムのメッセージ受信装置１７が、メディアデータベース１２に蓄積されている受信者の設定したメディアを取得する。メッセージ受信装置１７は、発信者のこのシステムヘの通知メディアと、受信者の設定したメディアを用いてメッセージの受信方法、メッセージの変換方法を決定する。
【００４６】
（４）メッセージ受信装置１７は、決定されたメッセージ受信方法に従い発信者とのやり取りを準備する（例えば、発信者のメディアが音声で、受信者の設定したメディアがメール（テキスト）の場合、発信者の音声をテキストに変換し送信することを発信者に伝えるための音声応答メッセージを応答データベース１４から用意する）。
（５）メッセージ受信装置１７は、発信者に対して、メッセージを変換する旨と、受信者にメッセージを送付する手段を発信者が用いているメディアにより通知する（この場合は、音声メッセージであるので、音声からテキストに変換して受信者に通知する旨と、一定時間内にメッセージをメッセージ受信装置１７に吹き込み、変換されたテキストメッセージを確認すべきことを通知する）。
【００４７】
（６）発信者は、メッセージ受信装置１７から受けた指示に従い、メッセージをメッセージ受信装置１７に送信する。
（７）メッセージ受信装置１７は、発信者から受けたメッセージを受信データベース１３に格納する。
（８）メッセージ受信装置１７は、メディアデータベース１２から受信者のメディアを取得し、受信データベース１３に格納された発信者のメッセージを受信者の設定したメディアに変換する（この場合は、録音された音声メッセージを音声認識装置を用いてテキストに変換する）。この変換されたメッセージを変換後データベース１６に格納する。
【００４８】
（９）メッセージ受信装置１７は、変換後データベース１６の中の変換されたメッセージを、発信者の用いているメディアに逆変換して、発信者に送信する。
（１０）発信者は、メッセージ受信装置１７から送信された変換されたメッセージを確認し、正しい場合には、メッセージ受信装置１７に対して内容確認通知を返す。
（１１）メッセージ送信装置１８は、受信者の設定したメディア形態をメディアデータベース１２から取得する。
（１２）メッセージ送信装置１８は、変換後データベース１６から受信者に対するメッセージを取得し、受信者の設定したメディア形態で受信者にメッセージを送信する。
【００４９】
次に、サーバ１の内部の主としてメディア変換部におけるメディア変換動作の詳細を図６を参照して説明する。この場合も、図６に示す１〜３８の動作は、以下における１〜３８の各項にそれぞれ対応している。
１：送信者は、送信者の望むメディアでこのシステムの通信制御部に対してメッセージを送信する。
２：通信制御部は、イベント制御部に対してメッセージ送信要求を行う。
３：イベント制御部は、受信データベース制御部に対して送信者からのメッセージの格納を要求する。
【００５０】
４：受信データベース制御部は、受信データベース１３に対してメッセージの格納を要求する。
５：受信データベース制御部は、受信データベース１３から格納結果を取得する。
６：イベント制御部は、受信データベース制御部から格納結果を取得する。
７：イベント制御部は、メディアデータベース制御部に対して受信者の要求するメディア形態（メディアの種別）を要求する。
８：メディアデータベース制御部は、メディアデータベース１２に対して受信者の要求するメディア形態の取得を要求する。
【００５１】
９：メディアデータベース制御部は、メディアデータベース１２から受信者の要求するメディアを取得する。
１０：イベント制御部は、メディアデータベース制御部から受信者の要求するメディア形態を取得する。
１１：イベント制御部は、メディア変換制御部に送信者のメッセージの受信者の要求するメディア形態ヘの変換を要求する。
１２：メディア変換制御部は、受信データベース制御部に対し、送信者のメッセージを要求する。
【００５２】
１３：受信データベース制御部は、受信データベース１３に対し送信者のメッセージを要求する。
１４：受信データベース制御部は、受信データベース１３から送信者のメッセージを取得する。
１５：メディア変換制御部は、受信データベース制御部から送信者のメッセージを取得する。
【００５３】
１６：メディア変換制御部は、受信者の要求するメディア形態と送信者のメッセージのメディア形態により、送信者のメッセージのメディアを変換する。
１７：メディア変換制御部は、送信者に確認するためのメッセージを作成し、応答データベース制御部に格納を要求する。
１８：応答データベース制御部は、自動応答データベース１４に対して確認メッセージの格納を要求する。
【００５４】
１９：応答データベース制御部は、自動応答データベース１４から格納結果を取得する。
２０：メディア変換制御部は、応答データベース制御部から格納結果を取得する。
２１：メディア変換制御部は、応答データベース制御部に対し確認メッセージを要求する。
２２：応答データベース制御部は、自動応答データベース１４に対し確認メッセージを要求する。
【００５５】
２３：応答データベース制御部は、自動応答データベース１４から確認メッセージを取得する。
２４：メディア変換制御部は、応答データベース制御部から確認メッセージを取得する。
２５：メディア変換制御部は、通信制御部に確認メッセージ送付を要求する。
２６：通信制御部は、送信者に確認電文を送付する。
２７：通信制御部は、送信着から回答電文を取得する。
２８：メディア変換制御部は、通信制御部から送信者の回答電文を取得する。
【００５６】
２９：メディア変換制御部は、変換後データベース制御部に対し、１６項で作成した変換された送信者メッセージの格納を要求する（２８項の回答電文により、ここで処理が終了することもある。）。
３０：変換後データベース制御部は、変換後データベース１６に対し変換された送信者メッセージの格納を要求する。
３１：変換後データベース制御部は、変換後データベース１６から格納結果を取得する。
３２：メディア変換制御部は、変換後データベース制御部から格納結果を取得する。
【００５７】
３３：メディア変換制御部は、変換後データベース制御部に対し変換された送信者メッセージを要求する。
３４：変換後データベース制御部は、変換後データベース１６に対し変換された送信者メッセージを要求する。
３５：変換後データベース制御部は、変換後データベース１６から変換された送信者メッセージを取得する。
【００５８】
３６：メディア変換制御部は、変換後データベース制御部から変換された送信者メッセージを取得する。
３７：メディア変換制御部は、通信制御部に対しメッセージの送信を要求する。
３８：通信制御部は受信者に対し、メッセージを送信する。
【００５９】
図５の例では発信者の電話による音声メッセージを受信者にメールで送付するためにテキストに変換する場合の処理について説明している。この実施の形態では、図７に示すようなメディア形態を対象とし、図８に示すようなメディア変換を可能とする。すなわち、取り扱うメディア形態は、テキストからなるＥメールおよびショートメッセージ等のメール、イメージからなるファクシミリおよび手書きメッセージそして音声からなる電話等のメディア形態である。そして、テキストをイメージに変換するには、文字画像変換装置（図９の１５Ａ）を用い、テキストを音声に変換するには、音声読み上げ装置（図９の１５Ｄ）を用い、イメージをテキストに変換するには、文字認識装置（図９の１５Ｂ）を用い、イメージを音声に変換するには、文字認識装置（図９の１５Ｂ）と音声読み上げ装置（図９の１５Ｄ）を併用し、音声をテキストに変換するには、音声認識装置（図９の１５Ｃ）を用い、そして音声をイメージに変換するには音声認識装置（図９の１５Ｃ）と文字画像変換装置（図９の１５Ａ）を併用する。
【００６０】
上述したメディア変換装置１５の詳細を、図９に示す。図９において、メディア変換装置１５は、文字画像変換装置１５Ａ、文字認識装置１５Ｂ、音声認識装置１５Ｃおよび音声読み上げ装置１５Ｄを有する。文字画像変換装置１５Ａは、テキストをイメージに変換する際に用いられ、受信データベース１３から読み出したテキストデータをイメージデータに変換して変換後データベース１６に書き込む。文字認識装置１５Ｂは、イメージをテキストに変換する際に用いられ、受信データベース１３から読み出したイメージデータをテキストデータに変換して変換後データベース１６に書き込む。音声認識装置１５Ｃは、音声をテキストに変換する際に用いられ、受信データベース１３から読み出した音声データをテキストデータに変換して変換後データベース１６に書き込む。そして音声読み上げ装置１５Ｄは、テキストを音声に変換する際に用いられ、受信データベース１３から読み出したテキストデータを音声データに変換して変換後データベース１６に書き込む。
【００６１】
また、上述したように、イメージを音声に変換する際には、受信データベース１３から読み出したイメージデータを文字認識装置１５Ｂによりテキストデータに変換しさらに音声読み上げ装置１５Ｄにより、そのテキストデータを音声データに変換して変換後データベース１６に書き込む。また、音声をイメージに変換する際には、受信データベース１３から読み出した音声データを音声認識装置１５Ｃによりテキストデータに変換しさらに文字画像変換装置１５Ａにより、そのテキストデータをイメージデータに変換して変換後データベース１６に書き込む。これら文字画像変換装置１５Ａ、文字認識装置１５Ｂ、音声認識装置１５Ｃおよび音声読み上げ装置１５Ｄは、全ての処理部分をハードウェア的に構成してもよいが、その一部または全部をソフトウェアの実行による機能として構成してもよい。
【００６２】
このようなメディア変換装置１５に係るメディア変換処理に用いるデータベース構造を図１０に、変換テーブルを図１１に示し、メディア変換処理全体のフローチャートを図１２に示す。さらに、図１２における各変換動作に対応する処理のフローチャートを図１３〜図１９に示す。
【００６３】
図１０に示すデータベース構造は、受信データベース１３および変換後データベース１６等に用いられるデータベース構造である。図示するように、メッセージ毎に、送信者、受信者、送信時間、メディア種別およびメッセージへのポインタが格納されるとともに、テキストファイル、音声ファイルおよびイメージファイルが格納されている。各メッセージにおけるメッセージへのポインタは、テキストファイル、音声ファイルおよびイメージファイルのうちの対応するメディア種別に応じた対応するメッセージの先頭アドレスが格納されている。
【００６４】
図１１は、受信データベース１３から読み出したデータをメディアデータベース１２の示すメディア形態に変換する際の処理を選択するための変換テーブルを示しており、テキストからテキストへの変換は処理〈１〉、テキストからイメージへの変換は処理〈２〉、テキストから音声への変換は処理〈３〉、イメージからテキストへの変換は処理〈４〉、イメージからイメージへの変換は処理〈１〉、イメージから音声への変換は処理〈５〉、音声からテキストへの変換は処理〈６〉、音声からイメージへの変換は処理〈７〉、そして音声から音声への変換は処理〈１〉である。すなわち、処理〈１〉は何も変換しない場合を示している。
【００６５】
次に、図１２に示す処理について説明する。図１２に示す処理は、メッセージの発信毎に起動される。処理が開始されると、まず、強制終了フラグが“０”にリセットされ（ステップＳ１）、メッセージを受信し（ステップＳ２）、受信データベース１３に書き込む（ステップＳ３）。そして、そのメッセージの宛先、つまり受信者、に基づいて、メディアデータベース１２を読み込んで変換すべきメディア種別を確認し（ステップＳ４）、図１１で示した変換テーブルを参照して、変換テーブルに応じた処理〈１〉〜〈７〉のうちのいずれかを実行する（ステップＳ５）。
【００６６】
変換処理が終了すると、強制終了フラグが“１”であるか否かを調べ（ステップＳ６）、“１”でなければ、変換結果を変換後データベース１６に書き込み（ステップＳ７）、宛先の受信者へ配信して（ステップＳ８）、処理を終了する。ステップＳ６において、強制終了フラグが“１”であれば、直ちに処理を終了する。
【００６７】
図１３は、処理〈１〉の内容を示しており、これは、上述したように何も変換する必要がない場合の処理であるから、処理がスタートすると何もせずに直ちに処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００６８】
図１４は、処理〈２〉の内容を示しており、これは、テキストからイメージへの変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージであるテキストデータを読み込む（ステップＳ２１）。そして、読み込んだテキストデータを文字画像変換装置１５Ａにより、文字画像変換して（ステップＳ２２）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００６９】
図１５は、処理〈３〉の内容を示しており、これは、テキストから音声への変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージであるテキストデータを読み込む（ステップＳ３１）。そして、読み込んだテキストデータを音声読み上げ装置１５Ｄによるテキスト音声変換にて音声データに変換して（ステップＳ３２）、得られた音声データを変換後データベース１６に書き込む（ステップＳ３３）。さらに変換後データベース１６から、その音声データを読み込み（ステップＳ３４）、音声認識装置１５Ｃによる音声認識処理にて、テキストデータに変換して（ステップＳ３５）、自動応答データベース１４に書き込み（ステップＳ３６）、このテキストデータを用いて発信者へ確認メッセージを送信して確認を促す（ステップＳ３７）。
【００７０】
そして、発信者からの確認内容が「ＯＫ」であるか否かを判別して（ステップＳ３８）、「ＯＫ」であれば処理を終了する。ステップＳ３８で、発信者の確認内容が「ＯＫ」でなければ、強制終了フラグを“１”にして（ステップＳ３９）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００７１】
図１６は、処理〈４〉の内容を示しており、これは、イメージからテキストへの変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージであるイメージデータを読み込む（ステップＳ４１）。そして、読み込んだイメージデータを文字認識装置１５Ｂによる文字認識処理にて、テキストデータに変換して（ステップＳ４２）、得られたテキストデータを変換後データベース１６に書き込む（ステップＳ４３）。さらに変換後データベース１６から、そのテキストデータを読み込み（ステップＳ４４）、文字画像変換装置１５Ａによる文字画像変換にて、イメージデータに変換して（ステップＳ４５）、自動応答データベース１４に書き込み（ステップＳ４６）、このイメージデータを用いて発信者へ確認メッセージを送信して確認を促す（ステップＳ４７）。そして、発信者からの確認内容が「ＯＫ」であるか否かを判別して（ステップＳ４８）、「ＯＫ」であれば処理を終了する。ステップＳ４８で、発信者の確認内容が「ＯＫ」でなければ、強制終了フラグを“１”にして（ステップＳ４９）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００７２】
図１７は、処理〈５〉の内容を示しており、これは、イメージから音声への変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージであるイメージデータを読み込む（ステップＳ５１）。そして、読み込んだイメージデータを文字認識装置１５Ｂによる文字認識処理にて、テキストデータに変換して（ステップＳ５２）、得られたテキストデータを変換後データベース１６に書き込む（ステップＳ５３）。さらに変換後データベース１６から、そのテキストデータを読み込み（ステップＳ５４）、文字画像変換装置１５Ａによる文字画像変換にて、イメージデータに変換して（ステップＳ５５）、自動応答データベース１４に書き込み（ステップＳ５６）、このイメージデータを用いて発信者へ確認メッセージを送信して確認を促す（ステップＳ５７）。
【００７３】
そして、発信者からの確認内容が「ＯＫ」であるか否かを判別して（ステップＳ５８）、「ＯＫ」であれば、変換後データベース１６から、テキストデータを読み込み（ステップＳ５Ａ）、音声読み上げ装置１５Ｄによる文字音声変換にて、音声データに変換して（ステップＳ５Ｂ）、自動応答データベース１４に書き込み（ステップＳ５Ｃ）、処理を終了する。ステップＳ５８で、発信者の確認内容が「ＯＫ」でなければ、強制終了フラグを“１”にして（ステップＳ５９）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００７４】
図１８は、処理〈６〉の内容を示しており、これは、音声からテキストへの変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージである音声データを読み込む（ステップＳ６１）。そして、読み込んだ音声データを音声認識装置１５Ｃによる音声認識処理にて、テキストデータに変換して（ステップＳ６２）、得られたテキストデータを変換後データベース１６に書き込む（ステップＳ６３）。さらに変換後データベース１６から、そのテキストデータを読み込み（ステップＳ６４）、音声読み上げ装置１５Ｄによる文字音声変換にて、音声データに変換して（ステップＳ６５）、自動応答データベース１４に書き込み（ステップＳ６６）、この音声データを用いて発信者へ確認メッセージを送信して確認を促す（ステップＳ６７）。そして、発信者からの確認内容が「ＯＫ」であるか否かを判別して（ステップＳ６８）、「ＯＫ」であれば処理を終了する。ステップＳ６８で、発信者の確認内容が「ＯＫ」でなければ、強制終了フラグを“１”にして（ステップＳ６９）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
【００７５】
図１９は、処理〈７〉の内容を示しており、これは、音声からイメージへの変換であるから、次のようになる。まず、処理がスタートすると、受信データベース１３から受信メッセージである音声データを読み込む（ステップＳ７１）。そして、読み込んだ音声データを音声認識装置１５Ｃによる音声認識処理にて、テキストデータに変換して（ステップＳ７２）、得られたテキストデータを変換後データベース１６に書き込む（ステップＳ７３）。さらに変換後データベース１６から、そのテキストデータを読み込み（ステップＳ７４）、音声読み上げ装置１５Ｄによる文字音声変換にて、音声データに変換して（ステップＳ７５）、自動応答データベース１４に書き込み（ステップＳ７６）、この音声データを用いて発信者へ確認メッセージを送信して確認を促す（ステップＳ７７）。そして、発信者からの確認内容が「ＯＫ」であるか否かを判別して（ステップＳ７８）、「ＯＫ」であれば、変換後データベース１６から、テキストデータを読み込み（ステップＳ７Ａ）、文字画像変換装置１５Ａによる文字画像変換にて、イメージデータに変換して（ステップＳ７Ｂ）、自動応答データベース１４に書き込み（ステップＳ７Ｃ）、処理を終了する。ステップＳ７８で、発信者の確認内容が「ＯＫ」でなければ、強制終了フラグを“１”にして（ステップＳ７９）、処理を終了する。その後は、図１２のステップＳ６の処理へ進む。
以上のようにして、上述したメディア変換処理を実現することができる。
【００７６】
なお、この発明のメッセージ交換システムは、専用のシステムとして構成することなく、その少なくとも一部を通常のコンピュータシステムを用いて実現することができる。例えば、コンピュータシステムに上述の動作を実行するためのプログラムを格納した媒体（フロッピーディスク、ＣＤ−ＲＯＭ等）から該プログラムをインストールすることにより、上述の処理を実行するメッセージ交換システムを構築することができる。インストールによって、当該プログラムは、コンピュータシステム内のハードディスク等の媒体に格納されて、メッセージ交換システムを構成し、実行に供される。
【００７７】
また、インターネット等の通信ネットワーク上に設けたＦＴＰ（File Transfer Protocol）サーバに当該プログラムを登録し、ＦＴＰクライアントにネットワークを介して配信してもよく、通信ネットワークの電子掲示板（ＢＢＳ：Bulletin Board System）等に該プログラムを登録し、これをネットワークを介して配信してもよい。そして、このプログラムを起動し、ＯＳ（Operating System）の制御下において実行することにより、上述の処理を達成することができる。さらに、通信ネットワークを介してプログラムを転送しながら起動実行することによっても、上述の処理を達成することができる。
【００７８】
【発明の効果】
以上説明したように、この発明によれば、発信者の発信するメッセージのメディア形態にかかわらず、受信者が所望に応じて予め設定したメディア形態でメッセージを受信することができ、メディア形態に制限のある利用者端末によっても広範囲のメッセージの授受が可能となるメッセージ交換システムおよびコンピュータ読み取り可能な記録媒体を提供することができる。
【図面の簡単な説明】
【図１】この発明の実施の形態に係るメッセージ交換システムの構成を模式的に示すブロック図である。
【図２】図１のメッセージ交換システムを用いるメッセージ交換サービス全体の構成を模式的に説明するためのブロック図である。
【図３】図１のメッセージ交換システムの利用者および受信メディアの登録のための前処理を模式的に説明するためのブロック図である。
【図４】図１のメッセージ交換システムの利用者の住所録の登録のための前処理を模式的に説明するためのブロック図である。
【図５】図１のメッセージ交換システムのメディア変換およびメッセージ交換処理を模式的に説明するためのブロック図である。
【図６】図１のメッセージ交換システムのメディア変換処理の詳細を説明するための模式図である。
【図７】図１のメッセージ交換システムのメディア変換処理の詳細を説明するための取扱いメディアを示す図である。
【図８】図１のメッセージ交換システムのメディア変換処理の詳細を説明するための取扱いメディアの変換形態およびそのための手段を示す図である。
【図９】図１のメッセージ交換システムのメディア変換装置の具体的な構成を模式的に示すブロック図である。
【図１０】図１のメッセージ交換システムのメディア変換動作を説明するためのデータベース構造を示す模式図である。
【図１１】図１のメッセージ交換システムのメディア変換パターンを説明するための変換テーブルを示す模式図である。
【図１２】図１のメッセージ交換システムのメディア変換動作を説明するためのフローチャートである。
【図１３】図１のメッセージ交換システムのメディア変換動作における変換処理〈１〉を説明するためのフローチャートである。
【図１４】図１のメッセージ交換システムのメディア変換動作における変換処理〈２〉を説明するためのフローチャートである。
【図１５】図１のメッセージ交換システムのメディア変換動作における変換処理〈３〉を説明するためのフローチャートである。
【図１６】図１のメッセージ交換システムのメディア変換動作における変換処理〈４〉を説明するためのフローチャートである。
【図１７】図１のメッセージ交換システムのメディア変換動作における変換処理〈５〉を説明するためのフローチャートである。
【図１８】図１のメッセージ交換システムのメディア変換動作における変換処理〈６〉を説明するためのフローチャートである。
【図１９】図１のメッセージ交換システムのメディア変換動作における変換処理〈７〉を説明するためのフローチャートである。
【図２０】従来のメッセージ交換システムの構成を模式的に示すブロック図である。
【符号の説明】
１サーバ
２，３通信機器（通信端末）
１１状態データベース
１２メディアデータベース
１３受信データベース
１４自動応答データベース
１５メディア変換装置
１６変換後データベース
１７メッセージ受信装置
１８メッセージ送信装置
１５Ａ文字画像変換装置
１５Ｂ文字認識装置
１５Ｃ音声認識装置
１５Ｄ音声読み上げ装置[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a message exchange system that provides a service for distributing a message transmitted from a certain user terminal to another user terminal on a network, such as an instant message service, and is particularly simple. The present invention relates to a message exchange system and a recording medium capable of realizing message delivery by a desired media type.
[0002]
[Prior art]
As a communication means on the network, for example, on the Internet, an instant message service already exists as a system that can grasp the situation of the other party who wants to communicate before starting communication and can communicate on an appropriate medium. Examples of communication media include voice messages based on voice information, short messages based on text information and text messages such as normal electronic mail (E-mail), and image messages based on images.
[0003]
A user who uses such an instant message connects to a server that manages the status of all users and sets his or her communication status to the server. The communication state includes [online], [offline], [away], [don't disturb], [chat], and the like. The user sets the state in the server by selecting these states from the menu. By setting in the server, the user's own status is presented to other users (of the instant messaging service). The sender can select the appropriate communication medium and send the message by checking the status information about the other party before sending the message.
[0004]
Also, devices for changing media such as conversion from text data such as e-mail to voice data, or voice recognition from voice data to text data, and devices for recording voice messages and providing operational guidance in various media formats, etc. (For example, NTT DATA multimedia card VOISTAGE, OKI voice & facsimile mail system I-O-X 5500, etc.).
[0005]
[Problems to be solved by the invention]
By the way, in the conventional instant message service, the receiver sets the communication state by himself / herself. In the instant message service, various message media such as voice conversation, short message (chat), answering machine, and e-mail can be used. In many cases, there are message media that the receiver wants to use for communication due to the personal circumstances of the receiver or restrictions by the system used for reception. For this reason, before sending a message, the sender of a communication message predicts the message media that the recipient wants by checking the status of the recipient with whom communication is intended before sending the message. Select to send a message. In this way, communication by message is executed to the recipient.
[0006]
Here, with reference to FIG. 20, the outline of the system for the conventional instant message service is demonstrated. As shown in FIG. 20, the state management system 101 is installed on a network, for example. Users, that is, recipients and senders, connect computers 102 and 103 as terminal devices to the state management system 101 via a network, respectively. The state management system 101 includes a state database (state DB) 111, a media database (media DB) 112, and a communication database (communication DB) 113. The state management system 101 implements a state confirmation function, a media selection function, and a communication function by using the state database 111, the media database 112, and the communication database 113, respectively.
[0007]
In communication using the system of FIG. 20, the recipient operates the computer 102 to set the personal state in the state database 111 of the state management system 101. At the same time, media that the recipient desires to use may be set in the media database 112. The caller operates the computer 103 to refer to the state of the other party who is going to send a message based on the state database 111 of the state management system 101. At this time, the media database 112 may be able to refer to the media desired by the other party. In this way, the caller confirms or predicts the other party's desired media, operates the computer 103, and sends a message using the corresponding media to the communication database 113 of the state management system 101. The receiver receives the message transmitted from the caller from the communication database 113 of the state management system 101 via the computer 102.
[0008]
Japanese Patent Laid-Open No. 9-135264 describes a system that allows an e-mail recipient to read out the text of the received e-mail as audio information as desired. A system disclosed in Japanese Patent Application Laid-Open No. 9-135264 discloses a text conversion server for adding high-precision reading / prosodic information to e-mail text and text using the provided high-precision reading / prosodic information. And an audio output server for generating audio information based on. The e-mail recipient sets in advance whether or not to generate high-precision reading / prosodic information, e-mail selection information for generating reading / prosodic information, and an audio output device used for reading aloud. When the email recipient wishes to read out the received email with high accuracy, the received email is transferred to the text conversion server, and the returned email with the high-precision reading / prosodic information is added. Read aloud using the set audio output device. A local speech synthesizer or speech output server is used as the speech output device. Here, when the voice output server is used, the email to which high-precision reading / prosodic information is added is transferred to the voice output server, and the voice information returned from the voice output server is reproduced.
[0009]
The system disclosed in Japanese Patent Application Laid-Open No. 9-135264 converts media from text to speech after receiving an e-mail, and media conversion in a text conversion server and an audio output device is media conversion from text to speech. It is limited and converts when it is transferred from the e-mail recipient for conversion. That is, in this case, with respect to media conversion, the e-mail recipient is a sender, and the media is converted only by the selection of the sender.
[0010]
Therefore, the conventional system has the following problems.
(1) Since the transmission media form depends on the selection of the caller, the receiver may receive a message from the caller in a media form that does not match the desired form.
(2) The caller predicts the state of the other party and selects the media form himself, but the media form may not be the form desired by the caller.
(3) When there is a restriction on the media form by the communication device of the caller, there is a possibility that the message cannot be transmitted in the media form desired by the recipient.
[0011]
The present invention has been made in view of the circumstances described above, and can receive a message in a media form preset by the receiver as desired regardless of the media form of the message sent by the caller. It is an object of the present invention to provide a message exchange system and a computer-readable recording medium capable of sending and receiving a wide range of messages even by a user terminal having a limited form.
[0012]
  In order to achieve the above object, an environmental management support system according to the first aspect of the present invention provides:
  A message exchange system that provides a service for distributing a message transmitted from a user terminal to another user terminal,
  Receiving media registration means for registering the media type of the message that the user desires to receive from the user terminal;
  Media type reference means for checking the received media type registered for the destination user of the transmission message when transmitting a message from the user terminal;
  When the registered reception media type of the destination user obtained by the media type reference means is different from the media type of the transmission message, the transmission message is converted into a conversion message of the registered reception media type.At the same time, the conversion message is transmitted to the calling party in the media type desired by the calling party, and the transmitting side confirms the content of the media conversion.Media conversion means;
  Message transmission means for transmitting a message corresponding to the registered reception media type to the destination user using one of the transmission message and the conversion message;
  It is characterized by comprising.
[0013]
It further includes database means for storing the reception media type for each user registered by the reception media registration means, and the media type reference means refers to the database means to check the registered reception media type of the destination user. May be.
[0014]
  The media conversion means includesThe transmission message converted to the registered reception media type is converted to the media type desired by the caller, and the converted transmission message and a notification requesting confirmation of the message content are sent to the caller. Receive notification from the caller that the message has been confirmed,
The message transmission means uses the transmission message or the conversion message to the destination user in response to receiving a notification that the media conversion means has confirmed the message content from the calling side, and uses the transmission message or the conversion message to register the received reception medium. Even if a message corresponding to the type is sentGood.
[0016]
In the message exchange system according to the first aspect of the present invention, the media type of the message that the user desires to receive from the user terminal is pre-registered in the reception media registration means, and when the message is transmitted from the user terminal, When the received media type registered for the destination user of the transmission message is checked by the media type reference means, and the registered reception media type of the destination user obtained by the media type reference means is different from the media type of the transmission message Then, the media conversion means converts the transmission message into a conversion message of the registered reception media type, and the message transmission means uses one of the transmission message and the conversion message corresponding to the registered reception media type to Send a message to the user. In this message exchange system, since the message is converted into a media format designated by the recipient and distributed, the message is sent in a media format preset by the recipient as desired regardless of the media format of the message sent by the sender. Can be received, and a wide range of messages can be exchanged even by a user terminal with a limited media form.
[0017]
  A computer-readable recording medium according to the second aspect of the present invention provides:
  Computer
Received media registration means for registering the media type of the message that the user desires to receive from the user terminal,
A media type reference means for checking a received media type registered for a destination user of the transmission message when a message is transmitted from the user terminal;
When the registered reception media type of the destination user obtained by the media type reference means is different from the media type of the transmission message, the transmission message is converted into a conversion message of the registered reception media type, and Media conversion means for transmitting the conversion message to the calling side in the media type desired by the calling side, and causing the calling side to confirm the transmission content that has been converted to media,
And a message transmission means for transmitting to the destination user a message corresponding to the registered reception media type using one of the transmission message and the conversion message,
  The program to make it function as is recorded.
[0018]
  It further includes database means for storing the reception media type for each user registered by the reception media registration means, and the media type reference means refers to the database means to check the registered reception media type of the destination user. It is good.
[0019]
  A notification for requesting the media conversion means to convert the transmission message converted into the registered reception media type into the media type desired by the caller and to confirm the converted transmission message and the message content; Is sent to the caller and a notification is received from the caller that the message content has been confirmed.
In response to receiving notification that the media conversion unit has confirmed the message content from the caller to the message transmission unit, the registered reception medium is transmitted to the destination user using the transmission message or the conversion message. A message corresponding to the type may be transmitted.
[0020]
In the program recorded on the computer-readable recording medium according to the second to fourth aspects of the present invention, the message is converted into a media form designated by the recipient and distributed, so the medium of the message sent by the sender Regardless of the form, a message can be received in a media form preset by the recipient as desired, and a wide range of messages can be exchanged even by a user terminal with a limited media form.
[0021]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings. That is, a message exchange system according to an embodiment of the present invention will be described with reference to FIGS.
[0022]
FIG. 1 schematically shows a configuration of a message exchange system according to an embodiment of the present invention.
[0023]
The message exchange system shown in FIG. 1 includes a server 1, a first communication device 2, and a second communication device 3. In this case, the first communication device 2 is a user terminal (device) for the recipient, and the second communication device 3 is a user terminal device for the sender in this case. The server 1 is coupled to these communication devices 2 and 3 via a network, and implements message exchange from the second communication device 3 that is the transmission side to the first communication device 2 that is the reception side.
[0024]
The server 1 has a state confirmation unit, a media selection unit, and a media conversion unit. The state confirmation unit has a state database (state DB) 11. This status database 11 is registered when, for example, personal status information indicating a personal status with respect to reception or the like is registered by setting from the communication device 2 and the personal status of the other party is confirmed at the time of transmission from the communication device 3. The media selection unit has a media database (media DB) 12. The media database 12 registers the media type desired at the time of reception by setting from the communication device 2, for example. The media conversion unit includes a reception database (reception DB) 13, an automatic response database (automatic response DB) 14, a media conversion device 15, and a converted database (converted DB) 16. The reception database 13 stores a transmission message received by an interactive operation with the caller based on the automatic response database 14 together with a media form desired by the receiver as a destination checked with reference to the media database 12 at the time of outgoing call. To do. The media conversion device 15 converts the transmission message stored in the reception database 13 into a designated media form as necessary and stores it in the converted database 16.
[0025]
The post-conversion database 16 distributes the message converted and stored as necessary to the communication device 2 corresponding to the destination recipient. The media conversion device 15 may be configured by hardware, but a part or all of the functions thereof may be configured by software, and the required functions may be achieved by executing the software.
[0026]
That is, in this message exchange system, messages are generally exchanged according to the following procedure.
[0027]
First, the receiver side determines the communication state and media in advance and registers them in the system, that is, the state database 11 and the media database 12 of the server 1. Specifically, for example, in theaters and movie theaters, register cellular phone manner mode or e-mail reception, register mobile phone drive mode and answering machine reception during high-speed movement on highways and trains, etc. Register email reception when using a personal computer at the office, and register voice reception when using a family phone at home.
[0028]
• The recipient's status and media are changed by the recipient each time the recipient's status changes.
The sender confirms the status of the receiver, determines the content of communication, and transmits a message addressed to the receiver to the system (server 1) by the medium desired by the sender.
The system (server 1) checks the destination, that is, the media selected by the recipient, and if the media format of the transmitted message does not match, converts the message from the originator into the message format desired by the recipient. , Deliver to recipients.
[0029]
The process flow in the server 1 of the system realized by the message exchange system according to this embodiment will be briefly described below. The operations (1) to (6) shown in FIG. 1 correspond to the following items (1) to (6), respectively.
(1) The message receiver sets his / her communication status such as accessible, inaccessible, and receiving only emergency contact in the system (the status database 11 of the server 1).
(2) The message recipient sets the media form he / she wants to receive according to the situation in the system (media database 12 of the server 1). Examples of media forms in this case include voice (real-time voice), mail (text), voice mail (answering machine), mail (accumulation type), and the like.
[0030]
(3) The message sender obtains the status of the message receiver, that is, the destination communication from the system (the state database 11 of the server 1).
(4) The message sender sends a message to the system using a medium desirable for the caller (for example, voice (real-time voice), mail (text), etc.). When media are specified by the receiver, there is a case in which the system and the sender interact interactively corresponding to each media. For example, when the designated medium is an answering machine, an exchange such as recording a voice call in accordance with an automatic response message prompting recording is required.
[0031]
(5) The message from the sender stored by the system is converted to the media set by the receiver registered in the media database 12.
(6) The system (the converted message stored in the post-conversion database 16 of the server 1) is sent to the recipient immediately or at the time desired by the recipient, by the media set by the recipient.
[0032]
By using such a system, the recipient can receive the message on the media that the recipient desires. In addition, the caller can transmit a message using the media desired by the caller. In addition, some communication tools have limited media formats, for example, phone only for voice, facsimile (FAX) only for character / graphic pattern input, and mail dedicated terminal only for character input. As described above, it is possible to communicate with a user who has not been able to send a message by using a communication tool having various restrictions so as to be adapted to the media of the device.
[0033]
Hereinafter, the message exchange system according to the embodiment described above and shown in FIG. 1 will be described more specifically and in detail.
[0034]
This message exchange system is configured as a system as schematically shown in FIG. That is, the server S shown in FIG. 2 corresponds to the server 1 shown in FIG. User terminals C1, C2, and C3 of a plurality of service users are connected to the server S via a network such as a mobile phone network N1, a general telephone network N2, and the Internet N3. These user terminals C1, C2, and C3 and the like function as clients to the server S, and any of them can be a message sender and a message receiver. Therefore, the communication devices 2 and 3 described in FIG. 1 correspond to any of these user terminals C1, C2, and C3.
[0035]
Next, a more specific operation of the message exchange system shown in FIG. 1 will be described.
[0036]
"Preprocessing"
Before the message exchange process according to the present invention is performed, the user of this service is registered in the system of this message exchange service and the authentication process for the system has been completed. It is necessary that the information is passed and that the recipient is registered in the sender's address book. The sender's address book is a list of the parties with whom the sender can know the communication status and the type of media used by this message exchange service.
[0037]
Hereinafter, a flow until the caller registers the receiver in the address book of this system will be described with reference to FIGS. First, with reference to FIG. 3, the flow of the pre-processing until the sender and the receiver are authenticated by the system will be described. The operations (1) to (5) and (1 ′) to (5 ′) shown in FIG. 3 correspond to the following items (1) to (5), respectively.
[0038]
(1) The service user, that is, both the sender and the receiver, register to use the message exchange service for this message exchange system.
(2) The system event control unit 10A in the server 1 of this system searches the ID of the current member, assigns a unique (unique) ID (identification information), and assigns the ID to the member database (member DB) 10B. And randomly created passwords (in addition to randomly created passwords, there are cases where a user arbitrarily uses a character string).
[0039]
(3) The system event control unit 10A notifies the service user (both the sender and receiver in this case) of a unique ID and password.
(4) The service user authenticates the system using the notified ID and password.
[0040]
(5) After successful authentication, the service user sets and registers the user's communication status and desirable communication media type in the system event control unit 10A.
[0041]
Next, with reference to FIG. 4, the flow of the pre-processing until the sender registers the recipient in his / her personal address book will be described. The operations (1) to (7) shown in FIG. 4 correspond to the items (1) to (7) below, respectively.
[0042]
(1) The recipient notifies the caller of the ID number in the message exchange system of the recipient by using some communication means (for example, direct conversation, telephone, letter, e-mail, etc.). .
(2) The caller authenticates to this system.
(3) After the authentication is successful, the sender makes an inquiry to the system event control unit 10A by giving the ID number of the recipient notified in advance.
(4) The system event control unit 10A makes an inquiry to the member database 10B, and acquires personal information associated with the given ID number.
[0043]
(5) The system event control unit 10A notifies the caller of the detailed information of the inquired ID number.
(6) The caller confirms that the ID previously notified by the receiver is correct, and requests the system event control unit 10A to register the receiver's ID number in the caller's address book 10C.
(7) The system event control unit 10A adds the requested ID to the address book 10C for the caller.
[0044]
<Overall processing during message exchange>
Next, with reference to FIG. 5, the overall processing at the time of message exchange in this message exchange system will be described. Here, with the receiver already setting the desired media, the caller sends a message to the receiver and the process until the receiver receives the message from the caller An example of the process from the conversion to e-mail and delivery to the recipient will be described. Also in this case, the operations (1) to (12) shown in FIG. 5 correspond to the items (1) to (12) below, respectively.
[0045]
(1) The caller confirms the status of the recipient who is trying to communicate.
(2) The caller notifies the system that communication is to be made to the recipient.
(3) The message receiving device 17 of this system acquires the media set by the recipient stored in the media database 12. The message receiving device 17 determines a message receiving method and a message converting method using a notification medium of the caller to the system and a medium set by the receiver.
[0046]
(4) The message receiving device 17 prepares an exchange with the caller according to the determined message receiving method (for example, when the caller's media is voice and the media set by the receiver is mail (text) A voice response message is prepared from the response database 14 to inform the caller that the person's voice is converted into text and transmitted).
(5) The message receiving device 17 notifies the caller that the message is to be converted and means for sending the message to the receiver by the medium used by the caller (in this case, a voice message) Therefore, it is converted from voice to text and notified to the recipient, and a message is blown into the message receiving device 17 within a predetermined time to notify that the converted text message should be confirmed).
[0047]
(6) The caller transmits a message to the message receiving device 17 in accordance with the instruction received from the message receiving device 17.
(7) The message receiving device 17 stores the message received from the caller in the reception database 13.
(8) The message receiving device 17 acquires the recipient's media from the media database 12, and converts the sender's message stored in the receiving database 13 into the media set by the recipient (in this case, the recorded message is recorded). Convert voice messages to text using a speech recognizer). The converted message is stored in the converted database 16.
[0048]
(9) The message receiving device 17 converts the converted message in the converted database 16 back to the medium used by the caller and transmits it to the caller.
(10) The caller confirms the converted message transmitted from the message reception device 17 and returns a content confirmation notification to the message reception device 17 if it is correct.
(11) The message transmission device 18 acquires the media form set by the recipient from the media database 12.
(12) The message transmission device 18 acquires a message for the recipient from the converted database 16 and sends the message to the recipient in the media form set by the recipient.
[0049]
Next, details of the media conversion operation mainly in the media conversion unit inside the server 1 will be described with reference to FIG. Also in this case, the operations 1 to 38 shown in FIG. 6 correspond to the following items 1 to 38, respectively.
1: The sender sends a message to the communication control unit of this system using the medium desired by the sender.
2: The communication control unit makes a message transmission request to the event control unit.
3: The event control unit requests the reception database control unit to store a message from the sender.
[0050]
4: The reception database control unit requests the reception database 13 to store a message.
5: The reception database control unit acquires the storage result from the reception database 13.
6: The event control unit acquires the storage result from the reception database control unit.
7: The event control unit requests the media type (media type) requested by the receiver from the media database control unit.
8: The media database control unit requests the media database 12 to acquire the media form requested by the recipient.
[0051]
9: The media database control unit acquires the media requested by the recipient from the media database 12.
10: The event control unit acquires the media form requested by the recipient from the media database control unit.
11: The event control unit requests the media conversion control unit to convert the message of the sender to the media type requested by the receiver.
12: The media conversion control unit requests the sender database message from the reception database control unit.
[0052]
13: The reception database control unit requests the sender database 13 for the sender's message.
14: The reception database control unit acquires the sender's message from the reception database 13.
15: The media conversion control unit acquires the sender's message from the reception database control unit.
[0053]
16: The media conversion control unit converts the media of the sender's message according to the media format requested by the receiver and the media format of the sender's message.
17: The media conversion control unit creates a message for confirmation with the sender, and requests the response database control unit to store it.
18: The response database control unit requests the automatic response database 14 to store a confirmation message.
[0054]
19: The response database control unit acquires the storage result from the automatic response database 14.
20: The media conversion control unit acquires the storage result from the response database control unit.
21: The media conversion control unit requests a confirmation message from the response database control unit.
22: The response database control unit requests a confirmation message from the automatic response database 14.
[0055]
23: The response database control unit acquires a confirmation message from the automatic response database 14.
24: The media conversion control unit acquires a confirmation message from the response database control unit.
25: The media conversion control unit requests the communication control unit to send a confirmation message.
26: The communication control unit sends a confirmation message to the sender.
27: The communication control unit acquires a reply message from the transmission arrival.
28: The media conversion control unit acquires the reply message of the sender from the communication control unit.
[0056]
29: The media conversion control unit requests the post-conversion database control unit to store the converted sender message created in item 16 (the process may be terminated here by the reply message in item 28). ).
30: The post-conversion database control unit requests the post-conversion database 16 to store the converted sender message.
31: The post-conversion database control unit acquires the storage result from the post-conversion database 16.
32: The media conversion control unit acquires the storage result from the post-conversion database control unit.
[0057]
33: The media conversion control unit requests the converted sender message to the converted database control unit.
34: The post-conversion database control unit requests the converted sender message from the post-conversion database 16.
35: The converted database control unit acquires the converted sender message from the converted database 16.
[0058]
36: The media conversion control unit acquires the converted sender message from the post-conversion database control unit.
37: The media conversion control unit requests the communication control unit to transmit a message.
38: The communication control unit transmits a message to the receiver.
[0059]
In the example of FIG. 5, processing is described in the case where a voice message by a caller's telephone is converted into text for mailing to the recipient. In this embodiment, the media format as shown in FIG. 7 is targeted, and media conversion as shown in FIG. 8 is possible. That is, the media forms handled are media forms such as e-mails composed of text and mails such as short messages, facsimiles composed of images, handwritten messages, and telephones composed of voices. In order to convert text into an image, a character image converter (15A in FIG. 9) is used, and in order to convert text into speech, an audio reading device (15D in FIG. 9) is used to convert an image into text. The character recognition device (15B in FIG. 9) is used to convert the image into speech, and the character recognition device (15B in FIG. 9) and the speech reading device (15D in FIG. 9) are used together. A voice recognition device (15C in FIG. 9) is used for conversion to text, and a voice recognition device (15C in FIG. 9) and a character image conversion device (15A in FIG. 9) are used together to convert voice into an image. To do.
[0060]
Details of the media conversion device 15 described above are shown in FIG. In FIG. 9, the media conversion device 15 includes a character image conversion device 15A, a character recognition device 15B, a voice recognition device 15C, and a voice reading device 15D. The character image conversion device 15A is used when converting text into an image. The text image conversion device 15A converts text data read from the reception database 13 into image data and writes the image data in the converted database 16. The character recognition device 15B is used when converting an image into text, converts the image data read from the reception database 13 into text data, and writes it into the converted database 16. The voice recognition device 15 </ b> C is used when converting voice into text, converts voice data read from the reception database 13 into text data, and writes it into the converted database 16. The voice reading device 15D is used when text is converted into voice, and the text data read from the reception database 13 is converted into voice data and written in the converted database 16.
[0061]
Further, as described above, when converting an image into speech, the image data read from the reception database 13 is converted into text data by the character recognition device 15B, and the text data is converted into speech data by the speech reading device 15D. Convert and write to the database 16 after conversion. When voice is converted into an image, the voice data read from the reception database 13 is converted into text data by the voice recognition device 15C, and the text data is converted into image data by the character image conversion device 15A. After that, it writes in the database 16. The character image conversion device 15A, the character recognition device 15B, the speech recognition device 15C, and the speech reading device 15D may be configured by hardware for all processing portions, but some or all of them are functions by executing software. You may comprise as.
[0062]
FIG. 10 shows a database structure used for media conversion processing according to such a media conversion device 15, FIG. 11 shows a conversion table, and FIG. 12 shows a flowchart of the entire media conversion processing. Furthermore, flowcharts of processes corresponding to the respective conversion operations in FIG. 12 are shown in FIGS.
[0063]
The database structure shown in FIG. 10 is a database structure used for the reception database 13 and the converted database 16. As shown in the figure, for each message, a sender, a receiver, a transmission time, a media type, and a pointer to the message are stored, and a text file, an audio file, and an image file are stored. The pointer to the message in each message stores the start address of the corresponding message corresponding to the corresponding media type among the text file, the audio file, and the image file.
[0064]
FIG. 11 shows a conversion table for selecting a process for converting the data read from the reception database 13 into the media form indicated by the media database 12. The conversion from text to text is the process <1>, the text Conversion from image to image <2>, conversion from text to audio <3>, conversion from image to text <4>, conversion from image to image <1>, image to audio Conversion to process <5>, conversion from voice to text is process <6>, conversion from voice to image is process <7>, and conversion from voice to voice is process <1>. That is, the process <1> shows a case where nothing is converted.
[0065]
Next, the process shown in FIG. 12 will be described. The process shown in FIG. 12 is started every time a message is transmitted. When the process is started, first, the forced termination flag is reset to “0” (step S1), a message is received (step S2), and written in the reception database 13 (step S3). Then, based on the destination of the message, that is, the recipient, the media database 12 is read to confirm the media type to be converted (step S4), and according to the conversion table with reference to the conversion table shown in FIG. Any one of the processes <1> to <7> is executed (step S5).
[0066]
When the conversion process ends, it is checked whether or not the forced end flag is “1” (step S6). If it is not “1”, the conversion result is written in the converted database 16 (step S7), and the recipient of the destination (Step S8), and the process ends. If the forced end flag is “1” in step S6, the process is immediately ended.
[0067]
FIG. 13 shows the contents of the process <1>, which is a process when there is no need to convert anything as described above, and when the process starts, the process is immediately terminated without doing anything. Thereafter, the process proceeds to step S6 in FIG.
[0068]
FIG. 14 shows the contents of the process <2>, which is a conversion from text to an image, and is as follows. First, when the process starts, text data as a received message is read from the reception database 13 (step S21). Then, the read text data is converted into a character image by the character image conversion device 15A (step S22), and the process ends. Thereafter, the process proceeds to step S6 in FIG.
[0069]
FIG. 15 shows the contents of the process <3>, which is conversion from text to speech, and is as follows. First, when the process starts, text data as a received message is read from the reception database 13 (step S31). The read text data is converted into voice data by text-to-speech conversion by the voice reading device 15D (step S32), and the obtained voice data is written in the converted database 16 (step S33). Further, the voice data is read from the converted database 16 (step S34), converted into text data by voice recognition processing by the voice recognition device 15C (step S35), and written in the automatic response database 14 (step S36). A confirmation message is transmitted to the caller using this text data to prompt confirmation (step S37).
[0070]
And it is discriminate | determined whether the confirmation content from a sender | caller is "OK" (step S38), and if it is "OK", a process will be complete | finished. If the confirmation content of the caller is not “OK” in step S38, the forced termination flag is set to “1” (step S39), and the process is terminated. Thereafter, the process proceeds to step S6 in FIG.
[0071]
FIG. 16 shows the content of the process <4>, which is conversion from an image to text, and is as follows. First, when the process starts, image data as a reception message is read from the reception database 13 (step S41). The read image data is converted into text data by character recognition processing by the character recognition device 15B (step S42), and the obtained text data is written in the converted database 16 (step S43). Further, the text data is read from the converted database 16 (step S44), converted into image data by character image conversion by the character image conversion device 15A (step S45), and written in the automatic response database 14 (step S46). Then, a confirmation message is transmitted to the caller using this image data to prompt confirmation (step S47). And it is discriminate | determined whether the confirmation content from a sender | caller is "OK" (step S48), and if it is "OK", a process will be complete | finished. If the confirmation content of the caller is not “OK” in step S48, the forced termination flag is set to “1” (step S49), and the process is terminated. Thereafter, the process proceeds to step S6 in FIG.
[0072]
FIG. 17 shows the content of the process <5>, which is conversion from image to sound, and is as follows. First, when the process starts, image data as a reception message is read from the reception database 13 (step S51). The read image data is converted into text data by character recognition processing by the character recognition device 15B (step S52), and the obtained text data is written into the converted database 16 (step S53). Further, the text data is read from the converted database 16 (step S54), converted into image data by character image conversion by the character image conversion device 15A (step S55), and written to the automatic response database 14 (step S56). Using this image data, a confirmation message is sent to the caller to prompt confirmation (step S57).
[0073]
Then, it is determined whether or not the confirmation content from the caller is “OK” (step S58). If “OK”, the text data is read from the converted database 16 (step S5A) and read aloud. The voice data is converted into voice data by the device 15D (step S5B), written in the automatic response database 14 (step S5C), and the process is terminated. If the confirmation content of the caller is not “OK” in step S58, the forced termination flag is set to “1” (step S59), and the process is terminated. Thereafter, the process proceeds to step S6 in FIG.
[0074]
FIG. 18 shows the contents of the process <6>, which is conversion from voice to text, and is as follows. First, when the process starts, voice data as a received message is read from the reception database 13 (step S61). The read voice data is converted into text data by voice recognition processing by the voice recognition device 15C (step S62), and the obtained text data is written in the converted database 16 (step S63). Further, the text data is read from the converted database 16 (step S64), converted into voice data by character-to-speech conversion by the voice reading device 15D (step S65), and written in the automatic response database 14 (step S66). Using this voice data, a confirmation message is sent to the caller to prompt confirmation (step S67). Then, it is determined whether or not the confirmation content from the caller is “OK” (step S68). If “OK”, the process is terminated. If the confirmation content of the caller is not “OK” in step S68, the forced termination flag is set to “1” (step S69), and the process is terminated. Thereafter, the process proceeds to step S6 in FIG.
[0075]
FIG. 19 shows the contents of the process <7>, which is a conversion from sound to image, and is as follows. First, when the process starts, voice data as a received message is read from the reception database 13 (step S71). The read voice data is converted into text data by voice recognition processing by the voice recognition device 15C (step S72), and the obtained text data is written in the converted database 16 (step S73). Further, the text data is read from the converted database 16 (step S74), converted into voice data by character-to-speech conversion by the voice reading device 15D (step S75), and written into the automatic response database 14 (step S76). Using this voice data, a confirmation message is sent to the caller to prompt confirmation (step S77). Then, it is determined whether or not the confirmation content from the caller is “OK” (step S78). If “OK”, text data is read from the converted database 16 (step S7A), and the character image is read. Character data is converted by the conversion device 15A into image data (step S7B), written in the automatic response database 14 (step S7C), and the process ends. If the confirmation content of the caller is not “OK” in step S78, the forced termination flag is set to “1” (step S79), and the process is terminated. Thereafter, the process proceeds to step S6 in FIG.
As described above, the media conversion process described above can be realized.
[0076]
The message exchange system according to the present invention can be realized at least partially using a normal computer system without being configured as a dedicated system. For example, a message exchange system for executing the above-described processing can be constructed by installing the program from a medium (floppy disk, CD-ROM, etc.) storing a program for executing the above-described operation in a computer system. it can. By installation, the program is stored in a medium such as a hard disk in the computer system, constitutes a message exchange system, and is used for execution.
[0077]
Alternatively, the program may be registered in an FTP (File Transfer Protocol) server provided on a communication network such as the Internet and distributed to an FTP client via the network. An electronic bulletin board (BBS: Bulletin Board System) of the communication network It is also possible to register the program in a network and distribute it via a network. The above-described processing can be achieved by starting this program and executing it under the control of an OS (Operating System). Furthermore, the above-described processing can also be achieved by starting and executing a program while transferring it via a communication network.
[0078]
【The invention's effect】
As described above, according to the present invention, regardless of the media form of the message sent by the caller, the message can be received in a media form preset by the receiver as desired, and the media form is limited. It is possible to provide a message exchange system and a computer-readable recording medium that can exchange a wide range of messages even with a certain user terminal.
[Brief description of the drawings]
FIG. 1 is a block diagram schematically showing a configuration of a message exchange system according to an embodiment of the present invention.
FIG. 2 is a block diagram for schematically explaining the overall configuration of a message exchange service using the message exchange system of FIG. 1;
FIG. 3 is a block diagram for schematically explaining preprocessing for registration of a user and reception media of the message exchange system of FIG. 1;
4 is a block diagram for schematically explaining preprocessing for registering a user's address book in the message exchange system of FIG. 1; FIG.
FIG. 5 is a block diagram for schematically explaining media conversion and message exchange processing of the message exchange system of FIG. 1;
6 is a schematic diagram for explaining details of media conversion processing of the message exchange system of FIG. 1; FIG.
7 is a diagram showing a handling medium for explaining details of media conversion processing of the message exchange system of FIG. 1; FIG.
FIG. 8 is a diagram showing a handling media conversion form and means for that in order to explain the details of the media conversion processing of the message exchange system of FIG. 1;
9 is a block diagram schematically showing a specific configuration of a media conversion device of the message exchange system in FIG. 1. FIG.
10 is a schematic diagram showing a database structure for explaining a media conversion operation of the message exchange system of FIG. 1. FIG.
11 is a schematic diagram showing a conversion table for explaining a media conversion pattern of the message exchange system of FIG. 1. FIG.
12 is a flowchart for explaining a media conversion operation of the message exchange system of FIG. 1;
13 is a flowchart for explaining a conversion process <1> in a media conversion operation of the message exchange system of FIG.
14 is a flowchart for explaining a conversion process <2> in the media conversion operation of the message exchange system in FIG. 1; FIG.
15 is a flowchart for explaining a conversion process <3> in the media conversion operation of the message exchange system in FIG. 1. FIG.
16 is a flowchart for explaining a conversion process <4> in the media conversion operation of the message exchange system in FIG. 1; FIG.
FIG. 17 is a flowchart for explaining a conversion process <5> in the media conversion operation of the message exchange system in FIG. 1;
18 is a flowchart for explaining a conversion process <6> in the media conversion operation of the message exchange system in FIG. 1; FIG.
FIG. 19 is a flowchart for explaining a conversion process <7> in the media conversion operation of the message exchange system in FIG. 1;
FIG. 20 is a block diagram schematically showing a configuration of a conventional message exchange system.
[Explanation of symbols]
1 server
2,3 Communication equipment (communication terminal)
11 State database
12 Media database
13 Reception database
14 Automatic response database
15 Media converter
16 Database after conversion
17 Message receiver
18 Message sending device
15A character image converter
15B character recognition device
15C voice recognition device
15D voice reading device

Claims

A message exchange system that provides a service for distributing a message transmitted from a user terminal to another user terminal,
Receiving media registration means for registering the media type of the message that the user desires to receive from the user terminal;
A media type reference means for checking a received media type registered for a destination user of the transmission message when a message is transmitted from the user terminal;
When the registered reception media type of the destination user obtained by the media type reference means is different from the media type of the transmission message, the transmission message is converted into a conversion message of the registered reception media type , and Media conversion means for transmitting the conversion message to the calling side in the media type desired by the calling side, and causing the calling side to check the transmission content that has been converted to media,
Message transmitting means for transmitting to the destination user a message corresponding to the registered reception media type using one of the transmission message and the conversion message;
A message exchange system comprising:

It further includes database means for storing the reception media type for each user registered by the reception media registration means, and the media type reference means refers to the database means to check the registered reception media type of the destination user. The message exchange system according to claim 1, wherein:

The media conversion means converts the transmission message converted to the registered reception media type into a media type desired by the caller, and sends a notification to request confirmation of the converted transmission message and message content. Sent to the caller, received a notification from the caller that the message was confirmed,
The message transmission means uses the transmission message or the conversion message to send the registered reception medium to the destination user in response to the notification that the media conversion means has confirmed the message content from the transmission side. Send a message corresponding to the type,
The message exchange system according to claim 1 or 2, characterized by the above.

  Computer
  Received media registration means for registering the media type of the message that the user desires to receive from the user terminal,
  Media type reference means for checking the received media type registered for the destination user of the transmission message when the message is transmitted from the user terminal,
  When the registered reception media type of the destination user obtained by the media type reference means is different from the media type of the transmission message, the transmission message is converted into a conversion message of the registered reception media type, and Media conversion means for transmitting the conversion message to the calling side in the media type desired by the calling side, and causing the calling side to confirm the transmission content that has been converted to media,
  And a message transmission means for transmitting to the destination user a message corresponding to the registered reception media type using one of the transmission message and the conversion message,
  A computer-readable recording medium in which a program for functioning as a computer is recorded.

Further includes database means for storing the received media type for each user registered by the received media registration means, and causing the media type reference means to check the registered received media type of the destination user with reference to the database means,
The computer-readable recording medium which recorded the program of Claim 4 characterized by the above-mentioned .

A notification for requesting the media conversion means to convert the transmission message converted into the registered reception media type into the media type desired by the caller and to confirm the converted transmission message and the message content; Is sent to the caller and a notification is received from the caller that the message content has been confirmed.
In response to receiving notification that the media conversion means has confirmed the message content from the caller to the message transmission means, the registered reception medium is sent to the destination user using the transmission message or the conversion message. Send a message corresponding to the type,
A computer-readable recording medium on which the program according to claim 4 or 5 is recorded.