JP2012175620A - 通信システム、通信装置、サーバ、情報通知方法およびプログラム - Google Patents

Abstract

【課題】通話で送信されてきた音声信号に基づいた情報を容易に得る。
【解決手段】通信装置１００−１が、通信装置１００−２から送信されてきた音声信号から音声を認識し、認識した音声を示す音声情報をサーバ２００へ送信し、サーバ２００が、送信されてきた音声情報に基づいて表示情報を、音声情報と表示情報とをあらかじめ対応付けて記憶する記憶部から検索し、検索した表示情報を通信装置１００−１へ送信し、通信装置１００−１が、サーバ２００から送信されてきた表示情報を表示する。
【選択図】図１

Description

本発明は、情報を通知する通信システム、通信装置、サーバ、情報通知方法およびプログラムに関する。

携帯端末等の携帯可能な通信装置の普及により、屋内屋外問わず、様々な場所で音声通話を行うことが可能となっている。

また、マイク等の音声入力手段に入力された音声信号について音声認識を行い、認識された音声に応じた制御を行う装置が考えられている（例えば、特許文献１，２参照。）。

特開２０００−１８１４８８号公報 特開２００８−０３７１２１号公報

しかしながら、上述したような通信装置を用いて音声通話を行う場合、周囲の環境によっては、受信した音声を聞き取りにくい場合がある。

例えば、工事現場や屋外の騒音が大きな場所でおいては、通話の相手が話す音声よりも周囲の騒音の方が大きく、その騒音によって通話の相手が話す音声がかき消されてしまったり、不明瞭になってしまったりする。

その結果、必要な情報を得ることができないおそれがあるという問題点がある。

また、特許文献１，２に記載された装置においては、装置単体で使用するものであって、通話で使用することはできない。

本発明の目的は、上述した課題を解決する通信システム、通信装置、サーバ、情報通知方法およびプログラムを提供することである。

本発明の通信システムは、
通話を行う複数の通信装置と、該複数の通信装置のうち少なくとも１つの通信装置と接続可能なサーバとから構成される通信システムにおいて、
前記サーバと接続可能な通信装置は、
当該通信装置以外の通信装置との間で音声信号を送受信する通話部と
前記通話部が受信した前記音声信号から音声を認識する音声認識部と、
前記音声認識部が認識した音声を示す音声情報を前記サーバへ送信する音声情報送信部と、
前記サーバから送信されてきた表示情報を受信する表示情報受信部と、
前記表示情報受信部が受信した表示情報を表示する表示部とを有し、
前記サーバは、
前記音声情報と前記表示情報とをあらかじめ対応付けて記憶する記憶部と、
前記通信装置から送信されてきた音声情報を受信する音声情報受信部と、
前記音声情報受信部が受信した音声情報に基づいて、前記表示情報を前記記憶部から検索する検索部と、
前記検索部が検索した表示情報を前記通信装置へ送信する表示情報送信部とを有することを特徴とする。

また、本発明の通信装置は、
当該通信装置と他の通信装置との間で音声信号を送受信する通話部と
前記通話部が受信した前記音声信号から音声を認識する音声認識部と、
前記音声認識部が認識した音声を示す音声情報を、当該通信装置と接続可能なサーバへ送信する音声情報送信部と、
前記サーバから送信されてきた表示情報を受信する表示情報受信部と、
前記表示情報受信部が受信した表示情報を表示する表示部とを有する。

また、本発明のサーバは、
通信装置と接続可能なサーバであって、
音声を識別することができる音声情報と、前記通信装置にて表示可能な表示情報とをあらかじめ対応付けて記憶する記憶部と、
前記通信装置から送信されてきた音声情報を受信する音声情報受信部と、
前記音声情報受信部が受信した音声情報に基づいて、前記表示情報を前記記憶部から検索する検索部と、
前記検索部が検索した表示情報を前記通信装置へ送信する表示情報送信部とを有する。

また、本発明の情報通知方法は、
通話を行う複数の通信装置と、該複数の通信装置のうち少なくとも１つの通信装置と接続可能なサーバとから構成される通信システムにおける情報通知方法であって、
前記サーバと接続可能な通信装置が、当該通信装置以外の通信装置から送信された音声信号を受信する処理と
前記サーバと接続可能な通信装置が、前記受信した音声信号から音声を認識する処理と、
前記サーバと接続可能な通信装置が、前記認識した音声を示す音声情報を前記サーバへ送信する処理と、
前記サーバが、前記送信されてきた音声情報に基づいて表示情報を、前記音声情報と前記表示情報とをあらかじめ対応付けて記憶する記憶部から検索する処理と、
前記サーバが、前記検索した表示情報を、前記音声情報を送信してきた通信装置へ送信する処理と、
前記サーバと接続可能な通信装置が、前記サーバから送信されてきた表示情報を表示する処理とを行う。

また、通話を行う通信装置における情報通知方法であって、
当該通信装置と通話している通信装置から送信された音声信号を受信する処理と
前記受信した音声信号から音声を認識する処理と、
前記認識した音声を示す音声情報を、当該通信装置と接続可能なサーバへ送信する処理と、
前記サーバから送信されてきた表示情報を表示する処理とを行う。

また、本発明のプログラムは、
通信装置に実行させるためのプログラムであって、
当該通信装置と通話している通信装置から送信された音声信号を受信する手順と
前記受信した音声信号から音声を認識する手順と、
前記認識した音声を示す音声情報を、当該通信装置と接続されたサーバへ送信する手順と、
前記サーバから送信されてきた表示情報を表示する手順とを実行させる。

以上説明したように、本発明においては、通話で送信されてきた音声信号に基づいた情報を容易に得ることができる。

本発明の通信システムの実施の一形態を示す図である。 図１に示した通信装置の内部構成の一例を示す図である。 図１に示したサーバの内部構成の一例を示す図である。 図３に示した記憶部に記憶された音声情報と表示情報との対応付けの一例を示す図である。 本形態における情報通知方法のうち、図１に示した通信装置が音声信号を受信してから、サーバへ音声情報を送信するまでの処理を説明するためのフローチャートである。 本形態における情報通知方法のうち、図１に示した通信装置からサーバへ音声情報が送信されてきた後のサーバにおける処理を説明するためのフローチャートである。 本形態における情報通知方法のうち、図１に示したサーバから通信装置へ表示情報が送信されてきた後の通信装置における処理を説明するためのフローチャートである。 図１に示した通信装置の内部構成の他の例を示す図である。

以下に、本形態の実施の形態について図面を参照して説明する。

図１は、本発明の通信システムの実施の一形態を示す図である。

本形態は図１に示すように、通信装置１００−１，１００−２と、サーバ２００とから構成されている。図１においては、通信装置が２つの場合を例に挙げて示しているが、３つ以上であっても良い。

通信装置１００−１，１００−２は、互いの間で通話が可能である。また、通信装置１００−１，１００−２は、通話の相手となる通信装置が複数ある場合、同報送信のように、その複数の通信装置へ同じ情報（音声）を同時に送信することができる。なお、通信装置１００−１，１００−２は、携帯電話機等の携帯端末や無線通信機のほか、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）やゲーム機等であっても良い。

図２は、図１に示した通信装置１００−１の内部構成の一例を示す図である。また、図２には、図１に示した通信装置１００−１が具備する構成要素のうち、本発明に関わる構成要素のみを示した。なお、通信装置１００−２の内部構造は、通信装置１００−１と同様の動作をするものであれば良く、限定しない。

図１に示した通信装置１００−１には図２に示すように、通話部１０１と、音声認識部１０２と、音声情報送信部１０３と、表示情報受信部１０４と、表示部１０５とが設けられている。

通話部１０１は、通信装置１００−１以外の通信装置（図１に示した形態では、通信装置１００−２）との間で音声信号を送受信することで、通話を行う。また、通話部１０１は、受信した音声信号を音声認識部１０２へ出力する。このとき、通話部１０１は、受信した音声信号を、アナログ信号からデジタル信号へ変換してから音声認識部１０２へ出力する。また、通話部１０１は、通話を行う際、ＰＴＴ（Ｐｕｓｈ ｔｏ Ｔａｌｋ）方式を用いて、通信装置１００−１以外の通信装置（図１に示した形態では、通信装置１００−２）との間で音声信号を送受信するものであっても良い。なお、通話部１０１は、ＰＴＴ方式以外の方式を用いて、音声信号を送受信するものであっても良い。また、通話部１０１は、１対１以外であっても、１対複数の通信を行うものであっても良い。

音声認識部１０２は、通話部１０１から出力されてきた音声信号から音声を認識する。この音声認識部１０２における音声認識方法は、一般的に行われている方法で良い。また、音声認識部１０２は、認識した音声（音声信号から切り出したデジタル信号）を音声情報送信部１０３へ出力する。

音声情報送信部１０３は、音声認識部１０２から出力されてきた音声を示す音声情報をサーバ２００へ送信する。ここで、音声情報とは、音声認識部１０２から出力されてきた音声を、サーバ２００へ送信可能な信号（例えば、所定のコード）へ変換した変換後の信号である。

表示情報受信部１０４は、サーバ２００から送信されてきた表示情報（例えば、地図データ）を表示部１０５へ出力する。

表示部１０５は、表示情報受信部１０４から出力されてきた表示情報を表示する。なお、表示部１０５は、一般的な液晶等から構成されたディスプレイであっても良い。

サーバ２００は、無線を介して通信装置１００−１，１００−２のうち少なくとも１つと接続可能な装置である。サーバ２００は、接続した通信装置１００−１，１００−２との間で通信を行うことができる。

図３は、図１に示したサーバ２００の内部構成の一例を示す図である。なお、図３には、図１に示したサーバ２００が具備する構成要素のうち、本発明に関わる構成要素のみを示した。

図１に示したサーバ２００には図３に示すように、記憶部２０１と、音声情報受信部２０２と、検索部２０３と、表示情報送信部２０４とが設けられている。

記憶部２０１は、音声情報と表示情報とをあらかじめ対応付けて記憶する。

図４は、図３に示した記憶部２０１に記憶された音声情報と表示情報との対応付けの一例を示す図である。

図３に示した記憶部２０１には図４に示すように、複数の音声情報と複数の表示情報とがあらかじめ対応付けられて記憶されている。なお、音声情報と表示情報との対応付けが１組のみであっても良いことは言うまでもない。

例えば、図４に示すように、音声情報「Ａ」と、表示情報「Ａの地図データ」とが対応付けられて記憶されている。

また、音声情報「Ｂ」と、表示情報「Ｂの地図データ」とが対応付けられて記憶されている。

また、音声情報「Ｃ」と、表示情報「Ｃの地図データ」とが対応付けられて記憶されている。

なお、「Ａ」、「Ｂ」および「Ｃ」は、説明の便宜上の表示であり、実際には、音声を識別することができる情報（例えば、言語等）が記憶されている。また、それぞれの地図データも、実際の地図や、その地図が格納されているメモリのアドレス等が記憶されているものであっても良い。

また、表示情報は、地図データのほか、一般的なメディア全般で写真、音楽、動画、食べ物や、店舗の情報等、通信装置１００−１，１００−２にて表示可能な情報であれば良い。

なお、上述した対応付けは、記憶部２０１に実際にそれらの情報が対応付けられていないものであっても、一方の情報に基づいて、他方の情報が検索できるものであっても良い。例えば、音声情報のみが記憶部２０１に記憶されており、表示情報はＳＤカード等に記憶されており、音声情報と表示情報とが対応付いていることを示す情報が、記憶部２０１の他のエリア等に記憶されているものであっても良い。また、これらの情報は同時に記憶されるものでなくても良い。また、この対応付けは、外部から変更可能であることは言うまでもない。

音声情報受信部２０２は、通信装置１００−１，１００−２から送信されてきた音声情報を受信して検索部２０３へ出力する。

検索部２０３は、音声情報受信部２０２から出力されてきた音声情報に基づいて、表示情報を記憶部２０１から検索する。つまり、検索部２０３は、通信装置１００−１，１００−２から送信されてきた音声情報を検索キーとして、当該音声信号と対応付けられている表示情報を記憶部２０１から検索する。

ここで、この検索について、記憶部２０１に記憶されている情報が図４に示したものである場合を例に挙げて説明する。

通信装置１００−１，１００−２から送信されてきた音声情報が「Ａ」である場合、検索部２０３は、音声情報「Ａ」を検索キーとして、記憶部２０１から表示情報を検索する。図４においては、音声情報「Ａ」と対応付けられて記憶されている表示情報は「Ａの地図データ」であるため、表示情報「Ａの地図データ」が検索される。

また、通信装置１００−１，１００−２から送信されてきた音声情報が「Ｂ」である場合、検索部２０３は、音声情報「Ｂ」を検索キーとして、記憶部２０１から表示情報を検索する。図４においては、音声情報「Ｂ」と対応付けられて記憶されている表示情報は「Ｂの地図データ」であるため、表示情報「Ｂの地図データ」が検索される。

また、通信装置１００−１，１００−２から送信されてきた音声情報が「Ｃ」である場合、検索部２０３は、音声情報「Ｃ」を検索キーとして、記憶部２０１から表示情報を検索する。図４においては、音声情報「Ｃ」と対応付けられて記憶されている表示情報は「Ｃの地図データ」であるため、表示情報「Ｃの地図データ」が検索される。

また、検索部２０３は、記憶部２０１から検索した表示情報を表示情報送信部２０４へ出力する。なお、検索部２０３は、表示情報が検索されなかった場合は、何も出力しない。また、検索部２０３は、表示情報が検索されなかった場合、その旨を通信装置へ通知するものであっても良い。

表示情報送信部２０４は、検索部２０３から出力されてきた表示情報を通信装置１００−１，１００−２へ送信する。

以下に、本形態における情報通知方法について説明する。まずは、本形態における情報通知方法のうち、図１に示した通信装置１００−１が通信装置１００−２から音声信号を受信してから、サーバ２００へ音声情報を送信するまでの処理について説明する。

図５は、本形態における情報通知方法のうち、図１に示した通信装置１００−１が通信装置１００−２から音声信号を受信してから、サーバ２００へ音声情報を送信するまでの処理を説明するためのフローチャートである。

まず、通信装置１００−２から送信された音声信号が通信装置１００−１の通話部１０１にて受信されると（ステップＳ１）、受信された音声信号がアナログ信号からデジタル信号へ、アナログ−デジタル変換されて音声認識部１０２へ出力される。

すると、音声認識部１０２にて、通話部１０１から出力されてきた音声信号から音声が音声認識機能を用いて認識される（ステップＳ２）。そして、認識された音声が音声認識部１０２から音声情報送信部１０３へ出力される。

音声が音声認識部１０２から音声情報送信部１０３へ出力されると、当該音声を示す音声情報が音声情報送信部１０３からサーバ２００へ送信される（ステップＳ３）。

次に、本形態における情報通知方法のうち、図１に示した通信装置１００−１からサーバ２００へ音声情報が送信されてきた後のサーバ２００における処理について説明する。

図６は、本形態における情報通知方法のうち、図１に示した通信装置１００−１からサーバ２００へ音声情報が送信されてきた後のサーバ２００における処理を説明するためのフローチャートである。

通信装置１００−１から送信された音声情報が、音声情報受信部２０２にて受信されると（ステップＳ１１）、受信された音声情報が音声情報受信部２０２から検索部２０３へ出力される。そして、検索部２０３において、音声情報受信部２０２から出力されてきた音声情報を検索キーとして、当該音声情報と対応付けられている表示情報が記憶部２０１から検索される（ステップＳ１２）。

ステップＳ１２にて、検索部２０３において表示情報が検索されない場合、つまり、受信された音声情報と対応付けられた表示情報が記憶部２０１に記憶されていない、または、受信された音声情報が記憶部２０１に記憶されていない場合、何もせずに処理は終了する。

一方、ステップＳ１２にて、検索部２０３において記憶部２０１から表示情報が検索された場合、検索された表示情報が検索部２０３から表示情報送信部２０４へ出力される。

表示情報が検索部２０３から表示情報送信部２０４へ出力されると、当該表示情報が表示情報送信部２０４から通信装置１００−１へ送信される（ステップＳ１３）。

次に、本形態における情報通知方法のうち、図１に示したサーバ２００から通信装置１００−１へ表示情報が送信されてきた後の通信装置１００−１における処理について説明する。

図７は、本形態における情報通知方法のうち、図１に示したサーバ２００から通信装置１００−１へ表示情報が送信されてきた後の通信装置１００−１における処理を説明するためのフローチャートである。

サーバ２００から送信された表示情報が、表示情報受信部１０４にて受信されると（ステップＳ２１）、受信された表示情報が表示情報受信部１０４から表示部１０５へ出力される。そして、表示部１０５に、表示情報受信部１０４から出力されてきた表示情報が表示される（ステップＳ２２）。

また、通信装置１００−１から音声情報とともに、通信装置１００−１が存在する位置を示す位置情報がサーバ２００へ送信され、サーバ２００にて、送信されてきた音声情報と位置情報とに基づいて、表示情報が検索されて送信されるものであっても良い。

図８は、図１に示した通信装置１００−１の内部構成の他の例を示す図である。

図８に示した内部構成は、図２に示した内部構成に加えて、位置情報取得部１０６が設けられた構成となっている。

位置情報取得部１０６は、通信装置１００−１の位置を示す位置情報を取得する。位置情報取得部１０６は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星（不図示）から位置情報を取得するものであっても良い。

音声情報送信部１０３は、音声認識部１０２から出力されてきた音声を示す音声情報をサーバ２００へ送信する際、位置情報取得部１０６が取得した位置情報もサーバ２００へ送信する。

一方、サーバ２００の記憶部２０１には、上述した表示情報が、音声情報と位置情報とに対応付けられて記憶されており、通信装置１００−１から送信されてきた音声情報と位置情報とに基づいて、表示情報が検索部２０３において記憶部２０１から検索される。そして、検索された表示情報が表示情報送信部２０４から通信装置１００−１へ送信される。この表示情報としては、ＧＰＳ情報が示す現在地と、目的地へのルーティングなどを地図データにマーキングしたもの等が考えられる。

上述した通信装置１００−１，１００−２、サーバ２００に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム（以下、プログラムと称する）を通信装置１００−１，１００−２、サーバ２００にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを通信装置１００−１，１００−２、サーバ２００に読み込ませ、実行するものであっても良い。通信装置１００−１，１００−２、サーバ２００にて読取可能な記録媒体とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＤＶＤ、ＣＤなどの移設可能な記録媒体の他、通信装置１００−１，１００−２、サーバ２００に内蔵されたＲＯＭ、ＲＡＭ等のメモリやＨＤＤ等を指す。この記録媒体に記録されたプログラムは、通信装置１００−１，１００−２、サーバ２００に設けられたＣＰＵ（不図示）にて読み込まれ、ＣＰＵの制御を用いて、上述したものと同様の処理が行われる。ここで、ＣＰＵは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。

本発明は、複数のＩＰアプリを動的に活用できるようにするシステムであるＩＭＳ（ＩＰ ｍｕｌｔｉ ｓｅｓｓｉｏｎ）を基盤にすることで、ＩＰ電話（ＰＴＴ）とＭＭＳ（メディアメール）とを同時に処理してリアルタイムで情報のやり取りをすることができる。具体的には、ＰＴＴ音声を認識した瞬間に、それに対応した地図画面をＭＭＳに添付して送信したり、ＩＭＳ上でチャットをしているときに画面にＭＭＳを表示したりすることが可能になる。

このように、本発明は、ＩＭＳベース上のアーキテクチャにより、ＰＴＴ（ＶｏＩＰ）で複数の相手に同時送信された音声を認識し、その音声からあらかじめ登録されたデータベースの地図情報を入手し、ＭＭＳ経由で携帯電話の画面上（ＩＭＳアプリケーション）に表示するシステムに適用可能である。

これにより、ＰＴＴ音声からサーバ連携により地図データを取得する仕組み、ＰＴＴ音声に紐づいた地図データを保持するＭＡＰ ＤＢのシステム、およびＩＭＳアーキテクチャにより取得した地図データをディスプレイに動的に表示する仕組みを実現することができる。

１００−１，１００−２ 通信装置
１０１ 通話部
１０２ 音声認識部
１０３ 音声情報送信部
１０４ 表示情報受信部
１０５ 表示部
１０６ 位置情報取得部
２００ サーバ
２０１ 記憶部
２０２ 音声情報受信部
２０３ 検索部
２０４ 表示情報送信部

Claims (9)

1. 通話を行う複数の通信装置と、該複数の通信装置のうち少なくとも１つの通信装置と接続可能なサーバとから構成される通信システムにおいて、
   前記サーバと接続可能な通信装置は、
   当該通信装置以外の通信装置との間で音声信号を送受信する通話部と
   前記通話部が受信した前記音声信号から音声を認識する音声認識部と、
   前記音声認識部が認識した音声を示す音声情報を前記サーバへ送信する音声情報送信部と、
   前記サーバから送信されてきた表示情報を受信する表示情報受信部と、
   前記表示情報受信部が受信した表示情報を表示する表示部とを有し、
   前記サーバは、
   前記音声情報と前記表示情報とをあらかじめ対応付けて記憶する記憶部と、
   前記通信装置から送信されてきた音声情報を受信する音声情報受信部と、
   前記音声情報受信部が受信した音声情報に基づいて、前記表示情報を前記記憶部から検索する検索部と、
   前記検索部が検索した表示情報を前記通信装置へ送信する表示情報送信部とを有することを特徴とする通信システム。
2. 請求項１に記載の通信システムにおいて、
   前記通話部は、ＰＴＴ（Ｐｕｓｈ ｔｏ Ｔａｌｋ）方式を用いて、当該通信装置以外の通信装置との間で音声信号を送受信することを特徴とする通信システム。
3. 請求項１または請求項２に記載の通信システムにおいて、
   前記通信装置は、当該通信装置の位置を示す位置情報を取得する位置情報取得部を有し、
   前記音声情報送信部は、前記音声情報とともに、前記位置情報を送信し、
   前記記憶部は、前記音声情報と前記位置情報と前記表示情報とをあらかじめ対応付けて記憶し、
   前記検索部は、前記通信装置から送信されてきた音声情報と位置情報とに基づいて、前記表示情報を前記記憶部から検索することを特徴とする通信システム。
4. 請求項３に記載の通信システムにおいて、
   前記位置情報取得部は、ＧＰＳ衛星から前記位置情報を取得することを特徴とする通信システム。
5. 通信装置であって、
   当該通信装置と他の通信装置との間で音声信号を送受信する通話部と
   前記通話部が受信した前記音声信号から音声を認識する音声認識部と、
   前記音声認識部が認識した音声を示す音声情報を、当該通信装置と接続可能なサーバへ送信する音声情報送信部と、
   前記サーバから送信されてきた表示情報を受信する表示情報受信部と、
   前記表示情報受信部が受信した表示情報を表示する表示部とを有する通信装置。
6. 通信装置と接続可能なサーバであって、
   音声を識別することができる音声情報と、前記通信装置にて表示可能な表示情報とをあらかじめ対応付けて記憶する記憶部と、
   前記通信装置から送信されてきた音声情報を受信する音声情報受信部と、
   前記音声情報受信部が受信した音声情報に基づいて、前記表示情報を前記記憶部から検索する検索部と、
   前記検索部が検索した表示情報を前記通信装置へ送信する表示情報送信部とを有するサーバ。
7. 通話を行う複数の通信装置と、該複数の通信装置のうち少なくとも１つの通信装置と接続可能なサーバとから構成される通信システムにおける情報通知方法であって、
   前記サーバと接続可能な通信装置が、当該通信装置以外の通信装置から送信された音声信号を受信する処理と
   前記サーバと接続可能な通信装置が、前記受信した音声信号から音声を認識する処理と、
   前記サーバと接続可能な通信装置が、前記認識した音声を示す音声情報を前記サーバへ送信する処理と、
   前記サーバが、前記送信されてきた音声情報に基づいて表示情報を、前記音声情報と前記表示情報とをあらかじめ対応付けて記憶する記憶部から検索する処理と、
   前記サーバが、前記検索した表示情報を、前記音声情報を送信してきた通信装置へ送信する処理と、
   前記サーバと接続可能な通信装置が、前記サーバから送信されてきた表示情報を表示する処理とを行う情報通知方法。
8. 通話を行う通信装置における情報通知方法であって、
   当該通信装置と通話している通信装置から送信された音声信号を受信する処理と
   前記受信した音声信号から音声を認識する処理と、
   前記認識した音声を示す音声情報を、当該通信装置と接続可能なサーバへ送信する処理と、
   前記サーバから送信されてきた表示情報を表示する処理とを行う情報通知方法。
9. 通信装置に、
   当該通信装置と通話している通信装置から送信された音声信号を受信する手順と
   前記受信した音声信号から音声を認識する手順と、
   前記認識した音声を示す音声情報を、当該通信装置と接続されたサーバへ送信する手順と、
   前記サーバから送信されてきた表示情報を表示する手順とを実行させるためのプログラム。

Images