JP5059080B2 - 音声情報検索システム及び音声情報検索方法 - Google Patents

Description

本発明は、通信端末間の通話内容に基づいて情報検索を行う音声情報検索システム及び音声情報検索方法に関する。

従来より、通信端末間での音声通話中に話題に挙げられた事項に関する情報を取得するための技術が提案されている。例えば、特許文献１には、携帯端末が、自端末及び相手方の端末からの音声データを取得し、取得した音声データからキーワードを抽出し、抽出したキーワードから検索キーワードを選択し、選択キーワードに基づいて検索サーバに対して検索を行わせることが記載されている。

特開２００２−２９７６４５号公報

しかしながら、上記従来技術では、自端末と相手方端末との間の通話内容に基づいて情報の検索を所望したにも関わらず、相手方の端末が自端末と同様の機能を備えていない限り、相手方は情報検索を実施できず、通話内容に関する情報を得ることができない。また、二者間の通話内容に基づいて、二者間で負担を分担して情報検索をしたい、といった要請もある。

そこで、本発明は、上記問題点に鑑みてなされたものであり、通信端末間での音声通話の内容に基づいて検索を行うに際して、検索のための情報を二者間で共有することが可能な音声情報検索システム及び音声情報検索方法を提供することを目的とする。

上記課題を解決するために、本発明の音声情報検索システムは、音声通信可能に接続された第１通信端末及び第２通信端末、並びに第１通信端末と第２通信端末との間における通話内容に基づいて情報検索を行う音声情報検索サーバを含む音声情報検索システムであって、第１通信端末は、第２通信端末のユーザの発話音声であり、当該第２通信端末から送信された第２発話音声を受信する受話音声受信手段と、当該第１通信端末のユーザの発話音声である第１発話音声を取得する第１発話音声取得手段と、第１発話音声取得手段により取得された第１発話音声及び受話音声受信手段により受信された第２発話音声からなる二者通話音声に基づく情報であって、情報検索に用いるキーワードを抽出するための情報である通話音声情報を送信する通話音声情報送信手段と、音声情報検索サーバにより通話音声情報から抽出されたキーワードである通話音声中キーワードを、音声情報検索サーバから受信する第１キーワード受信手段と、第１キーワード受信手段により受信された通話音声中キーワードを提示する第１キーワード提示手段とを備え、第２通信端末は、第２発話音声を取得する第２発話音声取得手段と、第２発話音声取得手段により取得された第２発話音声を送信する第２発話音声送信手段と、音声情報検索サーバから送信された通話音声中キーワードを受信する第２キーワード受信手段と、第２キーワード受信手段により受信された通話音声中キーワードを提示する第２キーワード提示手段とを備え、音声情報検索サーバは、第１通信端末から送信された通話音声情報を取得する通話音声情報取得手段と、通話音声情報取得手段により取得された通話音声情報から通話音声中キーワードを抽出するキーワード抽出手段と、キーワード抽出手段により抽出された通話音声中キーワードを第１通信端末及び第２通信端末に送信するキーワード送信手段とを備えることを特徴とする。

また、上記課題を解決するために、本発明の音声情報検索方法は、音声通信可能に接続された第１通信端末及び第２通信端末、並びに第１通信端末と第２通信端末との間における通話内容に基づいて情報検索を行う音声情報検索サーバを含む音声情報検索システムにおける音声情報検索方法であって、第２通信端末が、当該第２通信端末のユーザの発話音声である第２発話音声を取得する第２発話音声取得ステップと、第２通信端末が、第２発話音声取得ステップにおいて取得された第２発話音声を送信する発話音声送信ステップと、第１通信端末が、発話音声送信ステップにおいて送信された第２発話音声を受信する受話音声受信ステップと、第１通信端末が、当該第１通信端末のユーザの発話音声である第１発話音声を取得する第１発話音声取得ステップと、第１通信端末が、第１発話音声取得ステップにおいて取得された第１発話音声及び受話音声受信ステップにおいて受信された第２発話音声からなる二者通話音声に基づく情報であって、情報検索に用いるキーワードを抽出するための情報である通話音声情報を送信する通話音声情報送信ステップと、音声情報検索サーバが、通話音声情報送信ステップにおいて送信された通話音声情報を取得する通話音声情報取得ステップと、音声情報検索サーバが、通話音声情報取得ステップにおいて取得された通話音声情報から、情報検索に用いるためのキーワードである通話音声中キーワードを抽出するキーワード抽出ステップと、音声情報検索サーバが、キーワード抽出ステップにおいて抽出された通話音声中キーワードを第１通信端末及び第２通信端末に送信するキーワード送信ステップと、第１通信端末が、キーワード送信ステップにおいて送信された通話音声中キーワードを受信する第１キーワード受信ステップと、第１通信端末が、第１キーワード受信ステップにおいて受信された通話音声中キーワードを提示する第１キーワード提示ステップと、第２通信端末が、キーワード送信ステップにおいて送信された通話音声中キーワードを受信する第２キーワード受信ステップと、第２通信端末が、第２キーワード受信ステップにおいて受信された通話音声中キーワードを提示する第２キーワード提示ステップとを有することを特徴とする。

本発明の音声情報検索システム及び音声情報検索方法によれば、第１通信端末のユーザと第２通信端末のユーザとの間の二者通話音声の情報が音声情報検索サーバに送信され、音声情報検索サーバにより情報検索に用いるためのキーワードが二者通話音声から抽出され、抽出されたキーワードが第１通信端末及び第２通信端末に送信され、それぞれの通信端末においてそれぞれのユーザに対して提示される。これにより、第１通信端末及び第２通信端末共に、検索のためのキーワードを取得することができる。従って、第１通信端末及び第２通信端末の間において、検索のための情報の共有が実現される。また、相手方の通信端末の通話音声を取得し、取得した通話音声を自端末の通話音声と併せて音声情報検索サーバに送信する処理は、第１通信端末により実施されるので、第２通信端末は、二者通話音声を音声情報検索サーバに送信するための特段の機能を備える必要がない。

また、本発明の音声情報検索システムでは、音声情報検索サーバは、音声認識手段を更に備え、第１通信端末の通話音声情報送信手段は、二者通話音声を通話音声情報として音声情報検索サーバに送信し、音声情報検索サーバの音声認識手段は、音声認識処理により二者通話音声をテキスト情報に変換し、音声情報検索サーバのキーワード抽出手段は、音声認識手段により変換されたテキスト情報から通話音声中キーワードを抽出することを特徴とする。

この場合には、二者通話音声からテキスト情報への変換処理が音声情報検索サーバにより行われるので、第１通信端末は特段の音声認識機能を有する必要がない。従って、第１通信端末の処理負荷が軽減される。

また、本発明の音声情報検索システムでは、第１通信端末は、二者通話音声を、音声認識処理によりテキスト情報に変換する音声認識手段を備え、第１通信端末の通話音声情報送信手段は、音声認識手段により変換されたテキスト情報を通話音声情報として送信し、音声情報検索サーバの通話音声情報取得手段は、通話音声情報送信手段により送信されたテキスト情報を通話音声情報として取得し、音声情報検索サーバのキーワード抽出手段は、通話音声情報取得手段により取得されたテキスト情報から通話音声中キーワードを抽出することを特徴とする。

この場合には、第１通信端末において二者通話音声がテキスト情報に変換され、変換されたテキスト情報が音声情報検索サーバに送信されるので、第１通信端末と音声情報検索サーバとの間の通信負荷が軽減される。

また、本発明の音声情報検索システムでは、第１通信端末は、第１キーワード提示手段により提示された通話音声中キーワードに基づいて、情報検索に用いるためのキーワードである検索キーワードの指定を、第１通信端末のユーザからの入力により受け付ける第１検索キーワード指定受付手段と、第１検索キーワード指定受付手段により受け付けられた検索キーワードを送信する第１検索キーワード送信手段と、第１検索情報受信手段と、第１検索情報提示手段とを備え、音声情報検索サーバは、第１検索キーワード送信手段から送信された検索キーワードを受信する検索キーワード受信手段と、検索キーワード受信手段により受信された検索キーワードに基づいて、情報検索のための所定のデータベースを検索する情報検索手段と、情報検索手段により検索された情報である検索情報を送信する検索情報送信手段とを備え、第１通信端末の第１検索情報受信手段は、検索情報送信手段から送信された検索情報を受信し、第１通信端末の第１検索情報提示手段は、第１検索情報受信手段により受信された検索情報を提示することを特徴とする。

この場合には、第１通信端末により指定された検索キーワードに基づき情報検索が行われ、検索結果が第１通信端末に返信されるので、第１通信端末は、第２通信端末との間の通話内容に関する情報を得ることができる。

また、本発明の音声情報検索システムでは、第１通信端末は、第１検索情報提示手段により提示された検索情報に基づいて、第２通信端末と共有する情報である共有情報を指定するための入力を、第１通信端末のユーザから受け付ける第１共有情報指定受付手段と、第１共有情報指定受付手段により受け付けられた指定入力により示される共有情報を送信する第１共有情報送信手段とを備え、音声情報検索サーバは、第１共有情報送信手段から送信された共有情報を受信する共有情報受信手段と、共有情報受信手段により受信された共有情報を送信する共有情報送信手段とを備え、第２通信端末は、共有情報送信手段から送信された共有情報を受信する第２共有情報受信手段と、第２共有情報受信手段により受信された共有情報を表示する第２共有情報表示手段とを備えることを特徴とする。

この場合には、第１通信端末に提示された検索情報のうち、共有情報として指定された情報が音声情報検索サーバに送信され、さらに音声情報検索サーバにより第２通信端末に送信されるので、第１通信端末と第２通信端末との間において、第１通信端末により指定された情報の共有が実現される。

また、本発明の音声情報検索システムでは、第１通信端末は、第１通信端末が過去に取得した情報である蓄積情報を蓄積する第１蓄積情報記憶手段と、第１検索キーワード指定受付手段により受け付けられた検索キーワードに基づいて、第１蓄積情報記憶手段に記憶されている蓄積情報を検索し、検索された蓄積情報を第１検索情報受信手段に送出する第１蓄積情報検索手段とを備え、第１通信端末の第１検索情報受信手段は、第１蓄積情報検索手段から送出された蓄積情報を取得し、第１通信端末の第１検索情報提示手段は、第１検索情報受信手段により取得された蓄積情報を提示することを特徴とする。

この場合には、第１通信端末において蓄積された蓄積情報が検索キーワードに基づく検索の対象となるので、蓄積情報から検索キーワードにより検索された情報も第１通信端末のユーザに提示される。また、提示された蓄積情報が共有情報として指定された場合には、その情報を第２通信端末と共有することが可能となる。

また、本発明の音声情報検索システムでは、第２通信端末は、第２キーワード提示手段により提示された通話音声中キーワードに基づいて、情報検索に用いるためのキーワードである検索キーワードの指定を、第２通信端末のユーザからの入力により受け付ける第２検索キーワード指定受付手段と、第２検索キーワード指定受付手段により受け付けられた検索キーワードを送信する第２検索キーワード送信手段と、第２検索情報受信手段と、第２検索情報提示手段とを備え、音声情報検索サーバは、第２検索キーワード送信手段から送信された検索キーワードを受信する検索キーワード受信手段と、検索キーワード受信手段により受信された検索キーワードに基づいて、情報検索のための所定のデータベースを検索する情報検索手段と、情報検索手段により検索された情報である検索情報を送信する検索情報送信手段とを備え、第２通信端末の第２検索情報受信手段は、検索情報送信手段から送信された検索情報を受信し、第２通信端末の第２検索情報提示手段は、第２検索情報受信手段により受信された検索情報を提示することを特徴とする。

この場合には、第２通信端末により指定された検索キーワードに基づき情報検索が行われ、検索結果が第２通信端末に返信されるので、第２通信端末は、第１通信端末との間の通話内容に関する情報を得ることができる。

また、本発明の音声情報検索システムでは、第２通信端末は、第２検索情報提示手段により提示された検索情報に基づいて、第１通信端末と共有する情報である共有情報を指定するための入力を、第２通信端末のユーザから受け付ける第２共有情報指定受付手段と、第２共有情報指定受付手段により受け付けられた指定入力により示される共有情報を送信する第２共有情報送信手段とを備え、音声情報検索サーバは、第２共有情報送信手段から送信された共有情報を受信する共有情報受信手段と、共有情報受信手段により受信された共有情報を送信する共有情報送信手段とを備え、第１通信端末は、共有情報送信手段から送信された共有情報を受信する第１共有情報受信手段と、第１共有情報受信手段により受信された共有情報を表示する第１共有情報表示手段とを備えることを特徴とする。

この場合には、第２通信端末に提示された検索情報のうち、共有情報として指定された情報が音声情報検索サーバに送信され、さらに音声情報検索サーバにより第１通信端末に送信されるので、第２通信端末と第１通信端末との間において、第２通信端末により指定された情報の共有が実現される。

また、本発明の音声情報検索システムでは、第２通信端末は、第２通信端末が過去に取得した情報である蓄積情報を蓄積する第２蓄積情報記憶手段と、第２検索キーワード指定受付手段により受け付けられた検索キーワードに基づいて、第２蓄積情報記憶手段に記憶されている蓄積情報を検索し、検索された蓄積情報を第２検索情報受信手段に送出する第２蓄積情報検索手段とを備え、第２通信端末の第２検索情報受信手段は、第２蓄積情報検索手段から送出された蓄積情報を取得し、第２通信端末の第２検索情報提示手段は、第２検索情報受信手段により取得された蓄積情報を提示することを特徴とする。

この場合には、第２通信端末において蓄積された蓄積情報が検索キーワードに基づく検索の対象となるので、蓄積情報から検索キーワードにより検索された情報も第２通信端末のユーザに提示される。また、提示された蓄積情報が共有情報として指定された場合には、その情報を第１通信端末と共有することが可能となる。

また、本発明の音声情報検索システムでは、第１通信端末は、第１音声通話端末と、第１情報端末とから構成され、第１音声通話端末は、受話音声受信手段と、第１発話音声取得手段とを含み、二者通話音声を第１情報端末に送信する第１通話端末音声送信手段を更に備え、第１情報端末は、通話音声情報送信手段と、第１キーワード受信手段と、第１キーワード提示手段とを含み、通話端末音声送信手段から送信された二者通話音声を受信する通話端末音声受信手段を更に備えることを特徴とする。

この場合には、通常の携帯電話に例示されるような、一般的な音声通話機能と簡易なデータ通信機能を備えた第１音声通話端末と、通常のパーソナルコンピュータに例示されるような、ネットワークを介した通信機能を備えた第１情報端末とにより第１通信端末が構成されるので、本システムを容易に構成することが可能となる。

また、本発明の音声情報検索システムでは、第２通信端末は、第２音声通話端末と、第２情報端末とから構成され、第２音声通話端末は、第２発話音声取得手段と、第２発話音声送信手段とを含み、第２情報端末は、第２キーワード受信手段と、第２キーワード提示手段とを含むことを特徴とする。

この場合には、通常の携帯電話に例示されるような、一般的な音声通話機能を備えた第２音声通話端末と、通常のパーソナルコンピュータに例示されるような、ネットワークを介した通信機能を備えた第２情報端末とにより第２通信端末が構成されるので、本システムを容易に構成することが可能となる。

本発明の音声情報検索システム及び音声情報検索方法によれば、通信端末間での音声通話の内容に基づいて検索を行うに際して、検索のための情報を通話端末間で共有することが可能となる。

音声情報検索システムの構成図である。 第１実施形態における音声情報検索サーバの機能的構成を示すブロック図である。 音声情報検索サーバのハードブロック図である。 第１実施形態における第１通信端末の機能的構成を示すブロック図である。 第１実施形態における第２通信端末の機能的構成を示すブロック図である。 第１実施形態における音声情報検索システムの処理内容を示すフローチャートである。 第１実施形態における音声情報検索システムの処理内容を示すフローチャートである。 第２実施形態における音声情報検索サーバの機能的構成を示すブロック図である。 第２実施形態における第１通信端末の機能的構成を示すブロック図である。 第２実施形態における音声情報検索システムの処理内容を示すフローチャートである。 第３実施形態における第１通信端末の機能的構成を示すブロック図である。 第３実施形態における第２通信端末の機能的構成を示すブロック図である。 第４実施形態における第１通信端末の機能的構成を示すブロック図である。 第４実施形態における第２通信端末の機能的構成を示すブロック図である。

本発明に係る音声情報検索システムの実施形態について図面を参照して説明する。なお、可能な場合には、同一の部分には同一の符号を付して、重複する説明を省略する。

（第１実施形態）
図１は、第１実施形態に係る音声情報検索システム１００の構成を示す図である。図１に示すように、音声情報検索システム１００は、音声情報検索サーバ１、第１通信端末３及び第２通信端末５を含む。音声情報検索システム１００は、第１通信端末３と第２通信端末５との間における音声通話の内容に基づいて音声情報検索サーバ１が情報検索を行い、検索結果を通信端末に提供するためのシステムである。

本実施形態の音声情報検索システム１００では、第１通信端末３と第２通信端末５との間で音声通話が行われているときにおいて、通話内容に関連する情報を得ることを所望する場合に、第１通信端末３から音声情報検索サーバ１に通話音声または通話音声がテキスト化された情報が送信され、送信された情報から音声情報検索サーバ１がキーワードを抽出し、抽出したキーワードが第１通信端末３及び第２通信端末５返信される。

音声情報検索サーバ１、第１通信端末３及び第２通信端末５は、ネットワークＮ１を介してデータの送受信可能に接続されている。また、第１通信端末３及び第２通信端末５は、音声通信網Ｎ２を介して音声通信可能に接続されている。音声通信網Ｎ２は、音声通信可能な回線であれば、いかなる回線にも限定されず、例えば、電話回線、移動体通信網、ＩＰ通信網といった回線に例示される。

次に、音声情報検索サーバ１の機能について説明する。図２は、音声情報検索サーバ１の機能的構成を示すブロック図である。音声情報検索サーバ１は、複数の通信端末に情報の共有をさせるために、複数の通信端末からのアクセスが可能な記憶領域である共有スペースを提供する装置である。

図２に示すように、音声情報検索サーバ１は、通話音声情報取得部１０（通話音声情報取得手段）、音声認識部１１（音声認識手段）、キーワード抽出部１２（キーワード抽出手段）、キーワード蓄積部１３、キーワード送信部１４（キーワード送信手段）、検索キーワード受信部１５（検索キーワード受信手段）、情報検索部１６（情報検索手段）、検索情報送信部１７（検索情報送信手段）、共有情報受信部１８（共有情報受信手段）、共有情報送信部１９（共有情報送信手段）及び検索情報データベース２０を備える。

図３は、音声情報検索サーバ１のハードウエア構成図である。音声情報検索サーバ１は、物理的には、図３に示すように、ＣＰＵ１０１、主記憶装置であるＲＡＭ１０２及びＲＯＭ１０３、ネットワークカード等のデータ送受信デバイスである通信モジュール１０４、ハードディスク、フラッシュメモリ等の補助記憶装置１０５、入力デバイスであるキーボード及びマウス等の入力装置１０６、ディスプレイ等の出力装置１０７などを含むコンピュータシステムとして構成されている。図２に示した各機能は、図３に示すＣＰＵ１０１、ＲＡＭ１０２等のハードウエア上に所定のコンピュータソフトウェアを読み込ませることにより、ＣＰＵ１０１の制御のもとで通信モジュール１０４、入力装置１０６、出力装置１０７を動作させるとともに、ＲＡＭ１０２や補助記憶装置１０５におけるデータの読み出し及び書き込みを行うことで実現される。再び、図２を参照し、音声情報検索サーバ１の各機能部について詳細に説明する。

通話音声情報取得部１０は、第１通信端末３から送信された通話音声情報を取得する部分である。通話音声情報は、情報検索に用いるキーワードを抽出するための情報である。第１実施形態における通話音声情報は、第１通信端末３のユーザの発話音声である第１発話音声と、第２通信端末５のユーザの発話音声である第２発話音声とからなる二者通話音声である。

音声認識部１１は、通話音声情報取得部１０により取得された二者通話音声を、音声認識処理によりテキスト情報に変換する部分である。ここで用いられる音声認識処理には、既存の音声認識技術を採用することができる。音声認識技術としては、例えば、汎用大語彙連続音声認識エンジンＪｕｌｉｕｓ（http://julius.sourceforge.jp/）といったものが存在する。

キーワード抽出部１２は、通話音声情報取得部１０により取得された通話音声情報からキーワード（通話音声中キーワード）を抽出する部分である。第１実施形態では、キーワード抽出部１２は、音声認識部１１により変換されたテキスト情報から通話音声中キーワードを抽出する。キーワード抽出部１２は、例えば、既存の形態素解析技術を用いてキーワードを抽出する。また、キーワード抽出部１２は、キーワード蓄積部１３を参照し、キーワード蓄積部１３に蓄積されているキーワードと一致するキーワードを、音声認識部１１により変換されたテキスト情報から抽出することとしてもよい。

キーワード蓄積部１３は、予め所定のキーワードを蓄積している記憶手段であり、キーワード抽出部１２によるキーワードの抽出に用いられる。キーワード蓄積部１３は、例えば、所定の言語体系における辞書データベースであってもよいし、所定の分野に関連するキーワードが記憶されていることとしてもよい。

キーワード送信部１４は、キーワード抽出部１２により抽出された通話音声中キーワードを第１通信端末３及び第２通信端末５に送信する部分である。なお、通話音声中キーワードを第１通信端末３に送信するために必要な、第１通信端末３のＩＰアドレスやメールアドレスといった宛先に関する情報は、第１通信端末３から通話音声情報を受信したときに音声情報検索サーバ１に取得されることとしてもよいし、音声情報検索サーバ１に予め記憶されていることとしてもよい。また、同様に、通話音声中キーワードを第２通信端末５に送信するために必要な、第２通信端末５の宛先に関する情報は、第１通信端末３から音声情報検索サーバ１に通知されることとしてもよいし、音声情報検索サーバ１に予め記憶されていることとしてもよい。

検索キーワード受信部１５は、第１通信端末３または第２通信端末５から送信された検索キーワードを受信する部分である。検索キーワードは、情報検索に用いるためのキーワードである。また、検索キーワードと共に検索範囲情報が第１通信端末３または第２通信端末５から送信された場合には、検索キーワード受信部１５は、検索範囲情報を受信する。検索範囲情報は、検索する情報の範囲を指定するための情報であり、例えば、検索に用いるデータベースを指定する情報や、検索対象の分野に関する情報等を含むことができる。

情報検索部１６は、検索キーワード受信部１５により受信された検索キーワードに基づいて、情報検索のための所定のデータベースを検索する部分である。本実施形態では、情報検索のための所定のデータベースは、検索情報データベース２０である。また、検索キーワード受信部１５が検索範囲情報を受信した場合には、情報検索部１６は、検索範囲情報に示される検索する情報の範囲に基づいて、検索対象のデータベースにおける検索の範囲を絞り込んだ上で、検索キーワードに基づく検索を実施する。例えば、情報検索部１６は、検索情報データベース２０に記憶されている情報から、検索キーワードを含む情報や、検索キーワードに関連する情報を抽出する。

検索情報送信部１７は、情報検索部１６により検索された情報である検索情報を、第１通信端末３または第２通信端末５に送信する部分である。

共有情報受信部１８は、第１通信端末３または第２通信端末５から共有情報を受信する部分である。共有情報は、第１通信端末３に送信された検索情報のうち、当該第１通信端末３のユーザが第２通信端末５との共有を所望する情報、又は、第２通信端末５に送信された検索情報のうち、当該第２通信端末５のユーザが第１通信端末３との共有を所望する情報である。

共有情報送信部１９は、共有情報受信部１８により受信された共有情報を第２通信端末５又は第１通信端末３に送信する部分である。

検索情報データベース２０は、検索キーワードに基づく検索の対象のデータベースである。本実施形態では、図２に示すように、検索情報データベース２０は、音声情報検索サーバ１の外部に構成され、音声情報検索サーバ１と通信可能に接続されたデータベースとして構成されることとしているが、音声情報検索サーバ１の一機能部として音声情報検索サーバ１の内部に構成されることとしてもよい。

続いて、第１通信端末３及び第２通信端末５の機能について説明する。第１通信端末３及び第２通信端末５は、例えば移動体通信網といったネットワークを介して音声通信が可能であると共に、例えばインターネットといったネットワークによるデータ通信が可能である端末装置であり、例えば携帯電話、移動端末といった装置に例示される。図４及び図５はそれぞれ、第１通信端末３及び第２通信端末５の機能的構成を示すブロック図である。

なお、第１通信端末３及び第２通信端末５も、コンピュータの一種であり、図３に示す音声情報検索サーバ１と同様のハードウエア構成を備える。図４及び図５に示す第１通信端末３及び第２通信端末５の各機能は、図３に示すＣＰＵ１０１、ＲＡＭ１０２等のハードウエア上に所定のコンピュータソフトウェアを読み込ませることにより実現される。

図４に示すように、第１通信端末３は、受話音声受信部３０（受話音声受信手段）、発話音声取得部３１（第１発話音声取得手段）、発話音声送信部３２、通話音声情報送信部３３（通話音声情報送信手段）、キーワード受信部３４（第１キーワード受信手段）、キーワード提示部３５（第１キーワード提示手段）、検索キーワード指定受付部３６（第１検索キーワード指定受付手段）、検索キーワード送信部３７（第１検索キーワード送信手段）、検索情報受信部３８（第１検索情報受信手段）、検索情報提示部３９（第１検索情報提示手段）、共有情報指定受付部４０（第１共有情報指定受付手段）、共有情報送信部４１（第１共有情報送信手段）、共有情報受信部４２（第１共有情報受信手段）及び共有情報表示部４３（第１共有情報表示手段）を備える。

受話音声受信部３０は、第２通信端末５から送信された第２発話音声を受信する部分である。また、発話音声取得部３１は、第２通信端末５との音声通話のために、第１通信端末３のユーザにより発話された音声である第１発話音声を取得する部分である。

なお、受話音声受信部３０及び発話音声取得部３１は、ユーザ発話音声が発生しているときのみ音声を収集し、有意な音声が発生していないときには音声の収集を行わないことが好ましい。具体的には、受話音声受信部３０及び発話音声取得部３１は、収集された音声信号に対してフレーム処理を行い、フレームごとに例えばフーリエ解析といった処理を実施することにより音声特徴量を抽出し、抽出した音声特徴量にユーザの音声が含まれる時間区間における音声を取得する。また、受話音声受信部３０及び発話音声取得部３１は、音声信号をフーリエ変換し、人間の声に特有の周波数帯域の音声が含まれているときに、その音声信号を取得することとしてもよい。このような、発話音声が発生しているときのみ音声を取得する機能は、第２通信端末５の受話音声受信部５０及び発話音声取得部５１が備えることとしてもよい。

発話音声送信部３２は、発話音声取得部３１により取得された第１発話音声を第２通信端末５に送信する部分である。

通話音声情報送信部３３は、発話音声取得部３１により取得された第１発話音声及び受話音声受信部３０により受信された第２発話音声からなる二者通話音声に基づく情報である通話音声情報を音声情報検索サーバ１に送信する部分である。前述したように、第１実施形態における通話音声情報は、音声データからなる二者通話音声である。

キーワード受信部３４は、音声情報検索サーバ１により通話音声情報から抽出された通話音声中キーワードを、音声情報検索サーバ１から受信する部分である。また、キーワード提示部３５は、キーワード受信部３４により受信された通話音声中キーワードを提示する部分であり、例えばディスプレイといった表示装置により構成される。

検索キーワード指定受付部３６は、キーワード提示部３５により提示された通話音声中キーワードに基づいて、情報検索に用いるための検索キーワードの指定を、第１通信端末３のユーザからの入力により受け付ける部分である。また、検索キーワード指定受付部３６は、検索キーワードの指定と共に、検索に用いるデータベースを指定する情報や、検索対象の分野を指定する情報等を含む検索範囲情報の入力を受け付けることができる。

検索キーワード送信部３７は、検索キーワード指定受付部３６により受け付けられた検索キーワードを音声情報検索サーバ１に送信する部分である。なお、検索キーワード指定受付部３６が検索範囲情報の入力を受け付けた場合には、検索キーワード送信部３７は、検索キーワードと共に検索範囲情報を、音声情報検索サーバ１に送信する。

検索情報受信部３８は、音声情報検索サーバ１の検索情報送信部１７から送信された検索情報を受信する部分である。また、検索情報提示部３９は、検索情報受信部３８により受信された検索情報を提示する部分であり、例えばディスプレイといった表示装置により構成される。

共有情報指定受付部４０は、検索情報提示部３９により提示された検索情報に基づいて、第２通信端末５と共有する共有情報を指定するための入力を、第１通信端末３のユーザの入力により受け付ける部分である。また、共有情報送信部４１は、共有情報指定受付部４０により受け付けられた指定入力により示される共有情報を音声情報検索サーバ１に送信する部分である。

共有情報受信部４２は、音声情報検索サーバ１の共有情報送信部１９から送信された共有情報を受信する部分である。共有情報受信部４２により受信される共有情報は、第２通信端末５の共有情報指定受付部６０において、第２通信端末５のユーザの入力により指定された共有情報である。また、共有情報表示部４３は、共有情報受信部４２により受信された共有情報を表示する部分であり、例えばディスプレイといった表示装置により構成される。

続いて、第２通信端末５の機能について説明する。図５に示すように、第２通信端末５は、受話音声受信部５０、発話音声取得部５１（第２発話音声取得手段）、発話音声送信部５２（第２発話音声送信手段）、キーワード受信部５４（第２キーワード受信手段）、キーワード提示部５５（第２キーワード提示手段）、検索キーワード指定受付部５６（第２検索キーワード指定受付手段）、検索キーワード送信部５７（第２検索キーワード送信手段）、検索情報受信部５８（第２検索情報受信手段）、検索情報提示部５９（第２検索情報提示手段）、共有情報指定受付部６０（第２共有情報指定受付手段）、共有情報送信部６１（第２共有情報送信手段）、共有情報受信部６２（第２共有情報受信手段）、及び共有情報表示部６３（第２共有情報表示手段）を備える。

受話音声受信部５０は、第１通信端末３から送信された第１発話音声を受信する部分である。また、発話音声取得部５１は、第１通信端末３との音声通話のために、第２通信端末５のユーザにより発話された第２発話音声を取得する部分である。そして、発話音声送信部５２は、発話音声取得部５１により取得された第２発話音声を第１通信端末３に送信する部分である。

キーワード受信部５４は、音声情報検索サーバ１により通話音声情報から抽出された通話音声中キーワードを、音声情報検索サーバ１から受信する部分である。また、キーワード提示部５５は、キーワード受信部５４により受信された通話音声中キーワードを提示する部分であり、例えばディスプレイといった表示装置により構成される。

検索キーワード指定受付部５６は、キーワード提示部５５により提示された通話音声中キーワードに基づいて、情報検索に用いるための検索キーワードの指定を、第２通信端末５のユーザからの入力により受け付ける部分である。また、検索キーワード指定受付部５６は、検索キーワードの指定と共に、検索に用いるデータベースを指定する情報や、検索対象の分野を指定する情報等を含む検索範囲情報の入力を受け付けることができる。

検索キーワード送信部５７は、検索キーワード指定受付部５６により受け付けられた検索キーワードを音声情報検索サーバ１に送信する部分である。なお、検索キーワード指定受付部５６が検索範囲情報の入力を受け付けた場合には、検索キーワード送信部５７は、検索キーワードと共に検索範囲情報を、音声情報検索サーバ１に送信する。

検索情報受信部５８は、音声情報検索サーバ１の検索情報送信部１７から送信された検索情報を受信する部分である。また、検索情報提示部５９は、検索情報受信部５８により受信された検索情報を提示する部分であり、例えばディスプレイといった表示装置により構成される。

共有情報指定受付部６０は、検索情報提示部５９により提示された検索情報に基づいて、第１通信端末３と共有する共有情報を指定するための入力を、第２通信端末５のユーザの入力により受け付ける部分である。また、共有情報送信部６１は、共有情報指定受付部６０により受け付けられた指定入力により示される共有情報を音声情報検索サーバ１に送信する部分である。

共有情報受信部６２は、音声情報検索サーバ１の共有情報送信部１９から送信された共有情報を受信する部分である。共有情報受信部６２により受信される共有情報は、第１通信端末３の共有情報指定受付部４０において、第１通信端末３のユーザの入力により指定された共有情報である。また、共有情報表示部６３は、共有情報受信部６２により受信された共有情報を表示する部分であり、例えばディスプレイといった表示装置により構成される。

続いて、図６及び図７を参照して、本実施形態の音声情報検索方法における音声情報検索システム１００の動作について説明する。図６は、第１通信端末３が、音声情報検索サーバ１から送信された通話音声中キーワードから検索キーワードを指定し、検索キーワードに基づく検索情報から共有情報を指定する場合における処理内容を示すフローチャートである。また、図７は、第２通信端末５が、音声情報検索サーバ１から送信された通話音声中キーワードから検索キーワードを指定し、検索キーワードに基づく検索情報から共有情報を指定する場合における処理内容を示すフローチャートである。

まず、図６に示すフローチャートについて説明する。まず、第２通信端末５の発話音声送信部５２は、発話音声取得部５１により取得された第２発話音声を第１通信端末３に送信する（Ｓ１）。次に、第１通信端末３の受話音声受信部３０は、第２通信端末５から送信された第２発話音声を受信する（Ｓ２）。そして、通話音声情報送信部３３は、発話音声取得部３１により取得された第１発話音声及び受話音声受信部３０により受信された第２発話音声からなる二者通話音声（通話音声情報）を音声情報検索サーバ１に送信する（Ｓ３）。

続いて、音声情報検索サーバ１の通話音声情報取得部１０は、第１通信端末３から送信された二者通話音声を取得する（Ｓ４）。次に、音声認識部１１は、通話音声情報取得部１０により取得された二者通話音声を、音声認識処理によりテキスト情報に変換・生成する（Ｓ５）。続いて、キーワード抽出部１２は、音声認識部１１により変換されたテキスト情報から通話音声中キーワードを抽出する（Ｓ６）。そして、キーワード送信部１４は、キーワード抽出部１２により抽出された通話音声中キーワードを第１通信端末３及び第２通信端末５に送信する（Ｓ７）。

通話音声中キーワードが送信されると、第２通信端末５のキーワード受信部５４は、通話音声中キーワードを受信する。そして、キーワード提示部５５は、キーワード受信部５４により受信された通話音声中キーワードを第２通信端末５のユーザに対して提示する（Ｓ８）。

一方、第１通信端末３のキーワード受信部３４は、通話音声中キーワードを受信する（Ｓ９）。さらに、キーワード提示部３５は、キーワード受信部３４により受信された通話音声中キーワードを第１通信端末３のユーザに対して提示する（Ｓ１０）。

続いて、第１通信端末３の検索キーワード指定受付部３６は、キーワード提示部３５により提示された通話音声中キーワードに基づく検索キーワードの指定、及び検索範囲情報を、第１通信端末３のユーザからの入力により受け付ける（Ｓ１１）。そして、検索キーワード送信部３７は、検索キーワード指定受付部３６により受け付けられた検索キーワード及び検索範囲情報を音声情報検索サーバ１に送信する（Ｓ１２）。

次に、音声情報検索サーバ１の検索キーワード受信部１５は、第１通信端末３から送信された検索キーワード及び検索範囲情報を受信する（Ｓ１３）。続いて、情報検索部１６は、検索キーワード受信部１５により受信された検索キーワード及び検索範囲情報に基づいて、検索情報データベースを検索する（Ｓ１４）。そして、検索情報送信部１７は、情報検索部１６により検索された情報である検索情報を、第１通信端末３に送信する（Ｓ１５）。

続いて、第１通信端末３の検索情報受信部３８は、音声情報検索サーバ１から送信された検索情報を受信する（Ｓ１６）。そして、検索情報提示部３９は、検索情報受信部３８により受信された検索情報を提示する（Ｓ１７）。

次に、第１通信端末３の共有情報指定受付部４０は、検索情報提示部３９により提示された検索情報に基づいて、第２通信端末５と共有する共有情報を指定するための入力を、第１通信端末３のユーザから受け付ける（Ｓ１８）。そして、共有情報送信部４１は、共有情報指定受付部４０により受け付けられた指定入力により示される共有情報を音声情報検索サーバ１に送信する（Ｓ１９）。

次に、音声情報検索サーバ１の共有情報受信部１８は、第１通信端末３から共有情報を受信する（Ｓ２０）。続いて、共有情報送信部１９は、共有情報受信部１８により受信された共有情報を第２通信端末５に送信する（Ｓ２１）。

次に、第２通信端末５の共有情報受信部６２は、音声情報検索サーバ１から送信された共有情報を受信する（Ｓ２２）。そして、共有情報表示部６３は、共有情報受信部６２により受信された共有情報を表示する（Ｓ２３）。

次に、図７に示すフローチャートについて説明する。ステップＳ３１〜Ｓ３７の処理は、図６のフローチャートにおけるステップＳ１〜Ｓ７の処理と同様である。ステップＳ７において、音声情報検索サーバ１から通話音声中キーワードが送信されると、第２通信端末５のキーワード受信部５４は、通話音声中キーワードを受信する（Ｓ３８）。一方、第１通信端末３のキーワード受信部３４は、通話音声中キーワードを受信する。そして、キーワード提示部３５は、キーワード受信部３４により受信された通話音声中キーワードを第１通信端末３のユーザに対して提示する（Ｓ３９）。さらに、第２通信端末５のキーワード提示部５５は、キーワード受信部５４により受信された通話音声中キーワードを第２通信端末５のユーザに対して提示する（Ｓ４０）。

続いて、第２通信端末５の検索キーワード指定受付部５６は、キーワード提示部５５により提示された通話音声中キーワードに基づく検索キーワードの指定、及び検索範囲情報を、第２通信端末５のユーザからの入力により受け付ける（Ｓ４１）。そして、検索キーワード送信部５７は、検索キーワード指定受付部５６により受け付けられた検索キーワード及び検索範囲情報を音声情報検索サーバ１に送信する（Ｓ４２）。

次に、音声情報検索サーバ１の検索キーワード受信部１５は、第２通信端末５から送信された検索キーワード及び検索範囲情報を受信する（Ｓ４３）。続いて、情報検索部１６は、検索キーワード受信部１５により受信された検索キーワード及び検索範囲情報に基づいて、検索情報データベースを検索する（Ｓ４４）。そして、検索情報送信部１７は、情報検索部１６により検索された情報である検索情報を、第２通信端末５に送信する（Ｓ４５）。

続いて、第２通信端末５の検索情報受信部５８は、音声情報検索サーバ１から送信された検索情報を受信する（Ｓ４６）。そして、検索情報提示部５９は、検索情報受信部５８により受信された検索情報を提示する（Ｓ４７）。

次に、第２通信端末５の共有情報指定受付部６０は、検索情報提示部５９により提示された検索情報に基づいて、第１通信端末３と共有する共有情報を指定するための入力を、第２通信端末５のユーザから受け付ける（Ｓ４８）。そして、共有情報送信部６１は、共有情報指定受付部６０により受け付けられた指定入力により示される共有情報を音声情報検索サーバ１に送信する（Ｓ４９）。

次に、音声情報検索サーバ１の共有情報受信部１８は、第２通信端末５から共有情報を受信する（Ｓ５０）。続いて、共有情報送信部１９は、共有情報受信部１８により受信された共有情報を第１通信端末３に送信する（Ｓ５１）。

次に、第１通信端末３の共有情報受信部４２は、音声情報検索サーバ１から送信された共有情報を受信する（Ｓ５２）。そして、共有情報表示部４３は、共有情報受信部４２により受信された共有情報を表示する（Ｓ５３）。

以上説明した第１実施形態の音声情報検索システム１００では、第１通信端末３のユーザと第２通信端末５のユーザとの間の二者通話音声の情報が音声情報検索サーバ１に送信され、音声情報検索サーバ１により情報検索に用いるための通話音声中キーワードが二者通話音声から抽出され、抽出された通話音声中キーワードが第１通信端末３及び第２通信端末５に送信され、それぞれの通信端末においてそれぞれのユーザに対して提示される。これにより、第１通信端末３及び第２通信端末５共に、検索のためのキーワードを取得することができる。従って、第１通信端末３及び第２通信端末５の間において、検索のための情報の共有が実現される。また、相手方の通信端末の通話音声を取得し、取得した通話音声を自端末の通話音声と併せて音声情報検索サーバ１に送信する処理は、第１通信端末３により実施されるので、第２通信端末５は、二者通話音声を音声情報検索サーバ１に送信するための特段の機能を備える必要がない。

また、第１実施形態の音声情報検索システム１００では、二者通話音声からテキスト情報への変換処理が音声情報検索サーバ１の音声認識部１１により行われるので、第１通信端末３は特段の音声認識機能を有する必要がない。従って、第１通信端末３の処理負荷が軽減される。

また、第１実施形態の音声情報検索システム１００では、第１通信端末３により指定された検索キーワードに基づき情報検索が行われ、その検索結果である検索情報が第１通信端末３に返信されるので、第１通信端末３は、第２通信端末との間の通話内容に関連する情報を取得することが可能となる。

さらに、第１実施形態の音声情報検索システム１００では、第１通信端末３に提示された検索情報のうち、共有情報として指定された情報が音声情報検索サーバ１に送信され、さらに音声情報検索サーバ１により第２通信端末５に送信されるので、第１通信端末３と第２通信端末５との間において、第１通信端末３により指定された情報の共有が実現される。

一方、第２通信端末５により指定された検索キーワードに基づき情報検索が行われ、その検索結果である検索情報が第２通信端末５に返信される場合には、第２通信端末５は、第１通信端末との間の通話内容に関連する情報を取得することが可能となる。

さらに、第２通信端末５に提示された検索情報のうち、共有情報として指定された情報が音声情報検索サーバ１に送信され、さらに音声情報検索サーバ１により第１通信端末３に送信されるので、第２通信端末５と第１通信端末３との間において、第２通信端末５により指定された情報の共有が実現される。

（第２実施形態）
次に、第２実施形態に係る音声情報検索システム１００について説明する。第２実施形態では、音声情報検索サーバ１及び第１通信端末３の構成が第１実施形態と異なる。第１実施形態では、ユーザ発話音声からテキスト情報への変換処理が、音声情報検索サーバ１により行われるのに対して、第２実施形態では、ユーザ発話音声からテキスト情報への変換処理は、第１通信端末３Ａにより行われる。

図８は、第２実施形態における音声情報検索サーバ１Ａの機能的構成を示すブロック図である。図８に示すように、音声情報検索サーバ１Ａは、第１実施形態の音声情報検索サーバ１において備えられていた音声認識部１１を備えていない。図９は、第２実施形態における第１通信端末３Ａの機能的構成を示すブロック図である。図１１に示すように、第１通信端末３Ａは、第１実施形態の第１通信端末３が備えていた各機能部３０〜４３に加えて、音声認識部４４を備える。

第１通信端末３Ａの受話音声受信部３０は、第２通信端末５から送信された第２発話音声を受信し、受信した第２発話音声を音声認識部４４に送出する。また、第１通信端末３Ａの発話音声取得部３１は、第１発話音声を取得し、取得した第１発話音声を音声認識部４４に送出する。

第１通信端末３Ａの音声認識部４４は、発話音声取得部３１から送出された第１発話音声及び受話音声受信部３０から送出された第２発話音声からなる二者通話音声を、音声認識処理によりテキスト情報に変換する部分である。ここで用いられる音声認識処理には、第１実施形態における音声認識部１１と同様に既存の音声認識技術を採用することができる。音声認識部４４は、二者通話音声に基づいて得られたテキスト情報を通話音声情報送信部３３に送出する。

第１通信端末３Ａの通話音声情報送信部３３は、音声認識部４４により変換され送出されたテキスト情報を、通話音声情報として音声情報検索サーバ１Ａに送信する。即ち、第２実施形態では、通話音声情報は、二者通話音声が変換されたテキスト情報である。

音声情報検索サーバ１Ａの通話音声情報取得部１０は、第１通信端末３Ａから送信されたテキスト情報を通話音声情報として取得し、取得した通話音声情報をキーワード抽出部１２に送出する。そして、音声情報検索サーバ１Ａのキーワード抽出部１２は、通話音声情報取得部１０により取得されたテキスト情報から通話音声中キーワードを抽出する。

続いて、図１０を参照して、第２実施形態における音声情報検索システム１００の動作について説明する。図１０は、第１通信端末３が、音声情報検索サーバ１から送信された通話音声中キーワードから検索キーワードを指定し、検索キーワードに基づく検索情報から共有情報を指定する場合における処理内容を示すフローチャートである。

ステップＳ６１〜Ｓ６２の処理内容は、図６のフローチャートにおけるステップＳ１〜Ｓ２の処理内容と同様である。続くステップＳ６３において、第１通信端末３Ａの音声認識部４４は、発話音声取得部３１から送出された第１発話音声及び受話音声受信部３０から送出された第２発話音声からなる二者通話音声を、音声認識処理によりテキスト情報に変換・生成する（Ｓ６３）。そして、第１通信端末３Ａの通話音声情報送信部３３は、音声認識部４４における変換処理により得られたテキスト情報を、通話音声情報として、音声情報検索サーバ１Ａに送信する（Ｓ６４）。

次に、音声情報検索サーバ１Ａの通話音声情報取得部１０は、第１通信端末３Ａから送信された通話音声情報を受信し（Ｓ６５）、取得した通話音声情報をキーワード抽出部１２に送出する。続いて、音声情報検索サーバ１Ａのキーワード抽出部１２は、通話音声情報から、通話音声中キーワードを抽出する（Ｓ６６）。続くステップＳ６７〜Ｓ８３の処理内容は、図６のフローチャートにおけるステップＳ７〜Ｓ２３の処理内容と同様である。

以上説明した第２実施形態の音声情報検索システム１００では、第１通信端末３において二者通話音声がテキスト情報に変換され、変換されたテキスト情報が音声情報検索サーバ１に送信されるので、第１通信端末３と音声情報検索サーバ１との間の通信負荷が軽減される。

（第３実施形態）
次に、第３実施形態に係る音声情報検索システム１００について説明する。第３実施形態では、第１通信端末３及び第２通信端末５の構成が第１及び第２実施形態と異なる。図１１は、第３実施形態における第１通信端末３Ｂの機能的構成を示すブロック図である。図１１に示すように、第１通信端末３Ｂは、第１実施形態の第１通信端末３が備えていた各機能部３０〜４３に加えて、蓄積情報検索部４５（第１蓄積情報検索手段）及び蓄積情報記憶部４６（第１蓄積情報記憶手段）を備える。

また、図１２は、第３実施形態における第２通信端末５Ｂの機能的構成を示すブロック図である。図１２に示すように、第２通信端末５Ｂは、第１実施形態の第２通信端末５が備えていた各機能部５０〜６３に加えて、蓄積情報検索部６５（第２蓄積情報検索手段）及び蓄積情報記憶部６６（第２蓄積情報記憶手段）を備える。

第１通信端末３Ｂの蓄積情報検索部４５は、検索キーワード指定受付部３６により受け付けられた検索キーワード及び検索範囲情報に基づいて、蓄積情報記憶部４６に記憶されている蓄積情報を検索し、検索された蓄積情報を検索情報受信部３８に送出する部分である。蓄積情報は、第１通信端末３Ｂが過去に取得した情報である。従って、蓄積情報は、例えば、第２通信端末５Ｂとの間で過去に授受を行ったデータを含むことができる。第１通信端末３Ｂの蓄積情報記憶部４６は、蓄積情報を蓄積する記憶手段である。

そして、第１通信端末３Ｂの検索情報受信部３８は、蓄積情報検索部４５から送出された蓄積情報を取得する。さらに、第１通信端末３Ｂの検索情報提示部３９は、検索情報受信部３８により取得された蓄積情報を提示する。

また、第２通信端末５Ｂの蓄積情報検索部６５は、検索キーワード指定受付部５６により受け付けられた検索キーワード及び検索範囲情報に基づいて、蓄積情報記憶部６６に記憶されている蓄積情報を検索し、検索された蓄積情報を検索情報受信部５８に送出する部分である。蓄積情報は、第２通信端末５Ｂが過去に取得した情報である。従って、蓄積情報は、例えば、第１通信端末３Ｂとの間で過去に授受を行ったデータを含むことができる。第２通信端末５Ｂの蓄積情報記憶部６６は、蓄積情報を蓄積する記憶手段である。

そして、第２通信端末５Ｂの検索情報受信部５８は、蓄積情報検索部６５から送出された蓄積情報を取得する。さらに、第２通信端末５Ｂの検索情報提示部５９は、検索情報受信部５８により取得された蓄積情報を提示する。

以上説明した第３実施形態の音声情報検索システム１００では、第１通信端末３Ｂにおいて蓄積された蓄積情報が検索キーワードに基づく検索の対象となるので、蓄積情報から検索キーワードにより検索された情報も第１通信端末３Ｂのユーザに提示される。また、提示された蓄積情報が第１通信端末３Ｂのユーザにより共有情報として指定された場合には、その情報を第２通信端末５Ｂと共有することが可能となる。また、第２通信端末５Ｂにおいて蓄積された蓄積情報が検索キーワードに基づく検索の対象となるので、蓄積情報から検索キーワードにより検索された情報も第２通信端末５Ｂのユーザに提示される。また、提示された蓄積情報が第２通信端末５Ｂのユーザにより共有情報として指定された場合には、その情報を第１通信端末３Ｂと共有することが可能となる。

上記した第３実施形態の音声情報検索システム１００の作用効果により、例えば、第１通信端末３Ｂと第２通信端末５Ｂとの間で送受信されたメールを両端末間で共有することが可能となったり、両端末のユーザが一緒に旅行したときの写真のデータが第１通信端末３Ｂまたは第２通信端末５Ｂに保存されているような場合にあっては、その写真データを両端末間で共有することが可能となる。

（第４実施形態）
次に、第４実施形態に係る音声情報検索システム１００について説明する。第４実施形態では、第１通信端末３及び第２通信端末５の構成が第１、第２及び第３実施形態と異なる。図１３は、第４実施形態における第１通信端末３Ｃの機能的構成を示すブロック図である。また、図１４は、第４実施形態における第２通信端末５Ｃの機能的構成を示すブロック図である。第４実施形態における第１通信端末３Ｃは、第１音声通話端末３ａと、第１情報端末３ｂとから構成される。また、第４実施形態における第２通信端末５Ｃは、第２音声通話端末５ａと、第２情報端末５ｂとから構成される。

第１通信端末３Ｃの第１音声通話端末３ａは、第１実施形態の第１通信端末３が備えていた各機能部３０〜３２に加えて、通話端末音声送信部４７を備える。また、第１通信端末３Ｃの第１情報端末３ｂは、第１実施形態の第１通信端末３が備えていた各機能部３３〜４３に加えて、通話端末音声受信部４８を備える。

第１音声通話端末３ａの受話音声受信部３０は、第２通信端末５から送信された第２発話音声を受信し、受信した第２発話音声を通話端末音声送信部４７に送出する。また、第１音声通話端末３ａの発話音声取得部３１は、第１発話音声を取得し、取得した第１発話音声を通話端末音声送信部４７に送出する。そして、通話端末音声送信部３８は、発話音声取得部３１から送出された第１発話音声及び受話音声受信部３０から送出された第２発話音声からなる二者通話音声を、第１情報端末３ｂに送信する。

第１情報端末３ｂの通話端末音声受信部４８は、第１音声通話端末３ａの通話端末音声送信部４７から送信された二者通話音声を受信する。そして、通話端末音声受信部４８は、受信した二者通話音声を通話音声情報として通話音声情報送信部３３に送出する。

なお、通話端末音声送信部４７と通話端末音声受信部４８との間の通信手段は、例えば、ＵＳＢ（Universal Serial Bus）規格、ＩＥＥＥ１３９４規格等に準拠したケーブルによる有線通信であってもよいし、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信及び無線ＬＡＮ通信といった無線通信であってもよい。

なお、第１情報端末３ｂには、第２実施形態における第１通信端末３Ａと同様に音声認識部４４が備えられることとしてもよい。その場合には、音声認識部４４は、通話端末音声受信部４８により受信された二者通話音声を音声認識処理によりテキスト情報に変換し、得られたテキスト情報を通話音声情報送信部３３に送出する。従って、この場合には、通話音声情報送信部３３により音声情報検索サーバ１に送信される通話音声情報は、二者通話音声が変換されたテキスト情報である。

第２通信端末５Ｃの第２音声通話端末５ａは、第１実施形態の第２通信端末５が備えていた各機能部５０〜５２を備える。また、第２通信端末５Ｃの第２情報端末５ｂは、第１実施形態の第２通信端末５が備えていた各機能部５４〜６３を備える。

以上説明した第４実施形態における第１通信端末３Ｃでは、通常の携帯電話に例示されるような、一般的な音声通話機能と簡易なデータ通信機能を備えた第１音声通話端末３ａと、通常のパーソナルコンピュータに例示されるような、ネットワークを介した通信機能を備えた第１情報端末３ｂとにより第１通信端末３Ｃを構成することができる。また、第４実施形態における第２通信端末５Ｃでは、通常の携帯電話に例示されるような、一般的な音声通話機能を備えた第２音声通話端末５ａと、通常のパーソナルコンピュータに例示されるような、ネットワークを介した通信機能を備えた第２情報端末５ｂとにより第２通信端末５Ｃを構成することができる。従って、本システムを容易に構成することが可能となる。

以上、本発明をその実施形態に基づいて詳細に説明した。しかし、本発明は上記実施形態に限定されるものではない。本発明は、その要旨を逸脱しない範囲で様々な変形が可能である。

１，１Ａ…音声情報検索サーバ、１００…音声情報検索システム、３，３Ａ，３Ｂ，３Ｃ…第１通信端末、３ａ…第１音声通話端末、３ｂ…第１情報端末、５，５Ｂ，５Ｃ…第２通信端末、５ａ…第２音声通話端末、５ｂ…第２情報端末、１０…通話音声情報取得部、１１…音声認識部、１２…キーワード抽出部、１３…キーワード蓄積部、１４…キーワード送信部、１５…検索キーワード受信部、１６…情報検索部、１７…検索情報送信部、１８…共有情報受信部、１９…共有情報送信部、２０…検索情報データベース、３０…受話音声受信部、３１…発話音声取得部、３２…発話音声送信部、３３…通話音声情報送信部、３４…キーワード受信部、３５…キーワード提示部、３６…検索キーワード指定受付部、３７…検索キーワード送信部、３８…検索情報受信部、３８…通話端末音声送信部、３９…検索情報提示部、４０…共有情報指定受付部、４１…共有情報送信部、４２…共有情報受信部、４３…共有情報表示部、４４…音声認識部、４５…蓄積情報検索部、４６…蓄積情報記憶部、４７…通話端末音声送信部、４８…通話端末音声受信部、５０…受話音声受信部、５１…発話音声取得部、５２…発話音声送信部、５４…キーワード受信部、５５…キーワード提示部、５６…検索キーワード指定受付部、５７…検索キーワード送信部、５８…検索情報受信部、５９…検索情報提示部、６０…共有情報指定受付部、６１…共有情報送信部、６２…共有情報受信部、６３…共有情報表示部、６５…蓄積情報検索部、６６…蓄積情報記憶部、Ｎ１…ネットワーク、Ｎ２…音声通信網。

Claims (9)

1. 音声通信可能に接続された第１通信端末及び第２通信端末、並びに前記第１通信端末と前記第２通信端末との間における通話内容に基づいて情報検索を行う音声情報検索サーバを含む音声情報検索システムであって、
   前記第１通信端末は、
   前記第２通信端末のユーザの発話音声であり、当該第２通信端末から送信された第２発話音声を受信する受話音声受信手段と、
   当該第１通信端末のユーザの発話音声である第１発話音声を取得する第１発話音声取得手段と、
   前記第１発話音声取得手段により取得された前記第１発話音声及び前記受話音声受信手段により受信された前記第２発話音声からなる二者通話音声に基づく情報であって、情報検索に用いるキーワードを抽出するための情報である通話音声情報を送信する通話音声情報送信手段と、
   前記音声情報検索サーバにより前記通話音声情報から抽出されたキーワードである通話音声中キーワードを、前記音声情報検索サーバから受信する第１キーワード受信手段と、
   前記第１キーワード受信手段により受信された前記通話音声中キーワードを提示する第１キーワード提示手段と、
   前記第１キーワード提示手段により提示された前記通話音声中キーワードに基づいて、情報検索に用いるためのキーワードである検索キーワードの指定を、前記第１通信端末のユーザからの入力により受け付ける第１検索キーワード指定受付手段と、
   前記第１検索キーワード指定受付手段により受け付けられた前記検索キーワードを送信する第１検索キーワード送信手段と、
   第１検索情報受信手段と、
   第１検索情報提示手段と、
   第１共有情報指定受付手段と、
   第１共有情報送信手段と、を備え、
   前記第２通信端末は、
   前記第２発話音声を取得する第２発話音声取得手段と、
   前記第２発話音声取得手段により取得された前記第２発話音声を送信する第２発話音声送信手段と、
   前記音声情報検索サーバから送信された前記通話音声中キーワードを受信する第２キーワード受信手段と、
   前記第２キーワード受信手段により受信された前記通話音声中キーワードを提示する第２キーワード提示手段と、
   第２共有情報受信手段と、
   第２共有情報表示手段と、を備え、
   前記音声情報検索サーバは、
   前記第１通信端末から送信された前記通話音声情報を取得する通話音声情報取得手段と、
   前記通話音声情報取得手段により取得された前記通話音声情報から前記通話音声中キーワードを抽出するキーワード抽出手段と、
   前記キーワード抽出手段により抽出された前記通話音声中キーワードを前記第１通信端末及び前記第２通信端末に送信するキーワード送信手段と、
   前記第１検索キーワード送信手段から送信された前記検索キーワードを受信する検索キーワード受信手段と、
   前記検索キーワード受信手段により受信された前記検索キーワードに基づいて、情報検索のための所定のデータベースを検索する情報検索手段と、
   前記情報検索手段により検索された情報である検索情報を送信する検索情報送信手段と、
   共有情報受信手段と、
   共有情報送信手段と、を備え、
   前記第１検索情報受信手段は、前記検索情報送信手段から送信された前記検索情報を受信し、
   前記第１検索情報提示手段は、前記第１検索情報受信手段により受信された前記検索情報を提示し、
   前記第１共有情報指定受付手段は、前記第１検索情報提示手段により提示された前記検索情報に基づいて、前記第２通信端末と共有する情報である共有情報を指定するための入力を、前記第１通信端末のユーザから受け付け、
   前記第１共有情報送信手段は、前記第１共有情報指定受付手段により受け付けられた指定入力により示される前記共有情報を送信し、
   前記共有情報受信手段は、前記第１共有情報送信手段から送信された前記共有情報を受信し、
   前記共有情報送信手段は、前記共有情報受信手段により受信された前記共有情報を送信し、
   前記第２共有情報受信手段は、前記共有情報送信手段から送信された前記共有情報を受信し、
   前記第２共有情報表示手段は、前記第２共有情報受信手段により受信された前記共有情報を表示する、
   ことを特徴とする音声情報検索システム。
2. 前記第１通信端末は、
   前記第１通信端末が過去に取得した情報である蓄積情報を蓄積する第１蓄積情報記憶手段と、
   前記第１検索キーワード指定受付手段により受け付けられた前記検索キーワードに基づいて、前記第１蓄積情報記憶手段に記憶されている前記蓄積情報を検索し、検索された前記蓄積情報を前記第１検索情報受信手段に送出する第１蓄積情報検索手段とを備え、
   前記第１通信端末の第１検索情報受信手段は、前記第１蓄積情報検索手段から送出された前記蓄積情報を取得し、
   前記第１通信端末の前記第１検索情報提示手段は、前記第１検索情報受信手段により取得された前記蓄積情報を提示する
   ことを特徴とする請求項１に記載の音声情報検索システム。
3. 音声通信可能に接続された第１通信端末及び第２通信端末、並びに前記第１通信端末と前記第２通信端末との間における通話内容に基づいて情報検索を行う音声情報検索サーバを含む音声情報検索システムであって、
   前記第１通信端末は、
   前記第２通信端末のユーザの発話音声であり、当該第２通信端末から送信された第２発話音声を受信する受話音声受信手段と、
   当該第１通信端末のユーザの発話音声である第１発話音声を取得する第１発話音声取得手段と、
   前記第１発話音声取得手段により取得された前記第１発話音声及び前記受話音声受信手段により受信された前記第２発話音声からなる二者通話音声に基づく情報であって、情報検索に用いるキーワードを抽出するための情報である通話音声情報を送信する通話音声情報送信手段と、
   前記音声情報検索サーバにより前記通話音声情報から抽出されたキーワードである通話音声中キーワードを、前記音声情報検索サーバから受信する第１キーワード受信手段と、
   前記第１キーワード受信手段により受信された前記通話音声中キーワードを提示する第１キーワード提示手段と、
   第１共有情報受信手段と、
   第１共有情報表示手段と、を備え、
   前記第２通信端末は、
   前記第２発話音声を取得する第２発話音声取得手段と、
   前記第２発話音声取得手段により取得された前記第２発話音声を送信する第２発話音声送信手段と、
   前記音声情報検索サーバから送信された前記通話音声中キーワードを受信する第２キーワード受信手段と、
   前記第２キーワード受信手段により受信された前記通話音声中キーワードを提示する第２キーワード提示手段と、
   前記第２キーワード提示手段により提示された前記通話音声中キーワードに基づいて、情報検索に用いるためのキーワードである検索キーワードの指定を、前記第２通信端末のユーザからの入力により受け付ける第２検索キーワード指定受付手段と、
   前記第２検索キーワード指定受付手段により受け付けられた前記検索キーワードを送信する第２検索キーワード送信手段と、
   第２検索情報受信手段と、
   第２検索情報提示手段と、
   第２共有情報指定受付手段と、
   第２共有情報送信手段と、を備え、
   前記音声情報検索サーバは、
   前記第１通信端末から送信された前記通話音声情報を取得する通話音声情報取得手段と、
   前記通話音声情報取得手段により取得された前記通話音声情報から前記通話音声中キーワードを抽出するキーワード抽出手段と、
   前記キーワード抽出手段により抽出された前記通話音声中キーワードを前記第１通信端末及び前記第２通信端末に送信するキーワード送信手段と、
   前記第２検索キーワード送信手段から送信された前記検索キーワードを受信する検索キーワード受信手段と、
   前記検索キーワード受信手段により受信された前記検索キーワードに基づいて、情報検索のための所定のデータベースを検索する情報検索手段と、
   前記情報検索手段により検索された情報である検索情報を送信する検索情報送信手段と、
   共有情報受信手段と、
   共有情報送信手段と、を備え、
   前記第２検索情報受信手段は、前記検索情報送信手段から送信された前記検索情報を受信し、
   前記第２検索情報提示手段は、前記第２検索情報受信手段により受信された前記検索情報を提示し、
   前記第２共有情報指定受付手段は、前記第２検索情報提示手段により提示された前記検索情報に基づいて、前記第１通信端末と共有する情報である共有情報を指定するための入力を、前記第２通信端末のユーザから受け付け、
   前記第２共有情報送信手段は、前記第２共有情報指定受付手段により受け付けられた指定入力により示される前記共有情報を送信し、
   前記共有情報受信手段は、前記第２共有情報送信手段から送信された前記共有情報を受信し、
   前記共有情報送信手段は、前記共有情報受信手段により受信された前記共有情報を送信し、
   前記第１共有情報受信手段は、前記共有情報送信手段から送信された前記共有情報を受信し、
   前記第１共有情報表示手段は、前記第１共有情報受信手段により受信された前記共有情報を表示する、
   ことを特徴とする音声情報検索システム。
4. 前記第２通信端末は、
   前記第２通信端末が過去に取得した情報である蓄積情報を蓄積する第２蓄積情報記憶手段と、
   前記第２検索キーワード指定受付手段により受け付けられた前記検索キーワードに基づいて、前記第２蓄積情報記憶手段に記憶されている前記蓄積情報を検索し、検索された前記蓄積情報を前記第２検索情報受信手段に送出する第２蓄積情報検索手段とを備え、
   前記第２通信端末の第２検索情報受信手段は、前記第２蓄積情報検索手段から送出された前記蓄積情報を取得し、
   前記第２通信端末の前記第２検索情報提示手段は、前記第２検索情報受信手段により取得された前記蓄積情報を提示する
   ことを特徴とする請求項３に記載の音声情報検索システム。
5. 前記音声情報検索サーバは、音声認識手段を更に備え、
   前記第１通信端末の前記通話音声情報送信手段は、前記二者通話音声を前記通話音声情報として前記音声情報検索サーバに送信し、
   前記音声情報検索サーバの前記音声認識手段は、音声認識処理により前記二者通話音声をテキスト情報に変換し、
   前記音声情報検索サーバの前記キーワード抽出手段は、前記音声認識手段により変換された前記テキスト情報から前記通話音声中キーワードを抽出する
   ことを特徴とする請求項１〜４のいずれか１項に記載の音声情報検索システム。
6. 前記第１通信端末は、
   前記二者通話音声を、音声認識処理によりテキスト情報に変換する音声認識手段を備え、
   前記第１通信端末の前記通話音声情報送信手段は、前記音声認識手段により変換された前記テキスト情報を前記通話音声情報として送信し、
   前記音声情報検索サーバの前記通話音声情報取得手段は、前記通話音声情報送信手段により送信された前記テキスト情報を前記通話音声情報として取得し、
   前記音声情報検索サーバの前記キーワード抽出手段は、前記通話音声情報取得手段により取得された前記テキスト情報から前記通話音声中キーワードを抽出する
   ことを特徴とする請求項１〜４のいずれか１項に記載の音声情報検索システム。
7. 前記第１通信端末は、第１音声通話端末と、第１情報端末とから構成され、
   前記第１音声通話端末は、
   前記受話音声受信手段と、前記第１発話音声取得手段とを含み、
   前記二者通話音声を前記第１情報端末に送信する第１通話端末音声送信手段を更に備え、
   前記第１情報端末は、
   前記通話音声情報送信手段と、前記第１キーワード受信手段と、前記第１キーワード提示手段とを含み、
   前記通話端末音声送信手段から送信された前記二者通話音声を受信する通話端末音声受信手段を更に備える
   ことを特徴とする請求項１〜６のいずれか１項に記載の音声情報検索システム。
8. 前記第２通信端末は、第２音声通話端末と、第２情報端末とから構成され、
   前記第２音声通話端末は、前記第２発話音声取得手段と、前記第２発話音声送信手段とを含み、
   前記第２情報端末は、前記第２キーワード受信手段と、前記第２キーワード提示手段とを含む
   ことを特徴とする請求項１〜７のいずれか１項に記載の音声情報検索システム。
9. 音声通信可能に接続された第１通信端末及び第２通信端末、並びに前記第１通信端末と前記第２通信端末との間における通話内容に基づいて情報検索を行う音声情報検索サーバを含む音声情報検索システムにおける音声情報検索方法であって、
   前記第２通信端末が、当該第２通信端末のユーザの発話音声である第２発話音声を取得する第２発話音声取得ステップと、
   前記第２通信端末が、前記第２発話音声取得ステップにおいて取得された前記第２発話音声を送信する発話音声送信ステップと、
   前記第１通信端末が、前記発話音声送信ステップにおいて送信された前記第２発話音声を受信する受話音声受信ステップと、
   前記第１通信端末が、当該第１通信端末のユーザの発話音声である第１発話音声を取得する第１発話音声取得ステップと、
   前記第１通信端末が、前記第１発話音声取得ステップにおいて取得された前記第１発話音声及び前記受話音声受信ステップにおいて受信された前記第２発話音声からなる二者通話音声に基づく情報であって、情報検索に用いるキーワードを抽出するための情報である通話音声情報を送信する通話音声情報送信ステップと、
   前記音声情報検索サーバが、前記通話音声情報送信ステップにおいて送信された前記通話音声情報を取得する通話音声情報取得ステップと、
   前記音声情報検索サーバが、前記通話音声情報取得ステップにおいて取得された前記通話音声情報から、情報検索に用いるためのキーワードである通話音声中キーワードを抽出するキーワード抽出ステップと、
   前記音声情報検索サーバが、前記キーワード抽出ステップにおいて抽出された前記通話音声中キーワードを前記第１通信端末及び前記第２通信端末に送信するキーワード送信ステップと、
   前記第１通信端末が、前記キーワード送信ステップにおいて送信された前記通話音声中キーワードを受信する第１キーワード受信ステップと、
   前記第１通信端末が、前記第１キーワード受信ステップにおいて受信された前記通話音声中キーワードを提示する第１キーワード提示ステップと、
   前記第２通信端末が、前記キーワード送信ステップにおいて送信された前記通話音声中キーワードを受信する第２キーワード受信ステップと、
   前記第２通信端末が、前記第２キーワード受信ステップにおいて受信された前記通話音声中キーワードを提示する第２キーワード提示ステップと、
   前記第１通信端末が、前記第１キーワード提示ステップにおいて提示された前記通話音声中キーワードに基づいて、情報検索に用いるためのキーワードである検索キーワードの指定を、前記第１通信端末のユーザからの入力により受け付ける第１検索キーワード指定受付ステップと、
   前記第１通信端末が、前記第１検索キーワード指定受付ステップにおいて受け付けられた前記検索キーワードを送信する第１検索キーワード送信ステップと、
   前記音声情報検索サーバが、前記第１検索キーワード送信ステップにおいて送信された前記検索キーワードを受信する検索キーワード受信ステップと、
   前記音声情報検索サーバが、前記検索キーワード受信ステップにおいて受信された前記検索キーワードに基づいて、情報検索のための所定のデータベースを検索する情報検索ステップと、
   前記音声情報検索サーバが、前記情報検索ステップにおいて検索された情報である検索情報を送信する検索情報送信ステップと、
   前記第１通信端末が、前記検索情報送信ステップにおいて送信された前記検索情報を受信する第１検索情報受信ステップと、
   前記第１通信端末が、前記第１検索情報受信ステップにおいて受信された前記検索情報を提示する第１検索情報提示ステップと、
   前記第１通信端末が、前記第１検索情報提示ステップにおいて提示された前記検索情報に基づいて、前記第２通信端末と共有する情報である共有情報を指定するための入力を、前記第１通信端末のユーザから受け付ける第１共有情報指定受付ステップと、
   前記第１通信端末が、前記第１共有情報指定受付ステップにおいて受け付けられた指定入力により示される前記共有情報を送信する第１共有情報送信ステップと、
   前記音声情報検索サーバが、前記第１共有情報送信ステップにおいて送信された前記共有情報を受信する共有情報受信ステップと、
   前記音声情報検索サーバが、前記共有情報受信ステップにおいて受信された前記共有情報を送信する共有情報送信ステップと、
   前記第２通信端末が、前記共有情報送信ステップにおいて送信された前記共有情報を受信する第２共有情報受信ステップと、
   前記第２通信端末が、前記第２共有情報受信ステップにおいて受信された前記共有情報を表示する第２共有情報表示ステップと、
   を有することを特徴とする音声情報検索方法。

Images