WO2006028181A1

WO2006028181A1 - 通信端末とその通信方法

Info

Publication number: WO2006028181A1
Application number: PCT/JP2005/016534
Authority: WO
Inventors: Yoshifumi Yonemoto
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2004-09-09
Filing date: 2005-09-08
Publication date: 2006-03-16
Also published as: US20080215884A1; EP1788809A1

Abstract

　通信相手とのコミュニケーションをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーションを促進させることができる通信端末。この装置では、情報保存処理部（１０２）は、情報の保存に関わる処理を行う。通信相手情報取得部（１０４）は、通信中の通信相手に関する情報を、自端末又は相手端末から検索用キー情報として取得する。保存情報検索部（１０５）は、通信相手情報取得部（１０４）により抽出された通信相手に関する情報を検索用キー情報として、情報保存部（１０３）に記憶される情報を検索し、通信相手と関係の深い情報を抽出する。出力部（１０７）は、画像情報をディスプレイに表示したり、音声情報をスピーカにて再生したりする。

Description

通信端末とその通信方法

技術分野

[0001] 本発明は、例えばテレビ電話を用いて通信する通信端末とその通信方法に関する

背景技術

[0002] テレビ電話を用いて通信する際、会話をより楽しくするための支援装置として、共覧型画面電話方式が提案されてヽる (例えば、特許文献 1)。

[0003] 上記従来の方式は、一般に、各端末が持って!/、る情報が異なるから、通話を開始する前は、各端末が持つデータベースに格納された情報を同じ状態に統一し、この状態で、必要に応じて、データベース内の情報を検索し、検索して得られたデータを各端末に表示することで、会話をスムーズに進行させる支援装置である。

特許文献 1 :特開平 3— 49385号公報

発明の開示

発明が解決しょうとする課題

[0004] し力しながら、上記した従来の装置においては、通話を開始する前は、各端末が持つデータベースに格納された情報を同じ状態に統一にしなければならず、このような通話前の事前準備は、煩わしく実用的でな、と、う問題がある。

[0005] 本発明の目的は、通信相手とのコミュニケーションをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーシヨンを促進させることができる通信端末とその通信方法を提供することである。課題を解決するための手段

[0006] 本発明の通信端末は、通信相手からキー情報を取得するキー情報取得手段と、前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索手段と、前記検索手段による検索の結果得られた前記情報を表示する情報表示手段と、を具備する構成を採る。 [0007] 本発明の通信端末は、通信相手からキー情報を取得するキー情報取得手段と、前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索手段と、前記検索手段による検索の結果得られた前記情報を前記通信相手に送信する情報提示手段と、を具備する構成を採る。

[0008] 本発明の通信方法は、通信相手力キー情報を取得するキー情報取得ステップと、前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索ステップと、前記検索ステツプによる検索の結果得られた前記情報を表示する情報表示ステップと、を具備するようにした。

[0009] 本発明の通信方法は、通信相手力キー情報を取得するキー情報取得ステップと、前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索ステップと、前記検索ステツプによる検索の結果得られた前記情報を前記通信相手に送信する情報提示ステツプと、を具備するようにした。

発明の効果

[0010] 本発明によれば、通信相手とのコミュニケーションをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーシヨンを促進させることができる。

図面の簡単な説明

[0011] [図 1]本発明の実施の形態 1に係る通信端末の構成を示すブロック図

[図 2]本発明の実施の形態 1に係る通信システムの構築図

[図 3]本発明の実施の形態 1に係る通信相手情報の取得方法を示すシーケンス図 [図 4]本発明の実施の形態 1に係る受信画像情報の保存方法を示すフロー図

[図 5]本発明の実施の形態 1に係る通信相手情報要求に対する応答方法を示すフロ一図

[図 6]本発明の実施の形態 1に係る通信相手情報に基づく保存情報の検索方法を示すフロー図

[図 7]本発明の実施の形態 1に係る再生情報の表示例を示す図

[図 8]本発明の実施の形態 1に係る通信端末の他の構成を示すブロック図

[図 9]本発明の実施の形態 1に係る出力情報の他の表示例を示す図

[図 10]本発明の実施の形態 1に係る出力情報の別の表示例を示す図

[図 11]本発明の実施の形態 3に係る音認識に基づく保存情報の抽出を説明するフロ一図

[図 12]本発明の実施の形態 4に係る通信方法を示すシーケンス図

[図 13]本発明の実施の形態 4に係る通信端末の構成を示すブロック図

[図 14]本発明の実施の形態 5に係る画像認識に基づく保存情報の保存方法を示すフロー図

[図 15]本発明の実施の形態 5に係る音声認識に基づく保存情報の検索方法を示すフロー図

発明を実施するための最良の形態

[0012] 以下、本発明の実施の形態について図面を参照して詳細に説明する。

[0013] (実施の形態 1)

本発明の実施の形態に係る通信システムは、図 2に示すように、複数の通信端末（

201〜203)力通信網 220を介して接続されている。

[0014] 本発明の通信端末 (201〜203)は、例えば携帯電話機である。通信端末 (201〜

203)は、基地局（211〜213)を介して、通信網 220に接続される。

[0015] 本発明の通信端末 100は、図 1に示すように、通信部 101と、情報保存処理部 102 と、情報保存部 103と、通信相手情報取得部 104と、保存情報検索部 105と、情報再生処理部 106と、出力部 107とを備えている。

[0016] 通信部 101は、テレビ電話などの通信を行う際に、発信 Z着信の呼接続や、映像情報、音情報、テキストベース情報などのデータの送受信を行う。テキストベース情報は、任意のデータ情報であり、表示されるデータや制御用情報も含まれる。

[0017] 情報保存処理部 102は、テレビ電話の再生画像の保存処理、送受信メールの保存処理、アドレス帳へのユーザ情報の保存処理等の情報の保存に関わる処理を行う。 [0018] 情報保存部 103は、情報保存処理部 102により保存処理される情報である保存情報を記憶している。具体的には、情報保存部 103は、テレビ電話での再生画像を蓄積する他、メールや Web上で取得した情報、ネットワークを介して受信した受信コンテンッ、友人'知人の住所、電話番号等を含むアドレス情報等の様々な情報を予め蓄積している。

[0019] 情報保存部 103には、通信端末 201〜203の各々に内蔵されたメモリ、具体的には電気的消去型不揮発性メモリ (EEPROM)、読出書込可能な揮発性メモリ (SRAM や DRAM)、磁気メモリ（Hard Disk)のいずれかを使用することができる。また、情報保存部 103には、通信端末 201〜203に着脱自在な外部記憶装置、例えば、カード型メモリ、スティック型メモリ等を使用することができる。更に、無線網や有線網で構築されたネットワークのサーバの記憶装置を、情報保存部 103として使用することができる。

[0020] 通信相手情報取得部 104は、本発明のキー情報取得手段であり、通信中の通信相手に関する情報を、自端末又は相手端末力も検索用キー情報として取得する。取得するキー情報としては、テレビ電話中の通信相手を一意に特定する情報または嗜好情報などの人物情報や、位置情報または時間情報などの環境情報である。

[0021] 保存情報検索部 105は、通信相手情報取得部 104により取得された通信相手に関する情報を検索用キー情報 (検索用情報)として、情報保存部 103に記憶される情報を検索し、通信相手と関係の深!ヽ情報 (被検索情報)を抽出する。

[0022] 情報再生処理部 106は、保存情報検索部 105により抽出された通信相手と関係の深い被検索情報を、出力部 107により、再生処理する。

[0023] 出力部 107は、映像を表示するディスプレイやスピーカにより構成されている。例えば、情報再生処理部 106は、出力部 107により、抽出された画像情報をディスプレイに表示したり、抽出された音声情報をスピーカにて再生したりする。

[0024] 通信端末 201〜203は、それぞれ、図 1に示した通信部 101、情報保存処理部 10 2、情報保存部 103、通信相手情報取得部 104、保存情報検索部 105、情報再生処理部 106、出力部 107を備えている。

[0025] 次に、図 2に示す通信システムにおける通信方法について説明する。最初に、テレビ電話中の通信相手に関する情報を取得するシーケンスを、図 3を用いて説明する

[0026] 図 3では、通信端末 201と通信端末 202とが通信し、通信端末 201が、通信端末 2 02から通信相手の人物情報を取得し、通信端末 201が、取得した人物情報をキー情報として、通信端末 201の情報保存部 103内に格納された保存情報を検索、抽出する例として説明する。

[0027] 通信端末 201は、通信端末 202に対して、テレビ電話での接続要求を行う（ステツプ S301)。

[0028] 通信端末 202は、テレビ電話での接続要求に応答して、許可応答を行う（ステップ S302)。

[0029] 上述の接続処理後に、テレビ電話通信のデータ伝送設定を行う。

[0030] 本発明の通信システムでは、テレビ電話通信には、マルチメディア情報を多重化する標準方式である ITU— T勧告 H. 223のデータ多重化を利用した第 3世代携帯電話規格の 3G— 324Mプロトコルを利用する。

[0031] 通信端末は、 3G— 324Mプロトコルにより、映像情報を伝送するビデオチャネル及び音情報を伝送するオーディオチャネルに加えて、任意のデータを伝送することが可能なデータ伝送チャネルを開設する。

[0032] 次に、前述のデータ伝送チャネルを用いて、通信端末間で行う情報伝送として、通信相手に関する情報である人物情報の伝送を行う例を説明する。

[0033] 3G— 324Mプロトコル開設により、テレビ電話通信が可能となる (ステップ S303)。

この時点で、互いの通信端末間で、お互いの映像の表示および音声での会話が可能である。

[0034] 通信端末 201と通信端末 202との通信中（ステップ S303)において、通信端末 20 1が通信端末 202から受信した画像情報を保存する時、通信端末 201は、通信端末 202に対して、通信相手の人物情報の取得要求を行う（ステップ S304)。

[0035] 通信端末 202は、通信端末 201からの人物情報の取得要求により、対象となる人物情報を抽出し、通信端末 201に送信する (ステップ S305)。

[0036] 次に、通信端末 201において、通信相手の画像情報と通信相手に関する人物情報 (属性情報)とを関連付けて保存する処理フローを、図 4を用いて説明する。図 4は、通信端末 201と通信端末 202とが通信し、通信端末 201が、画像情報を受信するとともに通信相手である通信端末 202に関する情報 (人物情報)を取得し、取得した通信端末 202に関する情報を属性情報として、受信した画像情報と属性情報とを関連づけて保存する場合を示すものである。

[0037] 通信端末 201は、テレビ電話での通話中に、通信相手の映像を表示する (ステップ S401)。

[0038] 通信端末 201が、通信端末 201のユーザからのキー入力操作などによる通信相手の画像情報を保存する指示を検出すると (ステップ S402)、通信相手である通信端末 202に対して、人物情報の取得要求を行い（図 3のステップ S304)、通信端末 202 から通信相手先の人物情報を受信する (ステップ S403)。

[0039] 通信端末 201の情報保存処理部 102は、受信した通信相手の画像情報と、ステツプ S403にて取得した通信相手を一意に特定する情報である電話番号を含む人物情報とを関連付けて、通信端末 201の情報保存部 103内に保存情報として保存する (ステップ S404)。画像情報と人物情報 (属性情報)とを関連づけて保存することにより、人物情報をキー情報として、通信端末 201の情報保存部 103内に格納された保存情報を検索して抽出するので、検索を迅速に行うことができる。

[0040] 次に、通信端末 201からの人物情報要求を受信する通信端末 202での処理フローを、図 5を参照して説明する。

[0041] 通信端末 202は、通信端末 201とのテレビ電話通信中において、通信相手の画像表示を行う（ステップ S 501)。

[0042] 通信端末 202は、通信端末 201から、データ伝送チャネルを介して、通信相手に関わる情報である人物情報の取得要求を受信する (ステップ S502)。ここで、要求される人物情報は、通信端末 202の使用ユーザを一意に特定する人物情報である。

[0043] 通信端末 202は、人物情報の取得要求を受信すると、その要求に従!、、通信端末 202の情報保存部 103に記憶する保存情報を参照し、通信端末 202を使用するュ一ザの人物情報、即ち、テレビ電話番号を抽出した後 (ステップ S503)、通信端末 2 02は、求められる人物情報を、データ伝送チャネルを介して、通信端末 201へ送信する（ステップ S 504)。

[0044] 次に、通信端末 201における保存情報の検索処理フローを、図 6を参照して説明する。

[0045] 通信端末 201は、通信端末 202とのテレビ電話通信の開設を行い、通信中となる（ステップ S601)。

[0046] これにより、 H. 223多重化の中のビデオチャネルを介して受信する通信相手の映像を表示することが可能になる。また、音声チャネル (オーディオチャネル)を用いて会話を行うことが可能になる。

[0047] 通信端末 201は、通信相手である通信端末 202に対して、データ伝送チャネルを介して、通信相手情報である人物情報の要求を行い (ステップ S602)、通信端末 20 2に関わる使用者 (ユーザ B)の人物情報を取得する (ステップ S603)。

[0048] 従って、通信端末 201は、通信相手の人物情報として、通信相手を一意に特定する識別情報を取得する。通信相手を一意に特定する識別情報は、電話番号である。

[0049] ステップ 603において、人物情報を取得すると、保存情報検索部 105は、通信相手情報取得部 104により得られた通信相手を一意に特定する情報である通信相手の人物情報である電話番号を検索用キー情報として、情報保存部 103に記憶される保存情報を自動的に検索する (ステップ S604)。

[0050] 情報保存部 103は、予め人物の画像情報を記憶しており、さらに画像情報と共に、画像情報に関係付けられる人物情報を属性情報として合わせて記憶して、る。従つて、保存情報検索部 105は、通信相手であるユーザ Bを一意に特定する電話番号を検索用キー情報として、情報保存部 103内の保存情報力もユーザ Bに関わる情報（キー情報に関連する情報)を抽出することができる。

[0051] そして、検索が終了すると、情報再生処理部 106は、出力部 107により、抽出された通信相手に関わる情報 (被検索情報)を自動的に表示する (ステップ S605)。

[0052] 図 7は、通信端末 201上に表示された画像情報と検索により抽出したデータを表示した例が示されている。

[0053] ステップ S605での表示は、図 7に示すように、画面の上方にはビデオチャネルを介した通信中の相手の映像 701が表示され、下方には、通信相手に関わる情報 (検索用情報）に基づき検索して抽出された情報である通信相手と関連する画像情報 (被検索情報） 702が表示される。

[0054] このように、本実施の形態 1によれば、通信端末 201は、通信相手である通信端末 202から取得する人物情報をキー情報として、通信端末 201内の保存情報を検索して表示するので、通信相手が関心を持っている情報を自動的に表示することで、コミュ-ケーシヨンをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーションを促進させることができる。即ち、本実施の形態 1によれば、通信相手に関わるキー情報を基に、情報保存部 103内の保存情報を自動的に検索するので、煩雑な操作なしに、通信相手に関係する情報を取得することができる。また、本実施の形態 1によれば、通信相手から受信した画像情報を含む受信情報と人物情報等の通信相手情報とを関連させて保存処理するので、通信相手情報を参照して受信情報を検索することができ、検索する情報量が多くても、意図する情報を容易に抽出することができる。

[0055] なお、上記説明では、取得する通信相手に関わる情報は、通信相手を一意に識別する人物情報としたが、嗜好情報等の他の情報を人物情報に含めても良い。

[0056] 更に、通信相手を一意に識別する情報に加え、他の人物情報 (個人情報)を利用する場合には、保存情報の検索において、検索される情報を、さらに絞り込むことが可能となる。

[0057] 人物情報として、通信相手を一意に識別する情報を用いるのでなぐ嗜好情報などを利用する場合には、通信相手に関わる情報に限定せずに検索するようにしても良い。例えば、好みのアーティスト情報を検索条件として、そのアーティストに関わる情報を検索するように構成しても良、。

[0058] 又、通信相手の人物情報として、生年月日、性別、結婚暦、職種、現住所、趣味、趣向等の情報を含み保存することにより、保存情報の検索の際に、その人物情報を利用することにより、検索する情報を、絞り込むことが可能となる。

[0059] 又、上記説明では、人物情報として電話番号を利用して、通信相手を一意に特定する例を示したが、通信相手を一意に特定する識別情報は、電話番号でなくても良ぐ予め取り決めた規則に基づき付与されたユーザ識別子を利用するように構成しても良い。また、アドレス情報などに登録されているユーザ名やメールアドレス情報などを利用するようにしても良い。

[0060] 又、上記説明では、通信相手に関わる情報として、人物情報を利用する例を説明したが、人物情報のみでなぐ位置情報、時間情報などの環境情報を利用するようにしても良い。例えば、通信端末 201は、図 3の通信相手情報要求ステップ S304に換えて、環境に関わる情報を要求するように構成しても良い。

[0061] 環境に関わる情報とは、通信相手である通信端末 202がおかれている環境状況に関わる情報であり、例えば、緯度 Z経度情報などの場所に関わる情報や、現在時刻などの時間に関わる情報である。

[0062] 通信端末 201が、例えば、場所に関わる情報として位置情報を要求すると、通信端末 202は、 GPS機能 (図示せず)の位置計測機能を用いて、位置情報の取得を行う。通信端末 202は、取得した位置情報を、データ伝送チャネルを介して、通信端末 2 01へ送信する。

[0063] この方法により、通信端末 201は、通信相手の画像情報の保存に際し、通信相手端末である通信端末 202の位置情報を属性情報として合わせて記録することが可能となる。通信端末 201は、後の検索の際に、位置情報を基に関連する情報を抽出することが可能となる。なお、位置計測機能については、 GPS機能でなくても良ぐ位置情報を取得できれば他の方法でも良い。例えば、セルラー網より、位置情報を取得しても良い。

[0064] 又、場所に関わる情報については、緯度 Z経度情報でなくても良ぐ場所に関する情報であれば良い。例えば、郵便番号、住所情報、エリア情報、ランドマーク情報、などでも良い。又、得られた緯度 Z経度情報を基に、別形式の場所に関わる情報に変換しても良い。例えば、緯度 Z経度情報を基に、エリア情報、ランドマーク情報に変換しても良い。別形式の場所に関わる情報への変換には、場所に関わる情報を要求する側において、行っても良いし、要求された側において、変換しても良い。また、どの形式の場所に関わる情報が良いかを、要求する側が指定して、場所に関わる情報の要求を行うように構成しても良い。この場合、指定された形式による場所に関わる情報を要求された通信端末は、適切な場所に関わる情報への変換を行い、応答を行う。なお、通信相手力取得する環境に関する情報は、場所に関する情報に限らず、他の環境に関する情報であっても良い。即ち、環境に関わる情報として、通信相手の時刻情報を取得し、この取得した時刻情報を受信した画像情報に関連づけして保存するようにしても良い。この場合、通信相手と自端末において、時差がある状況にお、ては、相手環境での時刻を反映して情報を保存することが可能となる。

[0065] なお、「受信した画像情報を含む受信情報と人物情報等の通信相手情報とを関連させる」技術的な意味は、ある人物情報 (属性情報)とその画像情報が 1対 1の関係を有する場合、及びある人物情報 (属性情報)とその画像情報が 1対 nの関係を有する場合の両方を含み、ある人物情報 (属性情報)を抽出した場合、抽出した人物情報（属性情報）に 1対 1に対応した画像情報、または抽出した人物情報 (属性情報）に 1対 nに対応した画像情報が抽出されることを意味している。

[0066] ここで、通信相手情報の取得処理 (ステップ S602及びステップ S603)につ!/、て、更に詳細に述べる。

[0067] 通信相手情報の取得処理において、取得する通信相手情報は、通信相手の人物情報や環境情報など、任意の情報を取得することが可能であるが、取得要求する側（通信端末 201)において、要求する情報を指定する方法を説明する。

[0068] その一つの方法としては、通信端末 201は、事前に決められた通信相手情報の取得要求を行う方法であり、この場合、一例として、通信相手を一意に識別する情報として通信相手端末の電話番号を要求する。

[0069] また、リストメ-ユーなどを用いて、要求情報を選択するようにしても良い。

[0070] 図 8に示した通信端末 800には、要求情報を選択するために、キー情報選択部 80 8が設けられている。

[0071] 例えば、人物情報を要求するのか、環境情報を要求するのか、どちらも要求するの力これらを、キー情報選択部 808から提示されるリストメ-ユー上で選択できるように構成しても良い。

[0072] また、別の方法としては、ディスプレイに表示されている通信相手の映像に対して、カーソルなどのポインティングデバイスより対象（映像の一部分)を指定することにより、その対象となる情報を要求する方法である。つまり、カーソルにて、人物映像が指定されると、人物情報を要求し、背景が指定されると、位置情報などの環境情報を要求するように構成する。

[0073] なお、通信端末 201が、通信相手情報の要求を行い、その応答として通信相手情報を受信する例を示したが、要求を行わなくとも、通信端末 202は、通信相手情報を通知するように構成しても良、。

[0074] 又、着信側の通信端末が、通信相手に関する情報を利用する場合には、通信相手情報として、通信の接続処理に得られる発番号通知を利用しても良い。

[0075] なお、発信側の通信端末は、発信した電話番号をキー情報として、発信側の通信端末の情報保存部 103内に格納された保存情報を検索するように構成しても良い。

[0076] さらに、通信端末は、情報保存部 103に記憶する通信相手を一意に識別する情報に対応付けられるユーザ情報により、通信相手に関わるさらなる個人情報を参照、利用するように構成しても良い。

[0077] 通信相手の人物情報 (個人情報）は、生年月日、性別、結婚暦、職種、現住所、趣味、趣向等の情報を含み、これらを検索用キー情報 (検索条件)として利用することができる。

[0078] 従って、趣味、嗜好等のサイコグラフィック情報、年齢、家族構成等のデモグラフィック情報を検索用キー情報として利用することができる。

[0079] 実施の形態 1では、人物情報として、電話番号を利用して、通信相手を一意に特定する例を示したが、通信相手を一意に特定する情報は、電話番号でなくても良ぐ予め取り決めた規則に基づき付与されたユーザ識別子を利用するようにしても良い。また、アドレス情報に登録されているユーザ名やメールアドレス情報などでも良い。

[0080] 又、実施の形態 1では、通信相手情報 (キー情報）として、人物情報を利用する例を説明したが、人物情報のみでなぐ位置情報、時間情報などの環境情報を利用するようにしても良い。

[0081] 次に、通信相手に関わる情報として、位置情報を通信相手端末から取得する例を説明する。

[0082] 図 3のステップ S304の通信相手情報要求において、通信端末 201は、通信端末 2 02の位置情報を要求する。

[0083] 位置情報を要求された通信端末 202は、 GPS機能などの位置計測機能により位置情報を得る。

[0084] ステップ S305の通信相手情報の送信にぉ、て、通信端末 202は、位置情報を通信端末 201へ送信する。

[0085] そして、通信端末 201は、通信相手である通信端末 202の位置情報を得る。

[0086] 通信端末 201は、取得した通信相手の位置情報を検索用キー情報として、通信端末 201の保存情報を検索し、この検索により、通信端末 201は、通信相手の位置情報に関わる保存情報を優先して抽出し、ユーザへ提示する。

[0087] なお、通信相手を一意に識別する情報により、保存情報の検索を行い、さらに環境情報である位置情報により、絞込みを行っても良い。

[0088] 又、位置情報の取得には、 GPS機能を利用できるが、位置計測機能にっ、ては、

GPS機能でなくても良ぐ位置情報を取得できれば良い。例えば、セルラー網により位置情報を取得しても良い。

[0089] なお、位置情報につ、ては、緯度 Z経度情報でなくても良ぐ位置に関する情報であれば良い。例えば、郵便番号、住所情報、エリア情報、ランドマーク情報等でも良い。

[0090] また、得られた緯度 Z経度情報を基に、位置情報に関わるデータベースを利用して、別形式の位置情報に変換しても良い。例えば、緯度 Z経度情報を基に、エリア情報、ランドマーク情報に変換しても良い。

[0091] 別形式の位置情報への変換には、位置情報を要求する側にお!、て行っても良、し、位置情報を要求された側において、変換しても良い。

[0092] また、どの形式の位置情報が良いかを、位置情報を要求する側が指定して、位置情報要求を行うようにしても良い。この場合、指定された形式による位置情報を要求された通信端末では、適切な位置情報への変換を行い、応答を行う。

[0093] なお、保存情報の検索において、検索用情報として、通信相手に関する位置情報だけでなぐ自端末に関する位置情報を用いても良いし、双方の位置情報を合わせて利用しても良い。双方の位置情報の利用とは、 2地点間を検索用情報として利用する、つまり、 2地点間に関わる情報を優先して検索することなどであり、例えば、 2地点間にあるお店に関する情報を優先して検索することである。

[0094] 更に、位置情報と合わせて、時間情報などの他の環境情報を取得しても良ぐ合わせて検索用キー情報とすることにより、より相手の状況に応じた情報を取得することが可能となる。

[0095] なお、上記説明では、抽出される情報 (被検索情報）が 1つの場合を示したが、抽出される情報が、複数の場合もある。関係する情報が複数ある場合は、予め設定する方法により、ユーザに提示する。

[0096] 検索された複数の対象情報の中から、一つの情報のみを表示する場合には、一つの方法として、撮影時間の近ヽ順番に優先して選択する。

[0097] また、検索された複数の対象情報の表示には、ある一定の時間間隔による順次切り替え表示、または複数情報の同時表示を行っても良い。例えば、図 9、 10のように表示する。

[0098] 図 9、 10【こお!ヽて、符号 901、 ΙΟΟΙίま、通信中のネ目手画像であり、符号 902、 100

2は、検索の結果、抽出された複数の画像である。

[0099] なお、抽出された保存情報が、高画質の静止画像や、動画像の場合には、サムネィルなどの表示負荷や表示領域の少ない方法により、複数情報を表示して、ユーザが選択可能なようにしても良、。

[0100] また、動画像であれば、関連付けられる属性情報を基に、最も関連するフレームやシーンを表示するようにしても良、。

[0101] また、複数の抽出された情報を同時表示する場合や、ユーザが選択可能とする場合において、時間軸により並べることも可能である。

[0102] 又、実施の形態 1では、電話番号を通信端末を使用するユーザを一意に特定する情報としたが、電話番号でなくとも、氏名やユーザ識別子を別途付与するように構成しても良い。この場合、複数の電話番号を持つユーザに対しても対応することが可能となる。

[0103] 又、実施の形態 1では、基地局および通信網を介したシステム構成としているが、互いの通信端末が、ローカル通信インタフェースを用いて、直接通信をする形態であつても良い。

[0104] 又、実施の形態 1では、通信相手として、 1ユーザである例を示した力複数の通信相手を対象とするマルチコールなどであっても良い。そのときには、複数ユーザに共通する情報となる、グループ情報や、趣味情報、スケジュール情報に基づく共通行動予定等を検索用キー情報として利用することが可能となる。

[0105] (実施の形態 2)

実施の形態 1では、図 6のステップ S604において、通信相手を特定する情報を得るように構成したが、実施の形態 2では、通信端末 201が通信端末 202から、環境情報を保存情報の検索用キー情報 (検索条件)として得るようにした例で説明する。

[0106] 具体的には、人物情報である通信相手を一意に特定する情報とする共に、環境情報である時間情報を検索のためのキー情報として用いる。

[0107] 時間情報を検索のためのキー情報 (検索条件）にする場合、例えば、通信日時が 2 月 16日であれば、過去の 2月 16日に関係する情報を優先して検索する。

[0108] さて、通信端末 201の情報保存部 103には、撮影された日時情報を属性情報とする画像情報を記憶している。撮影された日時情報とは、例えば、テレビ電話中に録画を行った日時や、カメラにより撮影した日時である。

[0109] また、通信端末 201の情報保存部 103は、アドレス情報とスケジュール情報とが記憶されている。

[0110] 実施の形態 1で説明したように、通信端末 201は、通信端末 202に対して、テレビ電話での接続要求を行い、テレビ電話通信中となり、通信相手の映像を表示する。

[0111] 通信端末 201の通信相手情報取得部 104は、通信相手であるユーザ Bを一意に特定する情報を取得する。

[0112] 実施の形態 2では、アドレス情報より、ユーザ Bを選択してテレビ電話接続を行うようになっている。従って、通信相手を一意に特性する情報をアドレス情報より得る。つまり、アドレス情報より得られる電話番号を用いて通信相手であるユーザ Bを一意に特定している。

[0113] さらに、通信相手情報取得部 104は、キー情報として、現在の時間情報（日時情報 )を時計 Zカレンダー機能（図示せず)から取得する。 [0114] 通信端末 201の保存情報検索部 105は、通信相手を一意に特定する情報である電話番号を基に、通信相手であるユーザ Bに関係する情報を抽出し、更に、保存情報検索部 105は、抽出したユーザ Bに関係する情報の中から現在の日時に関わる情報を優先して選択する。具体的には、本日の日付 (2月 16日）に対応する情報があれば、その日付に対応する情報を優先して選択する。

[0115] そして、通信端末 201の情報再生処理部 106は、出力部 107により、抽出した通信相手であるユーザ Bに関わる情報を表示する。

[0116] 検索される保存情報は、本日の日付に関わる重要な情報、例えば、通信相手の誕生日である。また、スケジュール情報に、過去の情報として、本日の日付（2月 16日）に、通信相手と共に行動したなどの情報が記憶されていたならば、その旨の情報を提示することも可能である。また、スケジュール情報に、行動した場所に関する情報が記憶されていたならば、通信相手の位置情報に基づく検索を行うことにより、その旨の情報を提示することも可能である。なお、保存するスケジュール情報に、本日の予定として、ユーザ Bとの予定があれば、その旨、表示するようにしても良い。

[0117] 又、通信相手力時刻情報を取得し、取得した時刻情報を検索用キー情報としても良ぐ時差のある通信相手に対しては有効となる。例えば、通信相手の通信端末に関わる現在時刻が、 21 : 00であり、夜の時間帯を示すのであれば、夜に関するデータを優先して、即ち、通信相手の時間に関する情報を優先して検索する。

[0118] このように、本実施の形態 2によれば、通信端末 201は、通信相手である通信端末 202から取得する環境情報をキー情報として、通信端末 201内の保存情報を検索して表示するので、通信相手が関心を持っている情報を自動的に表示することで、コミュ-ケーシヨンをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーションを促進させることができる。

[0119] なお、実施の形態 2では、時間情報として日付情報を用いた力これ以外の時間に関する情報であっても良ぐ時刻情報、日時情報、曜日情報、月情報、予め取り決めた時間帯情報等の時間に関する情報であれば良い。

[0120] 又、検索される情報 (被検索情報）は、過去に送受信したメール情報であっても良い。この場合、例えば、通信中の人物から送られてきたメール情報等が検索される。

[0121] (実施の形態 3)

実施の形態 3は、通信相手力受信する情報を認識することにより、通信相手に関わる情報を得て、その認識情報を検索用キー情報として利用するようにした通信端末である。

[0122] 実施の形態 3では、音認識により得た認識情報に基づき、保存情報を検索し、提示する通信方法について、図 11を参照して説明する。

[0123] 通信端末 201の情報保存部 103には、画像情報とその画像情報に関係する人物の特徴情報とを合わせて記憶している。又、人物の特徴情報には、音声に関する特徴情報を含んでいるものとし、通信端末 201のキー情報の取得要請に対して、通信端末 202が、キー情報を通信端末 201に送るように構成されて、る。

[0124] 通信端末 201は、通信端末 202に対して、テレビ電話での接続要求を行い、通信端末 202からの受諾応答を受信すると、 H. 223多重化を利用した 3G— 324Mプロトコル〖こより、テレビ電話通信を行う（ステップ S 1101)。

[0125] ビデオチャネルを用いて、映像の送受信を行い、出力部 107により、相手の映像を表示する (ステップ S 1102)。また、オーディオチャネルを介して、会話を行う。

[0126] 通信端末 201の通信相手情報取得部 104は、オーディオチャネルを用いた会話において、相手の音声情報を抽出し (ステップ S1103)、更に、通信相手情報取得部 1

04は、抽出された相手の音声情報の解析を行い、情報保存部 103に記憶する音声の特徴を保存している音声データベースを参照することにより、通信相手を一意に特定する（ステップ S 1104)。

[0127] 通信端末 201の保存情報検索部 105は、特定された通信相手情報に基づき、情報保存部 103に記憶する保存情報を検索し、通信相手であるユーザ Bに関わる情報を抽出する（ステップ S1105)。

[0128] 通信端末 201の情報再生処理部 106は、抽出されたユーザ Bに関係付けられる情報である画像情報を出力部 107を介して表示する (ステップ S 1106)。

[0129] 勿論、これらのステップは、連続して自動的に実行される。

[0130] このように、本実施の形態 3によれば、通信端末 201は、通信相手である通信端末 202から取得する音声情報をキー情報として、通信端末 201内の保存情報を検索して表示するので、通信相手が関心を持っている情報を自動的に表示することで、コミュ-ケーシヨンをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーションを促進させることができる。

[0131] なお、音声認識を行うタイミングを制御するユーザインターフェースを設けても良い

[0132] 例えば、音声認識を行うタイミングを制御するために、ソフトウェアキーや Zハードウエアキーを設けて、予め取り決めたキー押下をきつかけとして、音声認識を行う。

[0133] また、音声認識を行うタイミングは、通信中に、予め取り決めた任意のタイミングで随時行うようにしても良い。

[0134] 音声認識を、随時行う場合、通信相手の端末にぉ、て、対象ユーザ (端末の使用ユーザ）が変わる場合においても、ユーザは操作なしに、通信相手となるユーザを速やかに識別することが可能となる。

[0135] なお、音声認識の利用では、通信相手を一意に識別するのみでなぐそれとは別に、検索するためのキーワードを得るために利用しても良い。このようにすれば、通信相手が話す言葉に基づいて、保存情報を検索することが可能となり、容易に会話に関係する情報を抽出することができる。

[0136] 通信端末は、音声認識を助ける用語データベースを記憶しておくことにより、音声認識を向上させることが可能となる。

[0137] なお、音声認識は、通信相手のみでなぐ自端末のユーザの音声認識を行っても良い。

[0138] 又、認識する音情報としては、音声情報に限らず、環境音であっても良い。例えば、環境音を認識することにより、通信相手が、どんな場所にいる力、どんな状況であるか等の情報を得ることができる。例えば、室内、屋外、車での移動中などが区別され、それに応じた情報を検索することができる。また、特定の場所であること、例えば、コンサート会場であることや、電車に関する音が聞こえる駅であることを認識することにより、より通信相手の環境に応じた情報を抽出することが可能となる。例えば、滝の音の聞こえる場所にいるのであれば、滝に関わる保存情報を優先して、抽出することが可能となる。又、駅にいるのであれば、時刻表情報を優先して、抽出することも可能になる。抽出された時刻表情報は、通信相手端末に送信し、表示することも可能である。このように構成することで、通信相手に必要な情報を、容易に抽出して、提供することが可能となる。

[0139] 又、上記説明では、音声情報にて通信相手を一意に識別する例を示したが、通信相手の感情も含めて識別するようにしても良い。このようにすることで、通信相手の感情に応じた保存情報を抽出することが可能となる。

[0140] 又、実施の形態 3では、音情報を認識し、通信相手に関わる情報を取得する例を説明したが、認識する情報としては、通信相手力受信する映像情報であっても良い。通信相手ユーザが映し出される映像情報を、画像認識手段を用いて解析することにより、人物の特徴情報を抽出し、ユーザ情報に含まれる人物の特徴情報を参照することにより、通信相手を一意に識別することが可能となる。

[0141] 又、上記説明では、通信相手の人物の情報を検索用キー情報として利用する例を示したが、これに限らず、通信相手端末が撮影している風景情報等の情報であっても良い。例えば、建築物であれば、建築物の特徴情報を検索用情報として関連情報を検索することができる。

[0142] 又、ポインティングデバイスを用いて、指し示す部分の画像情報を優先して、画像認識するようにしても良い。このように構成することで、認識する対象を指定して画像認識することが可能となる。例えば、複数の人物や、人物と建築物の両方が映像として表示されているならば、いずれかをポインタデバイスにより指し示すことにより、検索用キー情報として指定することが可能となる。

[0143] なお、映像の対象に付随する属性情報を、合わせて受信するならば、その属性情報を検索用情報として利用することが可能である。属性情報とは、例えば、説明情報として画像情報に付随している人物名や建造物名である。更に、又、ポインティングデバイスで指し示す対象に関係付けられる属性情報を検索用情報として利用することも可能になる。

[0144] 又、検索の絞込みを行うために補助指定を促すようにしても良い。例えば、位置に関する情報を優先して絞り込むとか、又は、時間に関する情報を優先して絞り込むとか等を指定する。

[0145] (実施の形態 4)

実施の形態 4を図 12、図 13を参照して説明する。

[0146] 実施の形態 4は、通信端末 201にお、て、通信相手情報を用いて抽出した情報を

、通信相手である通信端末 202とで共有し、表示する通信方法であり、この通信方法について、図 12を用いて説明する。

[0147] 実施の形態 4においても、テレビ電話通信に関しては、実施の形態 1と同様に、 3G

— 324Mプロトコルを用いて、通信を行う。

[0148] 通信端末 201は、通信端末 202に対して、テレビ電話接続要求を行う（ステップ S1

201)。

[0149] 通信端末 202は、接続許可応答を行う（ステップ S 1202)。

[0150] テレビ電話を行うためのセッション開設を行、、テレビ電話通信中となる (ステップ S 1203)。

[0151] 通信端末 201は、実施の形態 1において説明したように、通信相手であるユーザ B を一意に特定する情報を取得し、そのユーザ Bを一意に特定する情報を基に、ユーザ Bに関わる情報を通信端末 201の情報保存部 103より抽出する。そして、通信端末 201は、通信端末 202に対して、データ伝送チャネルを介して、抽出した画像の再生能力情報の確認要求を送信する (ステップ S 1204)。

[0152] ここで、再生能力情報として、静止画像の再生能力に含まれる解像度情報を用いる場合を例として、以下のステップを説明する。

[0153] 通信端末 202は、確認要求のあった再生能力に係わる情報を抽出し、通信端末 2 01に対して、再生能力情報を送信する (ステップ S1205)。

[0154] 通信端末 201は、取得した通信端末 202に関わる再生能力情報を参照し、被検索情報である静止画像を、通信端末 202が再生可能な形式に、必要に応じて変換処理し、通信端末 202に対して、データ伝送チャネルを介して送信する（ステップ S120 6)。

[0155] この時、通信端末 201及び通信端末 202においては、被検索情報である静止画像が共に表示される。

[0156] 図 13は、実施の形態 4の通信端末 1300の構成を示すブロック図である。なお、図 13において、図 1と同一構成である部分には同一の符号を付して、その説明は省略する。通信端末 1300は、ステップ S1206で実行される画像変換処理を行うための画像変換部 1308を具備している。

[0157] ここで、通信端末 202にて再生可能な形式に変換について説明する。

[0158] 具体的には、通信端末 201は、 CIF(Common Interface Format)形式で記憶している画像データが抽出された場合に、通信相手の通信端末 202の画像再生能力について確認を行った結果、通信端末 202は、 QCIF(Quarter CIF)形式までの再生能力を有していたとする。この場合、通信端末 201が記憶している CIF形式では、通信端末 202が再生できないので、通信端末 201は、通信端末 202が再生可能な QCIF形式のデータに変換して、通信相手端末 202に送信する (ステップ S1206)。

[0159] なお、この場合、通信端末 201においても、通信相手に合わせて、 QCIF形式の画像として表示を行うが、元の保存形式である CIF形式の画像データとして表示しても良い。

[0160] このように、本実施の形態 4によれば、通信端末 201は、通信相手である通信端末 202から取得する通信相手情報をキー情報として、通信端末 201内の保存情報を検索して表示するとともに、通信端末 201と通信端末 202にて情報を共有するので、コミュ-ケーシヨンをより活性化させるように支援することができるとともに、操作を簡単にして、情報機器の操作に不慣れな年配者等でも、簡単にいろいろな映像情報を表示しながら通話ができ、温かみのあるコミュニケーションを促進させることができる。

[0161] なお、上記説明では、静止画の再生能力情報として、解像度を用いた例を示した力解像度でなくても良ぐ表示色など再生能力に関する情報であれば良い。

[0162] なお、上記説明では、再生能力情報として、静止画像の再生能力情報についての例を示したが、動画像に関する情報でも良い。

[0163] 又、再生能力情報は、画像に関する再生能力情報でなくても良ぐ音に関する再生能力情報や、 XML(Extensible Markup Language)などの構造化データに関する再生能力情報であっても良い。 [0164] 又、上記説明では、通信相手の再生能力情報に応じて保存情報を変換する例を説明したが、端末間の通信状態に応じて変換しても良い。例えば、データ伝送用の伝送容量が大きく取れない場合には、データサイズが小さくなるように変換して送信する。例えば、ビデオデータを JPEGの静止画像としてデータ圧縮して送信しても良い。

[0165] 又、保存情報の検索処理にお!、て、通信相手の再生能力情報を検索条件として用いて、検索を行うようにしても良い。

[0166] (実施の形態 5)

実施の形態 5では、図 1に示す通信端末において、通信相手から受信する画像情報又は音声情報を認識処理することにより、通信相手に関わる情報を得て、その認識情報を受信した画像情報又は音声情報と関連付けて保存する通信方法について

、図 14、 15を用いて説明する。

[0167] 即ち、図 14においては、通信端末 201と通信端末 202とが通信し、通信端末 201 力通信端末 202から画像情報又は音声情報を含む情報を保存する際、通信相手力受信する画像情報又は音声情報を認識処理することにより、通信相手に関わる特徴を取得し、取得した通信相手に関わる情報を受信した画像情報又は音声情報と関連付けて保存する例として説明する。

[0168] 先ず、ステップ S1401において、通信端末 201は、実施の形態 1と同様に、テレビ電話での通話中に、通信相手の画像を表示する。

[0169] 次に、通信端末 201は、ステップ S 1402において、通信相手から受信する画像情報又は音声情報を記録するための記録指示の検出を行う。

[0170] 記録指示の検出とは、例えば、ソフトウェアキーやノヽードゥエアキ一の押下などによる、ユーザからの記録を指示するキー操作の検出である。

[0171] ステップ 1402において、受信する画像情報又は音声情報の保存指示を検出すると、通信端末 201は、ステップ S1403において、通信相手から受信する画像情報又は音声情報の認識処理を行ヽ、通信相手に関わる情報を得る。

[0172] 次に、通信端末 201は、ステップ S 1404において、通信相手から受信する画像情報又は音声情報と、ステップ S1403での認識処理により取得した特徴情報に基づく通信相手に関わる通信相手情報 (属性情報)とを関連付けて、情報保存部 103内に保存する。

[0173] 通信端末 201の情報保存部 103内には、画像情報とその画像情報に関係する人物の特徴情報とを合わせて記憶している。又、人物の特徴情報には、音声に関する特徴情報を含んでヽるものとする。

[0174] 次に、ステップ S1403における認識処理に関して、受信する映像を認識して、通信相手の人物に関わる情報を得る例を説明する。

[0175] 通信端末 201は、情報保存部 103に複数のユーザを識別する識別情報と、その識別情報にそれぞれ対応する人物の特徴情報を関係付けて記憶している。例えば、ュ一ザ情報であるアドレス帳の電話番号と対応付けて、各ユーザの顔画像の特徴情報や声の特徴を記憶して、る。

[0176] 通信端末 201による映像の認識処理は、ビデオチャネルを介して受信する映像情報を解析して得る人物の特徴情報と、情報保存部 103が記憶するユーザ情報に含まれる各ユーザの特徴情報とを比較することにより、通信相手の人物を一意に特定する認識処理を行う。

[0177] このように、本実施の形態 5によれば、通信相手から受信する画像情報又は音声情報を認識処理することにより、通信相手に関わる特徴を取得し、取得した通信相手に関わる情報を受信した画像情報又は音声情報と関連付けて保存するので、通信相手に関わる情報を参照して受信情報を検索することができ、検索する情報量が多くても、意図する情報を容易に抽出することができる。

[0178] なお、本実施の形態 5では、画像認識として人物に関わる情報を画像認識により抽出する例を示した力これに限らず、風景に関わる情報を抽出するようにしても良い。

[0179] 例えば、通信相手の通信端末から受信する画像情報を画像認識するに際し、風景として特徴となる情報、例えば建造物に関する情報を抽出して、受信画像情報と合わせて、その特徴情報を保存する。この場合、保存情報の検索の際に、保存する特徴情報を利用して、保存する情報を検索することが可能となる。例えば、通信相手からの映像情報である風景情報を画像認識により得る特徴情報と、情報保存部に記憶する風景に関する特徴情報とを比較することにより、より関係が深いと判断する情報を提示することが可能となる。また、建造物の特徴情報を検索条件として、関係が深い特徴情報を有する保存情報を検索することができる。

[0180] なお、通信端末 100は、ポインティングデバイスにて、表示する相手映像画面の位置を指定することにより、指し示す部分の画像情報を優先して、画像認識するよう〖こしても良い。

[0181] このように構成することにより、認識する対象を指定して画像認識することが可能となる。例えば、複数の人物や、人物と建造物の両方が映像として表示されているならば、いずれかをポインティングデバイスにより指し示すことにより、優先する認識対象を指定することが可能となり、受信した画像情報の保存に際し、合わせて記憶する特徴情報を指定することが可能となる。

[0182] なお、ポインティングデバイスで指定する相手映像の位置に応じた映像対象に関係付けられる属性情報を、通信相手より取得して、合わせて保存するようにしても良い。このように構成することで、ポインティングデバイスで指し示す対象に関係付けられる属性情報を検索条件として、保存情報の検索に利用することができる。

[0183] 次に、通信相手の音声を認識することで、通信相手先情報を取得し、取得したキー情報に基づき、保存した情報を検索する例を、図 15を参照して、説明する。

[0184] この場合も、通信端末 201は、情報保存部 103に複数のユーザを識別する識別情報と、その識別情報にそれぞれ対応する人物像に関する特徴情報とを関係付けて記憶している。例えば、ユーザ情報であるアドレス帳の電話番号と対応付けて、各ユーザの声の特徴情報を記憶して 1、る。

[0185] 通信端末 201による音声の認識処理は、オーディオチャネルを介して受信する音情報のうち、音声情報を分離し、その分離した音声情報を解析して得られる人物の声の特徴情報と、情報保存部 103内に記憶するユーザ情報に含まれる各ユーザの声の特徴情報とを比較することにより、通信相手の人物を一意に特定する認識処理を行う。

[0186] 具体的な流れは、以下に示す通りである。

[0187] 先ず、通信端末 201は、通信端末 202に対して、テレビ電話での接続要求を行い、通信端末 202からの受諾応答を受信すると、 H. 223多重化を利用した 3G— 324M プロトコルにより、テレビ電話通信を行う（ステップ 1501)。

[0188] ビデオチャネルを用いて、映像の送受信を行い、出力部 107により、相手の映像を表示する (ステップ S 1502)。また、オーディオチャネルを介して、会話を行う。

[0189] 通信端末 201の通信相手情報取得部 104は、オーディオチャネルを用いた会話において、相手の音声情報を抽出し (ステップ S1503)、更に、通信相手情報取得部 1

04は、抽出された相手の音声情報の解析を行い、情報保存部 103に記憶する音声の特徴を保存している音声データベースを参照することにより、通信相手を一意に特定する（ステップ S 1504)。

[0190] 通信端末 201の保存情報検索部 105は、特定された通信相手情報に基づき、情報保存部 103に記憶する保存情報を検索し、通信相手であるユーザ Bに関わる情報を抽出する（ステップ S 1505)。

[0191] 通信端末 201の抽出情報再生部 106は、抽出されたユーザ Bに関係付けられる情報である画像情報を出力部 107を介して表示する (ステップ S 1506)。

[0192] 勿論、これらのステップは、連続して自動的に実行される。

[0193] なお、音声認識を行うタイミングを制御するユーザインターフェースを設けても良い。例えば、音声認識を行うタイミングを制御するために、ソフトウェアキーや Zハードウエアキーを設けて、予め取り決めたキー押下をきつかけとして、音声認識を行う。また、音声認識を行うタイミングは、通信中に、予め取り決めた任意のタイミングで随時行うようにしても良い。

[0194] 音声認識を、随時行う場合、通信相手の端末にぉ、て、対象ユーザ (端末の使用ユーザ）が変わる場合においても、ユーザは操作なしに、速やかに通信相手となるュ一ザを再識別することが可能となる。

[0195] なお、通信端末は、音声認識を助ける用語データベースを記憶しておくことにより、音声認識を向上させることが可能となる。

[0196] 又、音声認識は、通信相手から受信する音声のみでなぐ自端末のユーザの音声認識を行っても良い。

[0197] 又、認識する音情報としては、音声情報に限らず、環境音であっても良い。例えば、環境音を認識することにより、通信相手がどんな場所にいる力、どんな状況であるか等の情報を得る。例えば、室内、屋外、車での移動中等であることが区別され、その情報を特徴情報として合わせて保存する。また、特定の場所であること、例えば、コンサート会場であることや、電車に関する音が聞こえる駅であることを認識することができる。このように構成した場合、後に行われる検索の際に、同様な状況の情報を容易に抽出することが可能となる。

[0198] 本明細書は、 2004年 9月 9日出願の特願 2004— 262217及び 2004年 9月 16日出願の特願 2004— 270409【こ基づく。この内容 ίますべてここ【こ含めておく。

産業上の利用可能性

[0199] 本発明は、特に、携帯電話機、携帯情報端末 (PDA: Personal Digital Assistant)、ノート型パーソナルコンピュータ、無線 LANや有線 LANにより構築されたネットヮーク上のパーソナルコンピュータ等の通信端末とその通信方法に用いるのに好適である。

Claims

請求の範囲

[1] 通信相手からキー情報を取得するキー情報取得手段と、

前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索手段と、

前記検索手段による検索の結果得られた前記情報を表示する情報表示手段と、を具備する通信端末。

[2] 前記情報表示手段は、前記情報をサムネイル形式にて表示する請求項 1記載の通信端末。

[3] 前記キー情報取得手段は、前記通信相手との通信中に受信する情報から、音情報又は画像情報を抽出し、抽出した音情報又は画像情報から前記キー情報を取得する請求項 1記載の通信端末。

[4] ネットワークを介して受信したメール情報又はコンテンツである前記保存情報を前記メモリに格納する情報保存処理手段を具備する請求項 1記載の通信端末。

[5] 前記キー情報を選択して前記通信相手に要求するキー情報選択手段を具備し、前記キー情報取得手段は、前記キー情報選択手段にて要求した前記キー情報を取得する請求項 1記載の通信端末。

[6] 画像情報を含む受信情報に関連する通信相手情報を前記通信相手から取得する通信相手情報取得手段と、

前記通信相手から受信した前記画像情報を含む受信情報と前記通信相手情報取得手段により取得した前記通信相手情報とを関連させて前記保存情報として前記メモリに保存処理する情報保存処理手段と、

を具備する請求項 1記載の通信端末。

[7] 前記通信相手情報取得手段は、前記画像情報を含む受信情報の保存指示を検出した時、前記通信相手情報を取得する請求項 6記載の通信端末。

[8] 前記通信相手情報取得手段は、ポインティングデバイスで指示された領域の画像を認識する請求項 6記載の通信端末。

[9] 通信相手からキー情報を取得するキー情報取得手段と、

前記検索手段による検索の結果得られた前記情報を前記通信相手に送信する情報提示手段と、

を具備する通信端末。

[10] 前記通信相手の情報再生能力、又は、前記通信相手との通信状況に応じて、前記検索手段による検索の結果得られた前記情報を所定の形式に変換する変換手段を具備し、

前記情報提示手段は、前記変換手段にて変換された前記情報を前記通信相手に送信する請求項 9記載の通信端末。

[11] 通信相手力キー情報を取得するキー情報取得ステップと、

前記通信相手から取得した前記キー情報に基づき、メモリに格納された保存情報を検索し、前記キー情報に関連する情報を取得する検索ステップと、

前記検索ステップによる検索の結果得られた前記情報を表示する情報表示ステツプと、

を具備する通信方法。

[12] 前記情報表示ステップは、前記情報をサムネイル形式にて表示する請求項 11記載の通信方法。

[13] 前記キー情報取得ステップは、前記通信相手との通信中に受信する情報から、音情報又は画像情報を抽出し、抽出した音情報又は画像情報から前記キー情報を取得する請求項 11記載の通信方法。

[14] ネットワークを介して受信したメール情報又はコンテンツである前記保存情報を前記メモリに格納する情報保存処理ステップを具備する請求項 11記載の通信方法。

[15] キー情報を選択して前記通信相手に要求するキー情報選択ステップを具備し、前記キー情報取得ステップは、前記キー情報選択ステップにて要求した前記キー情報を取得する請求項 11記載の通信方法。

[16] 画像情報を含む受信情報に関連する通信相手情報を通信相手から取得する通信相手情報取得ステップと、

通信相手から受信した前記画像情報を含む受信情報と前記通信相手情報取得ステツプにより取得した前記通信相手情報とを関連させて前記保存情報として前記メモリに保存処理する情報保存処理ステップと、

を具備する請求項 11記載の通信方法。

[17] 前記通信相手情報取得ステップは、前記画像情報を含む受信情報の保存指示を検出した時、前記通信相手情報を取得する請求項 11記載の通信方法。

[18] 前記通信相手情報取得ステップは、ポインティングデバイスで指示された領域の画像を認識する請求項 11記載の通信方法。

[19] 通信相手力キー情報を取得するキー情報取得ステップと、

前記検索ステップによる検索の結果得られた前記情報を前記通信相手に送信する情報提示ステップと、

を具備する通信方法。

[20] 前記通信相手の情報再生能力、又は、前記通信相手との通信状況に応じて、前記検索ステップによる検索の結果得られた前記情報を所定の形式に変換する変換ステップを具備し、

前記情報提示ステップは、前記変換ステップにて変換された前記情報を前記通信相手に送信する請求項 19記載の通信方法。