JP2010218322A - 携帯通信端末及びそれに用いる通信先情報取得方法並びにそのプログラム - Google Patents

Abstract

【課題】 撮影画像中から任意のＵＲＬやメールアドレス等の通信先情報を容易に選択可能とし、その操作を容易に行うことが可能な携帯通信端末を提供する。
【解決手段】 携帯通信端末（１）は、画像を取得する画像取得手段（カメラ部１３）と、画像取得手段にて取得した画像を表示しかつ表示された画像の任意の位置への操作を検出するタッチパネル表示手段（表示部１４）と、タッチパネル表示手段により検出された任意の領域を対象領域として文字及び画像の認識を行う認識手段（制御部１１及び記憶部１５）と、認識手段により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御手段（制御部１１、無線通信部１２、記憶部１５）とを有する。
【選択図】 図１

Description

本発明は携帯通信端末及びそれに用いる通信先情報取得方法並びにそのプログラムに関し、特に商品のポスターや看板等に記載された通信先情報の取得方法に関する。

上記の取得方法としては、例えば、図８に示すように、商品のポスターや看板にＱＲ（Ｑｕｉｃｋ Ｒｅｓｐｏｎｓｅ）コードを記載することで、当該商品に興味を持つ人に対して情報提供が行われている（例えば、特許文献１，２参照）。

また、他の取得方法としては、ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）が表示された広告を携帯端末の撮像手段で撮影し、その撮影された画像からＵＲＬを表す文字列を抽出し、この抽出された文字列を認識し、その認識結果を基にＵＲＬで表されるホームページアドレスを決定する方法も提案されている（例えば、特許文献３参照）。

特開２００６−１１３６２０号公報 特開２００６−２９５８９８号公報 特開２００２−３６６４６３号公報

上述した本発明に関連する通信先情報の取得方法では、上記の特許文献１，２に記載のように、商品のポスターや看板にＱＲコードを記載する方法の場合、複数の情報を伝えるために、その情報の数だけのＱＲコードが必要になり、ユーザはその情報毎にＱＲコードの撮影が必要となるという問題がある。また、この通信先情報の取得方法では、たくさんのＱＲコードによって、ポスターや看板のデザインが煩雑になるという問題もある。

さらに、上記の特許文献３に記載の取得方法では、撮影された画像からＵＲＬを表す文字列を抽出しなければならないため、複数の情報を伝えるために、その情報の数だけ文字列を表示すると、それら文字列各々を個別に撮影したり、一緒に撮影されてしまった画像の中からそれらの文字列をきり分ける必要があるという問題がある。尚、特許文献３に記載の取得方法では、ＵＲＬやメールアドレス以外の情報（例えば、ポスターや看板の画像、文字情報）から通信先情報を取得することはできない。

そこで、本発明の目的は上記の問題点を解消し、撮影画像中から任意のＵＲＬやメールアドレス等の通信先情報を容易に選択することができ、その操作を容易に行うことができる携帯通信端末及びそれに用いる通信先情報取得方法並びにそのプログラムを提供することにある。

本発明による携帯通信端末は、画像を取得する画像取得手段と、
前記画像取得手段にて取得した画像を表示しかつ表示された画像の任意の位置への操作を検出するタッチパネル表示手段と、
前記タッチパネル表示手段により検出された任意の領域を対象領域として文字及び画像の認識を行う認識手段と、
前記認識手段により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御手段とを備えている。

本発明による通信先情報取得方法は、
携帯通信端末が、
画像を取得する画像取得処理と、
前記画像取得処理にて取得した画像をタッチパネル表示手段に表示しかつ表示された画像の任意の位置への操作を検出する検出処理と、
前記検出処理により検出された任意の領域を対象領域として文字及び画像の認識を行う認識処理と、
前記認識処理により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御処理とを実行している。

本発明によるプログラムは、携帯通信端末内の中央処理装置に実行させるプログラムであって、
画像を取得する画像取得処理と、
前記画像取得処理にて取得した画像をタッチパネル表示手段に表示しかつ表示された画像の任意の位置への操作を検出する検出処理と、
前記検出処理により検出された任意の領域を対象領域として文字及び画像の認識を行う認識処理と、
前記認識処理により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御処理とを含むことを特徴とする。

本発明は、上記のような構成及び動作とすることで、撮影画像中から任意のＵＲＬやメールアドレス等の通信先情報を容易に選択することができ、その操作を容易に行うことができるという効果が得られる。

本発明による携帯通信端末の構成例を示すブロック図である。 本発明の第１の実施の形態による携帯通信端末の構成例を示すブロック図である。 本発明の第１の実施の形態による通信先情報の取得例を示す図である。 本発明の第１の実施の形態による通信先情報の取得動作を示すフローチャートである。 本発明の第１の実施の形態による通信先情報の取得動作を示すフローチャートである。 本発明の第２の実施の形態による通信先情報の取得動作を示すフローチャートである。 本発明の第２の実施の形態による通信先情報の取得動作を示すフローチャートである。 本発明に関連する取得方法による通信先情報の取得例を示す図である。

次に、本発明の実施の形態について図面を参照して説明する。まず、本発明による携帯通信端末の概要について説明する。図１は本発明による携帯通信端末の構成例を示すブロック図である。

図１において、本発明による携帯通信端末１は、アンテナ１０と、制御部１１と、無線通信部１２と、カメラ部１３と、タッチパネルを備えた表示部１４と、記憶部１５とから構成されている。

カメラ部１３は、画像を取得する画像取得部である。表示部１４は、カメラ部１３によって取得した画像を表示するとともに、表示された画像の任意の位置への操作（タッチパネル上でのタッチ／リリース）を検出する。

制御部１１は、表示部により検出された任意の領域（タッチからリリースされるまでの領域）を対象領域として文字や画像を認識する認識部（図示せず）と、認識部により認識された情報に所定の通信先情報が含まれているか否かを判定する判定部（図示せず）とを有する。

また、制御部１１は、判定部にて通信先情報が含まれていると判定された場合に当該通信先への接続処理を行い、判定部にて通信先情報が含まれていないと判定された場合に認識された情報を基に検索サイトから通信先情報を取得し、その通信先への接続処理を行う通信制御部（図示せず）を有している。その際、制御部１１は、通信先への接続処理を、アンテナ１０及び無線通信部１２を通して実行する。

制御部１１の通信制御部は、認識部により認識された情報にＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）情報が含まれていた場合、当該ＵＲＬに接続して情報を取得し、認識部により認識された情報にメールアドレス情報が含まれていた場合、記憶部１５に記憶されたメールアプリケーションを起動し、当該メールアドレスを電子メールの宛先に挿入する。

携帯通信端末１は、カメラ部１３にて取得した画像を表示部１４に出力させた状態で、タッチパネル上での任意の文字／文字列や画像を指定する操作を検出すると、当該文字／文字列や画像を制御部１１にて認識する。

携帯通信端末１は、認識結果が文字列で、当該文字列が通信先情報、例えばＵＲＬであった場合、無線通信部１２及びアンテナ１０を通して当該ＵＲＬに接続する。

あるいは、携帯通信端末１は、当該文字列がメールアドレスであった場合、メーラ（記憶部１５に記憶されたメールアプリケーション）を起動し、当該メールアドレスを電子メールの宛先に挿入する。

もしくは、携帯通信端末１は、認識結果が通信先情報以外の文字列や画像であった場合、予め記憶部１５に記憶してある検索サイト（文字列検索サービスサイト、地図検索サービスサイト、映像分析サービスサイト等）に送信し、その検索結果から該当する文字列や画像のサイトのＵＲＬに接続する。

このように、本発明による携帯通信端末１は、上記のような動作を行うことで、撮影画像中から任意のＵＲＬやメールアドレス等の通信先情報を容易に選択することができ、その操作を容易に行うことができる。したがって、本発明による携帯通信端末１では、端末の利用者による情報の取得と、それ以降の操作（ｗｅｂ接続、メール作成）を簡易に行うことができ、利用者の利便性や操作性を向上させることができる。

図２は本発明の第１の実施の形態による携帯通信端末の構成例を示すブロック図である。図２において、本発明の第１の実施の形態による携帯通信端末１は、上記のアンテナ１０、制御部１１、無線通信部１２、カメラ部１３、表示部１４、記憶部１５以外に、音声処理部１６と、送話部（マイク）１７と、受話部（スピーカ）１８と、放送用アンテナ１９と、放送受信部２０と、操作部２１と、スピーカ部２２とを備えている。

携帯無線端末１は、通信機能（通話、メール送受信、インタネット接続等）やＴＶ（テレビジョン）放送受信機能等を備えた携帯情報処理装置であって、制御部１１及び記憶部１５によるプログラム制御によって動作し、通信ネットワーク（図示せず）に接続可能な構成となっている。

無線通信部１２は、アンテナ１０を介して図示せぬ無線基地局装置との間で無線によって情報の送受信を行う。放送受信部２０は、図示せぬ放送局（地上局、衛星等）から送信された放送信号を放送用アンテナ１９を介して受信し、該受信した信号の復調による映像データ、音声データ、情報データ等の放送信号処理を行う。

カメラ部１３は、画像情報の取得（撮影）を行う。音声処理部１６は、送話部（マイク）１７及び受話部（スピーカ）１８を介して入出力された音声信号の処理を行う。

表示部１４は、画像、図形、文字、記号等の情報表示出力（映像信号処理）を行う表示機能、及び圧力や静電容量等の方式により利用者の入力操作を感知するスイッチ機能を兼ね備えたタッチパネル（タッチスクリーン）を備えている。

操作部２１は、テンキー、スクロールキー、十字キー、決定キー等から構成され、携帯通信端末１に対する利用者の各種情報入力を行う。スピーカ部２２は、楽音や報知音等の鳴音出力を行う。

記憶部１５は、電話帳情報、送受信メール情報、発着呼情報、コンテンツ情報、アプリケーションプログラム情報、撮影画像、及び携帯無線端末１の諸設定等を格納する。尚、記憶部１５は、制御部１１にて実行されるプログラムも格納している。

制御部１１は、記憶部１５に格納されたプログラムを実行することで、電話機能、メール機能、インタネット（ｗｅｂ）接続機能、カメラ機能、テレビ受信機能、コンテンツ再生機能、文字認識機能、その他の端末の有する機能や各部の制御を行う。

図３は本発明の第１の実施の形態による通信先情報の取得例を示す図である。図３においては、ライブ告知ポスターをカメラ部１３にて撮影し、その画像を表示部１４に表示している状態を示している。このライブ告知ポスターには、『○○バンド ライブ』、『バンドの画像』、『日時』、『場所（△△ホール）』、『詳細情報のＵＲＬ』が含まれている。

本発明の第１の実施の形態において、携帯通信端末１は、タッチパネル上の『○○バンド ライブ』の部分をタッチすると、『○○バンド ライブ』の情報サイトに接続するように動作する。

また、携帯通信端末１は、タッチパネル上の『バンドの画像』の部分をタッチすると、『バンド』の情報サイトに接続するように動作し、『場所（△△ホール）』の部分をタッチすると、『△△ホール』の情報サイトに接続するように動作する。

さらに、携帯通信端末１は、タッチパネル上の『詳細情報のＵＲＬ』の部分をタッチすると、『○○バンド ライブ』の情報サイトに接続するように動作する。この場合は、上記の『○○バンド ライブ』の部分をタッチした時と同じサイトに接続されることとなる。

図４及び図５は本発明の第１の実施の形態による通信先情報の取得動作を示すフローチャートである。これら図２〜図５を参照して本発明の第１の実施の形態による通信先情報の取得動作について説明する。尚、図４及び図５に示す処理動作は、制御部１１［ＣＰＵ（中央処理装置）］が記憶部１５に格納したプログラムを実行することで実現される。

まず、制御部１１は、カメラ部１３にて撮影した画像を表示部１４に表示させる（図４ステップＳ１，Ｓ２）。制御部１１は、この表示状態で、操作部２１または表示部１４のタッチパネルによって所定の入力が行われると、情報検索モード［タッチ操作有効（認識モード）］に設定する（図４ステップＳ３）。以下は、情報検索モードでの動作を示している。

制御部１１は、タッチ操作有効（認識モード）である場合、表示部１４に対するタッチ／リリース（例えば、タッチパネル上を指でなでる動作）を監視する（図４ステップＳ４）。

制御部１１は、表示部１４に対するタッチ／リリースを検出すると、そのタッチ／リリースにて指定された領域の情報が文字（文字列）である場合（図４ステップＳ５）、指定された領域の文字／文字列の情報について認識処理を行う（図４ステップＳ６）。

制御部１１は、その認識処理の結果に通信先情報、例えばＵＲＬやメールアドレスに関する情報を含んでいれば（図４ステップＳ７）、その通信先情報を基にアンテナ１０及び無線通信部１２を介して当該通信先に接続し、その通信先から情報を取得するように制御する（図４ステップＳ８）。

この場合、制御部１１は、通信先情報がＵＲＬであれば、当該ＵＲＬに接続して情報を取得するように制御し、通信先情報がメールアドレスに関する情報であれば、メーラ（記憶部１５に格納されたメールアプリケーション）を起動して新規メール作成のモードに移行し、認識したメールアドレスを電子メールの宛先に挿入して電子メールの作成に移る。

一方、制御部１１は、その認識処理の結果に通信先情報を含んでいなければ（図４ステップＳ７）、認識した文字データをキーワードとして設定する（図４ステップＳ９）。

その後、制御部１１は、複数の検索サービスサイトを表示し、その中から利用者によって選択された検索サイトにて、上記の設定されたキーワードを自動検索する（図４ステップＳ１０）。制御部１１は、この指導検索にて検索された結果の中から、利用者によって選択されたｗｅｂサイト（ＵＲＬ）に、アンテナ１０及び無線通信部１２を通して接続し、当該ｗｅｂサイト（ＵＲＬ）から情報を取得する（図４ステップＳ１１）。

また、制御部１１は、表示部１４に対するタッチ／リリースを検出し、そのタッチ／リリースにて指定された領域の情報が画像である場合（図４ステップＳ５）、指定された領域の画像の情報について認識処理を行う（図５ステップＳ１２）。

制御部１１は、この認識処理で認識した画像を抽出して記憶部１５に記憶する（図５ステップＳ１３）。続いて、制御部１１は、所定の映像分析サービスサイトにアンテナ１０及び無線通信部１２を通して接続し、抽出した画像データを送信する（図５ステップＳ１４）。

制御部１１は、映像分析サービスサイトから画像データに係わるサイトのＵＲＬを取得し、取得したＵＲＬにアンテナ１０及び無線通信部１２を通して接続し、そのＵＲＬから情報を取得する（図５ステップＳ１５）。

次に、本発明の第１の実施の形態による具体的な通信先情報の取得例について説明する。まず、図３に示す『○○バンド ライブ』のサイト情報の取得について説明する。

尚、本実施の形態においては、表示部１４に、検索する情報がメールアドレスか、メールアドレス以外かをユーザに選択させる画面を表示させてもよい。ここでは、メールアドレス以外と選択するものとする。メールアドレスの取得の場合には、後述する文字認識後、メール送信画面に移行し、認識されたアドレスにてメール送信可能となる。

上記の検索する情報がメールアドレスか、メールアドレス以外かの選択後、タッチパネル付きの表示部１４の表示画像において、「○○バンド ライブ」に指で（あるいは、図示せぬ電子ペンで）タッチする。このタッチ入力は、表示部１４のタッチパネルで検出されて制御部１１に通知される。タッチ入力は、『○○バンド ライブ』の表示部分を指（または電子ペン）でなぞることで入力される。

次に、制御部１１は、上記のタッチ入力に基づいて、「○○バンド ライブ」というイメージ画像部分を抽出する。さらに、制御部１１は、「○○バンド ライブ」というイメージ画像部分を予め記憶部１５に登録された画像・文字認識プログラムに基づいて文字認識し、文字データに変換する。この文字認識処理では、変換した文字データの文字が表示部１４に表示され、利用者による確認を促す。

「○○バンド ライブ」が正しく表示されていた場合は、タッチパネルまたは操作部２１により確定入力する。「○○バンド ライブ」の表示が正しくない場合は、タッチパネルにより『○○バンド ライブ』の表示部分のタッチ入力を再度行い、以上の処理を繰り返す。尚、情報検索処理を途中でやめる場合には、操作部２１の終了ボタンを押すと、情報検索モードが解除され、画像を表示しているだけの状態に戻る。

上記の確定入力により、制御部１１は、認識した文字データ『○○バンド ライブ』のライブ情報のサイトに繋げるための処理を実行する。この処理において、制御部１１は、最初、上記の確定入力によって認識した文字データ『○○バンド ライブ』をキーワードとして設定する。

続いて、制御部１１は、複数の検索サービスサイトを表示部１４に表示する。この場合、表示部１４に表示される検索サービスサイトは、キーワードで自動検索するサイトや地図検索サイト等である。これらサイトのｗｅｂ情報は、予め記憶部１５に記憶されているものとする。

ここにおいて、利用者は、表示部１４に表示されている、キーワードで自動検索するサイトをタッチパネルにより選択する。これによって、制御部１１は、その検索サイトｗｅｂを自動的に立ち上げ、上記のキーワードで自動検索し、その検索結果（候補となる複数のＵＲＬを含む情報）をサイトからアンテナ１０及び無線通信部１２を経由して取得し、表示部１４に出力する。

この表示結果から、利用者によって該当しそうなライブ情報のＵＲＬがタッチパネルで選定されると、制御部１１は、そのＵＲＬにアンテナ１０及び無線通信部１２を介してアクセスする。

尚、図３に示す『△△ホール』の情報、「ｈｔｔｐ//ＷＷＷ」の情報も、上記の処理の実行によって検索可能である。但し、自動検索する処理において、「ｈｔｔｐ//ＷＷＷ・・・」の情報の場合は、複数の検索サービスサイトの表示を省略し、直ちに「ｈｔｔｐ//ＷＷＷ・・・」に接続するものとする。これは、制御部１１の内部にて「ｈｔｔｐ//」あるいは「ｗｗｗ」の文字情報をＵＲＬの情報として認識できるためである。

次に、図３に示す『△△ホール』の地図情報の取得について説明する。この場合、まず、利用者によって、検索する情報がメールアドレスか、メールアドレス以外かを選択させる。ここでは、メールアドレス以外と選択する。

利用者によって、タッチパネル付きの表示部１４の表示画像において，「△△ホール」がタッチされると、このタッチ入力は、表示部１４のタッチパネルで検出され、制御部１１に通知される。タッチ入力は、『△△ホール』の表示部分を指（または電子ペン）でなぞることで入力される。

制御部１１は、上記のタッチ入力に基づいて、「△△ホール」というイメージ画像部分を抽出する。制御部１１は、「△△ホール」というイメージ画像部分を予め記憶部１５に登録された画像・文字認識プログラムに基づいて文字認識し、文字データに変換する。この変換処理では、変換した文字データの文字が表示部１４に表示され、利用者による確認を促す。

「△△ホール」が表示されていた場合は、正しい文字認識なので、タッチパネルまたは操作部２１によって確定入力する。確定入力によって、制御部１１は、認識した文字データ『△△ホール』の地図情報を自動検索するためのサイトに繋げる。

制御部１１は、最初、認識した文字データ『△△ホール』をキーワードとして設定する。続いて、制御部１１は、複数の検索サービスサイトを表示部１４に表示する。上述したように、表示される検索サービスサイトには、キーワードで自動検索するサイト、地図検索サイト等がある。これらサイトのｗｅｂ情報は、予め記憶部１５に記憶されているものとする。

利用者が表示部１４に表示されている地図検索サイトをタッチパネルにより選択すると、制御部１１は、その検索サイトｗｅｂを自動的に立ち上げ、上記のキーワード『△△ホール』で、『△△ホール』の位置を示す地図画像情報を自動検索し、その検索結果を地図検索サイトからアンテナ１０及び無線通信部１２を経由して取得し、表示部１４に表示出力する。

さらに、図３に示す『バンドの画像』からのバンド情報の取得について説明する。まず、利用者によって、検索する情報がメールアドレスか、メールアドレス以外かを選択させる。ここでは、メールアドレス以外と選択する。

利用者が表示部１４の表示画像において、『バンドの画像』の部分にタッチすると、このタッチ入力は、表示部１４のタッチパネルで検出され、制御部１１に通知される。すると、制御部１１は、タッチ入力に基づいて『バンドの画像』の部分を抽出する。

ここで、『バンドの画像』には、該当する人物が写っていることが必要である。この画像は、制御部１１において自動的に認識される。画像の抽出は、記憶部１５に記憶された画像抽出プログラムによって行われ、抽出された画像は、記憶部１５に記憶される。

制御部１１は、記憶部１５に予め記憶された所定の映像分析サービスサイトに自動的にアクセスし、その映像分析サービスサイトに、アンテナ１０及び無線通信部１２を経由して抽出した画像データを送信する。

映像分析サービスサイトでは、受信した画像データから人物の顔部分を抽出し、顔の特徴点から該当する人物を特定して、その人物に係わるサイトのＵＲＬをその検索結果として携帯通信端末１に転送する。これによって、制御部１１は、映像分析サービスサイトからＵＲＬを受信し、そのＵＲＬを表示部１４に表示する。

このように、本実施の形態では、イメージ画像情報から、文字や人物の画像をタッチして、様々な情報の検索が可能となる。したがって、本実施の形態では、一枚のポスターや看板に複数の詳細情報を、余計なＱＲコードをつけることなく、携帯通信端末１上の簡便な処理（タッチパネル操作）にて通信先情報の取得を行うことができる。

よって、本実施の形態では、カメラ部１３の撮影画像中から任意のＵＲＬやメールアドレス等の通信先情報を容易に選択することができ、その操作を容易に行うことができる。

上記のように、本実施の形態では、通信先情報の数だけのＱＲコードが不要となり、通信先情報毎のＱＲコードの撮影も不要となる。また、本実施の形態では、ＱＲコードを用いずに通信先情報の取得が可能なことから、ポスターや看板のデザインも煩雑となることはない。

さらに、本実施の形態では、複数の通信先情報を伝えるために、その通信先情報の数だけ文字列を表示しても、それら文字列各々を個別に撮影することなく、画像の中からそれらの文字列のきり分けを容易に行うことができる。

図６及び図７は本発明の第２の実施の形態による通信先情報の取得動作を示すフローチャートである。本発明の第２の実施の形態による携帯通信端末は、上記の図２に示す本発明の第１の実施の形態による携帯通信端末１と同様の構成となっており、同様の動作を行う。これら図２と図３と図６と図７とを参照して本発明の第２の実施の形態による通信先情報の取得動作について説明する。尚、図６及び図７に示す処理動作は、制御部１１（ＣＰＵ）が記憶部１５に格納したプログラムを実行することで実現される。

まず、制御部１１は、カメラ部１３にて撮影した画像を表示部１４に表示させる（図６ステップＳ２１，Ｓ２２）。制御部１１は、この表示状態で、操作部２１または表示部１４のタッチパネルによって所定の入力が行われると、情報検索モード［タッチ操作有効（認識モード）］に設定する（図６ステップＳ２３）。以下は、情報検索モードでの動作を示している。

制御部１１は、タッチ操作有効（認識モード）である場合、表示部１４に対するタッチ／リリース（例えば、タッチパネル上を指でなでる動作）を監視する（図６ステップＳ２４）。

制御部１１は、表示部１４に対するタッチ／リリースが画像の拡大操作であることを検出すると、そのタッチ／リリースにて指定された領域の画像を拡大し（図６ステップＳ２５）、上記のステップＳ２４の表示部１４に対するタッチ／リリースの監視に戻る。

制御部１１は、表示部１４に対するタッチ／リリースが領域の指定操作であることを検出すると、情報が文字（文字列）であれば（図６ステップＳ２６）、指定された領域の文字／文字列の情報について認識処理を行う（図６ステップＳ２７）。

制御部１１は、その認識処理の結果に通信先情報、例えばＵＲＬやメールアドレスに関する情報を含んでいれば（図６ステップＳ２８）、その通信先情報を基にアンテナ１０及び無線通信部１２を介して当該通信先に接続し、その通信先から情報を取得するように制御する（図６ステップＳ２９）。

この場合、制御部１１は、通信先情報がＵＲＬであれば、当該ＵＲＬに接続して情報を取得するように制御し、通信先情報がメールアドレスに関する情報であれば、メーラ（記憶部１５に格納されたメールアプリケーション）を起動して新規メール作成のモードに移行し、認識したメールアドレスを電子メールの宛先に挿入して電子メールの作成に移る。

一方、制御部１１は、その認識処理の結果に通信先情報を含んでいなければ（図６ステップＳ２８）、認識した文字データをキーワードとして設定する（図６ステップＳ３０）。

その後、制御部１１は、複数の検索サービスサイトを表示し、その中から利用者によって選択された検索サイトにて、上記の設定されたキーワードを自動検索する（図６ステップＳ３１）。制御部１１は、この指導検索にて検索された結果の中から、利用者によって選択されたｗｅｂサイト（ＵＲＬ）に、アンテナ１０及び無線通信部１２を通して接続し、当該ｗｅｂサイト（ＵＲＬ）から情報を取得する（図６ステップＳ３２）。

また、制御部１１は、表示部１４に対するタッチ／リリースを検出し、そのタッチ／リリースにて指定された領域の情報が画像である場合（図６ステップＳ２６）、指定された領域の画像の情報について認識処理を行う（図７ステップＳ３３）。

制御部１１は、この認識処理で認識した画像を抽出して記憶部１５に記憶する（図７ステップＳ３４）。続いて、制御部１１は、所定の映像分析サービスサイトにアンテナ１０及び無線通信部１２を通して接続し、抽出した画像データを送信する（図７ステップＳ３５）。

制御部１１は、映像分析サービスサイトから画像データに係わるサイトのＵＲＬを取得し、取得したＵＲＬにアンテナ１０及び無線通信部１２を通して接続し、そのＵＲＬから情報を取得する（図７ステップＳ３６）。

本実施の形態では、カメラ部１３で撮影した画像が表示部１４に表示された時に、表示された画像が小さければ、その画像を拡大するものと仮定する。この画像表示状態にて画像を拡大表示する場合は、画像の上を所定時間以上タッチ（第１のタッチ操作）する。尚、拡大表示のためのタッチは、上記の所定時間以上のタッチに限定されず、所定時間内での連続するタッチ等であってもよい。

このようなタッチ入力により、制御部１１は、画像の拡大処理を実行し、タッチした画像部分を画面中心に持ってきて拡大画像を表示（例えば、２倍に拡大表示）する。

尚、画像の拡大処理については、周知の処理なので、ここでは説明を省略する。画像の拡大倍率は、２倍としているが、これは何倍であってもよく、表示部１４のサイズや利用者による設定等によって設定することが可能である。また、表示部１４の画面を操作部２１の方向キーによりスクロールすると、拡大画面のスクロールも可能である。

次に、制御部１１は、上述したような所定の入力により情報検索モードに設定し、以降の処理は、上記の本発明の第１の実施の形態と同様に、情報検索モードでの動作を実行する。

尚、本発明は、上記の各実施の形態において、ＵＲＬ、メールアドレス、文字列、画像の真上をなぞるようにタッチするようにしているが、ＵＲＬ、メールアドレス、文字列、画像の部分を囲むようにタッチしてもよい。

また、上記のタッチ操作は、ＵＲＬやメールアドレスの前後の文字が一緒にタッチされていてもよいし、ＵＲＬやメールアドレスだけの部分をタッチするようにしてもよい。

さらに、このタッチ操作は、本発明の第２の実施の形態で述べた拡大表示による周辺画像から対象のＵＲＬやメールアドレスの画像部分をなぞるようにタッチするようにしてもよい。

１ 携帯通信端末
１０ アンテナ
１１ 制御部
１２ 無線通信部
１３ カメラ部
１４ 表示部
１５ 記憶部
１６ 音声処理部
１７ 送話部（マイク）
１８ 受話部（スピーカ）
１９ 放送用アンテナ
２０ 放送受信部
２１ 操作部
２２ スピーカ部

Claims (13)

1. 画像を取得する画像取得手段と、
   前記画像取得手段にて取得した画像を表示しかつ表示された画像の任意の位置への操作を検出するタッチパネル表示手段と、
   前記タッチパネル表示手段により検出された任意の領域を対象領域として文字及び画像の認識を行う認識手段と、
   前記認識手段により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御手段とを有することを特徴とする携帯通信端末。
2. 前記通信制御手段は、前記認識手段により認識された情報に直接通信先を指定するＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）情報が含まれていた場合に当該ＵＲＬ情報を基に通信先に接続して当該通信先から情報を取得することを特徴とする請求項１記載の携帯通信端末。
3. 前記通信制御手段は、前記認識手段により認識された情報に直接通信先を指定するメールアドレス情報が含まれていた場合にメールアプリケーションを起動し、当該メールアドレスを電子メールの宛先に挿入することを特徴とする請求項１または請求項２記載の携帯通信端末。
4. 前記通信制御手段は、前記認識手段により認識された情報が直接通信先を指定する情報以外の文字情報の場合に当該文字情報の文字認識結果をキーワードとして予め設定された検索サイトに送信し、当該検索サイトから通信先情報を取得することを特徴とする請求項１から請求項３のいずれか記載の携帯通信端末。
5. 前記通信制御手段は、前記認識手段により認識された情報が画像である場合に当該画像を所定の映像分析サービスサイトに送信し、当該映像分析サービスサイトから前記画像に係わる通信先の情報を取得することを特徴とする請求項１から請求項４のいずれか記載の携帯通信端末。
6. 前記タッチパネル表示手段において前記画像に対して所定操作が行われた場合に当該所定操作で指示される画像の部分を拡大表示し、その拡大表示した画像の部分から前記対象領域の文字情報を前記認識手段にて認識し、その認識した情報を前記タッチパネル表示手段に表示することを特徴とする請求項１から請求項５のいずれか記載の携帯通信端末。
7. 携帯通信端末が、
   画像を取得する画像取得処理と、
   前記画像取得処理にて取得した画像をタッチパネル表示手段に表示しかつ表示された画像の任意の位置への操作を検出する検出処理と、
   前記検出処理により検出された任意の領域を対象領域として文字及び画像の認識を行う認識処理と、
   前記認識処理により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御処理とを実行することを特徴とする通信先情報取得方法。
8. 前記通信制御処理において、前記認識処理により認識された情報に直接通信先を指定するＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）情報が含まれていた場合に当該ＵＲＬ情報を基に通信先に接続して当該通信先から情報を取得することを特徴とする請求項７記載の通信先情報取得方法。
9. 前記通信制御処理において、前記認識処理により認識された情報に直接通信先を指定するメールアドレス情報が含まれていた場合にメールアプリケーションを起動し、当該メールアドレスを電子メールの宛先に挿入することを特徴とする請求項７または請求項８記載の通信先情報取得方法。
10. 前記通信制御処理において、前記認識処理により認識された情報が直接通信先を指定する情報以外の文字情報の場合に当該文字情報の文字認識結果をキーワードとして予め設定された検索サイトに送信し、当該検索サイトから通信先情報を取得することを特徴とする請求項７から請求項９のいずれか記載の通信先情報取得方法。
11. 前記通信制御処理において、前記認識処理により認識された情報が画像である場合に当該画像を所定の映像分析サービスサイトに送信し、当該映像分析サービスサイトから前記画像に係わる通信先の情報を取得することを特徴とする請求項７から請求項１０のいずれか記載の通信先情報取得方法。
12. 前記タッチパネル表示手段において前記画像に対して所定操作が行われた場合に当該所定操作で指示される画像の部分を拡大表示し、その拡大表示した画像の部分から前記対象領域の文字情報を前記認識処理にて認識し、その認識した情報を前記タッチパネル表示手段に表示することを特徴とする請求項７から請求項１１のいずれか記載の通信先情報取得方法。
13. 携帯通信端末内の中央処理装置に実行させるプログラムであって、
    画像を取得する画像取得処理と、
    前記画像取得処理にて取得した画像をタッチパネル表示手段に表示しかつ表示された画像の任意の位置への操作を検出する検出処理と、
    前記検出処理により検出された任意の領域を対象領域として文字及び画像の認識を行う認識処理と、
    前記認識処理により認識された情報を基に当該情報に関連付けられた通信先への接続処理を行う通信制御処理とを含むことを特徴とするプログラム。

Images