JP2007279155A - 情報端末装置及び画像表示方法 - Google Patents

Abstract

【課題】携帯電話機において、カメラ画像を停止することなく、画像から取得した抽出情報をユーザーに表示することを目的とする。
【解決手段】携帯電話機５０において、画像を連続的に撮影して撮像画像信号５１を出力するカメラ１と、撮像画像信号５１を入力し、撮像画像信号５１から得られる撮像画像の一部分の部分画像を取得し、部分画像からその画像に表れていない情報を抽出情報５２として抽出して、抽出した抽出情報５２を出力する情報抽出部２と、カメラ１が出力した撮像画像信号５１と、情報抽出部２が出力した抽出情報５２とを入力して、撮像画像信号５１と抽出情報５２とを用いて撮像画像に抽出情報５２が重畳された重畳画像データ５３を生成して出力する画像生成部３と、重畳画像データ５３を入力して、撮像画像に抽出情報５２が重畳された重畳画像を表示する画像表示部４とを備える。
【選択図】 図２

Description

本発明は、例えば、情報端末装置および画像表示方法に関するものであり、特に、画像から抽出した情報の画像表示方法に関する。

従来の技術として、例えばカメラ付携帯電話機のコード認識機能がある。これは、カメラを起動してバーコードの上にかざすと、カメラで取得したバーコードの画像が液晶ディスプレイにリアルタイムに表示され、さらにバーコードが認識されバーコードの情報が抽出されると、液晶ディスプレイにバーコードの情報が表示されるものである。このとき、カメラ画像の表示は停止するので、次に別のバーコードから情報を取得するためには、キーを押してコード認識機能を再開し、再度読み取りをする必要がある。
特開２００１−７６１６８号公報 特開２００５−３６５８７号公報

今後、例えば、特開２００５−３６５８７号のように、２次元バーコードを表面に印字したタイルで建築物を構成することで、位置情報・店舗情報などを持ったバーコードが市街地内に点在するような状況が想定される。

上記のような状況では、複数のバーコードの情報を次から次へと表示して必要と思われるものをユーザーが選択できることが重要であるので、バーコードを認識する毎にカメラ画像表示が停止するのはユーザーにとって使い勝手がよくないという課題がある。また、取得した情報源（バーコード）の位置を特定することが重要であるので、カメラ画像表示が停止してしまうと、どこの情報であったかを再度特定することが困難であるという課題がある。

本発明は、上記のような課題を解決するためのものであり、カメラ画像表示を停止せずに、画像から取得した情報をユーザーに表示する手段を提供することを目的とする。

本発明に係る情報端末装置は、
画像を連続的に撮影して撮像画像信号を出力する撮像部と、
撮像部が出力した撮像画像信号を入力し、撮像画像信号から得られる撮像画像の少なくとも一部分の部分画像を取得し、部分画像からその画像に表れていない情報を抽出情報として抽出して、抽出した抽出情報を出力する情報抽出部と、
撮像部が出力した撮像画像信号と、情報抽出部が出力した抽出情報とを入力して、撮像画像信号と抽出情報とを用いて、撮像画像に抽出情報が重畳された重畳画像データを生成して出力する画像生成部と、
画像生成部から出力された重畳画像データを入力して、撮像画像に抽出情報が重畳された重畳画像を表示する画像表示部と
を備えたことを特徴とする。

本発明によれば、画像生成部が、撮像部が撮影した撮像データに情報抽出部が抽出した抽出情報を重畳して画像を生成するので、抽出情報を出力する際に画像表示が停止することなく、連続して画像を表示することができるという効果を奏する。

まず、図１に基づき以下の実施の形態にかかる情報端末装置１００のハードウェア構成について説明する。

図１は、以下の実施の形態における情報端末装置１００のハードウェア構成の一例を示す図である。

図１において、情報端末装置１００は、プログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９１１を備えている。ＣＰＵ９１１は、バス９１２を介してＲＯＭ９１３、ＲＡＭ９１４、通信ボード９１５、液晶ディスプレイ９０１、Ｋ／Ｂ（Ｋｅｙ Ｂｏａｒｄ）９０２、マウス９０３、タッチパネル９０４、マイク９３１、スピーカー９３２、カメラ１と接続されている。

ＣＰＵなどは、処理装置の一例である。

ＲＡＭ９１４は、揮発性メモリの一例である。ＲＯＭ９１３は、不揮発性メモリの一例である。これらは、記憶装置の一例である。

通信ボード９１５は、無線アンテナ、ＬＡＮ等に接続されている。通信ボード９１５、無線アンテナなどは、通信装置の一例である。

また、Ｋ／Ｂ９０２、マウス９０３、タッチパネル９０４、マイク２０などは、入力装置の一例である。

また、液晶ディスプレイ９０１は、表示装置の一例である。

また、カメラ１は、撮像装置の一例である。

ここで、通信ボード９１５は、電話基地局、無線ＬＡＮに限らず、直接、インターネット、或いはＩＳＤＮ等のＷＡＮ（ワイドエリアネットワーク）に接続されても構わない。

ＲＯＭ９１３又はＲＡＭ９１４には、オペレーティングシステム（ＯＳ）９２１、ウィンドウシステム９２２、プログラム群９２３、ファイル群９２４が記憶されている。プログラム群９２３は、ＣＰＵ９１１、ＯＳ９２１、ウィンドウシステム９２２により実行される。

上記プログラム群９２３には、以下に述べる実施の形態の説明において「〜部」として説明する機能を実行するプログラムが記憶されている。プログラムは、ＣＰＵ９１１により読み出され実行される。

ファイル群９２４には、以下に述べる実施の形態の説明において、「〜情報」、「〜データ」として説明するものが、「〜ファイル」として記憶されている。

また、以下に述べる実施の形態の説明において説明するフローチャートの矢印の部分は主としてデータの入出力を示し、そのデータの入出力のためにデータは、フラッシュメモリ、ＲＡＭ、ＦＤ、光ディスク、ＣＤ、ＭＤ（ミニディスク）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）等のその他の記録媒体に記録される。あるいは、信号は信号線やその他の伝送媒体により伝送される。

また、以下に述べる実施の形態の説明において「〜部」として説明するものは、ＲＯＭ９１３に記憶されたファームウェアで実現されていても構わない。或いは、ソフトウェアのみ、或いは、ハードウェアのみ、或いは、ソフトウェアとハードウェアとの組み合わせ、さらには、ファームウェアとの組み合わせで実施されても構わない。

また、以下に述べる実施の形態を実施するプログラムは、フラッシュメモリ、ＲＡＭ、ＦＤ、光ディスク、ＣＤ、ＭＤ、ＤＶＤ等のその他の記録媒体による記録装置を用いて記憶されても構わない。

実施の形態１．
以下の実施の形態では、情報端末装置１００の一例として携帯電話機５０を用いて説明する。

従来の技術は、例えば、携帯電話端末のコード認識機能が液晶ディスプレイの画像上の２次元バーコードを認識すると、画像の表示を停止して２次元バーコードの示す情報の内容を液晶ディスプレイに表示するものである。したがって、撮像画像が液晶ディスプレイ上から表示されなくなってしまうため、ユーザーにとってはどの２次元バーコードについての情報であるかがわかりにくくなってしまう。本実施の形態では、携帯電話機５０のコード認識機能がこの２次元バーコードを認識すると、携帯電話機５０は、２次元バーコードの示す情報を撮像画像にスーパーインポーズした重畳画像を、液晶ディスプレイに表示する。このため、ユーザーは、どの２次元バーコードの情報であるかを判別することができる。

ここで、スーパーインポーズとは、画像編集の特殊効果のひとつであり、ひとつの画像に文字や切り抜いた別の領域の画像等を表示する機能のことである。

実施の形態１について図２〜図６を用いて説明する。

図２は、実施の形態１における携帯電話機５０の機能ブロック図である。

図２において、携帯電話機５０は、撮像部であるカメラ１、情報抽出部２、画像生成部３、画像表示部４を備えている。画像表示部４は、画像データを入力して液晶ディスプレイ９０１等の表示装置に表示する。

さらに、携帯電話機５０は、制御を行う制御部５、ユーザーからの操作を受け付ける操作部６、音声の入出力を行う音響部７、各種データを記憶する記憶部８、無線通信を行う通信部９といった通常の携帯電話機が有する携帯電話機能の機能ブロックを備えている。

次に、図２と図３を用いて、実施の形態１にかかる携帯電話機５０の動作の概要について説明する。

図３は、実施の形態１における携帯電話機５０の画像表示方法による重畳画像作成方法の一例を示す図である。図３の（ａ）において、撮像画像６０は、携帯電話機５０のカメラ１が撮影した撮像画像であり、２次元バーコード６１（部分画像の一例）が撮影されている。

ここでは、ユーザーが、携帯電話機５０を所持して街を歩いているときを想定する。つまり、ユーザーが携帯電話機５０を所持して街を歩いているとき、実物の建物にタイル等に刻印することによって２次元バーコードが付されている場合、携帯電話機５０のコード認識機能がその２次元バーコードを読み取る場合を想定する。

あるいは、地図をＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等のＬＣＤ表示装置に表示して、その地図上に表示されている建物に２次元バーコードが付されている場合に、携帯電話機５０のコード認識機能がその２次元バーコードを読み取る場合も想定できる。

カメラ１（撮像部）は、画像を連続的に撮影して、撮影した撮像画像６０の撮像画像信号５１を出力する。カメラ１は、通常、携帯電話機５０に内蔵されている場合がほとんどであるが、外付けでも構わない。

情報抽出部２は、バーコード検出部２１とバーコード情報抽出部２２とを備えている。情報抽出部２は、カメラ１が出力した撮像画像６０を示す撮像画像信号５１を入力し、撮像画像信号５１から得られる撮像画像６０の少なくとも一部分の部分画像（２次元バーコード６１）を取得し、部分画像（２次元バーコード６１）からその画像に表れていない情報を抽出情報５２として抽出して、抽出した抽出情報５２を出力する。

すなわち、バーコード検出部２１は、カメラ１が出力した撮像画像信号５１を入力し、撮像画像信号５１から得られる撮像画像６０から２次元バーコード６１を取得する。バーコード情報抽出部２２は、２次元バーコード６１の画像上には表れていないが、２次元バーコード６１が示す情報を、抽出情報５２として抽出して出力する。２次元バーコード６１は、部分画像の一例である。

ここで、２次元バーコードとは、文字や数字などのデータを２次元の図形パターンとして物体の表面等に刻印したり紙面等に印刷したりする技術であり、２次元コードともいう。２次元バーコードには、例えば、ＱＲコード（登録商標）（ＱＲ：Ｑｕｉｃｋ Ｒｅｓｐｏｎｓｅ）等がある。本実施の形態では、部分画像として２次元バーコードを用いているが、図形パターン等のように画像として読み取れるものなら何でもよく、１次元バーコードでもよい。

画像生成部３は、カメラ１が出力した撮像画像信号５１と、情報抽出部２が出力した抽出情報５２とを入力する。さらに、画像生成部３は、入力した撮像画像信号５１と抽出情報５２とを用いて、撮像画像信号５１が示す撮像画像６０に抽出情報５２が重畳された重畳画像データ５３を生成して出力する。

具体的には、図３の（ｂ）に示すように、画像生成部３は、半透明領域６３と、文字や図形イメージ等で示された抽出情報５２とを含む重畳イメージ６２を生成する。そして、画像生成部３は、重畳イメージ６２を撮像画像６０にスーパーインポーズすることにより、重畳画像６５を示す重畳画像データ５３を生成する。

記憶部８は、撮像装置で撮影した撮像画像に抽出した抽出情報が重畳された重畳画像データを保存することが可能である。すなわち、記憶部８は、画像生成部３が生成した重畳画像データ５３を記憶装置に保存してもよい。

重畳画像データ５３が示す重畳画像６５は、画像表示部４により液晶ディスプレイ９０１に表示される。

本実施の形態では、抽出情報５２を表示する領域として半透明領域６３をオーバーレイ表示する場合を示したが、全くの透明領域でも構わない。また、白抜きの領域や他の色の領域でも構わない。しかし、本実施の形態における携帯電話機５０を利用するユーザーにとっては、撮像画像６０に抽出情報５２をスーパーインポーズした場合に、抽出情報５２の背景となる撮像画像６０が透けて見えていた方が、抽出情報５２と撮像画像６０を結びつけやすく好適である。

また、画像生成部３は、抽出情報５２がいずれの２次元バーコードから抽出された抽出情報５２であるかを視覚的に判別するために、抽出情報５２と該当する２次元バーコード６１とを関連付けるための関連付けイメージを生成する。

図３において、関連付けイメージの一例として、吹き出し形６４を使用している。すなわち、画像生成部３が抽出情報５２を表示する半透明領域６３の形状を吹き出し形６４とすることにより、抽出情報５２が表示される半透明領域６３の吹き出し部分（口先部分）が、該当する２次元バーコード６１を指し示すことができる。これにより、抽出情報５２と吹き出し形６４の半透明領域６３とが視覚的に判別できるように関連付けることができる。画像生成部３は、抽出情報５２が表示された吹き出し形６４の半透明領域６３を関連付けイメージとして撮像画像６０に重畳した重畳画像データ５３を生成して出力する。

重畳画像データ５３が示す重畳画像６５は、画像表示部４により液晶ディスプレイ９０１に表示される。

画像表示部４は、画像生成部３から出力された重畳画像データ５３を入力して、重畳画像データ５３が示す重畳画像６５を液晶ディスプレイ９０１に表示する。具体的には、図３に示すように、画面表示部４は、撮像画像６０が透けて見えるように抽出情報５２が表示された吹き出し形６４の半透明領域６３である重畳イメージ６２をスーパーインポーズして、重畳画像６５を表示する。すなわち、重畳画像６５は、重畳イメージ６２が透けて撮像画像６０が見えるように表示される。また、画面表示部４は、２次元バーコード６１と該当する抽出情報５２を表示した重畳イメージ６２とを関連付けるように重畳画像６５を表示する。すなわち、画面表示部４は、２次元バーコード６１と抽出情報５２と関連付けイメージ（吹き出し形６４の半透明領域６３）とを液晶ディスプレイ９０１に表示する。

図４は、実施の形態１にかかる携帯電話機５０の画像表示方法を示すフローチャートである。

ユーザーが携帯電話機５０の操作部６から指示することにより、本実施の形態における携帯電話機５０のコード認識機能が開始される。

まず、カメラ１が動作を開始する（Ｓ１００）。

＜撮像工程＞
カメラ１が、画像を連続的に撮影して、撮影した撮像画像６０を示す撮像画像信号５１を出力する（Ｓ１０１）。

＜画像生成工程＞
次に、情報抽出部２がカメラ撮影画像内に２次元バーコード（情報）を認識したか否かを判別する（Ｓ１０２）。

情報抽出部２がカメラ撮影画像内に２次元バーコードを認識できない場合は、画像生成部３が、カメラ１が撮影した撮像画像を示す撮像画像信号５１をそのまま出力する（Ｓ１０５）。

情報抽出部２がカメラ撮影画像内に２次元バーコード（情報）を認識した場合は、情報抽出部２が、２次元バーコードが示す情報を抽出情報５２として抽出して出力する（Ｓ１０３）。すなわち、情報抽出部２が、カメラ１が出力した撮像画像信号５１を入力し、撮像画像信号５１から得られる撮像画像の少なくとも一部分の部分画像（２次元バーコード６１）を取得し、部分画像（２次元バーコード６１）からその画像に表れていない情報を抽出情報５２として抽出して、抽出した抽出情報５２を出力する（情報抽出工程）。

画像生成部３は、情報抽出部２が出力した抽出情報５２を入力して、カメラ撮影画像に抽出情報５２を重畳させた画像（重畳画像データ５３）を出力する。すなわち、画像生成部３が、カメラ１（撮像部）が出力した撮像画像信号５１と情報抽出部２が出力した抽出情報５２とを入力して、撮像画像信号５１と抽出情報５２とを用いて、撮像画像６０に抽出情報５２が重畳された重畳画像データ５３を生成して出力する画像生成処理を行う（Ｓ１０４）。

ここで、画像生成処理（Ｓ１０４）の処理内容について図５を用いて説明する。

図５は、実施の形態１にかかる携帯電話機５０の画像生成処理を示すフローチャートである。

画像生成部３は、半透明領域６３と文字や図形イメージ等で示された抽出情報５２とを含む重畳イメージ６２を生成する（Ｓ５０１）。また、画像生成部３は、抽出情報５２がいずれの２次元バーコードから抽出された抽出情報５２であるかを視覚的に判別するために、抽出情報５２と該当する２次元バーコード６１とを関連付けるための関連付けイメージを生成する（Ｓ５０２）。さらに、画像生成部３は、抽出情報５２を含む半透明領域６３からなる重畳イメージ６２と関連付けイメージとを撮像画像６０に重畳した重畳画像データ５３を生成して出力する（Ｓ５０３）。

＜画像表示工程＞
画像表示部４は、画像生成部３が生成した重畳画像データ５３入力して、液晶ディスプレイ９０１に表示する（Ｓ１０６）。すなわち、画像表示部４が、画像生成部３から出力された重畳画像データ５３を入力して、撮像画像６０に抽出情報５２が重畳された重畳画像６５を液晶ディスプレイ９０１に表示する。

＜終了検出工程＞
制御部５が、ユーザーからの終了指示を検出したかを判断する（Ｓ１０７）。制御部５が、終了指示を検出した場合は、処理を終了する。制御部５が、終了指示を検出していない場合は、Ｓ１０１に処理が戻る。

図６は携帯電話機にて本実施の形態を実施した場合の表示画像例である。１０，１１は情報源である。本実施の形態では、建物の壁面に配置された情報源１０や情報源１１等で示される２次元バーコードを想定している。１２は情報源１０を壁面に持つ建物Ａ、１３は同じく情報源１１を壁面に持つ建物Ｂである。携帯電話機５０のカメラ１で２次元バーコードを認識していない場合は図３（ａ）のように通常のカメラ画像表示である。

カメラ１を建物Ａ１２に向け、情報源１０（２次元バーコード６１）を認識すると、図３（ｂ）のように、情報源１０（２次元バーコード６１）から取得した抽出情報５２をカメラ画像（撮像画像６０）上に重畳して表示する。

また、カメラを建物Ｂ１３に向け、情報源１１（２次元バーコード６１ａ）を認識すると、図３（Ｃ）のように情報源１１（２次元バーコード６１ａ）から取得した抽出情報５２ａをカメラ画像（撮像画像６０）上に重畳して表示する。この間、カメラ画像は途切れることなく連続的にリアルタイムで表示しつづける。

本実施の形態では、情報端末装置１００の一例として携帯電話機５０を用いて説明したが、情報端末装置１００とは、例えば、携帯電話端末、ＰＨＳ（登録商標）（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）等の携帯情報端末でもよく、画像を表示する表示装置とカメラ等の撮像部とを有していればよい。あるいは、画像を表示する表示装置を備えた情報端末装置であって、外部インタフェース等でカメラ等の撮像部と接続されている情報端末装置でも構わない。

以上のように、実施の形態１にかかる情報端末装置１００は、画像を連続的に取得することが可能な撮像部（カメラ１）と、撮像部（カメラ１）で撮影した画像を表示する画像表示部４を備えた情報端末装置において、当該撮像部（カメラ１）で撮影した画像から情報を抽出する情報抽出部２と、撮像装置で撮影した画像上に抽出した情報を重畳した画像を生成する画像生成部３と、当該画像生成部３にて生成された画像を表示する画像表示部４を備えたことを特徴とする。

また、実施の形態１にかかる情報端末装置１００は、画像から抽出する情報が１次元もしくは２次元バーコードであることを特徴とする。

また、実施の形態１にかかる情報端末装置１００は、撮像装置で撮影した画像上に抽出した情報が重畳された画像を保存することが可能であることを特徴とする。

このように、本実施の形態によれば、携帯電話機５０は、コード認識機能が２次元バーコード６１を認識すると、２次元バーコード６１の示す抽出情報５２を該当する２次元バーコード６１に関連付けて撮像画像６０に重畳した重畳画像６５を表示するので、ユーザーは、どの２次元バーコードの情報であるかを特定することができるという効果を奏する。また、２次元バーコードの情報を表示しながらカメラ画像は途切れることがないので、ユーザーが連続的に２次元バーコード等の情報を取得するときに、キーを押してコード認識機能を再開し再度読み取りをする必要なく、使い勝手が向上するという効果を奏する。

実施の形態２．
実施の形態２では、基本的な機能ブロック及び処理動作は実施の形態１と同様であるが、携帯電話端末５０の液晶ディスプレイ９０１に表示する重畳画像６５の関連付けイメージのバリエーション（他の例）について説明する。

図７は、実施の形態２における重畳画像６５の関連付けイメージの他の例を示した図である。

図７（ａ）は、２次元バーコード６１と抽出情報５２を表示した半透明領域６３からなる重畳イメージ６２とを矢印６４１（関連付けイメージ）で関連付けた場合の重畳画像６５である。

図７（ｂ）は、抽出情報５２を表示した半透明領域６３からなる重畳イメージ６２を液晶ディスプレイ９０１の下部に配置して、抽出情報５２に関連する２次元バーコード６１を強調イメージ６４２で強調して関連付けた場合を示した図である。ここでは、強調イメージ６４２として、該当する２次元バーコード６１に色つきの半透明の丸枠を付け、さらに、その丸枠に矢印を付したイメージで強調している。この場合は、重畳イメージ６２を液晶ディスプレイ９０１の下部に寄せて配置するので、半透明領域６３は半透明あるいは透明でなくても構わない。したがって、ユーザーにとって抽出情報５２が読みやすくなる。また、重畳イメージ６２を寄せて配置する位置は、下部に限らず、上部でも左右どちらかの側部でも構わない。

図７（ｃ）は、２次元バーコード６１と抽出情報５２を表示した半透明領域６３からなる重畳イメージ６２とを関連付けるために、２次元バーコード６１に重畳イメージ６２の一部分を重ね合わせて表示した重なり部分６４３を設けた場合を示した図である。

実施の形態２にかかる携帯電話機５０は、図７のような関連付けイメージのバリエーションを備えており、ユーザーは、好みや使い勝手に応じて関連付けイメージのバリエーションを選択することを可能としてもよい。

このように、実施の形態２における携帯電話機５０によれば、ユーザーの使い勝手や利便性がより向上するという効果を奏する。

以上のように、実施の形態１〜２の説明において、携帯電話機５０におけるカメラ１（撮像部）、情報抽出部２、画像生成部３、画像表示部４は、それぞれ独立した機能ブロックとして構成されているが、ひとつの機能ブロックとしてもよい。あるいは、情報抽出部２と画像生成部３とをまとめてひとつの機能ブロックとし、カメラ１（撮像部）、画像表示部４を独立したの機能ブロックとしてもよい。あるいは、これらの機能ブロックを、他のどのような組み合わせで構成しても構わない。

実施の形態における情報端末装置１００のハードウェア構成の一例を示す図である。 実施の形態１における携帯電話機５０の機能ブロック図である。 実施の形態１における携帯電話機５０の画像表示方法による重畳画像作成方法の一例を示す図である。 実施の形態１にかかる携帯電話機５０の画像表示方法を示すフローチャートである。 実施の形態１にかかる携帯電話機５０の画像生成処理を示すフローチャートである。 携帯電話機５０にて本実施の形態１を実施した場合の表示画像例である。 実施の形態２における重畳画像６５の関連付けイメージの他の例を示した図である。

符号の説明

１ カメラ、２ 情報抽出部、３ 画像生成部、４ 画像表示部、５ 制御部、６ 操作部、７ 音響部、８ 記憶部、９ 通信部、１０，１１ 情報源、１２ 建物Ａ、１３ 建物Ｂ、２１ バーコード検出部、２２ バーコード情報抽出部、５０ 携帯電話機、５１ 撮像画像信号、５２，５２ａ 抽出情報、５３ 重畳画像データ、５４ 撮像画像データ、６０ 撮像画像、６１，６１ａ ２次元バーコード、６２ 重畳イメージ、６３ 半透明領域、６４ 吹き出し形、６５ 重畳画像、６４１ 矢印、６４２ 強調イメージ、６４３ 重なり部分、１００ 情報端末装置、９０１ 液晶ディスプレイ、９０２ キーボード、９０３ マウス、９０４ タッチパネル、９１１ ＣＰＵ、９１２ バス、９１３ ＲＯＭ、９１４ ＲＡＭ、９１５ 通信ボード、９１６ フラッシュメモリ、９２１ ＯＳ、９２２ ウィンドウシステム、９２３ プログラム群、９２４ ファイル群、９３１ スピーカー、９３２ マイク。

Claims (6)

1. 画像を連続的に撮影して撮像画像信号を出力する撮像部と、
   撮像部が出力した撮像画像信号を入力し、撮像画像信号から得られる撮像画像の少なくとも一部分の部分画像を取得し、部分画像からその画像に表れていない情報を抽出情報として抽出して、抽出した抽出情報を出力する情報抽出部と、
   撮像部が出力した撮像画像信号と、情報抽出部が出力した抽出情報とを入力して、撮像画像信号と抽出情報とを用いて、撮像画像に抽出情報が重畳された重畳画像データを生成して出力する画像生成部と、
   画像生成部から出力された重畳画像データを入力して、撮像画像に抽出情報が重畳された重畳画像を表示する画像表示部と
   を備えたことを特徴とする情報端末装置。
2. 上記情報抽出部は、
   撮像画像から１次元バーコードと２次元バーコードとの何れかのバーコードを検出して部分画像として取得するバーコード検出部と、
   バーコード検出部が検出したバーコードからバーコードが示す情報を抽出情報として抽出するバーコード情報抽出部と
   を備えたことを特徴とする請求項１の情報端末装置。
3. 情報端末装置は、さらに、画像生成部が生成した重畳画像データを保存する記憶部を備えたことを特徴とする請求項１の情報端末装置。
4. 上記画像生成部は、透明領域と半透明領域との少なくともいずれかと、抽出情報とを含む重畳イメージを生成して、重畳イメージを撮像画像にスーパーインポーズした重畳画像データを生成して出力し、
   画像表示部は、重畳イメージが透けて撮像画像が見えるようにスーパーインポーズされた重畳画像を表示することを特徴とする請求項１の情報端末装置。
5. 上記画像生成部は、抽出情報がいずれの部分画像から抽出された抽出情報であるかが視覚的に判別できる関連付けイメージを生成して、抽出情報と関連付けイメージを撮像画像に重畳した重畳画像データを生成して出力し、
   画像表示部は、部分画像と抽出情報と関連付けイメージとを含む重畳画像を表示することを特徴とする請求項１の情報端末装置。
6. 情報端末装置の画像表示方法において、
   撮像部が、画像を連続的に撮影して撮像画像信号を出力する撮像工程と、
   情報抽出部が、撮像部が出力した撮像画像信号を入力し、撮像画像信号から得られる撮像画像の少なくとも一部分の部分画像を取得し、部分画像からその画像に表れていない情報を抽出情報として抽出して、抽出した抽出情報を出力する情報抽出工程と、
   画像生成部が、撮像部が出力した撮像画像信号と情報抽出部が出力した抽出情報とを入力して、撮像画像信号と抽出情報とを用いて、撮像画像に抽出情報が重畳された重畳画像データを生成して出力する画像生成工程と、
   画像表示部が、画像生成部から出力された重畳画像データを入力して、撮像画像に抽出情報が重畳された重畳画像を表示する画像表示工程と
   を備えたことを特徴とする画像表示方法。
   
   

Images