JP2008085555A - Information display device, display control method and display control program - Google Patents
Information display device, display control method and display control program Download PDFInfo
- Publication number
- JP2008085555A JP2008085555A JP2006262078A JP2006262078A JP2008085555A JP 2008085555 A JP2008085555 A JP 2008085555A JP 2006262078 A JP2006262078 A JP 2006262078A JP 2006262078 A JP2006262078 A JP 2006262078A JP 2008085555 A JP2008085555 A JP 2008085555A
- Authority
- JP
- Japan
- Prior art keywords
- information
- display
- data
- distance
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、情報表示装置、表示制御方法、及び、表示制御プログラム関し、詳しくは、光通信に用いられる情報表示装置、表示制御方法、及び、表示制御プログラムに関する。 The present invention relates to an information display device, a display control method, and a display control program, and more particularly to an information display device, a display control method, and a display control program used for optical communication.
光通信技術の一つとして、可視光通信等の光空間伝送を利用した情報の伝送技術としては、たとえば、下記の特許文献1に記載されたものが知られている。以下、この文献記載の技術を従来技術という。この従来技術の要旨は、撮像手段によって撮像された撮影画像を時系列的に記憶すると共に、その記憶された画像から特定の画像領域を切り出し、切り出した画像領域の時系列的な輝度変化から情報を抽出して、その抽出された情報を前記の撮影画像に重畳して表示するというものである。
As one of optical communication technologies, for example, a technology described in
撮像手段によって撮像された撮影画像には、任意の被写体と一緒に、人の目に分からない程度の早い周期で点滅する光源が写り込んでいる。上記の“情報”は、この光源の点滅パターンによって送信されたものである。 The photographed image captured by the imaging means includes a light source that blinks at an early cycle that is not visible to the human eye together with an arbitrary subject. The above “information” is transmitted by the blinking pattern of the light source.
この従来技術によれば、たとえば、店頭に並べられた商品または市中の広告看板などに上記の光源を併設し、それらの商品や広告に適合した内容の情報を、その光源の点滅パターンによって送信することにより、たとえば、デジタルカメラ等の受信端末を利用して、それらの商品や広告看板などの被写体と一緒に当該情報を重畳表示することができる。 According to this conventional technology, for example, the above-mentioned light source is attached to a product arranged in a store or an advertisement billboard in a city, and information on contents suitable for the product or advertisement is transmitted by a blinking pattern of the light source. By doing so, for example, using a receiving terminal such as a digital camera, it is possible to superimpose and display the information together with subjects such as those products and advertisement signs.
しかしながら、上記の従来技術は、単に受信した情報と被写体とを一緒に表示するものに過ぎないので、たとえば、受信端末の撮影画角内に、光源(情報送信元)が存在した場合、送信された複数の情報とが共に表示されることとなる。このため、小さなディスプレイを備える携帯可能な小型の情報端末では、撮像された光源と情報との対応を確認することが困難になり、所望の情報を見つけ出せなくなるという問題点がある。 However, the above prior art is merely for displaying received information and a subject together. For example, when a light source (information transmission source) is present within a photographing field angle of a receiving terminal, the information is transmitted. A plurality of pieces of information are displayed together. For this reason, it is difficult for a small portable information terminal having a small display to check the correspondence between the imaged light source and information, and it is difficult to find desired information.
そこで、本発明の目的は、情報を表示する際の可読性改善を図るようにした情報表示装置、表示制御方法、及び、情報表示プログラムを提供することにある。 SUMMARY OF THE INVENTION An object of the present invention is to provide an information display device, a display control method, and an information display program that improve the readability when displaying information.
請求項1に記載の発明は、撮像手段と、表示手段と、前記撮像手段を連続的に駆動させることによって撮像された撮像面から所定の輝度を有する領域を検出する領域検出手段と、この領域検出手段によって検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、前記表示手段に表示される第2の情報とを取得する情報取得手段と、前記撮像面における前記領域の面積、結像距離、および、前記情報取得手段によって取得された第1の情報に基づいて、当該装置と前記物体との距離を算出する距離算出手段と、この距離算出手段によって算出された距離に基づいて、前記第2の情報の前記表示手段への表示態様を制御する制御手段とを備えたことを特徴とする
請求項2に記載の発明は、請求項1記載の発明において、前記制御手段は、前記撮像手段によって撮像された画像とともに、前記第2の情報を表示するよう制御することを特徴とする。
請求項3に記載の発明は、請求項1記載の発明において、前記制御手段は、前記撮像手段によって撮像された画像に含まれる前記物体の画像に関連付けて前記第2の情報を表示するよう制御することを特徴とする。
請求項4に記載の発明は、請求項1乃至3の何れかに記載の発明において、前記表示手段を照光する照光手段と、この照光手段の照光輝度を調整する調整手段と、前記情報取得手段によって取得された第2の情報を記憶する情報記憶手段と、この情報記憶手段に記憶された第2の情報を変調する変調手段と、この変調手段によって変調された第2の情報に基づいて前記照光手段の照光輝度を調整するよう制御する輝度制御手段とを更に備えたことを特徴とする。
請求項5に記載の発明は、撮像部を連続的に駆動させることによって撮像された撮像面から所定の輝度を有する領域を検出する領域検出ステップと、この領域検出ステップにて検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、表示部に表示される第2の情報とを取得する情報取得ステップと、前記撮像面における前記領域の面積、結像距離、および、前記情報取得ステップにて取得された第1の情報に基づいて、前記物体への距離を算出する距離算出ステップと、この距離算出ステップにて算出された距離に基づいて、前記第2の情報の前記表示部への表示態様を制御する制御ステップとからなることを特徴とする。
請求項6に記載の発明は、コンピュータを、撮像部を連続的に駆動させることによって撮像された撮像面から所定の輝度を有する領域を検出する領域検出手段、この領域検出手段によって検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、表示部に表示される第2の情報とを取得する情報取得手段、前記撮像面における前記領域の面積、結像距離、および、前記情報取得手段によって取得された第1の情報に基づいて、前記物体への距離を算出する距離算出手段、この距離算出手段によって算出された距離に基づいて、前記第2の情報の前記表示部への表示態様を制御する制御手段として機能させることを特徴とする。
According to the first aspect of the present invention, there is provided an image pickup means, a display means, an area detection means for detecting an area having a predetermined luminance from an image pickup surface imaged by continuously driving the image pickup means, and the area. Information acquisition for acquiring first information on the size of an object corresponding to the region and second information displayed on the display unit from a temporal change in luminance in the region detected by the detection unit. A distance calculating unit that calculates a distance between the device and the object based on the area, the imaging distance of the region on the imaging surface, and the first information acquired by the information acquiring unit; The invention according to
According to a third aspect of the present invention, in the first aspect of the present invention, the control unit controls the second information to be displayed in association with the image of the object included in the image captured by the imaging unit. It is characterized by doing.
The invention according to claim 4 is the invention according to any one of
The invention according to claim 5 is an area detection step for detecting an area having a predetermined luminance from the imaging surface imaged by continuously driving the imaging unit, and an area detected by the area detection step. An information acquisition step of acquiring first information related to the size of the object corresponding to the region and second information displayed on the display unit from a temporal change in luminance, and the region on the imaging surface The distance calculation step for calculating the distance to the object based on the area, the imaging distance, and the first information acquired in the information acquisition step, and the distance calculated in the distance calculation step And a control step for controlling a display mode of the second information on the display unit.
According to a sixth aspect of the present invention, there is provided a region detecting means for detecting a region having a predetermined luminance from an image pickup surface picked up by continuously driving the image pickup unit of the computer, and a region detected by the region detecting means. Information acquisition means for acquiring first information on the size of an object corresponding to the region and second information displayed on a display unit from a temporal change in luminance of the region, and the region on the imaging surface On the basis of the area, the imaging distance, and the distance information calculated based on the first information acquired by the information acquisition means, the distance calculated by the distance calculation means, It is made to function as a control means for controlling the display mode of the second information on the display unit.
本発明によれば、連続的に撮像された撮像面から所定の輝度を有する領域を検出し、検出された領域における輝度の時間的な輝度変化から、この領域に対応する物体の大きさに関する第1の情報と、表示される第2の情報とを取得し、撮像面におけるこの領域の面積、結像距離、および、取得された第1の情報に基づいて、この物体への距離を算出する。そして、算出された距離に基づいて、第2の情報の表示態様を制御するので、情報を表示する際の可読性改善を図ることができる。 According to the present invention, an area having a predetermined luminance is detected from an imaging surface that has been continuously imaged, and a temporal change in luminance in the detected area is detected based on a temporal change in the luminance of the object corresponding to this area. 1 information and 2nd information to be displayed are acquired, and the distance to the object is calculated based on the area of the region on the imaging surface, the imaging distance, and the acquired first information. . And since the display mode of 2nd information is controlled based on the calculated distance, the readability improvement at the time of displaying information can be aimed at.
以下、撮像機能を備えた情報端末への適用を例にして、図面を参照しながら説明する。 Hereinafter, an example of application to an information terminal having an imaging function will be described with reference to the drawings.
<原理説明>
図1は、本実施形態の適用の一例を示すデジタルカメラの構成図である。この図において、デジタルカメラ10は、CPU11やROM12及びRAM13並びに不図示の各種周辺回路等を含む典型的には1チップ化されたマイクロプロセッサからなる中央制御部14と、この中央制御部14の周りに適宜に配置された、デジタルカメラ10の動作に必要な、少なくとも、以下の各部を備えて構成されている。
<Principle explanation>
FIG. 1 is a configuration diagram of a digital camera showing an example of application of the present embodiment. In this figure, a
撮像部15は、撮影レンズや絞り機構、焦点合わせ機構、及び、ズーム機構などを含む光学系16と、CCDセンサまたはCMOSセンサなどの二次元イメージセンサからなる撮像デバイス17とで構成される。撮像部21の動作(絞りの大きさやズーム倍率、つまり撮影画角αの調整並びに焦点合わせ、及び、撮像デバイス17の露光並びに読み出し動作)は、中央制御部14とオートフォーカス制御部18からの撮影動作指示を受けた撮像制御部19からのコントロールによって制御される。中央制御部14からの撮影動作指示は、撮影構図確認用(いわゆるスルー画像用)または動画撮影用の所定フレームレート(たとえば、毎秒数十乃至は数百枚のフレームレート)のフレーム画像読み出し動作指示、高解像度の静止画撮影動作指示、並びに、それらの動作に必要な絞り値設定やズーム倍率設定等の事前動作指示などであり、また、オートフォーカス制御部18からの撮影動作指示は、光学系16の合焦(ピント合わせ)動作指示である。
The
撮像部21からは、中央制御部14からの撮影動作指示に応答して、撮影構図確認用や動画用のフレーム画像が上記のフレームレートで周期的に読み出され、あるいは、高解像度の静止画フレーム画像が読み出される。これらのフレーム画像は、画像処理部21において、デジタル信号に変換されると共に、所要の画像処理(たとえば、ガンマ補正処理等)が施された後、FIFOバッファ22を介して中央制御部14に取り込まれる。
In response to a shooting operation instruction from the
操作部23は、デジタルカメラ10のユーザ操作用入力インターフェースに必要な各種操作子、たとえば、電源スイッチ、画像撮影と画像再生のモード切替スイッチ、静止画撮影や動画撮影を行うためのシャッタボタン、各種設定メニューを表示するためのメニューボタン、そのメニュー項目を選択したり、画像再生モード時に再生を希望する画像を選択したりするための選択ボタン等を含む。
The
表示制御部24は、中央制御部14から適宜に出力される様々な表示データ、たとえば、スルー画像用示データ、メニュー画面用表示データ、画像の再生画面用表示データなどを所定の表示形式に変換して、液晶ディスプレイなどの平面表示デバイスで構成された表示部25に出力する。なお、この表示部25は、タッチパネル26付きのものであり、タッチ検出部27は、タッチパネル26への指またはペン等のタッチ座標を検出して、その検出結果を中央制御部14に出力する。
The
画像記憶部28は、フラッシュメモリ、ハードディスクまたは光ディスク等の不揮発性(電源をオフにしてもその記憶内容を失わない)の大容量記憶装置によって構成されており、主に、このデジタルカメラ10で撮影された画像を蓄積保存するために用いられる。なお、蓄積保存される各画像は、たとえば、JPEG形式等の圧縮ファイル、または、非圧縮の生データファイル(いわゆるRAWファイル)であり、また、それら画像の保存領域は、ファイルシステムにおけるルート直下であってもよいし、あるいは、そのルート直下に適宜に作成された1階層ないしは多階層構造のフォルダであってもよい。加えて、この画像記憶部28は、固定型であってもよく、あるいは、デジタルカメラ10から取り外して、たとえば、不図示のパーソナルコンピュータに装着可能な汎用形式のメモリデバイスであってもよい。
The
外部インターフェース29は、たとえば、USBやIEEE1394などの汎用プロトコルに対応したデータ入出力部であり、この外部インターフェース29を介し、必要に応じて、不図示のパーソナルコンピュータ等との間で撮影済み画像の転送(画像記憶部28に蓄積保存されている画像をパーソナルコンピュータに転送する)や読み込み(パーソナルコンピュータから画像記憶部28に画像を読み込む)を行うことができるものである。
The
電源部30は、充電式の二次電池あるいは使い捨て型の一次電池を含み、中央制御部14をはじめとした、デジタルカメラ10の各部の動作に必要な電源電圧を供給する。
The
方位センサ31及び仰角センサ32は、いずれも、このデジタルカメラ10の撮影方向(光学系16の光軸の向き)を検出するものであり、たとえば、方位センサ31は磁北を0度とした方位を検出し、仰角センサ32は水平を0度とした仰角(または俯角)を検出する。
The
ここで、図示の被写体20は人物を模しているが、これは説明のための一例に過ぎない。重要な点は、この被写体20の位置に、輝度変調をかけた任意のデータ(詳細は後述する)を光で送信する発光体33が設けられていることにある。詳細は後述するが、デジタルカメラ10は、この発光体33を含むイメージを時系列的に受光して取得することにより、そのイメージに含まれる測定対象として、発光体33の輝度変調領域に含まれるデータを復元し、受光したイメージと復元されたデータとに基づいて発光体33までの距離Dを測定して取得することができるようになっている。
Here, although the illustrated
図2は、発光体33の構成図である。この図において、発光体33は、可視光領域の光を発射する光源34、送信すべきデータを格納するデータメモリ35、このデータメモリ35に格納されるデータを変調し、その変調情報で光源34の発光輝度を制御する発光制御部36、及び、所定形状且つ所定サイズの発光窓37を備える。さらに、データメモリ35は、任意の情報を保持するガイドデータメモリ351と、発光窓37の形状(ここでは便宜的に“円形”とするが、矩形であってもよく、あるいはその他の形状であってもよい)データや発光窓37のサイズデータ(ここでは円形であるから直径“R”)並びに必要であれば発光体33の位置(緯度経度及び高度)データを保持する自己サイズデータメモリ352とを備える。
FIG. 2 is a configuration diagram of the
また、発光制御部36は、後述の検出・捕捉用プリアンブルデータ(測定用)と検出・捕捉用プリアンブルデータ(データボディ用)との2種類のプリアンブルデータと、互いに異なる二種類の輝度変化パターン(以下、第1パターン系列SAと第2パターン系列SB)とを保持するパターンデータメモリ361と、タイミングジェネレータ362と、制御部363とを備えている。
The light
タイミングジェネレータ362は、所定周期の安定したクロック信号を発生する。このクロック信号は、デジタルカメラ10の撮像デバイス17のクロック信号と同期している。
The
制御部363は、タイミングジェネレータ362からのクロック信号に同期してパターンデータメモリ361、ガイドデータメモリ351、及び、自己サイズデータメモリ352に格納されているデータについて、順次、ビットデータを取り出し、そのビット値(“1”データか“0”データか)を判定して、“1”データであればパターンデータメモリ361から第1パターン系列SAを取り出す一方、“0”データであればパターンデータメモリ361から第2パターン系列SBを取り出し、それらの第1パターン系列SA又は第2パターン系列SBを光源34に出力する動作を、送信すべきデータのビット数だけ繰り返す。
The
光源34は、第1パターン系列SA、及び、第2パターン系列SBにおいて“1”に相当するタイミングでは発光し、“0”に相当するタイミングでは消灯(または輝度低減)するという点滅動作を行うことにより、発光窓37を介して時系列的に輝度変化を有する光Pを出力する。
The
なお、同図においては、発光体33を被写体20としての人物に所持させているが、たとえば、看板や案内板等の固定構造物または冒頭で説明した商品を被写体20とし、それらの看板や案内板等の固定構造物または冒頭で説明した商品ごとに発光体33を設けるようにしてもよい。この場合、それぞれの発光体33のデータメモリ35に記憶するデータは、設置されている建造物や店頭、或いは建造物や店頭の外部に備えられたサーバからLANなどのネットワークを介して逐次にダウンロードする仕組みになっていてもよい。また、光源34はパターン系列“1”、“0”で点滅動作を行うようにしていたが、パターン系列が多値のデータに及ぶ場合は、“点灯”、“消灯”のみではなく、多段階の輝度で発光させるようにしてもよい。
In the figure, the
上記のとおり、データメモリ35には、送信すべきデータとして少なくともこの発光体33の形状を示す形状データと、発光体33のサイズデータとが格納されている。たとえば、図2を用いて説明すれば、データメモリ35は、発光窓37の形状として“円形”を示す形状データ、又、そのサイズとして直径を示す、“R”をサイズデータとして夫々格納し、発光制御部36では、これらのデータを変調するようにしている。また、発光制御部36が行う、送信する形状データ、サイズデータの変調方法については、たとえば、上記の形状データ、及び、サイズデータを論理0と論理1からなる二値のデジタルデータとし、“0”データには、これに対応する時系列を伴った輝度変化パターン(第1パターン系列SA)を割当て、“1”データには、上記“0”データとは異なる時系列を伴った輝度変化パターン(第2パターン系列SB)を割当てるのが望ましい。これら二つの輝度変化パターンは、互いに同一の周期で変化し、且つ、商用電源にて規格化された周期や外乱光等、自然界に存在する周期とは異なる周期で変化するのが望ましい。
As described above, the
一方、デジタルカメラ10は、前記のとおりの構成(図1参照)を有しており、一般的なデジタルカメラとしての動作、すなわち、静止画や動画を撮影してその画像ファイルを画像記憶部28に蓄積保存する「撮影機能」と、必要に応じて、画像記憶部28に蓄積保存されている任意の画像ファイルを読み出して表示部25に再生表示する「再生機能」とを適宜に実行できることに加え、本実施形態特有の「測距機能」、つまり、被写体20の位置にある発光体33を含むイメージを時系列的に受光して取得することにより、そのイメージに含まれる測定対象として、発光体33の輝度変調領域に含まれるデータを復元し、受光したイメージと復元されたデータとに基づいて発光体33までの距離Dを測定して取得することができる機能を実行できるようになっている。
On the other hand, the
この「測距機能」は、主として、デジタルカメラ10の中央制御部14の機能で提供される。すなわち、デジタルカメラ10の中央制御部14は、デジタルカメラ10の各部の動作を制御するものであり、特に本実施の形態では、撮像デバイス17の取込周期制御、FIFOバッファ22に記憶されているデータの読み出し、撮像デバイス17の受光面17aに結像される発光体33の像の大きさと後述の信号復元手段14cによって復元された形状データ、サイズデータとに基づく発光体33までの距離Dの測定、及び、その測定結果を利用した様々な処理を制御する。
This “ranging function” is mainly provided by the function of the
図3は、デジタルカメラ10の中央制御部14のRAM13の記憶空間の一部と、その中央制御部14で実現されるいくつかの機能ブロックを示す概念図である。すなわち、(a)はデジタルカメラ10の中央制御部14のRAM13の記憶空間の一部であり、(b)はその中央制御部14で実現されるいくつかの機能ブロックである。これらの図において、RAM13の記憶空間は、結像距離データ格納部13a、結像歪み補正データ格納部13b、距離算出データテーブル格納部13c、検出データリスト格納部13e等の各領域を含み、中央制御部14は、パターンデータメモリ14a、信号領域検出手段14b、信号復元手段14c、ワークメモリ14d等の各機能を含む。
FIG. 3 is a conceptual diagram showing a part of the storage space of the
光学系16に含まれる撮影レンズは、たとえば、1枚の凸レンズから構成されており、光軸A(図2参照)を中心にして発光体33を含む画角αを後段の撮像デバイス17に結像させるために備えられる。撮像デバイス17は複数の撮像素子を規則的に配列したCCDやCMOSなどのイメージセンサで構成され、二次元で捕らえた発光体33の発光態様を、その受光面17aおける受光割合に基づくイメージとして電気信号に変換して出力するデバイスであり、中央制御部14の制御に基づいて所定のフレームレート(たとえば、30FPS)で出力する。なお、撮像デバイス17として用いられるデバイスは、発光体33の発光態様を二次元で取得できるものであればこれに限ることは無く、たとえば、複数の受光素子、たとえば、フォトダイオードを配列させた構成であってもよい。また、撮像デバイス17はCCDやCMOSなどのイメージセンサで構成しているため符号17aは撮像面と称するのが望ましいが、原理説明では受光面として説明するものとする。
The photographing lens included in the
ROM12は、中央制御部14のCPU11で実行される様々な制御プログラムを記憶し、RAM13は、それらの制御プログラムの実行エリアとして用いられる他、図3に示した各種データの格納部、たとえば、撮像デバイス17の受光面17aと光学系16に含まれる撮影レンズとの結像距離dを記憶するための結像距離データ格納部13aを備える。本実施の形態においては、光学系16に含まれる撮影レンズは一枚の凸レンズを固定設置しているが、光学ズームを備える撮像装置においては、レンズの移動に応じて結像距離が異なるケースがあるので、その場合は、レンズの位置調整により得られる結像距離や焦点距離を用いるのが望ましい。
The
信号復元手段14cは、中央制御部14の制御により撮像デバイス17から時系列的に出力される発光体33の発光態様を30FPSの周期で順次取り込み、それら周期的に取得された発光体33の発光態様に基づいて、輝度変調されたデータをデータメモリ35に格納されていたデータに復元する。たとえば、上記の変調方法で変調されていた場合、これとは逆の方法で復調して、形状データ、及び、サイズデータへ復元する。
The
パターンデータメモリ14aは、発光制御部36のパターンデータメモリ361と同様に検出・捕捉用プリアンブルデータ(測定用)と検出・捕捉用プリアンブルデータ(データボディ用)との2種類のプリアンブルデータと、互いに異なる二種類の輝度変化パターン(第1パターン系列SAと第2パターン系列SB)とを保持する。
Similar to the
信号領域検出手段14bは、FIFOバッファ22に保持されている複数フレームの画像信号から時系列的に輝度変化する画素が検出された際、この輝度変化と同じタイミングで輝度変化している画素群からなる画素領域を特定する機能を有する。信号復元手段14cは、FIFOバッファ22に保持されている複数フレームの画像信号から時系列的に輝度変化する画素が検出された際に、後続してFIFOバッファ22に順次バッファリングされるデータフォーマット38のビット長に相当するフレームデータから、検出された画素の輝度変化に応じた“1”、“0”のビットデータを出力し、さらに、これらのビットデータが、第1パターン系列SA、及び、第2パターン系列SBの何れかに一致しているか判断し、何れかに一致している場合、このパターンに対応するビットを出力し、出力されたビットからサイズデータ、位置データ、及び、ガイドデータに復元する処理を行う。ワークメモリ14dは上記特定された画素領域の撮像面(受光面17a)におけるイメージを保持する。
When a pixel whose luminance changes in time series is detected from a plurality of frames of image signals held in the
中央制御部14は、後述の処理によって得られた各データを一時的に記憶するRAM13を備えるとともに、信号復元手段14cにて復元されたデータを取り込み、そのデータに基づいて、測定モードに設定されていれば、発光体33までの距離測定と、デジタルカメラ10の現在位置測定とを実行し、それらの測定結果を表示部25に出力する一方、ガイドモードに設定されていれば、受光(撮像)により取得され、検出データリスト格納部13eのデータレコードに記憶されたガイドデータを表示部25に出力する。結像距離データ格納部13aは、上記原理説明における結像距離dを格納する。また、結像歪み補正データ格納部13bは、撮像デバイス17に結像されたイメージについて、光学系16の撮影レンズの特性による歪を補正するためのデータを格納する。
The
距離算出データテーブル格納部13cは、後述の原理説明における式(1)、(2)を格納する。現在位置データ格納部13dは、中央制御部14で求められた自己の位置情報を保持するためのものであり、検出データリスト格納部13eは、中央制御部14で演算処理された発光体33までの距離D、自己位置(座標や高度)、及び、受光することにより取得したガイドデータを保持するためのものである。
The distance calculation data
検出データリスト格納部13eは、撮像デバイス17から時系列的に出力される撮像面(受光面17a)から発光体33が検出された場合に、発光体33までの距離や位置(座標や高度)並びにガイドデータを格納するものであるが、本実施の形態においてはデータレコードの形で格納する。これは、たとえば、撮像面(受光面17a)から複数の発光体を検出した場合、各々の発光体について個別に格納するためである。
The detection data
ここで、距離の演算についてその原理を説明する。まず、上述の如くRは輝度変調されたデータを受光することによりサイズデータとして得られ発光体33の直径、dは結像距離であり、光学系16に含まれる撮影レンズによって受光できる範囲の最大角はαである。
Here, the principle of distance calculation will be described. First, as described above, R is obtained as size data by receiving luminance-modulated data, and the diameter of the
図4は、撮像デバイス17の受光面17aにおける結像イメージを示す図であり、この図に示すように、受光面17aの水平方向の長さをH、垂直方向の長さをV、発光体33の像を33aとし、像33aの直径をrとする。像33aの直径rと結像距離dとから角度βを求めることができる。
FIG. 4 is a diagram showing an image formed on the
なお、この図においては、発光体33の像33aの形を“円形”としているが、これは、先にも説明したとおり、説明の便宜上、発光体33の形状を円形としたからである。像33aの形は、発光体33の実際の形状に対応し、矩形であれば矩形に、または、その他の形状であれば、それに対応した形になる。
In this figure, the shape of the
図5は、距離Dの算出概念図である。この図に示すように、光学系16に含まれる撮影レンズの結像位置を対照とし、角度β、距離D、及び、R/2で形成される三角形と、角度β、距離d、及び、r/2で形成される三角形とが相似関係となることがわかる。したがって、これらの関係より三角関数式を用いることで距離Dを測定することができる。距離Dの算出の仕方は次式(1)、(2)の通りとなる。
D=(R/2)/{(tan(β/2))・・・・(1)
β=r/2d ・・・・(2)
FIG. 5 is a conceptual diagram of calculation of the distance D. As shown in this figure, the imaging position of the photographic lens included in the
D = (R / 2) / {(tan (β / 2)) (1)
β = r / 2d (2)
図6は、制御部363から光源34に出力され、光Pとして送信されるデータフォーマット38の一例を示す図である。データフォーマット38は、検出・捕捉用プリアンブルデータ部(測定用)38a、サイズデータ部38b、位置データ部38c、検出・捕捉用プリアンブルデータ部(ガイドデータ用)38d、及び、ガイドデータ部38eからなり、これらを1単位として、巡回的に出力される。
FIG. 6 is a diagram illustrating an example of a
検出・捕捉用プリアンブルデータ部(測定用)38aに格納されるデータは、デジタルカメラ10にて上記データフォーマット38を受光した際に、デジタルカメラ10側が測定モードを設定した際に検出するデータであり、このデータ部を受光することにより、発光体33までの距離や位置に関する演算について、所要の処理動作を実行させるためのものである。
The data stored in the detection / capture preamble data portion (for measurement) 38a is data detected when the
サイズデータ部38bに格納されるデータは、自己サイズデータメモリ352に格納されているデータのうち、発光窓37の形状(ここでは“円形”)データや発光窓37のサイズデータ“R”であり、デジタルカメラ10で、これらのデータに基づいて、発光体33までの距離を測定させるためのものである。
The data stored in the
位置データ部38cに格納されるデータは、自己サイズデータメモリ352に保持されているデータのうち、発光体33の位置(緯度経度及び高度)データであり、デジタルカメラ10は、このデータに基づいて、デジタルカメラ10から見た発光体33の方向及び自己位置を測定させるためのものである。
The data stored in the
検出・捕捉用プリアンブルデータ部(ガイドデータ用)38dに格納されるデータは、デジタルカメラ10にて上記データフォーマット38を受光した際に、デジタルカメラ10側がガイドモードを設定した際に検出するデータであり、このデータ部を受光することにより、ガイドデータ部38eに設定されたデータを復元して再生出力させる処理動作を実行させるためのものである。
The data stored in the detection / capture preamble data portion (for guide data) 38d is data detected when the
ガイドデータ部38eに格納されるデータは、ガイドデータメモリ351に格納されているデータであり、デジタルカメラ10では、このデータに基づいて、たとえば、経路案内や観光案内等のオプション処理を必要に応じて実行させるためのものである。
The data stored in the guide data section 38e is data stored in the
次に、本実施の形態における発光体33及びデジタルカメラ10を用いた具体的測定方法について説明する。
Next, a specific measurement method using the
図7は、本実施の形態におけるフローチャートを示す図である。このフローチャートは、大きく分けて、信号領域検出処理ブロックS1と、信号復元処理ブロックS2と、測定処理ブロックS3とからなる。 FIG. 7 is a diagram showing a flowchart in the present embodiment. This flowchart is roughly composed of a signal area detection processing block S1, a signal restoration processing block S2, and a measurement processing block S3.
まず、信号領域検出処理ブロックS1では、撮像デバイス17の撮像面(受光面17a)に結像されたイメージをフレームデータとして、まず、プリアンブルパターンのビット数に相当するフレーム数を順次FIFOバッファ22にバッファリングする(ステップS11)。そして、これら、バッファリングされた複数のフレームデータにおいて、輝度が変化している画素の存在の有無を判断する。詳細には、バッファリングされた複数のフレームデータにおいて、最大輝度が所定のピークを超えており、周期的に変化している画素が存在するか否かを判断することで、その画素から時系列的に輝度変調されたデータが送信されているか否かを判断する(ステップS12)。
First, in the signal area detection processing block S1, an image formed on the imaging surface (
輝度が変化している画素を検出できなければ後述のステップS14の処理を行い、ステップS11に戻るが、画素を検出した場合、パターンデータメモリ14aより、プリアンブルパターンデータ(測定用)とプリアンブルパターンデータ(ガイドデータ用)とを読み出し、これらのプリアンブルパターンと、上記検出された画素からの時系列的な輝度変化とを照合する(ステップS13)。照合した結果、いずれのプリアンブルパターンデータとも完全に一致しない場合は、今回の検出された画素からはデータを得られないものとして、FIFOバッファ22にバッファリングされたフレームデータを破棄し(ステップS14)、再びステップS11の処理に戻るが、いずれかのプリアンブルパターンデータに一致した場合(部分一致を含む)は、方位センサ27を駆動させて、撮像方向を取得し(ステップS15)、また、仰角センサ28を駆動させて撮像仰角(水平角度)γを取得する(ステップS16)。
If a pixel whose luminance has changed cannot be detected, the process of step S14 described later is performed, and the process returns to step S11. However, if a pixel is detected, preamble pattern data (for measurement) and preamble pattern data are detected from the
また、ステップS13において、いずれかのプリアンブルパターンデータに一致した場合、今回の検出された画素をデータを送信している画素と判定し、信号領域検出手段14bに対し、同じタイミングで輝度変化している画素群からなる画素領域を特定するよう制御する(ステップS17)。そして、ステップS15にて取得した撮像方向、ステップS16において取得した撮像仰角は、中央制御部14内のRAM13に一旦保持され、特定された画素領域については、信号領域検出手段14bのワークメモリ14dにそのイメージを格納する(ステップS18)。
In step S13, if any of the preamble pattern data matches, it is determined that the pixel detected this time is a pixel transmitting data, and the luminance of the signal
次に、信号復元処理ブロックS2について説明する。信号復元処理では、まず、信号領域検出処理ブロックS1のステップS17において特定された画素領域から、データフォーマット38のビット数に相当するフレームデータを順次取得し(ステップS21)、FIFOバッファ22に格納しつつ、信号復元手段14cに対して、この輝度変化している領域から “1”、“0”のビットデータに変換する処理、及び、この処理を経て得られたビットデータについて、第1パターン系列SA、第2パターン系列SBとの照合、ビット出力処理、及び、この出力されたビットから、サイズデータ、位置データ、及び、ガイドデータに復元する処理を行わせる(ステップS22)。そして、復元されたこれらのデータのうちサイズデータ及び位置データは、中央制御部14のRAM13に一旦記憶させ、ガイドデータは検出データリスト格納部13eのデータレコードに格納する(ステップS23)。
Next, the signal restoration processing block S2 will be described. In the signal restoration process, first, frame data corresponding to the number of bits of the
次に、測定処理ブロックS3について詳述する。
図8は、測定処理ブロックS3の動作フローチャートを示す図である。
Next, the measurement processing block S3 will be described in detail.
FIG. 8 is a diagram showing an operation flowchart of the measurement processing block S3.
測定処理ブロックS3では、まず、ワークメモリ14dに格納された画素領域のイメージを読み出し、この画素領域について発光体33の形状を特定し、測定軸を設定する(ステップS31)。次にこの測定軸上の各画素について重み付けを行い、画素領域に含まれる発光体の「像」の面積を決定する(ステップS32)。
In the measurement processing block S3, first, the image of the pixel area stored in the
具体的に「像」の測定軸、重み付け、面積の決定方法について説明する。
図9は、「像」の測定軸、重み付け、面積の決定方法の具体的説明図である。図9(a)において、撮像面(受光面17a)から順次得られたフレームデータには、最大輝度が所定のピークを超えており、周期的に変化している画素領域として、発光体33の像33aが候補として設定されるものとする。なお、この図においては、像33aが楕円になっているが、これは、発光体33を斜め45度の方向から見上げた(または見下げた)ことを想定しているからである。発光体33を正面から見た場合は、円形状の像33aとなることはもちろんである。
Specifically, a method for determining the measurement axis, weighting, and area of the “image” will be described.
FIG. 9 is a specific explanatory diagram of a method for determining the measurement axis, weighting, and area of “image”. 9A, in the frame data sequentially obtained from the imaging surface (
図9(b)の拡大図で説明すると、中央制御部14は、高さ277(9ドット)、幅223(5ドット)からなる像33aについて、最大輝度が所定のピークを越えているドットの一行、若しくは一列の内、最大輝度のピークを持つ画素を多く含む最長の列を測定軸として決定する。そして、この測定軸を中心に、周辺の各画素について、輝度に対応した重み付けを行う。たとえば、図9(b)について考えると、最も輝度の大きい画素の範囲224に対しては最大の重み値“1”を、その周辺範囲225に対しては重み値“0.6”を、更に、最外縁部の範囲226に対しては重み値“0.3”を夫々設定し、高さ277(9ドット)を測定軸として設定する。そして、これらの重み付けより画素の範囲224については“20”、画素の範囲225については7.2、画素の範囲226については、2.4を夫々算出することにより、「像」33aの面積は29.6となる。
Referring to the enlarged view of FIG. 9B, the
なお、測定軸、重み付けの決定方法、面積の算出方法はこれに限定されるものではなく、より正確に面積を決定できる方法があれば、他の手法を用いても可能である。 Note that the measurement axis, the weighting determination method, and the area calculation method are not limited thereto, and other methods can be used as long as there is a method that can determine the area more accurately.
このように、発光体の「像」の面積が決定すると、この像の形状について、結像歪み補正データ格納部13bから、光学系16に含まれる撮影レンズの特性に基づく歪み補正データを読み出して、そのデータを用いて当該歪みを補正し(ステップS33)、結像距離データ格納部13aから結像距離dを読み出して、測定軸と結像距離dとからβを算出する(ステップS34)。
As described above, when the area of the “image” of the light emitter is determined, the distortion correction data based on the characteristics of the photographing lens included in the
ステップS35にてβを算出すると、次にこのβを用いて、距離算出データテーブル格納部13cから前式(1)を読み出し、中央制御部14のRAM13に記憶されたサイズデータから、図5における距離Dを算出する(ステップS35)。なお、「像」33aの形状については円形を概ね45°付近から見た「楕円型」として設定されているため、上記ステップS24において「直径を“R”とした円形」として取得されたサイズデータは、上記設定された形状から、「対角√2Lからなる楕円形」として補正される。そして、この距離DとステップS31で求めた撮影仰角γより、次式(3)により、発光体33の直下までの距離D´(水平方向の距離)を算出する(ステップS36)。
D´=Dcosγ ・・・・(3)
When β is calculated in step S35, next, using the β, the previous equation (1) is read from the distance calculation data
D ′ = Dcosγ (3)
また、上記により算出された距離D´と、方位センサ27から取得したデジタルカメラ10の撮影方向、ステップS24にて取得した位置データより、当該デジタルカメラ10の位置を算出し(ステップS37)、これらの距離データD´、位置データを検出データリスト格納部13eのデータレコードに記憶させる(ステップS38)。
Further, the position of the
このようにして登録されたデータは、デジタルカメラ10において、以下のようにして利用することができる。
図10は、登録データの利用の一例を示すその概念図である。この図において、(a)は、デジタルカメラ10を測定モードにしたときの表示例であり、(b)は、デジタルカメラ10をガイドモードにしたときの表示例である。(a)において、表示部25の画面上には、発光体33までの距離情報(たとえば、“目標までの距離3m”)と、デジタルカメラ10の現在位置情報(たとえば、“あなたの位置 北緯35° 4625.75 東経139° 1843.69”)とが、画面コーナの吹き出し図形に囲まれて表示されている。また、(b)において、表示部25の画面上には、発光体33から送信された所定の案内情報(たとえば、“150m先に正面玄関”)が画面コーナの吹き出し図形に囲まれて表示されている。
The data registered in this way can be used in the
FIG. 10 is a conceptual diagram showing an example of use of registration data. In this figure, (a) is a display example when the
このように、本実施形態のデジタルカメラ10と発光体33との組み合わせによれば、発光体33までの測距表示や現在位置の表示及び道案内等を行うことができるが、これらに加えて、あるいは、これらとは別途に、さらに、その測距結果を利用して様々な「表示制御」を行うことができる点に特徴がある。以下、その表示制御への応用例を説明する。
As described above, according to the combination of the
<具体的応用例>
図11は、原理説明において発光体33に相当する可視光情報光源のうち、広告看板39を示す図である。この図において、この広告看板39は、ビルの屋上や壁面などに設置されたものであり、たとえば、多数のLEDをマトリクス状に配列して構成された自発光型の大型ディスプレイ(1辺の長さ数m)である。
<Specific application examples>
FIG. 11 is a diagram showing an
図12は、原理説明のデジタルカメラ10(図1参照)に相当する情報端末100の回路構成図を示すものである。この図において、図1の各回路と同じ機能・動作を行う回路については同一の符号を付し、その説明は省略するが、本具体的応用例にて詳述する情報端末100は、更に、情報記憶部40、バックライト41、及び、バックライト駆動制御部42を更に備える。また、外部インターフェイス部29は無線通信部を内包し、画像記憶部28、及び、情報記憶部40に記憶された内容を無線送信したり、逆に受信することが可能である。さらに、CPU11は、図2における発光制御部36としての機能を更に備える。
FIG. 12 shows a circuit configuration diagram of an
情報記憶部40は、ユーザによる操作部23を検出することにより入力、作成、もしくは編集されたアドレス帳データやメールデータを格納する他、図2におけるデータメモリ35におけるガイドデータメモリ351や、自己サイズデータメモリ361の記憶内容(詳細には、表示部25の形状や面積)に相当する情報を格納し、更には、後述する情報発信源から取得した各種情報も格納する。バックライト41は、表示部25を背面から照らす複数のLEDからなる光源である。
The
バックライト駆動制御部42は中央制御部14(CPU11)からの制御信号に基づき、バックライト41の輝度を調整する機能を有するものであり、ユーザの操作に基づいてバックライト41の輝度の強弱を調整する他、自らを発光体33として機能させる場合は、情報記憶部40から読み出され、変調された情報が入力されることにより、この入力された情報に基づいて、バックライト41の輝度を時系列的に変化させる機能も備える。尚、本具体的応用例においては、表示部25は液晶ディスプレイ(狭義には背面からの照光を必要とする透過型液晶ディスプレイ)を想定していたが、有機EL材料のような自発光機能を備えるものであっても良い。この場合、表示駆動部24がバックライト駆動制御部42としての機能・動作を有することになる。
The backlight
上記の説明により、広告看板39は、その明るさを任意の情報で変調することにより、可視光情報の発信源として利用することができる。また、情報端末100は可視光情報の受信装置としてのみならず、受信した可視光情報を発信する発信源としても利用することができる。なお、可視光情報の発信源としては、これ以外にも様々なもの(たとえば、交通信号機、天井灯、室内灯、街路灯、その他の灯具)が利用可能であるが、説明の混乱を避けるために、以下においては、図示の広告看板39、情報端末100を可視光情報の受信先、及び、可視光情報の発信源とする。
From the above description, the
図13は、広告看板39及び情報端末(情報発信側)100、並びに、情報端末(情報受信側)100の位置関係を示す図である。この図において、可視光情報の受信点、つまり、情報端末(情報受信側)100を構えている人物45の立ち位置を基準にして、近距離(たとえば、1m)と遠距離(たとえば、100m)の二つの可視光情報の発信源位置イ、ロが示されている。近距離位置イには情報端末(情報発信側)100を構えた人物46が存在し、遠距離位置ロにはビル47の屋上に設置された広告看板39が存在する。
FIG. 13 is a diagram showing a positional relationship between the
図14は、情報端末(情報受信側)100の表示部25の画面表示例を示す図であり、情報端末(情報受信側)100と情報発信源(この場合、広告看板39及び情報端末(情報発信側)100)との間の距離に応じた表示態様の制御を行わない場合(従来技術)の表示例である。すなわち、図示の例においては、表示部25に、近距離に位置する人物46、その人物46が構えた携帯電話機40、遠距離に位置するビル47、その屋上に設置された広告看板39の絵が写っていると共に、それらの可視光情報発信源(広告看板39及び情報端末(情報発信側)100)から送信された情報が、たとえば、吹き出し48、49に囲まれて表示されている。
FIG. 14 is a diagram showing a screen display example of the
これらの情報は、たとえば、情報端末(情報発信側)100からの情報については、“マイメッセージ!”というものであり、また、広告看板39からの情報については、“○○駅前ビル”というものである。ここで、注目すべき点は、これら二つの情報は共に同一の表示態様になっていることにある。つまり、文字サイズや文字色及び吹き出し48、49の形が同じになっていることにある。図示のように二つ程度の少ない情報であれば、特段に見にくくなるとはいえないものの、情報の数が増えるにつれて、画面上が乱雑になり、段々と見にくくなる(可読性が悪化する)。
For example, the information from the information terminal (information transmission side) 100 is “My Message!”, And the information from the
そこで、本実施形態においては、可視光通信の受信端末(ここでは、情報端末(情報受信側)100)と可視光通信の情報発信源(ここでは、広告看板39及び情報端末(情報発信側)100)との間の距離に応じて、受信した情報の表示態様を適切に制御することにより、表示情報の可読性改善を図るようにした。以下、そのことについて詳しく説明する。
Therefore, in the present embodiment, the visible light communication receiving terminal (here, the information terminal (information receiving side) 100) and the visible light communication information transmitting source (here, the
図15は、情報端末(情報受信側)100の表示部25の改善された画面表示例を示す図であり、受信端末(情報端末(情報受信側)100)と情報発信源(この場合、広告看板39及び情報端末(情報発信側)100)との間の距離に応じて表示態様の制御を行うようにした場合の表示例である。すなわち、図示の例においては、表示部25に、近距離に位置する人物46、その人物46が構えた携帯電話機40、遠距離に位置するビル47、その屋上に設置された広告看板39の絵が写っていると共に、それらの可視光情報発信源(広告看板39及び情報端末(情報発信側)100)から送信された情報が、たとえば、吹き出し50、51に囲まれて表示されている点で、上記の従来の表示例(図14)と同様であるが、以下の点で相違している。
FIG. 15 is a diagram illustrating an example of an improved screen display of the
すなわち、近距離に位置する情報端末(情報発信側)100からの情報(“マイメッセージ!”)については大きな文字サイズで表示する一方、遠距離に位置する広告看板39からの情報(“○○駅前ビル”)については小さな文字サイズで表示している点で相違する。このようにすると、各々の情報に対して視覚的な遠近感を与えることができるうえ、近い情報ほど文字サイズを大きくして目立つようにすることができ、また、遠い情報になるほど文字サイズを小さくして単に存在感を示す程度にすることができるから、とりわけ、複数の情報を表示する場合の可読性向上を図ることができる。ちなみに、この例では、情報の表示態様として文字サイズに着目しているが、これは一例に過ぎない。その他の表示態様、たとえば、文字色や文字フォント、ボーダ属性の有無などを制御してもよいし、あるいは、情報ごとの吹き出しの大きさ、背景色、枠線の色や太さ、さらには、吹き出しの透過度合いなどを制御してもよい。いずれにしても、近い情報ほど有益な情報と考えられるので、距離が近くなるほど情報が目立つようにすればよい。
That is, information (“My Message!”) From the information terminal (information transmission side) 100 located at a short distance is displayed in a large character size, while information from the
図16は、上記の改善表示画面例(図15)を得るための処理フローを示す図である。この処理フローにおいては、まず、情報発信源(この場合、広告看板39及び情報端末(情報発信側)100)からの情報検出の有無を判定する(ステップS41)。そして、情報の検出を判定すると、受信データリスト(図3の検出データリスト格納部13e)を参照し(ステップS42)、距離の近いデータを取り出す(ステップS43)。次いで、取り出したデータの数が所定の制限数nを超えているか否かを判定する(ステップS44)。ここで、所定の制限数nは、表示部25に表示可能な最大の情報表示数のことであり、たとえば、n=4である。
FIG. 16 is a diagram showing a processing flow for obtaining the above improvement display screen example (FIG. 15). In this processing flow, first, the presence / absence of information detection from the information transmission source (in this case, the
取り出したデータの数が所定の制限数nを超えていない場合は、原理説明において説明した距離測定方法によって取得した各々の情報発信源(この場合、広告看板39及び情報端末(情報発信側)100)までの距離(この場合、1mと100m)に応じて表示吹き出しサイズや文字サイズなどを決定し(ステップS45)、各々の吹き出し50、51を表示部25に表示する(ステップS46)。一方、取り出したデータの数が所定の制限数nを超えている場合は、検出データ領域に所定のマーキングを表示する(ステップS47)。
When the number of extracted data does not exceed the predetermined limit number n, each information transmission source (in this case, the
そして、いずれの場合も、全ての受信データの終わりを判定して(ステップS48)、終わりでなければ、ステップS42以降を繰り返し、終わりであれば、データ検出の判定ステップ(ステップS41)に復帰する。 In either case, the end of all received data is determined (step S48). If not, step S42 and subsequent steps are repeated. If the end is completed, the process returns to the data detection determination step (step S41). .
この処理フローによれば、近距離に位置する情報端末(情報発信側)100からの情報(“マイメッセージ!”)については大きな吹き出しや大きな文字サイズで表示する一方、遠距離に位置する広告看板39からの情報(“○○駅前ビル”)については小さな吹き出しや文字サイズで表示することができる。このため、各々の情報に対して視覚的な遠近感を与えることができるうえ、近い情報ほど文字サイズを大きくして目立つようにすることができ、また、遠い情報になるほど文字サイズを小さくして単に存在感を示す程度にすることができるから、とりわけ、複数の情報を表示する場合の可読性向上を図ることができる。 According to this processing flow, information (“My Message!”) From the information terminal (information transmission side) 100 located at a short distance is displayed in a large balloon or a large character size, while an advertising signboard located at a long distance is displayed. Information from “39” (“XX station building”) can be displayed in a small balloon or character size. For this reason, it is possible to give a visual perspective to each piece of information, and the closer the information, the larger the character size makes it stand out, and the farther the information, the smaller the character size. Since the degree of presence can be simply shown, it is possible to improve the readability especially when displaying a plurality of pieces of information.
加えて、この処理フローによれば、取り出したデータの数が所定の制限数nを超えている場合は、検出データ領域に所定のマーキングを付して表示部25に表示するので、大量の情報を受信した場合の表示の混乱を回避することができる。すなわち、吹き出しつきで表示できる最大数(n)を監視するので、受信した情報を全て表示して(または、画像にテキスト付加編集して)吹き出しで埋め尽くされることがないようにすることができる。
In addition, according to this processing flow, when the number of extracted data exceeds a predetermined limit number n, the detection data area is displayed with a predetermined marking on the
なお、距離による文字サイズの決定については、基本的に距離が遠くなるほど文字サイズを小さくすればよく、たとえば、5m以内では12ポイント、100m程度では6ポイントなどとし、あとは、検出領域の距離算出結果に応じて、直線補完で文字サイズを求めてもよい。または、前記のとおり、距離に応じて文字の色を変え(近いほど濃く、遠いほど薄く)たりしてもよい。あるいは、吹き出しの色の彩度や輝度を変え(遠いほど淡い色に、近いほど目立つ色に)てもよく、吹き出しの透明度を変え(遠いほど吹き出しを透明化して、目立たなくする)てもよい。このように、文字サイズのみならず、色や形などの表示態様を検出領域の測距結果により変化させるようにすると、検出距離に一致した情報提示ができるようになる。 In determining the character size based on the distance, the character size should basically be reduced as the distance increases. For example, the point size is set to 12 points within 5 m, 6 points within about 100 m, and the distance calculation of the detection area. Depending on the result, the character size may be obtained by linear interpolation. Alternatively, as described above, the color of the character may be changed according to the distance (darker as it is closer, thinner as it is farther away). Alternatively, the color saturation and brightness of the speech balloon may be changed (lighter as it is farther, and more conspicuous as it is closer), or the transparency of the speech may be changed (the farther away, the speech becomes transparent and less noticeable). . As described above, when not only the character size but also the display mode such as the color and the shape is changed according to the distance measurement result of the detection area, information matching the detection distance can be presented.
また、本具体的実施例によれば、情報端末100は、他の情報発信源(広告看板39や情報端末100)から取得した情報を自らが送信する情報発信源としても利用することができるので、大規模なシステムを必要とする無線通信と比較してトラフィックの増加や通信コストをかけることなく、広範囲に情報を伝送することができるようになる。
Further, according to this specific embodiment, the
なお、本実施の形態においては、情報端末100への適用を例にしたが、これに限らず、たとえば、カメラ付き携帯電話機やカメラ付き携帯情報端末などの電子カメラ一般に適用できることはもちろんである。
In the present embodiment, the application to the
10 デジタルカメラ
14 中央制御部
17 撮像デバイス
22 FIFOバッファ
25 表示部
33 発光体
39 広告看板
100 情報端末
DESCRIPTION OF
Claims (6)
表示手段と、
前記撮像手段を連続的に駆動させることによって撮像された撮像面から所定の輝度を有する領域を検出する領域検出手段と、
この領域検出手段によって検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、前記表示手段に表示される第2の情報とを取得する情報取得手段と、
前記撮像面における前記領域の面積、結像距離、および、前記情報取得手段によって取得された第1の情報に基づいて、当該装置と前記物体との距離を算出する距離算出手段と、
この距離算出手段によって算出された距離に基づいて、前記第2の情報の前記表示手段への表示態様を制御する制御手段と、
を備えたことを特徴とする情報表示装置。 Imaging means;
Display means;
Area detecting means for detecting an area having a predetermined luminance from an imaging surface imaged by continuously driving the imaging means;
First information on the size of an object corresponding to the region and second information displayed on the display unit are acquired from a temporal change in luminance in the region detected by the region detecting unit. Information acquisition means;
A distance calculating unit that calculates a distance between the device and the object based on the area of the region on the imaging surface, the imaging distance, and the first information acquired by the information acquiring unit;
Control means for controlling the display mode of the second information on the display means based on the distance calculated by the distance calculation means;
An information display device comprising:
この照光手段の照光輝度を調整する調整手段と、
前記情報取得手段によって取得された第2の情報を記憶する情報記憶手段と、
この情報記憶手段に記憶された第2の情報を変調する変調手段と、
この変調手段によって変調された第2の情報に基づいて前記照光手段の照光輝度を調整するよう制御する輝度制御手段と
を更に備えたことを特徴とする請求項1乃至3の何れかに記載の情報表示装置。 Illumination means for illuminating the display means;
Adjusting means for adjusting the illumination brightness of the illumination means;
Information storage means for storing second information acquired by the information acquisition means;
Modulation means for modulating the second information stored in the information storage means;
The luminance control means for controlling to adjust the illumination brightness of the illumination means based on the second information modulated by the modulation means, further comprising: Information display device.
この領域検出ステップにて検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、表示部に表示される第2の情報とを取得する情報取得ステップと、
前記撮像面における前記領域の面積、結像距離、および、前記情報取得ステップにて取得された第1の情報に基づいて、前記物体への距離を算出する距離算出ステップと、
この距離算出ステップにて算出された距離に基づいて、前記第2の情報の前記表示部への表示態様を制御する制御ステップと
からなることを特徴とする表示制御方法。 An area detection step of detecting an area having a predetermined luminance from an imaging surface imaged by continuously driving the imaging unit;
First information on the size of the object corresponding to the region and second information displayed on the display unit are acquired from the temporal luminance change in the region detected in the region detection step. An information acquisition step;
A distance calculating step of calculating a distance to the object based on the area of the region on the imaging surface, the imaging distance, and the first information acquired in the information acquiring step;
A display control method comprising: a control step of controlling a display mode of the second information on the display unit based on the distance calculated in the distance calculation step.
撮像部を連続的に駆動させることによって撮像された撮像面から所定の輝度を有する領域を検出する領域検出手段、
この領域検出手段によって検出された領域における輝度の時間的な輝度変化から、前記領域に対応する物体の大きさに関する第1の情報と、表示部に表示される第2の情報とを取得する情報取得手段、
前記撮像面における前記領域の面積、結像距離、および、前記情報取得手段によって取得された第1の情報に基づいて、前記物体への距離を算出する距離算出手段、
この距離算出手段によって算出された距離に基づいて、前記第2の情報の前記表示部への表示態様を制御する制御手段
として機能させることを特徴とする表示制御プログラム。 Computer
Area detecting means for detecting an area having a predetermined luminance from an imaging surface imaged by continuously driving the imaging unit;
Information for obtaining first information on the size of an object corresponding to the region and second information displayed on the display unit from a temporal change in luminance in the region detected by the region detecting means. Acquisition means,
A distance calculating means for calculating a distance to the object based on the area of the region on the imaging surface, the imaging distance, and the first information acquired by the information acquiring means;
A display control program that functions as a control unit that controls a display mode of the second information on the display unit based on the distance calculated by the distance calculation unit.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006262078A JP4178419B2 (en) | 2006-09-27 | 2006-09-27 | Information display device, display control method, and display control program |
EP07015216A EP1884798B1 (en) | 2006-08-03 | 2007-08-02 | Method for measuring distance to object |
US11/890,179 US7724353B2 (en) | 2006-08-03 | 2007-08-03 | Method for measuring distance to object |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006262078A JP4178419B2 (en) | 2006-09-27 | 2006-09-27 | Information display device, display control method, and display control program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008085555A true JP2008085555A (en) | 2008-04-10 |
JP4178419B2 JP4178419B2 (en) | 2008-11-12 |
Family
ID=39355970
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006262078A Active JP4178419B2 (en) | 2006-08-03 | 2006-09-27 | Information display device, display control method, and display control program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4178419B2 (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009290530A (en) * | 2008-05-29 | 2009-12-10 | Casio Comput Co Ltd | Information transmitting system, information decoding apparatus, method of annunciation and program |
JP2011055288A (en) * | 2009-09-02 | 2011-03-17 | Toshiba Corp | Visible light communication apparatus and data receiving method |
WO2011074172A1 (en) * | 2009-12-18 | 2011-06-23 | パナソニック株式会社 | Information display device, integrated circuit for display control, display control program, and display control method |
JP2013215003A (en) * | 2013-07-04 | 2013-10-17 | Casio Comput Co Ltd | Terminal, display control method, and program |
JP2014011609A (en) * | 2012-06-29 | 2014-01-20 | Nippon Telegr & Teleph Corp <Ntt> | Information transmission system, transmitter, receiver, information transmission method, and program |
US8913885B2 (en) | 2011-12-27 | 2014-12-16 | Casio Computer Co., Ltd. | Information provision system, server, terminal device, information provision method, display control method and recording medium |
US9154229B2 (en) | 2012-09-21 | 2015-10-06 | Casio Computer Co., Ltd. | Information processing system, information processing method, client device, and recording medium |
US9819414B2 (en) | 2014-12-26 | 2017-11-14 | Panasonic Intellectual Property Management Co., Ltd. | Lighting device and visible light communication system |
-
2006
- 2006-09-27 JP JP2006262078A patent/JP4178419B2/en active Active
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4552074B2 (en) * | 2008-05-29 | 2010-09-29 | カシオ計算機株式会社 | Information transmission system, information decoding apparatus, notification method, and program |
JP2009290530A (en) * | 2008-05-29 | 2009-12-10 | Casio Comput Co Ltd | Information transmitting system, information decoding apparatus, method of annunciation and program |
US8019227B2 (en) | 2008-05-29 | 2011-09-13 | Casio Computer Co., Ltd. | Information transmitting system, information decoding apparatus, informing method and recording medium |
US8538276B2 (en) | 2009-09-02 | 2013-09-17 | Kabushiki Kaisha Toshiba | Method and apparatus for visible light communication with image processing |
JP2011055288A (en) * | 2009-09-02 | 2011-03-17 | Toshiba Corp | Visible light communication apparatus and data receiving method |
US8803915B2 (en) | 2009-12-18 | 2014-08-12 | Panasonic Intellectual Property Corporation Of America | Information display device, integrated circuit for display control, display control program, and display control method |
JP5449401B2 (en) * | 2009-12-18 | 2014-03-19 | パナソニック株式会社 | Information display device, display control integrated circuit, display control program, and display control method |
WO2011074172A1 (en) * | 2009-12-18 | 2011-06-23 | パナソニック株式会社 | Information display device, integrated circuit for display control, display control program, and display control method |
US8913885B2 (en) | 2011-12-27 | 2014-12-16 | Casio Computer Co., Ltd. | Information provision system, server, terminal device, information provision method, display control method and recording medium |
JP2014011609A (en) * | 2012-06-29 | 2014-01-20 | Nippon Telegr & Teleph Corp <Ntt> | Information transmission system, transmitter, receiver, information transmission method, and program |
US9154229B2 (en) | 2012-09-21 | 2015-10-06 | Casio Computer Co., Ltd. | Information processing system, information processing method, client device, and recording medium |
JP2013215003A (en) * | 2013-07-04 | 2013-10-17 | Casio Comput Co Ltd | Terminal, display control method, and program |
US9819414B2 (en) | 2014-12-26 | 2017-11-14 | Panasonic Intellectual Property Management Co., Ltd. | Lighting device and visible light communication system |
Also Published As
Publication number | Publication date |
---|---|
JP4178419B2 (en) | 2008-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4178419B2 (en) | Information display device, display control method, and display control program | |
JP4258491B2 (en) | Information receiving apparatus, information transmission system, information receiving method, and information receiving program | |
US7724353B2 (en) | Method for measuring distance to object | |
US8913885B2 (en) | Information provision system, server, terminal device, information provision method, display control method and recording medium | |
US8827461B2 (en) | Image generation device, projector, and image generation method | |
JP2003179556A (en) | Information transmission method, information transmission system, imaging apparatus and information transmission method | |
JP2013042221A (en) | Communication terminal, communication method, marker device, and communication system | |
CN101641718A (en) | Image processing device, image processing method, and image processing system | |
JP2009267792A (en) | Imaging apparatus | |
JP7043681B2 (en) | Guidance method for autonomously movable devices using optical communication devices | |
US9215340B2 (en) | Display apparatus, display method, and computer-readable recording medium | |
JP4640483B2 (en) | Imaging apparatus and program | |
JP4210955B2 (en) | Imaging apparatus, imaging control method, and imaging control program | |
JP2002325200A (en) | Data presentation device | |
JP2009130725A (en) | Visible light communication system and optical receiving device therefor | |
JP5414379B2 (en) | Optical wireless communication apparatus, optical wireless communication method, and program | |
JP4507210B2 (en) | Information transmission system, receiving apparatus, and information decoding method | |
JP4576625B2 (en) | Information transmission system, imaging apparatus, and light reception control method | |
JP4735658B2 (en) | Receiving device and program | |
JP5921496B2 (en) | Terminal device, display control method, and program | |
JP2017228848A (en) | Video display system | |
JP6508730B2 (en) | Light emission marker device, marker detection device, transmission system, marker light emission method, marker detection method, and program | |
JP6222511B2 (en) | Information decoding system, information decoding method, and program | |
KR101541012B1 (en) | Image making and transmission device using Digital Information Display and method thereof | |
JP2005026933A (en) | Image input/output device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080730 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080812 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4178419 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110905 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120905 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130905 Year of fee payment: 5 |