JP2011113245A - 位置認識装置 - Google Patents
位置認識装置 Download PDFInfo
- Publication number
- JP2011113245A JP2011113245A JP2009268378A JP2009268378A JP2011113245A JP 2011113245 A JP2011113245 A JP 2011113245A JP 2009268378 A JP2009268378 A JP 2009268378A JP 2009268378 A JP2009268378 A JP 2009268378A JP 2011113245 A JP2011113245 A JP 2011113245A
- Authority
- JP
- Japan
- Prior art keywords
- video
- unit
- database
- acquisition unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Navigation (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】画像照合の処理量軽減及び処理時間の短縮を図る。
【解決手段】本発明は、映像取得部1から得た映像を表示部6に表示する際、前記映像取得部1から得られた映像とデータベース3に登録された画像情報を処理部2で比較照合する装置であり、前記映像取得部1から得られた映像と前記データベース3に登録された画像情報を前記処理部2で比較照合する時の日時及と気象条件を時刻気象情報取得部5から取得し、優先度判定部4は日時及と気象条件組み合わせの何れか、又は、位置及び日時及び気象条件の組み合わせの何れかにより、前記映像取得部1から得られた映像と前記データベース3に登録された画像情報の比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させるように構成した。
【選択図】図1
【解決手段】本発明は、映像取得部1から得た映像を表示部6に表示する際、前記映像取得部1から得られた映像とデータベース3に登録された画像情報を処理部2で比較照合する装置であり、前記映像取得部1から得られた映像と前記データベース3に登録された画像情報を前記処理部2で比較照合する時の日時及と気象条件を時刻気象情報取得部5から取得し、優先度判定部4は日時及と気象条件組み合わせの何れか、又は、位置及び日時及び気象条件の組み合わせの何れかにより、前記映像取得部1から得られた映像と前記データベース3に登録された画像情報の比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させるように構成した。
【選択図】図1
Description
本発明は、従来のGPS(Global Positioning System)等に代表される位置情報の取得に関する技術である。カメラで捉えた周辺映像と位置の判っている画像とを照合することによりカメラで捉えた対象物及び装置の位置を知る位置認識装置である。
近年、カーナビゲーションに代表されるように、地図上における現在地点を示すサービスが普及し、携帯電話に関しても例外で無い。地図上における現在地点を示すには、緯度/経度など絶対的な位置情報を取得することが一般的であり、ナビゲーションではGPSを用いて逐次一定時間ごとに現在の位置情報を取得している。しかし、常にGPSから取得するデータが受信できなかったり、GPSから受信するデータの誤差がその時々により変動したりする。カーナビゲーションはこのような状況下において、地図上における現在位置を正しく示すために、ジャイロセンサにより車の向きや地図道路上への補正を実施している。携帯電話でのナビゲーションを実施する場合、利用する行動範囲がビル内/駅構内/地下街などカーナビに比べてGPSからの電波が届かないところが多く課題となっている。
一方、画像認識の技術は画像処理技術の向上に伴い近年飛躍的に向上している。センサによる画像を取得し、ベースとなる情報と比較照合する技術も進んできている。指紋認証/顔認証技術に代表されるほか、自動車のナンバーの自動読み取り器や、工場での大量生産の現場において検査装置として必要不可欠な技術である。また、近年携帯電話はカメラを搭載することが一般的となり、カメラで捉えた周辺映像の中の対象物と位置情報の解っている原画とを照合することで、周辺の対象物の位置を特定する技術が有る。
従来、この種のカメラ画像による位置認識装置として、対象物までの距離を測定し、建築物三次元データベースのデータと照合することで、自端末の姿勢を取得または補正している(例えば、特許文献1を参照)。
しかしながら、データベースに登録されたデータの量が多くなるにつれ、画像照合する装置の処理負荷は次第に多くなる。特に、GPSの電波が届かない場合など現在位置情報が特定できない場合は、対象となるデータの量が非常に多くなり、画像照合を行う装置への負荷もデータ量に従い多くなるにつれ処理に必要な実行時間は長くなる。限られた処理時間内では、画像照合により一致されるべき画像の照合が行えず、正しい結果が得られないことがある。
本発明の装置は、カメラからなる映像取得部と、前記映像取得部から取得された映像を表示する表示部と、映像を登録するデータベースと、前記映像取得部から得られた映像と前記データベースに登録された映像とを比較することで、前記映像取得部により映像を取得した時点の位置を把握する処理部と、日時と気象条件を登録する時刻気象情報取得部と、前記時刻気象情報取得部により得られた日時、気象条件、もしくは日時及び気象条件の組み合わせの何れかにより、前記映像取得部から得られた映像と前記データベース3に登録された映像との比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させる優先判定部と、を備えることにより上記課題を解決したものである。
本発明によれば、画像照合する処理量が軽減され処理時間の短縮が図れる。
本発明によれば、カメラからなる映像取得部と、前記映像取得部から取得された映像を表示する表示部と、映像を登録するデータベースと、前記映像取得部から得られた映像と前記データベースに登録された映像とを比較することで、前記映像取得部により映像を取得した時点の位置を把握する処理部と、日時と気象条件を登録する時刻気象情報取得部と、前記時刻気象情報取得部により得られた日時、気象条件、もしくは日時及び気象条件の組み合わせの何れかにより、前記映像取得部から得られた映像と前記データベースに登録された映像との比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させる優先判定部と、を備えた位置認識装置により、画像照合する処理の量が軽減され処理時間の短縮が図れる。
さらに、この構成を基本として、表示部に表示されている画像照合が一致した対象物に対して前記データベースに登録されている関連情報を関連付けて表示することにより、ユーザーに周辺にある建物/店/閲覧物/標識/看板/出入口のそれぞれに対する関連情報をユーザーに提供することが出来る。
また、エリア情報取得部を設け、データベースに登録された位置情報が、エリア情報取得部から得られた位置情報を中心とした一定エリア内の場合のみに情報を絞り込み、画像照合の有り無しの判定処理を実施することで、処理付加を軽減することが出来る。
また、前記処理部において、データベースに登録された項目の中から画像照合する項目や値をあらかじめ設定することにより、処理付加を軽減して画像照合の時間を短縮できる。
また、ボタン操作等により、画像照合の開始及び終了のタイミングを指定することで、情報が欲しい時に情報を得ることが可能となる。
また、事前に欲しい情報を設定し条件範囲内の情報を提供することで、不要な情報提供を避け、ユーザーが選んだ情報を提供することができる。
また、表示制御部を設けて、画像照合により表示部に表示する開始タイミングと更新タイミング及び情報提供の表示終了タイミングの制御により、利用シーンに合わせて、表示情報が不用意に消えることが無いようにすることが可能である。尚、表示制御部の判断は、ボタン操作であっても、前記映像取得部1とは別の図示しない映像取得部を備え、捉えた操作者の顔や目の映像の有り無しの判定結果や向きから判定しても良い。また、図示しない姿勢検出器を備え、周辺画像ではないと判断した時などを利用して良い。また、これら何れかを起点にした一定時間後としても良い。例として、画像照合の動作中に端末の姿勢制御を検知して、映像取得部が一定角以上に地面方向へ傾いた時、画像照合を停止する動作により低消費電力化が図れる。
また、データベースの追加/更新/削除を実施する書き換え手段を備えることで、最新の情報を提供することが可能になる。
また、本発明によれば、前記映像取得部と、前記映像取得部から取得された映像を表示する表示部と、映像を登録するデータベースと、前記映像取得部から得られた映像と前記データベースに登録された映像とを比較することで、前記映像取得部により映像を取得した時点の位置を把握する処理部と、前記処理部にて位置を把握した時点の方位を取得する方位取得部と、前記処理部にて把握した位置と前記方位取得部から得られた方位情報により対象物の方位を算出する対象物方位判定部と、データベースに登録された位置情報と対象物の方位情報から現在地点を算出する現在位置判定部と、を備えることにより、装置の現在位置を特定することが出来る。
この時、さらに距離測定部を用いて、画像照合された対象物から現在地点までの距離を得て、前記データベースに登録された画像照合された対象物の位置情報と、さらに前記方位取得部から得られた方位情報から、現在位置を特定することも可能である。
また、画像照合により一致した対象物を目標物として、さらに経路検索部を設けることにより、得られた現在位置情報から目標物までの経路検索の実施結果、現在地点と目標物までの双方の位置関係や距離及び目標物までの到達経路を前記表示部に表示することで、ナビゲーションを提供することが出来る。
また、取得した現在位置と対象物毎の位置と高さの相互関係から、現在位置から対象物を見た時に別の対象物により隠れ見えない場合には画像照合をしない判定を実施することで、装置の処理付加を軽減することが出来る。
また、本発明によれば、前記処理部にて映像取得部から取得された映像とデータベースに登録された映像とを比較した結果により、データベースに登録された優先度を変更することを特徴とすることで、画像照合による照合率が向上し短時間で情報を提供することが可能となる。
また、本発明の位置認識装置によれば、前記データベースに登録された情報を端末側へ送るための基地局無線部と、前記基地局無線部から送られた前記データベースの情報を受け取る端末無線部と、を備えることにより、端末のメモリ量を削減することが出来る。
また、前記サーバー無線部は複数の端末の前記端末無線部と通信する時、複数の端末が前記データベースを共有するとともに、サーバー側で前記データベースを一括管理することにより、ユーザーは何時でも最新のデータにアクセスすることが可能になる。この時、前記データベースに登録された対象が画像照合された個々の端末からの情報により、前記データベースに登録された情報を更新することで、精度の高い画像照合が可能となる。
また、ネットワークと接続されることで、第三者経由によるデータの追加登録が可能であり、本発明の位置認識装置」による実施範囲が広がる。
また、本発明によれば、前記データベースの中から前記優先度判定部で選ばれた優先度の高い情報を無線で送るサーバー無線部と、前記サーバー無線部からのデータを無線で受信する端末無線部と、 を備えた位置認識装置とすることで、サーバー無線部と端末無線部のデータ転送量が削減できる。
また、本発明によれば、前記映像取得部から取得された映像の無線送信及び、前記処理部の結果を無線で受信する端末無線部と、前記映像取得部から取得された映像の無線受信及び、前記処理部の結果を無線送信するサーバー無線部と、を備えた位置認識装置とすることで、端末の処理負荷を軽減することが出来る。
以下、本発明を実施するための形態について、図面を参照しながら説明する。なお、実施の形態を説明するための全図において、同一の構成要素には同一符号を付与し、重複する説明は省略する。
(実施の形態1)
図1は、本発明の実施の形態における位置認識装置の最小の構成概略図である。
図1は、本発明の実施の形態における位置認識装置の最小の構成概略図である。
本発明の実施の形態における位置認識装置は、図1に示すように、カメラ等の映像取得部1から得た映像を液晶表示部等の表示部6に表示する。この際、映像取得部1から得られた映像とハードディスク等のデータベース3に登録された画像情報をCPU等の処理部2で比較照合する装置である。映像取得部1から得た映像とデータベース3に登録された画像情報との比較照合により、前記データベース3に登録された対象物の何れかが周辺に存在しているか否かを判定する。
ここで、映像取得部1で捉えた映像とデータベース3に登録された画像情報の比較照合の方法は、2値化した画像データでのパターンマッチングを用いても良いし、輪郭抽出した結果を用いても良く、比較照合する方法は問わない。
また、前記データベース3に登録された画像のデータ形式は、比較照合する方法に適合した形式で良い。データベース3に登録される画像情報は、身近に存在する建物/店/閲覧物/標識/看板/出入口等を含むものであり、個体物であれば限定しない。
一方、映像取得部1で同じ対象物を捉えた場合であっても、撮影環境より得られる映像が異なってくる。本発明の実施の形態における位置認識装置では、撮影環境について、画像照合比較する日時と対象物の位置と気象条件の3つの切り口から、予め画像照合における優劣の特徴を対象物毎に優先度として設定し、優先度に従い画像照合を行う。
現実、撮影する映像取得部1が同一であっても、昼と夜とでは、周囲の明るさの影響を受けて得られる映像は異なってくる。また、同じ時間帯であっても、映像取得部1と被写体との間に車や人など障害物により見え隠れする場合、単に障害物の大きさや出現頻度のみならず、対象物の大きさや高さの違いにより障害物により阻害され見え方も異なってくる。例えば、駅構内に高さ1m程度の大きさのコーヒーショップの看板が地面上に置いて有る場合、混雑の少ない時間帯では、時々、人影に隠れる程度であるのに対して混雑時はほとんど確認出来ない。
また、看板など発光する対象物の場合、発光する時としない時では、周囲の明るさによるコントラストも変化し見え方も違ってくる。例えば、ビルの2階側面に設置された看板では、夕方は見難いのもの、看板が発光すると捉えやすくなる。
また、気象条件に関しても同様である。例えば、遠くに見える山が雨や曇により見え無いとか、道路上の文字が雨で反射して見えないなど。
データベース3における構成を説明する。データベース3は、各対象物に対して、前記説明をした画像情報、対象物の位置、時間帯毎の位置パラメータと発光度パラメータと気象条件パラメータにて構成されている。登録された複数の画像情報が同一の物から作られたものであっても良い。何れのパラメータの値も数値が大きい程、画像照合に適する環境であることを示している。
前記データベース3の構成例を図3に示す。図3は前記データベース3に登録された位置パラメータに関する構成例である。データベースは「管理番号」、対象物の「種別」、対象物の基準となる「位置」、対象物の中心の「高さ」、優先度の「位置パラメータ」、「時間帯」で構成されており、各画像データそれぞれに対して時間帯毎の優先度が設定されている。ここでのパラメータ値の範囲は、0〜2であり、その各値の意味は、2は優先的に照合したい場合登録され。1は通常の場合、0は比較照合を行わない場合を示している。管理番号0001は、特徴も無い対象物であるため、パラメータの値は時間帯によらず標準の「1」が設定されている。管理番号0002は、駅構内の地面上に置かれた低い看板であり、時間帯毎に異なるパラメータが設定されている。このパラメータの値により、優先度判定部4で画像照合比較の有り無し及び優先順位を判断する。優先度判定部4はデータベース3の内容を受け、処理部2に画像情報を渡すとともにパラメータの大きいは順に画像の比較照合を行うように指示をする。データを渡す順番が優先順位であっても良い。この時、優先度判定部4パラメータの値が0の場合は処理部2に画像情報を渡さない。本実施例では、優先度判定部4は、パラメータの値の判定結果により処理部2を制御しているが、パラメータの代わりに、データベース上に登録された対象物の位置に関する情報受け、優先度判定部4で予め設定されている判定基準に従い処理部2を制御しても良い。データベース上に登録された対象物の位置に関する情報とは、図3の場合は「位置」と「中心の高さ」に該当する。
前記データベース3の構成例を図4に示す。図4は前記データベース3に登録された発光度パラメータに関する構成例である。データベースは「管理番号」、対象物の「種別」、対象物の基準となる「位置」、対象物の中心の「高さ」、優先度の「発光度パラメータ」、「時間帯」で構成されており、各画像データそれぞれに対して時間帯毎の優先度が設定されている。発光度パラメータの設定基準は位置パラメータの優先規準と同様である。管理番号0001から管理番号0003は、特徴も無い対象物であるため、パラメータの値は時間帯によらず標準の「1」が設定されている。管理番号0004は、発光する看板であり、夜間は「2」が設定されている。前記優先度判定部4と前記処理部2は位置パラメータと同様に動作する。
前記データベース3の構成例を図5に示す。図5は前記データベース3に登録された気象条件パラメータに関する構成例である。データベースは「管理番号」、対象物の「種別」、対象物の基準となる「位置」、対象物の中心の「高さ」、優先度の「気象条件パラメータ」、「天候」で構成されており、各画像データそれぞれに対して天候毎の優先度が設定されている。ここでのパラメータ値の範囲は、0又は1であり、その各値の意味は、1は通常の場合、0は比較照合を行わない場合を示している。
管理番号0001〜管理番号0002と管理番号0004は、気象条件により大きく照合結果がかわるものではないために、パラメータの値は天候よらず標準の「1」が設定されている。管理番号0003は、路上の文字であり、雨の時は路上の時が読みにくいので、「0」が設定されている。
位置パラメータ及び発光度パラメータの時の動作と比べ、時刻気象情報取得部5の出力される時刻が気象条件に変わったものであり、優先度判定部4と処理部2の動作そのものは変わらない。
位置パラメータと発光度パラメータと気象条件パラメータについて個別に説明したが、これらを組み合わせて優先度を判定することが可能である。優先度が同じ画像データの画像照合の順番に関してさらに優先度を設定しても良い。優先度定部4において予め決められた順序やユーザーが設定した順序を基準にしても良いし、パラメータに新たな項目を加えても良い。
以上により、日時と気象条件を時刻気象情報取得部5から取得し、優先度判定部4は日時及と気象条件組み合わせの何れか、又は、位置及び日時及び気象条件の組み合わせの何れかにより、前記映像取得部1から得られた映像と前記データベース3に登録された画像情報の比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させる。
さらに、データベース3に関連情報を登録さえておき、処理部2にて映像取得部1の映像とデータベース3に登録された画像情報が一致した時、そのデータベース3に登録画像情報に対応する関連情報を得て、表示部2に表示された周辺の対象物に対して、関連付づけて表示することにより、ユーザーに周辺情報を提供することができる。ここで、関連情報とは、文字による情報であったり、種別を示すアイコンであったり、簡易図であったり、視覚的に表現できるものであれば何でも良い。関連付けてとは、表示部2に表示された画像照合の一致した周辺対象物に対して、データベース3に登録された関連情報を表示し、周辺対象物と関連情報とが視覚的に関係性があることを示す。
また、画像照合する際に、現在存在する大まかなエリア情報でデータベース3の情報を絞り込みことで、画像照合する処理を軽減することができる。データベース3のデータ数が多ければ多い程有効である。大まかなエリア情報は、エリア情報取得部7により得られる。ここで、エリア情報取得部7は、GPSでも良いしFelica/RFタグ、その他の近距離通信機器でも良いし、WLANや携帯電話無線機などでも良い。GPSの場合、受信が可能な場所であれば最新の位置情報をエリア情報として用いれば良いし、さらに測位誤差分エリアを広げても良い。受信が出来ない場合は最後に受信した位置情報を基準に、最後に受信した時刻から経過した時間によりエリア情報の広さを制御することで得られたエリア情報を使うことで、GPS受信が出来ない場合であても画像照合する処理を軽減することができる。近距離通信機器を用いる場合は、通信相手の機器の設置位置を基準として、通信可能な範囲内をエリア情報とすれば良い。Felicaでゾーンの入退出管理している場所では、そのゾーンをエリア情報とすれば良い。WLANや携帯電話無線機では、それぞれ独自の位置情報取得システムを用いれば良い。
一方、映像取得部1により周辺の対象物の照合をする際、ユーザーが意識して映像取得部1を対処物に向け比較照合することで、効果的に比較照合が可能となる。ユーザーがボタン操作等で、予め対象物の登録やメニューから選択等にて、優先度判定部4でデータを絞り込み比較照合することで、処理付加が軽減されるほか、映像取得部1で比較照合されるまで様々な方向に向きを変える必要がなく、短時間で欲しい情報が得られる。この動作をエリア情報取得部7から得たエリア情報で絞り込んだ後 に実施すると短時間で比較照合が可能となる。
また、ボタン操作等により、画像照合の開始及び終了のタイミングを指定することで、情報が欲しい時に情報を得ることが可能となる。この時、入力手段としてはボタン操作の他、タッチパネルを用いても良いし、音声入力による操作でも良い。端末を振ったり特定のアクションを与えたり、図示しない姿勢判定器により制御することで得られる操作は、ボタン操作と同様に働く。ボタン操作と表記したものは、これら入力手段の全てを含むものとする。
また、データベース3に登録され比較照合により一致した全ての情報が表示部6に関連付けられて表示されると、表示する情報が多い場合に表示部6に情報が溢れ見づらくなる。ボタン操作により選びたしたい周辺情報を事前に設定することで、欲しい情報のみ表示されるようになり、欲しい情報のみ解りやすく表示させることが可能に成る。
また、表示制御部16を設けて、画像照合により表示部6に表示する開始タイミングと更新タイミング及び情報提供の表示終了タイミングの制御することで、利用シーンに合わせて、必要な時に表示か開始され、表示情報が不用意に消えることが無いようにすることが可能である。
ここで、表示制御部16の開始及び終了動作が行われる動作起点はボタン操作であっても良いし、またボタン操作から一定時間経過した後実行されても良い。画像照合により不一致になった場合の再照合を実施するのかしないのか、利用シーンに合わせて自動的に切り替えても良いし、ボタン操作で選択されても良い。このように画像照合を実行する時間及び動作範囲を規定することで低消費電力化が図れる。例として、画像照合の動作中、端末の姿勢制御を用いて、映像取得部1が一定角以上に地面方向へ傾いた時、画像照合を停止させることで不要な処理を停止させ低消費電力化がはかれる。この時、図示しない前記映像取得部1とは別の映像取得部を備え、顔認証技術により操作者の顔の有り無しの判定並びに、眼の方向の判断により、ユーザーが表示部4を見ているがどうかを判断し、それにより照合動作を制御しても良い。
また、データベースの追加/更新/削除を実施する書き換え手段を備えることで、最新の情報を提供することが可能になる。データベースの画像データ及びその他のデータを新たに追加したりデータを新しいものに書き換えたり削除したりすることをデータベースの登録とした時、画像データの登録は予め映像取得部1で撮影した画像を持ち手も良いし、外部機器により取得した画像データを図示しない無前通信部を通しても良い。データベース上の画像データ以外のデータは、キー入力を使っても良いし、外部機器により無前通信部を通しても良い。
(実施の形態2)
図6は、本発明の実施の形態2における位置認識装置の構成概略図である。
図6は、本発明の実施の形態2における位置認識装置の構成概略図である。
本発明の実施の形態2における位置認識装置は、図6に示すように、映像取得部1から得た映像を表示部6に表示する際、前記映像取得部1から得られた映像とデータベース3に登録された画像情報を処理部2で比較照合する装置であり、映像取得部1から得た映像とデータベース3に登録された画像情報との比較照合により、前記データベース3に登録された対象物の何れかが周辺に存在しているか否かを判定する。画像照合比較する日時と対象物の位置と気象条件の3つの切り口から、予め画像照合における優劣の特徴を対象物毎に優先度として設定し、優先度に従い画像照合を行う。この時、画像照合を行う範囲は、エリア情報取得部7で得られ位置情報を中心に一定範囲内に限定されたデータベース上の画像データのみに限定しても良い。
映像取得部1から得られた映像とデータベース3に登録された画像情報を処理部2で比較照合により一致が得られた時、前記映像取得部1で捉えた対象物の装置内部での座標と方位取得部8から得られた方位情報により対象物の方位を算出する対象物方位判定部9と、データベース3に登録された位置情報と対象物の方位から現在地点を算出する現在位置判定部10とを備えた前記請求項1の装置により、装置が現在存在している現在位置を特定することが出来る。
現在位置の特定方法につい詳しく説明する。対象物につき処理部2で比較照合により一致が得られた時、装置の正面から映像取得部1で捉えた映像の中心方向に向けた第1の直線と、装置との対象物とで結ばれる第2の直線を求め、第1の直線と第2の直線とでなす角度Δθを算出する。
さらに、方位取得部8からその時点での装置の方位情報を取得し、この方位情報とΔθにより、装置から見た時の対象物の方角を特定する。この動作を、1つ目の対象物について実施したとして、同様に、2つ目の対象物についても画像の比較照合された時に同様に装置から見た時の2つ目の対象物の方角を特定する。2つの対象物それぞれの位置と、装置から見たそれぞれの方角から、三角測量法により装置の現在位置を特定することができる。ここで、角度Δθの算出方法であるが、図7を用いてθ算出と対象物との関係図を用いて説明する。映像取得部1で映し出された像面の2次元座標を上図に示し、その像面と焦点とのを真上からみた双方の位置関係を下図に示す。端末が使用上傾く場合が有ることを想定して、図示しない姿勢検出器により端末の傾きを検出してΔθを補正しても良い。
映し出された像面のサイズを仮にVGAサイズとする。像面上に映し出された対象物の中心をP(h,w)、映像取得部1の水平画角θwとした時、(式1)と近似することができる。ここで、θwとwは映像取得部1固有の値であり、例えば、映像取得部1の画角=50[deg]、w=640となる。
さらに、方位取得部8からその時点での装置の方位情報を取得し、この方位情報とΔθにより、装置から見た時の対象物の方角を特定する。この動作を、1つ目の対象物について実施したとして、同様に、2つ目の対象物についても画像の比較照合された時に同様に装置から見た時の2つ目の対象物の方角を特定する。2つの対象物それぞれの位置と、装置から見たそれぞれの方角から、三角測量法により装置の現在位置を特定することができる。ここで、角度Δθの算出方法であるが、図7を用いてθ算出と対象物との関係図を用いて説明する。映像取得部1で映し出された像面の2次元座標を上図に示し、その像面と焦点とのを真上からみた双方の位置関係を下図に示す。端末が使用上傾く場合が有ることを想定して、図示しない姿勢検出器により端末の傾きを検出してΔθを補正しても良い。
映し出された像面のサイズを仮にVGAサイズとする。像面上に映し出された対象物の中心をP(h,w)、映像取得部1の水平画角θwとした時、(式1)と近似することができる。ここで、θwとwは映像取得部1固有の値であり、例えば、映像取得部1の画角=50[deg]、w=640となる。
Δθ=tan−1( w/2×tanθw(w/2−Px)) ……… (式1)
このように三角測量法としては、さらに距離測定部14を用いて、画像照合された対象物から現在地点までの距離を、前記データベース3に登録された画像照合された対象物の位置情報と、前記方位取得部8から得られた方位情報から、三角測量法を用いて現在位置を特定することも可能である。
このように三角測量法としては、さらに距離測定部14を用いて、画像照合された対象物から現在地点までの距離を、前記データベース3に登録された画像照合された対象物の位置情報と、前記方位取得部8から得られた方位情報から、三角測量法を用いて現在位置を特定することも可能である。
2つの対象物に対してそれぞれの距離を算出し現在地点を得ても良い。よって、方位取得部8と対象物方位判定部9、又は距離測定部14の何れかを使うと現在位置を取得することが可能になる。
また、画像照合により一致した対象物を目標物として、さらに経路検索部15を設けることにより、得られた現在位置情報から目標物までの経路検索の実施結果、現在地点と目標物までの双方の位置関係や距離及び目標物までの到達経路を前記表示部6に表示することで、ナビゲーションを提供出来る。
その際、画像照合により得られた目標物毎に、関連付けられた情報が前記表示部6に表示され、表示された関連付けられた情報を選択することで、経路を算出する際のナビゲーションとしての到達目標を設定する。
また、取得した現在位置と対象物毎の位置と高さの相互関係から、現在位置から対象物を見た時に別の対象物により隠れ見えない場合には画像照合をしない判定を実施することで、装置の処理付加を軽減することが出来る。
一方、映像取得部1から得た映像を表示部6に表示する際、映像取得部1から得られた映像とデータベース3に登録された画像情報を処理部2で比較照合による一致の有り無しの結果により、データベース3に登録された優先度を変更することにより、画像照合による照合率が向上し短時間で情報を提供することが可能となる。
(実施の形態3)
本発明の実施の形態における位置認識装置を端末とサーバーで機能分担した構成であり、前記サーバー無線部12と前記端末無線部11で通信が行われるシステム装置で有る。図8システム装置としてデータベース3を分離した構成であり、分離することで端末のメモリ量を削減に作用して端末を小型化することが可能である。
本発明の実施の形態における位置認識装置を端末とサーバーで機能分担した構成であり、前記サーバー無線部12と前記端末無線部11で通信が行われるシステム装置で有る。図8システム装置としてデータベース3を分離した構成であり、分離することで端末のメモリ量を削減に作用して端末を小型化することが可能である。
また、前記サーバー無線部12は複数の端末の前記端末無線部11と通信する時、複数の端末が前記データベース3を共有するとともに、サーバーが前記データベース3を一括管理し、最適なデータに更新することで、ユーザーは何時でも最新のデータにアクセスすることが可能になる。
また、ネットワークと接続されることで、第三者経由によるデータの追加登録が可能であり、本発明の位置認識装置」による実施範囲が広がる。例えば、携帯電話のiモードによる画像登録サイトにて、映像取得部1から取得した画像を位置情報と不特定の人が登録と連携してデータベース3が更新されることで、不特定の画像を逐次更新することができる。
図9は、システム装置として、データベース3と優先度判定部4と時刻気象情報取得部5を分離して構成しており、サーバー側で優先度制御により画像比較するデータ量を減らし、必要なデータのみ無線通信で端末にて送って、端末内部にて画像照合を行う。それにより、無線で送るデータを削減しつつ、サーバーのデータを複数端末で共有することが可能になる。
図10は、サーバーによる優先度判定型のシステム装置の構成による処理フローを示し説明する。端末はエリア情報取得部7で現在端末が存在するエリアと特定しこれをサーバーに送信する。サーバーはデータベース3に登録されたデータから、指定されたエリアに関するデータを選定し端末データを送信する。端末はサーバーから受け取った画像データと周辺に存在する映像とを画像の照合比較を行う。比較照合する周辺映像は静止画であっても良いし、映像取得部にて周辺の映像を動画として表示部6にて逐次画像が更新される場合は、更新される画像毎に比較照合しても良いし、一定枚数毎に抜き取り画像の照合比較を行っても良い。
図11は、システム装置として、サーバー主導型で構成している。システム装置の処理分担として、端末は画像情報取得部で得た周辺画像を得て、サーバーから送られる情報にもと付き、表示部6に所定の内容を表示す。これにより端末の負荷は極力軽減することが可能となる。
本発明は、携帯電話、携帯ゲーム機、等の携帯端末およびこれに関する通信システムや、カーナビゲーションシステムに利用可能である。
1 映像取得部
2 処理部
3 データベース
4 優先度判定部
5 時刻気象情報取得部
6 表示部
7 エリア情報取得部
8 方位取得部
9 対象物方位判定部
10 現在位置判定部
11 端末無線部
12 サーバー無線部
13 画像合成部
14 距離測定部
15 経路検索部
16 表示制御部
2 処理部
3 データベース
4 優先度判定部
5 時刻気象情報取得部
6 表示部
7 エリア情報取得部
8 方位取得部
9 対象物方位判定部
10 現在位置判定部
11 端末無線部
12 サーバー無線部
13 画像合成部
14 距離測定部
15 経路検索部
16 表示制御部
Claims (6)
- カメラからなる映像取得部と、
前記映像取得部から取得された映像を表示する表示部と、
映像を登録するデータベースと、
前記映像取得部から得られた映像と前記データベースに登録された映像とを比較することで、前記映像取得部により映像を取得した時点の位置を把握する処理部と、
日時と気象条件を登録する時刻気象情報取得部と、
前記時刻気象情報取得部により得られた日時、気象条件、もしくは日時及び気象条件の組み合わせの何れかにより、前記映像取得部から得られた映像と前記データベースに登録された映像との比較照合の有り無しの判定及び画像の比較照合の優先順位を変化させる優先判定部と、
を備えた位置認識装置。 - 前記処理部にて位置を把握した時点の方位を取得する方位取得部と、
前記処理部にて把握した位置と前記方位取得部から得られた方位情報により対象物の方位を算出する対象物方位判定部と、
前記データベースに登録された位置情報と対象物の方位情報から現在地点を算出する現在位置判定部と、
をさらに備えた請求項1の位置認識装置。 - 前記処理部にて映像取得部から取得された映像とデータベースに登録された映像とを比較した結果により、データベースに登録された優先度を変更することを特徴とした請求項1及び請求項2の位置認識装置。
- 前記データベースに登録された情報を端末側へ送るための基地局無線部と、
前記基地局無線部から送られた前記データベースの情報を受け取る端末無線部と、
を備えた請求項1から請求項3の位置認識装置。 - 前記データベースの中から前記優先度判定部で選ばれた優先度の高い情報を無線で送るサーバー無線部と、
前記サーバー無線部からのデータを無線で受信する端末無線部と、
を備えた請求項1から請求項3の位置認識装置。 - 前記映像取得部から取得された映像の無線送信及び、前記処理部の結果を無線で受信する端末無線部と、
前記映像取得部から取得された映像の無線受信及び、前記処理部の結果を無線送信するサーバー無線部と、
を備えた請求項1から請求項3の位置認識装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009268378A JP2011113245A (ja) | 2009-11-26 | 2009-11-26 | 位置認識装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009268378A JP2011113245A (ja) | 2009-11-26 | 2009-11-26 | 位置認識装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011113245A true JP2011113245A (ja) | 2011-06-09 |
Family
ID=44235539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009268378A Pending JP2011113245A (ja) | 2009-11-26 | 2009-11-26 | 位置認識装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011113245A (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012168098A (ja) * | 2011-02-16 | 2012-09-06 | Aisin Aw Co Ltd | 撮影位置特定システム、撮影位置特定プログラム、及び撮影位置特定方法 |
JP2013015341A (ja) * | 2011-06-30 | 2013-01-24 | Aisin Aw Co Ltd | 参照データ取得装置、参照データ取得システム、参照データ取得方法、及び参照データ取得プログラム |
JP2015108604A (ja) * | 2013-12-06 | 2015-06-11 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム,装置,方法、及び、カメラ装置 |
JP2016223847A (ja) * | 2015-05-28 | 2016-12-28 | 日産自動車株式会社 | 自車位置判定装置及び自車位置判定方法 |
CN111400621A (zh) * | 2020-04-06 | 2020-07-10 | 中信银行股份有限公司 | 位置信息真实性校验方法、装置及电子设备 |
CN111563437A (zh) * | 2020-04-28 | 2020-08-21 | 德施曼机电(中国)有限公司 | 门锁装置的虹膜检测方法 |
-
2009
- 2009-11-26 JP JP2009268378A patent/JP2011113245A/ja active Pending
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012168098A (ja) * | 2011-02-16 | 2012-09-06 | Aisin Aw Co Ltd | 撮影位置特定システム、撮影位置特定プログラム、及び撮影位置特定方法 |
JP2013015341A (ja) * | 2011-06-30 | 2013-01-24 | Aisin Aw Co Ltd | 参照データ取得装置、参照データ取得システム、参照データ取得方法、及び参照データ取得プログラム |
JP2015108604A (ja) * | 2013-12-06 | 2015-06-11 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム,装置,方法、及び、カメラ装置 |
WO2015083538A1 (ja) * | 2013-12-06 | 2015-06-11 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム,装置,方法、及び、カメラ装置 |
EP3078937A4 (en) * | 2013-12-06 | 2017-07-05 | Hitachi Automotive Systems, Ltd. | Vehicle position estimation system, device, method, and camera device |
US9983022B2 (en) | 2013-12-06 | 2018-05-29 | Hitachi Automotive Systems, Ltd. | Vehicle position estimation system, device, method, and camera device |
JP2016223847A (ja) * | 2015-05-28 | 2016-12-28 | 日産自動車株式会社 | 自車位置判定装置及び自車位置判定方法 |
CN111400621A (zh) * | 2020-04-06 | 2020-07-10 | 中信银行股份有限公司 | 位置信息真实性校验方法、装置及电子设备 |
CN111400621B (zh) * | 2020-04-06 | 2023-06-06 | 中信银行股份有限公司 | 位置信息真实性校验方法、装置及电子设备 |
CN111563437A (zh) * | 2020-04-28 | 2020-08-21 | 德施曼机电(中国)有限公司 | 门锁装置的虹膜检测方法 |
CN111563437B (zh) * | 2020-04-28 | 2023-04-07 | 德施曼机电(中国)有限公司 | 门锁装置的虹膜检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11721098B2 (en) | Augmented reality interface for facilitating identification of arriving vehicle | |
US10878637B2 (en) | Directional and x-ray view techniques for navigation using a mobile device | |
KR101728123B1 (ko) | 지구 자기장을 이용한 동시 로컬리제이션 및 매핑 | |
US20210074159A1 (en) | Method for providing parking space guide service | |
KR101436223B1 (ko) | 궤적 기반 위치 결정을 이용한 이미지 식별 | |
US20090063047A1 (en) | Navigational information display system, navigational information display method, and computer-readable recording medium | |
JP2011113245A (ja) | 位置認識装置 | |
CN110392908A (zh) | 用于生成地图数据的电子设备及其操作方法 | |
KR20200025421A (ko) | 실내주차장에서 증강현실기반 주차 안내시스템 | |
KR102622585B1 (ko) | 실내 길안내 장치 및 그 방법 | |
US11334174B2 (en) | Universal pointing and interacting device | |
KR20120009638A (ko) | 미인식 실제객체에 대한 가상객체 데이터 운용방법 및 이를 위한 증강현실 장치와, 기록매체 | |
US20160284051A1 (en) | Display control method and information processing apparatus | |
JP6145563B2 (ja) | 情報表示装置 | |
CN114554391A (zh) | 一种停车场寻车方法、装置、设备和存储介质 | |
KR20120067479A (ko) | 촬영 영상을 이용한 길 안내 시스템 및 방법 | |
JP6384898B2 (ja) | 経路案内システム、方法及びプログラム | |
US20220295017A1 (en) | Rendezvous assistance apparatus, rendezvous assistance system, and rendezvous assistance method | |
KR20180102969A (ko) | 증강현실을 이용한 실내 내비게이션 방법 및 장치 | |
JP4059154B2 (ja) | 情報送受信装置、情報送受信用プログラム | |
KR20160128967A (ko) | 촬영 영상을 이용한 길 안내 시스템 및 방법 | |
KR20160031793A (ko) | 휠체어용 스마트 내비게이션 시스템 | |
JP6890108B2 (ja) | 無人飛行装置、撮像システム及び撮像方法 | |
JP2019174548A (ja) | 制御装置、電子機器、制御方法、及び制御プログラム | |
US20240054779A1 (en) | Systems and methods for finding group members via augmented reality |