JP2007155528A - 表示制御装置 - Google Patents

Abstract

【課題】映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができる表示制御装置を提供する。
【解決手段】車両に設けられた撮影装置によって撮影された映像を表示装置に表示させる表示制御装置を適用したナビゲーション装置において、ＣＰＵが、地物を３次元で表す地図データに基づいて、映像に映された各地物が占める当該映像上の領域を算出する（Ｓ１２）ことによって、入力装置を介して指定された当該映像上の座標を含む領域に映された地物を特定する（Ｓ１３）。
【選択図】図４

Description

本発明は、車両に設けられた撮影装置によって撮影された映像を表示装置に表示させる表示制御装置に関する。

従来の表示制御装置としては、情報提供者側の車載端末装置が、映像を編集すると共に映像に関連する地点の位置データをリンクしてセンタに送出し、情報享受者側の車載端末装置が、センタより受信した所望の映像を表示すると共に映像に関連する地点の位置データに基づいて、経路誘導、地点登録または地図表示を行うものがある（例えば、特許文献１参照）。
特開平１０−２８８５３０号公報

しかしながら、従来の表示制御装置は、映像に関連する情報を利用者に提示することができるものの、映像に関連する地点の位置データをリンクさせる必要があるため、映像に映された地物を特定する手間を利用者にかけてしまうといった問題があった。

本発明は、従来の問題を解決するためになされたもので、映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができる表示制御装置を提供することを目的とする。

本発明の表示制御装置は、車両に設けられた撮影装置によって撮影された映像を表示装置に表示させる表示制御装置において、地物を３次元で表す地図データに基づいて、前記映像に映された各地物が占める該映像上の領域を算出することによって、入力装置を介して指定された該映像上の座標を含む領域に映された地物を特定する制御手段を備えた構成を有している。

この構成により、本発明の表示制御装置は、映像に映された地物を地図データに基づいて特定することができるため、映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができる。

なお、前記制御手段は、前記映像が撮影されたときの前記撮影装置の緯度、経度、撮影方位および視野で、前記地図データが表す各地物を投影した映像を表す投影データを生成することによって、前記撮影装置によって撮影された映像に映された各地物が占める該映像上の領域を算出するようにしてもよい。

この構成により、本発明の表示制御装置は、映像に映された各地物が占める映像上の領域を算出することができる。

また、前記制御手段は、測位装置によって測位された前記車両の緯度および経度と、方位検出装置によって検出された前記車両の方位と、記憶媒体に記憶された前記車両に対する前記撮影装置の位置および向きとに基づいて、前記撮影装置の緯度、経度および撮影方位を算出するようにしてもよい。

この構成により、本発明の表示制御装置は、撮影装置が映像を撮影したときの緯度、経度および撮影方位を算出することができる。

また、前記制御手段は、前記映像から特定した地物に関する情報を前記表示装置に表示させるようにしてもよい。

この構成により、本発明の表示制御装置は、映像から指定された地物に関する情報を表示装置に表示させることにより当該情報を利用者に提示することができる。

また、前記制御手段は、前記撮影装置によって撮影された映像を表す映像データと、該映像が撮影されたときの前記撮影装置の緯度、経度および撮影方位とを対応させて記憶媒体に記憶させるようにしてもよい。

この構成により、本発明の表示制御装置は、過去に走行した経路上で撮影された映像から指定された地物に関する情報を利用者に提示することができる。

また、前記制御手段は、前記記憶媒体に記憶させた映像から特定した地物の位置を経路探索の目的地とするようにしてもよい。

この構成により、本発明の表示制御装置は、過去に走行した経路上で撮影された映像から指定された地物の位置を経路探索の目的地とすることができる。

本発明は、映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができるという効果を有する表示制御装置を提供することができる。

以下、本発明の実施の形態について、図面を参照して説明する。

なお、本実施の形態においては、本発明に係る表示制御装置を車両に搭載されるナビゲーション装置に適用し、本発明に係る表示制御装置を構成する制御手段をＣＰＵ（Central Processing Unit）によって構成した例について説明する。

本発明の一実施の形態の表示制御装置を図１に示す。

図１において、ナビゲーション装置１は、ＣＰＵ１０と、ＲＡＭ（Random Access Memory）１１と、ＲＯＭ（Read Only Memory）１２と、ハードディスク１３と、表示装置としての液晶ディスプレイ１４と、液晶ディスプレイ１４に一体に設けられたタッチパネルやリモコン等の入力装置１５と、無線通信するための通信モジュール１６と、ＧＰＳ（Global Positioning System）アンテナで受信した複数の衛星から送出された電波に基づいて現在位置の緯度および経度を測る測位装置としてのＧＰＳ受信機１７と、自車の進行方位を検出する方位検出装置としてのジャイロ１８とを備えている。また、ナビゲーション装置１には、自車の車輪の回転数に基づいて車速を検知する車速センサ１９と、自車の外部を撮影する撮影装置としてのカメラ２０とが接続されている。

ＣＰＵ１０は、ＲＯＭ１２およびハードディスク１３に記憶されたプログラムをＲＡＭ１１に読み込んで、ＲＡＭ１１に読み込んだプログラムを実行することによって、ナビゲーションや経路探索、液晶ディスプレイ１４に対する表示制御を行う等、各部を制御するようになっている。

ハードディスク１３には、ＣＰＵ１０に実行させるためのプログラムに加えて、ナビゲーションや経路探索を行うための地図データ、自車の走行履歴、カメラ２０に関するカメラ情報、および、映像データ等が格納されている。

ここで、地図データには、道路、交差点、建造物および河川等の地物を３次元で表す情報および各地物に関する説明や広告等の情報を含む地物情報や、道路の車線数や一方通行等の交通規制に関する道路情報等が含まれる。地図データは、プログラムを実行するＣＰＵ１０によってＤＶＤ（Digital Versatile Disc）等の着脱可能な記録媒体や通信モジュール１６を介したネットワーク等からハードディスク１３に読み込まれる。

走行履歴には、走行日時を示す情報、および、道路や交差点等の地物に付与されたＩＤの配列、または、ＧＰＳ受信機１７によって測られた自車の緯度および経度、ジャイロ１８によって検出された自車が向いている方位、ならびに、車速センサ１９によって検知された自車の車速から算出される緯度および経度の配列よりなる経路情報等が含まれる。この走行履歴は、ＧＰＳ受信機１７によって測られた自車の緯度および経度、ジャイロ１８によって検出された自車が向いている方位、および、車速センサ１９によって検知された自車の車速に基づいて、ＣＰＵ１０によって生成されハードディスク１３に格納される。

カメラ情報には、自車に対するカメラ２０の位置および向き、および、カメラ２０の視野等を表す情報が含まれている。このカメラ情報は、カメラ２０の設置時に入力装置１５等を介してハードディスク１３に予め格納されるものとする。

映像データは、カメラ２０によって撮影された映像を表し、この映像を撮影したときのカメラ２０の緯度、経度および撮影方位に対応してハードディスク１３に格納される。

カメラ２０は、図２に示すように、自車のバックミラー２１付近に設置されている。なお、カメラ２０は、自車のダッシュボードの上や自車のフロントグリル等に設置されていてもよい。

以上のように構成されたナビゲーション装置１について図３乃至図５を用いてその動作を説明する。

図３は、ナビゲーション装置１の映像データ登録動作を説明するためのフロー図である。

まず、入力装置１５を介して利用者によって撮影の指示が入力されると、カメラ２０によって自車の外部が撮影される（Ｓ１）。ここで、ＣＰＵ１０は、ＧＰＳ受信機１７によって測られた緯度および経度と、ジャイロ１８によって検出された方位と、カメラ情報が表すカメラ２０の位置および向きとに基づいて、カメラ２０が撮影したときのカメラ２０の緯度、経度および撮影方位を算出する（Ｓ２）。

次に、ＣＰＵ１０は、算出したカメラ２０の緯度、経度および撮影方位に対応させてカメラ２０が撮影した映像を表す映像データをハードディスク１３に格納する（Ｓ３）。

図４は、ナビゲーション装置１の位置登録動作を説明するためのフロー図である。

まず、車両に搭載されたカメラ２０で撮影されたリアルタイムな映像が液晶ディスプレイ１４に表示されているものとする。ここで、表示させる映像は、リアルタイムな映像ではなく、以前に撮影された映像の中から利用者が選択した映像であってもよい。

利用者は、液晶ディスプレイ１４に表示されている映像の中から、所望のオブジェクトが表示された際、入力装置１５を介して所望の建物を選択する。

このように、入力装置１５を介して映像上の建物が指定されると、ＣＰＵ１０は、指定された画面上のＸ、Ｙ座標値として位置座標を取得すると共に（Ｓ１０）、指定されたオブジェクトを含む映像データに対応してハードディスク１３に格納されているカメラ２０の緯度、経度、高さ、および撮影方位、ならびに、ハードディスク１３に予め格納されている地図データ内に記録されている各地物情報を使って、カメラ２０から見た投影データを生成する（Ｓ１１）。

例えば、図５（ａ）に示すような、カメラ２０によって撮影された映像が液晶ディスプレイ１４に表示されており、表示されている地物３０ｅが利用者に選択された場合、図５（ｂ）に示すような映像を表す投影データがＣＰＵ１０によって生成される。

なお、図５（ｂ）に示すような映像を表す投影データは、地物の緯度、経度、面積および高さ情報を利用して、液晶ディスプレイ１４に表示される地物を、視点遠方からカメラ２０まで表示を重ねていくことで生成される。

ここで、ＣＰＵ１０は、映像に映されている地物３０ａ乃至３０ｅが投影データを生成した際に、それぞれの地物が表示されている領域３１ａ乃至３１ｅを算出する（Ｓ１２）。

図４において、ＣＰＵ１０は、算出した各領域のなかで入力装置１５を介して指定された座標を含む領域があるか否かを判断する（Ｓ１３）。地図データの更新時期の遅れ等により、指定された座標を含む領域がないと判断した場合には、ＣＰＵ１０は、液晶ディスプレイ１４に座標の再指定を促すメッセージを表示させ（Ｓ１４）、新たに座標が指定されるのを待つ。

一方、指定された座標を含む領域があると判断した場合には、ＣＰＵ１０は、地図データの更新時期の遅れ等に対応するよう、指定された座標を含む領域に近い境界を有する地物を映像から認識して切出し、切出した境界からなる領域と指定された座標を含む領域との形状や面積を比較することによって地物が地図データに存在するか否かを判断する（Ｓ１５）。

なお、ＣＰＵ１０は、地物を映像から認識して地物の存在を判断するのに代えて、指定された座標を含むと判断した領域を示す映像をカメラ２０によって撮影された映像上に重畳、もしくは強調表示させて液晶ディスプレイ１４に表示させ、入力装置１５を介して利用者に地物が地図データに存在するか否かを確認させるようにしてもよい。

当該地物が地図データに存在しないと判断した場合には、ＣＰＵ１０は、液晶ディスプレイ１４に座標の再指定を促すメッセージを表示させ（Ｓ１４）、新たに座標が指定されるのを待つ。

一方、当該地物が地図データに存在すると判断した場合には、ＣＰＵ１０は、指定された座標を含むと判断した領域に該当する地物に関する地物情報や当該地物の位置を地図と共に液晶ディスプレイ１４に表示し（Ｓ１６）、入力装置１５を介した利用者の確認等を経て、当該地物の位置をＲＡＭ１１やハードディスク１３に登録する（Ｓ１７）。

ＣＰＵ１０は、例えば、このように登録した地物の位置を経路探索の目的地とする。

また、ＣＰＵ１０は、液晶ディスプレイ１４上に映像と地図とを緯度、経度および方位によってリンクさせて表示させることにより、映像上で選択した地物に対応する地図上の地物を強調表示したり、地図上で選択した地物に対応する映像上の地物を強調表示したりしてもよい。

このような本発明の一実施の形態のナビゲーション装置１は、映像に映された地物を地図データに基づいて特定することができるため、映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができる。

なお、本実施の形態において、ＣＰＵ１０は、ハードディスク１３に格納されている地図データに基づいて、カメラ２０によって撮影された映像を表す投影データを生成するものとして説明したが、ＣＰＵ１０が経路案内のために液晶ディスプレイ１４に表示させる投影データを生成する場合には、この投影データが表す映像をカメラ２０から見た映像に視点変換することによって、カメラ２０によって撮影された映像を表す投影データを生成するようにしてもよい。

以上のように、本発明にかかる表示制御装置は、映像に映された地物を特定する手間を利用者にかけずに、映像に関連する情報を利用者に提示することができるという効果を有し、例えば、車両に設けられた撮影装置によって撮影された映像を表示装置に表示させる表示制御装置等として有用である。

本発明の一実施の形態におけるナビゲーション装置のブロック図 本発明の一実施の形態におけるナビゲーション装置に接続されるカメラの設置例を示す概念図 本発明の一実施の形態におけるナビゲーション装置の映像データ登録動作を説明するためのフロー図 本発明の一実施の形態におけるナビゲーション装置の位置登録動作を説明するためのフロー図 本発明の一実施の形態におけるナビゲーション装置によって撮影された映像と、生成された投影データが表す映像とを示すイメージ

符号の説明

１ ナビゲーション装置
１０ ＣＰＵ
１１ ＲＡＭ
１２ ＲＯＭ
１３ ハードディスク
１４ 液晶ディスプレイ
１５ 入力装置
１６ 通信モジュール
１７ ＧＰＳ受信機
１８ ジャイロ
１９ 車速センサ
２０ カメラ

Claims (6)

1. 車両に設けられた撮影装置によって撮影された映像を表示装置に表示させる表示制御装置において、
   地物を３次元で表す地図データに基づいて、前記映像に映された各地物が占める該映像上の領域を算出することによって、入力装置を介して指定された該映像上の座標を含む領域に映された地物を特定する制御手段を備えたことを特徴とする表示制御装置。
2. 前記制御手段は、前記映像が撮影されたときの前記撮影装置の緯度、経度、撮影方位および視野で、前記地図データが表す各地物を投影した映像を表す投影データを生成することによって、前記撮影装置によって撮影された映像に映された各地物が占める該映像上の領域を算出することを特徴とする請求項１に記載の表示制御装置。
3. 前記制御手段は、測位装置によって測位された前記車両の緯度および経度と、方位検出装置によって検出された前記車両の方位と、記憶媒体に記憶された前記車両に対する前記撮影装置の位置および向きとに基づいて、前記撮影装置の緯度、経度および撮影方位を算出することを特徴とする請求項２に記載の表示制御装置。
4. 前記制御手段は、前記映像から特定した地物に関する情報を前記表示装置に表示させることを特徴とする請求項１乃至請求項３の何れかに記載の表示制御装置。
5. 前記制御手段は、前記撮影装置によって撮影された映像を表す映像データと、該映像が撮影されたときの前記撮影装置の緯度、経度および撮影方位とを対応させて記憶媒体に記憶させることを特徴とする請求項１乃至請求項４の何れかに記載の表示制御装置。
6. 前記制御手段は、前記記憶媒体に記憶させた映像から特定した地物の位置を経路探索の目的地とすることを特徴とする請求項５に記載の表示制御装置。