JP2014145666A - 走行案内システム、走行案内方法及びコンピュータプログラム - Google Patents

走行案内システム、走行案内方法及びコンピュータプログラム Download PDF

Info

Publication number
JP2014145666A
JP2014145666A JP2013014466A JP2013014466A JP2014145666A JP 2014145666 A JP2014145666 A JP 2014145666A JP 2013014466 A JP2013014466 A JP 2013014466A JP 2013014466 A JP2013014466 A JP 2013014466A JP 2014145666 A JP2014145666 A JP 2014145666A
Authority
JP
Japan
Prior art keywords
guidance
intersection
landmark
landmark object
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013014466A
Other languages
English (en)
Inventor
Toshihiro Mori
俊宏 森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2013014466A priority Critical patent/JP2014145666A/ja
Publication of JP2014145666A publication Critical patent/JP2014145666A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)

Abstract

【課題】目印対象物以外の対象物を目印対象物であると誤検出することを防止した走行案内システム、走行案内方法及びコンピュータプログラムを提供する。
【解決手段】車両の進行方向前方に案内交差点が有る場合に、車両に搭載されたフロントカメラ19により案内経路に含まれる案内交差点の周辺を異なるタイミングで複数回撮像し、撮像された複数の撮像画像毎に、撮像画像に含まれる目印対象物の設置位置を検出し、検出された目印対象物の設置位置について、複数の撮像画像間のバラつきを算出し、算出されたバラつきが閾値以下である場合に、検出された目印対象物を用いて案内交差点の案内を行うように構成する。
【選択図】図7

Description

本発明は、目印を用いて車両の走行を案内する走行案内システム、走行案内方法及びコンピュータプログラムに関する。
近年、車両の走行案内を行い、運転者が所望の目的地に容易に到着できるようにしたナビゲーション装置が車両に搭載されていることが多い。ここで、ナビゲーション装置とは、GPS受信機などにより自車の現在位置を検出し、その現在位置に対応する地図データをDVD−ROMやHDDなどの記録媒体またはネットワークを通じて取得して液晶モニタに表示することが可能な装置である。更に、かかるナビゲーション装置には、所望する目的地を入力すると、出発地から目的地までの最適経路を探索する経路探索機能を備えている。そして、探索結果に基づいて設定された案内経路をディスプレイ画面に表示するとともに、右左折等の案内の対象となる交差点(以下、案内交差点という)に接近した場合には音声やディスプレイ画面を用いた案内を行うことによって、ユーザを所望の目的地まで確実に案内するようになっている。また、近年は携帯電話機、スマートフォン、PDA(Personal Digital Assistant)、パーソナルコンピュータ等においても上記ナビゲーション装置と同様の機能を有するものがある。更に、車両以外にも歩行者や二輪車を対象として上記案内を行うことも可能である。
ここで、案内交差点において右左折等の案内を行う際には、案内交差点をユーザに正確に特定させることが重要である。そこで、従来では案内交差点の目印となる目印対象物(例えば、店舗の看板等)を用いて案内を行うことが行われていた。また、目印対象物を用いて案内を行う場合には、案内を行う際にユーザから目印対象物が視認できていることが重要である。そこで、例えば特許第3399506号には、案内交差点に車両が接近した場合に、車両に搭載されたカメラによって案内交差点方向を撮像し、撮像した画像に対して画像処理を行うことによってユーザから視認できる目印対象物を検出し、検出した目印対象物を用いて案内交差点の案内を行う技術について記載されている。
特許第3399506号(第6−7頁、図11)
しかしながら、上記特許文献1に記載の技術では、目印対象物以外の対象物を目印対象物であると誤検出する虞があった。例えば、案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラストを店舗の看板等の目印対象物であると誤検出する場合があった。その結果、ユーザにとって視認不可能な目印対象物や存在しない目印対象物を用いて案内交差点の案内が行われる事態が生じていた。
本発明は前記従来における問題点を解消するためになされたものであり、撮像画像から目印対象物を検出する際に、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきを考慮して目印対象物を検出することにより、目印対象物以外の対象物を目印対象物であると誤検出することを防止した走行案内システム、走行案内方法及びコンピュータプログラムを提供することを目的とする。
前記目的を達成するため本願の請求項1に係る走行案内システム(1)は、案内経路を設定する案内経路設定手段(13)と、車両に搭載された撮像装置(19)により前記案内経路に含まれる案内交差点(52)の周辺を、異なるタイミングで複数回撮像する撮像手段(13)と、前記撮像手段により撮像された複数の撮像画像(61)毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物(53)の設置位置を検出する目印対象物検出手段(13)と、前記目印対象物検出手段により検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出手段(13)と、前記バラつき算出手段によって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内手段(13)と、を有することを特徴とする。
尚、「案内交差点」とは、案内経路に従って移動体の移動の案内を行う際に、右左折指示等の案内を行う対象となる交差点が該当する。
また、「目印対象物」とは、ユーザの目印となり得る地表に設置された構造物であり、例えば、店舗の看板等が該当する。
また、請求項2に係る走行案内システム(1)は、請求項1に記載の走行案内システムであって、前記目印対象物の設置位置に関する情報をDB(31)又は外部サーバから取得する位置情報取得手段(13)を有し、前記交差点案内手段(13)は、前記位置情報取得手段により取得された前記目印対象物の設置位置の所定距離以内に、前記目印対象物検出手段により撮像画像毎に検出された前記目印対象物の設置位置の重心がある場合に、前記目印対象物を用いて前記案内交差点の案内を行うことを特徴とする。
また、請求項3に係る走行案内システム(1)は、請求項1又は請求項2に記載の走行案内システムであって、前記バラつき算出手段(13)によって算出された前記バラつきが閾値以下である場合に、前記目印対象物検出手段(13)により撮像画像(61)毎に検出された前記目印対象物(53)の設置位置の重心と、前記案内交差点に対する前記車両の進入方向とを、前記目印対象物に対応付けて登録する情報登録手段(13)を有し、前記目印対象物検出手段(13)は、過去に前記情報登録手段により登録された情報を用いて前記目印対象物の設置位置を検出することを特徴とする。
また、請求項4に係る走行案内システム(1)は、請求項3に記載の走行案内システムであって、前記目印対象物検出手段(13)により撮像画像(61)毎に検出された前記目印対象物の設置位置の重心が、過去に前記情報登録手段により登録されたいずれの重心の位置からも離間した位置にある場合に、前記目印対象物検出手段により検出された前記目印対象物が新設された目印対象物であると識別する新設目印識別手段(13)を有することを特徴とする。
また、請求項5に係る走行案内システム(1)は、請求項1乃至請求項4のいずれかに記載の走行案内システムであって、前記バラつき算出手段(13)によって算出された前記バラつきが前記閾値より大きい場合に、前記案内交差点(52)までの距離を用いて該案内交差点の案内を行う交差点距離案内手段(13)を有することを特徴とする。
また、請求項6に係る走行案内方法は、案内経路を設定する案内経路設定ステップと、車両に搭載された撮像装置(19)により前記案内経路に含まれる案内交差点(52)の周辺を、異なるタイミングで複数回撮像する撮像ステップと、前記撮像ステップにより撮像された複数の撮像画像(61)毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物(53)の設置位置を検出する目印対象物検出ステップと、前記目印対象物検出ステップにより検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出ステップと、前記バラつき算出ステップによって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内ステップと、を有することを特徴とする。
更に、請求項7に係るコンピュータプログラムは、コンピュータに、案内経路を設定する案内経路設定機能と、車両に搭載された撮像装置(19)により前記案内経路に含まれる案内交差点(52)の周辺を、異なるタイミングで複数回撮像する撮像機能と、前記撮像機能により撮像された複数の撮像画像(61)毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物(53)の設置位置を検出する目印対象物検出機能と、前記目印対象物検出機能により検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出機能と、前記バラつき算出機能によって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内機能と、を実行させることを特徴とする。
前記構成を有する請求項1に記載の走行案内システムによれば、撮像画像から目印対象物を検出する際に、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきを考慮して目印対象物を検出することにより、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラスト)を目印対象物であると誤検出することを防止することが可能となる。その結果、ユーザにとって視認不可能な目印対象物や存在しない目印対象物を用いて案内交差点の案内が行われることを防止でき、案内交差点におけるより適切な案内を行うことが可能となる。
また、請求項2に記載の走行案内システムによれば、目印対象物の設置位置に関する情報をDB又は外部サーバから取得し、取得された目印対象物の設置位置の所定距離以内に、撮像画像毎に検出された目印対象物の設置位置の重心がある場合に、目印対象物を用いて案内交差点の案内を行うので、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラストや案内交差点から離れた位置にある対象物)を目印対象物であると誤検出することを防止することが可能となる。
また、請求項3に記載の走行案内システムによれば、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきが閾値以下である場合に、撮像画像毎に検出された目印対象物の設置位置の重心と、案内交差点に対する車両の進入方向とを、目印対象物に対応付けて登録し、過去に情報登録手段により登録された情報を用いて目印対象物の設置位置を検出するので、画像処理を行う前に撮像画像内で目印対象物の検出される位置を予測することが可能となる。その結果、画像処理の処理負荷を軽減させるとともに、処理時間についても短縮することが可能となる。
また、請求項4に記載の走行案内システムによれば、撮像画像毎に検出された目印対象物の設置位置の重心が、過去に登録されたいずれの重心の位置からも離間した位置にある場合に、検出された目印対象物が新設された目印対象物であると識別するので、実地での調査を行うことなく目印対象物の新設を検出することが可能となる。
また、請求項5に記載の走行案内システムによれば、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきが閾値より大きい場合に、案内交差点までの距離を用いて該案内交差点の案内を行うので、目印対象物が確定できなかった場合であっても、目印対象物を用いずに案内交差点を走行する車両を適切に案内することが可能となる。
また、請求項6に記載の走行案内方法によれば、撮像画像から目印対象物を検出する際に、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきを考慮して目印対象物を検出することにより、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラスト)を目印対象物であると誤検出することを防止することが可能となる。その結果、ユーザにとって視認不可能な目印対象物や存在しない目印対象物を用いて案内交差点の案内が行われることを防止でき、案内交差点におけるより適切な案内を行うことが可能となる。
更に、請求項7に記載のコンピュータプログラムによれば、撮像画像から目印対象物を検出させる際に、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきを考慮して目印対象物を検出させることにより、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラスト)を目印対象物であると誤検出することを防止することが可能となる。その結果、ユーザにとって視認不可能な目印対象物や存在しない目印対象物を用いて案内交差点の案内が行われることを防止でき、案内交差点におけるより適切な案内を行うことが可能となる。
本実施形態に係るナビゲーション装置を示したブロック図である。 地図情報DBに記憶される目印情報の一例を示した図である。 画像認識結果DBの記憶領域の一例を示した図である。 本実施形態に係る交差点案内処理プログラムのフローチャートである。 本実施形態に係る交差点案内処理プログラムのフローチャートである。 目印対象物候補の設置位置の検出態様について示した図である。 複数の撮像画像毎に検出された目印対象物候補の設置位置のバラつきについて示した図である。 複数の撮像画像毎に検出された目印対象物候補の設置位置のバラつきが小さく、且つ重心位置に大きなズレが無い場合について示した図である。 複数の撮像画像毎に検出された目印対象物候補の設置位置のバラつきが大きい、又は重心位置に大きなズレが有る場合について示した図である。 本実施形態に係る目印対象物候補情報取得処理のサブ処理プログラムのフローチャートである。 フロントカメラで案内交差点の周辺を撮像した撮像画像を示した図である。 車両と目印対象物候補の位置関係を示した模式図である。 本実施形態に係る画像認識結果保存処理のサブ処理プログラムのフローチャートである。
以下、本発明に係る走行案内システムをナビゲーション装置に具体化した一実施形態に基づき図面を参照しつつ詳細に説明する。先ず、本実施形態に係るナビゲーション装置1の概略構成について図1を用いて説明する。図1は本実施形態に係るナビゲーション装置1を示したブロック図である。
図1に示すように本実施形態に係るナビゲーション装置1は、ナビゲーション装置1が搭載された車両の現在位置を検出する現在位置検出部11と、各種のデータが記録されたデータ記録部12と、入力された情報に基づいて、各種の演算処理を行うナビゲーションECU13と、ユーザからの操作を受け付ける操作部14と、ユーザに対して車両周辺の地図や施設の関する施設情報を表示する液晶ディスプレイ15と、経路案内に関する音声ガイダンスを出力するスピーカ16と、記憶媒体であるDVDを読み取るDVDドライブ17と、プローブセンタやVICS(登録商標:Vehicle Information and Communication System)センタ等の情報センタとの間で通信を行う通信モジュール18と、から構成されている。また、ナビゲーション装置1にはフロントカメラ19が接続されている。
以下に、ナビゲーション装置1を構成する各構成要素について順に説明する。
現在位置検出部11は、GPS21、車速センサ22、ステアリングセンサ23、ジャイロセンサ24等からなり、現在の車両の位置、方位、車両の走行速度、現在時刻等を検出することが可能となっている。ここで、特に車速センサ22は、車両の移動距離や車速を検出する為のセンサであり、車両の駆動輪の回転に応じてパルスを発生させ、パルス信号をナビゲーションECU13に出力する。そして、ナビゲーションECU13は発生するパルスを計数することにより駆動輪の回転速度や移動距離を算出する。尚、上記4種類のセンサをナビゲーション装置1が全て備える必要はなく、これらの内の1又は複数種類のセンサのみをナビゲーション装置1が備える構成としても良い。
また、データ記録部12は、外部記憶装置及び記録媒体としてのハードディスク(図示せず)と、ハードディスクに記録された地図情報DB31や画像認識結果DB32や所定のプログラム等を読み出すとともにハードディスクに所定のデータを書き込む為のドライバである記録ヘッド(図示せず)とを備えている。尚、データ記録部12をハードディスクの代わりにメモリーカードやCDやDVD等の光ディスクにより構成しても良い。
ここで、地図情報DB31は、例えば、道路(リンク)に関するリンクデータ33、ノード点に関するノードデータ34、各交差点に関する交差点データ35、施設等の地点に関する地点データ、地図を表示するための地図表示データ、経路を探索するための探索データ、地点を検索するための検索データ等が記憶された記憶手段である。
ここで、リンクデータ33としては、例えば、該リンクを識別するリンクID、該リンクの端部に位置するノードを特定する端部ノード情報、該リンクを構成する道路の道路種別、車線数、道路幅、車線毎の走行区分等が記憶される。また、ノードデータ34としては、該ノードを識別するノードID、該ノードの位置座標、該ノードがリンクを介して接続される接続先ノードを特定する接続先ノード情報等が記憶される。また、交差点データ35としては、該交差点を形成するノードを特定する該当ノード情報、該交差点に接続されるリンク(以下、接続リンクという)を特定する接続リンク情報、交差点の周辺に位置する目印対象物候補に関する目印情報36等が記憶される。
尚、目印対象物候補は、案内交差点の案内を行う場合に目印となり得る対象物(店舗の看板等)の候補である。ここで、目印対象物候補としては、例えば交差点から所定範囲内(例えば半径100m以内)に位置し、且つ遠方からも識別可能な看板を供える特定の施設(例えば、コンビニエンスストア、ガソリンスタンド、ファーストフード店)の看板が該当する。そして、目印情報36は、全国にある交差点毎に目印対象物候補の種類(名称)と位置座標と形状データが記憶されている。尚、一の交差点に対して複数の目印対象物候補が存在する場合には、複数の目印対象物候補のそれぞれについて種類(名称)と位置座標と形状データが記憶されている。尚、形状データは例えば目印対象物候補が長方形である場合には縦横の長さが記憶され、円形である場合には直径が記憶される。また、位置座標は、目印対象物候補が施設の看板である場合には、該施設の位置座標としても良い。
ここで、図2は地図情報DB31に記憶される目印情報36の一例を示した図である。図2に示すように目印情報36は、交差点を識別する交差点IDと、その交差点IDの周辺に位置する目印対象物候補の種類(名称)と位置座標と形状データがそれぞれ対応付けて記憶されている。
例えば、交差点ID「10001」の交差点には、目印対象物候補として4個の対象物が存在し、各目印対象物候補は(X1,Y1)において設置された「コンビニ○○の看板」と、(X2,Y2)において設置された「ガソリンスタンド××の看板」と、(X3,Y3)において設置された「ファーストフード○×屋の看板」と、(X4,Y4)において設置された「×○書店の看板」であることを示している。同様に他の交差点の目印対象物候補に関する情報も記憶されている。
また、目印情報36には、目印対象物候補の種類毎に、案内交差点の音声案内に用いられる音声フレーズの内、目印対象物候補をユーザに特定させるための音声フレーズが記憶されている。例えば、「コンビニ○○の看板」の目印対象物候補をユーザに特定させるための音声フレーズとしては『コンビニ○○を』が記憶され、「ガソリンスタンド××の看板」の目印対象物候補をユーザに特定させるための音声フレーズとしては『ガソリンスタンド××を』が記憶される。同様にして、他の目印対象物候補についても記憶されている。尚、目印情報36は外部のサーバに格納させ、ナビゲーション装置1が通信により取得する構成としても良い。
一方、画像認識結果DB32は、車両が案内交差点に接近した際に、フロントカメラ19により撮像した撮像画像に基づいて行われた画像認識結果の履歴が記憶される記憶手段である。ここで、ナビゲーションECU13は、後述のように車両が案内交差点に接近した際に、案内交差点の周辺を異なるタイミングで複数回撮像する。そして、撮像された撮像画像に対して画像処理を行うことにより、撮像画像に含まれる目印対象物候補の種類と設置位置を、撮像画像毎に検出する。更に、検出された目印対象物候補(複数の目印対象物候補が検出された場合には複数の目印対象物候補毎)に、目印対象物候補の設置位置の重心を算出する。例えば、3枚の撮像画像が撮像され、3枚の撮像画像毎に検出された目印対象物候補の設置位置が(A,B)、(C,D)、(E,F)である場合には、(A,B)、(C,D)、(E,F)の3点の重心が算出される。そして、画像認識結果DB32には、算出された目印対象物候補の設置位置の重心と、案内交差点に対する車両の進入方向とが、検出された目印対象物候補に対応付けて記憶される。
ここで、図3は画像認識結果DB32に記憶される画像認識結果の一例を示した図である。図3に示すように画像認識結果DB32は、車両が進入した案内交差点を識別する交差点IDと、車両の進入方向(進入リンク)と、案内交差点へ進入する際に検出された目印対象物候補の種類と、目印対象物候補の設置位置の重心の座標がそれぞれ対応付けて記憶されている。
例えば、図3では過去に車両が交差点ID「10001」の交差点をリンク「34561」方向から進入した際に、「コンビニ○○の看板」と「ガソリンスタンド××の看板」とが検出され、且つ「コンビニ○○の看板」の設置位置の重心は(x1,y1)と算出され、「ガソリンスタンド××の看板」の設置位置の重心は(x2,y2)と算出されたことを示している。
一方、ナビゲーションECU(エレクトロニック・コントロール・ユニット)13は、ナビゲーション装置1の全体の制御を行う電子制御ユニットであり、演算装置及び制御装置としてのCPU41、並びにCPU41が各種の演算処理を行うにあたってワーキングメモリとして使用されるとともに、経路が探索されたときの経路データ等が記憶されるRAM42、制御用のプログラムのほか、後述の交差点案内処理プログラム(図4、図5)等が記録されたROM43、ROM43から読み出したプログラムを記憶するフラッシュメモリ44等の内部記憶装置を備えている。尚、ナビゲーションECU13は、処理アルゴリズムとしての各種手段を構成する。例えば、案内経路設定手段は、案内経路を設定する。撮像手段は、車両に搭載されたフロントカメラ19により案内経路に含まれる案内交差点の周辺を異なるタイミングで複数回撮像する。目印対象物検出手段は、フロントカメラ19により撮像された複数の撮像画像毎に、撮像画像に含まれる案内交差点の案内を行う場合に目印とする目印対象物の設置位置を検出する。バラつき算出手段は、目印対象物検出手段により検出された目印対象物の設置位置について、複数の撮像画像間のバラつきを算出する。交差点案内手段は、バラつき算出手段によって算出されたバラつきが閾値以下である場合に、目印対象物を用いて案内交差点の案内を行う。情報登録手段は、バラつき算出手段によって算出されたバラつきが閾値以下である場合に、撮像画像毎に検出された目印対象物の設置位置の重心と、案内交差点に対する車両の進入方向とを、目印対象物に対応付けて登録する。新設目印識別手段は、撮像画像毎に検出された目印対象物の設置位置の重心が、過去に情報登録手段により登録されたいずれの重心の位置からも離間した位置にある場合に、目印対象物検出手段により検出された目印対象物が新設された目印対象物であると識別する。交差点距離案内手段は、バラつき算出手段によって算出されたバラつきが閾値より大きい場合に、案内交差点までの距離を用いて該案内交差点の案内を行う。
操作部14は、走行開始地点としての出発地及び走行終了地点としての目的地を入力する際等に操作され、各種のキー、ボタン等の複数の操作スイッチ(図示せず)から構成される。そして、ナビゲーションECU13は、各スイッチの押下等により出力されるスイッチ信号に基づき、対応する各種の動作を実行すべく制御を行う。尚、操作部14は液晶ディスプレイ15の前面に設けたタッチパネルによって構成することもできる。また、マイクと音声認識装置によって構成することもできる。
また、液晶ディスプレイ15には、道路を含む地図画像、交通情報、操作案内、操作メニュー、キーの案内、出発地から目的地までの走行予定経路、走行予定経路に沿った案内情報、ニュース、天気予報、時刻、メール、テレビ番組等が表示される。特に本実施形態では、案内交差点が車両の進行方向前方の所定距離以内(例えば300m)に接近した場合には、案内交差点付近の拡大図や車両の案内交差点における進行方向について表示する。
また、スピーカ16は、ナビゲーションECU13からの指示に基づいて走行予定経路に沿った走行を案内する音声ガイダンスや、交通情報の案内を出力する。特に本実施形態では、案内交差点が車両の進行方向前方の所定距離(例えば、700m、300m、100mの3回)に到達したタイミングで、案内経路に沿った走行を案内する音声案内の出力を開始する。また、本実施形態に係るナビゲーション装置1では、自車の進行方向前方にある案内交差点に目印となる適当な対象物(例えば、店舗の看板等)がある場合には、目印対象物を用いた音声案内を出力する。例えば、「まもなく××(店舗名)を右方向です。」等を出力する。
また、DVDドライブ17は、DVDやCD等の記録媒体に記録されたデータを読み取り可能なドライブである。そして、読み取ったデータに基づいて音楽や映像の再生、地図情報DB31の更新等が行われる。
また、通信モジュール18は、交通情報センタ、例えば、VICSセンタやプローブセンタ等から送信された渋滞情報、規制情報、交通事故情報等の各情報から成る交通情報を受信する為の通信装置であり、例えば携帯電話機やDCMが該当する。
また、フロントカメラ19は、例えばCCD等の固体撮像素子を用いたカメラにより構成され、車両のフロントバンパの上方に取り付けられるとともに光軸方向を水平より所定角度下方に向けて設置される。そして、フロントカメラ19は、車両が案内交差点に接近した場合に、案内交差点周辺の周辺環境を撮像する。また、ナビゲーションECU13は、その撮像された撮像画像に対して画像処理を行うことによって案内交差点の周辺に位置する目印対象物候補の種類や位置を検出する。
そして、ナビゲーションECU13は、検出された目印対象物候補に基づいて、案内交差点を案内する為の目印対象物を選択する。
続いて、前記構成を有するナビゲーション装置1においてナビゲーションECU13が実行する交差点案内処理プログラムについて図4及び図5に基づき説明する。図4及び図5は本実施形態に係る交差点案内処理プログラムのフローチャートである。ここで、交差点案内処理プログラムは車両のACCがONされた後に所定間隔で実行され、車両の進行方向前方にある案内交差点に対する案内を行うプログラムである。尚、以下の図4、図5、図10、図13にフローチャートで示されるプログラムは、ナビゲーション装置1が備えているRAM42やROM43に記憶されており、CPU41により実行される。
先ず、交差点案内処理プログラムではステップ(以下、Sと略記する)1において、CPU41は、ナビゲーション装置1において設定された案内経路に基づく経路案内が行われているか否か判定する。ここで、案内経路は、出発地(例えば自車の現在位置)からユーザに選択された目的地までの推奨経路であり、経路探索処理の結果に基づいて設定される。また、経路探索処理は、地図情報DB31に記憶されたリンクデータ33やノードデータ34、VICSセンタから取得した交通情報等を用いて、公知のダイクストラ法等により行われる。
そして、ナビゲーション装置1において設定された案内経路に基づく経路案内が行われていると判定された場合(S1:YES)には、S2へと移行する。それに対して、ナビゲーション装置1において設定された案内経路に基づく経路案内が行われていないと判定された場合(S1:NO)には、当該交差点案内処理プログラムを終了する。
S2においてCPU41は、車両の現在位置及び方位を現在位置検出部11の検出結果に基づいて取得する。尚、車両の現在位置を地図データ上で特定するマップマッチング処理についても行う。更に、車両の現在位置は、高精度ロケーション技術を用いて詳細に特定することが望ましい。ここで、高精度ロケーション技術とは、車両後方のカメラから取り込んだ白線や路面ペイント情報を画像認識により検出し、更に、白線や路面ペイント情報を予め記憶した地図情報DBと照合することにより、走行車線や高精度な車両位置を検出可能にする技術である。尚、高精度ロケーション技術の詳細については既に公知であるので省略する。
次に、S3においてCPU41は、ナビゲーション装置1において設定されている案内経路を取得する。
続いて、S4においてCPU41は、前記S1で取得した車両の現在位置及び方位と前記S2で取得した案内経路に基づいて、案内交差点の案内発話地点から所定距離手前に車両が位置するか否かを判定する。尚、案内交差点とは、前記したようにナビゲーション装置1に設定された案内経路に従ってナビゲーション装置1が走行の案内を行う際に、右左折指示等の案内を行う対象となる交差点である。また、案内交差点の案内発話地点は、案内交差点での案内音声の発話を開始する地点であり、例えば案内交差点の700m手前、300m手前、100m手前とする。また、前記S4の所定距離は、案内交差点の案内に用いる目印対象物の検出及び選択に必要な時間(具体的には後述のS5〜S13の処理を行うのに必要な時間)の間に車両が走行する距離より長い距離とする。車両の現在の車速によっても異なるが、例えば50mとする。
そして、案内交差点の案内発話地点から所定距離手前に車両が位置すると判定された場合(S4:YES)には、S5へと移行する。それに対して、案内交差点の案内発話地点から所定距離手前に車両が位置しないと判定された場合(S4:NO)には、当該交差点案内処理プログラムを終了する。
S5においてCPU41は、車両の進行方向前方にある案内交差点の周辺にある目印対象物候補の情報を地図情報DB31から取得する。具体的には、CPU41は、先ず、車両の進行方向前方にある案内交差点の交差点IDを特定する。そして、地図情報DB31に記憶された目印情報36(図2)の内から、特定された交差点IDに対応づけられた目印対象物候補の種類(名称)と位置情報とをそれぞれ読み出すことによって取得する。
次に、S6においてCPU41は、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果を画像認識結果DB32(図3)から取得する。具体的には、CPU41は、画像認識結果DB32に記憶された画像認識結果の内、車両の進行方向前方にある案内交差点の交差点IDと今回の車両の進入方向(進入リンク)に対応する画像認識結果を抽出する。尚、取得される画像認識結果は、目印対象物候補の種類と重心である。例えば、図3に示す画像認識結果が画像認識結果DB32に記憶されている状態において、車両が交差点ID「10001」の交差点をリンク「34561」方向から進入する場合には、「コンビニ○○の看板」と重心(x1,y1)及び「ガソリンスタンド××の看板」と重心(x2,y2)がそれぞれ取得されることとなる。尚、画像認識結果DB32は後述のS20において記憶又は更新される。また、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果が画像認識結果DB32に存在しない場合(例えば該案内交差点を初めて走行する場合)には、前記S6の処理は省略する。
その後、S7においてCPU41は、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が確定しているか否かを判定する。尚、車両の進行方向前方にある案内交差点の案内に用いる目印対象物は、後述のS14において確定される。
そして、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が確定していないと判定された場合(S7:YES)には、S8へと移行する。それに対して、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が既に確定していると判定された場合(S7:NO)には、S15へと移行する。
S8においてCPU41は、フロントカメラ19で進行方向前方にある案内交差点付近を撮像した撮像画像に対して画像処理を行うことによって、撮像画像に含まれる目印対象物候補を検出する。以下に、前記S8の処理の詳細について説明する。
先ずCPU41は、フロントカメラ19で直近に撮像された撮像画像と、検出対象となる目印対象物候補(前記S5で情報の取得された目印対象物候補)に対応する画像認識用のテンプレートをデータ記録部12等の記憶媒体から読み出す。尚、画像認識用のテンプレートは、目印対象物の種類(例えば、「コンビニ○○の看板」や「ガソリンスタンド××の看板」等)毎に予め用意されている。次に、CPU41は、フロントカメラ19で撮像した撮像画像と、読み出したテンプレートとに基づいて、撮像画像に対してテンプレートマッチングによる画像認識処理を実行する。そして、撮像画像中に含まれる処理対象の目印対象物候補を検出する。
また、前記S6で今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果を画像認識結果DB32(図3)から取得している場合には、取得した画像認識結果を用いて前記S8の検出処理を行う。その結果、画像処理を行う前に撮像画像中に含まれる目印対象物候補の位置を予測することができ、画像処理の負担や処理時間を軽減することが可能となる。尚、テンプレートマッチングによる画像認識処理については既に公知であるので、詳細な説明は省略する。
次に、S9においてCPU41は、前記S8の画像処理の結果、少なくとも一以上の目印対象物候補が検出されたか否かを判定する。
そして、少なくとも一以上の目印対象物候補が検出されたと判定された場合(S9:YES)には、S10へと移行する。それに対して、目印対象物候補が検出できなかったと判定された場合(S9:NO)には、S15へと移行する。
S10においてCPU41は、後述の目印対象物候補情報取得処理(図10)を実行する。尚、目印対象物候補情報取得処理は、後述のようにフロントカメラ19で撮像された撮像画像から検出された目印対象物候補について、設置位置等の詳細な情報を撮像画像に対する画像処理を行うことによって検出する処理である。
次に、S11においてCPU41は、前記S8やS10で取得された目印対象物候補の種類や設置位置等の情報について、所定枚数の撮像画像分について当該情報が取得できているか否かを判定する。尚、所定枚数は、少なくとも前記S8で検出された目印対象物候補の移動の有無が判定できる枚数とし、例えば3枚以上とする。
ここで、フロントカメラ19は、車両のACCがオンされた状態では、所定間隔で連続して車両の進行方向前方環境を撮像する。従って、車両が案内交差点に接近した状態では、案内交差点の周辺を所定間隔で連続して撮像することとなる。従って、後述のように車両が案内発話地点に到達したと判定されるまでは、新たな撮像画像が入力される度に、新たに入力された撮像画像に対してS8〜S10の処理を繰り返し実行することとなる。
そして、所定枚数の撮像画像分の情報が取得できていると判定された場合(S11:YES)には、S12へと移行する。それに対して、所定枚数の撮像画像分の情報が取得できていないと判定された場合(S11:NO)には、S15へと移行する。
S12においてCPU41は、前記S10で撮像画像毎に取得された目印対象物候補の情報に基づいて、撮像画像中に検出された目印対象物候補の設置位置について、複数の撮像画像間のバラつきを算出する。また、目印対象物候補の設置位置の重心を算出する。以下に、前記S12の算出処理の詳細について具体例を挙げて説明する。
例えば、図6に示すように車両51の進行方向前方に右折指示を行う案内交差点52が存在する場合には、案内交差点52の周辺がフロントカメラ19によって複数回撮像される。そして、案内交差点52の周辺には目印対象物候補として看板53が存在し、前記S10では看板53の設置位置が撮像画像毎に検出されることとなる。例えば図7では4枚の撮像画像が撮像され、撮像画像毎に検出された看板53の設置位置がP1〜P4であった場合について示す。その場合には、CPU41は、P1〜P4のバラつき及び重心を算出する。尚、バラつきとしては、P1〜P4の標準偏差を算出しても良いし、P1〜P4を囲む最小の円や多角形を算出しても良い。また、明らかに他と大きく値の異なる設置位置のデータについてはエラー値として除外することが望ましい。尚、案内交差点52の周辺がフロントカメラ19によって異なるタイミングで複数撮像されるが、この異なるタイミングとは案内経路に含まれる案内交差点の一つを車両が通過するまでの間に異なる位置で撮像されることと定義し、車速センサの車両情報やGPS等の位置情報から異なるタイミングとなっているかを判断している。そのため、例えば、渋滞等で車両が停止して車両の位置に変化がない場合には、時間経過に従って複数回撮像しても異なるタイミングとはならないので、案内経路に含まれる案内交差点の一つを車両が通過するまでの間に異なる位置で撮像するために車速センサやGPS等の位置情報に基づいて異なるタイミングと判断するまで撮像をしないとすることも可能である。
次に、S13においてCPU41は、前記S12で算出された撮像画像間の目印対象物候補の設置位置のバラつきが閾値以下であって、且つ前記S12で算出された目印対象物候補の重心が前記S5で取得された目印情報36に基づく当該目印他使用物候補の設置位置から所定距離以内にあるか否かを判定する。尚、前記S13の閾値は、目印対象物候補の移動の有無を判定する為の閾値であり、RAM42等の記憶媒体に記憶される。また、所定距離は、目印対象物候補の同一性を判断する為の距離(例えば10m)とし、同様にRAM42等の記憶媒体に記憶される。
ここで、図8に示すように前記S12で算出された撮像画像間の目印対象物候補の設置位置のバラつきが閾値以下であって、且つ前記S12で算出された目印対象物候補の重心が目印情報36に基づく当該目印他使用物候補の設置位置Xから所定距離以内にある場合(S13:YES)には、撮像画像から検出された目印対象物候補が、実際に案内交差点52の周辺に位置する目印対象物候補であると推定できる。従って、撮像画像から検出された目印対象物候補を案内交差点の案内に用いる目印対象物として確定する(S14)。尚、目印対象物候補が複数個検出された場合には、該検出された複数の目印対象物候補の内から最も案内に適したものを案内交差点の案内に用いる目印対象物として確定する。例えば、案内交差点の手前側にあって、案内交差点における車両の退出方向側にある目印対象物候補や、交差点中心に最も近い位置にある目印対象物候補を優先的に選択する。尚、目印情報36(図2)において目印対象物候補毎に予め選択優先順位を設定する構成としても良い。
一方、図9に示すように前記S12で算出された撮像画像間の目印対象物候補の設置位置のバラつきが閾値より大きい場合、又は前記S12で算出された目印対象物候補の重心が目印情報36に基づく当該目印他使用物候補の設置位置Xから所定距離以上離れている場合(S13:NO)には、撮像画像から検出された目印対象物候補が、実際に案内交差点52の周辺に位置する目印対象物候補でない(例えば、トラックの荷台側面に描かれたイラスト等)と推定できる。従って、撮像画像から検出された目印対象物候補を案内交差点の案内に用いる目印対象物として確定することなくS15へと移行する。
その後、S15においてCPU41は、GPS21等により検出した車両の現在位置に基づいて、案内交差点の案内発話地点に車両が到達したか否かを判定する。また、案内交差点の案内発話地点は、例えば案内交差点の700m手前、300m手前、100m手前とする。
そして、案内交差点の案内発話地点に車両が到達したと判定された場合(S15:YES)には、S17へと移行する。それに対して、案内交差点の案内発話地点に車両が到達していないと判定された場合(S15:NO)には、S16へと移行する。
S16においてCPU41は、フロントカメラ19で撮像された新たな撮像画像の入力があったか否かを判定する。
そして、フロントカメラ19で撮像された新たな撮像画像の入力があったと判定された場合(S16:YES)にはS7へと戻り、案内交差点の案内に用いる目印対象物が確定していない場合には新たに入力された撮像画像を対象としてS8以降の処理を実行する。それに対して、フロントカメラ19で撮像された新たな撮像画像の入力が無いと判定された場合(S16:NO)には、S15へと戻る。
一方、S17においてCPU41は、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が確定しているか否かを判定する。尚、車両の進行方向前方にある案内交差点の案内に用いる目印対象物は、前記S14において確定される。
そして、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が確定していると判定された場合(S17:YES)には、S18へと移行する。それに対して、車両の進行方向前方にある案内交差点の案内に用いる目印対象物が確定していないと判定された場合(S17:NO)には、S19へと移行する。
S18においてCPU41は、前記S14で案内交差点の目印対象物に確定された目印対象物候補を用いて、案内交差点に関する案内を行う。具体的には、車両の案内交差点の退出方向を特定する案内(即ち、車両が案内交差点から退出する退出道路を特定させる為の案内)を行う。例えば、車両が右折案内を行う案内交差点へと接近しており、案内交差点の目印対象物として「コンビニ○○の看板」が確定された場合には、ユーザに「コンビニ○○の看板」を目印に交差点を右折する指示を行う。具体的には、「300m先、コンビニ○○を右方向です」との音声案内をスピーカ16から出力する。更に、案内交差点が車両の所定距離以内(例えば300m)に接近した場合には、目印対象物を含む案内交差点付近の拡大図や車両の案内交差点における進行方向について液晶ディスプレイ15に表示する。
その結果、案内交差点及び該案内交差点から車両が退出する道路をユーザに正確に特定させることが可能となる。
一方、前記S19でCPU41は、案内交差点までの距離を用いて該案内交差点の案内を行う。例えば、「300m先を右方向です」との音声案内をスピーカ16から出力する。
次に、S20においてCPU41は、後述の画像認識結果保存処理(図13)を実行する。尚、画像認識結果保存処理は、後述のようにフロントカメラ19により撮像した撮像画像に基づいて行われた前記S8〜S10の画像認識結果の履歴を、画像認識結果DB32に記憶又は更新する処理である。
次に、前記S10において実行される目印対象物候補情報取得処理のサブ処理について図10に基づき説明する。図10は目印対象物候補情報取得処理のサブ処理プログラムのフローチャートである。
先ず、S31においてCPU41は、車両の現在位置及び方位を現在位置検出部11の検出結果に基づいて取得する。尚、車両の現在位置を地図データ上で特定するマップマッチング処理についても行う。更に、車両の現在位置は、高精度ロケーション技術を用いて詳細に特定することが望ましい。
次に、S32においてCPU41は、前記S31で検出した車両の現在位置と地図情報DB31に記憶された地図情報とに基づいて、車両が現在走行する道路の道路方向(より具体的には案内交差点への接続方向)を取得する。
続いて、S33においてCPU41は、前記S31で検出した車両の方位と前記S32で検出した道路方向に基づいて、車両の方位と道路方向が一致するか否かを判定する。
そして、車両の方位と道路方向が一致すると判定された場合(S33:YES)には、車両が案内交差点へ向けて走行している(即ち、フロントカメラ19で案内交差点の周辺が撮像されている)と推定し、S35へと移行する。それに対して、車両の方位と道路方向が一致しないと判定された場合(S33:NO)には、車両が案内交差点へ向けて走行していない(即ち、フロントカメラ19で案内交差点の周辺が撮像されていない)と推定し、S34へと移行する。尚、前記S33の一致判定は完全一致しているか否かの判定に限定されず、例えば所定角度以内の誤差がある場合も含む。
S34においてCPU41は、現在の画像処理対象となっている撮像画像に対する目印対象物候補の検出結果を破棄する。即ち、当該撮像画像から目印対象物候補が検出されなかったものとして処理する。その後、S11へと移行する。
一方、S35においてCPU41は、地図情報DB31の目印情報36(図2)から、撮像画像内に検出された目印対象物候補に関する情報を読み出す。具体的には、目印対象物の設置位置や形状データを取得する。
次に、S36においてCPU41は、フロントカメラ19の画角やレンズ特性等のフロントカメラ19に関する情報をデータ記録部12等から取得する。
続いて、S37においてCPU41は、撮像画像に対する画像認識結果と前記S35で取得した目印対象物候補に関する情報と前記S36で取得したフロントカメラ19に関する情報とに基づいて、撮像画像内に検出された目印対象物候補について、自車両に対する該目印対象物候補の相対位置を検出する。尚、撮像画像内に目印対象物候補が複数検出された場合には、検出された複数の目印対象物候補毎に相対位置を検出する。
以下に、上記S37の自車両に対する目印対象物候補の相対位置の検出方法の詳細について説明する。ここで、図11は図6に示す状態にある車両51のフロントカメラ19で、車両51の進行方向にある案内交差点52周辺を撮像した撮像画像61である。また、図12は自車両と看板53との位置関係を示した模式図である。
図11に示すように、撮像画像61には、案内交差点52の周辺に設置された看板53が含まれる。従って、前記S8において看板53が目印対象物候補として検出されることとなる。そして、CPU41は、前記S35で取得した看板53の形状データと撮像画像内の看板53の形状とを比較し、更にフロントカメラ19の画角やレンズ特性等を用いることによって、自車両に対する看板53の相対位置を検出する。
具体的には、図11に示すように撮像画像内の看板53の縦方向の長さがhであって、実際の看板53の縦方向の長さがHである場合には、hとHの比より車両の進行方向に対する看板53までの距離Lが算出される。尚、フロントカメラ19をステレオカメラとすれば、撮像画像のみから距離Lを算出することも可能である。また、撮像画像の中心軸(即ちフロントカメラ19の光軸)から画像端部までの距離W/2と、撮像画像の中心軸から看板53までの距離dとの比から、距離dが算出される。尚、Wは撮像画像の画面幅の相当距離であり、フロントカメラ19の画角やレンズ特性等から一義的に特定される。そして、距離Lと距離dとの組合せによって自車両に対する看板53の相対位置が検出されることとなる。
次に、S38においてCPU41は、前記S31で検出した車両の現在位置と前記S37で検出した自車両に対する目印対象物候補の相対位置とに基づいて、撮像画像内に検出された目印対象物候補の設置位置を絶対位置により検出する。その後、S11へと移行し、検出された目印対象物候補の設置位置に基づく処理が実行される。
次に、前記S20において実行される画像認識結果保存処理のサブ処理について図13に基づき説明する。図13は画像認識結果保存処理のサブ処理プログラムのフローチャートである。
先ず、S41においてCPU41は、複数の撮像画像毎に前記S38で検出された目印対象物候補の設置位置のデータの内、保存対象とする設置位置のデータを選別する。具体的には、明らかに他と大きく値の異なる設置位置のデータについてはエラー値として除外する。
次に、S42においてCPU41は、前記S41で選別された設置位置のデータに基づいて、目印対象物候補の設置位置の重心を算出する。例えば、撮像画像毎に検出された目印他使用物候補の設置位置がP1〜P5であって、P5のみが大きく異なる値であった場合には、CPU41は、P1〜P4の重心を算出する。尚、撮像画像内に目印対象物候補が複数検出された場合には、検出された複数の目印対象物候補毎に重心を算出する。
続いて、CPU41は、画像認識結果DB32(図3)を読み出し、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果が画像認識結果DB32に存在するか否かを判定する。
そして、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果が画像認識結果DB32に存在すると判定された場合(S43:YES)には、S44へと移行する。それに対して、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果が画像認識結果DB32に存在しないと判定された場合(S43:NO)には、S45へと移行する。
S44においてCPU41は、今回の案内交差点に対する車両の進行方向に対応する過去の画像認識結果を画像認識結果DB32から読み出し、現在保存されているデータと今回算出されたデータとを比較する。そして、データが大きく異なる場合には、今回算出された画像認識結果にデータ内容を更新する。ここで、データが大きく異なる場合としては、例えば、同じ目印対象物候補は検出されているが算出された重心の値が大きく異なる場合や、検出された目印対象物候補の種類が異なる場合がある。そのような事象が生じる原因としては、例えば、前回の画像認識が何らかの理由で正確に処理できなかったこと、目印対象物候補が新設又は撤去されたこと等がある。例えば、今回算出された目印対象物候補の設置位置の重心が、同じ案内交差点で過去に登録されたいずれの重心の位置からも離間した位置にある場合には、該目印対象物候補が新設された目印対象物候補であると識別できる。即ち、CPU41は調査員による現地調査をすることなく目印対象物候補の新設又は撤去を識別することも可能である。尚、前記S44で更新される画像認識結果は、図3に示すように車両が進入した案内交差点を識別する交差点IDと、車両の進入方向(進入リンク)と、検出された目印対象物候補の種類と、目印対象物候補の設置位置の重心の座標のいずれか又は全部となる。
一方、S45においてCPU41は、今回算出された画像認識結果を画像認識結果DB32に新たに記憶する。尚、前記S45で新たに記憶される画像認識結果は、図3に示すように車両が進入した案内交差点を識別する交差点IDと、車両の進入方向(進入リンク)と、検出された目印対象物候補の種類と、目印対象物候補の設置位置の重心の座標である。
以上詳細に説明した通り、本実施形態に係るナビゲーション装置1、ナビゲーション装置1を用いた走行案内方法及びナビゲーション装置1で実行されるコンピュータプログラムによれば、車両の進行方向前方に案内交差点が有る場合に、車両に搭載されたフロントカメラ19により案内経路に含まれる案内交差点の周辺を異なるタイミングで複数回撮像し、撮像された複数の撮像画像毎に、撮像画像に含まれる目印対象物の設置位置を検出し(S10)、検出された目印対象物の設置位置について、複数の撮像画像間のバラつきを算出し(S12)、算出されたバラつきが閾値以下である場合に、検出された目印対象物を用いて案内交差点の案内を行う(S18)ので、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラスト)を目印対象物であると誤検出することを防止することが可能となる。その結果、ユーザにとって視認不可能な目印対象物や存在しない目印対象物を用いて案内交差点の案内が行われることを防止でき、案内交差点におけるより適切な案内を行うことが可能となる。
また、目印対象物の設置位置に関する情報をDB又は外部サーバから取得し、取得された目印対象物の設置位置の所定距離以内に、撮像画像毎に検出された目印対象物の設置位置の重心がある場合に、目印対象物を用いて案内交差点の案内を行うので、目印対象物以外の対象物(例えば案内交差点の周辺を走行するトラックの荷台の壁面に描かれたイラストや案内交差点から離れた位置にある対象物)を目印対象物であると誤検出することを防止することが可能となる。
また、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきが閾値以下である場合に、撮像画像毎に検出された目印対象物の設置位置の重心と、案内交差点に対する車両の進入方向とを、目印対象物に対応付けて登録し(S20)、過去に情報登録手段により登録された情報を用いて目印対象物の設置位置を検出するので、画像処理を行う前に撮像画像内で目印対象物の検出される位置を予測することが可能となる。その結果、画像処理の処理負荷を軽減させるとともに、処理時間についても短縮することが可能となる。
また、撮像画像毎に検出された目印対象物の設置位置の重心が、過去に登録されたいずれの重心の位置からも離間した位置にある場合に、検出された目印対象物が新設された目印対象物であると識別するので、実地での調査を行うことなく目印対象物の新設を検出することが可能となる。
また、異なるタイミングで複数回撮像した撮像画像間の検出結果のバラつきが閾値より大きい場合に、案内交差点までの距離を用いて該案内交差点の案内を行うので、目印対象物が確定できなかった場合であっても、目印対象物を用いずに案内交差点を走行する車両を適切に案内することが可能となる。
尚、本発明は前記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。
例えば、本実施形態では目印情報36として目印対象物候補の形状データについても記憶する構成としているが、フロントカメラ19をステレオカメラとすれば形状データを用いなくても目印対象物候補の自車両に対する相対位置を検出することが可能となるので、目印対象物候補の形状データは不要となる。
また、本実施形態では、撮像画像から目印対象物候補を検出する為の画像処理としてテンプレートマッチングによる画像認識処理を行っているが、他の画像処理(例えば特徴点検出)により目印対象物候補を検出する構成としても良い。
また、本発明はナビゲーション装置以外に、案内経路に基づく経路案内を行う機能を有する装置に対して適用することが可能である。例えば、携帯電話機やスマートフォン等の携帯端末、パーソナルコンピュータ、タブレット型端末等(以下、携帯端末等という)に適用することも可能である。但し、フロントカメラ19の撮像画像が取得できるように車載器に接続する構成とする。また、サーバと携帯端末等から構成されるシステムに対しても適用することが可能となる。その場合には、上述した交差点案内処理プログラム(図4、図5、図10及び図13)の各ステップは、サーバと携帯端末等のいずれが実施する構成としても良い。
1 ナビゲーション装置
13 ナビゲーションECU
36 目印情報
41 CPU
42 RAM
43 ROM
51 車両
52 案内交差点
53 看板
61 撮像画像

Claims (7)

  1. 案内経路を設定する案内経路設定手段と、
    車両に搭載された撮像装置により前記案内経路に含まれる案内交差点の周辺を、異なるタイミングで複数回撮像する撮像手段と、
    前記撮像手段により撮像された複数の撮像画像毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物の設置位置を検出する目印対象物検出手段と、
    前記目印対象物検出手段により検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出手段と、
    前記バラつき算出手段によって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内手段と、を有することを特徴とする走行案内システム。
  2. 前記目印対象物の設置位置に関する情報をDB又は外部サーバから取得する位置情報取得手段を有し、
    前記交差点案内手段は、前記位置情報取得手段により取得された前記目印対象物の設置位置の所定距離以内に、前記目印対象物検出手段により撮像画像毎に検出された前記目印対象物の設置位置の重心がある場合に、前記目印対象物を用いて前記案内交差点の案内を行うことを特徴とする請求項1に記載の走行案内システム。
  3. 前記バラつき算出手段によって算出された前記バラつきが閾値以下である場合に、前記目印対象物検出手段により撮像画像毎に検出された前記目印対象物の設置位置の重心と、前記案内交差点に対する前記車両の進入方向とを、前記目印対象物に対応付けて登録する情報登録手段を有し、
    前記目印対象物検出手段は、過去に前記情報登録手段により登録された情報を用いて前記目印対象物の設置位置を検出することを特徴とする請求項1又は請求項2に記載の走行案内システム。
  4. 前記目印対象物検出手段により撮像画像毎に検出された前記目印対象物の設置位置の重心が、過去に前記情報登録手段により登録されたいずれの重心の位置からも離間した位置にある場合に、前記目印対象物検出手段により検出された前記目印対象物が新設された目印対象物であると識別する新設目印識別手段を有することを特徴とする請求項3に記載の走行案内システム。
  5. 前記バラつき算出手段によって算出された前記バラつきが前記閾値より大きい場合に、前記案内交差点までの距離を用いて該案内交差点の案内を行う交差点距離案内手段を有することを特徴とする請求項1乃至請求項4のいずれかに記載の走行案内システム
  6. 案内経路を設定する案内経路設定ステップと、
    車両に搭載された撮像装置により前記案内経路に含まれる案内交差点の周辺を、異なるタイミングで複数回撮像する撮像ステップと、
    前記撮像ステップにより撮像された複数の撮像画像毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物の設置位置を検出する目印対象物検出ステップと、
    前記目印対象物検出ステップにより検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出ステップと、
    前記バラつき算出ステップによって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内ステップと、を有することを特徴とする走行案内方法。
  7. コンピュータに、
    案内経路を設定する案内経路設定機能と、
    車両に搭載された撮像装置により前記案内経路に含まれる案内交差点の周辺を、異なるタイミングで複数回撮像する撮像機能と、
    前記撮像機能により撮像された複数の撮像画像毎に、前記撮像画像に含まれる前記案内交差点の案内を行う場合に目印とする目印対象物の設置位置を検出する目印対象物検出機能と、
    前記目印対象物検出機能により検出された前記目印対象物の設置位置について、複数の前記撮像画像間のバラつきを算出するバラつき算出機能と、
    前記バラつき算出機能によって算出された前記バラつきが閾値以下である場合に、前記目印対象物を用いて前記案内交差点の案内を行う交差点案内機能と、
    を実行させることを特徴とするコンピュータプログラム。
JP2013014466A 2013-01-29 2013-01-29 走行案内システム、走行案内方法及びコンピュータプログラム Pending JP2014145666A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013014466A JP2014145666A (ja) 2013-01-29 2013-01-29 走行案内システム、走行案内方法及びコンピュータプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013014466A JP2014145666A (ja) 2013-01-29 2013-01-29 走行案内システム、走行案内方法及びコンピュータプログラム

Publications (1)

Publication Number Publication Date
JP2014145666A true JP2014145666A (ja) 2014-08-14

Family

ID=51426027

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013014466A Pending JP2014145666A (ja) 2013-01-29 2013-01-29 走行案内システム、走行案内方法及びコンピュータプログラム

Country Status (1)

Country Link
JP (1) JP2014145666A (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019207675A1 (ja) * 2018-04-25 2019-10-31 三菱電機株式会社 ナビゲーションシステムおよび経路案内方法
WO2020078727A1 (de) 2018-10-18 2020-04-23 Volkswagen Aktiengesellschaft Verfahren und system zum bestimmen eines umfeldmodells für ein fahrzeug
CN112686209A (zh) * 2021-01-25 2021-04-20 深圳市艾为智能有限公司 基于车轮识别的车后盲区监测方法
CN112965652A (zh) * 2021-03-26 2021-06-15 深圳市慧鲤科技有限公司 信息展示方法及装置、电子设备和存储介质

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019207675A1 (ja) * 2018-04-25 2019-10-31 三菱電機株式会社 ナビゲーションシステムおよび経路案内方法
JPWO2019207675A1 (ja) * 2018-04-25 2020-12-03 三菱電機株式会社 ナビゲーションシステム
JP7016410B2 (ja) 2018-04-25 2022-02-04 三菱電機株式会社 ナビゲーションシステム
WO2020078727A1 (de) 2018-10-18 2020-04-23 Volkswagen Aktiengesellschaft Verfahren und system zum bestimmen eines umfeldmodells für ein fahrzeug
DE102018217840A1 (de) 2018-10-18 2020-04-23 Volkswagen Aktiengesellschaft Verfahren und System zum Bestimmen eines Umfeldmodells für ein Fahrzeug
US11892300B2 (en) 2018-10-18 2024-02-06 Volkswagen Aktiengesellschaft Method and system for determining a model of the environment of a vehicle
CN112686209A (zh) * 2021-01-25 2021-04-20 深圳市艾为智能有限公司 基于车轮识别的车后盲区监测方法
CN112965652A (zh) * 2021-03-26 2021-06-15 深圳市慧鲤科技有限公司 信息展示方法及装置、电子设备和存储介质

Similar Documents

Publication Publication Date Title
JP5729176B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP5565296B2 (ja) 経路案内装置、経路案内方法及びコンピュータプログラム
JP5874225B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP2014163814A (ja) 走行案内システム、走行案内方法及びコンピュータプログラム
JP5811666B2 (ja) 停止線検出システム、停止線検出装置、停止線検出方法及びコンピュータプログラム
JP2014153192A (ja) 走行案内システム、走行案内方法及びコンピュータプログラム
JP2014160031A (ja) 走行案内システム、走行案内方法及びコンピュータプログラム
JP2014145666A (ja) 走行案内システム、走行案内方法及びコンピュータプログラム
JP5541211B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP5712847B2 (ja) 信号機増減検出システム、信号機増減検出装置、信号機増減検出方法及びコンピュータプログラム
JP5682455B2 (ja) 走行案内システム、走行案内装置、走行案内方法及びコンピュータプログラム
JP5765167B2 (ja) 移動体位置検出システム、移動体位置検出装置、移動体位置検出方法及びコンピュータプログラム
JP5899691B2 (ja) 移動体位置検出システム、移動体位置検出装置、移動体位置検出方法及びコンピュータプログラム
JP5794023B2 (ja) 停止線検出システム、停止線検出装置、停止線検出方法及びコンピュータプログラム
JP5691915B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP2015007558A (ja) 駐車場提携先施設検索システム、駐車場提携先施設検索方法及びコンピュータプログラム
JP5772453B2 (ja) 移動体位置検出システム、移動体位置検出装置、移動体位置検出方法及びコンピュータプログラム
JP2015007557A (ja) 提携駐車場登録システム、提携駐車場登録方法及びコンピュータプログラム
JP5810721B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP5720517B2 (ja) 停止線検出システム、停止線検出装置、停止線検出方法及びコンピュータプログラム
JP5786523B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP5716564B2 (ja) 移動案内システム、移動案内装置、移動案内方法及びコンピュータプログラム
JP5712844B2 (ja) 移動体位置検出システム、移動体位置検出装置、移動体位置検出方法及びコンピュータプログラム
JP2014145672A (ja) 走行案内システム、走行案内方法及びコンピュータプログラム
JP5794024B2 (ja) 停止線検出システム、停止線検出装置、停止線検出方法及びコンピュータプログラム