JP4320032B2 - 経路案内システム及び方法 - Google Patents
経路案内システム及び方法 Download PDFInfo
- Publication number
- JP4320032B2 JP4320032B2 JP2006511982A JP2006511982A JP4320032B2 JP 4320032 B2 JP4320032 B2 JP 4320032B2 JP 2006511982 A JP2006511982 A JP 2006511982A JP 2006511982 A JP2006511982 A JP 2006511982A JP 4320032 B2 JP4320032 B2 JP 4320032B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- landscape
- route
- comfort level
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3476—Special cost functions, i.e. other than distance or default speed limit of road segments using point of interest [POI] information, e.g. a route passing visible POIs
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B29/00—Maps; Plans; Charts; Diagrams, e.g. route diagram
- G09B29/10—Map spot or coordinate position indicators; Map reading aids
- G09B29/106—Map spot or coordinate position indicators; Map reading aids using electronic means
Description
本発明は車両の目的地までの走行経路を案内する経路案内システム及び方法に関する。
【背景技術】
地図の道路上の各点を数値化して得られる道路データを含む地図データを記憶装置に記憶しておき、車両の現在位置及び進行方位を各種センサを用いて検出しつつその現在位置を含む一定範囲の地域の地図データ群を記憶装置から読み出して車両の現在位置周辺の地図として表示装置の画面上に映し出すとともに、その地図上に車両の現在位置及び進行方位を示す自車マークを自動表示させるナビゲーション装置は既に知られている。
従来のナビゲーション装置は、目的地までの経路を自動的に設定する機能を有している。経路を設定する際には、出発地と目的地及び経由地の間の経路における有料道路の利用の有無や最短距離等の様々な条件を加味して計算し、複数の経路候補から1つの経路を選択し、その経路を地図上に提示する。
しかしながら、従来のナビゲーション装置においては、経路設定の際に運転者等の搭乗者に快適なドライブを提供するという点がほとんど考慮されることなく経路が設定される。例えば、目的地として観光地への経路設定においても単に移動ということだけの経路設定となり、観光地までの途中の景色等を搭乗者が楽しんで移動するというような経路設定を行うことはできなかった。
【発明の開示】
本発明の1つの目的は、快適なドライブを搭乗者に提供できるように経路を設定することができる経路案内システム及び方法を提供することである。
本発明の第1アスペクトによれば、車両の目的地までの経路を演算する経路演算手段と、複数の地点の景観画像をデータとして記憶した記憶手段と、前記経路演算手段によって演算された経路上の景観画像を前記記憶手段から読み出して出力する画像提供手段と、前記画像提供手段によって出力された演算経路上の景観画像を表示する表示手段と、を備える経路案内システムが提供される。この経路案内システムはさらに、前記表示手段による前記演算経路上の景観画像の表示中又は表示後に、操作に応じて前記経路演算手段による演算経路を設定経路として確定する経路確定手段を備え、前記車両には、車両前方を撮影するカメラと、前記カメラによって撮影された前記車両前方の景観画像の快適度を算出する快適度算出手段と、が設けられ、前記快適度算出手段は、前記カメラによって撮影された前記車両前方の画像について道路解析処理を行う道路解析手段と、前記車両前方の画像について風景解析処理を行う風景解析手段と、前記車両前方の画像について背景解析処理を行う背景解析手段と、前記道路解析処理の結果に応じて道路快適度を算出する手段と、前記風景解析処理の結果に応じて風景快適度を算出する手段と、前記背景解析処理の結果に応じて背景快適度を算出する手段と、を備え、前記景観画像は、前記道路快適度、前記風景快適度及び前記背景快適度からなる景観快適度が画像付加情報として含まれている画像であることを特徴とする。
本発明の第2アスペクトによれば、車両の目的地までの経路を演算する経路演算ステップと、複数の地点の景観画像をデータとして記憶手段に記憶させるステップと、前記経路演算ステップにおいて演算された経路上の景観画像を前記記憶手段から読み出して出力する画像提供ステップと、前記画像提供ステップにおいて出力された演算経路上の景観画像を表示する表示ステップと、前記表示ステップによる前記演算経路上の景観画像の表示中又は表示後に、操作に応じて前記経路演算ステップによる演算経路を設定経路として確定する経路確定ステップと、を備えた経路案内方法が提供される。経路案内方法は、カメラによって撮影された前記車両前方の景観画像の快適度を算出する快適度算出ステップと、をさらに備え、前記快適度算出ステップは、前記カメラによって撮影された前記車両前方の画像について道路解析処理を行う道路解析ステップと、前記車両前方の画像について風景解析処理を行う風景解析ステップと、前記車両前方の画像について背景解析処理を行う背景解析ステップと、前記道路解析処理の結果に応じて道路快適度を算出するステップと、前記風景解析処理の結果に応じて風景快適度を算出するステップと、前記背景解析処理の結果に応じて背景快適度を算出するステップと、を備え、前記景観画像は、前記道路快適度、前記風景快適度及び前記背景快適度からなる景観快適度が画像付加情報として含まれている画像であることを特徴とする。
【図面の簡単な説明】
図1は本発明による経路案内システムの概略構成を示すブロック図である。
図2は車載端末装置の構成を示すブロック図である。
図3は景観画像収集処理を示すフローチャートである。
図4は景観快適度算出処理を示すフローチャートである。
図5は景観画像の4分割を示す図である。
図6は道路解析処理を示すフローチャートである。
図7は風景解析処理を示すフローチャートである。
図8は背景解析処理を示すフローチャートである。
図9は道路解析処理の結果の各指数及び道路快適度を示す図である。
図10は風景解析処理の結果の各指数及び風景快適度を示す図である。
図11は背景解析処理の結果の各指数及び背景快適度を示す図である。
図12は景観画像管理処理を示すフローチャートである。
図13はナビゲーション処理を示すフローチャートである。
図14は画像読出送信処理を示すフローチャートである。
【発明を実施するための最良の形態】
以下、本発明の実施例を図面を参照しつつ詳細に説明する。
図1を参照すると、本実施例の経路案内システムは複数の車載端末装置11〜1n、サーバ2、ネットワーク網3及び通信中継装置4を備えている。複数の車載端末装置11〜1nとサーバ2とはネットワーク網3と通信中継装置4とを介して通信可能にされている。
車載端末装置11〜1nの各々は、車両61〜6nに搭載され、図2に示すように、カメラ11、プロセッサ12、GPS(グローバルポジショニングシステム)装置13、車両運行検出部14、無線装置15、記憶装置16、操作部17及び表示装置18を備えている。これらカメラ11、プロセッサ12、GPS装置13、車両運行検出部14、無線装置15、記憶装置16、操作部17及び表示装置18はバス19によって共通接続されている。
カメラ11は例えば、CCDカメラからなり、車両前方を撮影するように車両に取り付けられている。
プロセッサ12はカメラ11から供給される画像データを入力して画像データが示す景観の快適度を算出する処理を行う。プロセッサ12は解析処理結果に応じて景観画像収集処理を行い、更に、GPS装置13及び車両運行検出部14各々の検出出力に応じてナビゲーション処理を行う。また、景観快適度算出処理、景観画像収集処理及びナビゲーション処理の詳細については後述する。
GPS装置13は車両の現在位置及び進行方位を検出する。車両運行検出部14は例えば、車速、エンジン回転数等の車両の運行状態を検出する。GPS装置13によって検出された現在位置及び進行方位、並びに車両運行検出部14によって検出された運行状態の各データは、プロセッサ12による景観画像収集処理及びナビゲーション処理において用いられる。
無線装置15は、サーバ2から送られて来た無線信号を受信して復調して出力し、またサーバ2に送るべきデータを無線信号として送信する。
記憶装置16はハードディスクや半導体メモリからなる。記憶装置16にはプロセッサ12によって実行される景観画像収集処理及びナビゲーション処理等の処理プログラムの他、経路検索用の道路データや表示用の地図データ等のデータが記憶される。
操作部17は例えば、キーボードからなり、入力操作に応じた指令をバス19を介してプロセッサ12に供給する。表示装置18は、例えば、液晶表示装置であり、車両の現在位置及び進行方位を示す自車マークを地図と共に表示する他、プロセッサ12によって演算された経路や景観画像を表示する。
サーバ2は記憶装置21を有し、ネットワーク網3に接続されている。サーバ2は車載端末装置11〜1nの各々から送られてきた画像データを画像付加情報を用いて管理するために景観画像管理処理を実行する。また、車載端末装置11〜1nの各々からの景観画像要求を受信すると、画像読出送信処理を行って画像データを送信する。景観画像管理処理及び画像読出送信処理の詳細については後述する。
かかる構成の経路案内システムの動作をプロセッサ12及びサーバ2の各処理に従って説明する。
景観画像収集処理においてはプロセッサ12は、図3に示すように、先ず、カメラ11からの画像データを取り込み(ステップS1)、その画像データが示す画像(静止画)に障害物が存在するか否かを判別する(ステップS2)。障害物とは景観以外の先行車両や駐車車両である。例えば、今回取り込んだ画像データをその直前までの複数の画像データと比較して障害物が存在すると判別することが行われる。障害物が存在するならば、ステップS1に戻って新たな画像データを取り込む。なお、障害物が全く存在しないという場合は少ないので、ステップS2では画像に示された障害物部分の総量が閾値より多いか否かを判別しても良い。
画像に障害物が存在しない場合には、今回の画像データが示す景観画像に応じて景観快適度算出処理を行う(ステップS3)。
景観快適度算出処理においては、図4に示すように、景観画像を対角線で4つの領域に分割する(ステップS11)。図5に示すように画像は4角形であり、対角線A,Bによって上下及び左右の4つの領域に分割される。上方領域は背景領域、下方領域は道路領域、左右領域は風景領域とされる。
下方領域の画像に応じて道路解析処理を行い(ステップS12)、左右領域の画像に応じて風景解析処理を行い(ステップS13)、上方領域の画像に応じて背景解析処理を行う(ステップS14)。
ステップS12の道路解析処理では、図6に示すように、白線認識及び近似直線算出が行われる(ステップS41)。すなわち、道路上の白線が認識され、その白線の近似直線が算出される。白線認識方法としては例えば、特開平6−333192号公報に示された方法がある。特開平6−333192号公報の開示内容は本明細書に記載されたものとする。この白線認識方法では、画像データに基づいて白線候補点が抽出され、その白線候補点のうちの各2点間線分の基準線に対する角度の度数分布が求められ、度数分布に基づいて白線の基準線に対する実角度及び白線に含まれる実候補点が抽出されると共に、実角度及び実候補点に基づいて白線の近似直線が決定される。
次に、直線距離計測及び車線幅計測が行われる(ステップS42)。直線距離計測では、認識された白線が近似直線から外れる点が求められる。その点までの直線の距離が直線距離とされ、直線距離が長いほど、走りやすい快適な道路と判定され、高得点が設定される。また、直線近似ができない急カーブの道路であるほど低得点が設定される。車線幅計測方法としては例えば、特開2002−163642号公報に示された方法がある。特開2002−163642号公報の開示内容は本明細書に記載されたものとする。すなわち、道路上の車線位置を特定し、現在の車線位置とその過去の履歴とに基づいて、レーン幅を推定することが行われる。
更に、路面状況認識及びスコア化が行われる(ステップS43)。路面状況認識とは、路面が舗装されているか否かを色分布解析により識別することである。また、ドライ、ウエット及び雪のような天候に対応した路面状況を認識しても良い。特開2001−88636号公報には雪、砂利道等の路面状況の認識方法が示されており、この方法を用いても良い。特開2001−88636号公報の開示内容は本明細書に記載されたものとする。スコア化では舗装路面が高得点とされ、未舗装の路面が低得点とされる。
ステップS41〜S43の実行によって得られた各道路パラメータ値に応じて道路の直線度、道路幅の広さ及び路面の綺麗度が設定される(ステップS44)。すなわち、直線距離に応じて道路の直線度、車線幅に応じて道路幅の広さ、路面状況値に応じて路面の綺麗度が各々設定される。道路の直線度、道路幅の広さ、路面の綺麗度は各々の基準値との類似度に応じて0〜100の範囲の値が設定される。そして、ステップS44で設定された道路の直線度、道路幅の広さ、路面の綺麗度の平均値が算出される(ステップS45)。この平均値は道路領域快適度を示す。
ステップS13の風景解析処理では、図7に示すように、左右領域各々の緑色率及び青色率が解析される(ステップS51)。左右領域各々について領域内の緑色部分(類似色を含む)の画素数を抽出し、緑色部分の画素数の領域内の総画素数に対する割合を緑色率とし、同様に、左右領域各々について領域内の青色部分(類似色を含む)の画素数を抽出し、青色部分の画素数の領域内の総画素数に対する割合を青色率とすることが行われる。緑色率が左右領域各々の森林の割合となり、青色率が左右領域各々の海の割合となる。
次に、色分布解析が行われる(ステップS52)。色分布は左右領域各々の各色の画素数をヒストグラムとして算出することにより求められる。また、左右領域各々のフラクタル次元解析が行われる(ステップS53)。フラクタル次元の値により景観の質が評価される。フラクタル次元解析を用いた景観の質評価については特開2000−57353号公報に示されている。特開2000−57353号公報の開示内容は本明細書に記載されたものとする。特開2000−57353号公報では、フラクタル次元の値が0から2の間の値中の1.50〜1.65の範囲のとき景観の質が高いと評価される。
ステップS51〜S53の実行によって得られた各風景パラメータ値に応じて森林、海の割合、看板の少なさ及び風景の複雑度が設定される(ステップS54)。すなわち、緑色率及び青色率に応じて森林、海の割合、色分布に応じて看板の少なさ、フラクタル次元の値に応じて複雑度が各々設定される。森林、海の割合、看板の少なさ及び複雑度は各々の基準値との類似度に応じて0〜100の範囲の値が設定される。そして、ステップS54で設定された森林、海の割合、看板の少なさ及び複雑度の平均値が左右領域各々において算出される(ステップS55)。平均値は左右の風景快適度を示す。
ステップS14の背景解析処理では、図8に示すように、上方領域の青色率が解析される(ステップS61)。上方領域内の青色部分(類似色を含む)の画素数を抽出し、青色部分の画素数の領域内の総画素数に対する割合を青色率とすることが行われる。青色率が上方領域の青空の割合となる。
次に、色分布解析が行われる(ステップS62)。色分布は上方領域の各色の画素数をヒストグラムとして算出することにより求められ、これにより看板、陸橋、遠景の山並みが解析される。また、距離測定が行われる(ステップS63)。これは色分布解析の空、遠景の山、陸橋、トンネル等の主要背景物までの距離を測定することである。撮影された画像と一つ前のフレームの画像を用いて、オプティカルフローを求め、領域内の物体の距離を計測する。無限遠であれば物体がないと判定する。特開平6−107096号公報には、撮像した一連の前景動画像中の時間的に相前後する2コマの画像中に写し出される対象物体上の同一点の移動をオプティカルフローベクトルとして検出することが示されている。特開平6−107096号公報の開示内容は本明細書に記載されたものとする。
ステップS61〜S63の実行によって得られた各背景パラメータ値に応じて背景の青空率、標識の少なさ及び開放度が設定される(ステップS64)。すなわち、青色率に応じて青空率、色分布に応じて標識の少なさ、空、遠景の山、陸橋、トンネルまでの距離に応じて開放度が各々設定される。青空率、標識の少なさ及び開放度は各々の基準値との類似度に応じて0〜100の範囲の値が設定される。そして、ステップS64で設定された青空率、標識の少なさ及び開放度の平均値が算出される(ステップS65)。この平均値は背景快適度を示す。
このように各領域について解析処理後、得られた道路領域快適度、左右の風景快適度及び背景快適度の平均値を車両前方の景観快適度として算出する(ステップS15)。
車両が並木道で2車線の直線道路を走行しているとすると、ステップS4の道路解析処理の結果、道路領域の直線度、道路幅の広さ及び路面の綺麗度の各値と道路領域快適度とは図9に示すように得られる。ステップS5の風景解析処理の結果、左右領域各々についての森林、海の割合、看板の少なさ及び風景の複雑度の各値と風景快適度とは図10に示すように得られる。また、ステップS6の背景解析処理の結果、背景の青空率、標識の少なさ及び開放度の各値と背景快適度とは図11に示すように得られる。図9の道路領域快適度80、図10の左風景快適度80及び右風景快適度78.3、並びに図11の背景快適度83.3の平均値がステップS15の景観快適度であり、80.4となる。
このように景観快適度を算出した後、その景観快適度に応じて景観が快適であるか否かを判別する(ステップS4)。ステップS4では算出した景観快適度が所定の閾値(例えば、70)を越えているならば、快適な景観と判別し、所定の閾値以下であるならば、快適な景観とは判別しない。快適な景観と判別した場合には、今回の画像データの撮影場所、方位、日時及び景観快適度からなる画像付加情報を作成する(ステップS5)。撮影場所及び方位はGPS装置13の出力から、日時はプロセッサ12内に形成されたカレンダ及び時計から得ることができる。プロセッサ12はステップS1で画像データを取り込んだ時に画像データと共に撮影場所、方位及び日時各々の情報を得て記憶装置16に保存しておき、ステップS5の実行時にそれらの情報を読み出して用いても良い。
プロセッサ12は今回の画像データを画像付加情報と共にサーバ2に送信する(ステップS6)。画像付加情報を含む今回の画像データはサーバ2宛のパケットデータとされた後、無線装置15によって無線信号として送信され、その無線信号は通信中継装置4によって受信される。通信中継装置4は受信した無線信号中のパケットデータをネットワーク網3を介してサーバ2に送信する。
ステップS6の実行後、景観画像収集処理を継続するか否かを判別し(ステップS7)、例えば、操作部17の入力操作に応じて継続する場合にはステップS1に戻って上記のステップS1〜S7の動作を繰り返す。一方、継続しない場合には、景観画像収集処理を終了する。
このように、複数の車載端末装置11〜1n各々において画像データがその画像付加情報と共にサーバ2に送信される。サーバ2はその送られてきた画像データを画像付加情報を用いて管理するために景観画像管理処理を実行する。
次に、サーバ2による景観画像管理処理について説明する。
景観画像管理処理においては、図12に示すように、画像データを新たに受信したか否かが判別される(ステップS21)。画像データを受信したならば、その受信画像データに加えられた画像付加情報中の撮影場所及び方位が保存されている画像データの撮影場所及び方位と同じか否かが判別される(ステップS22)。すなわち、記憶装置21に画像データとして保存された景観画像の中に同一の撮影場所及び方位の画像があるか否かが判別される。双方の画像の撮影場所は所定距離(例えば、50m)内の誤差であれば同一とされ、方位は所定角度(例えば、30度)内の誤差であれば同一とされる。撮影場所及び方位が同一である画像データが記憶装置21に保存されていない場合には、その新たな受信画像データを画像付加情報と共に記憶装置21に記憶させる(ステップS23)。
撮影場所及び方位が同一である画像データが記憶装置21に既に保存されている場合には、撮影場所及び方位が同一である既存画像データと受信画像データとの間で更に、撮影時期及び時間は同一であるか否かが判別される(ステップS24)。撮影時期は画像付加情報中の日時に応じて1年間を春(3〜5月)、夏(6〜8月)、秋(9〜11月)、冬(12〜2月)の4時期に分けて比較される。時間は画像付加情報中の日時に応じて朝(6〜10時)、昼(11〜16時)、夕方(17〜19時)、夜(20〜5時)の4つの時間帯に分けて比較される。既存画像データと受信画像データとの間で撮影時期又は時間が同一ではないならば、受信画像データを画像付加情報と共に記憶装置21に記憶させる(ステップS23)。
撮影時期及び時間が同一である画像データが記憶装置21に既に保存されている場合には、撮影場所、方位、撮影時期及び時間が同一である既存画像データと受信画像データとの間で更に、どちらの景観快適度は高いか否かが判別される(ステップS25)。受信画像データの景観快適度は既存画像データのそれよりも高い場合には、受信画像データを画像付加情報と共に記憶装置21に記憶させる(ステップS23)。この場合、既存画像データはそれに対応した画像付加情報と共に記憶装置21から削除しても良い。一方、受信画像データの景観快適度が既存画像データのそれよりも低い場合には、受信画像データを記憶装置21に記憶させることなく削除する(ステップS26)。
ステップ323又はS26の実行後、景観画像管理処理が継続されるか否かが判別される(ステップS27)。サーバ2の図示しない操作部の入力操作に応じて景観画像管理処理の終了が指示された場合には景観画像収集処理が終了される。景観画像管理処理の終了の指示がない場合には、ステップS21に戻って上記のステップS21〜S27の動作が繰り返される。
このように複数の車載端末装置11〜1n各々から送信された画像データがサーバ2によって管理される。サーバ2で管理されている画像データは複数の車載端末装置11〜1n各々のプロセッサ12によるナビゲーション処理において利用される。
次に、プロセッサ12によるナビゲーション処理について説明する。
プロセッサ12は、ナビゲーション処理において図13に示すように、先ず、経路演算を行う(ステップS70)。経路演算では、例えば、操作部17の入力操作に応じて目的地が指定され、現在地から目的地までの経路が記憶装置16に記憶された経路検索用の道路データに応じて演算される。演算された経路は表示装置18に地図と共に表示される。なお、経路の出発地は現在地ではなく別の地点を搭乗者が操作部17の操作によって指定しても良い。
現在地から目的地までの経路を演算すると、その経路上及び経路周辺の快適な景観画像をサーバ2に要求する(ステップS71)。その景観画像要求は上記した画像データと同様に、無線装置15から通信中継装置4及びネットワーク網3を介してサーバ2に供給される。
サーバ2は、景観画像要求を受信すると、図14に示すように、画像読出送信処理を行う。画像読出送信処理では、景観画像要求によって示された経路上及び経路周辺の画像データを画像付加情報に応じて記憶装置21から全て読み出し(ステップS31)、読み出した画像データを、景観画像要求を送信した車載端末装置に対して送信する(ステップS32)。画像データはサーバ2からネットワーク網3及び通信中継装置4を介して無線装置15によって受信される。その無線装置15は景観画像要求を送信した車載端末装置内のものである。無線装置15によって受信された画像データはプロセッサ12に供給される。
プロセッサ12は、サーバ2からの画像データを受信することができたか否かを判別し(ステップS72)、画像データを受信することができた場合には、その受信画像データを記憶装置16に保存させる(ステップS73)。そして、保持された画像データのうちの演算経路上に撮影場所が位置する画像データを選択し、その選択した画像データが示す景観画像を表示装置18に一覧表示させる(ステップS74)。景観画像は表示されている地図の経路上の位置に小サイズ(例えば、サムネイルサイズ)で表示しても良いし、単に、景観画像を現在地から目的地までの順に小サイズで表示しても良い。
プロセッサ12は、表示経路を搭乗者が受け入れたか否かを判別する(ステップS75)。例えば、ステップS74における景観画像の表示の際に、表示の経路が良いかどうかを尋ねる質問を同時に表示装置18に表示し、それに対して車両の搭乗者が操作部17により経路確定のために入力操作することが行われる。ステップS75の判別は景観画像の一覧表示中及び表示後のいずれの時であっても良い。
表示経路を搭乗者が受け入れた場合には、経路が確定され、経路案内を開始する(ステップS76)。すなわち、車両の現在位置及び進行方位を示す自車マークを表示装置18に地図と共に表示し、走行車線や交差点左折又は右折を図示しないスピーカから音声で指示することが行われる。これは従来のナビゲーション装置の経路案内動作と同様である。経路案内中に景観画像地点に接近すると、その画像を表示装置18に表示し、また音声によって案内する(ステップS77)。車両が記憶装置16に保存された画像データの撮影場所から例えば、50m以内に入ると、対応する画像データを読み出して表示装置18に表示し、音声でその場所への接近を告知することが行われる。ステップS76とS77とは目的地に到達するまで繰り返し実行される(ステップS78)。
ステップS75では表示経路を搭乗者が受け入れないと判別された場合には、更に、経路を追加又は削除するかを判別する(ステップS79)。搭乗者が表示経路を受け入れない場合には、更に、搭乗者に対して経路を変更するために追加及び削除のいずれか一方を選択させる操作を表示装置18に表示して要求する。これにより、搭乗者が操作部17を操作することによって追加及び削除のいずれか一方が選択される。経路の追加の場合には、ステップS70で演算した経路周辺の景観画像の画像データを記憶装置16から読み出し、その読み出し画像データが示す景観画像を表示装置18に表示させる(ステップS80)。経路周辺の景観画像は表示されている地図の経路上の位置に小サイズで表示しても良いし、単に、景観画像を現在地から目的地までの順に小サイズで表示しても良い。表示された経路周辺の複数の景観画像の地点のうちから搭乗者は操作部17を介して新たな経由地を選択することができる。よって、プロセッサ12は、新たな経由地の選択を受け入れ(ステップS81)、その経由地を含む経路を演算する(ステップS82)。選択可能な新たな経由地の数は1地点又は複数地点である。
ステップS79で経路の削除が選択されたと判別した場合には、一覧表示された景観画像のうちから削除すべき画像、すなわち、走行を望まない地点の画像を搭乗者は操作部17を介して選択することができるので、プロセッサ12は、削除すべき画像の選択を受け入れ(ステップS83)、その選択された画像の地点を回避する経路を演算する(ステップS84)。選択の可能な画像数は1画像又は複数画像である。
ステップS82又はS84の実行後、ステップS74に進んで演算経路上に撮影場所が存在する画像データを選択し、その選択した画像データが示す景観画像を表示装置18に一覧表示させ、更に、ステップS75〜S78を上記の如く実行する。
上記した実施例においては、景観の良い地点を知ることができるので、景観を楽しみながら走行することができる。また、経路を設定する際に、映像で景観を確認することができるので便利である。更に、経路周辺の画像を見て興味が湧けば経由地点に変更して設定できるので、積極的に景観を楽しむドライブに発展させることができる。また、経路案内時には景観地点に接近すると搭乗者にその接近を告知するので、素晴らしい景観を見逃すことを防ぐことができる。
また、サーバにおいて各車載端末装置から収集した快適な景観画像に基づいて撮影時期を考慮して景観快適度分布マップを自動で作成しても良い。景観快適度分布マップは搭乗者の操作に応じて車載端末装置にダウンロードされるようにして、車載端末装置では景観快適度分布マップから地域が選択されてその地域でのドライブ時間が設定される。車載端末装置は時間を考慮して経由する地点を自動で選択して経路設定を行い、経路図と共に景観画像を表示することにより、搭乗者は快適な景観の地域でドライブを気軽に行うことができる。
上記した実施例においては、設定した経路上に快適な景観がない場合について示していないが、そのような場合には経路周辺の快適な景観地点を例えば、5箇所経由する経路に自動変更しても良い。
上記した実施例においては、車載端末装置には経路演算手段、表示手段及び経路確定手段が備えられ、サーバには記憶手段を有する画像提供手段が備えられているが、画像提供手段も車載端末装置に備えられていても良い。すなわち、サーバを備えることなく、予め提供された景観画像を車載端末装置内にデータとして記憶しておいてそれを経路設定の際の画像表示に用いることができる。
上記した実施例においては、景観快適度の算出のため車両前方の画像を2つの対角線で4領域に分割する例について詳細に説明したが、対角線の本数又は分割領域数に関してはこの限りではない。また、景観快適度の算出方法についても画像分割しない他の方法を用いても良いことは勿論である。
以上のように、本発明によれば、快適なドライブを搭乗者に提供できるように経路を設定することができる。
本発明は車載ナビゲーション装置、景観画像自動収集装置、又は景観快適度分布マップ自動作成装置に適用することができる。
本出願は特願2004−106186号(平成16年3月31日出願)を基にしており、この特許出願の開示内容は本明細書に記載されたものとする。
Claims (12)
- 車両の目的地までの経路を演算する経路演算手段と、
複数の地点の景観画像をデータとして記憶した記憶手段を有し、前記経路演算手段によって演算された経路上の景観画像を前記記憶手段から読み出して出力する画像提供手段と、
前記画像提供手段によって出力された演算経路上の景観画像を表示する表示手段と、
前記表示手段による前記演算経路上の景観画像の表示中又は表示後に、操作に応じて前記経路演算手段による演算経路を設定経路として確定する経路確定手段と、を備えた経路案内システムであって、
前記車両には、車両前方を撮影するカメラと、前記カメラによって撮影された前記車両前方の景観画像の快適度を算出する快適度算出手段と、が設けられ、
前記快適度算出手段は、
前記カメラによって撮影された前記車両前方の画像について道路解析処理を行う道路解析手段と、
前記車両前方の画像について風景解析処理を行う風景解析手段と、
前記車両前方の画像について背景解析処理を行う背景解析手段と、
前記道路解析処理の結果に応じて道路快適度を算出する手段と、
前記風景解析処理の結果に応じて風景快適度を算出する手段と、
前記背景解析処理の結果に応じて背景快適度を算出する手段と、を備え、
前記景観画像は、前記道路快適度、前記風景快適度及び前記背景快適度からなる景観快適度が画像付加情報として含まれている画像であることを特徴とする経路案内システム。 - 前記経路確定手段によって前記設定経路が確定されたときその設定経路を案内する経路案内手段を備えたことを特徴とする請求項1記載の経路案内システム。
- 前記経路案内手段は、前記車両の現在位置が前記設定経路上の景観画像に対応する地点に接近したときその接近を案内することを特徴とする請求項2記載の経路案内システム。
- 前記経路演算手段は、前記表示手段によって表示された前記演算経路上の景観画像のうちの画像を操作に応じて選択する画像選択手段と、
前記画像選択手段によって選択された画像に対応する地点を回避する前記目的地までの経路を再演算する経路修正手段と、を有することを特徴とする請求項1、2または3記載の経路案内システム。 - 前記画像提供手段は、前記経路演算手段によって演算された経路上及びその周辺の景観画像を前記記憶手段から読み出し、
前記経路演算手段は、前記画像提供手段によって出力された演算経路周辺の景観画像を表示する周辺表示手段と、
前記周辺表示手段によって表示された前記演算経路周辺の景観画像のうちの画像を操作に応じて選択する画像選択手段と、
前記画像選択手段によって選択された画像に対応する地点を経由する前記目的地までの経路を再演算する経路修正手段と、を有することを特徴とする請求項1−4のいずれかに記載の経路案内システム。 - 前記経路演算手段、前記表示手段及び前記経路確定手段は前記車両に搭載された車載端末装置に備えられ、
前記記憶手段を有する画像提供手段は、前記車両外に配置されたサーバからなり、
前記サーバと前記車載端末装置との間では双方向の通信が行われることを特徴とする請求項1−5のいずれかに記載の経路案内システム。 - 前記車載端末装置は、
前記カメラと前記快適度算出手段とを含み、
前記車載端末装置はさらに、
前記快適度算出手段によって算出された快適度が所定の閾値より大であるか否かを判別する快適画像判別手段と、
前記快適画像判別手段によって快適度が所定の閾値より大であると判別された景観画像についての撮影場所、方位、日時及び快適度を含む画像付加情報を作成して当該景観画像をその画像付加情報と共に前記サーバに送信する付加情報作成手段と、を備えたことを特徴とする請求項6記載の経路案内システム。 - 前記サーバは、前記車載端末装置から送信された景観画像をその画像付加情報と共に受信する受信手段と、
前記受信手段による受信景観画像の画像付加情報と前記記憶手段に保存された既存の景観画像の画像付加情報とを比較する比較手段と、
その既存の景観画像の画像付加情報とは異なる画像付加情報を有する前記受信景観画像をその画像付加情報と共に前記記憶手段に保存させる保存制御手段と、を備えたことを特徴とする請求項6又は7記載の経路案内システム。 - 前記保存制御手段は、既存の景観画像の画像付加情報とは同一の画像付加情報を有する前記受信景観画像をその画像付加情報と共に破棄することを特徴とする請求項8記載の経路案内システム。
- 前記保存制御手段は、前記受信景観画像の画像付加情報の快適度が前記既存の景観画像の画像付加情報の快適度より高いときには、それ以外の画像付加情報が同一であっても前記受信景観画像をその画像付加情報と共に前記記憶手段に保存させることを特徴とする請求項8または9記載の経路案内システム。
- 前記快適度算出手段は、前記カメラによって撮影された前記車両前方の画像を2つの対角線で4領域に分割する画像分割手段を有し、
前記道路解析手段は、前記4領域のうちの下方領域の画像について道路解析処理を行い、
前記風景解析手段は、前記4領域のうちの左右領域各々の画像について風景解析処理を行い、
前記背景解析手段は前記4領域のうちの上方領域の画像について背景解析処理を行い、
前記快適度算出手段はさらに、前記道路解析処理の結果に応じて複数の道路特徴の指数を各々設定する手段と、
前記左右領域各々について前記風景解析処理の結果に応じて複数の風景特徴の指数を各々設定する手段と、
前記背景解析処理の結果に応じて複数の背景特徴の指数を各々設定する手段と、を有し、
前記道路快適度を算出する手段は前記複数の道路特徴の指数の平均値を道路快適度として算出し、
前記風景快適度を算出する手段は前記左右領域各々について前記複数の風景特徴の指数の平均値を左右の風景快適度として算出し、
前記背景快適度を算出する手段は前記複数の背景特徴の指数の平均値を背景快適度として算出し、
前記快適度算出手段はさらに、前記道路快適度と前記左右の風景快適度と前記背景快適度との平均値を前記車両前方の景観画像の快適度として算出する手段を備えたことを特徴とする請求項7−10のいずれかに記載の経路案内システム。 - 車両の目的地までの経路を演算する経路演算ステップと、
複数の地点の景観画像をデータとして記憶手段に記憶させるステップと、
前記経路演算ステップにおいて演算された経路上の景観画像を前記記憶手段から読み出して出力する画像提供ステップと、
前記画像提供ステップにおいて出力された演算経路上の景観画像を表示する表示ステップと、
前記表示ステップによる前記演算経路上の景観画像の表示中又は表示後に、操作に応じて前記経路演算ステップによる演算経路を設定経路として確定する経路確定ステップと、
カメラによって撮影された前記車両前方の景観画像の快適度を算出する快適度算出ステップと、を備える経路案内方法であって、
前記快適度算出ステップは、
前記カメラによって撮影された前記車両前方の画像について道路解析処理を行う道路解析ステップと、
前記車両前方の画像について風景解析処理を行う風景解析ステップと、
前記車両前方の画像について背景解析処理を行う背景解析ステップと、
前記道路解析処理の結果に応じて道路快適度を算出するステップと、
前記風景解析処理の結果に応じて風景快適度を算出するステップと、
前記背景解析処理の結果に応じて背景快適度を算出するステップと、を備え、
前記景観画像は、前記道路快適度、前記風景快適度及び前記背景快適度からなる景観快適度が画像付加情報として含まれている画像であることを特徴とする経路案内方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004106186 | 2004-03-31 | ||
JP2004106186 | 2004-03-31 | ||
PCT/JP2005/005057 WO2005098366A1 (ja) | 2004-03-31 | 2005-03-15 | 経路案内システム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2005098366A1 JPWO2005098366A1 (ja) | 2008-02-28 |
JP4320032B2 true JP4320032B2 (ja) | 2009-08-26 |
Family
ID=35125184
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006511982A Expired - Fee Related JP4320032B2 (ja) | 2004-03-31 | 2005-03-15 | 経路案内システム及び方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US7653485B2 (ja) |
JP (1) | JP4320032B2 (ja) |
WO (1) | WO2005098366A1 (ja) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4350126B2 (ja) * | 2004-03-31 | 2009-10-21 | パイオニア株式会社 | 経路案内システム及び方法 |
JP4493050B2 (ja) * | 2005-06-27 | 2010-06-30 | パイオニア株式会社 | 画像分析装置および画像分析方法 |
JP4730131B2 (ja) * | 2006-02-27 | 2011-07-20 | マツダ株式会社 | 車両用走行支援装置 |
CN101211407B (zh) * | 2006-12-29 | 2011-10-26 | 东软集团股份有限公司 | 昼夜图像识别方法和装置 |
JP5125214B2 (ja) * | 2007-05-08 | 2013-01-23 | 富士通株式会社 | 障害物検出方法および障害物検出装置 |
US20090171980A1 (en) * | 2007-12-24 | 2009-07-02 | Meadow William D | Methods and apparatus for real estate image capture |
JP5161642B2 (ja) * | 2008-04-22 | 2013-03-13 | クラリオン株式会社 | 情報表示装置及びその制御方法並びに制御プログラム |
US8532927B2 (en) * | 2008-11-07 | 2013-09-10 | Intellectual Ventures Fund 83 Llc | Generating photogenic routes from starting to destination locations |
US8472903B2 (en) * | 2010-02-23 | 2013-06-25 | Paccar Inc | Entertainment systems with enhanced functionality |
JP5259670B2 (ja) * | 2010-09-27 | 2013-08-07 | 株式会社東芝 | コンテンツ要約装置およびコンテンツ要約表示装置 |
WO2012086821A1 (ja) * | 2010-12-20 | 2012-06-28 | 日本電気株式会社 | 測位装置、測位方法 |
JP5669767B2 (ja) * | 2011-12-13 | 2015-02-18 | トヨタ自動車株式会社 | 情報提供装置 |
JP5935435B2 (ja) * | 2012-03-26 | 2016-06-15 | 富士通株式会社 | 画像処理装置、画像処理方法 |
US9306608B2 (en) * | 2013-11-05 | 2016-04-05 | Ford Global Technologies, Llc | Method and apparatus for vehicle radio station privacy mode control |
US9733097B2 (en) * | 2014-10-31 | 2017-08-15 | Toyota Jidosha Kabushiki Kaisha | Classifying routes of travel |
US9816830B2 (en) | 2015-05-20 | 2017-11-14 | Uber Technologies, Inc. | Navigation lane guidance |
US20170161760A1 (en) * | 2015-12-08 | 2017-06-08 | Hyundai America Technical Center, Inc. | Systems and methods for an in-vehicle survey with generated routes |
KR102477362B1 (ko) * | 2015-12-18 | 2022-12-15 | 삼성전자주식회사 | 통신 단말의 릴레이 기반 통신 기법 |
CN110741223A (zh) | 2017-06-16 | 2020-01-31 | 本田技研工业株式会社 | 信息处理装置、信息处理方法以及程序 |
US11367305B2 (en) * | 2018-09-28 | 2022-06-21 | Apple Inc. | Obstruction detection during facial recognition processes |
DE102020108805A1 (de) * | 2020-03-31 | 2021-09-30 | Audi Aktiengesellschaft | Verfahren zum Betreiben einer cloudbasierten Plattform zum Speichern und Teilen von Videodateien sowie ein cloudbasiertes System zum Speichern und Teilen von Videodateien |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3349839B2 (ja) | 1994-10-04 | 2002-11-25 | アルパイン株式会社 | 車載用ナビゲーション装置 |
JPH09113291A (ja) | 1995-10-19 | 1997-05-02 | Toshiba Corp | 地図表示処理装置 |
JPH1172344A (ja) | 1997-08-29 | 1999-03-16 | Fujitsu Ten Ltd | ナビゲーション装置 |
JP4182381B2 (ja) | 1999-03-31 | 2008-11-19 | ソニー株式会社 | 地図表示装置及び方法 |
JP4351324B2 (ja) | 1999-04-22 | 2009-10-28 | 株式会社ザナヴィ・インフォマティクス | ナビゲーション装置および情報提供システム |
JP4186094B2 (ja) | 2000-01-31 | 2008-11-26 | ソニー株式会社 | ナビゲーション装置及び探索経路表示方法 |
JP3931042B2 (ja) | 2001-01-18 | 2007-06-13 | 富士通株式会社 | 経路演算装置,及びナビゲーション装置,並びにコンピュータ読み取り可能な記録媒体 |
JP3899969B2 (ja) | 2002-03-20 | 2007-03-28 | 株式会社デンソー | 車載用ナビゲーション装置 |
US20030210806A1 (en) * | 2002-05-07 | 2003-11-13 | Hitachi, Ltd. | Navigational information service with image capturing and sharing |
-
2005
- 2005-03-15 JP JP2006511982A patent/JP4320032B2/ja not_active Expired - Fee Related
- 2005-03-15 WO PCT/JP2005/005057 patent/WO2005098366A1/ja active Application Filing
- 2005-03-15 US US11/547,331 patent/US7653485B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
WO2005098366A1 (ja) | 2005-10-20 |
US20080319640A1 (en) | 2008-12-25 |
JPWO2005098366A1 (ja) | 2008-02-28 |
US7653485B2 (en) | 2010-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4320032B2 (ja) | 経路案内システム及び方法 | |
JP4350126B2 (ja) | 経路案内システム及び方法 | |
JP6252235B2 (ja) | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム | |
JP6369028B2 (ja) | 経路探索システム、経路探索方法及びコンピュータプログラム | |
JP6442993B2 (ja) | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム | |
CN100595811C (zh) | 路面标示识别系统 | |
JP6467773B2 (ja) | 経路探索システム、経路探索方法及びコンピュータプログラム | |
JP6273864B2 (ja) | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム | |
JP4895313B2 (ja) | ナビゲーション装置およびその方法 | |
US7730814B2 (en) | Video image type determination system, video image processing system, video image processing method and video image processing program | |
US20050171688A1 (en) | Car navigation device | |
EP2336998A2 (en) | Travel guiding apparatus for vehicle, travel guiding method for vehicle, and computer-readable storage medium | |
WO2009095967A1 (ja) | ナビゲーション装置 | |
US20100245561A1 (en) | Navigation device | |
JP2009500765A (ja) | 交通情報を判定する方法及びその方法を実行するように構成された装置 | |
JP6269105B2 (ja) | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム | |
JP6303540B2 (ja) | 自動運転支援システム、自動運転支援方法及びコンピュータプログラム | |
JP2003123197A (ja) | 道路標示等認識装置 | |
JP5522475B2 (ja) | ナビゲーション装置 | |
JP2015141054A (ja) | 経路案内システム、経路案内方法及びコンピュータプログラム | |
JPH1151682A (ja) | ナビゲーション装置 | |
JP2012215442A (ja) | 自位置特定システム、自位置特定プログラム及び自位置特定方法 | |
JP5134608B2 (ja) | 車両周辺表示装置、車両周辺表示方法およびプログラム | |
JP4707092B2 (ja) | デモ走行表示方法及びナビゲーション装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090210 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090526 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090529 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120605 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4320032 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120605 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130605 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |