JP2004093444A - Guiding method, guiding system, and control program for guiding system and storage medium - Google Patents

Guiding method, guiding system, and control program for guiding system and storage medium Download PDF

Info

Publication number
JP2004093444A
JP2004093444A JP2002256654A JP2002256654A JP2004093444A JP 2004093444 A JP2004093444 A JP 2004093444A JP 2002256654 A JP2002256654 A JP 2002256654A JP 2002256654 A JP2002256654 A JP 2002256654A JP 2004093444 A JP2004093444 A JP 2004093444A
Authority
JP
Japan
Prior art keywords
guidance
route
image
data
guiding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002256654A
Other languages
Japanese (ja)
Inventor
Yoshinobu Ochiai
落合 慶喜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2002256654A priority Critical patent/JP2004093444A/en
Publication of JP2004093444A publication Critical patent/JP2004093444A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a guiding method, a guiding system, and a control program and a storage medium capable of guiding a user safely and effectively while preventing a misjudgement or an oversight of a diverging point. <P>SOLUTION: The system has: a positional information acquiring means 204 acquiring a present positional information; a storage means 209 storing a map data; a route searching means 205 searching an optimal guiding route from a present position to a specified destination; a photographing means 201 photographing forward; a photographed image analyzing means 202 analyzing the image taken by the photographing means 201; a guiding data creating means 206 creating the guiding data utilizing a characteristic body on the route; a display means 203 displaying the map data and the guiding data; a voice input / output means 207 inputting / outputting the voice; and an input operation means 210 performing the input operation. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、ユーザを目的地へ誘導案内するための案内方法及び案内システム及びこの案内システムを制御するための制御プログラム及びこの制御プログラムを格納した記憶媒体に関する。
【0002】
【従来の技術】
従来、ユーザを目的地へ誘導案内するための案内手段としては、地図の使用が最も一般的であった。
【0003】
近年は、GPS(Global Positioning System)を利用して現在位置を把握し、メモリ上に記憶されている地図データと照合して案内を行うコンピュータを利用した案内システム(ナビゲーションシステム)が自動車及び歩行者向け専用端末として普及している。
【0004】
このような案内システムでは、付属する表示手段(ディスプレイ)に地図情報、現在位置情報及び案内ルート情報を重ね合わせて表示し、同時に任意の地点で案内音声を出力することで、ユーザに現在位置、案内ルート及び進路変更地点を把握させ、指定された目的地へ誘導案内することが可能となっている。
【0005】
【発明が解決しようとする課題】
しかしながら、上述した従来の案内システムにおけるユーザへの進路変更地点の通知は、進路変更地点付近の地図データに矢印等の画像を重ね合わせてディスプレイに表示したり、進路変更地点までの距離及び地点名を音声出力したりすることで行っている。
【0006】
このような方法では、ユーザは、進路変更地点の通知内容が直感的でないために、進路変更地点を見誤ったり、進路変更地点を気付かずに通過してしまう場合がある。
【0007】
また、進路が急な工事による通行止めや障害物等で通行不能な場合も、通行可能なものとしてユーザに通知してしまう。
【0008】
本発明は、上述した従来技術の有する問題点を解消するためになされたもので、その目的は、進路変更地点の見誤りや見落としを防ぎ、安全且つ効率的なユーザを誘導案内することが可能な案内方法及び案内システム及び案内システムの制御プログラム及び記憶媒体を提供することである。
【0009】
【課題を解決するための手段】
上記目的を達成するため、本発明の案内方法は、ユーザを目的地へ誘導案内するための案内方法であって、現在の位置情報を取得する位置情報取得ステップと、現在位置から指定された目的地への最適な案内ルートを探索するルート探索ステップと、前方を撮影する撮影ステップと、前記撮影ステップにより撮影された撮影画像を解析する画像解析ステップと、ルート上の特徴物を利用した案内データを作成する案内データ作成ステップと、記憶手段に記憶されている地図データ及び前記案内データを表示する表示ステップと、音声の入出力を行う音声入出力ステップと、入力操作を行う入力操作ステップとを有することを特徴とする。
【0010】
また、上記目的を達成するため、本発明の案内システムは、ユーザを目的地へ誘導案内するための案内システムであって、現在の位置情報を取得する位置情報取得手段と、地図データを記憶している記憶手段と、現在位置から指定された目的地への最適な案内ルートを探索するルート探索手段と、前方を撮影する撮影手段と、前記撮影手段により撮影された撮影画像を解析する画像解析手段と、ルート上の特徴物を利用した案内データを作成する案内データ作成手段と、前記地図データ及び前記案内データを表示する表示手段と、音声の入出力を行う音声入出力手段と、入力操作を行う入力操作手段とを有することを特徴とする。
【0011】
また、上記目的を達成するため、本発明の案内システムの制御プログラムは、ユーザを目的地へ誘導案内するための案内システムを制御するためのコンピュータ読み取り可能な制御プログラムであって、現在の位置情報を取得する位置情報取得ステップと、現在位置から指定された目的地への最適な案内ルートを探索するルート探索ステップと、前方を撮影する撮影ステップと、前記撮影ステップにより撮影された撮影画像を解析する画像解析ステップと、ルート上の特徴物を利用した案内データを作成する案内データ作成ステップと、記憶手段に記憶されている地図データ及び前記案内データを表示する表示ステップと、音声の入出力を行う音声入出力ステップと、入力操作を行う入力操作ステップとをコンピュータに実行させるためのプログラムコードから成ることを特徴とする。
【0012】
更に、上記目的を達成するため、本発明の記憶媒体は、前記制御プログラムを格納したことを特徴とする。
【0013】
【発明の実施の形態】
以下、本発明の各実施の形態を、図面に基づき説明する。
【0014】
(第一の実施の形態)
図1は、本発明の第一実施の形態に係る案内システムの概略構成を示すブロック図であり、本実施の形態に係る案内システムは、自動車に適用したものである。
【0015】
図1において、101はGPSアンテナ、102は撮影手段、103は表示手段、104は音声入出力手段、105は車速センサ、106は位置情報取得手段、107は本体端末、108は画像解析手段、109はルート探索手段、110は案内データ作成手段、111は記憶手段、112はコントローラ(入力操作手段)、113は自動車、114は人工衛星である。
【0016】
GPSアンテナ101は、人工衛星114からの電波を受信する。撮影手段102は、前方を撮影するためのもので、自動車113の進行方向(図中、矢印A方向)へ向けて取り付けられている。表示手段103及び音声入出力手段104は、各種情報のモニタリングを行うためのもので、自動車113の運転者であるユーザの視界近辺に。設置されている。車速センサ105は、自動車113の速度を検出するものである。位置情報取得手段106は、GPSアンテナ101及び車速センサ105の情報に基づき現在位置を取得するものである。
【0017】
本体端末107は、画像解析手段108、ルート探索手段109、案内データ作成手段110及び記憶手段111を有している。画像解析手段108は、撮影手段102により撮影された撮影画像の解析を行うものである。ルート探索手段109は、現在位置から目的地までの最適ルートの探索を行うものである。案内データ作成手段110は、ユーザへ進路変更地点等を通知する案内データの作成を行うものである。記憶手段111は、地図データを記憶している。コントローラ112は、ユーザが本体端末107へ命令情報等を入力操作するためのものである。本体端末107とそれぞれの手段101〜106及びコントローラ112は、各々有線または無線の通信手段により、互いにデータの送受信を行える構成となっている。
【0018】
次に、上記構成になる本実施の形態に係る案内システムにおける各構成要素の機能構成について、図2を用いて説明する。
【0019】
図2は、本実施の形態に係る案内システムにおける各構成要素の機能構成を示すブロック図であり、同図において、201は撮影手段、202は画像解析手段、203は表示手段、204は位置情報取得手段、205はルート探索手段、206は案内データ作成手段、207は音声入出力手段、208はユーザ、209は記憶手段、210は入力操作手段である。
【0020】
撮影手段201は、CCD(Charge Coupled Device)やCMOS(Complementary Metal−Oxide Semiconductor)といった光電変換素子を利用したものであり、自動車113の前方を死角なく撮影できる位置、例えば自動車113のフロントバンパーや屋根等に取り付けられ、自動車113の進行方向の画像情報を取得する。
【0021】
撮影手段201により取得された画像情報は、画像解析手段202によって解析される。ここでは、画像の色情報、輝度情報、周波数情報、パターンの規則性情報等を解析することで、進路変更地点の特徴物情報を抽出する。ここでいう特徴物とは、例えば道路、交通標識、看板、建物、設置物、他の自動車、自動二輪車、自転車、人物等を指す。
【0022】
更に、これら進路上の特徴物情報を得るための画像解析に用いる画像内の各種情報及び画像解析処理手法は、上記のものに限定されるものではなく、一般に良く知られたヒストグラム法、エッジ抽出法、2値化法、パターンマッチング法等の手法を、単独または複数組み合わせて実行しても良い。
【0023】
一方、自動車の現在位置情報は、図1に示すGPSアンテナ101や車速センサ105の情報を用いて、位置情報取得手段204によって算出される。地図データは、記憶手段209に記憶されており、この記憶手段209の記憶媒体としては、CD−ROM、DVD−ROM等が既にこの用途で広く実用化されている。また、ハードディスクやRAMのような書き換え可能な記憶媒体に、ネットワークを介して必要なデータを随時更新するような構成をとっても良く、地図情報が記憶可能な記憶媒体であれば特に限定はされない。
【0024】
ルート探索手段205は、現在位置情報、地図データ及びユーザ208により入力操作手段210、または音声入出力手段207を介して入力される目的地情報を用いて、現在位置から目的地までの最適なルートを探索する。最適ルートの探索アルゴリズムについては、各種実用化されているもの、研究中の物も含めて様々な手法が提案されているが、特に限定はされない。
【0025】
案内データ作成手段206は、ルート探索手段205によって探索された最適ルートを、画像解析手段202によって抽出された進路変更地点の特徴物情報と地図データとを用いて表現する案内データを作成する。案内データ作成手段206により作成された案内データは、画像情報、テキスト情報、音声情報を有効に利用したものであり、表示手段203及び音声入出力手段207を介してユーザ208に出力される。
【0026】
音声入出力手段207は、マイクロフォン及びスピーカを有するものであり、ユーザ208からの音声入力及び案内システムからユーザ208への案内データの出力に使用される。表示手段203は、CRT(Cathode Ray Tube)、液晶、PDP(Plasma Display Panel)、有機EL(Electro Luminescence)等を用いたものであり、ユーザ208への案内データの表示を行う。
【0027】
次に、本実施の形態に係る案内システムにおいて実行される案内処理動作について、図3に示すフローチャートを用いて説明する。
【0028】
まず、案内システムを利用するユーザ208により案内システムが起動される(ステップS301)。ユーザ208は、音声入出力手段207、または入力操作手段210を介して任意の目的地を案内システムに設定する(ステップS302)。案内システムは、位置情報取得手段204によって、図1に示すGPSアンテナ101及び車速センサ105の情報を解析し、自動車113の現在位置情報の取得を行う(ステップS303)。
【0029】
現在位置情報が取得されたならばルート探索手段205は、目的地及び記憶手段209内の地図データを参照して、現在位置から目的地までの最適なルートの探索を行う(ステップS304)。探索された最適ルートは、表示手段203及び音声入出力手段207を介してユーザ208に提示されるが、このとき、探索されたルートの候補を、条件によって複数出力し、その中からユーザ208に選択させるようにしても良いし、或いは案内システムが決定した最適な一つのルートをユーザ208に提示しても良い。
【0030】
このようにして現在位置から目的地までの最適ルートが決定されたならば、ユーザ208は、それを確認し、自動車113の走行を開始する(ステップS305)。走行中、案内システムは、あるタイミングで、例えば一定時間経過、または一定距離走行等の設定された条件を満たすと、再び位置情報取得手段204によって現時位置情報の更新を行う(ステップS306)。
【0031】
これにより、案内システムは、常に自動車113の最新の現在位置を把握することが可能となる。
【0032】
そして、最新の現在位置を把握したならば、現在位置が目的地周辺であるか否か(ステップS307)、進路変更地点周辺であるか否か(ステップS308)を更新した現在位置情報と地図情報及び決定されたルート情報とを参照して判断する。
【0033】
ここで、現在位置が設定した目的地周辺であるならば、その旨をユーザ208へ通知し、道案内処理を終了する(ステップS315)。
【0034】
また、現在位置が目的地周辺でも進路変更地点周辺でもない場合、ユーザ208は、そのまま自動車113の走行を続け(ステップS305)、現在位置情報更新、現在位置の目的地及び進路変更地点か否かの判断処理(ステップS306〜ステップS308)を繰り返す。
【0035】
また、現在位置が進路変更地点に近付いたならば、案内システムは、撮影手段201によって進路変更地点周辺の撮影を行う(ステップS309)。撮影手段201によって撮影された画像は、画像解析手段202に入力され、前述した画像解析アルゴリズムを用いて進路変更地点の特徴物情報の抽出が行われる(ステップS310)。
【0036】
ここでは、まず、進路変更地点の道路上の障害物検知を行い、進路変更が可能か否かの判断を行う(ステップS311)。例えば、進路変更地点の道路が寸断されていたり、工事中であったりした場合は、その旨をユーザ208に通知し(ステップS316及びステップS317)、該当の進路変更地点を使用しない他のルートの再探索を行う(ステップS304)。
【0037】
ここで、進路変更地点周辺において図4に示すような画像が撮影されたとする。案内システムは、この交差点を左に進路変更するルートを最適ルートとしている。このとき、画像解析手段202により、この交差点には青い屋根の建物401、工場402及び工事中の看板403が隣接しているという情報が得られる。これにより、案内システムは、進路変更すべき道路が工事中で通行が不可能であることを認識し、瞬時に他のルートの再探索を行うと共に、図5に示すように表示手段203上の地図データに工事マーク501を表示し、音声入出力手段207は、“左に曲がる方向は工事中です”、“進路を変更します”というような案内情報をユーザ208に通知する。また、道路上に障害物がない、または障害物があっても、通行は可能と判断した場合は、障害物及びそれ以外の特徴物、例えば看板、建物、設置物、他の自動車、自動二輪車、自転車、人物等を進路変更地点の目印となるようユーザ208に対する案内データの作成を行い(ステップS313)、ユーザ208に提示する(ステップS314)。
【0038】
具体的には、進路変更地点周辺において図6に示すような画像が撮影されたとする。案内システムは、この交差点を左に進路変更するルートを最適ルートとしている。このとき、画像解析手段202により、この交差点には赤い屋根の建物601、コンビニ(コンビニエンスストア)602、看板603及びガソリンスタンド604が隣接し、前方には青い自動車605が走行しているという情報が得られる。更に、進路変更方向が赤い屋根の建物601とコンビニ602との間であること、前方を走行する青い自動車605が同様な進路変更を行っているという情報も得られる。
【0039】
このような情報が得られたならば、案内システムは、図7に示すように表示手段203上の地図データに“追従”とマークした青い車701、赤い屋根の建物702、コンビニ703、看板704及びガソリンスタンド705を他の情報よりも目立たせるように表示する。音声入出力手段207は、“左に曲がります”、“赤い屋根の建物とコンビニとの間の道です”、“前方の青い自動車と同じ進路です”というような案内情報をユーザ208に提示することが可能となる。
【0040】
ユーザ208は、このような実際の現場の詳細な情報を事前に知り、予め進路変更地点の具体的な状況を把握することで、進路の変更に際して、それら情報を参考に、よりスムーズな対応をとることが期待できる(ステップS314)。進路変更が完了したならば、ユーザ208は、再び自動車113を道なりに走行させる(ステップS305)。
【0041】
以上のようにして、ステップS304からステップS314の処理を繰り返すことで、ユーザ208は、設定した目的地へ効率的に到達することが可能となる。
【0042】
上述した進路変更地点における音声案内及び図5及び図7に示した表示案内は一例であり、これに限定されるものでないことは言うまでもない。
【0043】
本実施の形態において、撮影手段201は、自動車113が進路変更地点に差し掛かったときのみ撮影を行っているが、案内システム起動中、連続して撮影を行って、運転記録として保存しても良い。
【0044】
(第二の実施の形態)
次に、本発明の第2実施の形態を図8及び図9に基づき説明する。
【0045】
尚、本実施の形態に係る案内システムにおける各構成要素の機能構成は、上述した第一実施の形態における図2と同一であるから、同図を流用して説明する。
【0046】
図8は、本発明の第2実施の形態に係る案内システムの概略構成を示すブロック図であり、本実施の形態に係る案内システムは、歩行者用携帯端末に適用したものである。
【0047】
図8において、801は携帯端末、802はGPSアンテナ、803は撮影手段、804は表示手段、805は音声入出力手段、806は位置情報取得手段、807は画像解析手段、808はルート探索手段、809は案内データ作成手段、810は記憶手段、811はコントロールボタン(入力操作手段)、812は人工衛星である。
【0048】
携帯端末801は、ユーザ208が携帯して移動するものである。GPSアンテナ802は、人工衛星812からの電波を受信するものである。撮影手段803は、携帯端末801上方に取り付けられており、この携帯端末801の持ち方を変えても、常に前方を撮影可能な方向にレンズを向けることができる構造となっている。
【0049】
表示手段804及び音声入出力手段805は、各種情報のモニタリングを行うためのものである。位置情報取得手段806は、GPSアンテナ802で受信した情報に基づき現在位置を取得するものである。画像解析手段807は、撮影手段803により撮影された撮影画像の解析を行うものである。ルート探索手段808は、現在位置から目的地までの最適ルートの探索を行うものである。
【0050】
案内データ作成手段809は、ユーザ208へ進路変更地点等を通知する案内データの作成を行うものである。記憶手段810は、地図データを記憶している。この地図データは、リムーバブルな記憶手段810に記憶され、携帯端末801の記憶手段挿入口に挿入して使用される。コントロールボタン811は、ユーザ208が携帯端末801へ命令情報等を入力操作するためのものである。
【0051】
次に、本実施の形態に係る案内システムの各構成要素の機能構成について、図2を用いて説明する。
【0052】
撮影手段201は、CCD(Charge Coupled Device)やCMOS(Complementary Metal−Oxide Semiconductor)といった光電変換素子を利用したものであり、ユーザ208の手にする携帯端末801の上方に取り付けられ、携帯端末801の持ち方を変えても、レンズを常に前方を撮影可能な方向に向けることができる構造となっており、ユーザ208の進行方向の画像情報を取得する。
【0053】
撮影手段201により取得された画像情報は、画像解析手段202によって解析される。ここでは、画像の色情報、輝度情報、周波数情報、パターンの規則性情報等を解析することで、進路変更地点の特徴物情報を抽出する。ここでいう特徴物とは、例えば道路、交通標識、看板、建物、設置物、他の自動車、自動二輪車、自転車、人物等を指す。更に、これら進路上の特徴物情報を得るための画像解析に用いる画像内の各種情報及び画像解析処理手法は、上記のものに限定されるものではなく、一般に良く知られたヒストグラム法、エッジ抽出法、2値化法、パターンマッチング法等の手法を、単独または複数組み合わせて実行しても良い。
【0054】
一方、ユーザ208の現在位置情報は、GPSアンテナ802からの情報を用いて、位置情報取得手段204によって算出される。地図データは、記憶手段209に記憶されており、記憶手段209の記憶媒体としては、CD−ROM、DVD−ROM等が既にこの用途で広く実用化されている。また、ハードディスクやRAMのような書き換え可能な記憶媒体にネットワークを介して必要なデータを随時更新するような構成をとっても良く、地図情報が記憶可能な記憶媒体であれば、特に限定されるものではない。
【0055】
ルート探索手段205は、現在位置情報、地図データ及びユーザ208により入力操作手段210または音声入出力手段207を介して入力される目的地情報を用いて、現在位置から目的地までの最適なルートを探索する。最適ルートの探索アルゴリズムについては各種実用化されているもの、研究中のものも含めて様々であるが、特に限定されるものではなく、どのような手法を用いても良い。
【0056】
案内データ作成手段206は、ルート探索手段205によって探索された最適ルートを、画像解析手段202によって抽出された進路変更地点の特徴物情報と地図データとを用いて表現する案内データを作成する。案内データ作成手段206により作成された案内データは、画像情報、テキスト情報、音声情報を有効に利用したものであり、表示手段203及び音声入出力手段207を介してユーザ208に出力される。音声入出力手段207は、マイクロフォン及びスピーカを有するものであり、ユーザ208からの音声入力及び案内システムからユーザ208への案内データの出力に使用される。
【0057】
表示手段203は、CRT(Cathode Ray Tube)、液晶、PDP(Plasma Display Panel)、有機EL(Electro Luminescence)等を用いたものであり、ユーザ208への案内データの表示を行う。
【0058】
次に、本実施の形態に係る案内システムにおいて実行される案内処理動作について、図9に示すフローチャートを用いて説明する。
【0059】
まず、案内システムを利用するユーザ208により、案内システムが起動される(ステップS901)。ユーザ208は、音声入出力手段207または入力操作手段210を介して任意の目的地を案内システムに設定する(ステップS902)。案内システムは、位置情報取得手段204によって図8に示すGPSアンテナ802からの情報を解析し、ユーザ208の現在位置情報の取得を行う(ステップS903)。現在位置情報が取得されたならばルート探索手段205は、目的地及び記憶手段209内の地図データを参照して、現在位置から目的地までの最適なルートの探索を行う(ステップS904)。
【0060】
探索された最適ルートは、表示手段203及び音声入出力手段207を介してユーザ208に提示されるが、このとき、探索されたルートの候補を条件によって複数出力し、その中からユーザに選択させるようにしても良いし、或いは案内システムが決定した最適ルートの一つを提示しても良い。
【0061】
このようにして、現在位置から目的地までの最適ルートが決定されたならば、ユーザ208は、それを確認し、移動を開始する(ステップS905)。移動中、案内システムは、あるタイミングで、例えば一定時間経過または一定距離移動等の設定された条件を満たすと、再び位置情報取得手段204によって現時位置情報の更新を行う(ステップS906)。
【0062】
これにより、案内システムは、常にユーザ208の最新の現在位置を把握することが可能となる。そして、最新の現在位置を把握したならば、現在位置が目的地周辺であるか否か(ステップS907)、進路変更地点周辺であるか否か(ステップS908)を更新した現在位置情報と地図情報及び決定されたルート情報を参照して判断する。
【0063】
ここで、現在位置が設定した目的地周辺であるならば、その旨をユーザ208へ通知し、案内処理動作を終了する(ステップS915)。また、現在位置が目的地周辺でも進路変更地点周辺でもない場合、ユーザ208は、そのまま移動を続け(ステップS905)、現在位置情報更新、現在位置の目的地及び進路変更地点か否かの判断処理(ステップS906〜ステップS908)を繰り返す。また、現在位置が進路変更地点に近付いたならば、案内システムは、撮影手段201によって進路変更地点周辺の撮影を行う(ステップS909)。撮影手段201によって撮影された画像は、画像解析手段202に入力され、前述した画像解析アルゴリズムを用いて進路変更地点の特徴物情報の抽出が行われる(ステップS910)。
【0064】
ここでは、まず、進路変更地点の道路上の障害物検知を行い、進路変更が可能か否かの判断を行う(ステップS911)。例えば進路変更地点の道路が寸断されていたり、工事中であったりした場合は、その旨をユーザ208に通知し(ステップS916及びステップS917)、該当の進路変更地点を使用しない他のルートの再探索を行う(ステップS904)。
【0065】
ここで、進路変更地点周辺において図4に示すような画像が撮影されたとする。案内システムは、この交差点を左に進路変更するルートを最適ルートとしている。このとき、画像解析手段202により、この交差点には青い屋根の建物401、工場402及び工事中の看板403が隣接しているという情報が得られる。これにより、案内システムは、進路変更すべき道路が工事中で通行が不可能であることを認識し、瞬時に他のルートの再探索を行うと共に、図5に示すように表示手段203上の地図データに工事マーク501を表示し、音声入出力手段207は、“左に曲がる方向は工事中です”、“進路を変更します”というような案内情報をユーザ208に通知する。また、道路上に障害物がない、または障害物があっても通行は可能と判断した場合は、障害物及びそれ以外の特徴物、例えば看板、建物、設置物、他の自動車、自動二輪車、自転車、人物等を進路変更地点の目印となるようにユーザ208への案内データの作成を行い(ステップS913)、ユーザ208に提示する(ステップS914)。
【0066】
具体的には、進路変更地点周辺において図6に示すような画像が撮影されたとする。案内システムは、この交差点を左に進路変更するルートを最適ルートとしている。このとき、画像解析手段202により、この交差点には赤い屋根の建物601、コンビニ602、看板603及びガソリンスタンド604が隣接し、前方には青い自動車605が走行しているという情報が得られる。更に、進路変更方向が赤い屋根の建物601とコンビニ602との間であること、前方を走行する青い自動車605が同様な進路変更を行っているという情報も得られる。
【0067】
このような情報が得られたならば案内システムは、図7に示すように表示手段203上の地図データに“追従”とマークした青い車701、赤い屋根の建物702、コンビニ703、看板704及びガソリンスタンド705を、他の情報よりも目立たせるように表示し、音声入出力手段207は、“左に曲がります”、“赤い屋根の建物とコンビニとの間の道です”、“前方の青い自動車と同じ進路です”というような案内情報をユーザ208に提示することが可能となる。
【0068】
ユーザ208は、このような実際の現場の詳細な情報を事前に知り、予め進路変更地点の具体的な状況を把握することで、進路の変更に際して、それら情報を参考に、よりスムーズな対応をとることが期待できる(ステップS914)。進路変更が完了したならば、ユーザ208は、再び道なりに移動する(ステップS905)。
【0069】
以上のようにして、ステップS904からステップS914の処理を繰り返すことで、ユーザ208は、設定した目的地へ効率的に到達することが可能となる。
【0070】
上述した進路変更地点における音声案内及び図5及び図7に示した表示案内は一例であり、これに限定されるものでないことは言うまでもない。
【0071】
また、本実施の形態において、撮影手段201は、ユーザ208が進路変更地点に差し掛かったときのみ撮影を行っているが、案内システム起動中、連続して撮影を行って移動記録として保存しても良い。
【0072】
(その他の実施の形態)
本発明の目的は、上記実施の形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成されることは言うまでもない。
【0073】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【0074】
また、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−RAM、DVD−RW、DVD+RW、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。
【0075】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【0076】
更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【0077】
【発明の効果】
以上述べたように、本発明によれば、撮影したユーザの前方の画像情報を解析し、得られた進路変更地点付近の特徴を前もってユーザへ通知するようにしたから、進路変更地点の見誤りや見落としを防ぎ、安全且つ効率的に案内を行うことが可能であり、加えて工事や通行止め等による通行不能も前記解析により即座に判断し、ルートの変更を行うことも可能である。
【図面の簡単な説明】
【図1】本発明の第一実施の形態に係る案内システムの概略構成を示すブロック図である。
【図2】本発明の第一実施の形態に係る案内システムにおける各構成要素の機能構成を示すブロック図である。
【図3】本発明の第一実施の形態に係る案内システムにおける案内処理動作の流れを示すフローチャートである。
【図4】本発明の第一実施の形態に係る案内システムにおける進路変更地点に障害物がある場合の撮影画像例を示す図である。
【図5】本発明の第一実施の形態に係る案内システムにおける進路変更地点において進路変更不可な場合の案内表示例を示す図である。
【図6】本発明の第一実施の形態に係る案内システムにおける進路変更地点の撮影画像例を示す図である。
【図7】本発明の第一実施の形態に係る案内システムにおける進路変更地点において進路変更可能な場合の案内表示例を示す図である。
【図8】本発明の第二実施の形態に係る案内システムの概略構成を示すブロック図である。
【図9】本発明の第二実施の形態に係る案内システムにおける案内処理動作の流れを示すフローチャートである。
【符号の説明】
101  GPSアンテナ
102  撮影手段
103  表示手段
104  音声入出力手段
105  車速センサ
106  位置情報取得手段
107  本体端末
108  画像解析手段
109  ルート探索手段
110  案内データ作成手段
111  記憶手段
112  コントローラ(入力操作手段)
113  自動車
114  人工衛星
201  撮影手段
202  画像解析手段
203  表示手段
204  位置情報取得手段
205  ルート探索手段
206  案内データ作成手段
207  音声入出力手段
208  ユーザ
209  記憶手段
210  入力操作手段
401  青い屋根の建物
402  工場
403  看板
501  工事マーク
601  赤い屋根の建物
602  コンビニ(コンビニエンスストア)
603  看板
604  ガソリンスタンド
605  青い自動車
701  追従とマークした自動車
702  赤い屋根の建物
703  コンビニ(コンビニエンスストア)
704  看板
705  ガソリンスタンド
801  携帯端末
802  GPSアンテナ
803  撮影手段
804  表示手段
805  音声入出力手段
806  位置情報取得手段
807  画像解析手段
808  ルート探索手段
809  案内データ作成手段
810  記憶手段
811  コントロールボタン(入力操作手段)
812  人工衛星
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a guidance method and a guidance system for guiding a user to a destination, a control program for controlling the guidance system, and a storage medium storing the control program.
[0002]
[Prior art]
Heretofore, a map has been most commonly used as guidance means for guiding a user to a destination.
[0003]
2. Description of the Related Art In recent years, guidance systems (navigation systems) using a computer that grasps the current position using a GPS (Global Positioning System) and collates with map data stored in a memory to provide guidance have been developed for automobiles and pedestrians. It is popular as a dedicated terminal for mobile phones.
[0004]
In such a guidance system, map information, current position information, and guidance route information are superimposed and displayed on an attached display means (display), and guidance voice is output at an arbitrary point at the same time, so that the user can receive the current position, It is possible to grasp the guidance route and the course change point, and to provide guidance to a designated destination.
[0005]
[Problems to be solved by the invention]
However, the notification of the course change point to the user in the above-described conventional guidance system is performed by superimposing an image such as an arrow on the map data near the course change point, displaying the image on the display, and displaying the distance to the course change point and the point name. Or by outputting voice.
[0006]
In such a method, the user may mistakenly see the course change point or pass the course change point unnoticed because the notification content of the course change point is not intuitive.
[0007]
In addition, even when the route is impassable due to sudden road construction, obstacles, or the like, the user is notified that the vehicle can pass.
[0008]
SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems of the related art, and an object of the present invention is to prevent a mistake or oversight of a course change point and to guide a user safely and efficiently. It is an object of the present invention to provide a guidance method, a guidance system, a control program and a storage medium for the guidance system.
[0009]
[Means for Solving the Problems]
In order to achieve the above object, a guidance method according to the present invention is a guidance method for guiding a user to a destination, comprising: a position information acquisition step of acquiring current position information; A route searching step for searching for an optimal guidance route to the ground, a photographing step for photographing ahead, an image analyzing step for analyzing a photographed image photographed by the photographing step, and guidance data using a feature on the route. A display data display step of displaying map data and the guidance data stored in the storage means, a voice input / output step of inputting / outputting voice, and an input operation step of performing input operation. It is characterized by having.
[0010]
In order to achieve the above object, a guidance system according to the present invention is a guidance system for guiding a user to a destination, and stores position information acquisition means for acquiring current position information, and map data. Storage means, a route search means for searching for an optimal guidance route from a current position to a designated destination, a photographing means for photographing ahead, and an image analysis for analyzing a photographed image photographed by the photographing means. Means, guidance data creation means for creating guidance data using features on the route, display means for displaying the map data and the guidance data, voice input / output means for inputting / outputting voice, and input operation And input operation means for performing the operation.
[0011]
Further, in order to achieve the above object, a control program for a guidance system according to the present invention is a computer-readable control program for controlling a guidance system for guiding a user to a destination. Obtaining a location information, obtaining a route from a current position to a designated destination, searching for an optimal guide route, capturing an image of the front, and analyzing the captured image captured by the capturing step. Image analysis step, guidance data creation step for creating guidance data using features on the route, display step for displaying map data and the guidance data stored in the storage means, and voice input / output. And an input operation step for performing an input operation. Characterized in that it consists grams code.
[0012]
Further, in order to achieve the above object, a storage medium of the present invention stores the control program.
[0013]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0014]
(First embodiment)
FIG. 1 is a block diagram showing a schematic configuration of a guidance system according to a first embodiment of the present invention. The guidance system according to the present embodiment is applied to an automobile.
[0015]
1, 101 is a GPS antenna, 102 is a photographing unit, 103 is a display unit, 104 is a voice input / output unit, 105 is a vehicle speed sensor, 106 is a position information acquisition unit, 107 is a main body terminal, 108 is an image analysis unit, 109 Is route search means, 110 is guidance data creation means, 111 is storage means, 112 is a controller (input operation means), 113 is a car, and 114 is an artificial satellite.
[0016]
The GPS antenna 101 receives a radio wave from the artificial satellite 114. The photographing means 102 is for photographing the front, and is attached in the traveling direction of the automobile 113 (the direction of arrow A in the figure). The display unit 103 and the voice input / output unit 104 are for monitoring various kinds of information, and are located near the field of view of the user who is the driver of the automobile 113. is set up. The vehicle speed sensor 105 detects the speed of the automobile 113. The position information obtaining means 106 obtains the current position based on information from the GPS antenna 101 and the vehicle speed sensor 105.
[0017]
The main body terminal 107 includes an image analysis unit 108, a route search unit 109, a guidance data creation unit 110, and a storage unit 111. The image analyzing unit 108 analyzes a photographed image photographed by the photographing unit 102. The route search means 109 searches for an optimal route from the current position to the destination. The guidance data creation unit 110 creates guidance data for notifying a user of a course change point and the like. The storage unit 111 stores map data. The controller 112 is for the user to input command information and the like to the main body terminal 107. The main body terminal 107, the respective units 101 to 106, and the controller 112 are configured to transmit and receive data to and from each other by a wired or wireless communication unit.
[0018]
Next, the functional configuration of each component in the guide system according to the present embodiment having the above configuration will be described with reference to FIG.
[0019]
FIG. 2 is a block diagram showing a functional configuration of each component in the guidance system according to the present embodiment. In FIG. 2, reference numeral 201 denotes an imaging unit, 202 denotes an image analysis unit, 203 denotes a display unit, and 204 denotes position information. Acquisition means, 205 is a route search means, 206 is guidance data creation means, 207 is a voice input / output means, 208 is a user, 209 is a storage means, and 210 is an input operation means.
[0020]
The image capturing means 201 uses a photoelectric conversion element such as a charge coupled device (CCD) or a complementary metal-oxide semiconductor (CMOS), and can capture a position in front of the automobile 113 without blind spots, such as a front bumper or a roof of the automobile 113. To acquire image information of the traveling direction of the automobile 113.
[0021]
The image information obtained by the photographing unit 201 is analyzed by the image analyzing unit 202. Here, characteristic information of a course change point is extracted by analyzing color information, luminance information, frequency information, pattern regularity information, and the like of the image. The feature here refers to, for example, a road, a traffic sign, a signboard, a building, an installation, another automobile, a motorcycle, a bicycle, a person, and the like.
[0022]
Furthermore, the various information in the image and the image analysis processing method used in the image analysis for obtaining the characteristic object information on the course are not limited to the above-mentioned ones. Method, binarization method, pattern matching method, and the like, may be executed alone or in combination.
[0023]
On the other hand, the current position information of the vehicle is calculated by the position information obtaining means 204 using information of the GPS antenna 101 and the vehicle speed sensor 105 shown in FIG. The map data is stored in the storage unit 209, and as a storage medium of the storage unit 209, a CD-ROM, a DVD-ROM, or the like has already been widely used for this purpose. In addition, a configuration may be adopted in which necessary data is updated as needed via a network in a rewritable storage medium such as a hard disk or a RAM. The storage medium is not particularly limited as long as the storage medium can store map information.
[0024]
The route search means 205 uses the current position information, the map data, and the destination information input by the user 208 via the input operation means 210 or the voice input / output means 207 to obtain an optimal route from the current position to the destination. To explore. Various algorithms have been proposed for the optimal route search algorithm, including those that have been put into practical use and those that are under study, but are not particularly limited.
[0025]
The guidance data creation unit 206 creates guidance data that represents the optimal route searched by the route search unit 205 using the feature information of the route change point extracted by the image analysis unit 202 and the map data. The guidance data created by the guidance data creation unit 206 effectively uses image information, text information, and voice information, and is output to the user 208 via the display unit 203 and the voice input / output unit 207.
[0026]
The voice input / output unit 207 has a microphone and a speaker, and is used for voice input from the user 208 and output of guidance data from the guidance system to the user 208. The display unit 203 uses a CRT (Cathode Ray Tube), a liquid crystal, a PDP (Plasma Display Panel), an organic EL (Electro Luminescence), or the like, and displays guidance data to the user 208.
[0027]
Next, a guidance processing operation performed in the guidance system according to the present embodiment will be described with reference to a flowchart shown in FIG.
[0028]
First, the user 208 using the guidance system starts the guidance system (step S301). The user 208 sets an arbitrary destination in the guidance system via the voice input / output unit 207 or the input operation unit 210 (step S302). The guidance system analyzes the information of the GPS antenna 101 and the vehicle speed sensor 105 shown in FIG. 1 by the position information acquisition means 204, and acquires the current position information of the automobile 113 (step S303).
[0029]
If the current position information is obtained, the route search means 205 searches for an optimal route from the current position to the destination with reference to the destination and the map data in the storage means 209 (step S304). The searched optimum route is presented to the user 208 via the display means 203 and the voice input / output means 207. At this time, a plurality of searched route candidates are output according to conditions, and the user 208 The user 208 may be selected, or one optimal route determined by the guidance system may be presented to the user 208.
[0030]
When the optimum route from the current position to the destination is determined in this way, the user 208 confirms it and starts running the automobile 113 (step S305). During traveling, the guidance system updates the current position information by the position information acquisition unit 204 again at a certain timing, for example, when a set condition such as elapse of a certain time or running a certain distance is satisfied (step S306).
[0031]
Thereby, the guidance system can always grasp the latest current position of the automobile 113.
[0032]
Then, when the latest current position is grasped, the current position information and the map information are updated as to whether or not the current position is around the destination (step S307) and whether or not it is near the course change point (step S308). The determination is made with reference to the determined route information.
[0033]
Here, if the current position is around the set destination, the fact is notified to the user 208, and the route guidance processing ends (step S315).
[0034]
If the current position is neither near the destination nor near the course change point, the user 208 continues to run the car 113 (step S305) and updates the current position information, and determines whether the current position is the destination and the course change point. (Steps S306 to S308) are repeated.
[0035]
Further, when the current position approaches the course change point, the guidance system takes an image of the vicinity of the course change point by the photographing means 201 (step S309). The image photographed by the photographing unit 201 is input to the image analyzing unit 202, and the feature information of the course change point is extracted using the above-described image analysis algorithm (step S310).
[0036]
Here, first, an obstacle on the road at the course change point is detected, and it is determined whether or not the course change is possible (step S311). For example, when the road at the course change point is cut off or under construction, the fact is notified to the user 208 (steps S316 and S317), and another route not using the corresponding course change point is notified. A re-search is performed (step S304).
[0037]
Here, it is assumed that an image as shown in FIG. 4 is taken around the course change point. The guidance system sets the route that changes the route to the left at this intersection as the optimal route. At this time, the image analysis unit 202 obtains information that the building 401, the factory 402, and the signboard 403 under construction are adjacent to this intersection. In this way, the guidance system recognizes that the road to be changed is under construction and the passage is impossible, and immediately searches for another route again, as shown in FIG. The construction mark 501 is displayed on the map data, and the voice input / output unit 207 notifies the user 208 of guidance information such as "the left turn is under construction" and "the course will be changed". If there is no obstacle on the road or if it is determined that traffic is possible even if there is an obstacle, the obstacle and other features such as signs, buildings, installations, other automobiles, and motorcycles The guide data is created for the user 208 so that the user, the bicycle, the person, and the like can be used as a mark of the course change point (step S313), and is presented to the user 208 (step S314).
[0038]
Specifically, it is assumed that an image as shown in FIG. 6 is taken around the course change point. The guidance system sets the route that changes the route to the left at this intersection as the optimal route. At this time, the image analysis means 202 informs the intersection that a building 601 with a red roof, a convenience store (convenience store) 602, a signboard 603, and a gas station 604 are adjacent to each other, and a blue car 605 is running in front of the intersection. can get. Further, information is also obtained that the course change direction is between the building 601 with the red roof and the convenience store 602, and that the blue car 605 traveling ahead is making a similar course change.
[0039]
If such information is obtained, the guidance system, as shown in FIG. 7, the blue car 701 marked as "follow" the map data on the display means 203, the building 702 with the red roof, the convenience store 703, the signboard 704. And the gas station 705 is displayed so as to stand out more than other information. The voice input / output means 207 presents guidance information to the user 208 such as "turn left", "the road between the building with the red roof and the convenience store", and "the same route as the blue car ahead". It becomes possible.
[0040]
The user 208 knows such detailed information of the actual site in advance and grasps the specific situation of the course change point in advance, so that when the course is changed, the user can refer to the information to make a smoother response. Can be expected (step S314). When the course change is completed, the user 208 drives the car 113 again along the road (step S305).
[0041]
By repeating the processing from step S304 to step S314 as described above, the user 208 can efficiently reach the set destination.
[0042]
The voice guidance at the course change point described above and the display guidance shown in FIGS. 5 and 7 are merely examples, and it goes without saying that the present invention is not limited to this.
[0043]
In the present embodiment, the photographing means 201 performs photographing only when the car 113 approaches the course change point, but may continuously photograph while the guidance system is running, and may store it as a driving record. .
[0044]
(Second embodiment)
Next, a second embodiment of the present invention will be described with reference to FIGS.
[0045]
Note that the functional configuration of each component in the guidance system according to the present embodiment is the same as that in FIG. 2 in the above-described first embodiment, and thus the description will be made with reference to FIG.
[0046]
FIG. 8 is a block diagram showing a schematic configuration of a guidance system according to the second embodiment of the present invention. The guidance system according to the present embodiment is applied to a pedestrian mobile terminal.
[0047]
8, 801 is a portable terminal, 802 is a GPS antenna, 803 is a photographing unit, 804 is a display unit, 805 is a voice input / output unit, 805 is a position information acquiring unit, 806 is an image analyzing unit, 807 is an image analyzing unit, 808 is a route searching unit, Reference numeral 809 denotes guidance data creation means, 810 denotes storage means, 811 denotes control buttons (input operation means), and 812 denotes artificial satellites.
[0048]
The mobile terminal 801 is carried by the user 208 and moves. The GPS antenna 802 receives a radio wave from the artificial satellite 812. The photographing means 803 is mounted above the portable terminal 801, and has a structure in which the lens can always be directed in a direction in which a photograph can be taken in front even when the portable terminal 801 is held in a different manner.
[0049]
The display unit 804 and the voice input / output unit 805 are for monitoring various information. The position information acquiring unit 806 acquires a current position based on information received by the GPS antenna 802. The image analysis unit 807 analyzes a photographed image photographed by the photographing unit 803. The route search means 808 searches for an optimal route from the current position to the destination.
[0050]
The guidance data creation means 809 creates guidance data for notifying the user 208 of a course change point and the like. The storage unit 810 stores map data. This map data is stored in the removable storage unit 810, and is used by inserting it into the storage unit insertion port of the portable terminal 801. The control button 811 is used by the user 208 to input command information and the like to the mobile terminal 801.
[0051]
Next, the functional configuration of each component of the guidance system according to the present embodiment will be described with reference to FIG.
[0052]
The image capturing means 201 uses a photoelectric conversion element such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal-Oxide Semiconductor), and is mounted above the portable terminal 801 in the hands of the user 208 and is attached to the portable terminal 801. Even if the holding method is changed, the lens can always be directed forward in a direction in which the photographing can be performed, and image information in the traveling direction of the user 208 is acquired.
[0053]
The image information obtained by the photographing unit 201 is analyzed by the image analyzing unit 202. Here, characteristic information of a course change point is extracted by analyzing color information, luminance information, frequency information, pattern regularity information, and the like of the image. The characteristic object here refers to, for example, a road, a traffic sign, a signboard, a building, an installed object, another automobile, a motorcycle, a bicycle, a person, and the like. Furthermore, the various information in the image and the image analysis processing method used in the image analysis for obtaining the characteristic object information on the course are not limited to the above-mentioned ones. Method, binarization method, pattern matching method, etc., may be executed alone or in combination.
[0054]
On the other hand, the current position information of the user 208 is calculated by the position information acquisition unit 204 using information from the GPS antenna 802. The map data is stored in the storage unit 209, and as a storage medium of the storage unit 209, a CD-ROM, a DVD-ROM, or the like has already been widely used for this purpose. In addition, a configuration may be adopted in which necessary data is updated as needed via a network in a rewritable storage medium such as a hard disk or a RAM, and any storage medium that can store map information is not particularly limited. Absent.
[0055]
The route searching means 205 uses the current position information, the map data, and the destination information input by the user 208 through the input operation means 210 or the voice input / output means 207 to find an optimal route from the current position to the destination. Explore. There are various algorithms for searching for the optimum route, including those that have been put into practical use and those that are under study, but are not particularly limited, and any method may be used.
[0056]
The guidance data creation unit 206 creates guidance data that represents the optimal route searched by the route search unit 205 using the feature information of the route change point extracted by the image analysis unit 202 and the map data. The guidance data created by the guidance data creation unit 206 effectively uses image information, text information, and voice information, and is output to the user 208 via the display unit 203 and the voice input / output unit 207. The voice input / output unit 207 has a microphone and a speaker, and is used for voice input from the user 208 and output of guidance data from the guidance system to the user 208.
[0057]
The display unit 203 uses a CRT (Cathode Ray Tube), a liquid crystal, a PDP (Plasma Display Panel), an organic EL (Electro Luminescence), or the like, and displays guidance data to the user 208.
[0058]
Next, a guidance processing operation executed in the guidance system according to the present embodiment will be described using a flowchart shown in FIG.
[0059]
First, the user 208 using the guidance system starts the guidance system (step S901). The user 208 sets an arbitrary destination in the guidance system via the voice input / output unit 207 or the input operation unit 210 (step S902). The guidance system analyzes the information from the GPS antenna 802 shown in FIG. 8 by the position information acquisition unit 204 and acquires the current position information of the user 208 (step S903). If the current position information is acquired, the route search means 205 searches for an optimal route from the current position to the destination with reference to the destination and the map data in the storage means 209 (step S904).
[0060]
The searched optimum route is presented to the user 208 via the display unit 203 and the voice input / output unit 207. At this time, a plurality of searched route candidates are output according to conditions, and the user is allowed to select from them. Alternatively, one of the optimal routes determined by the guidance system may be presented.
[0061]
When the optimum route from the current position to the destination is determined in this way, the user 208 confirms it and starts moving (step S905). During movement, the guidance system updates the current position information by the position information acquisition means 204 again at a certain timing, for example, when a set condition such as elapse of a certain time or movement of a certain distance is satisfied (step S906).
[0062]
Thereby, the guidance system can always grasp the latest current position of the user 208. Then, when the latest current position is grasped, the current position information and the map information are updated as to whether the current position is around the destination (step S907) and whether it is around the course change point (step S908). The determination is made with reference to the determined route information.
[0063]
Here, if the current position is around the set destination, the user 208 is notified to that effect and the guidance processing operation ends (step S915). If the current position is not near the destination or the route change point, the user 208 continues to move (step S905), updates the current position information, and determines whether the current position is the destination and the route change point. (Steps S906 to S908) are repeated. Further, when the current position approaches the course change point, the guidance system takes an image of the vicinity of the course change point by the photographing means 201 (step S909). The image photographed by the photographing unit 201 is input to the image analyzing unit 202, and the feature information of the course change point is extracted using the above-described image analysis algorithm (step S910).
[0064]
Here, first, an obstacle on the road at the course change point is detected, and it is determined whether or not the course change is possible (step S911). For example, when the road at the course change point is cut off or under construction, the fact is notified to the user 208 (steps S916 and S917), and the re-routing of another route not using the corresponding course change point is performed. A search is performed (step S904).
[0065]
Here, it is assumed that an image as shown in FIG. 4 is taken around the course change point. The guidance system sets the route that changes the route to the left at this intersection as the optimal route. At this time, the image analysis unit 202 obtains information that the building 401, the factory 402, and the signboard 403 under construction are adjacent to this intersection. In this way, the guidance system recognizes that the road to be changed is under construction and the passage is impossible, and immediately searches for another route again, as shown in FIG. The construction mark 501 is displayed on the map data, and the voice input / output unit 207 notifies the user 208 of guidance information such as "the left turn is under construction" and "the course will be changed". In addition, if it is determined that there is no obstacle on the road or that it is possible to pass even if there is an obstacle, obstacles and other features such as signs, buildings, installations, other automobiles, motorcycles, Guidance data for the user 208 is created so that a bicycle, a person, and the like become a mark of a course change point (step S913), and is presented to the user 208 (step S914).
[0066]
Specifically, it is assumed that an image as shown in FIG. 6 is taken around the course change point. The guidance system sets the route that changes the route to the left at this intersection as the optimal route. At this time, the image analysis means 202 obtains information that a building 601 with a red roof, a convenience store 602, a signboard 603, and a gas station 604 are adjacent to this intersection, and a blue car 605 is running ahead. Further, information is also obtained that the course change direction is between the building 601 with the red roof and the convenience store 602, and that the blue car 605 traveling ahead is making a similar course change.
[0067]
If such information is obtained, the guidance system, as shown in FIG. 7, the blue car 701 marked as "following" the map data on the display means 203, the building 702 with the red roof, the convenience store 703, the signboard 704, and The gas station 705 is displayed so as to be more prominent than other information, and the voice input / output means 207 “turn left”, “the road between the building with the red roof and the convenience store”, and “blue ahead” It is possible to present to the user 208 guidance information such as "It is the same path as a car."
[0068]
The user 208 knows such detailed information of the actual site in advance and grasps the specific situation of the course change point in advance, so that when the course is changed, the user can refer to the information to make a smoother response. Can be expected (step S914). When the course change is completed, the user 208 moves again along the road (step S905).
[0069]
As described above, by repeating the processing from step S904 to step S914, the user 208 can efficiently reach the set destination.
[0070]
The voice guidance at the course change point described above and the display guidance shown in FIGS. 5 and 7 are merely examples, and it goes without saying that the present invention is not limited to this.
[0071]
Further, in the present embodiment, the photographing unit 201 performs photographing only when the user 208 approaches the course change point. good.
[0072]
(Other embodiments)
An object of the present invention is to supply a storage medium storing program codes of software for realizing the functions of the above-described embodiments to a system or an apparatus, and a computer (or CPU, MPU, or the like) of the system or the apparatus stores the storage medium in the storage medium. It goes without saying that this can also be achieved by reading and executing the stored program code.
[0073]
In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention.
[0074]
Examples of a storage medium for supplying the program code include a floppy (registered trademark) disk, hard disk, magneto-optical disk, CD-ROM, CD-R, CD-RW, DVD-ROM, DVD-RAM, and DVD. -RW, DVD + RW, magnetic tape, nonvolatile memory card, ROM, and the like can be used.
[0075]
When the computer executes the readout program code, not only the functions of the above-described embodiment are realized, but also an OS (Operating System) running on the computer based on the instruction of the program code. It goes without saying that a case where some or all of the actual processing is performed and the functions of the above-described embodiments are realized by the processing is also included.
[0076]
Further, after the program code read from the storage medium is written into a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that a CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.
[0077]
【The invention's effect】
As described above, according to the present invention, the image information in front of the photographed user is analyzed, and the feature near the obtained course change point is notified to the user in advance. It is possible to provide safe and efficient guidance by preventing accidents and oversights, and also to immediately determine the impossibility of traffic due to construction or suspension of traffic by the analysis and change the route.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a schematic configuration of a guidance system according to a first embodiment of the present invention.
FIG. 2 is a block diagram showing a functional configuration of each component in the guidance system according to the first embodiment of the present invention.
FIG. 3 is a flowchart showing a flow of a guidance processing operation in the guidance system according to the first embodiment of the present invention.
FIG. 4 is a diagram illustrating an example of a captured image when an obstacle is present at a course change point in the guidance system according to the first embodiment of the present invention.
FIG. 5 is a diagram showing an example of guidance display when a route change is not possible at a route change point in the guidance system according to the first embodiment of the present invention.
FIG. 6 is a diagram showing an example of a captured image of a course change point in the guidance system according to the first embodiment of the present invention.
FIG. 7 is a diagram showing an example of guidance display when a route change is possible at a route change point in the guidance system according to the first embodiment of the present invention.
FIG. 8 is a block diagram showing a schematic configuration of a guidance system according to a second embodiment of the present invention.
FIG. 9 is a flowchart illustrating a flow of a guidance processing operation in the guidance system according to the second embodiment of the present invention.
[Explanation of symbols]
101 GPS antenna
102 shooting means
103 Display means
104 voice input / output means
105 Vehicle speed sensor
106 position information acquisition means
107 Main terminal
108 Image analysis means
109 Route search means
110 Guidance data creation means
111 storage means
112 controller (input operation means)
113 car
114 Artificial Satellite
201 shooting means
202 Image analysis means
203 display means
204 position information acquisition means
205 Route search means
206 Guidance data creation means
207 Voice input / output means
208 users
209 Storage means
210 input operation means
401 Building with Blue Roof
402 factory
403 sign
501 Construction mark
601 Building with red roof
602 Convenience store (convenience store)
603 signboard
604 gas station
605 blue car
701 Car marked as following
702 Building with red roof
703 convenience store (convenience store)
704 signboard
705 gas station
801 mobile terminal
802 GPS antenna
803 photography means
804 display means
805 Voice input / output means
806 Position information acquisition means
807 Image analysis means
808 Route search means
809 Guidance data creation means
810 storage means
811 Control button (input operation means)
812 satellite

Claims (10)

ユーザを目的地へ誘導案内するための案内方法であって、
現在の位置情報を取得する位置情報取得ステップと、
現在位置から指定された目的地への最適な案内ルートを探索するルート探索ステップと、前方を撮影する撮影ステップと、
前記撮影ステップにより撮影された撮影画像を解析する画像解析ステップと、
ルート上の特徴物を利用した案内データを作成する案内データ作成ステップと、
記憶手段に記憶されている地図データ及び前記案内データを表示する表示ステップと、音声の入出力を行う音声入出力ステップと、
入力操作を行う入力操作ステップとを有することを特徴とする案内方法。
A guidance method for guiding a user to a destination,
A location information acquisition step of acquiring current location information;
A route search step for searching for an optimal guidance route from the current position to the designated destination, a shooting step for shooting ahead,
An image analysis step of analyzing a photographed image photographed by the photographing step,
A guide data creating step for creating guide data using features on the route;
A display step of displaying the map data and the guidance data stored in the storage means, a voice input / output step of inputting / outputting voice,
An input operation step of performing an input operation.
前記案内データ作成ステップは、前記画像解析ステップによる撮影画像の解析結果に応じて案内データを変更することを特徴とする請求項1に記載の案内方法。2. The guidance method according to claim 1, wherein the guidance data creating step changes guidance data according to an analysis result of the captured image in the image analysis step. 前記ルート探索ステップは、前記画像解析ステップによる撮影画像の解析結果に応じて案内ルートを変更することを特徴とする請求項1に記載の案内方法。The guidance method according to claim 1, wherein the route search step changes a guidance route according to an analysis result of the captured image in the image analysis step. ユーザを目的地へ誘導案内するための案内システムであって、
現在の位置情報を取得する位置情報取得手段と、
地図データを記憶している記憶手段と、
現在位置から指定された目的地への最適な案内ルートを探索するルート探索手段と、
前方を撮影する撮影手段と、
前記撮影手段により撮影された撮影画像を解析する画像解析手段と、
ルート上の特徴物を利用した案内データを作成する案内データ作成手段と、
前記地図データ及び前記案内データを表示する表示手段と、
音声の入出力を行う音声入出力手段と、
入力操作を行う入力操作手段とを有することを特徴とする案内システム。
A guidance system for guiding a user to a destination,
Position information acquisition means for acquiring current position information;
Storage means for storing map data;
Route search means for searching for an optimal guide route from the current position to the specified destination;
Photographing means for photographing the front,
Image analysis means for analyzing a photographed image photographed by the photographing means,
Guidance data creation means for creating guidance data using features on the route;
Display means for displaying the map data and the guidance data;
Voice input / output means for inputting / outputting voice;
A guidance system, comprising: input operation means for performing an input operation.
前記案内データ作成手段は、前記画像解析手段による撮影画像の解析結果に応じて案内データを変更することを特徴とする請求項4に記載の案内システム。The guidance system according to claim 4, wherein the guidance data creation unit changes the guidance data according to an analysis result of the captured image by the image analysis unit. 前記ルート探索手段は、前記画像解析手段による撮影画像の解析結果に応じて案内ルートを変更することを特徴とする請求項4に記載の案内システム。The guidance system according to claim 4, wherein the route search unit changes a guidance route according to an analysis result of the captured image by the image analysis unit. ユーザを目的地へ誘導案内するための案内システムを制御するためのコンピュータ読み取り可能な制御プログラムであって、
現在の位置情報を取得する位置情報取得ステップと、現在位置から指定された目的地への最適な案内ルートを探索するルート探索ステップと、前方を撮影する撮影ステップと、前記撮影ステップにより撮影された撮影画像を解析する画像解析ステップと、ルート上の特徴物を利用した案内データを作成する案内データ作成ステップと、記憶手段に記憶されている地図データ及び前記案内データを表示する表示ステップと、音声の入出力を行う音声入出力ステップと、入力操作を行う入力操作ステップとをコンピュータに実行させるためのプログラムコードから成ることを特徴とする案内システムの制御プログラム。
A computer-readable control program for controlling a guidance system for guiding a user to a destination,
A position information obtaining step of obtaining current position information, a route searching step of searching for an optimal guidance route from the current position to a specified destination, a shooting step of shooting the front, and an image shot by the shooting step An image analysis step of analyzing a photographed image, a guidance data creation step of creating guidance data using a feature on a route, a display step of displaying map data and the guidance data stored in storage means, A control program for a guidance system, comprising: a program code for causing a computer to execute a voice input / output step for performing input / output of the computer and an input operation step for performing an input operation.
前記案内データ作成ステップは、前記画像解析ステップによる撮影画像の解析結果に応じて案内データを変更することを特徴とする請求項7に記載の案内システムの制御プログラム。The control program according to claim 7, wherein the guidance data creating step changes the guidance data according to an analysis result of the captured image in the image analysis step. 前記ルート探索ステップは、前記画像解析ステップによる撮影画像の解析結果に応じて案内ルートを変更することを特徴とする請求項7に記載の案内システムの制御プログラム。The control program according to claim 7, wherein the route search step changes a guide route according to an analysis result of the captured image in the image analysis step. 請求項7乃至9に記載の制御プログラムを格納したことを特徴とする記憶媒体。A storage medium storing the control program according to claim 7.
JP2002256654A 2002-09-02 2002-09-02 Guiding method, guiding system, and control program for guiding system and storage medium Pending JP2004093444A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002256654A JP2004093444A (en) 2002-09-02 2002-09-02 Guiding method, guiding system, and control program for guiding system and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002256654A JP2004093444A (en) 2002-09-02 2002-09-02 Guiding method, guiding system, and control program for guiding system and storage medium

Publications (1)

Publication Number Publication Date
JP2004093444A true JP2004093444A (en) 2004-03-25

Family

ID=32061824

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002256654A Pending JP2004093444A (en) 2002-09-02 2002-09-02 Guiding method, guiding system, and control program for guiding system and storage medium

Country Status (1)

Country Link
JP (1) JP2004093444A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007206034A (en) * 2006-02-06 2007-08-16 Denso Corp Map display for vehicle
JP2009015205A (en) * 2007-07-09 2009-01-22 Pioneer Electronic Corp Map change information informing device and program
EP2513606A1 (en) * 2009-12-17 2012-10-24 TomTom International B.V. Navigation apparatus, audible instruction generation system and method of generating audible instructions
JP2013186723A (en) * 2012-03-08 2013-09-19 Nissan Motor Co Ltd Travel control apparatus and travel control method
JP2013186724A (en) * 2012-03-08 2013-09-19 Nissan Motor Co Ltd Travel control apparatus and travel control method
JP2020149575A (en) * 2019-03-15 2020-09-17 トヨタ自動車株式会社 Server device and information processing method

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007206034A (en) * 2006-02-06 2007-08-16 Denso Corp Map display for vehicle
JP2009015205A (en) * 2007-07-09 2009-01-22 Pioneer Electronic Corp Map change information informing device and program
EP2513606A1 (en) * 2009-12-17 2012-10-24 TomTom International B.V. Navigation apparatus, audible instruction generation system and method of generating audible instructions
JP2013514523A (en) * 2009-12-17 2013-04-25 トムトム インターナショナル ベスローテン フエンノートシャップ Navigation device, audible command generation system, and method of generating audible command
US8886455B2 (en) 2009-12-17 2014-11-11 Tomtom International B.V. Navigation apparatus, audible instruction generation system and method of generating audible instructions
JP2013186723A (en) * 2012-03-08 2013-09-19 Nissan Motor Co Ltd Travel control apparatus and travel control method
JP2013186724A (en) * 2012-03-08 2013-09-19 Nissan Motor Co Ltd Travel control apparatus and travel control method
JP2020149575A (en) * 2019-03-15 2020-09-17 トヨタ自動車株式会社 Server device and information processing method
CN111696375A (en) * 2019-03-15 2020-09-22 丰田自动车株式会社 Server apparatus and information processing method
JP7207045B2 (en) 2019-03-15 2023-01-18 トヨタ自動車株式会社 Server device and information processing method
CN111696375B (en) * 2019-03-15 2023-02-03 丰田自动车株式会社 Server apparatus and information processing method
US11774258B2 (en) 2019-03-15 2023-10-03 Toyota Jidosha Kabushiki Kaisha Server apparatus and information processing method for providing vehicle travel guidance that is generated based on an image of a specific point

Similar Documents

Publication Publication Date Title
JP4613881B2 (en) Parking guidance device
US20120287279A1 (en) Parking support apparatus
JP4915281B2 (en) Signal detection device, signal detection method and program
JP4994028B2 (en) Gasoline price information collection system, gasoline price information collection method, and navigation apparatus
CN101903745A (en) Improved navigation device and method
EP2549232A2 (en) Travel guidance system, travel guidance method, and computer program product
JP3848078B2 (en) Direction presenting method and portable terminal
CN105030491B (en) A kind of blind-guiding method and blind guiding system
CN111207768B (en) Information prompting method, device, equipment and storage medium for navigation process
JP2004012425A (en) Information providing apparatus
JP2013019855A (en) Travel guiding device, travel guiding method and computer program
JP2004093444A (en) Guiding method, guiding system, and control program for guiding system and storage medium
JP2008293280A (en) Traffic light detection device, traffic light detection method, and program
JP2017032436A (en) Movement guide system, movement guide method and computer program
CN110470293B (en) Navigation method and mobile terminal
JP5541211B2 (en) Movement guidance system, movement guidance apparatus, movement guidance method, and computer program
JP2016024166A (en) Electronic device, neighboring parking lot search method of the same, and neighboring parking lot search program thereof
JP2004125446A (en) Navigation device and navigation program
JP2009265061A (en) Navigation device
JP2008139157A (en) Vehicle-mounted navigation device
JP2008002965A (en) Navigation device and method therefor
JP2007256020A (en) Navigation device, navigation method, and navigation program
JP4207317B2 (en) Destination identification support device and navigation system provided with the device
JP2009036676A (en) Information processor, and additional information providing method and program
JP2008293170A (en) Parking lot detection device, parking lot detection method and computer program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050606

RD03 Notification of appointment of power of attorney

Effective date: 20060415

Free format text: JAPANESE INTERMEDIATE CODE: A7423

A977 Report on retrieval

Effective date: 20070426

Free format text: JAPANESE INTERMEDIATE CODE: A971007

A131 Notification of reasons for refusal

Effective date: 20070605

Free format text: JAPANESE INTERMEDIATE CODE: A131

RD05 Notification of revocation of power of attorney

Effective date: 20070626

Free format text: JAPANESE INTERMEDIATE CODE: A7425

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070803

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070828

A521 Written amendment

Effective date: 20070927

Free format text: JAPANESE INTERMEDIATE CODE: A523

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Effective date: 20071105

Free format text: JAPANESE INTERMEDIATE CODE: A911

A912 Removal of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080111