JP2008026007A - Navigation device - Google Patents

Navigation device Download PDF

Info

Publication number
JP2008026007A
JP2008026007A JP2006195387A JP2006195387A JP2008026007A JP 2008026007 A JP2008026007 A JP 2008026007A JP 2006195387 A JP2006195387 A JP 2006195387A JP 2006195387 A JP2006195387 A JP 2006195387A JP 2008026007 A JP2008026007 A JP 2008026007A
Authority
JP
Japan
Prior art keywords
captured image
current position
navigation device
vehicle
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006195387A
Other languages
Japanese (ja)
Other versions
JP4942411B2 (en
Inventor
Mikio Ozawa
美喜男 小沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Faurecia Clarion Electronics Co Ltd
Original Assignee
Xanavi Informatics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xanavi Informatics Corp filed Critical Xanavi Informatics Corp
Priority to JP2006195387A priority Critical patent/JP4942411B2/en
Publication of JP2008026007A publication Critical patent/JP2008026007A/en
Application granted granted Critical
Publication of JP4942411B2 publication Critical patent/JP4942411B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide information to be a hint for running to a user even in case the vehicle is running on a road which doesn't exist in the road data held now. <P>SOLUTION: When the navigation device is determined, running on the road not exist on the road map and when the operation of turning direction indicator is detected, the front view of the vehicle is photographed and registered together with the photographed position. If the present position is equivalent to the photographed position of the photographed image, the registered image is displayed. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、ナビゲーション装置に関する。   The present invention relates to a navigation device.

特許文献1には、カメラの撮像画像を、地図上の道路を構成するリンクのノードに対応させて登録し、次回、現在位置がそのノードやリンクに近づいた場合に、その撮像画像を表示するなどして経路誘導に役立てる技術が記載されている。   In Patent Literature 1, a captured image of a camera is registered in association with a link node constituting a road on a map, and when the current position approaches the node or link next time, the captured image is displayed. For example, techniques that are useful for route guidance are described.

特開平2000−304559号公報JP 2000-304559 A

ところで、地図データにはない、新設された道路を車両が走行する場合がある。かかる場合、従来の技術では、対応付ける道路がないので撮像画像は登録されない。したがって、再び、地図データにない道路を車両が走行した場合でも、ユーザに走行の手がかりになるような情報を与えることができない。   By the way, a vehicle may travel on a newly established road that is not included in the map data. In such a case, in the conventional technique, since there is no road to be associated, the captured image is not registered. Therefore, even when the vehicle travels again on a road that is not in the map data, it is not possible to give the user information that is a clue to travel.

かかる課題を解決すべく、本発明は、予め保持している道路データに存在しない道路を車両が走行する場合でも、ユーザに走行の手がかりとなる情報を与えることを目的とする。   In order to solve such a problem, an object of the present invention is to give information to the user as a clue to travel even when the vehicle travels on a road that does not exist in the road data held in advance.

上記課題を解決すべく、本発明の第1の態様は、
ナビゲーション装置であって、地図上の道路に関するデータである道路データを記憶する手段と、現在位置を取得する現在位置取得手段と、前記ナビゲーション装置が搭載された車両の周囲の撮像画像を取得する撮像画像取得手段と、前記車両の方向指示器への操作を検出する操作検出手段と、前記現在位置算出手段により地図データに含まれている道路上以外に現在位置が求められている場合で、かつ前記操作検出手段により前記方向指示器への操作が検出された場合に、前記撮像画像を撮像位置とともに登録する撮像画像登録手段と、前記現在位置算出手段により取得された現在位置が、前記撮像画像の撮像位置に相当する場合に、前記撮像画像登録手段により登録された当該撮像画像を表示する撮像画像表示手段とを備える。
In order to solve the above problems, the first aspect of the present invention is:
A navigation device that stores road data that is data relating to roads on a map, a current position acquisition unit that acquires a current position, and an image that acquires a captured image around a vehicle on which the navigation device is mounted An image acquisition means, an operation detection means for detecting an operation on the direction indicator of the vehicle, and a current position other than on the road included in the map data by the current position calculation means, and When an operation to the direction indicator is detected by the operation detection unit, a captured image registration unit that registers the captured image together with an imaging position, and a current position acquired by the current position calculation unit are the captured image. And a captured image display means for displaying the captured image registered by the captured image registration means.

本発明の第2の態様は、ナビゲーション装置であって、地図上の道路に関するデータである道路データを記憶する手段と、現在位置を取得する現在位置取得手段と、前記ナビゲーション装置が搭載された車両の周囲の撮像画像を取得する撮像画像取得手段と、前記車両の方向指示器への操作を検出する操作検出手段と、前記現在位置算出手段により地図データに含まれている道路上以外に現在位置が求められている間、
(1)前記操作検出手段により前記方向指示器への操作が検出された場合、
(2)前記車両の旋回を検出した場合、
(3)前記車両が所定の距離走行するごとに、
(4)所定時間経過するごとに、
前記撮像画像を撮像位置とともに登録する撮像画像登録手段と、
前記現在位置算出手段により取得された現在位置が、前記撮像画像の撮像位置に相当する場合に、前記撮像画像登録手段により登録された当該撮像画像を表示する撮像画像表示手段とを備える。
According to a second aspect of the present invention, there is provided a navigation device for storing road data, which is data relating to roads on a map, a current position acquisition unit for acquiring a current position, and a vehicle equipped with the navigation device. A captured image acquisition means for acquiring a captured image around the vehicle, an operation detection means for detecting an operation to the direction indicator of the vehicle, and a current position other than on the road included in the map data by the current position calculation means While is required
(1) When an operation to the direction indicator is detected by the operation detection unit,
(2) When the turning of the vehicle is detected,
(3) Every time the vehicle travels a predetermined distance,
(4) Every time a predetermined time elapses,
Captured image registration means for registering the captured image together with an imaging position;
When the current position acquired by the current position calculating unit corresponds to the imaging position of the captured image, the captured image display unit displays the captured image registered by the captured image registration unit.

以下に、本発明の一実施形態について、図面を参照して説明する。   An embodiment of the present invention will be described below with reference to the drawings.

図1は、車載用ナビゲーション装置100の概略構成図である。図示するように、車載用ナビゲーション装置100は、演算処理部1と、ディスプレイ2と、記憶装置3と、音声入出力装置4と、入力装置5と、車輪速センサ6と、ジャイロセンサ7と、GPS(Global Positioning System)受信装置8と、カメラ9と、方向指示器センサ10とを備えている。   FIG. 1 is a schematic configuration diagram of an in-vehicle navigation device 100. As shown in the figure, the in-vehicle navigation device 100 includes an arithmetic processing unit 1, a display 2, a storage device 3, a voice input / output device 4, an input device 5, a wheel speed sensor 6, a gyro sensor 7, A GPS (Global Positioning System) receiver 8, a camera 9, and a direction indicator sensor 10 are provided.

演算処理部1は、様々な処理を行う中心的ユニットである。例えば各種センサ6、7やGPS受信装置8から出力される情報を基にして現在地を検出する。また、得られた現在地情報に基づいて、表示に必要な地図データを記憶装置3から読み出す。また、読み出した地図データをグラフィックス展開し、そこに現在地を示すマークを重ねてディスプレイ2へ表示する。また、記憶装置3に記憶されている地図データを用いて、ユーザから指示された目的地と現在地(出発地)とを結ぶ最適な経路(推奨経路)を探索する。また、音声入出力装置4やディスプレイ2を用いてユーザを誘導する。   The arithmetic processing unit 1 is a central unit that performs various processes. For example, the present location is detected based on information output from the various sensors 6 and 7 and the GPS receiver 8. Further, map data necessary for display is read out from the storage device 3 based on the obtained current location information. Further, the read map data is developed in graphics, and a mark indicating the current location is superimposed on the map data and displayed on the display 2. In addition, the map data stored in the storage device 3 is used to search for an optimum route (recommended route) connecting the destination instructed by the user and the current location (departure location). Further, the user is guided using the voice input / output device 4 and the display 2.

ディスプレイ2は、演算処理部1で生成されたグラフィックス情報を表示するユニットである。ディスプレイ2は、CRTや液晶ディスプレイなどで構成される。演算処理部1とディスプレイ2との間の信号S1は、RGB信号やNTSC(National Television System Committee)信号で接続するのが一般的である。   The display 2 is a unit that displays graphics information generated by the arithmetic processing unit 1. The display 2 is composed of a CRT, a liquid crystal display, or the like. The signal S1 between the arithmetic processing unit 1 and the display 2 is generally connected by an RGB signal or an NTSC (National Television System Committee) signal.

記憶装置3は、CD-ROMやDVD-ROMやHDDやICカードといった記憶媒体で構成されている。この記憶媒体には、地図データが記憶されている。   The storage device 3 includes a storage medium such as a CD-ROM, DVD-ROM, HDD, or IC card. This storage medium stores map data.

地図データは、地図上の区画された領域であるメッシュの識別コード(メッシュID)ごとに、そのメッシュ領域に含まれる道路を構成する各リンクのリンクデータを含む。リンクデータは、リンクIDごとに、リンクを構成する2つのノード(開始ノード、終了ノード)の座標情報、リンクを含む道路の種別情報、リンクの長さを示すリンク長情報、リンク旅行時間、2つのノードにそれぞれ接続するリンクのリンクID(接続リンクID)などを含んでいる。   The map data includes, for each mesh identification code (mesh ID), which is a partitioned area on the map, link data of each link constituting a road included in the mesh area. The link data includes, for each link ID, coordinate information of two nodes (start node and end node) constituting the link, road type information including the link, link length information indicating the link length, link travel time, 2 It includes the link ID (connection link ID) of the link connected to each node.

音声入出力装置4は、演算処理部1で生成したユーザへのメッセージを音声信号に変換し出力する。また、ユーザが発した声を認識し演算処理部1にその内容を転送する処理を行う。   The voice input / output device 4 converts the message to the user generated by the arithmetic processing unit 1 into a voice signal and outputs it. Also, a process of recognizing the voice uttered by the user and transferring the contents to the arithmetic processing unit 1 is performed.

入力装置5は、ユーザからの指示を受け付けるユニットである。入力装置5として、スクロールキー、縮尺変更キーなどのハードスイッチ、ジョイスティック、タッチパネルなどを備えていてよい。   The input device 5 is a unit that receives instructions from the user. The input device 5 may include hardware switches such as a scroll key and a scale change key, a joystick, a touch panel, and the like.

センサ6、7およびGPS受信装置8は、車載用ナビゲーション装置100で現在地(自車位置)を検出するために使用されるものである。車輪速センサ6は、車輪の円周と計測される車輪の回転数の積から距離を測定し、さらに対となる車輪の回転数の差から移動体が曲がった角度を計測する。ジャイロ7は、光ファイバジャイロや振動ジャイロ等で構成され、移動体が回転した角度を検出するものである。GPS受信装置8は、GPS衛星からの信号を受信し移動体とGPS衛星間の距離と距離の変化率を3個以上の衛星に対して測定することで移動体の現在位置、進行速度および進行方位を測定する。   The sensors 6 and 7 and the GPS receiver 8 are used for detecting the current location (vehicle position) by the vehicle-mounted navigation device 100. The wheel speed sensor 6 measures the distance from the product of the wheel circumference and the measured number of rotations of the wheel, and further measures the angle at which the moving body is bent from the difference in the number of rotations of the paired wheels. The gyro 7 is configured by an optical fiber gyro, a vibration gyro, or the like, and detects an angle at which the moving body rotates. The GPS receiver 8 receives a signal from a GPS satellite and measures the distance between the moving body and the GPS satellite and the rate of change of the distance with respect to three or more satellites, thereby moving the current position, traveling speed, and traveling of the moving body. Measure orientation.

カメラ9は、車載用ナビゲーション装置100が搭載されている車両の周辺の風景を撮像(撮影)するための撮像装置である。カメラ9は、CCDカメラなどの小型カメラで構成される。カメラ9は、車両に乗車したユーザが見るであろう方向、すなわち車両の前方の風景が撮像可能なように、レンズが車両の前方に向いている。   The camera 9 is an imaging device for imaging (photographing) a landscape around a vehicle on which the vehicle-mounted navigation device 100 is mounted. The camera 9 is a small camera such as a CCD camera. In the camera 9, the lens faces the front of the vehicle so that a user who has boarded the vehicle can view a direction, that is, a landscape in front of the vehicle.

方向指示器センサ10は、車両の方向指示器(ウインカー)に対するユーザの操作を検出し、演算処理部1に送る。具体的には、右の方向指示器がONされた場合、それを検知し、右の方向指示器がONされた旨を演算処理部1に送る。また、左の方向指示器がONされた場合、それを検知し、左の方向指示器がONされた旨を演算処理部1に送る。   The direction indicator sensor 10 detects a user operation on the vehicle direction indicator (blinker) and sends the detected operation to the arithmetic processing unit 1. Specifically, when the right direction indicator is turned on, it is detected and the fact that the right direction indicator is turned on is sent to the arithmetic processing unit 1. Further, when the left direction indicator is turned on, it is detected and the fact that the left direction indicator is turned on is sent to the arithmetic processing unit 1.

図2は、演算処理部1のハードウェア構成例を示す図である。   FIG. 2 is a diagram illustrating a hardware configuration example of the arithmetic processing unit 1.

図示するように、演算処理部1は、各デバイス間をバス33で接続した構成としてある。演算処理部1は、数値演算及び各デバイスを制御するといった様々な処理を実行するCPU(Central Processing Unit)21と、記憶装置3から読み出した地図データ、演算データなどを格納するRAM(Random Access Memory)22と、プログラムやデータを格納するROM(Read Only Memory)23と、メモリ間およびメモリと各デバイスとの間のデータ転送を実行するDMA(Direct Memory Access)24と、グラフィックス描画を実行し且つ表示制御を行う描画コントローラ25と、グラフィックスイメージデータを蓄えるVRAM(Video Random Access Memory)26と、イメージデータをRGB信号に変換するカラーパレット27と、アナログ信号をデジタル信号に変換するA/D変換器28と、シリアル信号をバスに同期したパラレル信号に変換するSCI(Serial Communication Interface)29と、パラレル信号をバスに同期させてバス上にのせるPIO(Parallel Input/Output)30と、パルス信号を積分するカウンタ31と、カメラ10のステッピングモータに制御命令を送信して撮像方向を制御するとともに、撮像して得たアナログ信号を画像データに変換するカメラ制御装置32とを有する。   As shown in the figure, the arithmetic processing unit 1 has a configuration in which devices are connected by a bus 33. The arithmetic processing unit 1 includes a CPU (Central Processing Unit) 21 that executes various processes such as numerical calculation and control of each device, and a RAM (Random Access Memory) that stores map data, arithmetic data, and the like read from the storage device 3. ) 22, a ROM (Read Only Memory) 23 for storing programs and data, a DMA (Direct Memory Access) 24 for transferring data between the memories and between the memory and each device, and graphics drawing. In addition, a drawing controller 25 that performs display control, a video random access memory (VRAM) 26 that stores graphics image data, a color palette 27 that converts image data into RGB signals, and an A / D that converts analog signals into digital signals. Converter 28 and an SCI (Serial Communication Interface) that converts the serial signal into a parallel signal synchronized with the bus. ace) 29, a PIO (Parallel Input / Output) 30 that puts a parallel signal on the bus in synchronization with the bus, a counter 31 that integrates a pulse signal, and a stepping motor of the camera 10 to send a control command and image it A camera control device 32 that controls the direction and converts an analog signal obtained by imaging into image data.

図3は、演算処理部1の機能ブロック図である。   FIG. 3 is a functional block diagram of the arithmetic processing unit 1.

図示するように、演算処理部1は、ユーザ操作解析部41と、現在位置算出部42と、経路探索部43と、経路誘導部44と、撮像画像処理部45と、表示処理部46とを備えている。   As shown in the figure, the calculation processing unit 1 includes a user operation analysis unit 41, a current position calculation unit 42, a route search unit 43, a route guidance unit 44, a captured image processing unit 45, and a display processing unit 46. I have.

ユーザ操作解析部41は、入力装置5に入力されたユーザからの要求を受け、その要求内容を解析して、その要求内容に対応する処理が実行されるように演算処理部1の各部を制御する。   The user operation analysis unit 41 receives a request from the user input to the input device 5, analyzes the request content, and controls each unit of the arithmetic processing unit 1 so that processing corresponding to the request content is executed. To do.

現在位置算出部42は、車輪速センサ6で計測される距離パルスデータS5およびジャイロ7で計測される角加速度データS6を各々積分した結果得られる距離データおよび角度データを用い、そのデータを時間軸で積分していくことにより、初期位置(X,Y)から自車走行後の位置である仮想現在地(X′,Y′)を定期的に演算する。また、仮想現在位置(X’、Y’)を、GPS受信装置8出力される緯度・経度により定期的に補正する。また、仮想現在位置を、地図データを用いて、マップマッチングすることにより、形状の相関が最も高い道路(リンク)上に、現在位置の表示候補点(カーマークにより表示される位置)を求める。ただし、マップマッチングによる形状の相関が所定値以下の場合は、道路(リンク)上に現在位置の表示候補点を求めることはせずに、仮想現在位置を現在位置の表示候補点とする。   The current position calculation unit 42 uses distance data and angle data obtained as a result of integrating the distance pulse data S5 measured by the wheel speed sensor 6 and the angular acceleration data S6 measured by the gyro 7, respectively. Is integrated periodically to calculate the virtual current location (X ′, Y ′) that is the position after the vehicle travels from the initial position (X, Y). Further, the virtual current position (X ′, Y ′) is periodically corrected by the latitude / longitude output from the GPS receiver 8. Further, by performing map matching on the virtual current position using map data, a display candidate point (position displayed by a car mark) of the current position is obtained on a road (link) having the highest shape correlation. However, if the correlation of the shape by map matching is equal to or smaller than a predetermined value, the virtual current position is set as the display candidate point of the current position without obtaining the display candidate point of the current position on the road (link).

なお、地図データに登録されている道路(リンク)上に現在位置の表示候補点が求められた場合、その候補点をマッチング候補点という。一方、地図データに登録されている道路(リンク)上に現在位置の表示候補点が求められなかった場合、その候補点を、道路にマッチングしなかった(アンマッチ)という意味で、フリー候補点という。   In addition, when the display candidate point of the current position is obtained on the road (link) registered in the map data, the candidate point is referred to as a matching candidate point. On the other hand, if a display candidate point of the current position is not found on the road (link) registered in the map data, the candidate point is referred to as a free candidate point in the sense that it does not match the road (unmatch). .

経路探索部43は、ダイクストラ法等を用いて、指定された2地点(現在地、目的地)間を結ぶ経路のコスト(例えば、旅行時間)が最少となる経路を探索する。   The route search unit 43 uses a Dijkstra method or the like to search for a route that minimizes the cost (for example, travel time) of a route connecting two designated points (current location, destination).

経路誘導部44は、経路探索部43で探索された経路を用いて経路誘導を行う。   The route guidance unit 44 performs route guidance using the route searched by the route search unit 43.

撮像画像処理部45は、カメラ9により撮像された画像を、撮像画像データ300に登録する処理を行う。また、所定の条件において、ディスプレイ2に撮像された画像を表示する処理を行う。   The captured image processing unit 45 performs processing for registering an image captured by the camera 9 in the captured image data 300. Moreover, the process which displays the image imaged on the display 2 on the predetermined conditions is performed.

表示処理部46は、ディスプレイ2に表示すべき情報の描画コマンドを生成し、生成したコマンドを、ディスプレイ2に送信する。   The display processing unit 46 generates a drawing command for information to be displayed on the display 2 and transmits the generated command to the display 2.

[動作の説明]次に、上記構成の車載用ナビゲーション装置100の動作について説明する。   [Description of Operation] Next, the operation of the in-vehicle navigation device 100 having the above-described configuration will be described.

図4は、車載用ナビゲーション装置100の電源が投入されているときに行われる処理の流れを示すフロー図である。なお、このフローは、経路探索された経路に従って経路誘導が行われているときに、開始してもよい。また、経路から逸脱したときに開始するようにしてもよい。また、ユーザから、入力装置5を介して、本フローの開始要求を受け付けたときに開始してもよい。   FIG. 4 is a flowchart showing a flow of processing performed when the vehicle-mounted navigation device 100 is powered on. This flow may be started when route guidance is performed according to the route searched for. Alternatively, it may be started when the vehicle deviates from the route. Alternatively, it may be started when a request for starting this flow is received from the user via the input device 5.

撮像画像処理部45は、現在位置算出部42から現在位置の表示候補点を取得する。そして、取得した表示候補点がマッチング候補点であるか、フリー候補点であるか、の判定を行う(S110)。   The captured image processing unit 45 acquires a display candidate point at the current position from the current position calculation unit 42. Then, it is determined whether the acquired display candidate point is a matching candidate point or a free candidate point (S110).

そして、表示候補点がフリー候補点である場合(S110でNo)、撮像画像処理部45は、撮像画像の登録処理を行う(S120)。   When the display candidate point is a free candidate point (No in S110), the captured image processing unit 45 performs a captured image registration process (S120).

図5は、撮像画像の登録処理の流れを示すフロー図である。   FIG. 5 is a flowchart showing a flow of registration processing of captured images.

まず、撮像画像処理部45は、カメラ9を起動させ、撮像画像を取得する。そして、撮像画像を撮像画像データ300に登録する処理を行う。   First, the captured image processing unit 45 activates the camera 9 and acquires a captured image. Then, a process of registering the captured image in the captured image data 300 is performed.

図6は、撮像画像データ300の構成を示す図である。撮像画像データは、1つのレコードに、撮像位置301と、撮像画像302と、撮像日時303と、撮像根拠304と、付加情報305とを格納するためのフィールドを備えている。   FIG. 6 is a diagram illustrating the configuration of the captured image data 300. The captured image data includes a field for storing an imaging position 301, a captured image 302, an imaging date / time 303, an imaging basis 304, and additional information 305 in one record.

撮像画像処理部45は、現在位置の表示候補点の座標位置を、撮像位置301に格納する。また、カメラ9から取得した撮像画像を、撮像画像302に格納する。また、カメラ9により撮像画像が取得された日時を、撮像日時303に格納する。また、撮像画像を撮像画像データ300に格納することになった根拠を、撮像根拠304に格納する。また、ユーザから撮像画像に付加する情報を受け付けた場合は、付加情報305に格納する(詳しくは後述する)。   The captured image processing unit 45 stores the coordinate position of the display candidate point at the current position in the imaging position 301. The captured image acquired from the camera 9 is stored in the captured image 302. Further, the date and time when the captured image is acquired by the camera 9 is stored in the imaging date and time 303. Further, the basis for storing the captured image in the captured image data 300 is stored in the imaging basis 304. When information to be added to the captured image is received from the user, it is stored in the additional information 305 (details will be described later).

S121では、現在位置の表示候補点がマッチング候補点からフリー候補点になったことから(図4のS110でNo)、撮像画像を登録することになった。そこで、撮像画像処理部45は、S121においては、撮像根拠304に、マッチング候補点からフリー候補点になった旨(「アンマッチ」)を登録する。   In S121, since the display candidate point at the current position is changed from the matching candidate point to the free candidate point (No in S110 of FIG. 4), the captured image is registered. Accordingly, in S121, the captured image processing unit 45 registers in the imaging basis 304 that the matching candidate point has changed to a free candidate point (“unmatch”).

次に、撮像画像処理部45は、方向指示器センサ10を介して、ユーザにより方向指示器が操作されたか否かを判定する(S122)。   Next, the captured image processing unit 45 determines whether or not the direction indicator has been operated by the user via the direction indicator sensor 10 (S122).

方向指示器が操作されていない場合(S122でNo)、撮像画像処理部45は、処理をS124に移行する。   When the direction indicator is not operated (No in S122), the captured image processing unit 45 proceeds to S124.

一方、方向指示器が操作された場合(S122でYes)、撮像画像処理部45は、S121と同様に、カメラ9により撮像された画像を取得し、撮像画像データ300に登録する処理を行う(S123)。なお、ここでは、方向指示器が操作されたことから、撮像画像を登録することになった。そこで、撮像画像処理部45は、S123においては、撮像根拠304に、方向指示器が操作された旨(「右ウインカー」、「左ウインカー」など)を登録する。そして、S124に処理を移行する。   On the other hand, when the direction indicator is operated (Yes in S122), the captured image processing unit 45 acquires an image captured by the camera 9 and registers the captured image data 300 in the same manner as in S121 ( S123). In this case, since the direction indicator is operated, the captured image is registered. Therefore, in S123, the captured image processing unit 45 registers that the direction indicator has been operated (such as “right blinker” and “left blinker”) in the imaging basis 304. Then, the process proceeds to S124.

S124では、撮像画像処理部45は、現在位置算出部42から更新された現在位置の表示候補点を取得し、取得した表示候補点が、マッチング候補点であるか、フリー候補点であるか、の判定を行う(S124)。   In S124, the captured image processing unit 45 acquires the display candidate point of the current position updated from the current position calculation unit 42, and whether the acquired display candidate point is a matching candidate point or a free candidate point. Is determined (S124).

そして、現在位置の表示候補点が依然としてフリー候補点である場合(S124でNo)、撮像画像処理部45は、S122に戻って処理を続ける。   If the display candidate point at the current position is still a free candidate point (No in S124), the captured image processing unit 45 returns to S122 and continues the processing.

一方、現在位置の候補点がマッチング候補点となった場合(S124でYes)、撮像画像処理部45は、図5で示した撮像画像の登録処理を終了し、図4のフローで示した処理を最初(S110)から再開する。   On the other hand, when the candidate point at the current position becomes a matching candidate point (Yes in S124), the captured image processing unit 45 ends the captured image registration process illustrated in FIG. 5 and performs the process illustrated in the flow in FIG. Is restarted from the beginning (S110).

以上、図4及び図5のフローについて説明した。図4及び図5に示したフローによれば、撮像画像処理部45は、現在位置の表示候補点が道路(リンク)にマッチングしなくなった時点で、一旦、撮像画像を取得し登録する。また、現在位置の候補点がフリー候補点である間、方向指示器への操作を監視し、操作があった場合は、撮像画像を取得し、登録する。   The flow in FIGS. 4 and 5 has been described above. According to the flow shown in FIGS. 4 and 5, the captured image processing unit 45 acquires and registers a captured image once when the display candidate point at the current position no longer matches the road (link). Further, while the candidate point at the current position is a free candidate point, an operation on the direction indicator is monitored, and if there is an operation, a captured image is acquired and registered.

なお、図7に示すように、撮像画像処理部45は、撮像画像を登録する際、ディスプレイ2に、その旨を知らせる情報を表示してもよい。   As shown in FIG. 7, when registering a captured image, the captured image processing unit 45 may display information notifying that effect on the display 2.

図示するように、表示画面600には、現在位置の周辺の地図601と、現在位置の候補点を示すカーマーク602とが表示されている。撮像画像処理部45は、撮像画像を登録する際(図5のS121、S123)、カメラ9から取得した撮像画像603を、表示画面600に表示する。例えば、画面を2分割して、一方に地図601を表示し、他方に撮像画像603を表示する。さらに、撮像画像処理部45は、ユーザから入力装置5を介して、撮像画像を登録するか否かの指示、あるいは登録された撮像画像の削除(登録のキャンセル)の指示を受け付けてもよい。図7の表示画面600には、タッチパネルによりユーザから指示を受け付けるために、登録キャンセルを受け付けるボタン604が表示されている。   As shown in the figure, a map 601 around the current position and a car mark 602 indicating candidate points of the current position are displayed on the display screen 600. The captured image processing unit 45 displays the captured image 603 acquired from the camera 9 on the display screen 600 when registering the captured image (S121 and S123 in FIG. 5). For example, the screen is divided into two, a map 601 is displayed on one side, and a captured image 603 is displayed on the other side. Furthermore, the captured image processing unit 45 may receive an instruction from the user via the input device 5 as to whether or not to register the captured image, or an instruction to delete the registered captured image (cancel registration). In the display screen 600 of FIG. 7, a button 604 for accepting registration cancellation is displayed in order to accept an instruction from the user via the touch panel.

次に、上記のようにして登録された撮像画像データ300の利用について説明する。   Next, use of the captured image data 300 registered as described above will be described.

図8は、撮像画像の利用処理のフロー図である。このフローは、車載用ナビゲーション装置100に電源が投入されると開始される。また、経路探索を行い、探索した経路を用いて誘導処理を開始するときに、同時に開始するようにしてもよい。また、ユーザから入力装置5を介して開始要求を受け付けたときに開始してもよい。   FIG. 8 is a flowchart of captured image utilization processing. This flow is started when the vehicle-mounted navigation device 100 is turned on. Further, when a route search is performed and the guidance process is started using the searched route, the route search may be started at the same time. Moreover, you may start when the start request | requirement is received via the input device 5 from the user.

撮像画像処理部45は、現在位置算出部42から現在位置の表示候補点を取得する。そして、撮像画像データ300の中に、撮像位置301が、取得した表示候補点の座標位置と一致する又は付近である、撮像画像302が登録されているか否か判定する(S200)。表示候補点の座標位置と、撮像位置301とは、完全に一致しなくてもよい。撮像画像処理部45は、撮像位置301が、表示候補点から所定距離内(例えば、50m内)である撮像画像302が登録されているか否かを判定してもよい。   The captured image processing unit 45 acquires a display candidate point at the current position from the current position calculation unit 42. Then, it is determined whether or not the captured image 302 in which the captured position 301 matches or is close to the coordinate position of the acquired display candidate point is registered in the captured image data 300 (S200). The coordinate position of the display candidate point and the imaging position 301 may not completely match. The captured image processing unit 45 may determine whether or not a captured image 302 whose imaging position 301 is within a predetermined distance (for example, within 50 m) from the display candidate point is registered.

撮像画像データ300の中に、表示候補点の座標位置に一致する又は付近である撮像位置301の撮像画像302が登録されている場合(S200でYes)、撮像画像処理部45は、ディスプレイ2に、その撮像画像302の表示を行う。   When the captured image 302 of the imaging position 301 that matches or is close to the coordinate position of the display candidate point is registered in the captured image data 300 (Yes in S200), the captured image processing unit 45 is displayed on the display 2. The captured image 302 is displayed.

図8のフローによれば、撮像画像処理部45は、カーマークが、過去に登録された撮像画像の撮像位置に近づくと、その撮影位置の撮像画像を表示することになる。   According to the flow of FIG. 8, when the car mark approaches the imaging position of the captured image registered in the past, the captured image processing unit 45 displays the captured image at the imaging position.

図9は、表示画面600を示す図である。表示画面600には、現在位置の周辺の地図601と、現在位置を示すカーマーク602とが表示されている。カーマーク602は、表示候補点の座標位置に表示される。かかる表示がなされているときに、カーマーク602の付近で過去に撮像された画像がある場合(図8のS200でYes)、撮像画像処理部45は、表示画面600に、その撮像画像611を表示する。例えば、画面を2分割して、一方に地図601を表示し、他方に撮像画像611を表示する。さらに、撮像画像処理部45は、撮像画像データ300から、撮像画像611の撮像日時303、撮像根拠304を取得し、図示するように、撮像日時612、撮像根拠613として、表示する。   FIG. 9 is a diagram showing a display screen 600. On the display screen 600, a map 601 around the current position and a car mark 602 indicating the current position are displayed. The car mark 602 is displayed at the coordinate position of the display candidate point. When such a display is made and there is an image captured in the past in the vicinity of the car mark 602 (Yes in S200 in FIG. 8), the captured image processing unit 45 displays the captured image 611 on the display screen 600. indicate. For example, the screen is divided into two, a map 601 is displayed on one side, and a captured image 611 is displayed on the other side. Further, the captured image processing unit 45 acquires the imaging date and time 303 and the imaging basis 304 of the captured image 611 from the captured image data 300 and displays them as the imaging date and time 612 and the imaging basis 613 as illustrated.

以上、本発明の一実施形態について説明した。   The embodiment of the present invention has been described above.

本実施形態によれば、車両が地図データに登録されていない道路を走行した場合、所定のポイントにおいて、車両周辺(前方)の風景を撮像し、撮像画像として登録する。そして、車両が、再度、同じ場所を走行した場合に、登録しておいた撮像画像を表示する。したがって、ユーザが地図データにない道路を走行するときでも、過去に通ったことがあれば、そのときに撮像された風景画像が表示される。すなわち、地図データにない道路を走行するときでも、ユーザに、走行に役立つ情報を与えることができ、ユーザの走行時の不安を解消することができる。   According to the present embodiment, when a vehicle travels on a road that is not registered in the map data, a landscape around the vehicle (front) is captured at a predetermined point and registered as a captured image. When the vehicle travels again in the same place, the registered captured image is displayed. Therefore, even when the user travels on a road not included in the map data, if the user has passed in the past, a landscape image captured at that time is displayed. That is, even when traveling on a road not included in the map data, information useful for traveling can be given to the user, and the user's anxiety during traveling can be resolved.

さらに、撮像画像とともに、撮像日時が示されるので、ユーザは、走行したときのことを思い出すのが容易となる。   Furthermore, since the imaging date and time are shown together with the captured image, the user can easily remember when he / she drove.

また、方向指示器への操作履歴(右ウインカーか左ウインカーか)が表示されるので、ユーザは、分岐点において、右折すべきか、左折すべきかを容易に判断することができる。   In addition, since the operation history (right turn signal or left turn signal) for the direction indicator is displayed, the user can easily determine whether to turn right or left at the branch point.

<変形例1>
本発明は、上記実施形態に制限されない。上記実施形態は、様々な変形が可能である。
<Modification 1>
The present invention is not limited to the above embodiment. The above embodiment can be variously modified.

例えば、上記実施形態では、図5のS122、S123のように、方向指示器がONされたときに、撮像画像を登録するようにしている。これに限らず、車両の旋回動作を検出したときに、所定距離を走行したときに、又は所定時間が経過したときに、撮像画像を登録するようにしてもよい。   For example, in the above-described embodiment, the captured image is registered when the direction indicator is turned on as in S122 and S123 of FIG. Not limited to this, a captured image may be registered when a turning operation of the vehicle is detected, when a predetermined distance is traveled, or when a predetermined time has elapsed.

図10は、かかる場合の撮像画像の登録処理のフロー図である。図5で示したフローと異なるのは、撮像画像処理部45は、方向指示器のONを検出した場合(S122aでYes)に加えて、旋回動作を検出した場合(S122bでYes)、所定距離を走行した場合(S122cでYes)、所定時間経過した場合(S122dでYes)に、撮像画像を登録する(S123)。   FIG. 10 is a flow chart of the captured image registration process in such a case. A difference from the flow shown in FIG. 5 is that the captured image processing unit 45 detects a turning motion (Yes in S122b) in addition to the case where the turn indicator is detected (Yes in S122a), and a predetermined distance. When the vehicle travels (Yes in S122c), when a predetermined time has elapsed (Yes in S122d), the captured image is registered (S123).

撮像画像処理部45は、ジャイロセンサ7により所定角度(例えば、80°)以上の旋回を検出した場合に、車両が旋回したと判定する。また、撮像画像処理部45は、表示候補点がフリー候補点である間(S124でNo)、車輪速センサ6により走行距離を計算し、所定の距離(例えば、100m)走行するたびに、カメラ9の撮像画像を撮像画像データ300に登録する。また、撮像画像処理部45は、表示候補点がフリー候補点である間(S124でNo)、時間を計測し、所定の時間(例えば、5分)が経過するたびに、カメラ9の撮像画像を撮像画像データ300に登録する。   The captured image processing unit 45 determines that the vehicle has turned when the gyro sensor 7 detects a turn of a predetermined angle (for example, 80 °) or more. In addition, the captured image processing unit 45 calculates a travel distance by the wheel speed sensor 6 while the display candidate point is a free candidate point (No in S124), and each time the vehicle travels a predetermined distance (for example, 100 m), 9 captured images are registered in the captured image data 300. Further, the captured image processing unit 45 measures time while the display candidate point is a free candidate point (No in S124), and each time a predetermined time (for example, 5 minutes) elapses, the captured image of the camera 9 is captured. Is registered in the captured image data 300.

図10のフローによれば、地図データにない道路において、撮像画像を取得するポイントが増える。したがって、ユーザが再度走行することになった場合に、要所において、撮像画像を表示することができる。すなわち、ユーザに対して、道に迷うことなくスムーズに走行するのに役立つ情報を表示することができる。   According to the flow of FIG. 10, points for acquiring captured images increase on roads that are not in the map data. Therefore, when the user travels again, a captured image can be displayed at a key point. That is, it is possible to display information useful for the user to travel smoothly without getting lost.

<変形例2>
また、撮像画像処理部45は、撮像画像を登録する際に、ユーザから入力装置5を介して、撮像画像に付加する情報(撮像画像データ300の付加情報305)を受け付けてもよい。付加情報305として受け付ける情報としては、コンビニ、公園など施設に関する情報や、交差点、道路標識など道路に関する情報や、右折、右折禁止などの走行ガイダンスとなる情報などがある。
<Modification 2>
The captured image processing unit 45 may receive information (additional information 305 of the captured image data 300) to be added to the captured image from the user via the input device 5 when registering the captured image. Information received as the additional information 305 includes information on facilities such as convenience stores and parks, information on roads such as intersections and road signs, and information serving as travel guidance such as right turn and right turn prohibition.

例えば、図5又は図10に示したS123の処理において、撮像画像処理部45は、音声入出力装置4のマイクロホンを介して、ユーザから音声入力を受け付ける。そして、入力された音声を認識して、認識した結果をユーザに提示して、確定させた後、撮像画像データ300の付加情報305として格納する。   For example, in the process of S123 illustrated in FIG. 5 or FIG. 10, the captured image processing unit 45 receives a voice input from the user via the microphone of the voice input / output device 4. Then, the input voice is recognized, the recognized result is presented to the user and confirmed, and then stored as additional information 305 of the captured image data 300.

図11は、かかる場合の表示画面600を示す図である。撮像画像処理部45は、撮像画像を登録する際、撮像画像603を表示する。このとき、所定時間(例えば、5秒間)、音声入出力装置4のマイクロホンを介して、音声入力を待機する。例えば、ユーザから「コンビニ」という音声を取得すると、これを音声認識し、「『コンビニ』と登録してよいですか」などど、音声または表示により出力する。ユーザから入力装置5を介して確定要求を受け付けると、撮像画像処理部45は、「コンビニ」と付加情報305に格納した後、表示画面600に、「コンビニと登録しました」などと、登録を完了した旨605を音声又は表示により出力する。すなわち、ユーザと車載用ナビゲーション装置100との間の会話形式で、付加情報305を受け付ける。   FIG. 11 is a diagram showing a display screen 600 in such a case. The captured image processing unit 45 displays the captured image 603 when registering the captured image. At this time, voice input is waited for through a microphone of the voice input / output device 4 for a predetermined time (for example, 5 seconds). For example, when a voice “convenience store” is acquired from the user, the voice is recognized and output by voice or display, such as “Can I register“ Convenience store ”?”. When the confirmation request is received from the user via the input device 5, the captured image processing unit 45 stores “Convenience Store” in the additional information 305 and then registers “Displayed as Convenience Store” on the display screen 600. The completion message 605 is output by voice or display. That is, the additional information 305 is received in a conversation format between the user and the vehicle-mounted navigation device 100.

かかる付加情報305を登録された場合、撮像画像処理部45は、撮像画像の利用処理の撮像画像302を表示する際(図8のS210)、対応する付加情報305も表示する。   When such additional information 305 is registered, the captured image processing unit 45 also displays the corresponding additional information 305 when displaying the captured image 302 of the captured image utilization processing (S210 in FIG. 8).

図12は、かかる場合の表示画面600を示す図である。図示するように、撮像画像処理部45は、撮像画像611とともに、撮像日時612、撮像根拠613、付加情報614を表示する。   FIG. 12 is a diagram showing a display screen 600 in such a case. As shown in the figure, the captured image processing unit 45 displays the captured image 611, the captured date 612, the captured basis 613, and the additional information 614.

また、図12に示すように、撮像画像処理部45は、過去に走行した軌跡603を表示してもよい。そのために、撮像画像処理部45は、現在位置の表示候補点が、マッチング候補点からフリー候補点になった場合(図4のS110でNo)、表示候補点の軌跡603を記憶しておく。そして、再度、同じ地点で、表示候補点が、マッチング候補点からフリー候補点になった場合、記憶しておいた軌跡603を地図上に表示する。なお、軌跡603の始点604と終点605を表示してもよい。始点604は、地図データにある道路にマッチングしなくなった地点(最初にフリー候補点が求められた地点)である。終点605は、地図データにある道路にマッチングし直した地点(現在位置の表示候補点がフリー候補点からマッチング候補点になった地点)である。   In addition, as illustrated in FIG. 12, the captured image processing unit 45 may display a trajectory 603 that has traveled in the past. Therefore, when the display candidate point at the current position is changed from the matching candidate point to the free candidate point (No in S110 in FIG. 4), the captured image processing unit 45 stores the locus 603 of the display candidate point. When the display candidate point is changed from the matching candidate point to the free candidate point again at the same point, the stored locus 603 is displayed on the map. Note that the start point 604 and the end point 605 of the locus 603 may be displayed. The starting point 604 is a point that no longer matches a road in the map data (a point where a free candidate point is first obtained). The end point 605 is a point that has been re-matched with a road in the map data (a point where the display candidate point of the current position becomes a matching candidate point from a free candidate point).

また、撮像画像処理部45は、図12に示すように、撮像画像の撮像位置をアイコン606などにより地図上に表示してもよい。例えば、撮像画像処理部45は、撮像画像データ300の中から、表示中の地図601内に含まれる撮像位置301を抽出する。そして、抽出した撮像位置301を、地図601にアイコン606などによって表示する。さらに、ユーザから入力装置5を介して、アイコン606の指定を受け付けてもよい。例えば、アイコン606が押されると、撮像画像処理部45は、撮像画像データ300の中から、押されたアイコン606に対応する撮像位置301の撮像画像302を取得し、表示する。   Further, as shown in FIG. 12, the captured image processing unit 45 may display the imaging position of the captured image on the map using an icon 606 or the like. For example, the captured image processing unit 45 extracts the imaging position 301 included in the displayed map 601 from the captured image data 300. The extracted imaging position 301 is displayed on the map 601 by an icon 606 or the like. Furthermore, designation of the icon 606 may be received from the user via the input device 5. For example, when the icon 606 is pressed, the captured image processing unit 45 acquires the captured image 302 at the imaging position 301 corresponding to the pressed icon 606 from the captured image data 300 and displays it.

<その他の変形例>
撮像画像データ300に登録されている撮像画像を全て表示の対象とするのではなく、表示する撮像画像を絞り込んでもよい。例えば、より有益な撮像画像のみを表示するために、撮像画像処理部45は、下記の撮像画像のみを表示の対象とする。
(1)赤色系の画像
赤色系が所定範囲以上占める画像。看板などは赤色系で表示される場合が多いからである。
(2)青色系の画像
青色系が所定範囲以上占める画像。道路標識などは青色系で表示される場合が多いからである。
(3)緑色系の画像
緑色系が所定範囲以上占める画像。高速道路標識などは緑色系で表示される場合が多いからである。なお、撮像画像処理部45は、走行速度から高速道路を走行しているか否か判定し、高速道路を走行していると判定した場合、かかる所定の色の画像のみを表示の対象とするようにしてもよい。
(4)上記(1)〜(3)に該当しない画像
建物の画像と考えられるからである。
<Other variations>
Instead of setting all captured images registered in the captured image data 300 to be displayed, the captured images to be displayed may be narrowed down. For example, in order to display only a more useful captured image, the captured image processing unit 45 sets only the following captured image as a display target.
(1) Red system image An image in which the red system occupies a predetermined range or more. This is because billboards are often displayed in red.
(2) Blue image An image in which a blue image occupies a predetermined range or more. This is because road signs are often displayed in blue.
(3) Green image An image in which the green image occupies a predetermined range or more. This is because highway signs are often displayed in green. The captured image processing unit 45 determines whether or not the vehicle is traveling on a highway based on the traveling speed. When it is determined that the vehicle is traveling on a highway, only the image of the predetermined color is displayed. It may be.
(4) An image not corresponding to the above (1) to (3) is considered to be an image of a building.

撮像画像処理部45は、これらのいずれの条件により画像を絞り込むかを、ユーザから入力装置を介して指定させることができる。   The captured image processing unit 45 can specify from the user via the input device which of these conditions is used to narrow down the image.

また、撮像画像は、静止画であってもよいし、所定時間範囲の動画であってもよい。   The captured image may be a still image or a moving image within a predetermined time range.

また、撮像画像に、車両が映りこんでいる場合、その車両を消去して、登録するようにしてもよい。例えば、撮像画像処理部45は、カメラ9から取得した撮像画像の中から、一般車両のテンプレートを用いたパターンマッチングなどの公知の技術で、車両部分を特定する。そして、車両部分を消去する。   Further, when a vehicle is reflected in the captured image, the vehicle may be deleted and registered. For example, the captured image processing unit 45 identifies a vehicle portion from captured images acquired from the camera 9 by a known technique such as pattern matching using a template of a general vehicle. Then, the vehicle part is deleted.

撮像画像処理部45は、撮像画像を登録する際に、撮像画像データ300に、同じ撮像位置の撮像画像が既に登録されている場合、新しく取得した撮像画像で更新するようにしてもよい。また、同じ撮像位置の撮像画像を時刻により区別して登録してもよい。例えば、昼時間と夜時間で区別して登録してもよい。かかる場合、撮像画像を表示する際、そのときの時刻に対応する時刻に取得された撮像画像を表示するようにする。こうすれば、昼時間では、昼時間に撮像された画像が表示され、夜時間では、夜時間で撮像された画像が表示されるようになる。   When the captured image is registered, if a captured image at the same imaging position is already registered in the captured image data 300 when registering the captured image, the captured image processing unit 45 may update the captured image with the newly acquired captured image. In addition, captured images at the same imaging position may be registered in accordance with time. For example, registration may be performed by distinguishing between daytime and nighttime. In such a case, when the captured image is displayed, the captured image acquired at the time corresponding to the time at that time is displayed. If it carries out like this, the image imaged at daytime will be displayed at daytime, and the image imaged at night time will be displayed at nighttime.

図1は、車載用ナビゲーション装置の概略構成図である。FIG. 1 is a schematic configuration diagram of an in-vehicle navigation device. 図2は、演算処理部1のハードウェア構成を示す図である。FIG. 2 is a diagram illustrating a hardware configuration of the arithmetic processing unit 1. 図3は、演算処理部1の機能構成を示す図である。FIG. 3 is a diagram illustrating a functional configuration of the arithmetic processing unit 1. 図4は、車載用ナビゲーション装置の処理のフロー図である。FIG. 4 is a flowchart of processing of the in-vehicle navigation device. 図5は、撮像画像の登録処理(図4のS120)のフロー図である。FIG. 5 is a flowchart of the captured image registration process (S120 in FIG. 4). 図6は、撮像画像データ300の構成を示す図である。FIG. 6 is a diagram illustrating the configuration of the captured image data 300. 図7は、表示画面例を示す図である。FIG. 7 is a diagram illustrating a display screen example. 図8は、撮像画像の利用処理のフロー図である。FIG. 8 is a flowchart of captured image utilization processing. 図9は、表示画面例を示す図である。FIG. 9 is a diagram illustrating an example of a display screen. 図10は、変形例にかかる撮像画像の登録処理(図4のS120)のフロー図である。FIG. 10 is a flowchart of the captured image registration process (S120 in FIG. 4) according to the modification. 図11は、表示画面例を示す図である。FIG. 11 is a diagram illustrating an example of a display screen. 図12は、表示画面例を示す図である。FIG. 12 is a diagram illustrating a display screen example.

符号の説明Explanation of symbols

100・・・車載用ナビゲーション装置、
1・・・演算処理部、2・・・ディスプレイ、3・・・記憶装置、4・・・音声出入力装置、5・・・入力装置、6・・・車輪速センサ、7・・・ジャイロ、8・・・GPS受信機、9・・・カメラ、10・・・方向指示器センサ
21・・・CPU、22・・・RAM、23・・・ROM、24・・・DMA、25・・・描画コントローラ、26・・・VRAM、27・・・カラーパレット、28・・・A/D変換器、29・・・SCI、30・・・PIO、31・・・カウンタ、32・・・カメラ制御装置、33・・・バス
100: In-vehicle navigation device,
DESCRIPTION OF SYMBOLS 1 ... Operation processing part, 2 ... Display, 3 ... Memory | storage device, 4 ... Audio | voice output / input device, 5 ... Input device, 6 ... Wheel speed sensor, 7 ... Gyro , 8 ... GPS receiver, 9 ... camera, 10 ... direction indicator sensor 21 ... CPU, 22 ... RAM, 23 ... ROM, 24 ... DMA, 25 ... Drawing controller, 26 ... VRAM, 27 ... color palette, 28 ... A / D converter, 29 ... SCI, 30 ... PIO, 31 ... counter, 32 ... camera Control device 33 ... Bus

Claims (9)

ナビゲーション装置であって、
地図上の道路に関するデータである道路データを記憶する手段と、
現在位置を取得する現在位置取得手段と、
前記ナビゲーション装置が搭載された車両の周囲の撮像画像を取得する撮像画像取得手段と、
前記車両の方向指示器への操作を検出する操作検出手段と、
前記現在位置算出手段により地図データに含まれている道路上以外に現在位置が求められている場合で、かつ前記操作検出手段により前記方向指示器への操作が検出された場合に、前記撮像画像取得手段で取得した撮像画像を撮像位置とともに登録する撮像画像登録手段と、
前記現在位置算出手段により取得された現在位置が、前記撮像画像の撮像位置に相当する場合に、前記撮像画像登録手段により登録された当該撮像画像を表示する撮像画像表示手段とを備える
ことを特徴とするナビゲーション装置。
A navigation device,
Means for storing road data, which is data relating to roads on the map;
Current position acquisition means for acquiring the current position;
Captured image acquisition means for acquiring a captured image around a vehicle on which the navigation device is mounted;
Operation detecting means for detecting an operation to the direction indicator of the vehicle;
When the current position is calculated on the road other than the road included in the map data by the current position calculation means, and when an operation to the direction indicator is detected by the operation detection means, the captured image Captured image registration means for registering the captured image acquired by the acquisition means together with the imaging position;
A captured image display unit configured to display the captured image registered by the captured image registration unit when the current position acquired by the current position calculation unit corresponds to an imaging position of the captured image. A navigation device.
ナビゲーション装置であって、
地図上の道路に関するデータである道路データを記憶する手段と、
現在位置を取得する現在位置取得手段と、
前記ナビゲーション装置が搭載された車両の周囲の撮像画像を取得する撮像画像取得手段と、
前記車両の方向指示器への操作を検出する操作検出手段と、
前記現在位置算出手段により地図データに含まれている道路上以外に現在位置が求められている間、
(1)前記操作検出手段により前記方向指示器への操作が検出された場合、
(2)前記車両の旋回を検出した場合、
(3)前記車両が所定の距離走行するごとに、
(4)所定時間経過するごとに、
前記撮像画像取得手段で取得した撮像画像を撮像位置とともに登録する撮像画像登録手段と、
前記現在位置算出手段により取得された現在位置が、前記撮像画像の撮像位置に相当する場合に、前記撮像画像登録手段により登録された当該撮像画像を表示する撮像画像表示手段とを備える
ことを特徴とするナビゲーション装置。
A navigation device,
Means for storing road data, which is data relating to roads on the map;
Current position acquisition means for acquiring the current position;
Captured image acquisition means for acquiring a captured image around a vehicle on which the navigation device is mounted;
Operation detecting means for detecting an operation to the direction indicator of the vehicle;
While the current position is calculated other than on the road included in the map data by the current position calculation means,
(1) When an operation to the direction indicator is detected by the operation detection unit,
(2) When the turning of the vehicle is detected,
(3) Every time the vehicle travels a predetermined distance,
(4) Every time a predetermined time elapses,
Captured image registration means for registering the captured image acquired by the captured image acquisition means together with the imaging position;
When the current position acquired by the current position calculation unit corresponds to the imaging position of the captured image, the imaging unit includes a captured image display unit that displays the captured image registered by the captured image registration unit. A navigation device.
請求項1に記載のナビゲーション装置であって、
前記撮像画像登録手段は、
前記撮像画像を登録する際、撮像日時とともに登録し、
前記撮像画像表示手段は、
前記撮像画像を表示する際、撮像日時を表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 1,
The captured image registration means includes:
When registering the captured image, register with the imaging date and time,
The captured image display means includes:
A navigation apparatus that displays an imaging date and time when displaying the captured image.
請求項1に記載のナビゲーション装置であって、
前記撮像画像登録手段は、
前記撮像画像を登録する際、撮像した根拠とともに登録し、
前記撮像画像表示手段は、
前記撮像画像を表示する際、撮像した根拠を表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 1,
The captured image registration means includes:
When registering the captured image, register with the grounds for imaging,
The captured image display means includes:
A navigation apparatus characterized by displaying a basis for capturing an image when displaying the captured image.
請求項1に記載のナビゲーション装置であって、
前記撮像画像登録手段は、
前記撮像画像を登録する際、当該撮像画像に付加する情報を受け付け、当該撮像画像を受け付けた情報とともに登録し、
前記撮像画像表示手段は、
前記撮像画像を表示する際、当該撮像画像に付加された情報を表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 1,
The captured image registration means includes:
When registering the captured image, accept information to be added to the captured image, register the captured image together with the received information,
The captured image display means includes:
A navigation device, wherein when the captured image is displayed, information added to the captured image is displayed.
請求項1に記載のナビゲーション装置であって、
前記撮像画像表示手段は、
地図上に、前記撮像画像登録手段により登録した撮像画像の撮像位置を示すアイコンを表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 1,
The captured image display means includes:
A navigation apparatus, wherein an icon indicating an imaging position of a captured image registered by the captured image registration unit is displayed on a map.
請求項6に記載のナビゲーション装置であって、
前記撮像画像表示手段は、
前記アイコンが選択された場合、撮像位置に対応する撮像画像を表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 6,
The captured image display means includes:
A navigation device that displays a captured image corresponding to an imaging position when the icon is selected.
請求項1に記載のナビゲーション装置であって、
前記撮像画像表示手段は、
前記撮像画像登録手段により登録された撮像画像の中から、所定の色の条件を満たす撮像画像を抽出し、表示する
ことを特徴とするナビゲーション装置。
The navigation device according to claim 1,
The captured image display means includes:
A navigation apparatus, wherein a captured image satisfying a predetermined color condition is extracted from the captured images registered by the captured image registration means and displayed.
ナビゲーション装置の表示方法であって、
前記ナビゲーション装置は、
地図上の道路に関するデータである道路データを記憶する手段と、
現在位置を取得する現在位置取得手段と、
前記ナビゲーション装置が搭載された車両の周囲の撮像画像を取得する撮像画像取得手段と
前記車両の方向指示器への操作を検出する操作検出手段とを備え、
前記現在位置算出手段により地図データに含まれている道路上以外に現在位置が求められている場合で、かつ前記操作検出手段により前記方向指示器への操作が検出された場合に、前記撮像画像を撮像位置とともに登録する撮像画像登録ステップと、
前記現在位置算出手段により取得された現在位置が、前記撮像画像の撮像位置に相当する場合に、前記撮像画像登録ステップにより登録された当該撮像画像を表示する撮像画像表示ステップとを行う
ことを特徴とするナビゲーション装置の表示方法。
A display method of a navigation device,
The navigation device
Means for storing road data, which is data relating to roads on the map;
Current position acquisition means for acquiring the current position;
A captured image acquisition means for acquiring a captured image around a vehicle on which the navigation device is mounted; and an operation detection means for detecting an operation on the direction indicator of the vehicle,
When the current position is calculated on the road other than on the road included in the map data by the current position calculation means, and when an operation to the direction indicator is detected by the operation detection means, the captured image A captured image registration step for registering together with the imaging position;
A captured image display step of displaying the captured image registered in the captured image registration step when the current position acquired by the current position calculation means corresponds to the captured position of the captured image; A display method for a navigation device.
JP2006195387A 2006-07-18 2006-07-18 Navigation device Expired - Fee Related JP4942411B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006195387A JP4942411B2 (en) 2006-07-18 2006-07-18 Navigation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006195387A JP4942411B2 (en) 2006-07-18 2006-07-18 Navigation device

Publications (2)

Publication Number Publication Date
JP2008026007A true JP2008026007A (en) 2008-02-07
JP4942411B2 JP4942411B2 (en) 2012-05-30

Family

ID=39116800

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006195387A Expired - Fee Related JP4942411B2 (en) 2006-07-18 2006-07-18 Navigation device

Country Status (1)

Country Link
JP (1) JP4942411B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009210269A (en) * 2008-02-29 2009-09-17 Sanyo Electric Co Ltd Navigation device and spot registration method in device
US7868821B2 (en) 2009-01-15 2011-01-11 Alpine Electronics, Inc Method and apparatus to estimate vehicle position and recognized landmark positions using GPS and camera
CN102132334A (en) * 2008-09-16 2011-07-20 日本先锋公司 Server device, mobile terminal, intersection guide system, and intersection guide method
JP2021009642A (en) * 2019-07-03 2021-01-28 日立オートモティブシステムズ株式会社 Driving information control device and driving information control system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0636183A (en) * 1992-07-13 1994-02-10 Toshiba Corp Image recorder
JPH09189559A (en) * 1996-01-08 1997-07-22 Sony Corp Navigation apparatus
JPH10150625A (en) * 1996-11-15 1998-06-02 Canon Inc Radio portable terminal equipment and mobile terminal equipment
WO2005119630A1 (en) * 2004-06-03 2005-12-15 Sharp Kabushiki Kaisha Map data generating device, vehicle equipped with same, and map data generating method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0636183A (en) * 1992-07-13 1994-02-10 Toshiba Corp Image recorder
JPH09189559A (en) * 1996-01-08 1997-07-22 Sony Corp Navigation apparatus
JPH10150625A (en) * 1996-11-15 1998-06-02 Canon Inc Radio portable terminal equipment and mobile terminal equipment
WO2005119630A1 (en) * 2004-06-03 2005-12-15 Sharp Kabushiki Kaisha Map data generating device, vehicle equipped with same, and map data generating method
JP2008500561A (en) * 2004-06-03 2008-01-10 シャープ株式会社 MAP DATA CREATION DEVICE, MOBILE BODY HAVING THE SAME, AND MAP DATA CREATION METHOD

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009210269A (en) * 2008-02-29 2009-09-17 Sanyo Electric Co Ltd Navigation device and spot registration method in device
CN102132334A (en) * 2008-09-16 2011-07-20 日本先锋公司 Server device, mobile terminal, intersection guide system, and intersection guide method
JPWO2010032282A1 (en) * 2008-09-16 2012-02-02 パイオニア株式会社 Server device, mobile terminal device, intersection guidance system, and intersection guidance method
US7868821B2 (en) 2009-01-15 2011-01-11 Alpine Electronics, Inc Method and apparatus to estimate vehicle position and recognized landmark positions using GPS and camera
JP2021009642A (en) * 2019-07-03 2021-01-28 日立オートモティブシステムズ株式会社 Driving information control device and driving information control system
JP7296265B2 (en) 2019-07-03 2023-06-22 日立Astemo株式会社 Driving information control device and driving information control system

Also Published As

Publication number Publication date
JP4942411B2 (en) 2012-05-30

Similar Documents

Publication Publication Date Title
JP2007278765A (en) Navigation device and map data updating method
JP2007071581A (en) Navigation device
JP2013092458A (en) Navigation device
JP4942411B2 (en) Navigation device
JP4776276B2 (en) Navigation device
JP2003329464A (en) Device and method for reproducing travel information record
JP2006275958A (en) Navigation device
JP5068114B2 (en) In-vehicle navigation device and icon display method in in-vehicle navigation device
JP4695933B2 (en) Navigation device
JP4520870B2 (en) Navigation device and current position display method
JP4409968B2 (en) Route guidance method for navigation device and navigation device
JP2005114552A (en) Method for searching route in navigation apparatus
JP2007085898A (en) Navigation device
JP2007010515A (en) Navigation system
JP4074598B2 (en) Navigation device and current position calculation method
JP2007263683A (en) On-vehicle navigation system
JP2006275766A (en) Navigation system
JP4914606B2 (en) Navigation device
JP4732763B2 (en) Route search method for navigation device
JP2006064414A (en) Display method for navigation system
JP2005121424A (en) Route searching method for navigation system
JP2006329865A (en) Navigation apparatus
JP2006292403A (en) Navigation device
JP2006267008A (en) Navigation system
JP4741291B2 (en) Navigation device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090625

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20100212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110705

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110706

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110829

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120221

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120228

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150309

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees