JP4123096B2 - 3D digital map creation device and 3D digital map display system - Google Patents

3D digital map creation device and 3D digital map display system Download PDF

Info

Publication number
JP4123096B2
JP4123096B2 JP2003279208A JP2003279208A JP4123096B2 JP 4123096 B2 JP4123096 B2 JP 4123096B2 JP 2003279208 A JP2003279208 A JP 2003279208A JP 2003279208 A JP2003279208 A JP 2003279208A JP 4123096 B2 JP4123096 B2 JP 4123096B2
Authority
JP
Japan
Prior art keywords
digital map
dimensional digital
dimensional
space image
arrangement data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003279208A
Other languages
Japanese (ja)
Other versions
JP2005044224A (en
Inventor
一郎 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2003279208A priority Critical patent/JP4123096B2/en
Publication of JP2005044224A publication Critical patent/JP2005044224A/en
Application granted granted Critical
Publication of JP4123096B2 publication Critical patent/JP4123096B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、物体を三次元形状にモデリングして三次元デジタル地図を作成する三次元デジタル地図作成装置および三次元デジタル地図を表示する三次元デジタル地図表示システムに関する。 The present invention relates to a three-dimensional digital map display system for displaying a three-dimensional digital map creation device and the three-dimensional digital map to create a three-dimensional digital map models the object into a three-dimensional shape.

自車両に搭載されているカメラやレーダなどにより自車両の周辺に存在する物体を検出し、検出された物体を三次元形状にモデリングして三次元デジタル地図を作成するものがある(例えば特許文献1参照)。
特開2002−104117号公報
There is an apparatus that detects an object existing in the vicinity of the own vehicle by a camera or radar mounted on the own vehicle, and creates a three-dimensional digital map by modeling the detected object into a three-dimensional shape (for example, Patent Documents) 1).
JP 2002-104117 A

しかしながら、自車両の周辺に存在する物体をカメラやレーダなどを用いて検出する構成では、処理が複雑化するという問題があり、また、カメラやレーダなどの性能により検出精度が左右されるという事情から、物体の位置の精度が劣るという問題もある。この場合、自車両のカメラやレーダの位置測定の精度が劣ると、障害物を検出して障害物を避けるための安全運転支援システムが搭載されていたとしても、10cm程度の誤差があると、ガードレールや標識のような固定物体に接触したり、走行中の車両や駐車中の車両や歩行者などの移動物体に接触したりする虞がある。そのため、固定物体や移動物体の位置を正確に運転者に知らせると共に、安全運転に支障を来たす位置に障害物がある場合に、その障害物の位置情報を迅速に運転者に提供することが望まれる。   However, in the configuration in which an object existing around the host vehicle is detected using a camera, a radar, or the like, there is a problem that the processing is complicated, and the detection accuracy is affected by the performance of the camera, the radar, or the like. Therefore, there is a problem that the accuracy of the position of the object is inferior. In this case, if the accuracy of the position measurement of the camera or radar of the host vehicle is inferior, even if a safe driving support system for detecting the obstacle and avoiding the obstacle is mounted, there is an error of about 10 cm. There is a risk of contact with a fixed object such as a guardrail or a sign, or contact with a moving object such as a traveling vehicle, a parked vehicle, or a pedestrian. Therefore, it is desirable to notify the driver of the position of a fixed object or moving object accurately and to provide the driver with positional information of the obstacle quickly when there is an obstacle at a position that interferes with safe driving. It is.

本発明は、上記した事情に鑑みてなされたものであり、その目的は、自車両の周辺に存在する物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、処理が複雑化することなく、しかも、物体の位置の精度を高めることができる三次元デジタル地図作成装置および三次元デジタル地図表示システムを提供することにある。 The present invention has been made in view of the above circumstances, and its purpose is to complicate processing when modeling a three-dimensional object by modeling an object existing around the host vehicle into a three-dimensional shape. without, moreover, it is to provide a three-dimensional digital map creation device and the three-dimensional digital map display system that can increase the accuracy of the position of the object.

請求項1に記載した発明によれば、物体配置データ保持手段は、物体の絶対的な配置形態を表す物体配置データを保持しており、三次元デジタル地図作成手段は、仮想的な視野を設定すると、設定された仮想的な視野に対応する物体配置データを物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成する。これにより、従来のものとは異なって、物体の絶対的な配置形態を表す物体配置データを保持していることにより、自車両の周辺に存在する物体をカメラやレーダなどを用いて検出して三次元デジタル地図を作成するのではなく、物体配置データを検索して物体を三次元形状にモデリングして三次元デジタル地図を作成するので、物体の絶対的な配置形態を表す物体配置データを描画することで三次元デジタル地図を作成することができ、処理が複雑化することなく、しかも、物体の位置の精度を高めることができる。また、三次元デジタル地図作成手段は、車両用道路と歩行者用道路とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら車両用道路と歩行者用道路との境界を地面から略鉛直方向に向けられた平面で表現する。これにより、三次元デジタル地図を表示する場合に、車両用道路と歩行者用道路との境界を立体的な平面で強調することができ、車両用道路と歩行者用道路との境界をユーザに適切に認識させることができる。
請求項2に記載した発明によれば、三次元デジタル地図作成手段は、道路と建造物とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら道路と建造物との境界を地面から略鉛直方向に向けられた平面で表現する。これにより、三次元デジタル地図を表示する場合に、道路と建造物との境界を立体的な平面で強調することができ、道路と建造物との境界をユーザに適切に認識させることができる。
請求項3に記載した発明によれば、三次元デジタル地図作成手段は、横断歩道や安全地帯などの特定の領域を三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら特定の領域を地面から略鉛直方向に向けられた平面で囲まれた領域で表現する。これにより、三次元デジタル地図を表示する場合に、横断歩道や安全地帯などの特定の領域を立体的な平面で囲まれた領域で強調することができ、横断歩道や安全地帯などの特定の領域をユーザに適切に認識させることができる。
According to the first aspect of the present invention, the object arrangement data holding unit holds the object arrangement data representing the absolute arrangement form of the object, and the three-dimensional digital map creation unit sets the virtual field of view. Then, the object arrangement data corresponding to the set virtual field of view is searched from the object arrangement data holding means, and the object represented by the searched object arrangement data is modeled into a three-dimensional shape to create a three-dimensional digital map. To do. This makes it possible to detect objects existing around the host vehicle using a camera, radar, etc., by retaining object arrangement data representing the absolute arrangement form of the object, unlike conventional ones. Rather than creating a 3D digital map, the object placement data is searched and the object is modeled into a 3D shape to create a 3D digital map. By doing so, a three-dimensional digital map can be created, and the accuracy of the position of the object can be improved without complicating the processing. Also, the 3D digital map creating means creates a 3D digital map by modeling the vehicle road and the pedestrian road into a 3D shape, and defines the boundary between the vehicle road and the pedestrian road. It is expressed as a plane that is oriented substantially vertically from the ground. Thereby, when displaying a three-dimensional digital map, the boundary between the road for vehicles and the road for pedestrians can be emphasized with a three-dimensional plane, and the boundary between the road for vehicles and the road for pedestrians can be shown to the user. It can be recognized properly.
According to the invention described in claim 2, when the 3D digital map creating means creates a 3D digital map by modeling the road and the building in a 3D shape, the boundary between the road and the building is created. Is expressed by a plane oriented substantially vertically from the ground. Thereby, when displaying a three-dimensional digital map, the boundary of a road and a building can be emphasized with a three-dimensional plane, and the boundary of a road and a building can be recognized appropriately by the user.
According to the invention described in claim 3, when the three-dimensional digital map creating means creates a three-dimensional digital map by modeling a specific area such as a pedestrian crossing or a safety zone into a three-dimensional shape, these specific maps are created. The area is expressed by an area surrounded by a plane directed substantially vertically from the ground. As a result, when displaying a 3D digital map, specific areas such as pedestrian crossings and safety zones can be emphasized by areas surrounded by a three-dimensional plane, and specific areas such as pedestrian crossings and safety zones can be highlighted. Can be appropriately recognized by the user.

請求項に記載した発明によれば、三次元デジタル地図作成手段は、現在位置検出手段により自車両の現在位置が検出されると、検出された現在位置からの視野を仮想的な視野として設定する。これにより、現在位置での例えば運転席から見た三次元デジタル地図や自車両上空から見た三次元デジタル地図(鳥瞰図)を作成することができる。
請求項に記載した発明によれば、三次元デジタル地図作成手段は、位置指定手段により位置が指定されると、指定された位置からの視野を仮想的な視野として設定する。これにより、ユーザが例えば目的地を指定すると、目的地での例えば運転席から見た三次元デジタル地図や自車両上空から見た三次元デジタル地図(鳥瞰図)を作成することができる。
According to the invention described in claim 4 , when the current position of the host vehicle is detected by the current position detection means, the three-dimensional digital map creation means sets the field of view from the detected current position as a virtual field of view. To do. Thereby, for example, a three-dimensional digital map viewed from the driver's seat at the current position or a three-dimensional digital map (bird's-eye view) viewed from above the host vehicle can be created.
According to the invention described in claim 5, when the position is designated by the position designation means, the three-dimensional digital map creating means sets the visual field from the designated position as a virtual visual field. Thus, when the user designates a destination, for example, a three-dimensional digital map viewed from the driver's seat at the destination or a three-dimensional digital map (bird's eye view) viewed from above the host vehicle can be created.

請求項に記載した発明によれば、三次元デジタル地図作成手段は、表示範囲指定手段により表示範囲が指定されると、指定された表示範囲に対応する物体配置データを物体配置データ保持手段から検索する。これにより、ユーザが所望の表示範囲を指定すると、ユーザの所望とする表示範囲の三次元デジタル地図を作成することができる。 According to the invention described in claim 6, when the display range is designated by the display range designation unit, the three-dimensional digital map creation unit obtains the object arrangement data corresponding to the designated display range from the object arrangement data holding unit. Search for. Thus, when the user designates a desired display range, a three-dimensional digital map of the display range desired by the user can be created.

請求項に記載した発明によれば、走行経路予測手段は、自車両の走行経路を予測し、三次元デジタル地図作成手段は、走行経路予測手段により複数の走行経路が予測されると、予測された複数の走行経路毎の物体配置データを物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成し、三次元デジタル地図記憶手段は、三次元デジタル地図作成手段により当該予測された複数の走行経路毎に作成された三次元デジタル地図を記憶する。これにより、三次元デジタル地図を表示する場合に、車両がいずれの走行経路を選択して走行したとしても、選択された走行経路の三次元デジタル地図を速やかに遅延無くユーザに提供することができる。 According to the invention described in claim 7 , the travel route prediction means predicts the travel route of the host vehicle, and the 3D digital map creation means predicts when a plurality of travel routes are predicted by the travel route prediction means. The object arrangement data for each of the plurality of travel routes is retrieved from the object arrangement data holding means, the object represented by the retrieved object arrangement data is modeled into a three-dimensional shape, and a three-dimensional digital map is created. The digital map storage means stores a three-dimensional digital map created for each of the plurality of travel routes predicted by the three-dimensional digital map creation means. Thereby, when displaying a 3D digital map, even if a vehicle travels by selecting any travel route, a 3D digital map of the selected travel route can be promptly provided to the user without delay. .

請求項に記載した発明によれば、仮想空間画像作成手段は、物体配置データ保持手段に保持されている物体配置データに基づいて仮想空間画像を作成し、実空間画像作成手段は、自車両にて撮影された画像が自車両撮影画像取得手段により自車両撮影画像として取得されると、取得された自車両撮影画像に基づいて実空間画像を作成し、障害物検出手段は、それら仮想空間画像と実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する。そして、三次元デジタル地図作成手段は、障害物検出手段により障害物が検出されると、物体配置データ保持手段に保持されている物体配置データにより表される物体と障害物検出手段により障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成する。 According to the invention described in claim 8 , the virtual space image creation means creates a virtual space image based on the object placement data held in the object placement data holding means, and the real space image creation means When the image captured at the vehicle is acquired as the vehicle captured image by the vehicle captured image acquisition means, a real space image is created based on the acquired vehicle captured image, and the obstacle detection means The image and the real space image are compared, and an object that exists in the real space image and does not exist in the virtual space image is detected as an obstacle. When the obstacle detection unit detects the obstacle, the three-dimensional digital map creation unit detects the obstacle represented by the object and the obstacle detection unit represented by the object arrangement data held in the object arrangement data holding unit. A three-dimensional digital map is created by modeling the detected object together with a three-dimensional shape.

これにより、物体配置データ保持手段に保持されている物体配置データにより表される物体以外の物体、つまり、人や動物や走行車両などの絶対的な配置形態を定義不可能な物体が自車両にて撮影されることにより、移動不可能な固定物体のみが表現された三次元デジタル地図ではなく、人や動物や走行車両などの移動可能な移動物体もが表現された三次元デジタル地図を作成することができる。   As a result, an object other than the object represented by the object arrangement data held in the object arrangement data holding means, i.e., an object whose absolute arrangement form such as a person, an animal, or a traveling vehicle cannot be defined in the own vehicle. By creating a 3D digital map that expresses movable objects such as people, animals, and traveling vehicles, instead of 3D digital maps that express only immovable fixed objects. be able to.

請求項に記載した発明によれば、仮想空間画像作成手段は、物体配置データ保持手段に保持されている物体配置データに基づいて仮想空間画像を作成し、実空間画像作成手段は、路上機にて撮影された画像が路上機撮影画像取得手段により路上機撮影画像として取得されると、取得された路上機撮影画像に基づいて実空間画像を作成し、障害物検出手段は、それら仮想空間画像と実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する。そして、三次元デジタル地図作成手段は、障害物検出手段により障害物が検出されると、物体配置データ保持手段に保持されている物体配置データにより表される物体と障害物検出手段により障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成する。 According to the ninth aspect of the present invention, the virtual space image creating means creates a virtual space image based on the object placement data held in the object placement data holding means, and the real space image creating means is a road device. When the road photographed image acquisition means acquires the road image photographed image, the real space image is created based on the acquired road machine photographed image, and the obstacle detection means The image and the real space image are compared, and an object that exists in the real space image and does not exist in the virtual space image is detected as an obstacle. When the obstacle detection unit detects the obstacle, the three-dimensional digital map creation unit detects the obstacle represented by the object and the obstacle detection unit represented by the object arrangement data held in the object arrangement data holding unit. A three-dimensional digital map is created by modeling the detected object together with a three-dimensional shape.

これにより、物体配置データ保持手段に保持されている物体配置データにより表される物体以外の物体、つまり、人や動物や走行車両などの絶対的な配置形態を定義不可能な物体が路上機にて撮影され、撮影された画像が路上機から路上機撮影画像として受信されることにより、この場合も、上記した請求項6に記載したものと同様にして、移動不可能な固定物体のみが表現された三次元デジタル地図ではなく、人や動物や走行車両などの移動可能な移動物体もが表現された三次元デジタル地図を作成することができる。   As a result, an object other than the object represented by the object arrangement data held in the object arrangement data holding means, that is, an object whose absolute arrangement form such as a person, an animal, or a traveling vehicle cannot be defined in the road device. In this case, only the fixed object that cannot be moved is expressed in the same manner as described in the sixth aspect of the present invention. It is possible to create a three-dimensional digital map in which a movable object such as a person, an animal, or a traveling vehicle is represented instead of the three-dimensional digital map.

請求項10に記載した発明によれば、仮想空間画像作成手段は、物体配置データ保持手段に保持されている物体配置データに基づいて仮想空間画像を作成し、実空間画像作成手段は、他車両にて撮影された画像が他車両撮影画像取得手段により他車両撮影画像として取得されると、取得された他車両撮影画像に基づいて実空間画像を作成し、障害物検出手段は、それら仮想空間画像と実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する。そして、三次元デジタル地図作成手段は、障害物検出手段により障害物が検出されると、物体配置データ保持手段に保持されている物体配置データにより表される物体と障害物検出手段により障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成する。 According to the invention described in claim 10 , the virtual space image creating means creates a virtual space image based on the object placement data held in the object placement data holding means, and the real space image creating means is the other vehicle. When the image captured at the other vehicle captured image acquisition means is acquired as the other vehicle captured image, a real space image is created based on the acquired other vehicle captured image, and the obstacle detection means The image and the real space image are compared, and an object that exists in the real space image and does not exist in the virtual space image is detected as an obstacle. When the obstacle detection unit detects the obstacle, the three-dimensional digital map creation unit detects the obstacle represented by the object and the obstacle detection unit represented by the object arrangement data held in the object arrangement data holding unit. A three-dimensional digital map is created by modeling the detected object together with a three-dimensional shape.

これにより、物体配置データ保持手段に保持されている物体配置データにより表される物体以外の物体、つまり、人や動物や走行車両などの絶対的な配置形態を定義不可能な物体が他車両にて撮影され、撮影された画像が他車両から他車両撮影画像として受信されることにより、この場合も、上記した請求項6に記載したものと同様にして、移動不可能な固定物体のみが表現された三次元デジタル地図ではなく、人や動物や走行車両などの移動可能な移動物体もが表現された三次元デジタル地図を作成することができる。   As a result, an object other than the object represented by the object arrangement data held in the object arrangement data holding means, that is, an object whose absolute arrangement form such as a person, an animal, or a traveling vehicle cannot be defined is given to the other vehicle. In this case, only the fixed object that cannot be moved is expressed in the same manner as described in the sixth aspect of the present invention. It is possible to create a three-dimensional digital map in which a movable object such as a person, an animal, or a traveling vehicle is represented instead of the three-dimensional digital map.

請求項11に記載した発明によれば、三次元デジタル地図作成手段は、建造物を三次元形状にモデリングして三次元デジタル地図を作成する場合に、建造物に模様を付加して表現する。これにより、三次元デジタル地図を表示する場合に、建造物を模様で強調することができ、建造物をユーザに適切に認識させることができる。   According to the eleventh aspect of the present invention, the three-dimensional digital map creating means adds a pattern to the building and expresses it when modeling the building into a three-dimensional shape to create a three-dimensional digital map. Thereby, when displaying a three-dimensional digital map, a building can be emphasized with a pattern and a user can be recognized appropriately.

請求項12に記載した発明によれば、三次元デジタル地図作成手段は、移動不可能な固定物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該固定物体の特定部分が道路に対して向いている方向を示す方向属性を持たせて三次元デジタル地図を作成する。これにより、三次元デジタル地図を表示する場合に、例えば固定物体がビルや家屋などであれば、出入口や玄関における人が出入りする方向を表す方向属性を持たせることにより、人が飛び出す危険性の有無をユーザに適切に認識させることができる。 According to the invention described in claim 12 , when the three-dimensional digital map creating means creates a three-dimensional digital map by modeling a non-movable fixed object into a three-dimensional shape, the specific part of the fixed object is A three-dimensional digital map is created with a direction attribute indicating the direction facing the road . Thus, when displaying a three-dimensional digital map, for example, if the fixed object is a building or a house, by giving a direction attribute indicating the direction in which the person enters and exits the entrance / exit, there is a risk that the person may jump out. The presence or absence can be appropriately recognized by the user.

請求項13に記載した発明によれば、三次元デジタル地図作成手段は、移動可能な移動物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該移動物体が移動すると予測される移動方向を示す移動方向属性を持たせて三次元デジタル地図を作成する。これにより、三次元デジタル地図を表示する場合に、人や動物や走行車両が移動すると予測される移動方向を表す移動方向属性を持たせることにより、人や動物が飛び出す危険性の有無や走行車両と接触する危険性の有無をユーザに適切に認識させることができる。 According to the invention described in claim 13, when the 3D digital map creating means creates a 3D digital map by modeling a movable moving object into a 3D shape, the moving object is predicted to move. A three-dimensional digital map is created with a movement direction attribute indicating a moving direction. Thus, when displaying a three-dimensional digital map, by giving a movement direction attribute indicating a movement direction in which a person, an animal, or a traveling vehicle is predicted to move, there is a risk of the person or animal jumping out or the traveling vehicle. It is possible to make the user appropriately recognize whether there is a risk of contact with the user.

請求項14に記載した発明によれば、三次元デジタル地図作成手段は、移動可能な移動物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該移動物体が移動すると予測される移動範囲を示す移動範囲属性を持たせて三次元デジタル地図を作成する。これにより、三次元デジタル地図を表示する場合に、人や動物や走行車両が移動すると予測される移動範囲を表す移動範囲属性を持たせることにより、この場合も、人や動物が飛び出す危険性の有無や走行車両と接触する危険性の有無をユーザに適切に認識させることができる。 According to the invention described in claim 14, when the 3D digital map creating means creates a 3D digital map by modeling a movable moving object into a 3D shape, the moving object is predicted to move. A three-dimensional digital map is created with a moving range attribute indicating a moving range. Thus, when a 3D digital map is displayed, a movement range attribute representing a movement range in which a person, an animal, or a traveling vehicle is predicted to move is provided, and in this case, there is a risk that a person or animal may jump out. The presence / absence and the presence / absence of a risk of contact with the traveling vehicle can be appropriately recognized by the user.

請求項15に記載した発明によれば、表示手段は、請求項1ないし15のいずれかに記載した三次元デジタル地図作成装置により作成された三次元デジタル地図を表示する。これにより、上記したような付加価値の高い三次元デジタル地図をユーザに提供することができる。 According to the invention described in claim 15 , the display means displays the three-dimensional digital map created by the three-dimensional digital map creation device according to any one of claims 1-15. As a result, a high-value-added three-dimensional digital map as described above can be provided to the user.

以下、本発明を、ユーザの車両の運転を支援する安全運転支援システムに適用した一実施形態について、図面を参照して説明する。尚、この場合、安全運転支援システムは、本発明でいう三次元デジタル地図表示システムをも含まれて構成されている。図2は、安全運転支援システムの全体構成を機能ブロック図として示している。   Hereinafter, an embodiment in which the present invention is applied to a safe driving support system that supports driving of a user's vehicle will be described with reference to the drawings. In this case, the safe driving support system includes the three-dimensional digital map display system referred to in the present invention. FIG. 2 shows the overall configuration of the safe driving support system as a functional block diagram.

安全運転支援システム1は、三次元デジタル地図作成装置2、現在位置検出装置3(本発明でいう現在位置検出手段)、操作検出装置4(本発明でいう位置指定手段、表示範囲指定手段)、表示装置5(本発明でいう表示手段)、安全運転支援制御装置6(本発明でいう仮想空間画像作成手段、実空間画像作成手段、障害物検出手段)、自車両撮影画像取得装置7(本発明でいう自車両撮影画像取得手段)、通信装置8(本発明でいう路上機撮影画像取得手段、他車両撮影画像取得手段)、ゲートウェイ9、走行制御装置10(本発明でいう走行制御手段)および警告出力装置11(本発明でいう警告出力手段)を備えて構成されている。   The safe driving support system 1 includes a three-dimensional digital map creation device 2, a current position detection device 3 (current position detection means in the present invention), an operation detection device 4 (position designation means and display range designation means in the present invention), Display device 5 (display means in the present invention), safe driving support control device 6 (virtual space image creation means, real space image creation means, obstacle detection means in the present invention), host vehicle captured image acquisition device 7 (present Self-vehicle captured image acquisition means in the invention), communication device 8 (on-road equipment captured image acquisition means in the present invention, other vehicle captured image acquisition means), gateway 9, travel control device 10 (travel control means in the present invention) And a warning output device 11 (warning output means in the present invention).

現在位置検出装置3は、例えばGPS受信機を主体として構成されており、GPS衛星から受信されたGPS電波のパラメータを演算して現在位置を検出し、検出された現在位置を三次元デジタル地図作成装置2や安全運転支援制御装置6に出力する。操作検出装置4は、機械的に配設されたキーや表示装置5に表示されるタッチ式のキーがユーザにより操作された旨を検出し、操作内容を表す操作情報を三次元デジタル地図作成装置2に出力する。三次元デジタル地図作成装置2は、三次元デジタル地図を作成して表示装置5に出力する。尚、三次元デジタル地図作成装置2の具体的な構成および三次元デジタル地図作成装置2が三次元デジタル地図を作成する具体的な処理については後述する。   The current position detection device 3 is composed mainly of, for example, a GPS receiver, calculates a parameter of a GPS radio wave received from a GPS satellite, detects the current position, and creates a three-dimensional digital map of the detected current position Output to the device 2 and the safe driving support control device 6. The operation detection device 4 detects that a user has operated a mechanically arranged key or a touch-type key displayed on the display device 5, and displays operation information indicating the operation content as a three-dimensional digital map creation device. Output to 2. The three-dimensional digital map creation device 2 creates a three-dimensional digital map and outputs it to the display device 5. A specific configuration of the 3D digital map creation device 2 and a specific process in which the 3D digital map creation device 2 creates a 3D digital map will be described later.

表示装置5は、例えば液晶ディスプレイから構成されており、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図を表示する。自車両撮影画像取得装置7は、自車両の周辺を撮影するカメラと、カメラにより撮影された画像を画像処理する画像処理装置とを備えて構成されており、撮影された画像を自車両撮影画像として安全運転支援制御装置6に出力する。   The display device 5 is composed of, for example, a liquid crystal display. When a 3D digital map is input from the 3D digital map creation device 2, the display device 5 displays the input 3D digital map. The own vehicle captured image acquisition device 7 includes a camera that captures the periphery of the own vehicle and an image processing device that performs image processing on the image captured by the camera. To the safe driving support control device 6.

通信装置8は、路上に設置されている路上機12との間で路車間通信を行うことにより、路上機12から当該路上機12にて撮影された画像を路上機撮影画像として受信し、受信された路上機撮影画像をゲートウェイ9を通じて安全運転支援制御装置6に出力すると共に、他車両13との間で車々間通信を行うことにより、他車両13から当該他車両13にて撮影された画像を他車両撮影画像として受信し、受信された他車両撮影画像をゲートウェイ9を通じて安全運転支援制御装置6に出力する。   The communication device 8 receives an image photographed by the road machine 12 from the road machine 12 as a road machine photographed image by performing road-to-vehicle communication with the road machine 12 installed on the road. The road image taken on the road is output to the safe driving support control device 6 through the gateway 9, and the image taken on the other vehicle 13 from the other vehicle 13 by performing inter-vehicle communication with the other vehicle 13. The other vehicle captured image is received, and the received other vehicle captured image is output to the safe driving support control device 6 through the gateway 9.

安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると、入力された物体配置データに基づいて仮想空間画像を作成すると共に、自車両撮影画像取得装置7から自車両撮影画像が入力されたり、通信装置8からゲートウェイ9を通じて路上機撮影画像や他車両撮影画像が入力されたりすると、入力された自車両撮影画像や路上機撮影画像や他車両撮影画像に基づいて実空間画像を作成し、それら作成された仮想空間画像と実空間画像とを比較する。そして、安全運転支援制御装置6は、実空間画像に存在し且つ仮想実空間画像に存在しない物体を障害物として検出すると、障害物情報を三次元デジタル地図作成装置2に出力する。   When the object placement data is input from the three-dimensional digital map creation device 2, the safe driving support control device 6 creates a virtual space image based on the input object placement data, and from the own vehicle captured image acquisition device 7. When an own vehicle photographed image is input, or when a road device photographed image or another vehicle photographed image is input from the communication device 8 through the gateway 9, it is based on the input own vehicle photographed image, road vehicle photographed image, or other vehicle photographed image Real space images are created, and the created virtual space image and real space image are compared. And the safe driving assistance control apparatus 6 will output obstacle information to the three-dimensional digital map creation apparatus 2, if the object which exists in a real space image and does not exist in a virtual real space image is detected as an obstacle.

図1は、三次元デジタル地図作成装置2の構成を機能ブロック図として示している。三次元デジタル地図作成装置2は、制御部14(本発明でいう三次元デジタル地図作成手段、走行経路予測手段)、現在位置入力インタフェース部15、操作情報入力インタフェース部16、障害物情報入力インタフェース部17、物体配置データ・データベース18(本発明でいう物体配置データ保持手段)、検索エンジン19、三次元デジタル地図記憶部20(本発明でいう三次元デジタル地図記憶手段)、三次元デジタル地図出力インタフェース部21および物体配置データ出力インタフェース部22を備えて構成されている。   FIG. 1 shows a configuration of the three-dimensional digital map creation device 2 as a functional block diagram. The three-dimensional digital map creation apparatus 2 includes a control unit 14 (three-dimensional digital map creation means and travel route prediction means in the present invention), a current position input interface unit 15, an operation information input interface unit 16, an obstacle information input interface unit. 17, object arrangement data database 18 (object arrangement data holding means in the present invention), search engine 19, three-dimensional digital map storage section 20 (three-dimensional digital map storage means in the present invention), three-dimensional digital map output interface A unit 21 and an object arrangement data output interface unit 22 are provided.

制御部14は、CPU、ROM、RAMおよびI/Oバスなどから構成されており、制御プログラムを実行することにより三次元デジタル地図作成装置2の動作全般を制御し、三次元デジタル地図を作成する。現在位置入力インタフェース部15は、現在位置検出装置3から現在位置を入力して制御部14に出力する。操作情報入力インタフェース部16は、操作検出装置4から操作情報を入力して制御部14に出力する。障害物情報入力インタフェース部17は、安全運転支援制御機6から障害物情報を入力して制御部14に出力する。   The control unit 14 includes a CPU, a ROM, a RAM, an I / O bus, and the like, and controls the overall operation of the 3D digital map creation device 2 by executing a control program, thereby creating a 3D digital map. . The current position input interface unit 15 inputs the current position from the current position detection device 3 and outputs it to the control unit 14. The operation information input interface unit 16 inputs operation information from the operation detection device 4 and outputs the operation information to the control unit 14. The obstacle information input interface unit 17 inputs obstacle information from the safe driving support controller 6 and outputs it to the control unit 14.

物体配置データ・データベース18は、物体の絶対的な配置形態を表す物体配置データを保持している。ここで、物体とは、道路、建造物、ガードレール、信号機、樹木および交通標識などであり、車両が走行するのに何らかの影響を及ぼし得るものであり、配置データとは、それら物体が敷設・設置されている位置(緯度、経度および高度)や大きさ(高さ、幅および奥行き)などが数値化されたデータである。尚、物体配置データ・データベース18に保持されている物体配置データは、移動不可能な固定物体に対応するものであり、人や動物や走行車両などの移動可能な移動物体に対応するものではない。検索エンジン19は、制御部14から検索指令が入力されると、入力された検索指令に応じた物体配置データを物体配置データ・データベース18から検索する。   The object arrangement data database 18 holds object arrangement data representing the absolute arrangement form of objects. Here, the objects are roads, buildings, guardrails, traffic lights, trees, traffic signs, etc., which may have some influence on the vehicle traveling, and the arrangement data is the laying / installation of these objects This is data in which the position (latitude, longitude and altitude) and the size (height, width and depth) are numerically expressed. The object arrangement data held in the object arrangement data database 18 corresponds to a fixed object that cannot be moved, and does not correspond to a movable object that can move such as a person, an animal, or a traveling vehicle. . When a search instruction is input from the control unit 14, the search engine 19 searches the object arrangement data database 18 for object arrangement data corresponding to the input search instruction.

三次元デジタル地図記憶部20は、第1の記憶エリア20a〜第3の記憶エリア20cを備えて構成されており、制御部14により作成された三次元デジタル地図を記憶する。三次元デジタル地図出力インタフェース部21は、三次元デジタル地図記憶部20に記憶されている三次元デジタル地図を表示装置5に出力する。物体配置データ出力インタフェース部22は、物体配置データ・データベース18に保持されている物体配置データを安全運転支援制御装置6に出力する。   The three-dimensional digital map storage unit 20 includes a first storage area 20 a to a third storage area 20 c and stores the three-dimensional digital map created by the control unit 14. The three-dimensional digital map output interface unit 21 outputs the three-dimensional digital map stored in the three-dimensional digital map storage unit 20 to the display device 5. The object arrangement data output interface unit 22 outputs the object arrangement data held in the object arrangement data database 18 to the safe driving support control device 6.

尚、以上に示すように構成された安全運転支援システム1は、その一部がカーナビゲーション装置により構成することも可能である。   Note that a part of the safe driving support system 1 configured as described above can also be configured by a car navigation device.

次に、上記した構成の作用について、図3ないし図23を参照して説明する。ここでは、
(1)三次元デジタル地図を作成して表示する処理
(2)仮想空間画像と実空間画像とを比較して安全運転を支援する処理
(3)簡易なナビゲーション動作を行う処理
(4)簡易なカメラ表示動作を行う処理
(5)簡易な危険表示動作を行う処理
について順次説明する。
Next, the operation of the above configuration will be described with reference to FIGS. here,
(1) Processing for creating and displaying a three-dimensional digital map (2) Processing for supporting safe driving by comparing a virtual space image and a real space image (3) Processing for performing a simple navigation operation (4) Simple processing Processing for performing camera display operation (5) Processing for performing a simple danger display operation will be sequentially described.

(1)三次元デジタル地図を作成して表示する処理
最初に、「三次元デジタル地図を作成して表示する処理」について、図3ないし図13を参照して説明する。ここでは、
(1−1)固定物体のみが表現された三次元デジタルを作成して表示する処理
(1−2)固定物体および移動物体が表現された三次元デジタルを作成して表示する処理
について順次説明する。
(1) Processing for Creating and Displaying a 3D Digital Map First, “processing for creating and displaying a 3D digital map” will be described with reference to FIGS. 3 to 13. here,
(1-1) Processing to Create and Display 3D Digital Representing Only Fixed Object (1-2) Processing to Create and Display 3D Digital Representing Fixed Object and Moving Object .

(1−1)固定物体のみが表現された三次元デジタルを作成して表示する処理
図3は、三次元デジタル地図作成装置2の制御部14が行う処理をフローチャートとして示している。三次元デジタル地図作成装置2において、制御部14は、ユーザが表示範囲を指定する操作を行い、操作検出装置4から操作情報入力インタフェース部16を通じて操作情報が入力されると(ステップS1)、入力された操作情報に基づいて表示範囲を設定する(ステップS2)。次いで、制御部14は、現在位置検出装置3から現在位置入力インタフェース部15を通じて現在位置が入力されると(ステップS3)、入力された現在位置からの視野を仮想的な視野して設定する(ステップS4)。
(1-1) Process for Creating and Displaying 3D Digital Expressing Only Fixed Object FIG. 3 shows a process performed by the control unit 14 of the 3D digital map creating apparatus 2 as a flowchart. In the three-dimensional digital map creation device 2, the control unit 14 performs an operation for designating a display range by the user, and when operation information is input from the operation detection device 4 through the operation information input interface unit 16 (step S1), input is performed. A display range is set based on the operated information (step S2). Next, when the current position is input from the current position detection device 3 through the current position input interface unit 15 (step S3), the control unit 14 sets the field of view from the input current position as a virtual field of view (step S3). Step S4).

次いで、制御部14は、設定された表示範囲および仮想的な視野に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS5)、検索された物体配置データにより表される物体を三次元形状にモデリングし(ステップS6)、三次元デジタル地図を作成する(ステップS7)。そして、制御部14は、作成された三次元デジタル地図を表示装置5に出力して表示させる(ステップS8)。   Next, the control unit 14 searches the object arrangement data database 18 for object arrangement data corresponding to the set display range and virtual view (step S5), and selects the object represented by the searched object arrangement data. Modeling into a three-dimensional shape (step S6), a three-dimensional digital map is created (step S7). And the control part 14 outputs and displays the produced three-dimensional digital map on the display apparatus 5 (step S8).

具体的に説明すると、制御部14は、仮想的な視野に対応する物体配置データとして、物体配置データ・データベース18から例えば車両用道路(車道)のデータ、歩行者用道路(歩道)のデータおよび横断歩道のデータが検索されると、図4に示すように、車両用道路、歩行者用道路および横断歩道を三次元形状にモデリングして三次元デジタル地図を作成する。この場合、制御部14は、車両用道路と歩行者用道路との境界を地面から鉛直方向に向けられた平面(図4中「A1」,「A2」にて示す)で表現している。また、制御部14は、横断歩道を地面から鉛直方向に向けられた平面(図4中「B1」,「B2」にて示す)で囲まれた領域で表現している。   More specifically, the control unit 14 uses, for example, vehicle road (roadway) data, pedestrian road (sidewalk) data, and the like from the object placement data database 18 as object placement data corresponding to a virtual field of view. When the pedestrian crossing data is retrieved, as shown in FIG. 4, the vehicle road, the pedestrian road and the pedestrian crossing are modeled into a three-dimensional shape to create a three-dimensional digital map. In this case, the control unit 14 expresses the boundary between the vehicle road and the pedestrian road with a plane (indicated by “A1” and “A2” in FIG. 4) oriented in the vertical direction from the ground. In addition, the control unit 14 represents the pedestrian crossing by a region surrounded by a plane (indicated by “B1” and “B2” in FIG. 4) oriented in the vertical direction from the ground.

また、制御部14は、仮想的な視野に対応する物体配置データとして、建造物のデータが検索されると、図5に示すように、建造物を三次元形状にモデリングして三次元デジタル地図を作成する。この場合、制御部14は、歩行者用道路と建造物との境界を地面から鉛直方向に向けられた平面(図5中「C1」,「C2」にて示す)で表現している。
また、この場合、制御部14は、図6に示すように、建造物に模様を付加して(テクスチャマッピングして)表現しても良く、図7に示すように、建造物の出入口(図7中「D」にて示す)が向いている方向を示す方向属性(図7中「E」にて示す)を持たせて三次元デジタル地図を作成しても良い。
Further, when the building data is retrieved as the object arrangement data corresponding to the virtual visual field, the control unit 14 models the building into a three-dimensional shape as shown in FIG. Create In this case, the control unit 14 expresses the boundary between the pedestrian road and the building with a plane (indicated by “C1” and “C2” in FIG. 5) oriented in the vertical direction from the ground.
In this case, the control unit 14 may express the structure by adding a pattern (texture mapping) as shown in FIG. 6, and as shown in FIG. A three-dimensional digital map may be created with a direction attribute (indicated by “E” in FIG. 7) indicating a direction in which “D” in FIG.

ところで、以上は、現在位置を仮想的な視野して設定した場合を説明したものであるが、ユーザが例えば目的地などを設定した場合であれば、制御部14は、操作検出装置4から操作情報入力インタフェース部16を通じて操作情報が入力されることにより、ユーザにより指定された目的地を仮想的な視野して設定し、設定された仮想的な視野に対応する物体配置データを物体配置データ・データベース18から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成することも可能である。   By the way, the above describes the case where the current position is set with a virtual field of view. However, if the user sets a destination, for example, the control unit 14 operates the operation from the operation detection device 4. When the operation information is input through the information input interface unit 16, the destination specified by the user is set with a virtual field of view, and the object layout data corresponding to the set virtual field of view is set as the object layout data. It is also possible to create a three-dimensional digital map by searching from the database 18 and modeling the object represented by the searched object arrangement data into a three-dimensional shape.

また、制御部14は、仮想的な視野に対応する物体配置データとして、物体配置データ・データベース18からガードレールのデータが検索されると、図8(a)に示すように、ガードレールを三次元形状にモデリングして三次元デジタル地図を作成することになるが、ガードレールが道路から立設されるという事情から、ガードレールの道路に対する接点(図8(a)中「a1」〜「a3」にて示す)のうち例えば「a1」の1点を代表点として設定する。この場合、代表点には、ガードレールの道路に対する方向を示すベクトルが設定されているため、代表点の位置を設定するだけで、ガードレールの道路に対する配置位置を特別な回転処理を行なわずに決定することが可能となる。   When the guard rail data is retrieved from the object placement data database 18 as the object placement data corresponding to the virtual visual field, the control unit 14 forms the guard rail in a three-dimensional shape as shown in FIG. The three-dimensional digital map will be created by modeling to the point where the guardrail is erected from the road. ), For example, one point “a1” is set as a representative point. In this case, since a vector indicating the direction of the guardrail with respect to the road is set as the representative point, the arrangement position of the guardrail with respect to the road can be determined without performing any special rotation processing by simply setting the position of the representative point. It becomes possible.

これと同様にして、制御部14は、樹木を三次元形状にモデリングして三次元デジタル地図を作成する場合には、図8(b)に示すように、樹木の道路に対する接点(図8(b)中「a4」にて示す)を代表点として設定することにより、樹木の位置を決定することが可能となり、交通標識を三次元形状にモデリングして三次元デジタル地図を作成する場合には、図8(c)に示すように、交通標識の道路に対する接点(図8(c)中「a5」にて示す)を代表点として設定する。この場合、代表点には、交通標識の道路に対する方向ベクトルが設定されているため、代表点の位置を設定するだけで、交通標識の道路に対する位置を決定することが可能となる。   Similarly, when the tree is modeled into a three-dimensional shape to create a three-dimensional digital map, the control unit 14, as shown in FIG. b) The position of the tree can be determined by setting “a4”) as a representative point. When a traffic sign is modeled into a three-dimensional shape to create a three-dimensional digital map As shown in FIG. 8C, the contact point of the traffic sign with respect to the road (indicated by “a5” in FIG. 8C) is set as a representative point. In this case, since the direction vector with respect to the road of the traffic sign is set at the representative point, the position of the traffic sign with respect to the road can be determined only by setting the position of the representative point.

(1−2)固定物体および移動物体が表現された三次元デジタルを作成して表示する処理
図9は、三次元デジタル地図作成装置2の制御部14および安全運転支援制御装置6が行う処理をフローチャートとして示している。尚、ここでは、安全運転支援制御装置6が自車両撮影画像取得装置7から入力された自車両撮影画像に基づいて実空間画像を作成する場合を説明する。
(1-2) Processing for Creating and Displaying 3D Digital Expressing Fixed Object and Moving Object FIG. 9 shows processing performed by the control unit 14 and the safe driving support control device 6 of the 3D digital map creation device 2. It is shown as a flowchart. Here, a case will be described in which the safe driving support control device 6 creates a real space image based on the host vehicle captured image input from the host vehicle captured image acquisition device 7.

三次元デジタル地図作成装置2において、制御部14は、ユーザが表示範囲を指定する操作を行い、操作検出装置4から操作情報入力インタフェース部16を通じて操作情報が入力されると(ステップS11)、入力された操作情報に基づいて表示範囲を設定する(ステップS12)。次いで、制御部14は、現在位置検出装置3から現在位置入力インタフェース部15を通じて現在位置が入力されると(ステップS13)、入力された現在位置からの視野を仮想的な視野して設定する(ステップS14)。そして、制御部14は、設定された表示範囲および仮想的な視野に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS15)、この場合は、検索された物体配置データを安全運転支援制御装置6に出力する(ステップS16)。   In the three-dimensional digital map creation device 2, the control unit 14 performs an operation for designating a display range by the user, and when operation information is input from the operation detection device 4 through the operation information input interface unit 16 (step S11), input is performed. A display range is set based on the operated information (step S12). Next, when the current position is input from the current position detection device 3 through the current position input interface unit 15 (step S13), the control unit 14 sets the field of view from the input current position as a virtual field of view (step S13). Step S14). Then, the control unit 14 searches the object arrangement data database 18 for object arrangement data corresponding to the set display range and virtual field of view (step S15). In this case, the searched object arrangement data is safely retrieved. It outputs to the driving assistance control apparatus 6 (step S16).

安全運転支援制御装置6は、安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると(ステップS21)、入力された物体配置データに基づいて仮想空間画像を作成する(ステップS22)。次いで、安全運転支援制御装置6は、自車両撮影画像取得装置7から自車両撮影画像が入力されると(ステップS23)、入力された自車両撮影画像に基づいて実空間画像を作成する(ステップS24)。そして、安全運転支援制御装置6は、仮想空間画像と実空間画像とを比較し(ステップS25)、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると、障害物情報を三次元デジタル地図作成装置2に出力する(ステップS26)。   When the object arrangement data is input from the three-dimensional digital map creation apparatus 2 (step S21), the safe driving assistance control apparatus 6 generates a virtual space image based on the input object arrangement data. Create (step S22). Next, when the host vehicle captured image is input from the host vehicle captured image acquisition device 7 (step S23), the safe driving support control device 6 creates a real space image based on the input host vehicle captured image (step S23). S24). Then, when the safe driving support control device 6 compares the virtual space image and the real space image (step S25) and detects an object that exists in the real space image and does not exist in the virtual space image as an obstacle, the obstacle information Is output to the three-dimensional digital map creating apparatus 2 (step S26).

三次元デジタル地図作成装置2において、制御部14は、安全運転支援制御装置6から障害物情報入力インタフェース部17を通じて障害物情報が入力されると(ステップS17)、先に検索された物体配置データにより表される物体と安全運転支援制御装置6から入力された障害物情報の物体とを併せて三次元形状にモデリングし(ステップS18)、三次元デジタル地図を作成する(ステップS19)。そして、制御部14は、作成された三次元デジタル地図を表示装置5に出力して表示させる(ステップS20)。   In the three-dimensional digital map creation device 2, when the obstacle information is input from the safe driving support control device 6 through the obstacle information input interface unit 17 (step S17), the control unit 14 retrieves the object arrangement data previously searched. And the object of the obstacle information input from the safe driving support control device 6 are modeled into a three-dimensional shape (step S18), and a three-dimensional digital map is created (step S19). And the control part 14 outputs and displays the produced three-dimensional digital map on the display apparatus 5 (step S20).

具体的に説明すると、制御部14は、安全運転支援制御装置6から障害物情報の物体として例えば人が入力されると、図10に示すように、人(図10中「F」にて示す)を三次元形状にモデリングして三次元デジタル地図を作成する。この場合、制御部14は、図11に示すように、人が移動すると予測される移動方向を示す移動方向属性(図11中「G1」にて示す)や人が移動すると予測される移動範囲を示す移動範囲属性(図11中「G2」にて示す)を持たせて三次元デジタル地図を作成しても良い。   More specifically, when a person, for example, is input as an obstacle information object from the safe driving support control device 6, the control unit 14 indicates a person (indicated by “F” in FIG. 10) as shown in FIG. 10. ) Is modeled into a 3D shape to create a 3D digital map. In this case, as shown in FIG. 11, the control unit 14 moves the movement direction attribute (indicated by “G1” in FIG. 11) indicating the movement direction in which the person is predicted to move or the movement range in which the person is predicted to move. A three-dimensional digital map may be created with a movement range attribute (indicated by “G2” in FIG. 11) indicating

また、制御部14は、安全運転支援制御装置6から障害物情報の物体として例えば走行車両が入力されると、図12に示すように、走行車両(図12中「H」にて示す)を三次元形状にモデリングして三次元デジタル地図を作成する。この場合も、制御部14は、図13に示すように、走行車両が移動すると予測される移動方向を示す移動方向属性(図13中「I1」にて示す)や走行車両が移動すると予測される移動範囲を示す移動範囲属性(図13中「I2」にて示す)を持たせて三次元デジタル地図を作成しても良い。   Further, for example, when a traveling vehicle is input as an obstacle information object from the safe driving support control device 6, the control unit 14 indicates the traveling vehicle (indicated by “H” in FIG. 12) as illustrated in FIG. 12. Create a 3D digital map by modeling to 3D shape. Also in this case, as shown in FIG. 13, the control unit 14 is predicted to have a moving direction attribute (indicated by “I1” in FIG. 13) indicating a moving direction in which the traveling vehicle is predicted to move, or to move the traveling vehicle. A three-dimensional digital map may be created with a movement range attribute (indicated by “I2” in FIG. 13) indicating a movement range.

また、制御部14は、人や走行車両を三次元形状にモデリングして表示する場合に、人や走行車両を背景よりも輝度を大きくしてハイライト表示しても良く、ハイライト表示することで、人や走行車両の存在をユーザに適切に認識させることが可能となる。
また、以上は、安全運転支援制御装置6が自車両撮影画像取得装置7から入力された自車両撮影画像に基づいて実空間画像を作成する場合を説明したものであるが、路上機12と通信装置8とが路車間通信を行って路上機12から受信された路上機撮影画像に基づいて実空間画像を作成して仮想空間画像と比較することも可能であり、また、他車両13と通信装置8とが車々間通信を行って他車両13から受信された他車両撮影画像に基づいて実空間画像を作成して仮想空間画像と比較することも可能である。さらに、それら自車両撮影画像、路上機撮影画像および他車両撮影画像のうち幾つかを組合わせて実空間画像を作成して仮想空間画像と比較することも可能である。
In addition, the control unit 14 may highlight the person or the traveling vehicle with a higher brightness than the background when the person or the traveling vehicle is modeled and displayed in a three-dimensional shape. Thus, it is possible to make the user appropriately recognize the presence of a person or a traveling vehicle.
Further, the above describes the case where the safe driving support control device 6 creates a real space image based on the own vehicle captured image input from the own vehicle captured image acquisition device 7. It is also possible to create a real space image based on the roadside device photographed image received from the roadside device 12 by performing road-to-vehicle communication with the device 8 and compare it with the virtual space image. It is also possible to create a real space image based on the other-vehicle captured image received from the other vehicle 13 through the inter-vehicle communication with the device 8 and compare it with the virtual space image. Furthermore, it is also possible to create a real space image by combining some of these own vehicle photographed image, road vehicle photographed image and other vehicle photographed image and compare it with the virtual space image.

(2)仮想空間画像と実空間画像とを比較して安全運転を支援する処理
次に、「仮想空間画像と実空間画像とを比較して安全運転を支援する処理」について、図14ないし図18を参照して説明する。ここでは、
(2−1)車両起動時における安全運転を支援する処理
(2−2)車両発進時における安全運転を支援する処理
(2−3)車両走行時における安全運転を支援する処理
(2−4)車両停止時における安全運転を支援する処理
について順次説明する。尚、ここでも、安全運転支援制御装置6が自車両撮影画像取得装置7から入力された自車両撮影画像に基づいて実空間画像を作成する場合を説明する。
(2) Processing for Supporting Safe Driving by Comparing Virtual Space Image and Real Space Image Next, “processing for supporting safe driving by comparing virtual space image and real space image” will be described with reference to FIGS. Explanation will be made with reference to FIG. here,
(2-1) Process for supporting safe driving at vehicle startup (2-2) Process for supporting safe driving at vehicle start (2-3) Process for supporting safe driving during vehicle travel (2-4) Processing for supporting safe driving when the vehicle is stopped will be sequentially described. Here, the case where the safe driving support control device 6 creates a real space image based on the host vehicle captured image input from the host vehicle captured image acquisition device 7 will also be described.

(2−1)車両起動時における安全運転を支援する処理
図14は、安全運転支援システム1における処理の流れをシーケンス図として示している。安全運転支援システム1は、エンジンが始動されて車両が起動されると、全体としての起動診断制御を行う(ステップS101)。次いで、操作検出装置4は、ユーザが表示範囲を指定する操作を行った旨を検出すると(ステップS102)、指定された表示範囲を表す操作情報を三次元デジタル地図作成装置2に出力する。現在位置検出装置3は、現在位置を検出すると(ステップS103)、検出された現在位置を三次元デジタル地図作成装置2および安全運転支援制御装置6に出力する。
(2-1) Process for Supporting Safe Driving at Vehicle Startup FIG. 14 shows a process flow in the safe driving support system 1 as a sequence diagram. When the engine is started and the vehicle is started, the safe driving support system 1 performs start-up diagnosis control as a whole (step S101). Next, when detecting that the user has performed an operation for designating a display range (step S102), the operation detection device 4 outputs operation information representing the designated display range to the three-dimensional digital map creation device 2. When detecting the current position (step S103), the current position detection device 3 outputs the detected current position to the three-dimensional digital map creation device 2 and the safe driving support control device 6.

三次元デジタル地図作成装置2は、操作検出装置4から操作情報が入力されると共に、
現在位置検出装置3から現在位置が入力されると、入力された表示範囲および現在位置に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS104)、検索された物体配置データを安全運転支援制御装置6に出力する。安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると、入力された物体配置データに基づいて仮想空間画像を作成する(ステップS105)。
The three-dimensional digital map creation device 2 receives operation information from the operation detection device 4, and
When the current position is input from the current position detecting device 3, the object arrangement data corresponding to the input display range and the current position is searched from the object arrangement data database 18 (step S104), and the searched object arrangement data is obtained. Output to the safe driving support control device 6. When the object placement data is input from the 3D digital map creation device 2, the safe driving support control device 6 creates a virtual space image based on the input object placement data (step S105).

自車両撮影画像取得装置7は、自車両にて撮影された画像を自車両撮影画像として取得すると(ステップS106)、取得された自車両撮影画像を安全運転支援制御装置6に出力する。安全運転支援制御装置6は、自車両撮影画像取得装置7から自車両撮影画像が入力されると、入力された自車両撮影画像に基づいて実空間画像を作成する(ステップS107)。そして、安全運転支援制御装置6は、仮想空間画像と実空間画像とを比較する(ステップS108)。   When the host vehicle captured image acquisition device 7 acquires an image captured by the host vehicle as a host vehicle captured image (step S106), the host vehicle captured image acquisition device 7 outputs the acquired host vehicle captured image to the safe driving support control device 6. When the host vehicle captured image is input from the host vehicle captured image acquisition device 7, the safe driving support control device 6 creates a real space image based on the input host vehicle captured image (step S107). Then, the safe driving support control device 6 compares the virtual space image with the real space image (step S108).

ここで、安全運転支援制御装置6は、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると(ステップS109)、障害物情報を三次元デジタル地図作成装置2に出力する。三次元デジタル地図作成装置2は、安全運転支援制御装置6から障害物情報が入力されると、先に検索された物体配置データにより表される物体と安全運転支援制御装置6から入力された障害物情報の物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成し(ステップS110)、作成された三次元デジタル地図を表示装置5に出力する。そして、表示装置5は、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図を表示する(ステップS111)。   Here, when the safe driving support control device 6 detects an object that exists in the real space image and does not exist in the virtual space image as an obstacle (step S109), the obstacle driving information is output to the three-dimensional digital map creation device 2. . When the obstacle information is input from the safe driving support control device 6, the three-dimensional digital map creation device 2 and the object represented by the previously retrieved object arrangement data and the obstacle input from the safe driving support control device 6. A three-dimensional digital map is created by modeling a three-dimensional shape together with the object of the object information (step S110), and the created three-dimensional digital map is output to the display device 5. Then, when the 3D digital map is input from the 3D digital map creation device 2, the display device 5 displays the input 3D digital map (step S111).

以上に説明した一連の処理を行うことにより、車両起動時では、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると、検出された障害物をも三次元形状にモデリングして三次元デジタル地図を作成して表示することにより、障害物の存在をユーザに知らせることが可能となる。
(2−2)車両発進時における安全運転を支援する処理
図15は、安全運転支援システム1における処理の流れをシーケンス図として示している。操作検出装置4は、ユーザが発進操作を行った旨を検出すると(ステップS121)、発進操作が行われた旨を表す操作情報を三次元デジタル地図作成装置2に出力する。三次元デジタル地図作成装置2は、操作検出装置4から操作情報が入力されると、走行経路を予測する(ステップS122)。現在位置検出装置3は、現在位置を検出すると(ステップS123)、検出された現在位置を三次元デジタル地図作成装置2および安全運転支援制御装置6に出力する。
By performing the series of processes described above, when an object present in the real space image and not present in the virtual space image is detected as an obstacle when the vehicle is started, the detected obstacle is also modeled into a three-dimensional shape. By creating and displaying a three-dimensional digital map, it is possible to notify the user of the presence of an obstacle.
(2-2) Process for Supporting Safe Driving at Vehicle Start FIG. 15 shows a process flow in the safe driving support system 1 as a sequence diagram. When the operation detection device 4 detects that the user has performed a start operation (step S121), the operation detection device 4 outputs operation information indicating that the start operation has been performed to the three-dimensional digital map creation device 2. When the operation information is input from the operation detection device 4, the 3D digital map creation device 2 predicts a travel route (step S <b> 122). When detecting the current position (step S123), the current position detection device 3 outputs the detected current position to the three-dimensional digital map creation device 2 and the safe driving support control device 6.

三次元デジタル地図作成装置2は、現在位置検出装置3から現在位置が入力されると、これよりも先に入力された表示範囲および現在位置に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS124)、検索された物体配置データを安全運転支援制御装置6に出力する。安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると、入力された物体配置データに基づいて仮想空間画像を作成する(ステップS125)。   When the current position is input from the current position detection device 3, the three-dimensional digital map creation device 2 obtains the display range and the object arrangement data corresponding to the current position input earlier from the object arrangement data database 18. A search is performed (step S124), and the searched object arrangement data is output to the safe driving support control device 6. When the object placement data is input from the three-dimensional digital map creation device 2, the safe driving support control device 6 creates a virtual space image based on the input object placement data (step S125).

自車両撮影画像取得装置7は、自車両にて撮影された画像を自車両撮影画像として取得すると(ステップS126)、取得された自車両撮影画像を安全運転支援制御装置6に出力する。安全運転支援制御装置6は、自車両撮影画像取得装置7から自車両撮影画像が入力されると、入力された自車両撮影画像に基づいて実空間画像を作成する(ステップS127)。そして、安全運転支援制御装置6は、仮想空間画像と実空間画像とを比較する(ステップS128)。   When the host vehicle captured image acquisition device 7 acquires an image captured by the host vehicle as a host vehicle captured image (step S126), the host vehicle captured image acquisition device 7 outputs the acquired host vehicle captured image to the safe driving support control device 6. When the host vehicle captured image is input from the host vehicle captured image acquisition device 7, the safe driving support control device 6 creates a real space image based on the input host vehicle captured image (step S127). Then, the safe driving support control device 6 compares the virtual space image with the real space image (step S128).

ここで、安全運転支援制御装置6は、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると(ステップS129)、この場合は、発進の安全性を判定し(ステップS130)、障害物情報を三次元デジタル地図作成装置2に出力すると共に、走行制御指令を走行制御装置10に出力する。   Here, when the safe driving support control device 6 detects an object that exists in the real space image and does not exist in the virtual space image as an obstacle (step S129), in this case, the safety of starting is determined (step S130). ), The obstacle information is output to the three-dimensional digital map creation device 2, and the travel control command is output to the travel control device 10.

三次元デジタル地図作成装置2は、安全運転支援制御装置6から障害物情報が入力されると、先に検索された物体配置データにより表される物体と安全運転支援制御装置6から入力された障害物情報の物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成し(ステップS131)、作成された三次元デジタル地図を表示装置5に出力する。そして、表示装置5は、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図を表示する(ステップS132)。これと同時に、走行制御装置10は、安全運転支援制御装置6から走行制御指令が入力されると、障害物を回避するように走行を制御する(ステップS133)。   When the obstacle information is input from the safe driving support control device 6, the three-dimensional digital map creation device 2 and the object represented by the previously retrieved object arrangement data and the obstacle input from the safe driving support control device 6. A three-dimensional digital map is created by modeling the three-dimensional shape together with the object of the object information (step S131), and the created three-dimensional digital map is output to the display device 5. Then, when the 3D digital map is input from the 3D digital map creation device 2, the display device 5 displays the input 3D digital map (step S132). At the same time, when the travel control command is input from the safe driving support control device 6, the travel control device 10 controls the travel so as to avoid an obstacle (step S133).

以上に説明した一連の処理を行うことにより、車両発進時では、この場合も、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると、検出された障害物をも三次元形状にモデリングして三次元デジタル地図を作成して表示することにより、障害物の存在をユーザに知らせることが可能となり、また、障害物を回避するように走行を制御することにより、発進時における安全運転を適切に支援することが可能となる。   By performing the series of processes described above, when an object that is present in the real space image and does not exist in the virtual space image is detected as an obstacle at the time of starting the vehicle, the detected obstacle is also converted into the tertiary. By creating and displaying a 3D digital map after modeling to the original shape, it is possible to notify the user of the presence of an obstacle, and by controlling the running so as to avoid the obstacle, It is possible to appropriately support safe driving in Japan.

(2−3)車両走行時における安全運転を支援する処理
図16は、安全運転支援システム1における処理の流れをシーケンス図として示している。三次元デジタル地図作成装置2は、この場合も、走行経路を予測する(ステップS141)。現在位置検出装置3は、現在位置を検出すると(ステップS142)、検出された現在位置を三次元デジタル地図作成装置2および安全運転支援制御装置6に出力する。
(2-3) Process for Supporting Safe Driving During Vehicle Traveling FIG. 16 shows a process flow in the safe driving support system 1 as a sequence diagram. The three-dimensional digital map creation device 2 also predicts the travel route in this case (step S141). When detecting the current position (step S142), the current position detection device 3 outputs the detected current position to the three-dimensional digital map creation device 2 and the safe driving support control device 6.

三次元デジタル地図作成装置2は、現在位置検出装置3から現在位置が入力されると、これよりも先に入力された表示範囲および現在位置に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS143)、検索された物体配置データを安全運転支援制御装置6に出力する。安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると、入力された物体配置データに基づいて仮想空間画像を作成する(ステップS144)。   When the current position is input from the current position detection device 3, the three-dimensional digital map creation device 2 obtains the display range and the object arrangement data corresponding to the current position input earlier from the object arrangement data database 18. A search is performed (step S143), and the searched object arrangement data is output to the safe driving support control device 6. When the object placement data is input from the three-dimensional digital map creation device 2, the safe driving support control device 6 creates a virtual space image based on the input object placement data (step S144).

自車両撮影画像取得装置7は、自車両にて撮影された画像を自車両撮影画像として取得すると(ステップS145)、取得された自車両撮影画像を安全運転支援制御装置6に出力する。安全運転支援制御装置6は、自車両撮影画像取得装置7から自車両撮影画像が入力されると、入力された自車両撮影画像に基づいて実空間画像を作成する(ステップS146)。そして、安全運転支援制御装置6は、仮想空間画像と実空間画像とを比較する(ステップS147)。   When the host vehicle captured image acquisition device 7 acquires an image captured by the host vehicle as a host vehicle captured image (step S145), the host vehicle captured image acquisition device 7 outputs the acquired host vehicle captured image to the safe driving support control device 6. When the host vehicle captured image is input from the host vehicle captured image acquisition device 7, the safe driving support control device 6 creates a real space image based on the input host vehicle captured image (step S146). And the safe driving assistance control apparatus 6 compares a virtual space image and a real space image (step S147).

ここで、安全運転支援制御装置6は、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると(ステップS148)、この場合は、走行の安全性を判定し(ステップS149)、障害物情報を三次元デジタル地図作成装置2に出力すると共に、走行制御指令を走行制御装置10に出力する。   Here, when the safe driving support control device 6 detects an object that exists in the real space image and does not exist in the virtual space image as an obstacle (step S148), in this case, the driving safety is determined (step S149). ), The obstacle information is output to the three-dimensional digital map creation device 2, and the travel control command is output to the travel control device 10.

三次元デジタル地図作成装置2は、安全運転支援制御装置6から障害物情報が入力されると、先に検索された物体配置データにより表される物体と安全運転支援制御装置6から入力された障害物情報の物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成し(ステップS150)、作成された三次元デジタル地図を表示装置5に出力する。そして、表示装置5は、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図を表示する(ステップS151)。これと同時に、走行制御装置10は、安全運転支援制御装置6から走行制御指令が入力されると、障害物を回避するように走行を制御する(ステップS152)。   When the obstacle information is input from the safe driving support control device 6, the three-dimensional digital map creation device 2 and the object represented by the previously retrieved object arrangement data and the obstacle input from the safe driving support control device 6. A three-dimensional digital map is created by modeling a three-dimensional shape together with the object of the object information (step S150), and the created three-dimensional digital map is output to the display device 5. And the display apparatus 5 will display the input 3D digital map, if a 3D digital map is input from the 3D digital map creation apparatus 2 (step S151). At the same time, when the travel control command is input from the safe driving support control device 6, the travel control device 10 controls the travel so as to avoid the obstacle (step S152).

以上に説明した一連の処理を行うことにより、車両走行時では、この場合も、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると、検出された障害物をも三次元形状にモデリングして三次元デジタル地図を作成して表示することにより、障害物の存在をユーザに知らせることが可能となり、また、障害物を回避するように走行を制御することにより、走行時における安全運転を適切に支援することが可能となる。   By performing the series of processes described above, when an object that is present in the real space image and is not present in the virtual space image is detected as an obstacle, the detected obstacle is also converted into the tertiary. By creating and displaying a 3D digital map after modeling to the original shape, it becomes possible to notify the user of the presence of an obstacle, and by controlling the running so as to avoid the obstacle, It is possible to appropriately support safe driving in Japan.

(2−4)車両停止時における安全運転を支援する処理
図17は、安全運転支援システム1における処理の流れをシーケンス図として示している。操作検出装置4は、ユーザが停止操作を行った旨を検出すると(ステップS161)、停止操作が行われた旨を表す操作情報を三次元デジタル地図作成装置2に出力する。三次元デジタル地図作成装置2は、操作検出装置4から操作情報が入力されると、停止位置を予測する(ステップS162)。現在位置検出装置3は、現在位置を検出すると(ステップS163)、検出された現在位置を三次元デジタル地図作成装置2および安全運転支援制御装置6に出力する。
(2-4) Process for Supporting Safe Driving when Vehicle is Stopped FIG. 17 shows a process flow in the safe driving support system 1 as a sequence diagram. When the operation detection device 4 detects that the user has performed a stop operation (step S161), the operation detection device 4 outputs operation information indicating that the stop operation has been performed to the 3D digital map creation device 2. When the operation information is input from the operation detection device 4, the 3D digital map creation device 2 predicts a stop position (step S <b> 162). When detecting the current position (step S163), the current position detection device 3 outputs the detected current position to the three-dimensional digital map creation device 2 and the safe driving support control device 6.

三次元デジタル地図作成装置2は、現在位置検出装置3から現在位置が入力されると、これよりも先に入力された表示範囲および現在位置に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS164)、検索された物体配置データを安全運転支援制御装置6に出力する。安全運転支援制御装置6は、三次元デジタル地図作成装置2から物体配置データが入力されると、入力された物体配置データに基づいて仮想空間画像を作成する(ステップS165)。   When the current position is input from the current position detection device 3, the three-dimensional digital map creation device 2 obtains the display range and the object arrangement data corresponding to the current position input earlier from the object arrangement data database 18. A search is performed (step S164), and the searched object arrangement data is output to the safe driving support control device 6. When the object placement data is input from the three-dimensional digital map creation device 2, the safe driving support control device 6 creates a virtual space image based on the input object placement data (step S165).

自車両撮影画像取得装置7は、自車両にて撮影された画像を自車両撮影画像として取得すると(ステップS166)、取得された自車両撮影画像を安全運転支援制御装置6に出力する。安全運転支援制御装置6は、自車両撮影画像取得装置7から自車両撮影画像が入力されると、入力された自車両撮影画像に基づいて実空間画像を作成する(ステップS167)。そして、安全運転支援制御装置6は、仮想空間画像と実空間画像とを比較する(ステップS168)。   When the host vehicle captured image acquisition device 7 acquires an image captured by the host vehicle as a host vehicle captured image (step S166), the host vehicle captured image acquisition device 7 outputs the acquired host vehicle captured image to the safe driving support control device 6. When the host vehicle captured image is input from the host vehicle captured image acquisition device 7, the safe driving support control device 6 creates a real space image based on the input host vehicle captured image (step S167). Then, the safe driving support control device 6 compares the virtual space image with the real space image (step S168).

ここで、安全運転支援制御装置6は、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると(ステップS169)、この場合は、停止の安全性を判定し(ステップS170)、障害物情報を三次元デジタル地図作成装置2に出力すると共に、走行制御指令を走行制御装置10に出力する。   Here, when the safe driving support control device 6 detects an object that exists in the real space image and does not exist in the virtual space image as an obstacle (step S169), in this case, the safety of the stop is determined (step S170). ), The obstacle information is output to the three-dimensional digital map creation device 2, and the travel control command is output to the travel control device 10.

三次元デジタル地図作成装置2は、安全運転支援制御装置6から障害物情報が入力されると、先に検索された物体配置データにより表される物体と安全運転支援制御装置6から入力された障害物情報の物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成し(ステップS171)、作成された三次元デジタル地図を表示装置5に出力する。そして、表示装置5は、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図を表示する(ステップS172)。これと同時に、走行制御装置10は、安全運転支援制御装置6から走行制御指令が入力されると、障害物を回避するように走行を制御する(ステップS173)。   When the obstacle information is input from the safe driving support control device 6, the three-dimensional digital map creation device 2 and the object represented by the previously retrieved object arrangement data and the obstacle input from the safe driving support control device 6. A three-dimensional digital map is created by modeling a three-dimensional shape together with the object of the object information (step S171), and the created three-dimensional digital map is output to the display device 5. Then, when the 3D digital map is input from the 3D digital map creation device 2, the display device 5 displays the input 3D digital map (step S172). At the same time, when the travel control command is input from the safe driving support control device 6, the travel control device 10 controls the travel so as to avoid the obstacle (step S173).

以上に説明した一連の処理を行うことにより、車両停止時では、この場合も、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出すると、検出された障害物をも三次元形状にモデリングして三次元デジタル地図を作成して表示することにより、障害物の存在をユーザに知らせることが可能となり、また、障害物を回避するように走行を制御することにより、停止時における安全運転を適切に支援することが可能となる。   By performing the series of processes described above, even when the vehicle is stopped, in this case as well, if an object that exists in the real space image and does not exist in the virtual space image is detected as an obstacle, the detected obstacle is also converted into the tertiary. By creating and displaying a 3D digital map after modeling to the original shape, it is possible to notify the user of the presence of an obstacle, and by controlling the running so as to avoid the obstacle, It is possible to appropriately support safe driving in Japan.

ところで、以上は、安全運転支援制御装置6が走行制御指令を走行制御装置10に出力し、走行制御装置10が障害物を回避するように走行を制御する場合を説明したものであるが、安全運転支援制御装置6が警告出力指令を警告出力装置11に出力し、警告出力装置11が障害物を回避するための動作を促す警告(例えば「前方に障害物があります。運転に注意して下さい」というような音声)を出力することも可能である。また、走行制御装置10による走行制御の動作と警告出力装置11による警告出力の動作とを併用することも可能である。   By the way, the above describes the case where the safe driving support control device 6 outputs a traveling control command to the traveling control device 10 and the traveling control device 10 controls traveling so as to avoid an obstacle. The driving support control device 6 outputs a warning output command to the warning output device 11, and the warning output device 11 prompts an operation to avoid the obstacle (for example, “There is an obstacle ahead. Can also be output. It is also possible to use a travel control operation by the travel control device 10 and a warning output operation by the warning output device 11 in combination.

また、この場合も、路上機12と通信装置8とが路車間通信を行って路上機12から受信された路上機撮影画像に基づいて実空間画像を作成して仮想空間画像と比較することも可能であり、また、他車両13と通信装置8とが車々間通信を行って他車両13から受信された他車両撮影画像に基づいて実空間画像を作成して仮想空間画像と比較することも可能であり、さらに、それら自車両撮影画像、路上機撮影画像および他車両撮影画像のうち幾つかを組合わせて実空間画像を作成して仮想空間画像と比較することも可能である。   Also in this case, the road device 12 and the communication device 8 may perform road-to-vehicle communication to create a real space image based on the road device photographed image received from the road device 12 and compare it with the virtual space image. It is possible, and the other vehicle 13 and the communication device 8 can perform inter-vehicle communication to create a real space image based on the other vehicle photographed image received from the other vehicle 13 and compare it with the virtual space image. Furthermore, it is also possible to create a real space image by combining some of these own vehicle captured image, road vehicle captured image, and other vehicle captured image and compare it with the virtual space image.

また、三次元デジタル地図作成装置2において、制御部14は、複数の走行経路が予測される場合には、予測された複数の走行経路毎の物体配置データを物体配置データ・データベース18から検索し、三次元デジタル地図を作成して三次元デジタル地図記憶部20に記憶させる。   In the three-dimensional digital map creation device 2, when a plurality of travel routes are predicted, the control unit 14 searches the object placement data database 18 for object placement data for each of the predicted plurality of travel routes. Then, a three-dimensional digital map is created and stored in the three-dimensional digital map storage unit 20.

図18を参照して具体的に説明すると、制御部14は、車両の現在位置が図18中「J」地点であれば、「P1」、「P2」および「P3」の3個の走行経路を予測し、予測された3個の走行経路毎の物体配置データを物体配置データ・データベース18から検索し、三次元デジタル地図を作成して三次元デジタル地図記憶部20に記憶させる。   Specifically, referring to FIG. 18, if the current position of the vehicle is “J” in FIG. 18, the control unit 14 has three travel routes “P1”, “P2”, and “P3”. , And the object arrangement data for each of the predicted three travel routes is retrieved from the object arrangement data database 18 to create a three-dimensional digital map and store it in the three-dimensional digital map storage unit 20.

つまり、制御部14は、走行経路「P1」に対する物体配置データとして車両の進行方向に位置する「201」、「202」、「301」および「302」などの建造物の物体配置データを検索し、三次元デジタル地図を作成して三次元デジタル地図記憶部20の第1の記憶エリア20aに記憶させ、また、走行経路「P2」に対する物体配置データとして車両の進行方向に位置する「302」、「303」、「402」および「403」などの建造物の物体配置データを検索し、三次元デジタル地図を作成して三次元デジタル地図記憶部20の第2の記憶エリア20bに記憶させ、さらに、走行経路「P3」に対する物体配置データとして車両の進行方向に位置する「203」、「204」、「303」および「304」などの建造物の物体配置データを検索し、三次元デジタル地図を作成して三次元デジタル地図記憶部20の第3の記憶エリア20cに記憶させる。   That is, the control unit 14 retrieves object arrangement data of buildings such as “201”, “202”, “301”, and “302” positioned in the traveling direction of the vehicle as the object arrangement data for the travel route “P1”. The three-dimensional digital map is created and stored in the first storage area 20a of the three-dimensional digital map storage unit 20, and “302” positioned in the traveling direction of the vehicle as object arrangement data for the travel route “P2”. Search for object arrangement data of buildings such as “303”, “402”, and “403”, create a three-dimensional digital map, store it in the second storage area 20b of the three-dimensional digital map storage unit 20, and Building objects such as “203”, “204”, “303” and “304” positioned in the traveling direction of the vehicle as object arrangement data for the travel route “P3” Find the placement data, and stores in the third storage area 20c of creating a three-dimensional digital map three-dimensional digital map storage unit 20.

そして、制御部14は、車両が図18中「J」地点から「K」地点に移動すると、走行経路「P2」に対する物体配置データに基づいて作成されて三次元デジタル地図記憶部20の第2の記憶エリア20bに記憶されている三次元デジタル地図を三次元デジタル地図出力インタフェース部21から表示装置5に出力し、三次元デジタル地図を表示装置5に表示させる。また、制御部14は、これと同時に、三次元デジタル地図記憶部20の第1の記憶エリア20aに記憶されている三次元デジタル地図および第3の記憶エリア20cに記憶されている三次元デジタル地図を消去させる。これ以降、制御部14は、現在位置検出装置3により現在位置が検出される毎に、上記した処理を繰返して行う。   Then, when the vehicle moves from the “J” point to the “K” point in FIG. 18, the control unit 14 is created based on the object arrangement data for the travel route “P2” and is stored in the second of the three-dimensional digital map storage unit 20. The 3D digital map stored in the storage area 20b is output from the 3D digital map output interface unit 21 to the display device 5, and the 3D digital map is displayed on the display device 5. At the same time, the control unit 14 also stores the three-dimensional digital map stored in the first storage area 20a of the three-dimensional digital map storage unit 20 and the three-dimensional digital map stored in the third storage area 20c. To erase. Thereafter, the control unit 14 repeats the above processing every time the current position is detected by the current position detection device 3.

(3)簡易なナビゲーション動作を行う処理
次に、「簡易なナビゲーション動作を行う処理」について、図19を参照して説明する。図19は、安全運転支援システム1における処理の流れをシーケンス図として示している。操作検出装置4は、ユーザがナビゲーション動作モード(ナビ動作モード)を指定する操作を行った旨を検出すると(ステップS181)、ナビゲーション動作モードが指定された旨を表す操作情報を三次元デジタル地図作成装置2に出力する。現在位置検出装置3は、現在位置を検出すると(ステップS182)、検出された現在位置を三次元デジタル地図作成装置2に出力する。
(3) Processing for Performing Simple Navigation Operation Next, “processing for performing a simple navigation operation” will be described with reference to FIG. FIG. 19 shows a process flow in the safe driving support system 1 as a sequence diagram. When the operation detection device 4 detects that the user has performed an operation for specifying the navigation operation mode (navigation operation mode) (step S181), the operation detection device 4 generates operation information indicating that the navigation operation mode has been specified. Output to device 2. When detecting the current position (step S182), the current position detection device 3 outputs the detected current position to the three-dimensional digital map creation device 2.

三次元デジタル地図作成装置2は、操作検出装置4から操作情報が入力されると共に、
現在位置検出装置3から現在位置が入力されると、現在位置に対応する物体配置データを物体配置データ・データベース18から検索し(ステップS183)、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成し(ステップS184)、作成された三次元デジタル地図を表示装置5に出力する。そして、表示装置5は、三次元デジタル地図作成装置2から三次元デジタル地図が入力されると、入力された三次元デジタル地図をナビゲーション用の地図として表示する(ステップS185)。
The three-dimensional digital map creation device 2 receives operation information from the operation detection device 4, and
When the current position is input from the current position detection device 3, object arrangement data corresponding to the current position is searched from the object arrangement data database 18 (step S183), and the object represented by the searched object arrangement data is tertiary. A three-dimensional digital map is created by modeling the original shape (step S184), and the created three-dimensional digital map is output to the display device 5. Then, when the 3D digital map is input from the 3D digital map creation device 2, the display device 5 displays the input 3D digital map as a navigation map (step S185).

以上に説明した一連の処理により、単に、現在位置に対応する物体配置データを物体配置データ・データベース18から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成し、作成された三次元デジタル地図を表示することにより、安全運転支援システム1を簡易なナビゲーション装置として動作させることが可能となる。   By the series of processes described above, the object arrangement data corresponding to the current position is simply retrieved from the object arrangement data database 18, and the object represented by the retrieved object arrangement data is modeled into a three-dimensional shape to obtain a third order. By creating an original digital map and displaying the created three-dimensional digital map, the safe driving support system 1 can be operated as a simple navigation device.

(4)簡易なカメラ表示動作を行う処理
次に、「簡易なカメラ表示動作を行う処理」について、図20を参照して説明する。図20は、安全運転支援システム1における処理の流れをシーケンス図として示している。操作検出装置4は、ユーザがカメラ表示動作モードを指定する操作を行った旨を検出すると(ステップS191)、カメラ表示動作モードが指定された旨を表す操作情報を自車両撮影取得装置7に出力する。自車両撮影取得装置7は、操作検出装置4から操作情報が入力されると、自車両にて撮影された画像を自車両撮影画像として取得し(ステップS192)、取得された自車両撮影画像を表示装置5に出力する。そして、表示装置5は、自車両撮影取得装置7から自車両撮影画像が入力されると、入力された自車両撮影画像を表示する(ステップS193)。
(4) Processing for Performing Simple Camera Display Operation Next, “processing for performing a simple camera display operation” will be described with reference to FIG. FIG. 20 shows a process flow in the safe driving support system 1 as a sequence diagram. When the operation detection device 4 detects that the user has performed an operation for designating the camera display operation mode (step S191), the operation detection device 4 outputs operation information indicating that the camera display operation mode is designated to the own vehicle photographing acquisition device 7. To do. When the operation information is input from the operation detection device 4, the host vehicle shooting acquisition device 7 acquires an image shot by the host vehicle as a host vehicle shooting image (step S <b> 192), and acquires the acquired host vehicle shooting image. Output to the display device 5. And the display apparatus 5 will display the input own vehicle captured image, if the own vehicle captured image is input from the own vehicle imaging | photography acquisition apparatus 7 (step S193).

以上に説明した一連の処理により、単に、自車両にて撮影された自車両撮影画像を表示することにより、安全運転支援システム1を簡易なカメラ表示装置として動作させることが可能となる。この場合、単に、路上機12にて撮影された路上機撮影画像を表示することも可能であり、また、他車両13にて撮影された路上機撮影画像を表示することも可能である。   The safe driving support system 1 can be operated as a simple camera display device by simply displaying a captured image captured by the host vehicle through the series of processes described above. In this case, it is also possible to simply display a road machine photographed image photographed by the road machine 12, and it is also possible to display a road machine photographed image photographed by the other vehicle 13.

(5)簡易な危険表示動作を行う処理
次に、「簡易な危険表示動作を行う処理」について、図21を参照して説明する。図21は、安全運転支援システム1における処理の流れをシーケンス図として示している。操作検出装置4は、ユーザが危険表示動作モードを指定する操作を行った旨を検出すると(ステップS201)、危険表示動作モードが指定された旨を表す操作情報を走行制御装置10に出力する。走行制御装置10は、操作検出装置4から操作情報が入力されると、走行危険状態であるか否かを検出し、走行危険状態である旨を検出すると(ステップS202)、走行危険状態である旨を示す走行危険情報を表示装置5に出力する。そして、表示装置5は、走行制御装置10から走行危険情報が入力されると、入力された走行危険情報に基づいて走行危険である旨を表示する(ステップS203)。
(5) Processing for Performing Simple Danger Display Operation Next, “processing for performing a simple danger display operation” will be described with reference to FIG. FIG. 21 shows a process flow in the safe driving support system 1 as a sequence diagram. When detecting that the user has performed an operation for designating the danger display operation mode (step S201), the operation detection device 4 outputs operation information indicating that the danger display operation mode has been designated to the travel control device 10. When the operation information is input from the operation detection device 4, the traveling control device 10 detects whether or not it is in a driving danger state, and if it detects that it is in a driving danger state (step S <b> 202), it is in a driving danger state. The travel danger information indicating that is output to the display device 5. When the travel risk information is input from the travel control device 10, the display device 5 displays that the travel risk is based on the input travel risk information (step S203).

以上に説明した一連の処理により、単に、走行制御装置10が走行危険状態であるか否かを検出し、走行危険状態である旨を検出すると、走行危険情報に基づいて走行危険である旨を表示することにより、安全運転支援システム1を簡易な危険表示装置として動作させることが可能となる。   By the series of processes described above, it is simply detected whether or not the travel control device 10 is in a travel danger state, and when it is detected that the travel danger state is detected, the travel risk information is based on the travel risk information. By displaying, the safe driving support system 1 can be operated as a simple danger display device.

以上に説明したように本実施形態によれば、安全運転支援システム1において、仮想的な視野に対応する物体配置データを物体配置データ・データベース18から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成するように構成したので、物体の絶対的な配置形態を表す物体配置データを描画することで三次元デジタル地図を作成することができ、処理が複雑化することなく、しかも、物体の位置の精度を高めることができる。   As described above, according to the present embodiment, in the safe driving support system 1, the object arrangement data corresponding to the virtual visual field is searched from the object arrangement data database 18, and is represented by the searched object arrangement data. Since a 3D digital map is created by modeling a 3D object, a 3D digital map can be created by drawing object layout data representing the absolute layout of the object. In addition, the accuracy of the position of the object can be improved without complicating the process.

また、現在位置検出装置3により検出された現在位置からの視野を仮想的な視野として設定することにより、車両の現在位置での運転席から見た三次元デジタル地図や車両上空から見た三次元デジタル地図を作成することができ、また、ユーザにより指定された位置からの視野を仮想的な視野として設定することにより、ユーザが例えば目的地を指定すると、目的地での運転席から見た三次元デジタル地図や車両上空から見た三次元デジタル地図を作成することができる。   In addition, by setting the visual field from the current position detected by the current position detection device 3 as a virtual visual field, a three-dimensional digital map viewed from the driver's seat at the current position of the vehicle or a three-dimensional image viewed from above the vehicle. A digital map can be created, and by setting the field of view from the position specified by the user as a virtual field of view, when the user specifies a destination, for example, the tertiary viewed from the driver's seat at the destination You can create original digital maps and 3D digital maps as seen from above the vehicle.

また、複数の走行経路が予測されると、予測された複数の走行経路毎の物体配置データを物体配置データ・データベース18から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成して三次元デジタル地図記憶部20に記憶するように構成したので、車両がいずれの走行経路を選択して走行したとしても、選択された走行経路の三次元デジタル地図を速やかに遅延無くユーザに提供することができる。   When a plurality of travel routes are predicted, the object placement data for each of the predicted plurality of travel routes is searched from the object placement data database 18, and the object represented by the searched object placement data is three-dimensionally shaped. The three-dimensional digital map is created by modeling and stored in the three-dimensional digital map storage unit 20. Therefore, even if the vehicle travels by selecting any travel route, the tertiary of the selected travel route The original digital map can be promptly provided to the user without delay.

また、物体配置データに基づいて仮想空間画像を作成すると共に、自車両にて撮影された自車両撮影画像や路上機12にて撮影された路上機撮影画像や他車両13にて撮影された他車両撮影画像に基づいて実空間画像を作成し、実空間画像に存在し且つ仮想空間画像に存在しない物体が障害物として検出されると、物体配置データにより表される物体と障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成するように構成したので、移動不可能な固定物体のみが表現された三次元デジタル地図ではなく、人や動物や走行車両などの移動可能な移動物体もが表現された三次元デジタル地図を作成することができる。   Moreover, while creating a virtual space image based on object arrangement data, the own vehicle picked-up image image | photographed with the own vehicle, the road-machine-photographed image image | photographed with the road machine 12, and others image | photographed with the other vehicle 13 When a real space image is created based on the vehicle captured image and an object that exists in the real space image and does not exist in the virtual space image is detected as an obstacle, it is detected as an object and an obstacle represented by the object arrangement data. Since it is configured to create a 3D digital map by modeling the object together with a 3D shape, it is not a 3D digital map that represents only fixed objects that cannot be moved, but people, animals, and traveling vehicles. It is possible to create a three-dimensional digital map that also represents movable objects such as moving objects.

また、車両用道路と歩行者用道路とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら車両用道路と歩行者用道路との境界を地面から略鉛直方向に向けられた平面で表現するように構成したので、車両用道路と歩行者用道路との境界を立体的な平面でユーザに適切に認識させることができる。また、道路と建造物とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら道路と建造物との境界を地面から略鉛直方向に向けられた平面で表現するように構成したので、道路と建造物との境界を立体的な平面でユーザに適切に認識させることができる。   In addition, when a three-dimensional digital map is created by modeling a vehicle road and a pedestrian road in a three-dimensional shape, the boundary between the vehicle road and the pedestrian road can be directed substantially vertically from the ground. Therefore, the boundary between the vehicle road and the pedestrian road can be appropriately recognized by the user on a three-dimensional plane. In addition, when creating a 3D digital map by modeling roads and buildings in a 3D shape, the boundary between the roads and buildings is represented by a plane that is oriented substantially vertically from the ground. Therefore, the boundary between the road and the building can be appropriately recognized by the user on a three-dimensional plane.

また、建造物を三次元形状にモデリングして三次元デジタル地図を作成する場合に、建造物に模様を付加して表現するように構成したので、建造物をユーザに適切に認識させることができる。また、横断歩道や安全地帯などの特定の領域を三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら特定の領域を地面から略鉛直方向に向けられた平面で囲まれた領域で表現するように構成したので、横断歩道や安全地帯などの特定の領域を立体的な平面で囲まれた領域でユーザに適切に認識させることができる。   In addition, when creating a three-dimensional digital map by modeling a building into a three-dimensional shape, it is configured to express the building by adding a pattern, so that the user can recognize the building appropriately. . In addition, when creating a three-dimensional digital map by modeling a specific area such as a pedestrian crossing or safety zone into a three-dimensional shape, the specific area is surrounded by a plane oriented substantially vertically from the ground. Therefore, the user can appropriately recognize a specific area such as a pedestrian crossing or a safety zone in an area surrounded by a three-dimensional plane.

また、建造物の出入口が向いている方向を示す方向属性を持たせて三次元デジタル地図を作成するように構成したので、人が飛び出す危険性の有無をユーザに適切に認識させることができる。また、人や走行車両が移動すると予測される移動方向を示す移動方向属性や移動範囲を示す移動範囲属性を持たせて三次元デジタル地図を作成するように構成したので、人が飛び出す危険性の有無や走行車両と接触する危険性の有無をユーザに適切に認識させることができる。   In addition, since the three-dimensional digital map is created with a direction attribute indicating the direction in which the entrance of the building is facing, it is possible to allow the user to appropriately recognize whether there is a risk of a person jumping out. In addition, since it is configured to create a 3D digital map with a movement direction attribute indicating a movement direction predicted to move a person or a traveling vehicle and a movement range attribute indicating a movement range, there is a risk of a person jumping out. The presence / absence and the presence / absence of a risk of contact with the traveling vehicle can be appropriately recognized by the user.

本発明は、上記した実施形態にのみ限定されるものではなく、以下のように変形または拡張することができる。
表示装置の性能が低い構成では、図22に示すように、人や走行車両を三次元形状にモデリングして表示する場合に、人(図22中「L」にて示す)や走行車両(図22中「M」にて示す)を大まかな外形で表示する構成であっても良い。
The present invention is not limited to the above-described embodiment, and can be modified or expanded as follows.
In a configuration in which the performance of the display device is low, as shown in FIG. 22, when a person or a traveling vehicle is modeled and displayed in a three-dimensional shape, a person (indicated by “L” in FIG. 22) or a traveling vehicle ( 22 may be displayed with a rough outline.

路上機12から当該路上機12にて撮影された路上機撮影画像を受信する機能や他車両13から当該他車両13にて撮影された他車両撮影画像を受信する機能が省略されている構成であっても良い。
図23に示すように、車両が車線変更する場合に、物体配置データ・データベース18に保持されている物体配置データを検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成して表示する構成であっても良く、このように構成すれば、車線変更のための固定された画像を用意しておく必要をなくすことができると共に、車線数に応じた画像をユーザに提供することができる。
A configuration in which a function of receiving a roadside device image captured by the roadside device 12 from the roadside device 12 and a function of receiving an image of the other vehicle imaged by the other vehicle 13 from the other vehicle 13 are omitted. There may be.
As shown in FIG. 23, when the vehicle changes lanes, the object arrangement data stored in the object arrangement data database 18 is searched, and the object represented by the searched object arrangement data is modeled into a three-dimensional shape. In this way, it is possible to create and display a three-dimensional digital map. With this configuration, it is possible to eliminate the need to prepare a fixed image for changing lanes, and to increase the number of lanes. It is possible to provide an image corresponding to the user.

本発明の一実施形態を示す機能ブロック図Functional block diagram showing an embodiment of the present invention 安全運転支援システムの全体構成を示す機能ブロック図Functional block diagram showing the overall configuration of the safe driving support system フローチャートflowchart 三次元デジタル地図の例を示す図Diagram showing an example of a three-dimensional digital map 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent 物体を三次元形状にモデリングする態様を概略的に示す図A diagram schematically showing how to model an object into a three-dimensional shape 図3相当図3 equivalent figure 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent シーケンス図Sequence Diagram 図14相当図14 equivalent diagram 図14相当図14 equivalent diagram 図14相当図14 equivalent diagram 車両の走行経路を概略的に示す図A diagram schematically showing the travel route of a vehicle 図14相当図14 equivalent diagram 図14相当図14 equivalent diagram 図14相当図14 equivalent diagram 図4相当図Figure 4 equivalent 図4相当図Figure 4 equivalent

符号の説明Explanation of symbols

図面中、1は安全運転支援システム、2は三次元デジタル地図作成装置(三次元デジタル地図作成装置)、3は現在位置検出装置(現在位置検出手段)、4は操作検出装置(位置指定手段、表示範囲指定手段)、5は表示装置(表示手段)、6は安全運転支援制御装置(仮想空間画像作成手段、実空間画像作成手段、障害物検出手段)、7は自車両撮影画像取得装置(自車両撮影画像取得手段)、8は通信装置(路上機撮影画像取得手段、他車両撮影画像取得手段)、10は走行制御装置(走行制御手段)、11は警告出力装置(警告出力手段)、12は路上機、13は他車両、14は制御部(三次元デジタル地図作成手段、走行経路予測手段)、18は物体配置データ・データベース(物体配置データ保持手段)、20は三次元デジタル地図記憶部(三次元デジタル地図記憶手段)である。

In the drawings, 1 is a safe driving support system, 2 is a 3D digital map creation device (3D digital map creation device), 3 is a current position detection device (current location detection means), and 4 is an operation detection device (position designation means, (Display range designation means), 5 is a display device (display means), 6 is a safe driving support control device (virtual space image creation means, real space image creation means, obstacle detection means), and 7 is a host vehicle captured image acquisition device ( Self-vehicle captured image acquisition means), 8 is a communication device (on-road vehicle captured image acquisition means, other vehicle captured image acquisition means), 10 is a travel control device (travel control means), 11 is a warning output device (warning output means), 12 is a road machine, 13 is another vehicle, 14 is a control unit (three-dimensional digital map creation means, travel route prediction means), 18 is an object arrangement data database (object arrangement data holding means), and 20 is a three-dimensional digital place. A storage unit (three-dimensional digital map storage means).

Claims (15)

物体の絶対的な配置形態を表す物体配置データを保持する物体配置データ保持手段と、
仮想的な視野を設定し、設定された仮想的な視野に対応する物体配置データを前記物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成する三次元デジタル地図作成手段とを備え
前記三次元デジタル地図作成手段は、車両用道路と歩行者用道路とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら車両用道路と歩行者用道路との境界を地面から略鉛直方向に向けられた平面で表現することを特徴とする三次元デジタル地図作成装置。
Object arrangement data holding means for holding object arrangement data representing the absolute arrangement form of the object;
A virtual field of view is set, object arrangement data corresponding to the set virtual field of view is retrieved from the object arrangement data holding means, and the object represented by the retrieved object arrangement data is modeled into a three-dimensional shape. And a 3D digital map creating means for creating a 3D digital map ,
The three-dimensional digital map creating means creates a three-dimensional digital map by modeling a vehicle road and a pedestrian road into a three-dimensional shape, and defines the boundary between the vehicle road and the pedestrian road on the ground. A three-dimensional digital map creation device, characterized in that it is represented by a plane oriented in a substantially vertical direction .
物体の絶対的な配置形態を表す物体配置データを保持する物体配置データ保持手段と、
仮想的な視野を設定し、設定された仮想的な視野に対応する物体配置データを前記物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成する三次元デジタル地図作成手段とを備え、
前記三次元デジタル地図作成手段は、道路と建造物とを三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら道路と建造物との境界を地面から略鉛直方向に向けられた平面で表現することを特徴とする三次元デジタル地図作成装置。
Object arrangement data holding means for holding object arrangement data representing the absolute arrangement form of the object;
A virtual field of view is set, object arrangement data corresponding to the set virtual field of view is retrieved from the object arrangement data holding means, and the object represented by the retrieved object arrangement data is modeled into a three-dimensional shape. And a 3D digital map creating means for creating a 3D digital map,
The three-dimensional digital map creation means, when modeling a road and a building in a three-dimensional shape to create a three-dimensional digital map, the boundary between the road and the building is directed in a substantially vertical direction from the ground. A three-dimensional digital map creation device characterized by being expressed in a plane .
物体の絶対的な配置形態を表す物体配置データを保持する物体配置データ保持手段と、
仮想的な視野を設定し、設定された仮想的な視野に対応する物体配置データを前記物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成する三次元デジタル地図作成手段とを備え、
前記三次元デジタル地図作成手段は、横断歩道や安全地帯などの特定の交通設備を三次元形状にモデリングして三次元デジタル地図を作成する場合に、それら特定の交通設備を地面から略鉛直方向に向けられた平面で囲まれた領域で表現することを特徴とする三次元デジタル地図作成装置。
Object arrangement data holding means for holding object arrangement data representing the absolute arrangement form of the object;
A virtual field of view is set, object arrangement data corresponding to the set virtual field of view is retrieved from the object arrangement data holding means, and the object represented by the retrieved object arrangement data is modeled into a three-dimensional shape. And a 3D digital map creating means for creating a 3D digital map,
The three-dimensional digital map creating means creates a three-dimensional digital map by modeling a specific traffic facility such as a pedestrian crossing or a safety zone into a three-dimensional shape. A three-dimensional digital map creation device, characterized by being represented by an area surrounded by a directed plane .
請求項1ないし3のいずれかに記載した三次元デジタル地図作成装置において、
自車両の現在位置を検出する現在位置検出手段を備え、
前記三次元デジタル地図作成手段は、前記現在位置検出手段により検出された現在位置からの視野を仮想的な視野として設定することを特徴とする三次元デジタル地図作成装置。
In the three-dimensional digital map creation device according to any one of claims 1 to 3,
A current position detecting means for detecting the current position of the host vehicle;
The three-dimensional digital map creating device sets the visual field from the current position detected by the current position detecting device as a virtual visual field .
請求項1ないし4のいずれかに記載した三次元デジタル地図作成装置において、
ユーザが位置を指定する位置指定手段を備え、
前記三次元デジタル地図作成手段は、前記位置指定手段により指定された位置からの視野を仮想的な視野として設定することを特徴とする三次元デジタル地図作成装置。
In the three-dimensional digital map creation device according to any one of claims 1 to 4,
A position specifying means for the user to specify the position;
The three-dimensional digital map creating device sets the field of view from the position designated by the position designating unit as a virtual field of view .
請求項1ないし5のいずれかに記載した三次元デジタル地図作成装置において
ユーザが表示範囲を指定する表示範囲指定手段を備え、
前記三次元デジタル地図作成手段は、前記表示範囲指定手段により指定された表示範囲に対応する物体配置データを前記物体配置データ保持手段から検索することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 5
Provided with a display range specifying means for the user to specify the display range,
The three-dimensional digital map creating device searches the object placement data corresponding to the display range designated by the display range designating means from the object placement data holding means .
請求項1ないしのいずれかに記載した三次元デジタル地図作成装置において、
自車両の走行経路を予測する走行経路予測手段と、
前記三次元デジタル地図作成手段により作成された三次元デジタル地図を記憶する三次元デジタル地図記憶手段とを備え、
前記三次元デジタル地図作成手段は、前記走行経路予測手段により複数の走行経路が予測された場合に、予測された複数の走行経路毎の物体配置データを前記物体配置データ保持手段から検索し、検索された物体配置データにより表される物体を三次元形状にモデリングして三次元デジタル地図を作成し、
前記三次元デジタル地図記憶手段は、前記三次元デジタル地図作成手段により当該予測された複数の走行経路毎に作成された三次元デジタル地図を記憶することを特徴とする三次元デジタル地図作成装置。
In the three-dimensional digital map creation device according to any one of claims 1 to 6 ,
Travel route prediction means for predicting the travel route of the host vehicle;
3D digital map storage means for storing the 3D digital map created by the 3D digital map creation means,
The three-dimensional digital map creating means searches the object arrangement data holding means for the object arrangement data for each of the plurality of estimated driving paths when the plurality of driving paths are predicted by the driving route prediction means, and performs a search. 3D digital map is created by modeling the object represented by the arranged object arrangement data into a 3D shape,
The three-dimensional digital map storage device stores the three-dimensional digital map created for each of the plurality of travel routes predicted by the three-dimensional digital map creation unit.
請求項1ないしのいずれかに記載した三次元デジタル地図作成装置において、
自車両にて撮影された画像を自車両撮影画像として取得する自車両撮影画像取得手段と、
前記物体配置データ保持手段に保持されている物体配置データに基づいて当該物体配置データにより表される物体を仮想空間に描画することで仮想空間画像を作成する仮想空間画像作成手段と、
前記自車両撮影画像取得手段により取得された自車両撮影画像を描画することで実空間画像を作成する実空間画像作成手段と、
前記仮想空間画像作成手段により作成された仮想空間画像と前記実空間画像作成手段により作成された実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する障害物検出手段とを備え、
前記三次元デジタル地図作成手段は、前記障害物検出手段により障害物が検出された場合に、前記物体配置データ保持手段に保持されている物体配置データにより表される物体と前記障害物検出手段により障害物として検出された物体とを仮想空間に描画することで、前記物体配置データにより表される物体と前記障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 7 ,
A host vehicle captured image acquisition means for acquiring an image captured by the host vehicle as a host vehicle captured image;
Virtual space image creation means for creating a virtual space image by drawing an object represented by the object placement data in the virtual space based on the object placement data held in the object placement data holding means;
Real space image creation means for creating a real space image by drawing the own vehicle captured image acquired by the own vehicle captured image acquisition means;
The virtual space image created by the virtual space image creation means is compared with the real space image created by the real space image creation means, and an object that exists in the real space image and does not exist in the virtual space image is used as an obstacle. An obstacle detection means for detecting,
The three-dimensional digital map creation means includes an object represented by the object arrangement data held in the object arrangement data holding means and the obstacle detection means when an obstacle is detected by the obstacle detection means. By drawing an object detected as an obstacle in a virtual space, the object represented by the object arrangement data and the object detected as the obstacle are combined to be modeled into a three-dimensional shape and a three-dimensional digital map three-dimensional digital cartography and wherein the creating.
請求項1ないしのいずれかに記載した三次元デジタル地図作成装置において、
路上機との間で路車間通信を行って当該路上機にて撮影された画像を路上機撮影画像として取得する路上機撮影画像取得手段と、
前記物体配置データ保持手段に保持されている物体配置データに基づいて当該物体配置データにより表される物体を仮想空間に描画することで仮想空間画像を作成する仮想空間画像作成手段と、
前記路上機撮影画像取得手段により取得された路上機撮影画像を描画することで実空間画像を作成する実空間画像作成手段と、
前記仮想空間画像作成手段により作成された仮想空間画像と前記実空間画像作成手段により作成された実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する障害物検出手段とを備え、
前記三次元デジタル地図作成手段は、前記障害物検出手段により障害物が検出された場合に、前記物体配置データ保持手段に保持されている物体配置データにより表される物体と前記障害物検出手段により障害物として検出された物体とを仮想空間に描画することで、前記物体配置データにより表される物体と前記障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 7 ,
A road-machine-captured image acquisition means for performing road-to-vehicle communication with a road-side machine and acquiring an image captured by the road-side machine as a roadside machine-captured image;
Virtual space image creation means for creating a virtual space image by drawing an object represented by the object placement data in the virtual space based on the object placement data held in the object placement data holding means;
Real space image creating means for creating a real space image by drawing the road device photographed image acquired by the road device photographed image obtaining means;
The virtual space image created by the virtual space image creation means is compared with the real space image created by the real space image creation means, and an object that exists in the real space image and does not exist in the virtual space image is used as an obstacle. An obstacle detection means for detecting,
The three-dimensional digital map creation means includes an object represented by the object arrangement data held in the object arrangement data holding means and the obstacle detection means when an obstacle is detected by the obstacle detection means. By drawing an object detected as an obstacle in a virtual space, the object represented by the object arrangement data and the object detected as the obstacle are combined to be modeled into a three-dimensional shape and a three-dimensional digital map three-dimensional digital cartography and wherein the creating.
請求項1ないしのいずれかに記載した三次元デジタル地図作成装置において、
他車両との間で車々間通信を行って当該他車両にて撮影された画像を他車両撮影画像として取得する他車両撮影画像取得手段と、
前記物体配置データ保持手段に保持されている物体配置データに基づいて当該物体配置データにより表される物体を仮想空間に描画することで仮想空間画像を作成する仮想空間画像作成手段と、
前記他車両撮影画像取得手段により取得された他車両撮影画像を描画することで実空間画像を作成する実空間画像作成手段と、
前記仮想空間画像作成手段により作成された仮想空間画像と前記実空間画像作成手段により作成された実空間画像とを比較し、実空間画像に存在し且つ仮想空間画像に存在しない物体を障害物として検出する障害物検出手段とを備え、
前記三次元デジタル地図作成手段は、前記障害物検出手段により障害物が検出された場合に、前記物体配置データ保持手段に保持されている物体配置データにより表される物体と前記障害物検出手段により障害物として検出された物体とを仮想空間に描画することで、前記物体配置データにより表される物体と前記障害物として検出された物体とを併せて三次元形状にモデリングして三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 7 ,
Other vehicle captured image acquisition means for performing inter-vehicle communication with another vehicle and acquiring an image captured by the other vehicle as another vehicle captured image;
Virtual space image creation means for creating a virtual space image by drawing an object represented by the object placement data in the virtual space based on the object placement data held in the object placement data holding means;
Real space image creation means for creating a real space image by drawing the other vehicle captured image acquired by the other vehicle captured image acquisition means;
The virtual space image created by the virtual space image creation means is compared with the real space image created by the real space image creation means, and an object that exists in the real space image and does not exist in the virtual space image is used as an obstacle. An obstacle detection means for detecting,
The three-dimensional digital map creation means includes an object represented by the object arrangement data held in the object arrangement data holding means and the obstacle detection means when an obstacle is detected by the obstacle detection means. By drawing an object detected as an obstacle in a virtual space, the object represented by the object arrangement data and the object detected as the obstacle are combined to be modeled into a three-dimensional shape and a three-dimensional digital map three-dimensional digital cartography and wherein the creating.
請求項1ないし10のいずれかに記載した三次元デジタル地図作成装置において、
前記三次元デジタル地図作成手段は、建造物を三次元形状にモデリングして三次元デジタル地図を作成する場合に、建造物に模様を付加して表現することを特徴とする三次元デジタル地図作成装置。
In the three-dimensional digital map creation device according to any one of claims 1 to 10,
The three-dimensional digital map creating means adds a pattern to a building and expresses it when modeling a building into a three-dimensional shape to create a three-dimensional digital map. .
請求項1ないし11のいずれかに記載した三次元デジタル地図作成装置において、
前記三次元デジタル地図作成手段は、移動不可能な固定物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該固定物体の特定部分が道路に対して向いている方向を示す方向属性を持たせて三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 11,
The three-dimensional digital map creation means indicates a direction in which a specific portion of the fixed object faces a road when a non-movable fixed object is modeled into a three-dimensional shape to create a three-dimensional digital map. A three-dimensional digital map creation device that creates a three-dimensional digital map with a direction attribute .
請求項1ないし12のいずれかに記載した三次元デジタル地図作成装置において、
前記三次元デジタル地図作成手段は、移動可能な移動物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該移動物体が移動すると予測される移動方向を示す移動方向属性を持たせて三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
The three-dimensional digital map creation device according to any one of claims 1 to 12,
The 3D digital map creating means has a moving direction attribute indicating a moving direction in which a moving object is predicted to move when a movable moving object is modeled into a 3D shape to create a 3D digital map. 3D digital map creation device characterized by creating a 3D digital map.
請求項1ないし13のいずれかに記載した三次元デジタル地図作成装置において、
前記三次元デジタル地図作成手段は、移動可能な移動物体を三次元形状にモデリングして三次元デジタル地図を作成する場合に、当該移動物体が移動すると予測される移動範囲を示す移動範囲属性を持たせて三次元デジタル地図を作成することを特徴とする三次元デジタル地図作成装置。
In the three-dimensional digital map creation device according to any one of claims 1 to 13,
The three-dimensional digital map creation means has a movement range attribute indicating a movement range that is predicted to move when the movable object is modeled into a three-dimensional shape to create a three-dimensional digital map. 3D digital map creation device characterized by creating a 3D digital map.
請求項1ないし14のいずれかに記載した三次元デジタル地図作成装置と、
三次元デジタル地図作成装置により作成された三次元デジタル地図を表示する表示手段とを備えたことを特徴とする三次元デジタル地図表示システム
A three-dimensional digital map creation device according to any one of claims 1 to 14 ,
A three- dimensional digital map display system comprising display means for displaying a three-dimensional digital map created by a three-dimensional digital map creation device .
JP2003279208A 2003-07-24 2003-07-24 3D digital map creation device and 3D digital map display system Expired - Fee Related JP4123096B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003279208A JP4123096B2 (en) 2003-07-24 2003-07-24 3D digital map creation device and 3D digital map display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003279208A JP4123096B2 (en) 2003-07-24 2003-07-24 3D digital map creation device and 3D digital map display system

Publications (2)

Publication Number Publication Date
JP2005044224A JP2005044224A (en) 2005-02-17
JP4123096B2 true JP4123096B2 (en) 2008-07-23

Family

ID=34265388

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003279208A Expired - Fee Related JP4123096B2 (en) 2003-07-24 2003-07-24 3D digital map creation device and 3D digital map display system

Country Status (1)

Country Link
JP (1) JP4123096B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4651485B2 (en) * 2005-08-29 2011-03-16 アルパイン株式会社 Vehicle surrounding object detection device and system
JP4802686B2 (en) * 2005-12-02 2011-10-26 アイシン・エィ・ダブリュ株式会社 Inter-vehicle communication system
JP5151452B2 (en) * 2007-12-19 2013-02-27 株式会社豊田中央研究所 Information display device
JP5725908B2 (en) * 2011-02-25 2015-05-27 株式会社ジオ技術研究所 Map data generation system
WO2017130577A1 (en) * 2016-01-25 2017-08-03 株式会社Jvcケンウッド Display device, display method, program
JP6805716B2 (en) * 2016-01-25 2020-12-23 株式会社Jvcケンウッド Display device, display method, program
EP3324360A4 (en) 2016-09-13 2019-05-08 Hitachi Information & Telecommunication Engineering, Ltd. State prediction device and state prediction method
CN110062727A (en) * 2016-10-20 2019-07-26 铁路视像有限公司 System and method for object and detection of obstacles and classification in the collision prevention of railway applications
CN109961502A (en) * 2017-12-25 2019-07-02 国民技术股份有限公司 Road conditions display methods, equipment, driving device and computer readable storage medium
GB2573792B (en) * 2018-05-17 2022-11-09 Denso Corp Surround monitoring system for vehicles

Also Published As

Publication number Publication date
JP2005044224A (en) 2005-02-17

Similar Documents

Publication Publication Date Title
KR102023858B1 (en) Driving control method and driving control device
CN107683234B (en) Ambient environment recognition apparatus and computer program product
JP6359825B2 (en) Apparatus and method for a vehicle, and storage medium containing instructions for performing the method
JP2023134478A (en) System and method for anonymizing navigation information
US9915951B2 (en) Detection of overhanging objects
JP5075331B2 (en) Map database generation system
KR101235821B1 (en) Recording medium, generation supporting device, and route guidance device
US11352021B1 (en) Systems and methods for interfacing with an occupant
CN109328376B (en) Object tracking method and object tracking device
US20210406559A1 (en) Systems and methods for effecting map layer updates based on collected sensor data
US11867819B2 (en) Automatic positioning of 2D image sign sightings in 3D space
CN101842823A (en) Method and system for the use of probe data from multiple vehicles to detect real world changes for use in updating a map
JP6613265B2 (en) Prediction device, vehicle, prediction method and program
US20200210720A1 (en) Non-transitory storage medium storing image transmission program, image transmission device, and image transmission method
JP6431204B2 (en) State prediction apparatus and state prediction method
JP4123096B2 (en) 3D digital map creation device and 3D digital map display system
JP2008128827A (en) Navigation device, navigation method, and program thereof
JP2014228526A (en) Information notification device, information notification system, information notification method and program for information notification device
US20220402521A1 (en) Autonomous path generation with path optimization
KR20200043252A (en) Overlooking image generation system of vehicle and method thereof
US10665096B2 (en) Non-transitory storage medium storing image transmission program, image transmission device, and image transmission method
JP6224344B2 (en) Information processing apparatus, information processing method, information processing system, and information processing program
EP3967978A1 (en) Detecting a construction zone by a lead autonomous vehicle (av) and updating routing plans for following autonomous vehicles (avs)
JP2005267120A (en) Peripheral vehicle distinguishing method, and travel support system using it
WO2022018970A1 (en) Information processing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050804

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071101

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080108

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080408

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080421

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110516

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120516

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120516

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130516

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140516

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees