JP2015064750A - Information presentation device for vehicle - Google Patents

Information presentation device for vehicle Download PDF

Info

Publication number
JP2015064750A
JP2015064750A JP2013198196A JP2013198196A JP2015064750A JP 2015064750 A JP2015064750 A JP 2015064750A JP 2013198196 A JP2013198196 A JP 2013198196A JP 2013198196 A JP2013198196 A JP 2013198196A JP 2015064750 A JP2015064750 A JP 2015064750A
Authority
JP
Japan
Prior art keywords
vehicle
viewpoint
image data
unit
obstacle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013198196A
Other languages
Japanese (ja)
Other versions
JP6221562B2 (en
Inventor
牧子 佐々木
Makiko Sasaki
牧子 佐々木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2013198196A priority Critical patent/JP6221562B2/en
Publication of JP2015064750A publication Critical patent/JP2015064750A/en
Application granted granted Critical
Publication of JP6221562B2 publication Critical patent/JP6221562B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an information presentation device for a vehicle capable of appropriately grasping a position of an own vehicle and effectively reminding a crew of existence of an obstacle.SOLUTION: A positioning unit positions the position of an own vehicle travelling in an own vehicle travel lane so as to approach an intersection. A moving obstacle information acquisition unit (traveling vehicle information reception unit 101) moves along other vehicle travel lane that intersects with the own vehicle travel lane at the intersection to acquire moving obstacle information containing at least position information on an obstacle approaching the intersection. A view point conversion image generation unit (view point conversion image data generation unit 109) generates a view point conversion image that is an image of a plurality of sheets generated while performing rotational transfer of a view point centering around the intersection at a predetermined timing when the own vehicle and the obstacle are determined to mingle at the intersection from a view point to look forward from the own vehicle to a view point away from the own vehicle where both own vehicle and obstacle can be looked. A monitor 15 displays the view point conversion image.

Description

本発明は、乗員に他車両の情報を提示する車両用情報提示装置に関する。   The present invention relates to a vehicle information presentation device that presents information on other vehicles to a passenger.

特許文献1には、自車周囲の俯瞰画像から車室内からの視点への画像変換をする際に、カメラの視点がどのように遷移するかを段階的に移動するアニメーションにて表現することが記載されている。   In Patent Document 1, when an image conversion from a bird's-eye view around the vehicle to a viewpoint from the passenger compartment is performed, how the camera viewpoint changes is expressed by an animation that moves step by step. Have been described.

特開2012−39341号公報JP 2012-39341 A

特許文献1に記載の技術では、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることはできない。   With the technique described in Patent Literature 1, when the host vehicle approaches an intersection, the occupant cannot move in a different lane and notice the presence of an obstacle approaching the same intersection.

本発明は、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることができる車両用情報提示装置を提供することを目的とする。   It is an object of the present invention to provide a vehicle information presentation device that allows an occupant to notice the presence of an obstacle approaching the same intersection by moving in a different lane when the host vehicle approaches the intersection. To do.

上記目的を達成するため、本発明の車両用情報提示装置は、自車両と障害物とが交差点で交錯すると判断される所定のタイミングで、自車両から前方を見る視点から自車両と障害物との双方を見ることができる自車両から離れた視点まで、交差点を中心として視点を回転移動させながら生成される複数枚の画像である視点変換画像を生成して、表示部に表示する。   In order to achieve the above-described object, the vehicle information presentation device of the present invention is configured such that the host vehicle and the obstacle are viewed from the viewpoint of looking forward from the host vehicle at a predetermined timing at which the host vehicle and the obstacle are determined to intersect at an intersection. A viewpoint conversion image, which is a plurality of images generated while rotating the viewpoint around the intersection, to a viewpoint far from the host vehicle that can see both of them is generated and displayed on the display unit.

本発明の車両用情報提示装置によれば、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることができる。   According to the vehicle information presentation device of the present invention, when the host vehicle approaches the intersection, the occupant can move in different lanes and notice the presence of an obstacle approaching the same intersection.

一実施形態の車両用情報提示装置を示すブロック図である。It is a block diagram which shows the information presentation apparatus for vehicles of one Embodiment. 図1中の走行車両情報提供サーバ20の概要の第1の例を示す図である。It is a figure which shows the 1st example of the outline | summary of the traveling vehicle information provision server 20 in FIG. 図1中の走行車両情報提供サーバ20の概要の第2の例を示す図である。It is a figure which shows the 2nd example of the outline | summary of the traveling vehicle information provision server 20 in FIG. 図1中の制御部10の機能的な内部構成を示すブロック図である。It is a block diagram which shows the functional internal structure of the control part 10 in FIG. 他車両が建物等で隠れて見えないとき、モニタ15に表示される画像の一例を示す図である。It is a figure which shows an example of the image displayed on the monitor, when another vehicle is hidden in a building etc. and cannot be seen. 自車両に他車両が接近したときに、モニタ15に表示される視点変換画像の第1の例を示す図である。It is a figure which shows the 1st example of the viewpoint conversion image displayed on the monitor, when another vehicle approaches the own vehicle. 自車両に他車両が接近したときに、モニタ15に表示される視点変換画像の第2の例を示す図である。It is a figure which shows the 2nd example of the viewpoint conversion image displayed on the monitor, when another vehicle approaches the own vehicle. 自車両に他車両が接近したときに、モニタ15に表示される視点変換画像の第3の例を示す図である。It is a figure which shows the 3rd example of the viewpoint conversion image displayed on the monitor, when another vehicle approaches the own vehicle. 図6〜図8それぞれに示す自車両と他車両との位置関係を示す平面図である。It is a top view which shows the positional relationship of the own vehicle and other vehicle which are shown in each of FIGS. 図6〜図8に示す視点変換画像を生成する際の視点の回転移動を説明するための図である。It is a figure for demonstrating the rotational movement of the viewpoint at the time of producing | generating the viewpoint conversion image shown in FIGS. 一実施形態の車両用情報提示装置における動作を示すフローチャートである。It is a flowchart which shows the operation | movement in the information presentation apparatus for vehicles of one Embodiment.

以下、一実施形態の車両用情報提示装置について、添付図面を参照して説明する。図1において、測位部11は、自車両の現在位置を測位する。測位部11は、例えば、GPS衛星からのGPS電波をGPSアンテナで受信して、自車両の現在位置を測位する。   Hereinafter, a vehicle information presentation apparatus according to an embodiment will be described with reference to the accompanying drawings. In FIG. 1, a positioning unit 11 measures the current position of the host vehicle. For example, the positioning unit 11 receives GPS radio waves from GPS satellites with a GPS antenna, and measures the current position of the host vehicle.

測位部11が自車両の現在位置を測位した測位データD11は、制御部10に入力される。測位部11は、ジャイロ等のGPS以外の測位方法で自車両の現在位置を測位してもよい。測位部11は、GPSとジャイロとを組み合わせて現在位置を測位してもよい。測位部11の機能を制御部10の内部に設けてもよい。   Positioning data D11 obtained by the positioning unit 11 measuring the current position of the host vehicle is input to the control unit 10. The positioning unit 11 may measure the current position of the host vehicle by a positioning method other than GPS, such as a gyro. The positioning unit 11 may measure the current position by combining GPS and a gyro. The function of the positioning unit 11 may be provided inside the control unit 10.

地図情報保持部12は、地図情報を保持する。地図情報は、3次元(3D)表示が可能な情報であることが好ましい。地図情報保持部12は、ハードディスク・ドライブ,半導体メモリ,光ディスク等の任意の記録媒体でよい。地図情報保持部12より出力された地図データD12は、制御部10に入力される。   The map information holding unit 12 holds map information. The map information is preferably information that can be displayed in three dimensions (3D). The map information holding unit 12 may be an arbitrary recording medium such as a hard disk drive, a semiconductor memory, or an optical disk. The map data D12 output from the map information holding unit 12 is input to the control unit 10.

自車両内には、自車両から自車両の外部前方を撮影するカメラ13が取り付けられている。カメラ13で自車両の前方を撮影した撮影データD13は、制御部10に入力される。   A camera 13 that captures an image of the front side of the host vehicle from the host vehicle is attached to the host vehicle. Shooting data D13 obtained by shooting the front of the host vehicle with the camera 13 is input to the control unit 10.

通信部14は、制御部10による制御に基づいて、走行車両情報提供サーバ20と通信する。走行車両情報提供サーバ20は、後述するように、道路を走行する車両に関する情報を提供する。通信部14は、制御部10による制御に基づいて、画像提供サーバ30と通信する。画像提供サーバ30は、道路を撮影した実画像データを提供する。   The communication unit 14 communicates with the traveling vehicle information providing server 20 based on control by the control unit 10. The traveling vehicle information provision server 20 provides information related to a vehicle traveling on a road, as will be described later. The communication unit 14 communicates with the image providing server 30 based on control by the control unit 10. The image providing server 30 provides actual image data obtained by photographing a road.

通信部14は、走行車両情報提供サーバ20より提供された走行車両データD20を制御部10に供給する。走行車両データD20は、他車両の走行車両データを含む。通信部14は、画像提供サーバ30より提供された実画像データD30を制御部10に供給する。   The communication unit 14 supplies the traveling vehicle data D20 provided from the traveling vehicle information providing server 20 to the control unit 10. The traveling vehicle data D20 includes traveling vehicle data of other vehicles. The communication unit 14 supplies the real image data D30 provided from the image providing server 30 to the control unit 10.

制御部10には、後述する注意画像を表示するモニタ(表示部)15と、後述する注意音声を発生させるスピーカ16とが接続されている。   Connected to the control unit 10 are a monitor (display unit) 15 for displaying a caution image, which will be described later, and a speaker 16 for generating a caution sound, which will be described later.

ここで、図2,図3を用いて、走行車両情報提供サーバ20の概要について説明する。図2に示すように、交差点201の近傍には、それぞれの車線を撮影するカメラ202a〜202dが配置されている。カメラ202a〜202dは、それぞれの車線を撮影して、撮影データを無線または有線にて走行車両情報提供サーバ20に送信する。   Here, the outline | summary of the traveling vehicle information provision server 20 is demonstrated using FIG. 2, FIG. As shown in FIG. 2, cameras 202 a to 202 d that photograph the respective lanes are arranged in the vicinity of the intersection 201. The cameras 202a to 202d capture the respective lanes and transmit the captured data to the traveling vehicle information providing server 20 wirelessly or by wire.

図2の例では、カメラ202aは車両203aを撮影した撮影データを走行車両情報提供サーバ20に送信し、カメラ202bは車両203bを撮影した撮影データを走行車両情報提供サーバ20に送信する。   In the example of FIG. 2, the camera 202 a transmits shooting data obtained by photographing the vehicle 203 a to the traveling vehicle information provision server 20, and the camera 202 b transmits photographing data obtained by photographing the vehicle 203 b to the traveling vehicle information provision server 20.

走行車両情報提供サーバ20は、カメラ202a〜202dから送信された撮影データを解析して、交差点201に近付いてくる車両(ここでは車両203a,203b)とその位置を検出する。走行車両情報提供サーバ20は、パターン認識によって撮影データ内に含まれる車両の画像を検出することが可能である。   The traveling vehicle information providing server 20 analyzes the photographing data transmitted from the cameras 202a to 202d, and detects vehicles approaching the intersection 201 (here, vehicles 203a and 203b) and their positions. The traveling vehicle information providing server 20 can detect an image of the vehicle included in the shooting data by pattern recognition.

走行車両情報提供サーバ20は、どの車線に交差点201に近付いてくる車両が存在するかを示し、近付いてくる車両の位置情報を含む走行車両データD20を通信部14に送信する。   The traveling vehicle information provision server 20 indicates which lane the vehicle approaching the intersection 201 exists, and transmits traveling vehicle data D20 including the position information of the approaching vehicle to the communication unit 14.

走行車両情報提供サーバ20が車両の種別(乗用車,トラック,バス等)や車体の色を検出して、車両の種別を示す情報や車体の色を示す情報を含む走行車両データD20を通信部14に送信してもよい。   The traveling vehicle information providing server 20 detects the type of vehicle (passenger car, truck, bus, etc.) and the color of the vehicle body, and transmits the traveling vehicle data D20 including information indicating the vehicle type and information indicating the color of the vehicle body to the communication unit 14. May be sent to.

図3は、図2とは異なる方法によって交差点201に近付いてくる車両を検出する方法を示している。図3に示すように、交差点201の近傍には、それぞれの車線を走行する車両と通信する通信機器204a〜204dが配置されている。   FIG. 3 shows a method of detecting a vehicle approaching the intersection 201 by a method different from that in FIG. As shown in FIG. 3, communication devices 204 a to 204 d that communicate with vehicles traveling in the respective lanes are disposed in the vicinity of the intersection 201.

図3では、車両205a,205cが車線を走行している。車線を走行する車両は、車両情報送信部215を搭載している。車両情報送信部215は、測位部11と同様にGPS電波を受信して自車両の現在位置を測位する。車両情報送信部215は、自車両の位置情報に加えて、自車両を識別するための識別情報を無線にて送信することが好ましい。   In FIG. 3, the vehicles 205a and 205c are traveling in the lane. A vehicle traveling in the lane is equipped with a vehicle information transmission unit 215. The vehicle information transmission unit 215 receives GPS radio waves in the same manner as the positioning unit 11 and measures the current position of the host vehicle. It is preferable that the vehicle information transmission unit 215 wirelessly transmits identification information for identifying the host vehicle in addition to the position information of the host vehicle.

識別情報は、例えば、車両の種別を示す情報、車名を示す情報、車体の色を示す情報のうちのいずれか1つまたは複数である。   The identification information is, for example, one or more of information indicating the type of vehicle, information indicating the vehicle name, and information indicating the color of the vehicle body.

通信機器204a〜204dは、交差点201に近付いてくる車両に搭載されている車両情報送信部215から送信されたそれぞれの車両の位置情報と識別情報とを含む車両情報を受信して、車両情報を無線または有線にて走行車両情報提供サーバ20に送信する。   The communication devices 204a to 204d receive the vehicle information including the position information and the identification information of each vehicle transmitted from the vehicle information transmission unit 215 mounted on the vehicle approaching the intersection 201, and receive the vehicle information. It transmits to the traveling vehicle information provision server 20 by radio | wireless or a wire communication.

走行車両情報提供サーバ20は、どの車線に交差点201に近付いてくる車両が存在するかを示し、近付いてくる車両の識別情報と位置情報とを含む走行車両データD20を通信部14に送信する。   The traveling vehicle information providing server 20 indicates in which lane a vehicle approaching the intersection 201 exists, and transmits traveling vehicle data D20 including identification information and position information of the approaching vehicle to the communication unit 14.

図4を用いて、制御部10の具体的な動作について説明する。図4は、制御部10の機能的な内部構成を示している。制御部10をマイクロコンピュータで構成してもよい。以下に説明する制御部10の動作は、コンピュータプログラムで実現することも可能である。   A specific operation of the control unit 10 will be described with reference to FIG. FIG. 4 shows a functional internal configuration of the control unit 10. The control unit 10 may be configured with a microcomputer. The operation of the control unit 10 described below can also be realized by a computer program.

図4において、走行車両情報受信部101には、測位部11より出力された測位データD11と、通信部14より供給された走行車両データD20とが入力される。走行車両情報受信部101は、走行車両データD20のうち、自車両が走行する車線(自車走行車線)とは異なる自車走行車線と交差する車線(他車走行車線)を走行して、交差点201に近付いてくる車両(他車両)の情報を抽出する。走行車両情報受信部101は、他車両データD101を出力する。   In FIG. 4, the traveling vehicle information receiving unit 101 receives the positioning data D11 output from the positioning unit 11 and the traveling vehicle data D20 supplied from the communication unit 14. The traveling vehicle information receiving unit 101 travels in a lane (another vehicle traveling lane) that intersects the own vehicle traveling lane different from the lane (the own vehicle traveling lane) in which the own vehicle travels in the traveling vehicle data D20. Information on a vehicle (another vehicle) approaching 201 is extracted. The traveling vehicle information receiving unit 101 outputs other vehicle data D101.

他車両データD101は、仮想画像データ生成部102,判定部103,画像データ重畳部104,検出部111に入力される。   The other vehicle data D101 is input to the virtual image data generation unit 102, the determination unit 103, the image data superimposition unit 104, and the detection unit 111.

仮想画像データ生成部102は、他車両データD101に基づいて他車両の仮想画像データD102を生成する。走行車両データD20(他車両データD101)が車両の種別を示す情報または車名を示す情報を含めば、他車両の大きさや形状に対応した仮想画像データD102を生成することができる。走行車両データD20(他車両データD101)が車体の色を示す情報を含めば、他車両の色に対応した仮想画像データD102を生成することができる。   The virtual image data generation unit 102 generates virtual image data D102 of another vehicle based on the other vehicle data D101. If the traveling vehicle data D20 (other vehicle data D101) includes information indicating the type of vehicle or information indicating the vehicle name, virtual image data D102 corresponding to the size and shape of the other vehicle can be generated. If the traveling vehicle data D20 (other vehicle data D101) includes information indicating the color of the vehicle body, virtual image data D102 corresponding to the color of the other vehicle can be generated.

判定部103には、他車両データD101の他、測位データD11と、地図情報保持部12より出力された地図データD12とが入力される。地図データD12は、道路に隣接する建物の平面的な大きさ及び高さの情報を含む。よって、判定部103は、測位データD11に基づく自車両の位置から、他車両データD101に基づく位置の他車両を見たとき、他車両が見えるか、建物の死角となって他車両が見えないかを判定することができる。   In addition to other vehicle data D101, positioning data D11 and map data D12 output from map information holding unit 12 are input to determination unit 103. The map data D12 includes information on the planar size and height of a building adjacent to the road. Therefore, when the determination unit 103 sees another vehicle at a position based on the other vehicle data D101 from the position of the own vehicle based on the positioning data D11, the other vehicle can be seen, or the other vehicle cannot be seen as a blind spot of the building. Can be determined.

判定部103は、他車両が見えるか否かを示す判定データD103を画像データ重畳部104に供給する。画像データ重畳部104には、他車両データD101及び判定データD103の他、測位データD11と、撮影データD13と、仮想画像データD102とが入力される。   The determination unit 103 supplies determination data D103 indicating whether or not another vehicle is visible to the image data superimposing unit 104. In addition to other vehicle data D101 and determination data D103, positioning data D11, shooting data D13, and virtual image data D102 are input to the image data superimposing unit 104.

画像データ重畳部104は、判定データD103が、他車両が見えないことを示すとき、撮影データD13に仮想画像データD102を重畳する。画像データ重畳部104は、測位データD11が示す位置情報と、他車両データD101が示す位置情報とを参照して、撮影データD13の画像内の他車両が走行している位置に、仮想画像データD102による仮想画像を重畳することができる。   The image data superimposing unit 104 superimposes the virtual image data D102 on the shooting data D13 when the determination data D103 indicates that no other vehicle is visible. The image data superimposing unit 104 refers to the position information indicated by the positioning data D11 and the position information indicated by the other vehicle data D101, and displays the virtual image data at the position where the other vehicle is traveling in the image of the captured data D13. A virtual image by D102 can be superimposed.

なお、カメラ13による撮影範囲は予め分かっており、測位データD11が示す位置情報に基づいて、カメラ13による撮影範囲内のそれぞれの位置を特定することができる。よって、撮影データD13の画像に他車両を示す仮想画像を重畳することができる。   Note that the shooting range by the camera 13 is known in advance, and each position within the shooting range by the camera 13 can be specified based on the position information indicated by the positioning data D11. Therefore, a virtual image showing another vehicle can be superimposed on the image of the shooting data D13.

画像データ重畳部104は、判定データD103が、他車両が見えることを示すとき、撮影データD13をそのまま出力する。画像データ重畳部104は、仮想画像データD102を重畳した撮影データD13または撮影データD13そのままをカメラ画像データD104として出力する。   When the determination data D103 indicates that another vehicle can be seen, the image data superimposing unit 104 outputs the shooting data D13 as it is. The image data superimposing unit 104 outputs the photographic data D13 superimposed with the virtual image data D102 or the photographic data D13 as it is as the camera image data D104.

検出部111は、測位データD11と他車両データD101とに基づいて、自車両と他車両とが同じ交差点に所定の時間差以内で進入する状況の発生を検出する。検出部111は、自車両と他車両とが同じ交差点に所定の時間差以内で進入する状況の発生を検出したら、検出データD111を画像データ切換部105,音声データ生成部106,視点変換画像データ生成部109に供給する。   Based on the positioning data D11 and other vehicle data D101, the detection unit 111 detects the occurrence of a situation in which the host vehicle and the other vehicle enter the same intersection within a predetermined time difference. When detecting the occurrence of a situation in which the host vehicle and another vehicle enter the same intersection within a predetermined time difference, the detection unit 111 detects the detection data D111 as an image data switching unit 105, an audio data generation unit 106, and viewpoint-converted image data generation. Supplied to the unit 109.

画像データ切換部105は、カメラ画像データD104をモニタ15に供給する。後述するように、画像データ切換部105は、検出部111より検出データD111が供給されたら、カメラ画像データD104の代わりに、視点変換画像データ生成部109より出力された視点変換画像データD109をモニタ15に供給する。   The image data switching unit 105 supplies the camera image data D104 to the monitor 15. As will be described later, when the detection data D111 is supplied from the detection unit 111, the image data switching unit 105 monitors the viewpoint conversion image data D109 output from the viewpoint conversion image data generation unit 109 instead of the camera image data D104. 15 is supplied.

図5は、他車両が建物等で隠れて見えないとき、モニタ15に表示される画像の一例を示している。自車両が走行する車線と交差する車線を右方向から左方向へと走行している他車両は、実際には建物50で見えない。しかしながら、画像データ重畳部104は、撮影データD13に仮想画像データD102を重畳したカメラ画像データD104を出力することから、仮想画像による他車両V102iが表示されている。   FIG. 5 shows an example of an image displayed on the monitor 15 when another vehicle is hidden behind a building or the like and cannot be seen. Other vehicles traveling from the right direction to the left direction in the lane intersecting with the lane in which the host vehicle is traveling are not actually visible in the building 50. However, since the image data superimposing unit 104 outputs the camera image data D104 in which the virtual image data D102 is superimposed on the shooting data D13, the other vehicle V102i based on the virtual image is displayed.

図4に戻り、画像受信部107は、実画像データD30を受信して視点変換画像データ生成部109に供給する。視点変換画像データ生成部109には、実画像データD30の他、地図データD12と、自車両情報保持部110より出力された自車両データD110とが入力される。   Returning to FIG. 4, the image receiving unit 107 receives the real image data D <b> 30 and supplies it to the viewpoint-converted image data generating unit 109. In addition to the actual image data D30, the map data D12 and the own vehicle data D110 output from the own vehicle information holding unit 110 are input to the viewpoint conversion image data generation unit 109.

自車両データD110は、例えば、車両の種別を示す情報、車名を示す情報、車体の色を示す情報のうちのいずれか1つまたは複数である。図4に示す例では、自車両情報保持部110を制御部10内に設けているが、制御部10外の不揮発性メモリを自車両情報保持部としてもよい。   The own vehicle data D110 is, for example, one or more of information indicating the type of vehicle, information indicating the vehicle name, and information indicating the color of the vehicle body. In the example shown in FIG. 4, the host vehicle information holding unit 110 is provided in the control unit 10, but a nonvolatile memory outside the control unit 10 may be used as the host vehicle information holding unit.

視点変換画像データ生成部109は、仮想画像データ生成部1090を有する。仮想画像データ生成部1090は、自車両データD110に基づいて自車両の仮想画像データを生成する。自車両データD110が車両の種別を示す情報または車名を示す情報を含めば、自車両の大きさや形状に対応した仮想画像データを生成することができる。自車両データD110が車体の色を示す情報を含めば、自車両の色に対応した仮想画像データを生成することができる。   The viewpoint conversion image data generation unit 109 includes a virtual image data generation unit 1090. The virtual image data generation unit 1090 generates virtual image data of the host vehicle based on the host vehicle data D110. If the host vehicle data D110 includes information indicating the type of vehicle or information indicating the vehicle name, virtual image data corresponding to the size and shape of the host vehicle can be generated. If the host vehicle data D110 includes information indicating the color of the vehicle body, virtual image data corresponding to the color of the host vehicle can be generated.

また、仮想画像データ生成部1090は、仮想画像データ生成部102と同様に、他車両データD101に基づいて他車両の仮想画像データを生成する。   Similarly to the virtual image data generation unit 102, the virtual image data generation unit 1090 generates virtual image data of another vehicle based on the other vehicle data D101.

図4では、便宜上、仮想画像データ生成部102と仮想画像データ生成部1090とを分けているが、1つの仮想画像データ生成部で構成してもよい。   In FIG. 4, for the sake of convenience, the virtual image data generation unit 102 and the virtual image data generation unit 1090 are separated, but may be configured by one virtual image data generation unit.

視点変換画像データ生成部109は、検出部111より検出データD111が供給されたら、例えば図6〜図8に示すような画像を表す視点変換画像データD109を生成する。   When the detection data D111 is supplied from the detection unit 111, the viewpoint conversion image data generation unit 109 generates viewpoint conversion image data D109 representing an image as illustrated in FIGS.

図6の(a)は、撮影データD13による実画像の第1の例を示している。図6の(a)では、他車両V101が、自車両が走行する車線と交差する車線を右方向から左方向へと走行している。図6の(a)を平面的に見ると、自車両V110と他車両V101とは図9の(a)に示すような位置関係にある。   FIG. 6A shows a first example of an actual image based on the shooting data D13. In FIG. 6A, the other vehicle V101 is traveling from the right direction to the left direction in the lane that intersects the lane in which the host vehicle is traveling. When FIG. 6A is viewed in plan, the host vehicle V110 and the other vehicle V101 are in a positional relationship as shown in FIG.

図6の(b)〜(d)は、視点変換画像データ生成部109が生成する視点変換画像データD109による仮想画像を示している。図6の(b)〜(d)において、V101i,V110iは、それぞれ、他車両V101を仮想画像データ生成部1090によって生成した仮想画像データによって表した仮想画像の他車両(仮想画像他車両)と自車両(仮想画像自車両)を示している。   6B to 6D show virtual images based on the viewpoint conversion image data D109 generated by the viewpoint conversion image data generation unit 109. FIG. 6 (b) to 6 (d), V101i and V110i are respectively a virtual image other vehicle (virtual image other vehicle) in which the other vehicle V101 is represented by virtual image data generated by the virtual image data generation unit 1090. The own vehicle (virtual image own vehicle) is shown.

仮想画像データ生成部1090は、地図データD12に基づいて、図6の(b)〜(d)における仮想画像の背景画像を表す仮想画像データを生成する。   The virtual image data generation unit 1090 generates virtual image data representing the background image of the virtual image in FIGS. 6B to 6D based on the map data D12.

視点変換画像データ生成部109は、図6の(a)に示す自車両V110からの視点から、図6の(d)に示す仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる視点へと視点を順次移動させていく視点変換画像データD109を生成する。   The viewpoint conversion image data generation unit 109 looks at both the virtual image host vehicle V110i and the virtual image other vehicle V101i shown in FIG. 6D from the viewpoint from the host vehicle V110 shown in FIG. Viewpoint-converted image data D109 is generated in which the viewpoint is sequentially moved to the viewpoint capable of performing

具体的には、視点変換画像データ生成部109は、図6の(b)に示すように、自車両V110からの視点から見て左方向に視点を所定量移動させた状態から、図6の(d)に示す最終の視点の位置まで、視点を順次移動させながら、背景画像を表す仮想画像データを順次生成する。視点を移動させる所定量は適宜設定すればよい。   Specifically, as shown in FIG. 6B, the viewpoint-converted image data generation unit 109 moves the viewpoint from the viewpoint of the host vehicle V110 leftward by a predetermined amount, as shown in FIG. Virtual image data representing the background image is sequentially generated while sequentially moving the viewpoint to the position of the final viewpoint shown in (d). The predetermined amount for moving the viewpoint may be set as appropriate.

このとき、視点変換画像データ生成部109は、図10の(a)に示すように、視点を、交差点301を中心として、厳密には交差点301の中心点301cを中心として、水平方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と他車両V101との双方を見ることができる所定の回転位置を、最終の視点の位置とする。   At this time, as shown in FIG. 10A, the viewpoint-converted image data generation unit 109 rotates the viewpoint in the horizontal direction around the intersection 301, specifically, around the center point 301c of the intersection 301. Let The viewpoint-converted image data generation unit 109 sets a predetermined rotational position at which the host vehicle V110 and the other vehicle V101 can be viewed when viewing the direction of the intersection 301 as the final viewpoint position.

視点変換画像データ生成部109は、背景画像を表す仮想画像データに、それぞれの視点で見ることができる仮想画像他車両V101i、または、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。   The viewpoint conversion image data generation unit 109 adds virtual image other vehicle V101i that can be seen from each viewpoint, or virtual image data of the virtual image other vehicle V101i and the virtual image host vehicle V110i to the virtual image data representing the background image. Superimpose.

図6の(a)では、他車両V101は自車両V110に対して右側に位置しているため、図10の(a)に示すように、他車両V101が存在していない車線側に時計回りに視点を回転移動させていくのが好適である。   In FIG. 6A, the other vehicle V101 is located on the right side with respect to the host vehicle V110. Therefore, as shown in FIG. 10A, the other vehicle V101 rotates clockwise toward the lane where the other vehicle V101 does not exist. It is preferable to rotate the viewpoint.

以上のようにして、視点変換画像データ生成部109は、自車両V110からの視点から仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。視点を順次移動させていく画像は好ましくは動画像であり、最終の視点の位置は適宜設定すればよい。   As described above, the viewpoint conversion image data generation unit 109 spends a predetermined time from the viewpoint from the host vehicle V110 to the final viewpoint at which both the virtual image host vehicle V110i and the virtual image other vehicle V101i can be viewed. Then, viewpoint-converted image data D109 of an image in which the viewpoint is sequentially moved is generated. The image in which the viewpoint is sequentially moved is preferably a moving image, and the position of the final viewpoint may be set as appropriate.

視点変換画像データ生成部109は、地図データD12に基づいて背景画像を表す仮想画像データを生成する代わりに、画像提供サーバ30より提供される実画像データD30に基づいて実画像の背景画像を表す画像データを生成してもよい。   The viewpoint conversion image data generation unit 109 represents the background image of the actual image based on the actual image data D30 provided from the image providing server 30, instead of generating virtual image data representing the background image based on the map data D12. Image data may be generated.

自車両V110と他車両V101との位置関係が決まれば、必要となる実画像の背景画像が決まる。画像要求部108は、測位データD11が示す自車両V110の位置情報と他車両データD101が示す他車両V101の位置情報とに基づいて、画像提供サーバ30に、視点変換画像データD109を生成するのに必要となる実画像データD30の提供を要求する。   If the positional relationship between the host vehicle V110 and the other vehicle V101 is determined, a background image of a necessary real image is determined. The image request unit 108 generates viewpoint-converted image data D109 in the image providing server 30 based on the position information of the host vehicle V110 indicated by the positioning data D11 and the position information of the other vehicle V101 indicated by the other vehicle data D101. Request for the actual image data D30 necessary for the above.

実画像データD30は、要求された実画像データD30を通信部14へと送信する。画像受信部107は、画像データD30を受信して視点変換画像データ生成部109に供給する。これによって、視点変換画像データ生成部109は、地図データD12に基づく仮想画像データの代わりに、実画像データD30に基づく実画像の背景画像を用いた視点変換画像データD109を生成することができる。   The actual image data D30 transmits the requested actual image data D30 to the communication unit 14. The image receiving unit 107 receives the image data D30 and supplies it to the viewpoint conversion image data generation unit 109. As a result, the viewpoint-converted image data generation unit 109 can generate viewpoint-converted image data D109 using a background image of the actual image based on the actual image data D30, instead of the virtual image data based on the map data D12.

この場合、図6の(b)〜(d)は、実画像の背景画像に仮想画像他車両V101iや仮想画像自車両V110iが重畳された状態となる。   In this case, (b) to (d) in FIG. 6 are in a state where the virtual image other vehicle V101i and the virtual image host vehicle V110i are superimposed on the background image of the real image.

図7の(a)は、撮影データD13による実画像の第2の例を示している。図7の(a)では、他車両V101が、自車両が走行する車線と交差する車線を左方向から右方向へと走行している。図7の(a)を平面的に見ると、自車両V110と他車両V101とは図9の(b)に示すような位置関係にある。   FIG. 7A shows a second example of an actual image based on the shooting data D13. In FIG. 7A, the other vehicle V101 is traveling from the left direction to the right direction in the lane that intersects the lane in which the host vehicle travels. When FIG. 7A is viewed in plan, the host vehicle V110 and the other vehicle V101 are in a positional relationship as shown in FIG. 9B.

視点変換画像データ生成部109は、図7の(b)に示すように、自車両V110からの視点から見て右方向に視点を所定量移動させた状態から、図7の(d)に示す最終の視点の位置まで、視点を順次移動させながら、背景画像を表す仮想画像データを順次生成する。   As shown in FIG. 7B, the viewpoint-converted image data generation unit 109 is shown in FIG. 7D from a state where the viewpoint is moved a predetermined amount in the right direction when viewed from the viewpoint from the host vehicle V110. Virtual image data representing the background image is sequentially generated while sequentially moving the viewpoint to the position of the final viewpoint.

このとき、視点変換画像データ生成部109は、図10の(b)に示すように、視点を、交差点301(中心点301c)を中心として水平方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と他車両V101との双方を見ることができる所定の回転位置を、最終の視点の位置とする。   At this time, the viewpoint converted image data generation unit 109 rotates the viewpoint in the horizontal direction around the intersection 301 (center point 301c) as shown in FIG. The viewpoint-converted image data generation unit 109 sets a predetermined rotational position at which the host vehicle V110 and the other vehicle V101 can be viewed when viewing the direction of the intersection 301 as the final viewpoint position.

視点変換画像データ生成部109は、背景画像を表す仮想画像データに、それぞれの視点で見ることができる仮想画像他車両V101i、または、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。   The viewpoint conversion image data generation unit 109 adds virtual image other vehicle V101i that can be seen from each viewpoint, or virtual image data of the virtual image other vehicle V101i and the virtual image host vehicle V110i to the virtual image data representing the background image. Superimpose.

図7の(a)では、他車両V101は自車両V110に対して左側に位置しているため、図10の(b)に示すように、他車両V101が存在していない車線側に反時計回りに視点を回転移動させていくのが好適である。   In FIG. 7A, the other vehicle V101 is located on the left side with respect to the host vehicle V110. Therefore, as shown in FIG. 10B, the other vehicle V101 is counterclockwise on the lane side where the other vehicle V101 does not exist. It is preferable to rotate the viewpoint around.

図7の(b)〜(d)においても、視点変換画像データ生成部109は、自車両V110からの視点から仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。   In (b) to (d) of FIG. 7, the viewpoint-converted image data generation unit 109 can finally view both the virtual image host vehicle V110i and the virtual image other vehicle V101i from the viewpoint from the host vehicle V110. Viewpoint conversion image data D109 of an image in which the viewpoint is sequentially moved over a predetermined time until the viewpoint is generated.

図7の(b)〜(d)でも同様に、視点変換画像データ生成部109は、画像提供サーバ30より提供される実画像データD30に基づいて生成した実画像の背景画像を表す画像データを用いて、視点変換画像データD109を生成してもよい。   Similarly, in (b) to (d) of FIG. 7, the viewpoint conversion image data generation unit 109 generates image data representing the background image of the actual image generated based on the actual image data D30 provided from the image providing server 30. It may be used to generate viewpoint conversion image data D109.

図8の(a)は、撮影データD13による実画像の第3の例を示している。図8の(a)では、1台の他車両V101が、自車両が走行する車線と交差する車線を左方向から右方向へと走行し、他の1台の他車両V101が右方向から左方向へと走行している。図8の(a)を平面的に見ると、自車両V110と2台の他車両V101とは図9の(c)に示すような位置関係にある。   FIG. 8A shows a third example of an actual image based on the shooting data D13. In FIG. 8A, one other vehicle V101 travels from the left to the right in the lane intersecting the lane on which the host vehicle travels, and the other one other vehicle V101 moves from the right to the left. Driving in the direction. When FIG. 8A is viewed in plan, the host vehicle V110 and the two other vehicles V101 are in a positional relationship as shown in FIG. 9C.

視点変換画像データ生成部109は、図8の(b)に示すように、自車両V110からの視点を上方に所定量移動させた状態から、図8の(d)に示す上空から見た最終の視点の位置まで、視点を順次上方へと移動させた背景画像を表す仮想画像データを生成する。   As shown in FIG. 8B, the viewpoint-converted image data generation unit 109 moves the viewpoint from the host vehicle V110 upward by a predetermined amount, and finally looks from the sky shown in FIG. 8D. Virtual image data representing a background image in which the viewpoint is sequentially moved upward to the position of the viewpoint is generated.

このとき、視点変換画像データ生成部109は、図10の(c)に示すように、視点を、交差点301(中心点301c)を中心として垂直方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と2台の他車両V101とを見ることができる所定の回転位置を、最終の視点の位置とする。   At this time, the viewpoint-converted image data generation unit 109 rotates the viewpoint in the vertical direction about the intersection 301 (center point 301c) as shown in FIG. The viewpoint-converted image data generation unit 109 sets a predetermined rotational position at which the host vehicle V110 and the two other vehicles V101 can be viewed as the final viewpoint position when viewing the direction of the intersection 301.

視点変換画像データ生成部109は、背景画像を表す仮想画像データに、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。   The viewpoint conversion image data generation unit 109 superimposes virtual image data of the virtual image other vehicle V101i and the virtual image host vehicle V110i on the virtual image data representing the background image.

図8の(a)では、他車両V101は自車両V110に対して左側及び右側の双方に位置しているため、図10の(c)に示すように、視点を自車両V110からの視点から上方へと回転移動させていくのが好適である。   In FIG. 8A, since the other vehicle V101 is located on both the left side and the right side of the host vehicle V110, the viewpoint is viewed from the viewpoint from the host vehicle V110 as shown in FIG. It is preferable to rotate it upward.

図8の(b)〜(d)においても、視点変換画像データ生成部109は、自車両V110からの視点から2つの仮想画像他車両V101i及び仮想画像自車両V110iの全体を俯瞰的に見ることができる上空の最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。   Also in (b) to (d) of FIG. 8, the viewpoint conversion image data generation unit 109 provides a bird's-eye view of the entire two virtual image other vehicles V101i and the virtual image host vehicle V110i from the viewpoint from the host vehicle V110. The viewpoint-converted image data D109 of the image in which the viewpoint is sequentially moved over a predetermined time until the final viewpoint in the sky capable of being generated is generated.

図8の(b)〜(d)でも同様に、視点変換画像データ生成部109は、画像提供サーバ30より提供される実画像データD30に基づいて生成した実画像の背景画像を表す画像データを用いて、視点変換画像データD109を生成してもよい。   Similarly, in (b) to (d) of FIG. 8, the viewpoint conversion image data generation unit 109 generates image data representing the background image of the actual image generated based on the actual image data D30 provided from the image providing server 30. It may be used to generate viewpoint conversion image data D109.

図4に戻り、視点変換画像データ生成部109によって生成された視点変換画像データD109は、画像データ切換部105に入力される。画像データ切換部105は、カメラ画像データD104と視点変換画像データD109とを選択的に切り換えて出力する。画像データ切換部105は、検出部111より検出データD111が供給されなければ、カメラ画像データD104を選択し、検出部111より検出データD111が供給されたら、視点変換画像データD109を選択する。   Returning to FIG. 4, the viewpoint converted image data D 109 generated by the viewpoint converted image data generation unit 109 is input to the image data switching unit 105. The image data switching unit 105 selectively switches between the camera image data D104 and the viewpoint conversion image data D109 and outputs the result. When the detection data D111 is not supplied from the detection unit 111, the image data switching unit 105 selects the camera image data D104. When the detection data D111 is supplied from the detection unit 111, the image data switching unit 105 selects the viewpoint conversion image data D109.

画像データ切換部105は、図9の(a)〜(c)に示すように、検出部111によって、自車両V110と他車両V101とが所定の時間以内の差で同じ交差点301に進入すると想定される状況の発生が検出されたとき、カメラ画像データD104から視点変換画像データD109へと切り換える。   As shown in FIGS. 9A to 9C, the image data switching unit 105 assumes that the detection unit 111 causes the host vehicle V110 and the other vehicle V101 to enter the same intersection 301 with a difference within a predetermined time. When the occurrence of the situation is detected, the camera image data D104 is switched to the viewpoint converted image data D109.

これによって、モニタ15に表示される画像は、図6〜図8で説明したように、撮影データD13による実画像から視点変換画像データD109による視点変換画像へと切り換えられる。なお、例えば、自車両V110が交差点301を通過したら、視点変換画像から実画像へと戻せばよい。   As a result, the image displayed on the monitor 15 is switched from the actual image based on the photographic data D13 to the viewpoint converted image based on the viewpoint converted image data D109, as described with reference to FIGS. For example, when the host vehicle V110 passes the intersection 301, the viewpoint conversion image may be returned to the real image.

図6の(b)〜(d)、図7の(b)〜(d)、図8の(b)〜(d)に示す画像は、運転者等の乗員に注意を促す注意画像である。本実施形態によれば、乗員は、画像が急に変化するのではなく、所定の時間をかけて視点を順次移動させていく画像を見ることができるので、自車両の位置を的確に把握することができる。また、乗員は、仮想画像自車両V110iと仮想画像他車両V101iとの位置関係によって、自車両V110と他車両V101との位置関係を的確に把握することができる。   The images shown in (b) to (d) of FIG. 6, (b) to (d) of FIG. 7, and (b) to (d) of FIG. 8 are caution images that call attention to a passenger such as a driver. . According to the present embodiment, the occupant can see an image in which the viewpoint is sequentially moved over a predetermined time instead of suddenly changing the image, and thus accurately grasps the position of the host vehicle. be able to. The occupant can accurately grasp the positional relationship between the host vehicle V110 and the other vehicle V101 based on the positional relationship between the virtual image host vehicle V110i and the virtual image other vehicle V101i.

本実施形態によれば、カメラ13より出力された撮影データD13による実画像から視点変換画像へと切り換わることにより、乗員に他車両V101の存在を効果的に気付かせることができる。   According to the present embodiment, the occupant can be effectively aware of the presence of the other vehicle V101 by switching from the actual image based on the shooting data D13 output from the camera 13 to the viewpoint conversion image.

本実施形態では注意画像に切り換えたことを乗員に音声でも知らせるため、次のように構成している。音声データ生成部106は、検出部111より検出データD111が供給されたら、乗員に注意を促す注意音声の音声データD106を生成して、スピーカ16より出力させる。   In this embodiment, in order to notify the occupant by voice of switching to the caution image, the following configuration is provided. When the detection data D111 is supplied from the detection unit 111, the audio data generation unit 106 generates the audio data D106 of the caution voice that urges the occupant to pay attention and outputs it from the speaker 16.

注意音としては、所定のメロディのような電子音でもよいし、例えば、「右方向から車が接近しています。」とか「衝突に注意して下さい。」のような音声であってもよい。音声は合成音でもよい。   The caution sound may be an electronic sound such as a predetermined melody, or may be a voice such as “A car is approaching from the right” or “Be careful of collision”. . The voice may be a synthesized sound.

音声データ生成部106によって注意音声の音声データD106を生成して、スピーカ16より出力させる構成は必須ではないが、設けることが好ましい。   A configuration in which the audio data generation unit 106 generates the audio data D106 of the caution audio and outputs it from the speaker 16 is not essential, but is preferably provided.

ところで、図6〜図8は、他車両V101が建物50等で隠れておらず、他車両V101が見える場合を示している。他車両V101が建物50等で隠れている場合には、図5で説明したように、仮想画像による他車両V102iが表示される。   6 to 8 show a case where the other vehicle V101 is not hidden by the building 50 or the like and the other vehicle V101 is visible. When the other vehicle V101 is hidden behind the building 50 or the like, as described with reference to FIG. 5, the other vehicle V102i based on a virtual image is displayed.

本実施形態においては、制御部10内に仮想画像データ生成部102と判定部103と画像データ重畳部104とを設けることによって、建物50等で隠れた位置を走行する他車両V101を仮想画像で表示するように構成している。仮想画像による他車両V102iを表示する構成とすることが好ましいが、簡略化のため、他車両V102iの表示を省略してもよい。   In the present embodiment, by providing the virtual image data generation unit 102, the determination unit 103, and the image data superimposition unit 104 in the control unit 10, the other vehicle V101 that travels in a position hidden by the building 50 or the like is displayed as a virtual image. It is configured to display. Although it is preferable that the other vehicle V102i is displayed as a virtual image, the display of the other vehicle V102i may be omitted for simplification.

図6〜図8に示すように、自車両V110から他車両V101が見える場合でも、自車両V110と他車両V101とがほぼ同じ速度で交差点301に近付く状態では、乗員は他車両V101が動いていると認識しにくい場合がある。   As shown in FIGS. 6 to 8, even when the other vehicle V101 can be seen from the own vehicle V110, when the own vehicle V110 and the other vehicle V101 approach the intersection 301 at substantially the same speed, the occupant moves the other vehicle V101. Sometimes it is difficult to recognize.

本実施形態によれば、仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる視点から見た視点変換画像を乗員に提示することによって、動いている他車両V101を認識させることができる。よって、本実施形態は、仮想画像による他車両V102iを表示する構成を省略したとしても、十分に効果的である。   According to this embodiment, the moving other vehicle V101 is recognized by presenting to the occupant a viewpoint conversion image viewed from a viewpoint where both the virtual image host vehicle V110i and the virtual image other vehicle V101i can be seen. be able to. Therefore, the present embodiment is sufficiently effective even when the configuration for displaying the other vehicle V102i by the virtual image is omitted.

視点変換画像データ生成部109は、地図データD12のみに基づいて、視点変換画像データD109における背景画像を表す仮想画像データを生成してもよい。この場合は、実画像データD30は不要であり、画像提供サーバ30との通信機能は省略可能である。   The viewpoint conversion image data generation unit 109 may generate virtual image data representing a background image in the viewpoint conversion image data D109 based only on the map data D12. In this case, the actual image data D30 is unnecessary, and the communication function with the image providing server 30 can be omitted.

図11に示すフローチャートを用いて、一実施形態の車両用情報提示装置の動作ついて改めて説明する。図11では、便宜上、注意音声の出力処理を省略している。   With reference to the flowchart shown in FIG. 11, the operation of the vehicle information presentation apparatus according to the embodiment will be described again. In FIG. 11, for the sake of convenience, the output processing of the attention sound is omitted.

図11において、制御部10は、ステップS1にて、他車両の接近を検出したか否かを判定する。他車両の接近とは、前述のように、自車両と他車両とが、所定の時間以内の差で同じ交差点に進入すると想定される場合である。他車両の接近を検出すれば(YES)、制御部10は、処理をステップS2に移行させ、他車両の接近を検出しなければ(NO)、ステップS1の処理を繰り返す。   In FIG. 11, the control part 10 determines whether the approach of another vehicle was detected in step S1. As described above, the approach of another vehicle is a case where the host vehicle and the other vehicle are assumed to enter the same intersection with a difference within a predetermined time. If the approach of another vehicle is detected (YES), the control unit 10 shifts the process to step S2, and if the approach of another vehicle is not detected (NO), the process of step S1 is repeated.

制御部10は、ステップS2にて、視点を所定量移動させた視点変換画像データD109を生成する。制御部10は、ステップS3にて、モニタ15へと出力する画像データを、カメラ画像データD104から視点変換画像データD109へと切り換える。   In step S2, the control unit 10 generates viewpoint converted image data D109 obtained by moving the viewpoint by a predetermined amount. In step S3, the control unit 10 switches the image data to be output to the monitor 15 from the camera image data D104 to the viewpoint converted image data D109.

制御部10は、ステップS4にて、最終の視点の視点変換画像データD109を生成したか否かを判定する。最終の視点の視点変換画像データD109を生成したら(YES)、制御部10は、処理をステップS5に移行させ、最終の視点の視点変換画像データD109を生成していなければ(NO)、ステップS2〜S4の処理を繰り返す。   In step S4, the control unit 10 determines whether or not the viewpoint-converted image data D109 of the final viewpoint has been generated. If the viewpoint-converted image data D109 of the final viewpoint is generated (YES), the control unit 10 shifts the processing to step S5. If the viewpoint-converted image data D109 of the final viewpoint is not generated (NO), step S2 Repeat the process of ~ S4.

制御部10は、ステップS5にて、最終の視点の視点変換画像データD109のモニタ15への出力を継続させる。制御部10は、ステップS6にて、自車両が交差点を通過したか否かを判定する。交差点を通過したら(YES)、制御部10は、処理をステップS7に移行させ、交差点を通過していなければ(NO)、ステップS5,S6の処理を繰り返す。   In step S5, the control unit 10 continues to output the viewpoint converted image data D109 of the final viewpoint to the monitor 15. In step S6, the control unit 10 determines whether or not the host vehicle has passed the intersection. If it passes through the intersection (YES), the control unit 10 shifts the process to step S7, and if it does not pass through the intersection (NO), repeats the processes of steps S5 and S6.

制御部10は、ステップS6にて、モニタ15へと出力する画像データを、視点変換画像データD109からカメラ画像データD104へと切り換える。制御部10は、ステップS6の後、処理をステップS1へと戻し、以降、同様の処理を繰り返す。   In step S6, the control unit 10 switches the image data output to the monitor 15 from the viewpoint converted image data D109 to the camera image data D104. The control part 10 returns a process to step S1 after step S6, and repeats the same process after that.

以上の構成において、走行車両情報受信部101は、自車両の外部から提供され、交差線で自車走行車線と交差する他車走行車線を移動して、交差点に接近する障害物の少なくとも車線上の位置情報を含む移動障害物情報を取得する移動障害物情報取得部である。なお、自車両が移動障害物情報を検出することも考えられる。他車両は、障害物の一例である。障害物は車両だけでなく、人や動物等の移動物体も含む。   In the above configuration, the traveling vehicle information receiving unit 101 is provided from the outside of the host vehicle, moves on the other vehicle traveling lane that intersects the host vehicle traveling lane at the intersection, and is on at least the lane of the obstacle approaching the intersection. It is a moving obstacle information acquisition part which acquires the moving obstacle information containing the positional information on. It is also conceivable that the own vehicle detects moving obstacle information. The other vehicle is an example of an obstacle. Obstacles include not only vehicles but also moving objects such as people and animals.

一実施形態の車両用情報提示装置は、所定のタイミングで、次のように動作する。所定のタイミングは、好適には、検出部111が、測位部11が測位した自車両の位置と、移動障害物情報取得部が取得した位置情報が示す障害物の位置とに基づいて、自車両と障害物とが交差点に所定の時間差以内で進入する状況の発生を検出したタイミングである。即ち、自車両と障害物とが交差点で交錯すると判断されるタイミングである。   The vehicle information presentation device of one embodiment operates as follows at a predetermined timing. The predetermined timing is preferably determined based on the position of the host vehicle measured by the positioning unit 11 and the position of the obstacle indicated by the position information acquired by the moving obstacle information acquiring unit. This is the timing at which the occurrence of a situation where an obstacle enters the intersection within a predetermined time difference is detected. That is, it is the timing when it is determined that the host vehicle and the obstacle cross at the intersection.

一実施形態の車両用情報提示装置は、視点変換画像生成部(視点変換画像データ生成部109)を備える。視点変換画像生成部は、自車両から前方を見る視点から自車両と障害物との双方を見ることができる自車両から離れた視点まで、交差点を中心として視点を回転移動させる複数枚の画像である視点変換画像を生成する。   The vehicle information presentation device according to an embodiment includes a viewpoint conversion image generation unit (viewpoint conversion image data generation unit 109). The viewpoint conversion image generation unit is a plurality of images that rotate the viewpoint around the intersection from a viewpoint looking forward from the own vehicle to a viewpoint away from the own vehicle where both the own vehicle and the obstacle can be seen. A certain viewpoint conversion image is generated.

よって、乗員は、他車走行車線を移動して、同じ交差点に近付いてくる障害物の存在に気付くことができる。このとき、乗員は、自車両の位置を的確に把握することができ、自車両と障害物との位置関係を的確に把握することができる。   Therefore, the occupant can move in the other vehicle lane and notice the presence of an obstacle approaching the same intersection. At this time, the occupant can accurately grasp the position of the host vehicle and can accurately grasp the positional relationship between the host vehicle and the obstacle.

好ましくは、視点変換画像生成部は、障害物が移動していない車線側に視点を水平方向に回転移動させて、視点変換画像を生成する。または、視点変換画像生成部は、自車両より上方に回転移動させていく画像である視点変換画像を生成する。このようにすれば、自車両と他車両との位置関係や距離を把握しやすい視点変換画像とすることができる。   Preferably, the viewpoint conversion image generation unit generates a viewpoint conversion image by rotating the viewpoint in the horizontal direction to the lane side where the obstacle is not moving. Or a viewpoint conversion image generation part produces | generates the viewpoint conversion image which is an image rotated and moved upwards from the own vehicle. In this way, it is possible to obtain a viewpoint conversion image that makes it easy to grasp the positional relationship and distance between the host vehicle and another vehicle.

好ましくは、一実施形態の車両用情報提示装置は、モニタ15が視点変換画像を表示するのに合わせて、注意音声を生成して自車両に搭載のスピーカ16に供給する音声生成部(音声データ生成部106)を備える。このようにすれば、注意音声によって、乗員に障害物の存在をさらに効果的に気付かせることができる。   Preferably, the vehicular information presentation apparatus according to an embodiment generates a caution sound and supplies it to a speaker 16 mounted on the host vehicle (sound data) as the monitor 15 displays a viewpoint conversion image. Generator 106). In this way, the presence of an obstacle can be more effectively noticed by the occupant by the caution voice.

本発明は以上説明した一実施形態の車両用情報提示装置に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。前述のように、制御部10の動作をコンピュータプログラムで実現してもよい。   The present invention is not limited to the vehicle information presentation apparatus according to the embodiment described above, and various modifications can be made without departing from the gist of the present invention. As described above, the operation of the control unit 10 may be realized by a computer program.

11 測位部
15 モニタ(表示部)
16 スピーカ
101 走行車両情報受信部(移動障害物情報取得部)
106 音声データ生成部(音声生成部)
109 視点変換画像データ生成部(視点変換画像生成部)
111 検出部
11 Positioning unit 15 Monitor (display unit)
16 Speaker 101 Traveling vehicle information receiving unit (moving obstacle information acquiring unit)
106 Voice data generation unit (voice generation unit)
109 Viewpoint conversion image data generation unit (viewpoint conversion image generation unit)
111 detector

Claims (5)

交差点に近付くように自車走行車線内を走行する自車両の位置を測位する測位部と、
前記交差点で前記自車走行車線と交差する他車走行車線を移動して、前記交差点に接近する障害物の少なくとも位置情報を含む移動障害物情報を取得する移動障害物情報取得部と、
前記自車両と前記障害物とが交差点で交錯すると判断される所定のタイミングで、前記自車両から前方を見る視点から前記自車両と前記障害物との双方を見ることができる前記自車両から離れた視点まで、前記交差点を中心として視点を回転移動させながら生成される複数枚の画像である視点変換画像を生成する視点変換画像生成部と、
前記視点変換画像を表示する表示部と、
を備えることを特徴とする車両用情報提示装置。
A positioning unit that measures the position of the host vehicle traveling in the host vehicle lane so as to approach the intersection;
A moving obstacle information acquisition unit that acquires a moving obstacle information that includes at least position information of an obstacle that moves near another vehicle traveling lane that intersects the host vehicle traveling lane at the intersection, and
The host vehicle and the obstacle can be seen from the viewpoint of looking forward from the host vehicle at a predetermined timing at which the host vehicle and the obstacle cross each other at an intersection. A viewpoint conversion image generation unit that generates a viewpoint conversion image, which is a plurality of images generated while rotating the viewpoint around the intersection,
A display unit for displaying the viewpoint-converted image;
A vehicle information presentation device comprising:
前記測位部が測位した前記自車両の位置と、前記移動障害物情報取得部が取得した前記位置情報が示す前記障害物の位置とに基づいて、前記自車両と前記障害物とが前記交差点に所定の時間差以内で進入する状況の発生を検出する検出部をさらに備え、
前記視点変換画像生成部は、前記所定のタイミングとして、前記検出部によって前記状況の発生が検出されたら、前記視点変換画像を生成する
ことを特徴とする請求項1に記載の車両用情報提示装置。
Based on the position of the host vehicle measured by the positioning unit and the position of the obstacle indicated by the position information acquired by the moving obstacle information acquisition unit, the host vehicle and the obstacle are at the intersection. A detection unit for detecting the occurrence of a situation entering within a predetermined time difference;
2. The vehicle information presentation device according to claim 1, wherein when the occurrence of the situation is detected by the detection unit, the viewpoint conversion image generation unit generates the viewpoint conversion image as the predetermined timing. .
前記視点変換画像生成部は、前記障害物が移動していない車線側に視点を水平方向に回転移動させていく画像である視点変換画像を生成することを特徴とする請求項1または2に記載の車両用情報提示装置。   The said viewpoint conversion image generation part produces | generates the viewpoint conversion image which is an image which rotates a viewpoint in the horizontal direction to the lane side where the said obstacle is not moving, The Claim 1 or 2 characterized by the above-mentioned. Vehicle information presentation device. 前記視点変換画像生成部は、前記自車両より上方に回転移動させていく画像である視点変換画像を生成することを特徴とする請求項1または2に記載の車両用情報提示装置。   The vehicle information presentation apparatus according to claim 1, wherein the viewpoint conversion image generation unit generates a viewpoint conversion image that is an image that is rotated upward from the host vehicle. 前記表示部が前記視点変換画像による視点変換画像を表示するのに合わせて、注意音声を生成して車載のスピーカに供給する音声生成部をさらに備えることを特徴とする請求項1〜4のいずれか1項に記載の車両用情報提示装置。   5. The voice generation unit according to claim 1, further comprising a voice generation unit that generates a caution voice and supplies the caution voice to the in-vehicle speaker as the display unit displays the viewpoint conversion image based on the viewpoint conversion image. The vehicle information presentation device according to claim 1.
JP2013198196A 2013-09-25 2013-09-25 Vehicle information presentation device Active JP6221562B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013198196A JP6221562B2 (en) 2013-09-25 2013-09-25 Vehicle information presentation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013198196A JP6221562B2 (en) 2013-09-25 2013-09-25 Vehicle information presentation device

Publications (2)

Publication Number Publication Date
JP2015064750A true JP2015064750A (en) 2015-04-09
JP6221562B2 JP6221562B2 (en) 2017-11-01

Family

ID=52832569

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013198196A Active JP6221562B2 (en) 2013-09-25 2013-09-25 Vehicle information presentation device

Country Status (1)

Country Link
JP (1) JP6221562B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017062706A (en) * 2015-09-25 2017-03-30 アイシン・エィ・ダブリュ株式会社 Travel support system, travel support method, and computer program
JP2019036826A (en) * 2017-08-14 2019-03-07 日産自動車株式会社 Display method for vehicle and display device for vehicle
WO2019201524A1 (en) * 2018-04-20 2019-10-24 Robert Bosch Gmbh Method for controlling a display system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007249811A (en) * 2006-03-17 2007-09-27 Denso Corp Drive support image display device and program
JP2007333502A (en) * 2006-06-14 2007-12-27 Nissan Motor Co Ltd Merging support device, and merging support method
JP2009037457A (en) * 2007-08-02 2009-02-19 Denso Corp Driving support system
JP2009070243A (en) * 2007-09-14 2009-04-02 Denso Corp Field of vision support system for vehicle, and information distribution device
JP2011113385A (en) * 2009-11-27 2011-06-09 Denso Corp Information presentation apparatus

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007249811A (en) * 2006-03-17 2007-09-27 Denso Corp Drive support image display device and program
JP2007333502A (en) * 2006-06-14 2007-12-27 Nissan Motor Co Ltd Merging support device, and merging support method
JP2009037457A (en) * 2007-08-02 2009-02-19 Denso Corp Driving support system
JP2009070243A (en) * 2007-09-14 2009-04-02 Denso Corp Field of vision support system for vehicle, and information distribution device
JP2011113385A (en) * 2009-11-27 2011-06-09 Denso Corp Information presentation apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017062706A (en) * 2015-09-25 2017-03-30 アイシン・エィ・ダブリュ株式会社 Travel support system, travel support method, and computer program
JP2019036826A (en) * 2017-08-14 2019-03-07 日産自動車株式会社 Display method for vehicle and display device for vehicle
JP7002246B2 (en) 2017-08-14 2022-01-20 日産自動車株式会社 Vehicle display method and vehicle display device
WO2019201524A1 (en) * 2018-04-20 2019-10-24 Robert Bosch Gmbh Method for controlling a display system

Also Published As

Publication number Publication date
JP6221562B2 (en) 2017-11-01

Similar Documents

Publication Publication Date Title
CN109383404B (en) Display system, display method, and medium storing program
US10508911B2 (en) Apparatus and method for measurement, and program
JP4909451B1 (en) Information display apparatus and control method
JP6451840B2 (en) Information presentation system
JP4601505B2 (en) Top-view image generation apparatus and top-view image display method
US11176826B2 (en) Information providing system, server, onboard device, storage medium, and information providing method
CN105991942B (en) Vehicle and method for controlling vehicle
JP7024737B2 (en) Information processing equipment, information processing methods, programs, and imaging equipment
WO2018180579A1 (en) Imaging control device, control method for imaging control device, and mobile object
JP5054834B2 (en) Information processing apparatus, system, empty space guidance method, and program
JP2009258878A (en) On-road communication machine and accident monitoring system
JP2014036326A (en) Bird&#39;s eye image display device
KR20190016815A (en) User interface apparatus for vehicle and Vehicle
JP2013078151A (en) Display device for vehicle
JP2020095406A (en) On-vehicle device, program, and vehicle
JP2020065141A (en) Vehicle overhead image generation system and method thereof
US20220319192A1 (en) Driving assistance device, driving assistance method, and non-transitory computer-readable medium
WO2017043331A1 (en) Image processing device and image processing method
US11443520B2 (en) Image processing apparatus, image processing method, and image processing system
JP6221562B2 (en) Vehicle information presentation device
JP2020080542A (en) Image providing system for vehicle, server system, and image providing method for vehicle
JP2008059178A (en) Operation support device and program
JP2008021234A (en) Driving support image display system and on-vehicle device
WO2011135778A1 (en) Image processing device, car navigation system, and on-street camera system
JP5702476B2 (en) Display device, control method, program, storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160328

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170321

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170918

R151 Written notification of patent or utility model registration

Ref document number: 6221562

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151