JP2015064750A - Information presentation device for vehicle - Google Patents
Information presentation device for vehicle Download PDFInfo
- Publication number
- JP2015064750A JP2015064750A JP2013198196A JP2013198196A JP2015064750A JP 2015064750 A JP2015064750 A JP 2015064750A JP 2013198196 A JP2013198196 A JP 2013198196A JP 2013198196 A JP2013198196 A JP 2013198196A JP 2015064750 A JP2015064750 A JP 2015064750A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- viewpoint
- image data
- unit
- obstacle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、乗員に他車両の情報を提示する車両用情報提示装置に関する。 The present invention relates to a vehicle information presentation device that presents information on other vehicles to a passenger.
特許文献1には、自車周囲の俯瞰画像から車室内からの視点への画像変換をする際に、カメラの視点がどのように遷移するかを段階的に移動するアニメーションにて表現することが記載されている。
In
特許文献1に記載の技術では、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることはできない。
With the technique described in
本発明は、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることができる車両用情報提示装置を提供することを目的とする。 It is an object of the present invention to provide a vehicle information presentation device that allows an occupant to notice the presence of an obstacle approaching the same intersection by moving in a different lane when the host vehicle approaches the intersection. To do.
上記目的を達成するため、本発明の車両用情報提示装置は、自車両と障害物とが交差点で交錯すると判断される所定のタイミングで、自車両から前方を見る視点から自車両と障害物との双方を見ることができる自車両から離れた視点まで、交差点を中心として視点を回転移動させながら生成される複数枚の画像である視点変換画像を生成して、表示部に表示する。 In order to achieve the above-described object, the vehicle information presentation device of the present invention is configured such that the host vehicle and the obstacle are viewed from the viewpoint of looking forward from the host vehicle at a predetermined timing at which the host vehicle and the obstacle are determined to intersect at an intersection. A viewpoint conversion image, which is a plurality of images generated while rotating the viewpoint around the intersection, to a viewpoint far from the host vehicle that can see both of them is generated and displayed on the display unit.
本発明の車両用情報提示装置によれば、自車両が交差点に近付くとき、乗員に、異なる車線を移動して、同じ交差点に近付いてくる障害物の存在を気付かせることができる。 According to the vehicle information presentation device of the present invention, when the host vehicle approaches the intersection, the occupant can move in different lanes and notice the presence of an obstacle approaching the same intersection.
以下、一実施形態の車両用情報提示装置について、添付図面を参照して説明する。図1において、測位部11は、自車両の現在位置を測位する。測位部11は、例えば、GPS衛星からのGPS電波をGPSアンテナで受信して、自車両の現在位置を測位する。
Hereinafter, a vehicle information presentation apparatus according to an embodiment will be described with reference to the accompanying drawings. In FIG. 1, a
測位部11が自車両の現在位置を測位した測位データD11は、制御部10に入力される。測位部11は、ジャイロ等のGPS以外の測位方法で自車両の現在位置を測位してもよい。測位部11は、GPSとジャイロとを組み合わせて現在位置を測位してもよい。測位部11の機能を制御部10の内部に設けてもよい。
Positioning data D11 obtained by the
地図情報保持部12は、地図情報を保持する。地図情報は、3次元(3D)表示が可能な情報であることが好ましい。地図情報保持部12は、ハードディスク・ドライブ,半導体メモリ,光ディスク等の任意の記録媒体でよい。地図情報保持部12より出力された地図データD12は、制御部10に入力される。
The map
自車両内には、自車両から自車両の外部前方を撮影するカメラ13が取り付けられている。カメラ13で自車両の前方を撮影した撮影データD13は、制御部10に入力される。
A
通信部14は、制御部10による制御に基づいて、走行車両情報提供サーバ20と通信する。走行車両情報提供サーバ20は、後述するように、道路を走行する車両に関する情報を提供する。通信部14は、制御部10による制御に基づいて、画像提供サーバ30と通信する。画像提供サーバ30は、道路を撮影した実画像データを提供する。
The
通信部14は、走行車両情報提供サーバ20より提供された走行車両データD20を制御部10に供給する。走行車両データD20は、他車両の走行車両データを含む。通信部14は、画像提供サーバ30より提供された実画像データD30を制御部10に供給する。
The
制御部10には、後述する注意画像を表示するモニタ(表示部)15と、後述する注意音声を発生させるスピーカ16とが接続されている。
Connected to the
ここで、図2,図3を用いて、走行車両情報提供サーバ20の概要について説明する。図2に示すように、交差点201の近傍には、それぞれの車線を撮影するカメラ202a〜202dが配置されている。カメラ202a〜202dは、それぞれの車線を撮影して、撮影データを無線または有線にて走行車両情報提供サーバ20に送信する。
Here, the outline | summary of the traveling vehicle
図2の例では、カメラ202aは車両203aを撮影した撮影データを走行車両情報提供サーバ20に送信し、カメラ202bは車両203bを撮影した撮影データを走行車両情報提供サーバ20に送信する。
In the example of FIG. 2, the
走行車両情報提供サーバ20は、カメラ202a〜202dから送信された撮影データを解析して、交差点201に近付いてくる車両(ここでは車両203a,203b)とその位置を検出する。走行車両情報提供サーバ20は、パターン認識によって撮影データ内に含まれる車両の画像を検出することが可能である。
The traveling vehicle
走行車両情報提供サーバ20は、どの車線に交差点201に近付いてくる車両が存在するかを示し、近付いてくる車両の位置情報を含む走行車両データD20を通信部14に送信する。
The traveling vehicle
走行車両情報提供サーバ20が車両の種別(乗用車,トラック,バス等)や車体の色を検出して、車両の種別を示す情報や車体の色を示す情報を含む走行車両データD20を通信部14に送信してもよい。
The traveling vehicle
図3は、図2とは異なる方法によって交差点201に近付いてくる車両を検出する方法を示している。図3に示すように、交差点201の近傍には、それぞれの車線を走行する車両と通信する通信機器204a〜204dが配置されている。
FIG. 3 shows a method of detecting a vehicle approaching the
図3では、車両205a,205cが車線を走行している。車線を走行する車両は、車両情報送信部215を搭載している。車両情報送信部215は、測位部11と同様にGPS電波を受信して自車両の現在位置を測位する。車両情報送信部215は、自車両の位置情報に加えて、自車両を識別するための識別情報を無線にて送信することが好ましい。
In FIG. 3, the
識別情報は、例えば、車両の種別を示す情報、車名を示す情報、車体の色を示す情報のうちのいずれか1つまたは複数である。 The identification information is, for example, one or more of information indicating the type of vehicle, information indicating the vehicle name, and information indicating the color of the vehicle body.
通信機器204a〜204dは、交差点201に近付いてくる車両に搭載されている車両情報送信部215から送信されたそれぞれの車両の位置情報と識別情報とを含む車両情報を受信して、車両情報を無線または有線にて走行車両情報提供サーバ20に送信する。
The
走行車両情報提供サーバ20は、どの車線に交差点201に近付いてくる車両が存在するかを示し、近付いてくる車両の識別情報と位置情報とを含む走行車両データD20を通信部14に送信する。
The traveling vehicle
図4を用いて、制御部10の具体的な動作について説明する。図4は、制御部10の機能的な内部構成を示している。制御部10をマイクロコンピュータで構成してもよい。以下に説明する制御部10の動作は、コンピュータプログラムで実現することも可能である。
A specific operation of the
図4において、走行車両情報受信部101には、測位部11より出力された測位データD11と、通信部14より供給された走行車両データD20とが入力される。走行車両情報受信部101は、走行車両データD20のうち、自車両が走行する車線(自車走行車線)とは異なる自車走行車線と交差する車線(他車走行車線)を走行して、交差点201に近付いてくる車両(他車両)の情報を抽出する。走行車両情報受信部101は、他車両データD101を出力する。
In FIG. 4, the traveling vehicle
他車両データD101は、仮想画像データ生成部102,判定部103,画像データ重畳部104,検出部111に入力される。
The other vehicle data D101 is input to the virtual image
仮想画像データ生成部102は、他車両データD101に基づいて他車両の仮想画像データD102を生成する。走行車両データD20(他車両データD101)が車両の種別を示す情報または車名を示す情報を含めば、他車両の大きさや形状に対応した仮想画像データD102を生成することができる。走行車両データD20(他車両データD101)が車体の色を示す情報を含めば、他車両の色に対応した仮想画像データD102を生成することができる。
The virtual image
判定部103には、他車両データD101の他、測位データD11と、地図情報保持部12より出力された地図データD12とが入力される。地図データD12は、道路に隣接する建物の平面的な大きさ及び高さの情報を含む。よって、判定部103は、測位データD11に基づく自車両の位置から、他車両データD101に基づく位置の他車両を見たとき、他車両が見えるか、建物の死角となって他車両が見えないかを判定することができる。
In addition to other vehicle data D101, positioning data D11 and map data D12 output from map
判定部103は、他車両が見えるか否かを示す判定データD103を画像データ重畳部104に供給する。画像データ重畳部104には、他車両データD101及び判定データD103の他、測位データD11と、撮影データD13と、仮想画像データD102とが入力される。
The
画像データ重畳部104は、判定データD103が、他車両が見えないことを示すとき、撮影データD13に仮想画像データD102を重畳する。画像データ重畳部104は、測位データD11が示す位置情報と、他車両データD101が示す位置情報とを参照して、撮影データD13の画像内の他車両が走行している位置に、仮想画像データD102による仮想画像を重畳することができる。
The image
なお、カメラ13による撮影範囲は予め分かっており、測位データD11が示す位置情報に基づいて、カメラ13による撮影範囲内のそれぞれの位置を特定することができる。よって、撮影データD13の画像に他車両を示す仮想画像を重畳することができる。
Note that the shooting range by the
画像データ重畳部104は、判定データD103が、他車両が見えることを示すとき、撮影データD13をそのまま出力する。画像データ重畳部104は、仮想画像データD102を重畳した撮影データD13または撮影データD13そのままをカメラ画像データD104として出力する。
When the determination data D103 indicates that another vehicle can be seen, the image
検出部111は、測位データD11と他車両データD101とに基づいて、自車両と他車両とが同じ交差点に所定の時間差以内で進入する状況の発生を検出する。検出部111は、自車両と他車両とが同じ交差点に所定の時間差以内で進入する状況の発生を検出したら、検出データD111を画像データ切換部105,音声データ生成部106,視点変換画像データ生成部109に供給する。
Based on the positioning data D11 and other vehicle data D101, the
画像データ切換部105は、カメラ画像データD104をモニタ15に供給する。後述するように、画像データ切換部105は、検出部111より検出データD111が供給されたら、カメラ画像データD104の代わりに、視点変換画像データ生成部109より出力された視点変換画像データD109をモニタ15に供給する。
The image
図5は、他車両が建物等で隠れて見えないとき、モニタ15に表示される画像の一例を示している。自車両が走行する車線と交差する車線を右方向から左方向へと走行している他車両は、実際には建物50で見えない。しかしながら、画像データ重畳部104は、撮影データD13に仮想画像データD102を重畳したカメラ画像データD104を出力することから、仮想画像による他車両V102iが表示されている。
FIG. 5 shows an example of an image displayed on the
図4に戻り、画像受信部107は、実画像データD30を受信して視点変換画像データ生成部109に供給する。視点変換画像データ生成部109には、実画像データD30の他、地図データD12と、自車両情報保持部110より出力された自車両データD110とが入力される。
Returning to FIG. 4, the
自車両データD110は、例えば、車両の種別を示す情報、車名を示す情報、車体の色を示す情報のうちのいずれか1つまたは複数である。図4に示す例では、自車両情報保持部110を制御部10内に設けているが、制御部10外の不揮発性メモリを自車両情報保持部としてもよい。
The own vehicle data D110 is, for example, one or more of information indicating the type of vehicle, information indicating the vehicle name, and information indicating the color of the vehicle body. In the example shown in FIG. 4, the host vehicle
視点変換画像データ生成部109は、仮想画像データ生成部1090を有する。仮想画像データ生成部1090は、自車両データD110に基づいて自車両の仮想画像データを生成する。自車両データD110が車両の種別を示す情報または車名を示す情報を含めば、自車両の大きさや形状に対応した仮想画像データを生成することができる。自車両データD110が車体の色を示す情報を含めば、自車両の色に対応した仮想画像データを生成することができる。
The viewpoint conversion image
また、仮想画像データ生成部1090は、仮想画像データ生成部102と同様に、他車両データD101に基づいて他車両の仮想画像データを生成する。
Similarly to the virtual image
図4では、便宜上、仮想画像データ生成部102と仮想画像データ生成部1090とを分けているが、1つの仮想画像データ生成部で構成してもよい。
In FIG. 4, for the sake of convenience, the virtual image
視点変換画像データ生成部109は、検出部111より検出データD111が供給されたら、例えば図6〜図8に示すような画像を表す視点変換画像データD109を生成する。
When the detection data D111 is supplied from the
図6の(a)は、撮影データD13による実画像の第1の例を示している。図6の(a)では、他車両V101が、自車両が走行する車線と交差する車線を右方向から左方向へと走行している。図6の(a)を平面的に見ると、自車両V110と他車両V101とは図9の(a)に示すような位置関係にある。 FIG. 6A shows a first example of an actual image based on the shooting data D13. In FIG. 6A, the other vehicle V101 is traveling from the right direction to the left direction in the lane that intersects the lane in which the host vehicle is traveling. When FIG. 6A is viewed in plan, the host vehicle V110 and the other vehicle V101 are in a positional relationship as shown in FIG.
図6の(b)〜(d)は、視点変換画像データ生成部109が生成する視点変換画像データD109による仮想画像を示している。図6の(b)〜(d)において、V101i,V110iは、それぞれ、他車両V101を仮想画像データ生成部1090によって生成した仮想画像データによって表した仮想画像の他車両(仮想画像他車両)と自車両(仮想画像自車両)を示している。
6B to 6D show virtual images based on the viewpoint conversion image data D109 generated by the viewpoint conversion image
仮想画像データ生成部1090は、地図データD12に基づいて、図6の(b)〜(d)における仮想画像の背景画像を表す仮想画像データを生成する。
The virtual image
視点変換画像データ生成部109は、図6の(a)に示す自車両V110からの視点から、図6の(d)に示す仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる視点へと視点を順次移動させていく視点変換画像データD109を生成する。
The viewpoint conversion image
具体的には、視点変換画像データ生成部109は、図6の(b)に示すように、自車両V110からの視点から見て左方向に視点を所定量移動させた状態から、図6の(d)に示す最終の視点の位置まで、視点を順次移動させながら、背景画像を表す仮想画像データを順次生成する。視点を移動させる所定量は適宜設定すればよい。
Specifically, as shown in FIG. 6B, the viewpoint-converted image
このとき、視点変換画像データ生成部109は、図10の(a)に示すように、視点を、交差点301を中心として、厳密には交差点301の中心点301cを中心として、水平方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と他車両V101との双方を見ることができる所定の回転位置を、最終の視点の位置とする。
At this time, as shown in FIG. 10A, the viewpoint-converted image
視点変換画像データ生成部109は、背景画像を表す仮想画像データに、それぞれの視点で見ることができる仮想画像他車両V101i、または、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。
The viewpoint conversion image
図6の(a)では、他車両V101は自車両V110に対して右側に位置しているため、図10の(a)に示すように、他車両V101が存在していない車線側に時計回りに視点を回転移動させていくのが好適である。 In FIG. 6A, the other vehicle V101 is located on the right side with respect to the host vehicle V110. Therefore, as shown in FIG. 10A, the other vehicle V101 rotates clockwise toward the lane where the other vehicle V101 does not exist. It is preferable to rotate the viewpoint.
以上のようにして、視点変換画像データ生成部109は、自車両V110からの視点から仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。視点を順次移動させていく画像は好ましくは動画像であり、最終の視点の位置は適宜設定すればよい。
As described above, the viewpoint conversion image
視点変換画像データ生成部109は、地図データD12に基づいて背景画像を表す仮想画像データを生成する代わりに、画像提供サーバ30より提供される実画像データD30に基づいて実画像の背景画像を表す画像データを生成してもよい。
The viewpoint conversion image
自車両V110と他車両V101との位置関係が決まれば、必要となる実画像の背景画像が決まる。画像要求部108は、測位データD11が示す自車両V110の位置情報と他車両データD101が示す他車両V101の位置情報とに基づいて、画像提供サーバ30に、視点変換画像データD109を生成するのに必要となる実画像データD30の提供を要求する。
If the positional relationship between the host vehicle V110 and the other vehicle V101 is determined, a background image of a necessary real image is determined. The
実画像データD30は、要求された実画像データD30を通信部14へと送信する。画像受信部107は、画像データD30を受信して視点変換画像データ生成部109に供給する。これによって、視点変換画像データ生成部109は、地図データD12に基づく仮想画像データの代わりに、実画像データD30に基づく実画像の背景画像を用いた視点変換画像データD109を生成することができる。
The actual image data D30 transmits the requested actual image data D30 to the
この場合、図6の(b)〜(d)は、実画像の背景画像に仮想画像他車両V101iや仮想画像自車両V110iが重畳された状態となる。 In this case, (b) to (d) in FIG. 6 are in a state where the virtual image other vehicle V101i and the virtual image host vehicle V110i are superimposed on the background image of the real image.
図7の(a)は、撮影データD13による実画像の第2の例を示している。図7の(a)では、他車両V101が、自車両が走行する車線と交差する車線を左方向から右方向へと走行している。図7の(a)を平面的に見ると、自車両V110と他車両V101とは図9の(b)に示すような位置関係にある。 FIG. 7A shows a second example of an actual image based on the shooting data D13. In FIG. 7A, the other vehicle V101 is traveling from the left direction to the right direction in the lane that intersects the lane in which the host vehicle travels. When FIG. 7A is viewed in plan, the host vehicle V110 and the other vehicle V101 are in a positional relationship as shown in FIG. 9B.
視点変換画像データ生成部109は、図7の(b)に示すように、自車両V110からの視点から見て右方向に視点を所定量移動させた状態から、図7の(d)に示す最終の視点の位置まで、視点を順次移動させながら、背景画像を表す仮想画像データを順次生成する。
As shown in FIG. 7B, the viewpoint-converted image
このとき、視点変換画像データ生成部109は、図10の(b)に示すように、視点を、交差点301(中心点301c)を中心として水平方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と他車両V101との双方を見ることができる所定の回転位置を、最終の視点の位置とする。
At this time, the viewpoint converted image
視点変換画像データ生成部109は、背景画像を表す仮想画像データに、それぞれの視点で見ることができる仮想画像他車両V101i、または、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。
The viewpoint conversion image
図7の(a)では、他車両V101は自車両V110に対して左側に位置しているため、図10の(b)に示すように、他車両V101が存在していない車線側に反時計回りに視点を回転移動させていくのが好適である。 In FIG. 7A, the other vehicle V101 is located on the left side with respect to the host vehicle V110. Therefore, as shown in FIG. 10B, the other vehicle V101 is counterclockwise on the lane side where the other vehicle V101 does not exist. It is preferable to rotate the viewpoint around.
図7の(b)〜(d)においても、視点変換画像データ生成部109は、自車両V110からの視点から仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。
In (b) to (d) of FIG. 7, the viewpoint-converted image
図7の(b)〜(d)でも同様に、視点変換画像データ生成部109は、画像提供サーバ30より提供される実画像データD30に基づいて生成した実画像の背景画像を表す画像データを用いて、視点変換画像データD109を生成してもよい。
Similarly, in (b) to (d) of FIG. 7, the viewpoint conversion image
図8の(a)は、撮影データD13による実画像の第3の例を示している。図8の(a)では、1台の他車両V101が、自車両が走行する車線と交差する車線を左方向から右方向へと走行し、他の1台の他車両V101が右方向から左方向へと走行している。図8の(a)を平面的に見ると、自車両V110と2台の他車両V101とは図9の(c)に示すような位置関係にある。 FIG. 8A shows a third example of an actual image based on the shooting data D13. In FIG. 8A, one other vehicle V101 travels from the left to the right in the lane intersecting the lane on which the host vehicle travels, and the other one other vehicle V101 moves from the right to the left. Driving in the direction. When FIG. 8A is viewed in plan, the host vehicle V110 and the two other vehicles V101 are in a positional relationship as shown in FIG. 9C.
視点変換画像データ生成部109は、図8の(b)に示すように、自車両V110からの視点を上方に所定量移動させた状態から、図8の(d)に示す上空から見た最終の視点の位置まで、視点を順次上方へと移動させた背景画像を表す仮想画像データを生成する。
As shown in FIG. 8B, the viewpoint-converted image
このとき、視点変換画像データ生成部109は、図10の(c)に示すように、視点を、交差点301(中心点301c)を中心として垂直方向に回転移動させる。視点変換画像データ生成部109は、交差点301方向を見たときに、自車両V110と2台の他車両V101とを見ることができる所定の回転位置を、最終の視点の位置とする。
At this time, the viewpoint-converted image
視点変換画像データ生成部109は、背景画像を表す仮想画像データに、仮想画像他車両V101i及び仮想画像自車両V110iの仮想画像データを重畳する。
The viewpoint conversion image
図8の(a)では、他車両V101は自車両V110に対して左側及び右側の双方に位置しているため、図10の(c)に示すように、視点を自車両V110からの視点から上方へと回転移動させていくのが好適である。 In FIG. 8A, since the other vehicle V101 is located on both the left side and the right side of the host vehicle V110, the viewpoint is viewed from the viewpoint from the host vehicle V110 as shown in FIG. It is preferable to rotate it upward.
図8の(b)〜(d)においても、視点変換画像データ生成部109は、自車両V110からの視点から2つの仮想画像他車両V101i及び仮想画像自車両V110iの全体を俯瞰的に見ることができる上空の最終の視点まで、所定の時間をかけて、視点を順次移動させていく画像の視点変換画像データD109を生成する。
Also in (b) to (d) of FIG. 8, the viewpoint conversion image
図8の(b)〜(d)でも同様に、視点変換画像データ生成部109は、画像提供サーバ30より提供される実画像データD30に基づいて生成した実画像の背景画像を表す画像データを用いて、視点変換画像データD109を生成してもよい。
Similarly, in (b) to (d) of FIG. 8, the viewpoint conversion image
図4に戻り、視点変換画像データ生成部109によって生成された視点変換画像データD109は、画像データ切換部105に入力される。画像データ切換部105は、カメラ画像データD104と視点変換画像データD109とを選択的に切り換えて出力する。画像データ切換部105は、検出部111より検出データD111が供給されなければ、カメラ画像データD104を選択し、検出部111より検出データD111が供給されたら、視点変換画像データD109を選択する。
Returning to FIG. 4, the viewpoint converted
画像データ切換部105は、図9の(a)〜(c)に示すように、検出部111によって、自車両V110と他車両V101とが所定の時間以内の差で同じ交差点301に進入すると想定される状況の発生が検出されたとき、カメラ画像データD104から視点変換画像データD109へと切り換える。
As shown in FIGS. 9A to 9C, the image
これによって、モニタ15に表示される画像は、図6〜図8で説明したように、撮影データD13による実画像から視点変換画像データD109による視点変換画像へと切り換えられる。なお、例えば、自車両V110が交差点301を通過したら、視点変換画像から実画像へと戻せばよい。
As a result, the image displayed on the
図6の(b)〜(d)、図7の(b)〜(d)、図8の(b)〜(d)に示す画像は、運転者等の乗員に注意を促す注意画像である。本実施形態によれば、乗員は、画像が急に変化するのではなく、所定の時間をかけて視点を順次移動させていく画像を見ることができるので、自車両の位置を的確に把握することができる。また、乗員は、仮想画像自車両V110iと仮想画像他車両V101iとの位置関係によって、自車両V110と他車両V101との位置関係を的確に把握することができる。 The images shown in (b) to (d) of FIG. 6, (b) to (d) of FIG. 7, and (b) to (d) of FIG. 8 are caution images that call attention to a passenger such as a driver. . According to the present embodiment, the occupant can see an image in which the viewpoint is sequentially moved over a predetermined time instead of suddenly changing the image, and thus accurately grasps the position of the host vehicle. be able to. The occupant can accurately grasp the positional relationship between the host vehicle V110 and the other vehicle V101 based on the positional relationship between the virtual image host vehicle V110i and the virtual image other vehicle V101i.
本実施形態によれば、カメラ13より出力された撮影データD13による実画像から視点変換画像へと切り換わることにより、乗員に他車両V101の存在を効果的に気付かせることができる。
According to the present embodiment, the occupant can be effectively aware of the presence of the other vehicle V101 by switching from the actual image based on the shooting data D13 output from the
本実施形態では注意画像に切り換えたことを乗員に音声でも知らせるため、次のように構成している。音声データ生成部106は、検出部111より検出データD111が供給されたら、乗員に注意を促す注意音声の音声データD106を生成して、スピーカ16より出力させる。
In this embodiment, in order to notify the occupant by voice of switching to the caution image, the following configuration is provided. When the detection data D111 is supplied from the
注意音としては、所定のメロディのような電子音でもよいし、例えば、「右方向から車が接近しています。」とか「衝突に注意して下さい。」のような音声であってもよい。音声は合成音でもよい。 The caution sound may be an electronic sound such as a predetermined melody, or may be a voice such as “A car is approaching from the right” or “Be careful of collision”. . The voice may be a synthesized sound.
音声データ生成部106によって注意音声の音声データD106を生成して、スピーカ16より出力させる構成は必須ではないが、設けることが好ましい。
A configuration in which the audio
ところで、図6〜図8は、他車両V101が建物50等で隠れておらず、他車両V101が見える場合を示している。他車両V101が建物50等で隠れている場合には、図5で説明したように、仮想画像による他車両V102iが表示される。
6 to 8 show a case where the other vehicle V101 is not hidden by the
本実施形態においては、制御部10内に仮想画像データ生成部102と判定部103と画像データ重畳部104とを設けることによって、建物50等で隠れた位置を走行する他車両V101を仮想画像で表示するように構成している。仮想画像による他車両V102iを表示する構成とすることが好ましいが、簡略化のため、他車両V102iの表示を省略してもよい。
In the present embodiment, by providing the virtual image
図6〜図8に示すように、自車両V110から他車両V101が見える場合でも、自車両V110と他車両V101とがほぼ同じ速度で交差点301に近付く状態では、乗員は他車両V101が動いていると認識しにくい場合がある。
As shown in FIGS. 6 to 8, even when the other vehicle V101 can be seen from the own vehicle V110, when the own vehicle V110 and the other vehicle V101 approach the
本実施形態によれば、仮想画像自車両V110iと仮想画像他車両V101iとの双方を見ることができる視点から見た視点変換画像を乗員に提示することによって、動いている他車両V101を認識させることができる。よって、本実施形態は、仮想画像による他車両V102iを表示する構成を省略したとしても、十分に効果的である。 According to this embodiment, the moving other vehicle V101 is recognized by presenting to the occupant a viewpoint conversion image viewed from a viewpoint where both the virtual image host vehicle V110i and the virtual image other vehicle V101i can be seen. be able to. Therefore, the present embodiment is sufficiently effective even when the configuration for displaying the other vehicle V102i by the virtual image is omitted.
視点変換画像データ生成部109は、地図データD12のみに基づいて、視点変換画像データD109における背景画像を表す仮想画像データを生成してもよい。この場合は、実画像データD30は不要であり、画像提供サーバ30との通信機能は省略可能である。
The viewpoint conversion image
図11に示すフローチャートを用いて、一実施形態の車両用情報提示装置の動作ついて改めて説明する。図11では、便宜上、注意音声の出力処理を省略している。 With reference to the flowchart shown in FIG. 11, the operation of the vehicle information presentation apparatus according to the embodiment will be described again. In FIG. 11, for the sake of convenience, the output processing of the attention sound is omitted.
図11において、制御部10は、ステップS1にて、他車両の接近を検出したか否かを判定する。他車両の接近とは、前述のように、自車両と他車両とが、所定の時間以内の差で同じ交差点に進入すると想定される場合である。他車両の接近を検出すれば(YES)、制御部10は、処理をステップS2に移行させ、他車両の接近を検出しなければ(NO)、ステップS1の処理を繰り返す。
In FIG. 11, the
制御部10は、ステップS2にて、視点を所定量移動させた視点変換画像データD109を生成する。制御部10は、ステップS3にて、モニタ15へと出力する画像データを、カメラ画像データD104から視点変換画像データD109へと切り換える。
In step S2, the
制御部10は、ステップS4にて、最終の視点の視点変換画像データD109を生成したか否かを判定する。最終の視点の視点変換画像データD109を生成したら(YES)、制御部10は、処理をステップS5に移行させ、最終の視点の視点変換画像データD109を生成していなければ(NO)、ステップS2〜S4の処理を繰り返す。
In step S4, the
制御部10は、ステップS5にて、最終の視点の視点変換画像データD109のモニタ15への出力を継続させる。制御部10は、ステップS6にて、自車両が交差点を通過したか否かを判定する。交差点を通過したら(YES)、制御部10は、処理をステップS7に移行させ、交差点を通過していなければ(NO)、ステップS5,S6の処理を繰り返す。
In step S5, the
制御部10は、ステップS6にて、モニタ15へと出力する画像データを、視点変換画像データD109からカメラ画像データD104へと切り換える。制御部10は、ステップS6の後、処理をステップS1へと戻し、以降、同様の処理を繰り返す。
In step S6, the
以上の構成において、走行車両情報受信部101は、自車両の外部から提供され、交差線で自車走行車線と交差する他車走行車線を移動して、交差点に接近する障害物の少なくとも車線上の位置情報を含む移動障害物情報を取得する移動障害物情報取得部である。なお、自車両が移動障害物情報を検出することも考えられる。他車両は、障害物の一例である。障害物は車両だけでなく、人や動物等の移動物体も含む。
In the above configuration, the traveling vehicle
一実施形態の車両用情報提示装置は、所定のタイミングで、次のように動作する。所定のタイミングは、好適には、検出部111が、測位部11が測位した自車両の位置と、移動障害物情報取得部が取得した位置情報が示す障害物の位置とに基づいて、自車両と障害物とが交差点に所定の時間差以内で進入する状況の発生を検出したタイミングである。即ち、自車両と障害物とが交差点で交錯すると判断されるタイミングである。
The vehicle information presentation device of one embodiment operates as follows at a predetermined timing. The predetermined timing is preferably determined based on the position of the host vehicle measured by the
一実施形態の車両用情報提示装置は、視点変換画像生成部(視点変換画像データ生成部109)を備える。視点変換画像生成部は、自車両から前方を見る視点から自車両と障害物との双方を見ることができる自車両から離れた視点まで、交差点を中心として視点を回転移動させる複数枚の画像である視点変換画像を生成する。 The vehicle information presentation device according to an embodiment includes a viewpoint conversion image generation unit (viewpoint conversion image data generation unit 109). The viewpoint conversion image generation unit is a plurality of images that rotate the viewpoint around the intersection from a viewpoint looking forward from the own vehicle to a viewpoint away from the own vehicle where both the own vehicle and the obstacle can be seen. A certain viewpoint conversion image is generated.
よって、乗員は、他車走行車線を移動して、同じ交差点に近付いてくる障害物の存在に気付くことができる。このとき、乗員は、自車両の位置を的確に把握することができ、自車両と障害物との位置関係を的確に把握することができる。 Therefore, the occupant can move in the other vehicle lane and notice the presence of an obstacle approaching the same intersection. At this time, the occupant can accurately grasp the position of the host vehicle and can accurately grasp the positional relationship between the host vehicle and the obstacle.
好ましくは、視点変換画像生成部は、障害物が移動していない車線側に視点を水平方向に回転移動させて、視点変換画像を生成する。または、視点変換画像生成部は、自車両より上方に回転移動させていく画像である視点変換画像を生成する。このようにすれば、自車両と他車両との位置関係や距離を把握しやすい視点変換画像とすることができる。 Preferably, the viewpoint conversion image generation unit generates a viewpoint conversion image by rotating the viewpoint in the horizontal direction to the lane side where the obstacle is not moving. Or a viewpoint conversion image generation part produces | generates the viewpoint conversion image which is an image rotated and moved upwards from the own vehicle. In this way, it is possible to obtain a viewpoint conversion image that makes it easy to grasp the positional relationship and distance between the host vehicle and another vehicle.
好ましくは、一実施形態の車両用情報提示装置は、モニタ15が視点変換画像を表示するのに合わせて、注意音声を生成して自車両に搭載のスピーカ16に供給する音声生成部(音声データ生成部106)を備える。このようにすれば、注意音声によって、乗員に障害物の存在をさらに効果的に気付かせることができる。
Preferably, the vehicular information presentation apparatus according to an embodiment generates a caution sound and supplies it to a
本発明は以上説明した一実施形態の車両用情報提示装置に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。前述のように、制御部10の動作をコンピュータプログラムで実現してもよい。
The present invention is not limited to the vehicle information presentation apparatus according to the embodiment described above, and various modifications can be made without departing from the gist of the present invention. As described above, the operation of the
11 測位部
15 モニタ(表示部)
16 スピーカ
101 走行車両情報受信部(移動障害物情報取得部)
106 音声データ生成部(音声生成部)
109 視点変換画像データ生成部(視点変換画像生成部)
111 検出部
11
16
106 Voice data generation unit (voice generation unit)
109 Viewpoint conversion image data generation unit (viewpoint conversion image generation unit)
111 detector
Claims (5)
前記交差点で前記自車走行車線と交差する他車走行車線を移動して、前記交差点に接近する障害物の少なくとも位置情報を含む移動障害物情報を取得する移動障害物情報取得部と、
前記自車両と前記障害物とが交差点で交錯すると判断される所定のタイミングで、前記自車両から前方を見る視点から前記自車両と前記障害物との双方を見ることができる前記自車両から離れた視点まで、前記交差点を中心として視点を回転移動させながら生成される複数枚の画像である視点変換画像を生成する視点変換画像生成部と、
前記視点変換画像を表示する表示部と、
を備えることを特徴とする車両用情報提示装置。 A positioning unit that measures the position of the host vehicle traveling in the host vehicle lane so as to approach the intersection;
A moving obstacle information acquisition unit that acquires a moving obstacle information that includes at least position information of an obstacle that moves near another vehicle traveling lane that intersects the host vehicle traveling lane at the intersection, and
The host vehicle and the obstacle can be seen from the viewpoint of looking forward from the host vehicle at a predetermined timing at which the host vehicle and the obstacle cross each other at an intersection. A viewpoint conversion image generation unit that generates a viewpoint conversion image, which is a plurality of images generated while rotating the viewpoint around the intersection,
A display unit for displaying the viewpoint-converted image;
A vehicle information presentation device comprising:
前記視点変換画像生成部は、前記所定のタイミングとして、前記検出部によって前記状況の発生が検出されたら、前記視点変換画像を生成する
ことを特徴とする請求項1に記載の車両用情報提示装置。 Based on the position of the host vehicle measured by the positioning unit and the position of the obstacle indicated by the position information acquired by the moving obstacle information acquisition unit, the host vehicle and the obstacle are at the intersection. A detection unit for detecting the occurrence of a situation entering within a predetermined time difference;
2. The vehicle information presentation device according to claim 1, wherein when the occurrence of the situation is detected by the detection unit, the viewpoint conversion image generation unit generates the viewpoint conversion image as the predetermined timing. .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013198196A JP6221562B2 (en) | 2013-09-25 | 2013-09-25 | Vehicle information presentation device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013198196A JP6221562B2 (en) | 2013-09-25 | 2013-09-25 | Vehicle information presentation device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015064750A true JP2015064750A (en) | 2015-04-09 |
JP6221562B2 JP6221562B2 (en) | 2017-11-01 |
Family
ID=52832569
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013198196A Active JP6221562B2 (en) | 2013-09-25 | 2013-09-25 | Vehicle information presentation device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6221562B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017062706A (en) * | 2015-09-25 | 2017-03-30 | アイシン・エィ・ダブリュ株式会社 | Travel support system, travel support method, and computer program |
JP2019036826A (en) * | 2017-08-14 | 2019-03-07 | 日産自動車株式会社 | Display method for vehicle and display device for vehicle |
WO2019201524A1 (en) * | 2018-04-20 | 2019-10-24 | Robert Bosch Gmbh | Method for controlling a display system |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249811A (en) * | 2006-03-17 | 2007-09-27 | Denso Corp | Drive support image display device and program |
JP2007333502A (en) * | 2006-06-14 | 2007-12-27 | Nissan Motor Co Ltd | Merging support device, and merging support method |
JP2009037457A (en) * | 2007-08-02 | 2009-02-19 | Denso Corp | Driving support system |
JP2009070243A (en) * | 2007-09-14 | 2009-04-02 | Denso Corp | Field of vision support system for vehicle, and information distribution device |
JP2011113385A (en) * | 2009-11-27 | 2011-06-09 | Denso Corp | Information presentation apparatus |
-
2013
- 2013-09-25 JP JP2013198196A patent/JP6221562B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249811A (en) * | 2006-03-17 | 2007-09-27 | Denso Corp | Drive support image display device and program |
JP2007333502A (en) * | 2006-06-14 | 2007-12-27 | Nissan Motor Co Ltd | Merging support device, and merging support method |
JP2009037457A (en) * | 2007-08-02 | 2009-02-19 | Denso Corp | Driving support system |
JP2009070243A (en) * | 2007-09-14 | 2009-04-02 | Denso Corp | Field of vision support system for vehicle, and information distribution device |
JP2011113385A (en) * | 2009-11-27 | 2011-06-09 | Denso Corp | Information presentation apparatus |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017062706A (en) * | 2015-09-25 | 2017-03-30 | アイシン・エィ・ダブリュ株式会社 | Travel support system, travel support method, and computer program |
JP2019036826A (en) * | 2017-08-14 | 2019-03-07 | 日産自動車株式会社 | Display method for vehicle and display device for vehicle |
JP7002246B2 (en) | 2017-08-14 | 2022-01-20 | 日産自動車株式会社 | Vehicle display method and vehicle display device |
WO2019201524A1 (en) * | 2018-04-20 | 2019-10-24 | Robert Bosch Gmbh | Method for controlling a display system |
Also Published As
Publication number | Publication date |
---|---|
JP6221562B2 (en) | 2017-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109383404B (en) | Display system, display method, and medium storing program | |
US10508911B2 (en) | Apparatus and method for measurement, and program | |
JP4909451B1 (en) | Information display apparatus and control method | |
JP6451840B2 (en) | Information presentation system | |
JP4601505B2 (en) | Top-view image generation apparatus and top-view image display method | |
US11176826B2 (en) | Information providing system, server, onboard device, storage medium, and information providing method | |
CN105991942B (en) | Vehicle and method for controlling vehicle | |
JP7024737B2 (en) | Information processing equipment, information processing methods, programs, and imaging equipment | |
WO2018180579A1 (en) | Imaging control device, control method for imaging control device, and mobile object | |
JP5054834B2 (en) | Information processing apparatus, system, empty space guidance method, and program | |
JP2009258878A (en) | On-road communication machine and accident monitoring system | |
JP2014036326A (en) | Bird's eye image display device | |
KR20190016815A (en) | User interface apparatus for vehicle and Vehicle | |
JP2013078151A (en) | Display device for vehicle | |
JP2020095406A (en) | On-vehicle device, program, and vehicle | |
JP2020065141A (en) | Vehicle overhead image generation system and method thereof | |
US20220319192A1 (en) | Driving assistance device, driving assistance method, and non-transitory computer-readable medium | |
WO2017043331A1 (en) | Image processing device and image processing method | |
US11443520B2 (en) | Image processing apparatus, image processing method, and image processing system | |
JP6221562B2 (en) | Vehicle information presentation device | |
JP2020080542A (en) | Image providing system for vehicle, server system, and image providing method for vehicle | |
JP2008059178A (en) | Operation support device and program | |
JP2008021234A (en) | Driving support image display system and on-vehicle device | |
WO2011135778A1 (en) | Image processing device, car navigation system, and on-street camera system | |
JP5702476B2 (en) | Display device, control method, program, storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160328 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170321 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170918 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6221562 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |