JP2017024484A - Surrounding image display device and surrounding image display method - Google Patents
Surrounding image display device and surrounding image display method Download PDFInfo
- Publication number
- JP2017024484A JP2017024484A JP2015143083A JP2015143083A JP2017024484A JP 2017024484 A JP2017024484 A JP 2017024484A JP 2015143083 A JP2015143083 A JP 2015143083A JP 2015143083 A JP2015143083 A JP 2015143083A JP 2017024484 A JP2017024484 A JP 2017024484A
- Authority
- JP
- Japan
- Prior art keywords
- image
- vehicle
- display
- layout
- surrounding image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、車両走行時の周囲画像を表示する周囲画像表示装置及び周囲画像表示方法に関する。 The present invention relates to a surrounding image display device and a surrounding image display method for displaying a surrounding image when a vehicle travels.
車両のインパネ近傍にディスプレイを搭載し、該ディスプレイに車両の周囲画像を表示することにより、運転操作をサポートする周囲画像表示装置として、特許文献１に開示されたものが知られている。特許文献１では、三次元形状を有する提示面の面形状を設定し、この面形状に対応するように車両の後方画像を変形させて、ディスプレイに表示することが開示されている。 As a surrounding image display device that supports a driving operation by mounting a display near the instrument panel of a vehicle and displaying a surrounding image of the vehicle on the display, a device disclosed in Patent Document 1 is known. Patent Document 1 discloses that a plane shape of a presentation surface having a three-dimensional shape is set, a rear image of the vehicle is deformed so as to correspond to the surface shape, and displayed on a display.
しかしながら、上述した特許文献１に開示された従来例は、車両の運転状況を考慮したものではなく、例えば右左折の際に必要とする画像を表示することができないという問題があった。 However, the above-described conventional example disclosed in Patent Document 1 does not take into account the driving situation of the vehicle, and has a problem that, for example, an image required for a right or left turn cannot be displayed.
本発明は、このような従来の課題を解決するためになされたものであり、その目的とするところは、車両の運転状況に応じた車両周囲画像を表示することが可能な周囲画像表示装置、及び周囲画像表示方法を提供することにある。 The present invention has been made to solve such a conventional problem, and an object of the present invention is to provide a surrounding image display device capable of displaying a vehicle surrounding image according to the driving situation of the vehicle, And providing a surrounding image display method.
上記目的を達成するため、一態様に係る周囲画像表示装置は、車両の周囲を撮像する撮像部と、画像を表示する表示部と、車両の走行シーンを判断する走行シーン判断部と、走行シーンに基づいて撮像部にて撮像される画像から表示範囲を設定する表示範囲設定部とを備える。更に、走行シーンに基づいて表示対象とする画像のレイアウトを設定するレイアウト設定部と、表示範囲の画像をレイアウト設定部で設定されたレイアウトで表示部に表示する画像を生成する画像生成演算部を備える。 In order to achieve the above object, a surrounding image display device according to an aspect includes an imaging unit that captures an image of the periphery of a vehicle, a display unit that displays an image, a traveling scene determination unit that determines a traveling scene of the vehicle, and a traveling scene. And a display range setting unit that sets a display range from an image captured by the imaging unit. Furthermore, a layout setting unit that sets a layout of an image to be displayed based on a driving scene, and an image generation calculation unit that generates an image to be displayed on the display unit with a layout set by the layout setting unit. Prepare.
一態様に係る周囲画像表示方法は、車両の周囲を撮像し、車両の走行シーンを判断し、走行シーンに基づいて、車両の周囲画像から表示範囲を設定する。また、走行シーンに基づいて、表示対象とする画像のレイアウトを設定し、表示範囲の画像を、設定されたレイアウトで表示部に表示する画像を生成し、生成した画像を表示する。 A surrounding image display method according to one aspect captures an image of the surroundings of a vehicle, determines a traveling scene of the vehicle, and sets a display range from the surrounding image of the vehicle based on the traveling scene. In addition, the layout of the image to be displayed is set based on the driving scene, an image for displaying the image in the display range on the display unit with the set layout is generated, and the generated image is displayed.
本発明によれば、車両の走行シーンに基づいて、表示部に表示する画像を変更するので、車両の運転状況に応じた車両周囲画像を表示することが可能となる。 According to the present invention, since the image displayed on the display unit is changed based on the traveling scene of the vehicle, it is possible to display a vehicle surrounding image according to the driving situation of the vehicle.
以下、本発明の実施形態を図面に基づいて説明する。
［第１実施形態の説明］
図１は、本発明の第１実施形態に係る周囲画像表示装置の構成を示すブロック図である。図１に示すように、この周囲画像表示装置１００は、車両に搭載されて該車両の周囲画像を表示し、運転者の視認性を向上させるものである。車両の周囲を撮像するカメラ１７（撮像部）と、走行シーン判断部１１と、表示範囲設定部１２と、レイアウト設定部１３と、画像生成演算部１４と、地図データベース１６、及び表示部１５を備えている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[Description of First Embodiment]
FIG. 1 is a block diagram showing a configuration of a surrounding image display apparatus according to the first embodiment of the present invention. As shown in FIG. 1, the surrounding
表示部１５は、走行に関する情報を含む各種の情報を画面表示して運転者に提示する。例えば、図２に示すように、車両内のインパネの運転者が容易に視線を移動して視認できる位置に設けられている。
The
カメラ１７は、車両に複数設置されており、車両の前方、側方、及び後方を撮像することができる。そして、該カメラ１７で撮像された画像は、表示範囲設定部１２、及びレイアウト設定部１３に出力される。
A plurality of
走行シーン判断部１１は、車両が走行する走行路の周囲環境に関する環境データ、及び車両の操作データ（例えば、ウィンカーの操作データ）を取得して、車両の走行シーンを判断する。そして、走行シーンに関するデータを表示範囲設定部１２、及びレイアウト設定部１３に出力する。
The travel
表示範囲設定部１２は、走行シーン判断部１１で判断された車両の走行シーンに基づいて、カメラ１７で撮像された車両の周囲画像から、表示範囲を設定する。例えば、図４（ａ）に示すように、車両Ｖ１がＴ字路を左折する際には、車両Ｖ１の前方の領域Ｒ１、左前方の領域Ｒ２、及び右後方の領域Ｒ３を表示範囲として設定する。詳細な設定方法については後述する。なお、以下では領域Ｒ１〜Ｒ３を撮像して得られる画像についても同一の符号Ｒ１〜Ｒ３で表記する。
The display
レイアウト設定部１３は、表示部１５に表示する画像のレイアウトを設定する。表示範囲設定部１２で設定された表示範囲の画像の表示サイズ、及び表示対象とする画像の表示形状を設定する。具体的には、図４（ｃ）に示すように、車両Ｖ１が直進している場合には、前方の画像（前側画像；領域Ｒ１の画像）、左後方の画像（左側画像；領域Ｒ２の画像）、及び右後方の画像（右側画像；領域Ｒ３の画像）をそれぞれ表示する。この際、前方の画像を最も大きく表示し、左右の画像を相対的に小さく表示する。更に、左右の画像を平行四辺形状に表示することにより、左右の画像であることを運転者に認識し易くする。例えば、図４（ｂ）の画像Ｒ２、Ｒ３は平行四辺形状に表示されている。また、レイアウト情報を画像生成演算部１４に出力する。
The
即ち、レイアウト設定部１３は、車両の前側画像、左側画像、及び右側画像の各画像を、走行シーンに基づいて、運転者の必要度の高い画像ほど大きくなるように、表示部１５に表示する。更に、レイアウト設定部１３は、表示部１５の表示領域を３つの領域に区分し、この３つの領域に、それぞれ車両の前側画像、左側画像、及び右側画像を表示する。
That is, the
画像生成演算部１４は、表示部１５に表示するための画像を生成する処理を実行する。詳細な処理については後述する。
The image
なお、周囲画像表示装置１００は、例えば、中央演算ユニット（ＣＰＵ）や、ＲＡＭ、ＲＯＭ、ハードディスク等の記憶手段からなる一体型のコンピュータとして構成することができる。
The surrounding
次に、上述のように構成された本実施形態に係る周囲画像表示装置１００の作用を、図３に示すフローチャート、及び図４、図５に示す説明図を参照して説明する。図３は、図１に示した画像生成演算部１４による処理手順を示すフローチャートである。初めに、ステップＳ１１において、画像生成演算部１４は、車両Ｖ１の現在位置に基づいて、車両Ｖ１が走行する走行路、及びその周辺の走行路情報を取得する。走行路情報は、地図データベース１６より取得することができる。
Next, the operation of the surrounding
ステップＳ１２において、画像生成演算部１４は、ステップＳ１１の処理で取得した走行路情報に基づき、自車両が交差点に接近しているか否かを判断する。そして、交差点に接近していなければ（ステップＳ１２でＮＯ）、ステップＳ１１に処理を戻す。一方、交差点に接近している場合には（ステップＳ１２でＹＥＳ）、自車両がこの交差点を右折、或いは左折するか否かを判断する。そして、右折或いは左折する場合には、ステップＳ１４に処理を進め、直進する場合にはステップＳ１５に処理を進める。
In step S12, the image
図４（ａ）の符号Ｇ２或いは図５（ａ）の符号Ｇ４に示すように、車両Ｖ１が交差点から離れた位置を直進している場合には、ステップＳ１５において、画像生成演算部１４は、図４（ｃ）に示すように、中央の広い領域に前方の画像Ｒ１を表示し、左側の領域に左後方の画像Ｒ２を表示し、右側の領域に右後方の画像Ｒ３を表示する。更に、画像Ｒ２、Ｒ３は、後方の画像であることを認識し易くするために平行四辺形状（傾斜した表示）の表示枠とする。こうすることにより、前方の画像Ｒ１が認識し易い態様で表示され、且つ左右後方の画像Ｒ２、Ｒ３が画像Ｒ１の側方に表示されるので、運転者は直進時に必要とする周囲の状況を認識することができる。
As indicated by reference symbol G2 in FIG. 4 (a) or reference symbol G4 in FIG. 5 (a), when the vehicle V1 travels straight away from the intersection, in step S15, the image
一方、図４（ａ）の符号Ｇ１或いは図５（ａ）の符号Ｇ３に示すように、車両Ｖ１が交差点に接近しておりこの交差点を右折、或いは左折する場合には、ステップＳ１４において、画像生成演算部１４は、交差点がＴ字路（三叉路）であるか、或いは十字路（四叉路）であるかを判断する。そして、Ｔ字路である場合にはステップＳ１６において、曲がる方向の画像が大きく表示されるように、表示部１５の表示態様を変更する。
On the other hand, when the vehicle V1 is approaching the intersection and turns right or left as shown by the symbol G1 in FIG. 4A or the symbol G3 in FIG. 5A, an image is displayed in step S14. The
例えば、図４（ａ）に示すように車両Ｖ１がＴ字路を左折する場合で、符号Ｇ１に示すように該Ｔ字路に接近した際には、左前方の領域Ｒ２を大きめに設定する。その結果、図４（ｂ）に示すように、左前方の画像Ｒ２が大きく表示され、右後方の画像Ｒ３が小さく表示される。この際、画像Ｒ２、Ｒ３は、平行四辺形状に表示する。従って、運転者は、左折しようとする方向の画像を大きい画像Ｒ２で視認することができるので、左折時の安全確認を確実に行うことができる。 For example, when the vehicle V1 makes a left turn on the T-shaped road as shown in FIG. 4A, when the vehicle V1 approaches the T-shaped road as shown by reference numeral G1, the left front region R2 is set larger. . As a result, as shown in FIG. 4B, the left front image R2 is displayed larger and the right rear image R3 is displayed smaller. At this time, the images R2 and R3 are displayed in a parallelogram shape. Therefore, the driver can visually recognize the image in the direction in which the user wants to make a left turn with the large image R2, so that the driver can surely confirm the safety at the time of the left turn.
他方、交差点が十字路である場合には、ステップＳ１７において、画像生成演算部１４は、曲がる方向の反対側の画像が大きく表示されるように、表示部１５の表示態様を変更する。例えば、車両が十字路を左折する場合には、図５（ａ）の符号Ｇ３に示すように、車両の右側前方の画像が大きく表示されるように領域Ｒ３を設定する。具体的には、図５（ｂ）に示すように、右側前方の画像Ｒ３を大きく表示し、且つ左側前方の画像Ｒ１を小さく表示する。また、画像Ｒ２、Ｒ３を平行四辺形状に表示する。従って、運転者は、十字路を左折する際に、右側から走行してくる他車両Ｖ２の存在を容易に認識することができ、左折時の安全確認を容易に行うことが可能となる。
On the other hand, if the intersection is a crossroad, in step S <b> 17, the image
このようにして、第１実施形態に係る周囲画像表示装置１００では、車両Ｖ１が交差点を通過する際に、該車両Ｖ１の右左折の状況、及び交差点の状況（三叉路、四叉路等）に応じて表示部１５を３分割した際の表示領域の大きさ、及び各表示領域に表示する画像を設定している。
In this way, in the surrounding
具体的には、車両Ｖ１が直進している場合には、図４（ａ）の符号Ｇ２に示すように、車両Ｖ１の前方の領域、左後方の領域、及び右後方の領域を設定し、図４（ｃ）に示すように前方の画像Ｒ１が大きく表示され、左後方及び右後方の画像Ｒ２、Ｒ３が相対的に小さく表示されるようにレイアウトが設定される。 Specifically, when the vehicle V1 is traveling straight, as shown by a symbol G2 in FIG. 4A, a front area, a left rear area, and a right rear area of the vehicle V1 are set. As shown in FIG. 4C, the layout is set so that the front image R1 is displayed large and the left rear and right rear images R2 and R3 are displayed relatively small.
また、Ｔ字路を左折する場合には、図４（ａ）の符号Ｇ１に示すように、車両Ｖ１の前方の領域、左前方の領域、及び右後方の領域を設定し、図４（ｂ）に示すように前方の画像Ｒ１、及び左前方の画像Ｒ２が大きく表示され、右後方の画像Ｒ３が相対的に小さく表示されるようにレイアウトが設定される。更に、十字路を左折する場合には、図５（ａ）の符号Ｇ３に示すように、車両Ｖ１の前方の領域、左前方の領域、及び右前方の領域を設定し、図５（ｂ）に示すように前方の画像Ｒ１、及び右前方の画像Ｒ３が大きく表示され、左前方の画像Ｒ２が相対的に小さく表示されるようにレイアウトが設定される。 When turning left at the T-junction, as shown by reference numeral G1 in FIG. 4A, a front area, a left front area, and a right rear area of the vehicle V1 are set, and FIG. ), The layout is set so that the front image R1 and the left front image R2 are displayed large, and the right rear image R3 is displayed relatively small. Further, when making a left turn at the crossroads, as shown by reference numeral G3 in FIG. 5A, a front area, a left front area, and a right front area of the vehicle V1 are set, and FIG. As shown, the layout is set so that the front image R1 and the right front image R3 are displayed large, and the left front image R2 is displayed relatively small.
従って、走行状況に応じた適切な周囲画像を表示部１５に表示することができる。その結果、運転者は、交差点の右左折時及び直進時において、確実に周囲の状況を認識することが可能となり、安全確認操作を容易に実施することが可能となる。
Accordingly, it is possible to display an appropriate surrounding image corresponding to the traveling state on the
また、走行シーン判断部１１は、例えばウィンカー操作等の操作データに基づいて、走行シーンを判断するので、車両Ｖ１が右左折するか、或いは直進するか等の走行シーンを確実に認識することが可能となる。
Further, since the traveling
更に、前側画像、左側画像、及び右側画像を表示部１５に表示する際に、運転者の必要度の高い画像ほど大きくなるように表示されるので、運転者は確実に安全確認を行うことが可能となる。
Furthermore, when the front image, the left image, and the right image are displayed on the
また、表示部１５を３つの領域に区分し、中央の領域に前方画像を表示し、左側の領域に左側画像を表示し、右側の領域に右側画像を表示するので、運転者は表示部１５に分割して表示される各画像を直観的に認識することができ、より確実に安全確認を行うことが可能となる。
Further, the
［第１実施形態の第１変形例の説明］
次に、第１実施形態の第１変形例について説明する。前述した第１実施形態では、車両Ｖ１が交差点に接近すると、図４（ｂ）、（ｃ）に示したように、直進時の表示画像、及びレイアウトから、左折時の表示画像、及びレイアウトに変更する例を示した。第１変形例では、車両が交差点に接近すると、表示画像、及びレイアウトを段階的に変更する。即ち、車両周囲の環境変化や運転操作に応じて表示画像、及びレイアウトを段階的に変更する。
[Description of First Modification of First Embodiment]
Next, a first modification of the first embodiment will be described. In the first embodiment described above, when the vehicle V1 approaches the intersection, as shown in FIGS. 4B and 4C, the display image and layout when turning left are changed from the display image and layout when traveling straight ahead. An example of changing is shown. In the first modification, when the vehicle approaches the intersection, the display image and the layout are changed in stages. That is, the display image and the layout are changed stepwise in accordance with environmental changes around the vehicle and driving operations.
以下、第１変形例の作用を、図６に示すフローチャートを参照して説明する。図６に示すフローチャートは、図３に示したフローチャートのＳ１６、Ｓ１７が相違している。以下、図３との相違点であるステップＳ１６ａ、Ｓ１７ａについて説明する。 Hereinafter, the operation of the first modification will be described with reference to the flowchart shown in FIG. The flowchart shown in FIG. 6 is different from S16 and S17 in the flowchart shown in FIG. Hereinafter, steps S16a and S17a, which are different from FIG. 3, will be described.
ステップＳ１６ａでは、画像生成演算部１４は、曲がる方向の画像を段階的に変化するように表示する処理を行う。即ち、車両Ｖ１がＴ字路を左折する際には、図４（ｃ）に示す左後方の画像Ｒ２から、図４（ｂ）に示す左前方の画像Ｒ２に切り替えられる。また、図４（ｃ）に示す画像Ｒ２を段階的に大きくして図４（ｂ）に示す大きさに変化させる。
In step S <b> 16 a, the image
更に、ステップＳ１７ａにおいても同様に、画像生成演算部１４は、曲がる方向の画像を段階的に大きくなるように表示する処理を行う。即ち、車両Ｖ１が十字路を左折する際には、図５（ｃ）に示す右後方の画像Ｒ３から、図５（ｂ）に示す右前方の画像Ｒ３に切り替えられる。また、図５（ｃ）に示す画像Ｒ３を段階的に大きくして図５（ｂ）に示す大きさに変化させる。
Further, similarly in step S17a, the image
このように、表示部１５に表示する画像、及びレイアウトを段階的に変化させることにより、車両Ｖ１の運転者に違和感を感じさせることなく、所望の画像に切り替えることが可能となる。
In this manner, by changing the image displayed on the
［第１実施形態の第２変形例の説明］
次に、第１実施形態の第２変形例について説明する。前述した第１実施形態では、車両Ｖ１が交差点に接近した際に、表示部１５に表示する画像、及びレイアウトを変更することについて説明した。第２変形例では、車両Ｖ１が交差点に接近した際に、車両Ｖ１の運転者が必要とする時点に達した際に、画像、及びレイアウトを変更する。
[Description of Second Modification of First Embodiment]
Next, a second modification of the first embodiment will be described. In 1st Embodiment mentioned above, when the vehicle V1 approached an intersection, changing the image displayed on the
以下、第２変形例の作用を、図７に示すフローチャートを参照して説明する。図７に示すフローチャートは、図３に示したフローチャートのＳ１５、Ｓ１６、Ｓ１７の前に、ステップＳ１５ｂ、Ｓ１６ｂ、Ｓ１７ｂの処理を実行する点で相違している。以下、図７に示すステップＳ１５ｂ、Ｓ１６ｂ、Ｓ１７ｂについて説明する。 Hereinafter, the operation of the second modification will be described with reference to the flowchart shown in FIG. The flowchart shown in FIG. 7 is different in that the processes of steps S15b, S16b, and S17b are executed before S15, S16, and S17 of the flowchart shown in FIG. Hereinafter, steps S15b, S16b, and S17b shown in FIG. 7 will be described.
ステップＳ１３の処理で、車両Ｖ１が直進すると判断された際には、ステップＳ１５ｂにおいて、画像生成演算部１４は、表示時間に達したか否かを判断し、表示時間に達した場合にはステップＳ１５の処理を実行する。
When it is determined in step S13 that the vehicle V1 is going straight ahead, in step S15b, the image
また、車両Ｖ１が曲がる交差点がＴ字路であると判断された際には、ステップＳ１６ｂにおいて、画像生成演算部１４は、表示時間に達したか否かを判断し、表示時間に達した場合にはステップＳ１６の処理を実行する。
When it is determined that the intersection where the vehicle V1 turns is a T-junction, in step S16b, the image
更に、車両Ｖ１が曲がる交差点が十字路であると判断された際には、ステップＳ１７ｂにおいて、画像生成演算部１４は、表示時間に達したか否かを判断し、表示時間に達した場合にはステップＳ１７の処理を実行する。
Further, when it is determined that the intersection where the vehicle V1 turns is a crossroad, in step S17b, the image
上記の処理では、図４（ａ）を参照して説明すると、例えば、車両Ｖ１がＴ字路に接近し、この交差点を左折する場合には、運転者が左折の操作を開始する時点で、画像が切り替えるのが望ましい。換言すれば、交差点を左折すると判断された直後に画像が切り替えられると、運転者に煩わしさを感じさせてしまうことがある。第２変形例では、交差点に進入する場合等、将来走行シーンが変化する際に、この変化する時点よりも所定時間だけ前の時点に達した際（表示時間に達した際）に、表示範囲、及び表示のレイアウトを変更する。なお、上記の所定時間は、車両Ｖ１の走行速度、及び現在位置から交差点までの距離に基づいて算出することができる。従って、適切なタイミングで画像が切り替えられるので、運転者に煩わしさを感じさせることなく、円滑な画像の切り替えが可能となる。 In the above processing, with reference to FIG. 4 (a), for example, when the vehicle V1 approaches a T-junction and turns left at this intersection, when the driver starts the left turn operation, It is desirable to switch images. In other words, if the image is switched immediately after it is determined to turn left at the intersection, the driver may feel annoyed. In the second modified example, when the driving scene changes in the future, such as when entering an intersection, the display range is reached when a time point that is a predetermined time before the changing time point is reached (when the display time is reached). , And change the display layout. The predetermined time can be calculated based on the traveling speed of the vehicle V1 and the distance from the current position to the intersection. Accordingly, since the images are switched at an appropriate timing, it is possible to smoothly switch the images without causing the driver to feel bothered.
更に、車両の環境データ、及び地図データベース１６に基づく車両Ｖ１の周囲の環境に基づき、将来において環境の変化が予想される際には、この変化する時点よりも所定時間だけ前の時点に達した際（表示時間に達した際）に、前記表示範囲及び前記レイアウトを変更するので、円滑な画像の切り替えが可能となる。
Furthermore, when a change in the environment is predicted in the future based on the environment data of the vehicle and the environment around the vehicle V1 based on the
［第２実施形態の説明］
次に、第２実施形態の周囲画像表示装置について説明する。図８は、第２実施形態に係る周囲画像表示装置１０１の構成を示すブロック図である。該周囲画像表示装置１０１では、前述した図１と対比して走行履歴記憶部１８を備える点で相違する。それ以外の構成は、前述した図１と同様であるので同一符号を付して説明を省略する。
[Description of Second Embodiment]
Next, the surrounding image display apparatus of 2nd Embodiment is demonstrated. FIG. 8 is a block diagram illustrating a configuration of the surrounding
走行履歴記憶部１８は、車両Ｖ１が過去に走行した走行経路を記憶して蓄積するものである。そして、走行経路に関する情報を走行シーン判断部１１に出力する。
The travel
次に、第２実施形態に係る周囲画像表示装置１０１の作用を、図９に示すフローチャート、及び図１０に示す説明図を参照して説明する。
Next, the operation of the surrounding
図９は、画像生成演算部１４による処理手順を示すフローチャートである。初めに、ステップＳ３１において、画像生成演算部１４は、車両Ｖ１の現在位置に基づいて該車両Ｖ１が走行する走行路、及びその周辺の走行路情報を取得する。走行路情報は、地図データベース１６より取得することができる。
FIG. 9 is a flowchart illustrating a processing procedure performed by the image
ステップＳ３２において、画像生成演算部１４は、走行履歴記憶部１８に記憶されている情報に基づき、運転者の過去の走行履歴を取得する。その結果、過去にこの車両Ｖ１がどの交差点をどの方向に曲がったか等の走行履歴に関する情報を取得することができる。
In step S <b> 32, the image
ステップＳ３３において、車両Ｖ１が交差点に接近しているか否かを判断する。そして、交差点に接近していない場合には（ステップＳ３３でＮＯ）、ステップＳ３１に処理を戻す。一方、交差点（この場合は、Ｔ字路とする）に接近している場合には（ステップＳ３３でＹＥＳ）、ステップＳ３４において、画像生成演算部１４は、ステップＳ３２の処理で取得した走行履歴に基づき、車両Ｖ１がＴ字路で左折するか、或いは直進するかを判断する。過去の走行履歴から、この車両がＴ字路を左折している場合、或いは左折する比率が高い場合には、車両Ｖ１はこのＴ字路で左折するものと判断する。
In step S33, it is determined whether or not the vehicle V1 is approaching the intersection. If the vehicle is not approaching the intersection (NO in step S33), the process returns to step S31. On the other hand, when approaching an intersection (in this case, a T-junction) (YES in step S33), in step S34, the image
そして、左折する場合には、ステップＳ３５において、画像生成演算部１４は、車両Ｖ１の左前方の画像が大きく表示されるように、表示部１５の表示態様を変更する。具体的には、前述の図４（ａ）に示したように、前方の領域Ｒ１、左前方の領域Ｒ２、及び右後方の領域Ｒ３を設定し、左前方の画像Ｒ２を大きく表示する。更に、画像Ｒ２、Ｒ３を平行四辺形状に表示する。従って、運転者は、Ｔ字路を左折する際に、左前方の画像Ｒ２を視認し易くなり、左折時の安全確認を容易に行うことが可能となる。
And when turning left, in step S35, the image
一方、交差点を直進する場合には、ステップＳ３６において、画像生成演算部１４は、車両Ｖ１の前方の画像が大きく表示されるように、表示部１５の表示態様を変更する。具体的には、図１０の符号Ｇ５に示すように、車両前方の領域Ｒ１を大きく設定し、左前方の領域Ｒ２をやや大きく設定し、且つ、右後方の領域Ｒ３を小さく設定する。
On the other hand, when going straight through the intersection, in step S36, the image
その結果、車両Ｖ１が交差点から離れた位置を直進している際には、図１０（ｃ）に示すように前方の画像Ｒ１、左後方の画像Ｒ２、及び右後方の画像Ｒ３を表示し、交差点に接近すると、図１０（ｂ）に示すように、左前方の画像Ｒ２を若干大きく表示する。また、画像Ｒ１、Ｒ３は、平行四辺形状の表示する。従って、運転者は、Ｔ字路を直進する際に、車両Ｖ１の前方の画像を視認し易くなり、更に、画像Ｒ２を見ることによりＴ字路の左側の状況を視認し易くなり、交差点通過時の安全確認を容易に行うことが可能となる。 As a result, when the vehicle V1 is traveling straight away from the intersection, the front image R1, the left rear image R2, and the right rear image R3 are displayed as shown in FIG. When approaching the intersection, the left front image R2 is displayed slightly larger as shown in FIG. The images R1 and R3 are displayed in a parallelogram shape. Therefore, when the driver goes straight on the T-junction, it becomes easier to visually recognize the image in front of the vehicle V1, and further, it becomes easier to visually recognize the situation on the left side of the T-junction by looking at the image R2. It becomes possible to easily check the safety at the time.
このようにして、第２実施形態に係る周囲画像表示装置１０１では、車両Ｖ１の走行履歴に基づいて、交差点を曲がるか、或いは直進するかを判断し、この判断結果に基づいて、表示部に表示する画像、及びレイアウトを設定する。従って、早い時点で運転者が必要とする周囲画像を表示することができ、より安全確認を容易にすることが可能となる。
In this manner, the surrounding
なお、第２実施形態では、車両Ｖ１がＴ字路（三叉路）を曲がる場合を例に挙げて説明したが、十字路等の四叉路以上の交差点を曲がる場合についても適用することができる。 In the second embodiment, the case where the vehicle V1 bends a T-shaped road (three-way) has been described as an example, but the present invention can also be applied to a case where the vehicle V1 turns an intersection of four or more roads such as a crossroad.
［第３実施形態の説明］
次に、本発明の第３実施形態について説明する。第３実施形態に係る周囲画像表示装置は、前述した図１に示した周囲画像表示装置１００と同一構成であるので、構成説明を省略する。
[Description of Third Embodiment]
Next, a third embodiment of the present invention will be described. The surrounding image display device according to the third embodiment has the same configuration as that of the surrounding
以下、第３実施形態に係る周囲画像表示装置の作用について、図１１に示すフローチャート、及び図１２に示す説明図を参照して説明する。初めに、ステップＳ５１において、画像生成演算部１４は、車両Ｖ１の現在位置に基づいて該車両Ｖ１が走行する走行路、及びその周辺の走行路情報を取得する。走行路情報は、地図データベース１６より取得することができる。
The operation of the surrounding image display apparatus according to the third embodiment will be described below with reference to the flowchart shown in FIG. 11 and the explanatory diagram shown in FIG. First, in step S51, the image
ステップＳ５２において、車両Ｖ１が交差点に接近しているか否かを判断する。そして、交差点に接近していない場合には（ステップＳ５２でＮＯ）、ステップＳ５１に処理を戻す。一方、交差点（ここでは三叉路とする）に接近している場合には（ステップＳ５２でＹＥＳ）、ステップＳ５３において、画像生成演算部１４は、車両の操作データ及び環境データに基づき、車両Ｖ１が三叉路で左折するか、或いは直進するかを判断する。左折、或いは直進の判断は、運転者の操作（ウィンカーの操作等）に基づいて決めることができる。また、第２実施形態に示した図８のように走行履歴記憶部１８を備える場合には、該走行履歴記憶部１８に記憶されている走行履歴に基づいて決めるようにしてもよい。
In step S52, it is determined whether or not the vehicle V1 is approaching the intersection. If the vehicle is not approaching the intersection (NO in step S52), the process returns to step S51. On the other hand, when approaching an intersection (here, a three-way road) (YES in step S52), in step S53, the image
交差点を直進する場合には、ステップＳ５６において、画像生成演算部１４は、車両Ｖ１の前方の画像が大きく表示されるように、表示部１５の表示態様を変更する。具体的には、前述した図１０（ｂ）に示したように、車両前方の領域Ｒ１を大きく設定し、左前方の領域Ｒ２をやや大きく設定し、且つ、右後方の領域Ｒ３を小さく設定する。
When going straight through the intersection, in step S56, the image
一方、左折する場合には、ステップＳ５４において、画像生成演算部１４は、交差点の角度情報を取得する。具体的には、地図データベース１６に記憶されている地図データに基づき、三叉路の角度（図１２（ａ）に示す角度θ）を取得する。ステップＳ５５において、上記の角度が９０度を超えるか否かを判断する。
On the other hand, when making a left turn, in step S54, the image
交差点の角度が９０度以下である場合には、ステップＳ５８において、表示範囲設定部１２は、車両Ｖ１の左前方の画像が大きくなるように表示範囲を設定する。具体的には、前述した図４（ｂ）に示したように、左前方の画像Ｒ２を大きく表示することにより、車両Ｖ１の左前方の画像を視認し易くする。
If the angle of the intersection is 90 degrees or less, in step S58, the display
また、交差点の角度が９０度を超える場合には、ステップＳ５７において、表示範囲設定部１２は、角度の大きさに応じて左前方の画像を変化するように表示範囲を設定する。具体的には、図１２（ａ）に示すように、交差点の角度θが９０度を超える場合（鈍角の場合）には、左前方の画像Ｒ２が左折後の走行路の方向を向くように角度を変化させる。即ち、図１２（ａ）に示す領域Ｒ２は、図４（ａ）に示す領域Ｒ２よりも、より後方の領域とされている。こうすることにより、交差点の角度θが９０度を超えるような場合でも、左折後の走行路の状況を視認することができるので、より安全性を高めることができる。
When the angle of the intersection exceeds 90 degrees, in step S57, the display
また、交差点の角度θに応じて、表示部１５に表示する画像Ｒ２の角度を変化させている。具体的には、図１２（ｂ）に示すように、平行四辺形状をなす領域Ｒ２の傾斜角度を大きくしている。即ち、図４（ｂ）の画像Ｒ２に対して、図１２（ｂ）の画像Ｒ２は傾斜角度が大きくなっている。
Further, the angle of the image R2 displayed on the
このようにして、第３実施形態に係る周囲画像表示装置１０１では、車両Ｖ１が交差点を右左折する際に、現在の走行路と右左折後の走行路との角度θに応じて表示範囲が設定される。従って、車両Ｖ１の運転者は、曲がった後の走行路の状況を視認できるようになり、より確実に交差点での安全確認を行うことが可能となる。また、図１２（ｂ）の画像Ｒ２に示すように、平行四辺形状の領域の角度が大きくなるので、運転者は交差点の角度を直観的に認識することが可能となる。
As described above, in the surrounding
以上、本発明の周囲画像表示装置、及び周囲画像表示方法を図示の実施形態に基づいて説明したが、本発明はこれに限定されるものではなく、各部の構成は、同様の機能を有する任意の構成のものに置き換えることができる。 As described above, the surrounding image display device and the surrounding image display method of the present invention have been described based on the illustrated embodiment. However, the present invention is not limited to this, and the configuration of each unit is an arbitrary one having the same function. It can be replaced with that of the configuration.
１１ 走行シーン判断部
１２ 表示範囲設定部
１３ レイアウト設定部
１４ 画像生成演算部
１５ 表示部
１６ 地図データベース
１７ カメラ（撮像部）
１８ 走行履歴記憶部
１００，１０１ 周囲画像表示装置
Ｖ１ 車両
Ｖ２ 他車両
DESCRIPTION OF
18 Travel
Claims (10)
車両の周囲を撮像する撮像部と、
画像を表示する表示部と、
車両の走行シーンを判断する走行シーン判断部と、
前記走行シーン判断部で判断された走行シーンに基づいて、前記撮像部にて撮像される画像から表示範囲を設定する表示範囲設定部と、
前記走行シーン判断部で判断された走行シーンに基づいて、表示対象とする画像のレイアウトを設定するレイアウト設定部と、
前記表示範囲設定部で設定された表示範囲の画像を、前記レイアウト設定部で設定されたレイアウトで前記表示部に表示する画像を生成する画像生成演算部と、
を備えたことを特徴とする周囲画像表示装置。 In a surrounding image display device that is mounted on a vehicle and displays a surrounding image of the vehicle,
An imaging unit for imaging the surroundings of the vehicle;
A display for displaying an image;
A traveling scene determination unit that determines a traveling scene of the vehicle;
A display range setting unit that sets a display range from an image captured by the imaging unit based on the traveling scene determined by the traveling scene determination unit;
A layout setting unit that sets a layout of an image to be displayed based on the traveling scene determined by the traveling scene determination unit;
An image generation calculation unit that generates an image to be displayed on the display unit with the layout set by the layout setting unit, the image of the display range set by the display range setting unit;
A surrounding image display device comprising:
を特徴とする請求項１に記載の周囲画像表示装置。 The traveling scene determining unit determines a traveling scene based on an operation of a vehicle driver, and the display range setting unit sets an area required by the driver based on the traveling scene as a display range. The surrounding image display device according to claim 1.
を特徴とする請求項１に記載の周囲画像表示装置。 The travel scene determination unit determines a travel scene based on a travel history of the vehicle, and the display range setting unit sets an area required by the driver of the vehicle as a display range based on the travel scene. The surrounding image display device according to claim 1.
を特徴とする請求項１〜３のいずれか１項に記載の周囲画像表示装置。 The layout setting unit displays the front image, the left image, and the right image of the vehicle on the display unit so as to be larger as an image having a higher necessity for the driver of the vehicle based on the traveling scene. The surrounding image display device according to any one of claims 1 to 3, wherein:
前記走行シーンに基づいて、各領域の大きさ及び形状の少なくとも一方を変化させること
を特徴とする請求項１〜４のいずれか１項に記載の周囲画像表示装置。 The layout setting section divides the display area of the display section into three areas, and displays a front image, a left image, and a right image of the vehicle in the three areas,
The surrounding image display device according to any one of claims 1 to 4, wherein at least one of a size and a shape of each region is changed based on the traveling scene.
を特徴とする請求項５に記載の周囲画像表示装置。 The surrounding image display device according to claim 5, wherein the layout setting unit changes the image stepwise in accordance with an environment change around the vehicle or a driving operation.
を特徴とする請求項１〜６のいずれか１項に記載の周囲画像表示装置。 The display range setting unit and the layout setting unit are configured to change the display range and the layout when a driving scene changes in the future, when a time point that is a predetermined time before the changing time point is reached. The surrounding image display device according to claim 1, wherein the surrounding image display device is a display device.
を特徴とする請求項１〜６のいずれか１項に記載の周囲画像表示装置。 When the environmental change is expected in the future, the display range setting unit and the layout setting unit are configured to display the display range and the layout when reaching a time point that is a predetermined time before the changing time point. It changes. The surrounding image display apparatus of any one of Claims 1-6 characterized by the above-mentioned.
を特徴とする請求項１〜８のいずれか１項に記載の周囲画像表示装置。 The travel scene is a left / right turn at an intersection, and the display range setting unit sets a display range according to an angle between a current travel path and a travel path after a right / left turn. The surrounding image display apparatus of any one of -8.
車両の走行シーンを判断する工程と、
前記走行シーンに基づいて、車両の周囲画像から表示範囲を設定する工程と、
前記走行シーンに基づいて、表示対象とする画像のレイアウトを設定する工程と、
前記表示範囲の画像を、設定されたレイアウトで表示部に表示する画像を生成し、生成した画像を表示する工程と、
を備えたことを特徴とする周囲画像表示方法。 Imaging the surroundings of the vehicle;
A step of determining a running scene of the vehicle;
Setting a display range from a surrounding image of the vehicle based on the traveling scene;
A step of setting a layout of an image to be displayed based on the traveling scene;
Generating an image for displaying the image in the display range on a display unit in a set layout, and displaying the generated image;
A surrounding image display method characterized by comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015143083A JP2017024484A (en) | 2015-07-17 | 2015-07-17 | Surrounding image display device and surrounding image display method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015143083A JP2017024484A (en) | 2015-07-17 | 2015-07-17 | Surrounding image display device and surrounding image display method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017024484A true JP2017024484A (en) | 2017-02-02 |
Family
ID=57944946
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015143083A Pending JP2017024484A (en) | 2015-07-17 | 2015-07-17 | Surrounding image display device and surrounding image display method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2017024484A (en) |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002154375A (en) * | 2000-11-20 | 2002-05-28 | Nissan Motor Co Ltd | Visibility supporting device for vehicle |
| JP2003081014A (en) * | 2001-09-14 | 2003-03-19 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery monitoring device |
| JP2003116125A (en) * | 2001-10-03 | 2003-04-18 | Auto Network Gijutsu Kenkyusho:Kk | Apparatus for visually confirming surrounding of vehicle |
| JP2004155395A (en) * | 2002-11-08 | 2004-06-03 | Denso Corp | Vehicle surrounding image processing device |
| WO2006006689A1 (en) * | 2004-07-12 | 2006-01-19 | Sharp Kabushiki Kaisha | Display system, vehicle, display method, display program and storage medium thereof |
| JP2007026281A (en) * | 2005-07-20 | 2007-02-01 | Matsushita Electric Ind Co Ltd | Display controller |
| JP2009117971A (en) * | 2007-11-02 | 2009-05-28 | Denso Corp | Apparatus for monitoring periphery of vehicle |
| JP2010215027A (en) * | 2009-03-13 | 2010-09-30 | Fujitsu Ten Ltd | Driving assistant device for vehicle |
| JP2011035816A (en) * | 2009-08-05 | 2011-02-17 | Denso Corp | Vehicle periphery image display control apparatus |
-
2015
- 2015-07-17 JP JP2015143083A patent/JP2017024484A/en active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002154375A (en) * | 2000-11-20 | 2002-05-28 | Nissan Motor Co Ltd | Visibility supporting device for vehicle |
| JP2003081014A (en) * | 2001-09-14 | 2003-03-19 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery monitoring device |
| JP2003116125A (en) * | 2001-10-03 | 2003-04-18 | Auto Network Gijutsu Kenkyusho:Kk | Apparatus for visually confirming surrounding of vehicle |
| JP2004155395A (en) * | 2002-11-08 | 2004-06-03 | Denso Corp | Vehicle surrounding image processing device |
| WO2006006689A1 (en) * | 2004-07-12 | 2006-01-19 | Sharp Kabushiki Kaisha | Display system, vehicle, display method, display program and storage medium thereof |
| JP2007026281A (en) * | 2005-07-20 | 2007-02-01 | Matsushita Electric Ind Co Ltd | Display controller |
| JP2009117971A (en) * | 2007-11-02 | 2009-05-28 | Denso Corp | Apparatus for monitoring periphery of vehicle |
| JP2010215027A (en) * | 2009-03-13 | 2010-09-30 | Fujitsu Ten Ltd | Driving assistant device for vehicle |
| JP2011035816A (en) * | 2009-08-05 | 2011-02-17 | Denso Corp | Vehicle periphery image display control apparatus |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6077210B2 (en) | Vehicle rearward monitoring device | |
| RU2704773C1 (en) | Display control method and device | |
| JP4560090B2 (en) | Navigation device and navigation method | |
| TWI388803B (en) | Navigation system having simplified display mode and displaying method thereof | |
| JP6521081B2 (en) | Vehicle display device | |
| US20180164114A1 (en) | Vehicle Navigation Display System And Method Thereof | |
| US10724872B2 (en) | Vehicle navigation projection system and method thereof | |
| JPWO2007129382A1 (en) | Navigation apparatus and method | |
| JP2014075079A (en) | Display device | |
| JP2013112269A (en) | In-vehicle display device | |
| US20200312146A1 (en) | Display system | |
| JP2012113672A (en) | Vehicle display device and sight line guide device | |
| JP2019095215A (en) | Superimposed image display device and computer program | |
| JP2013085142A (en) | Drive support device for vehicle | |
| JP6825433B2 (en) | Virtual image display device and computer program | |
| JP2016074410A (en) | Head-up display device and head-up display display method | |
| JPWO2017163517A1 (en) | Glasses-type wearable information terminal, control method thereof, and control program | |
| JP6213300B2 (en) | Vehicle display device | |
| WO2022209439A1 (en) | Virtual image display device | |
| JP2019056884A (en) | Superimposed image display device | |
| JP6186905B2 (en) | In-vehicle display device and program | |
| JP2017021019A (en) | Vehicular display apparatus and vehicular display method | |
| JP6065766B2 (en) | Information providing apparatus and information providing method | |
| JP2009067292A (en) | In-vehicle camera system | |
| JP6282567B2 (en) | Vehicle display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180126 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181107 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181113 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181227 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190326 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190522 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190716 |