JP2010116124A - Display control system, display control method, and display control program - Google Patents

Display control system, display control method, and display control program Download PDF

Info

Publication number
JP2010116124A
JP2010116124A JP2008292800A JP2008292800A JP2010116124A JP 2010116124 A JP2010116124 A JP 2010116124A JP 2008292800 A JP2008292800 A JP 2008292800A JP 2008292800 A JP2008292800 A JP 2008292800A JP 2010116124 A JP2010116124 A JP 2010116124A
Authority
JP
Japan
Prior art keywords
state information
vehicle
display control
visual field
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008292800A
Other languages
Japanese (ja)
Other versions
JP5263519B2 (en
Inventor
Hidefumi Okabe
英文 岡部
Tomoyuki Kunitachi
智之 国立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2008292800A priority Critical patent/JP5263519B2/en
Publication of JP2010116124A publication Critical patent/JP2010116124A/en
Application granted granted Critical
Publication of JP5263519B2 publication Critical patent/JP5263519B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a display control system, a display control method and a display control program, capable of controlling optimally display of an image in response to a traveling state. <P>SOLUTION: This display control system 1 includes: a vehicle periphery camera 30 for acquiring the image in the periphery of the vehicle; a view field state information acquiring part 71a for acquiring view field state information for specifying a state about a view field of a driver of the vehicle; a display control part 71b for setting a cut-out range in the image, based on the view field state information; and a display 60 for displaying an image corresponding to the cut-out range out of the image. The display control system 1 is provided further with: the display control part 71b for changing the cut-out range, based on the view field state information, when a change of the view field state information is a threshold value or more; a vehicle state information acquiring part 71c for acquiring vehicle state information for specifying a state of the vehicle; and a threshold value setting part 71d for setting the threshold value, based on the vehicle state information. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、表示制御システム、表示制御方法、及び表示制御プログラムに関する。   The present invention relates to a display control system, a display control method, and a display control program.

従来、ドライバの姿勢に合わせた映像を、車両の天井を支持する柱(以下、ピラー)に表示することができる運転支援装置が提案されている。この運転支援装置は、車両に取り付けられたカメラを用いて、ピラーによって生じる死角領域の映像を撮影し、撮影された映像をピラーの内側に表示する。この際、ドライバの頭部の位置を検出し、ピラーに対する頭部の位置に応じて死角の角度を算出して、ピラーの内側に表示される映像を制御する(例えば、特許文献1参照)。   2. Description of the Related Art Conventionally, a driving support device has been proposed that can display an image in accordance with a driver's posture on a pillar (hereinafter referred to as a pillar) that supports the ceiling of the vehicle. This driving support apparatus uses a camera attached to a vehicle to take an image of a blind spot area caused by a pillar, and displays the taken image on the inside of the pillar. At this time, the position of the head of the driver is detected, the angle of the blind spot is calculated according to the position of the head with respect to the pillar, and the image displayed inside the pillar is controlled (for example, see Patent Document 1).

特開2008−22267号公報JP 2008-22267 A

ところで、運転中のドライバの頭部の動き方は、例えば直進走行時や右左折走行時などの走行状況に応じて異なるが、上述の如き従来の装置では、このような走行状況による差異を考慮せずにドライバの頭部の位置を検出していた。このため、頭部が細動していた場合に、その頭部の位置の検出結果に基づいてピラーの内側に表示される映像も細動してしまい、ドライバに不快感を与えてしまう可能性があった。   By the way, how the driver's head moves during driving differs depending on the driving situation, for example, when driving straight ahead or turning left and right, the conventional apparatus as described above takes into account such differences due to the driving situation. Without detecting the position of the driver's head. For this reason, when the head is fibrillated, the image displayed inside the pillar is also fibrillated based on the detection result of the position of the head, which may cause discomfort to the driver. was there.

本発明は、上記に鑑みてなされたものであって、走行状況に応じた最適な映像の表示制御が可能な表示制御システム、表示制御方法、及び表示制御プログラムを提供することを目的とする。   The present invention has been made in view of the above, and an object of the present invention is to provide a display control system, a display control method, and a display control program capable of optimal display control of an image according to a traveling situation.

上述した課題を解決し、目的を達成するために、請求項1に記載の表示制御システムは、車両の周辺の画像を取得する周辺画像取得手段と、前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段と、前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定手段と、前記画像のうち前記切取範囲に対応する画像を表示する表示手段と、を備える表示制御システムであって、前記視野状態情報の変化が閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更手段と、前記車両の状態を特定する車両状態情報を取得する車両状態情報取得手段と、前記車両状態情報に基づいて、前記閾値を設定する閾値設定手段と、を備えることを特徴とする。   In order to solve the above-described problems and achieve the object, the display control system according to claim 1 specifies a state related to a peripheral image acquisition unit that acquires an image of the periphery of the vehicle and a visual field of the driver of the vehicle. Viewing state information obtaining means for obtaining viewing state information, cutting range setting means for setting a cutting range in the image based on the viewing state information, and display for displaying an image corresponding to the cutting range among the images A display control system comprising: a cutting range changing unit configured to change the cutting range based on the visual field state information when the change in the visual field state information is equal to or greater than a threshold; and specifying the vehicle state Vehicle state information acquisition means for acquiring vehicle state information to be performed; and threshold value setting means for setting the threshold value based on the vehicle state information.

また、請求項2に記載の表示制御システムは、請求項1に記載の表示制御システムにおいて、前記車両状態情報は、前記車両の速度を特定する速度情報であることを特徴とする。   The display control system according to claim 2 is the display control system according to claim 1, wherein the vehicle state information is speed information for specifying a speed of the vehicle.

また、請求項3に記載の表示制御システムは、請求項1又は2に記載の表示制御システムにおいて、前記車両状態情報は、前記車両の現在位置を特定する位置情報であることを特徴とする。   According to a third aspect of the present invention, in the display control system according to the first or second aspect, the vehicle state information is position information that specifies a current position of the vehicle.

また、請求項4に記載の表示制御システムは、請求項1から3のいずれか一項に記載の表示制御システムにおいて、前記車両状態情報は、前記車両のステアリングの操舵角を特定するステアリング情報であることを特徴とする。   The display control system according to claim 4 is the display control system according to any one of claims 1 to 3, wherein the vehicle state information is steering information for specifying a steering angle of the steering of the vehicle. It is characterized by being.

また、請求項5に記載の表示制御システムは、請求項1から4のいずれか一項に記載の表示制御システムにおいて、前記車両状態情報に基づいて、前記視野状態情報取得手段が前記視野状態情報を取得するサンプリング周期を設定するサンプリング周期設定手段を備えることを特徴とする。   Moreover, the display control system according to claim 5 is the display control system according to any one of claims 1 to 4, wherein the visual field state information acquisition unit is configured to perform the visual field state information based on the vehicle state information. It is characterized by comprising sampling period setting means for setting a sampling period for acquiring the.

また、請求項6に記載の表示制御方法は、車両の周辺の画像を取得する周辺画像取得ステップと、前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得ステップと、前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定ステップと、前記画像のうち前記切取範囲に対応する画像を表示手段に表示させる表示ステップと、を含む表示制御方法であって、前記視野状態情報の変化が所定の閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更ステップと、前記車両の状態を特定する車両状態情報を取得する車両状態情報取得ステップと、前記車両状態情報に基づいて、前記閾値を設定する閾値設定ステップと、を含むことを特徴とする。   The display control method according to claim 6 includes a peripheral image acquisition step of acquiring an image around the vehicle, and a visual field state information acquisition step of acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle. A display control method comprising: a cutout range setting step for setting a cutout range in the image based on the visual field state information; and a display step for causing a display unit to display an image corresponding to the cutout range among the images. A cut range changing step for changing the cut range based on the visual field state information when the change in the visual field state information is greater than or equal to a predetermined threshold; and vehicle state information for specifying the vehicle state. A vehicle state information acquisition step; and a threshold value setting step for setting the threshold value based on the vehicle state information.

また、請求項7に記載の表示制御プログラムは、請求項6に記載の方法をコンピュータに実行させることを特徴とする。   A display control program according to claim 7 causes a computer to execute the method according to claim 6.

請求項1に記載の表示制御システム、請求項6に記載の表示制御方法、及び請求項7に記載の表示制御プログラムによれば、視野状態情報の変化が車両状態情報に基づいて設定された閾値以上である場合に、視野状態情報に基づいて、車両の周辺の画像における切取範囲を変更するので、走行状況に応じた切取範囲の設定が可能となり、走行状況に応じた最適な表示制御を行うことができる。   According to the display control system according to claim 1, the display control method according to claim 6, and the display control program according to claim 7, a threshold value in which a change in visual field state information is set based on vehicle state information In such a case, the cutout range in the image around the vehicle is changed based on the visual field state information, so that the cutout range can be set according to the driving situation and optimal display control according to the driving situation is performed. be able to.

また、請求項2に記載の表示制御システムによれば、車両状態情報は、車両の速度を特定する速度情報であるので、車両の速度によって異なる出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速走行時に閾値を大きくする等により、表示手段の不必要な細動を低減することができる。   According to the display control system of the second aspect, since the vehicle state information is speed information for specifying the speed of the vehicle, different output control can be performed depending on the speed of the vehicle. For example, unnecessary fibrillation of the display means can be reduced by increasing the threshold during high-speed driving with a small movement of the driver's head.

また、請求項3に記載の表示制御システムによれば、車両状態情報は、車両の現在位置を特定する位置情報であるので、車両の現在位置によって異なる出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速道路走行時に閾値を大きくする等により、表示手段の不必要な細動を低減することができ、ドライバの頭部の動きが大きい交差点内や駐車場では閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像を表示手段に表示させることができる。   According to the display control system of the third aspect, since the vehicle state information is position information for specifying the current position of the vehicle, different output control can be performed depending on the current position of the vehicle. For example, it is possible to reduce unnecessary fibrillation of the display means by increasing the threshold value when driving on a highway where the driver's head is small, and in an intersection or parking lot where the driver's head moves largely By reducing the threshold value, it is possible to smoothly display an image on the display means following the movement of the driver's head.

また、請求項4に記載の表示制御システムによれば、車両状態情報は、車両のステアリングの操舵角を特定するステアリング情報であるので、車両のステアリングの操舵角によって異なる出力制御を行うことができる。例えば、ステアリングの操舵角が小さい場合に閾値を大きくする等により、表示手段の不必要な細動を低減することができる。   According to the display control system of the fourth aspect, since the vehicle state information is steering information for specifying the steering angle of the vehicle steering, different output control can be performed depending on the steering angle of the vehicle steering. . For example, unnecessary fibrillation of the display means can be reduced by increasing the threshold when the steering angle is small.

また、請求項5に記載の表示制御システムによれば、車両状態情報に基づいて、視野状態情報取得手段が視野状態情報を取得するサンプリング周期を設定するので、走行状況に応じて適切なサンプリング周期で視野状態情報を取得できる。例えば、高速走行時にサンプリング周期を大きくすることにより、ドライバの一瞬のわき見によって切取範囲が変化してしまうことを防止することができる。   According to the display control system of the fifth aspect, since the visual field state information acquisition unit sets the sampling period for acquiring the visual field state information based on the vehicle state information, an appropriate sampling period according to the traveling state Visual field state information can be acquired. For example, by increasing the sampling period during high-speed traveling, it is possible to prevent the cutout range from changing due to a momentary driver's look.

以下、本発明に係る表示制御システム、表示制御方法、及び表示制御プログラムの各実施の形態について図面を参照しつつ詳細に説明する。ただし、各実施の形態によって本発明が限定されるものではない。   Hereinafter, embodiments of a display control system, a display control method, and a display control program according to the present invention will be described in detail with reference to the drawings. However, the present invention is not limited to each embodiment.

〔実施の形態1〕
最初に、実施の形態1について説明する。この形態は、切取範囲の変更を行う閾値を設定する形態である。
[Embodiment 1]
First, the first embodiment will be described. In this form, a threshold value for changing the cutout range is set.

(構成)
図1は実施の形態1に係る表示制御システムを例示するブロック図である。図1に示すように、この表示制御システム1は、ステアリングセンサ10、車速センサ20、車両周辺カメラ30、ドライバカメラ40、現在地検出処理部50、ディスプレイ60、及び表示制御装置70を備えている。
(Constitution)
FIG. 1 is a block diagram illustrating a display control system according to the first embodiment. As shown in FIG. 1, the display control system 1 includes a steering sensor 10, a vehicle speed sensor 20, a vehicle surrounding camera 30, a driver camera 40, a current location detection processing unit 50, a display 60, and a display control device 70.

(構成−ステアリングセンサ)
ステアリングセンサ10は、車両のステアリングホイールの操舵角を検出し、当該検出値を表示制御装置70に出力するものであり、公知のステアリングセンサを用いることができる。
(Configuration-steering sensor)
The steering sensor 10 detects the steering angle of the steering wheel of the vehicle and outputs the detected value to the display control device 70, and a known steering sensor can be used.

(構成−車速センサ)
車速センサ20は、車輪の回転速度等を表示制御装置70に出力するものであり、公知の車速センサを用いることができる。
(Configuration-vehicle speed sensor)
The vehicle speed sensor 20 outputs the rotational speed of the wheels to the display control device 70, and a known vehicle speed sensor can be used.

(構成−車両周辺カメラ)
車両周辺カメラ30は、車両の周辺の画像を取得する周辺画像取得手段である。この車両周辺カメラ30は、例えば運転席側のフロントピラー外側(以下では特記する場合を除いて、「フロントピラー」を単に「ピラー」と称する。また、車両の外部に面する側を「外側」、車両の内部に面する側を「内側」と称する)に一台又は複数台設置され、車両の前方及び側方を撮影する。車両周辺カメラ30が取得した映像データは、表示制御装置70に出力される。なお、車両周辺カメラ30の具体的な構成は任意で、例えばCMOSイメージセンサやCCDイメージセンサ等の公知の撮像素子、及び魚眼レンズやプリズム等の公知の光学系部品を用いて構成されている。
(Configuration-Vehicle Perimeter Camera)
The vehicle peripheral camera 30 is a peripheral image acquisition unit that acquires a peripheral image of the vehicle. In the vehicle periphery camera 30, for example, the front pillar outside of the driver's seat side (except where otherwise specified below, “front pillar” is simply referred to as “pillar”. Also, the side facing the outside of the vehicle is “outside”. One or a plurality of cameras are installed on the side facing the inside of the vehicle and referred to as “inside”, and the front and sides of the vehicle are photographed. Video data acquired by the vehicle periphery camera 30 is output to the display control device 70. The specific configuration of the vehicle peripheral camera 30 is arbitrary, and is configured using a known imaging device such as a CMOS image sensor or a CCD image sensor, and a known optical system component such as a fisheye lens or a prism.

(構成−ドライバカメラ)
ドライバカメラ40は、ドライバの画像を撮影するためのものである。このドライバカメラ40は、例えば車両内部においてピラーの内側や天井等に設置され、ドライバの頭部を撮影する。ドライバカメラ40が取得した映像データは、表示制御装置70に出力される。なお、ドライバカメラ40の具体的な構成は任意で、車両周辺カメラ30と同様に、公知の撮像素子、及び公知の光学系部品を用いて構成されている。
(Configuration-Driver camera)
The driver camera 40 is for taking a driver image. The driver camera 40 is installed, for example, on the inside of the pillar or on the ceiling inside the vehicle, and photographs the head of the driver. The video data acquired by the driver camera 40 is output to the display control device 70. The specific configuration of the driver camera 40 is arbitrary, and is configured using a known imaging device and a known optical system component, as with the vehicle peripheral camera 30.

(構成−現在地検出処理部)
現在地検出処理部50は、表示制御装置70が取り付けられた車両の現在位置を検出する現在位置検出手段である。具体的には、現在地検出処理部50は、GPS、地磁気センサ、距離センサ、又はジャイロセンサ(いずれも図示省略)の少なくとも一つを有し、現在の車両の位置(座標)及び方位等を公知の方法にて検出する。
(Configuration-Current location detection processing unit)
The current position detection processing unit 50 is current position detection means for detecting the current position of the vehicle to which the display control device 70 is attached. Specifically, the current location detection processing unit 50 has at least one of a GPS, a geomagnetic sensor, a distance sensor, and a gyro sensor (all of which are not shown) and knows the current vehicle position (coordinates), direction, and the like. The method is detected.

(構成−ディスプレイ)
ディスプレイ60は、車両の周辺の画像のうち、表示制御装置70によって設定された切取範囲に対応する画像を表示する表示手段である。このディスプレイ60は、例えば車両前方のピラー内側に運転席に向けて配置され、表示制御装置70から出力された画像データを表示する。ディスプレイ60の具体的な構成は任意であり、公知の液晶ディスプレイや有機ELディスプレイの如きフラットパネルディスプレイを使用することができる。あるいは、ピラーの内側や天井等をスクリーンとし、車両内部の任意の位置に設けたプロジェクタから投影光を当該スクリーンに投影することにより、スクリーン上に画像データを表示させることもできる。
(Configuration-Display)
The display 60 is a display unit that displays an image corresponding to the cutout range set by the display control device 70 among images around the vehicle. The display 60 is disposed, for example, toward the driver's seat inside the pillar in front of the vehicle, and displays the image data output from the display control device 70. The specific configuration of the display 60 is arbitrary, and a flat panel display such as a known liquid crystal display or organic EL display can be used. Alternatively, image data can be displayed on the screen by projecting projection light onto the screen from a projector provided at an arbitrary position inside the vehicle using the inside of the pillar or the ceiling as a screen.

(構成−表示制御装置)
表示制御装置70は、制御部71及びデータ記録部72を備えている。
(Configuration-Display control device)
The display control device 70 includes a control unit 71 and a data recording unit 72.

(構成−表示制御装置−制御部)
制御部71は、表示制御装置70を制御する制御手段であり、具体的には、CPU、当該CPU上で解釈実行される各種のプログラム(OSなどの基本制御プログラムや、OS上で起動され特定機能を実現するアプリケーションプログラムを含む)、及びプログラムや各種のデータを格納するためのRAMの如き内部メモリを備えて構成されるコンピュータである。特に、本実施の形態に係る表示制御プログラムは、任意の記録媒体又はネットワークを介して表示制御装置70にインストールされることで、制御部71の各部を実質的に構成する。
(Configuration-Display control device-Control unit)
The control unit 71 is a control unit that controls the display control device 70. Specifically, the CPU, various programs interpreted and executed on the CPU (a basic control program such as an OS, and a program that is started and specified on the OS). And an internal memory such as a RAM for storing the program and various data. In particular, the display control program according to the present embodiment is installed in the display control device 70 via an arbitrary recording medium or network, thereby substantially configuring each unit of the control unit 71.

この制御部71は、機能概念的に、視野状態情報取得部71a、表示制御部71b、車両状態情報取得部71c、及び閾値設定部71dを備えている。視野状態情報取得部71aは、車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段である。表示制御部71bは、視野状態情報に基づいて、車両の周辺の画像における切取範囲を設定する切取範囲設定手段であり、視野状態情報の変化が閾値以上である場合に視野状態情報に基づいて切取範囲を変更する切取範囲変更手段であり、ディスプレイ60の出力制御を行う表示制御手段である。車両状態情報取得部71cは、車両の状態を特定する車両状態情報を取得する車両状態情報取得手段である。閾値設定部71dは、車両状態情報に基づいて、閾値を設定する閾値設定手段である。ここで、「視野」とは、ドライバの目に見える範囲であり、ドライバの頭部位置、顔の方向、視線方向等の動きに連動して変化するため、ドライバの視野に関連する状態を特定する情報である「視野状態情報」は、ドライバの頭部位置、顔の方向、視線方向等、例えばドライバカメラ40により撮影された画像に基づいて取得される。「閾値」とは、表示制御部71bが切取範囲の変更を実行するか否かの基準となる視野状態情報の値である。例えば、ドライバの頭部位置座標の変化量や、顔の方向ベクトルの変化量等について閾値を設定し、これらの変化量が設定した閾値以上である場合に、表示制御部71bに切取範囲の変更を行わせることができる。「車両状態情報」とは、車両の状態を特定するための情報であり、例えば、車速、ステアリングの操舵角、車両の現在位置等を特定する情報を含んでいる。これらの制御部71の各構成要素によって実行される処理の詳細については後述する。   The control unit 71 includes a visual field state information acquisition unit 71a, a display control unit 71b, a vehicle state information acquisition unit 71c, and a threshold setting unit 71d in terms of functions. The visual field state information acquisition unit 71a is visual field state information acquisition means for acquiring visual field state information that specifies a state related to the visual field of the driver of the vehicle. The display control unit 71b is a cutting range setting unit that sets a cutting range in an image around the vehicle based on the visual field state information. When the change in the visual field state information is equal to or greater than a threshold value, the display control unit 71b It is a cutting range changing means for changing the range, and is a display control means for controlling the output of the display 60. The vehicle state information acquisition unit 71c is a vehicle state information acquisition unit that acquires vehicle state information that specifies the state of the vehicle. The threshold setting unit 71d is threshold setting means for setting a threshold based on the vehicle state information. Here, the “field of view” is the range that is visible to the driver and changes in conjunction with the driver's head position, face direction, line-of-sight direction, etc., so the state related to the driver's field of view is specified. The “visual field state information” that is information to be acquired is acquired based on, for example, an image photographed by the driver camera 40, such as the head position, face direction, line-of-sight direction of the driver. The “threshold value” is a value of visual field state information that serves as a reference as to whether or not the display control unit 71b changes the cutout range. For example, threshold values are set for the change amount of the head position coordinates of the driver, the change amount of the face direction vector, etc., and when the change amount is equal to or larger than the set threshold value, the display control unit 71b changes the cut range. Can be performed. “Vehicle state information” is information for specifying the state of the vehicle, and includes, for example, information for specifying the vehicle speed, the steering angle of the steering, the current position of the vehicle, and the like. Details of processing executed by each component of the control unit 71 will be described later.

(構成−表示制御装置−データ記録部)
データ記録部72は、表示制御装置70の動作に必要なプログラム及び各種のデータを記録する記録手段であり、例えば、外部記憶装置としてのハードディスク(図示省略)を用いて構成されている。ただし、ハードディスクに代えてあるいはハードディスクと共に、磁気ディスクの如き磁気的記録媒体、又はDVDやブルーレイディスクの如き光学的記録媒体を含む、その他の任意の記録媒体を用いることができる。
(Configuration-Display control device-Data recording unit)
The data recording unit 72 is a recording unit that records a program and various data necessary for the operation of the display control device 70, and is configured using, for example, a hard disk (not shown) as an external storage device. However, any other recording medium including a magnetic recording medium such as a magnetic disk or an optical recording medium such as a DVD or a Blu-ray disk can be used instead of or together with the hard disk.

このデータ記録部72は、制御テーブル72a、及び地図情報データベース72b(以下、データベースを「DB」と称する)を備えている。制御テーブル72aは、表示制御部71bがディスプレイ60の出力制御を実行する際に参照するためのものである。図2は、制御テーブル72aに格納されている情報を例示した表である。図2に示したように、制御テーブル72aは、テーブル項目として項目「車両状態」及び項目「視野状態情報閾値」を備え、これらに対応する情報が相互に対応付けて格納されている。項目「車両状態」に対応して格納される情報は車両状態情報であり、例えば、車両の速度を特定する速度情報、車両の現在位置を特定する位置情報、車両のステアリングの操舵角を特定するステアリング情報等の車両状態情報を格納することができる(図2では「車速」について「50km/h以上」、「50km/h未満」、あるいは「現在位置」について「交差点内」、「交差点外」等)。項目「視野状態情報閾値」に対応して格納される情報は、表示制御部71bが切取範囲の変更を実行するか否かの基準となる値であり、例えば、ディスプレイ60に対する表示制御部71bによる出力制御開始のトリガとなるドライバの頭部位置の変化量を格納することができる(図2では「車速」が「50km/h未満」の場合に「1cm」、「50km/h以上」の場合に「5cm」等)。   The data recording unit 72 includes a control table 72a and a map information database 72b (hereinafter, the database is referred to as “DB”). The control table 72a is used for reference when the display control unit 71b executes output control of the display 60. FIG. 2 is a table illustrating information stored in the control table 72a. As shown in FIG. 2, the control table 72 a includes items “vehicle state” and item “visual field state information threshold” as table items, and information corresponding to these items is stored in association with each other. The information stored corresponding to the item “vehicle state” is vehicle state information, for example, speed information for specifying the speed of the vehicle, position information for specifying the current position of the vehicle, and a steering angle of the steering of the vehicle. Vehicle state information such as steering information can be stored (in FIG. 2, “vehicle speed” is “more than 50 km / h”, “less than 50 km / h”, or “current position” is “inside intersection”, “outside intersection” etc). The information stored corresponding to the item “field-of-view state information threshold” is a value serving as a reference as to whether or not the display control unit 71b changes the cutout range. For example, the information is displayed by the display control unit 71b for the display 60. The amount of change in the head position of the driver that triggers the start of output control can be stored (in FIG. 2, when “vehicle speed” is “less than 50 km / h”, “1 cm”, “50 km / h or more” "5cm" etc.).

図1に戻り、地図情報DB72bは、地図情報を格納する地図情報格納手段である。「地図情報」とは、交差点、高速道路、駐車場等の位置の特定に必要な情報であり、例えば、交差点データ(交差点座標等)、道路データ(道路種別、車線数、制限速度、道路座標、道路番号等)、地図をモニタ(図示省略)に表示するための地図表示データ等を含んで構成されている。   Returning to FIG. 1, the map information DB 72b is map information storage means for storing map information. “Map information” is information necessary for specifying the position of intersections, expressways, parking lots, etc., for example, intersection data (intersection coordinates, etc.), road data (road type, number of lanes, speed limit, road coordinates) , Road numbers, etc.) and map display data for displaying a map on a monitor (not shown).

(処理)
次に、このように構成される表示制御システム1によって実行される処理について、閾値設定処理と表示制御処理とに大別して説明する。
(processing)
Next, processing executed by the display control system 1 configured as described above will be broadly described as threshold setting processing and display control processing.

(処理−閾値設定処理)
まず、閾値設定処理について説明する。図3は閾値設定処理のフローチャートである(以下の各処理の説明ではステップを「S」と略記する)。この閾値設定処理は、例えば、自車両のエンジン始動後に自動的に起動される。エンジン始動後、車両状態情報取得部71cは、ステアリングセンサ10、車速センサ20、現在地検出処理部50等を介して、ステアリングの操舵角、車速、現在位置等の車両状態情報を取得する(SA1)。また、取得した車両状態情報と、地図情報DB72bに格納されている地図情報とに基づいて、地図上での自車の位置を特定する(SA2)。
(Processing-threshold setting processing)
First, the threshold setting process will be described. FIG. 3 is a flowchart of the threshold setting process (in the following description of each process, step is abbreviated as “S”). This threshold value setting process is automatically started after the engine of the host vehicle is started, for example. After the engine is started, the vehicle state information acquisition unit 71c acquires vehicle state information such as a steering angle, a vehicle speed, and a current position via the steering sensor 10, the vehicle speed sensor 20, the current position detection processing unit 50, and the like (SA1). . Moreover, the position of the own vehicle on a map is pinpointed based on the acquired vehicle state information and the map information stored in map information DB72b (SA2).

続いて、閾値設定部71dは制御テーブル72aを参照し、車両状態情報取得部71cが取得した車両状態情報及び地図上での自車の位置に基づいて、ディスプレイ60に対する表示制御部71bによる切取範囲変更の閾値を決定し、当該表示制御部71bに閾値を設定する(SA3)。この閾値の決定基準は任意であり、例えば図2において、車速が50km/h以上であり、現在位置が交差点外又は高速道路であり、ステアリングの操舵角が10度未満であるとの全ての条件が満たされた場合に、閾値を5cmに決定し、それ以外の場合、例えば車速が50km/h未満の場合や、現在位置が交差点内の場合等は、閾値を1cmに決定することができる。また、車速、現在位置、またはステアリングの操舵角のいずれか一つの値に基づいて閾値を決定してもよく、あるいはこれらの車両状態情報に対応する閾値の中で最も多い閾値を採用したり、車両状態情報に対応する閾値の平均値を採用してもよい。例えば、車速が50km/h未満、現在位置が交差点内、ステアリングの操舵角が10度未満であった場合、車速及び現在位置に対応する閾値が1cm、ステアリングの操舵角に対応する閾値が5cmであるので、最も多い閾値を採用する場合には、閾値=1cmを採用し、平均値を採用する場合には、閾値=7/3=2.3cmを採用する。以降、同様に、SA1からSA3を繰り返す。   Subsequently, the threshold setting unit 71d refers to the control table 72a, and based on the vehicle state information acquired by the vehicle state information acquisition unit 71c and the position of the host vehicle on the map, a cutout range by the display control unit 71b for the display 60 A change threshold is determined, and the threshold is set in the display control unit 71b (SA3). The determination criterion of this threshold is arbitrary. For example, in FIG. 2, all conditions that the vehicle speed is 50 km / h or more, the current position is outside the intersection or a highway, and the steering angle of the steering is less than 10 degrees. Is satisfied, the threshold value is determined to be 5 cm. In other cases, for example, when the vehicle speed is less than 50 km / h, or when the current position is within the intersection, the threshold value can be determined to be 1 cm. Further, the threshold value may be determined based on any one of the vehicle speed, the current position, and the steering angle of the steering wheel, or the largest threshold value among the threshold values corresponding to the vehicle state information may be adopted, You may employ | adopt the average value of the threshold value corresponding to vehicle state information. For example, when the vehicle speed is less than 50 km / h, the current position is within an intersection, and the steering angle of the steering is less than 10 degrees, the threshold corresponding to the vehicle speed and the current position is 1 cm, and the threshold corresponding to the steering angle is 5 cm. Therefore, when the most threshold value is adopted, the threshold value = 1 cm is adopted, and when the average value is adopted, the threshold value = 7/3 = 2.3 cm is adopted. Thereafter, SA1 to SA3 are similarly repeated.

(処理−表示制御処理)
次に、表示制御処理について説明する。図4は表示制御処理のフローチャートである。この表示制御処理は、例えば、閾値設定処理と同時に自車両のエンジン始動後所定周期毎(例えば0.2秒毎)に起動される。表示制御処理の起動後、表示制御部71bは、車両周辺カメラ30によって車両の周辺の画像を取得させる(SB1)。次に、視野状態情報取得部71aは、ドライバカメラ40を介して、ドライバの頭部位置等の視野状態情報を取得する(SB2)。
(Processing-Display control processing)
Next, the display control process will be described. FIG. 4 is a flowchart of the display control process. This display control process is started, for example, every predetermined period (for example, every 0.2 seconds) after the engine of the host vehicle is started simultaneously with the threshold setting process. After the display control process is activated, the display control unit 71b causes the vehicle periphery camera 30 to acquire an image around the vehicle (SB1). Next, the visual field state information acquisition unit 71a acquires visual field state information such as the head position of the driver via the driver camera 40 (SB2).

表示制御部71bは、ディスプレイ60に画像を表示させているか否かを判定し(SB3)、例えば表示制御処理の起動直後のため、画像を表示させていない場合(SB3、No)、車両周辺カメラ30が取得した画像における、視野状態情報に応じた切取範囲を設定すると共に、当該設定した切取範囲をRAM等に記憶させる(SB4)。切取範囲を設定する場合、表示制御部71bは、例えば、SB2で取得したドライバの頭部位置等に基づき、ピラー等で遮蔽されることにより生じるドライバ視野の死角を算出する。そして、算出した死角に対応する範囲を車両周辺カメラ30によって撮影された画像における切取範囲として設定する。   The display control unit 71b determines whether or not an image is displayed on the display 60 (SB3). For example, immediately after the display control process is started, if the image is not displayed (SB3, No), the vehicle peripheral camera A cut range corresponding to the visual field state information in the image acquired by 30 is set, and the set cut range is stored in a RAM or the like (SB4). When setting the cutout range, the display control unit 71b calculates the blind spot of the driver visual field generated by being shielded by a pillar or the like based on the head position of the driver acquired in SB2, for example. Then, a range corresponding to the calculated blind spot is set as a cutout range in an image captured by the vehicle peripheral camera 30.

一方、既にディスプレイ60に画像を表示させている場合(SB3、Yes)、表示制御部71bは、閾値設定処理のSA3で設定された閾値を基準として、SB2で取得された視野状態情報の値と前回取得された視野状態情報の値との差分値が当該閾値以上であるか否かを判定する(SB5)。その結果、前回取得された視野状態情報の値との差分値が当該閾値以上である場合(SB5、Yes)、表示制御部71bは既に設定されている切取範囲をSB2で今回取得された視野状態情報に基づいて変更し、当該変更した切取範囲をRAM等に記憶させる(SB6)。また、前回取得された視野状態情報の値との差分値が当該閾値未満である場合(SB5、No)、前回以前の処理にて記憶された切取範囲をRAM等から読み出し、車両周辺カメラ30によって撮影された画像における切取範囲として設定する(SB7)。   On the other hand, when an image is already displayed on the display 60 (SB3, Yes), the display control unit 71b uses the threshold value set in SA3 of the threshold setting process as a reference and the value of the visual field state information acquired in SB2. It is determined whether or not the difference value with the value of the visual field state information acquired last time is equal to or greater than the threshold value (SB5). As a result, when the difference value with the value of the visual field state information acquired last time is equal to or greater than the threshold (SB5, Yes), the display control unit 71b uses the visual field state that has been acquired this time in SB2 as the already set cutting range. The change is made based on the information, and the changed cut range is stored in the RAM or the like (SB6). In addition, when the difference value with the value of the visual field state information acquired last time is less than the threshold value (SB5, No), the cutting range stored in the previous process is read from the RAM or the like, and is read by the vehicle peripheral camera 30. It is set as a cutout range in the photographed image (SB7).

SB4、SB5、又はSB7の処理の後、表示制御部71bは、設定されている切取範囲に対応する画像を車両周辺カメラ30によって撮影された画像から抽出し(SB8)、当該抽出した画像をディスプレイ60に表示させる(SB9)。以降同様に、SB1からSB9を繰り返す。   After the process of SB4, SB5, or SB7, the display control unit 71b extracts an image corresponding to the set clipping range from the image taken by the vehicle peripheral camera 30 (SB8), and displays the extracted image on the display. 60 is displayed (SB9). Thereafter, similarly, SB1 to SB9 are repeated.

このように、車速が大きい場合や高速道路を走行中の場合等、ドライバが車両の前方を注視している割合が多く頭部の動きが小さい場合に閾値を大きくすることにより、ディスプレイ60に表示される映像がドライバの頭部の僅かな動きにまで追随して画面が不必要に細動することを低減でき、ドライバに与える不快感を低減することができる。一方、車速が小さい場合や交差点を走行中の場合等、ドライバが車両の左右にも注意を払うために頭部の動きが大きくなる場合に閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができ、適切な運転支援をドライバに提供することができる。   Thus, when the vehicle speed is high or the vehicle is traveling on a highway, the threshold is increased when the driver is gazing at the front of the vehicle and the head movement is small. Therefore, it is possible to reduce the unnecessary motion of the screen following the slight movement of the driver's head, and to reduce discomfort given to the driver. On the other hand, when the driver's head movement increases to pay attention to the left and right of the vehicle, such as when the vehicle speed is low or when driving at an intersection, the threshold value is reduced to reduce the driver's head movement. The image can be smoothly displayed on the display 60 by following the driver, and appropriate driving support can be provided to the driver.

(効果)
このように本実施の形態1によれば、視野状態情報の変化が車両状態情報に基づいて変更された所定の閾値以上である場合に、視野状態情報に基づいて、車両の周辺の画像における切取範囲を表示制御部71bが変更するので、走行状況に応じて異なる視野状態に基づいて切取範囲を変更することができ、走行状況に応じた最適な表示制御を行うことができる。
(effect)
As described above, according to the first embodiment, when the change in the visual field state information is equal to or greater than the predetermined threshold value changed based on the vehicle state information, the cropping in the image around the vehicle is performed based on the visual field state information. Since the display control unit 71b changes the range, the cutout range can be changed based on a different visual field state depending on the traveling state, and optimal display control corresponding to the traveling state can be performed.

また、車両状態情報は、車両の速度を特定する速度情報であるので、車両の速度によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速走行時に閾値を低速走行時より大きくする等により、ディスプレイ60の不必要な細動を低減することができる。   Further, since the vehicle state information is speed information for specifying the speed of the vehicle, it is possible to perform output control that takes into account how the head of the driver varies depending on the speed of the vehicle. For example, unnecessary fibrillation of the display 60 can be reduced by, for example, increasing the threshold value during high-speed traveling with a small movement of the head of the driver, compared to during low-speed traveling.

また、車両状態情報は、車両の現在位置を特定する位置情報であるので、車両の現在位置によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さい高速道路走行時に閾値を一般道路走行時よりも大きくする等により、ディスプレイ60の不必要な細動を低減することができ、ドライバの頭部の動きが大きい交差点内や駐車場では閾値を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができる。   Further, since the vehicle state information is position information for specifying the current position of the vehicle, output control can be performed in consideration of how the head of the driver varies depending on the current position of the vehicle. For example, unnecessary fibrillation of the display 60 can be reduced by increasing the threshold value when driving on a highway where the driver's head movement is small compared to driving on a general road, and the driver's head movement is large. By reducing the threshold value in an intersection or in a parking lot, the image can be smoothly displayed on the display 60 following the movement of the driver's head.

また、車両状態情報は、車両のステアリングの操舵角を特定するステアリング情報であるので、車両のステアリングの操舵角によって異なるドライバの頭部の動き方等を考慮に入れた出力制御を行うことができる。例えば、ドライバの頭部の動きが小さいステアリングの操舵角が小さい場合に閾値を操舵角が大きい場合よりも大きくする等により、ディスプレイ60の不必要な細動を低減することができる。   In addition, since the vehicle state information is steering information that specifies the steering angle of the vehicle steering, output control can be performed in consideration of the way the head of the driver varies depending on the steering angle of the vehicle steering. . For example, unnecessary fibrillation of the display 60 can be reduced by increasing the threshold value when the steering angle of the steering where the head of the driver is small is smaller than when the steering angle is large.

〔実施の形態2〕
次に、実施の形態2について説明する。この形態は、視野状態情報取得手段が視野状態情報を取得するサンプリング周期を走行状況に応じて設定する形態である。なお、実施の形態2及びそれ以降の実施の形態の構成は、特記する場合を除いて、実施の形態1の構成と略同一であり、実施の形態1の構成と略同一の構成についてはこの実施の形態1で用いたものと同一の符号及び/又は名称を必要に応じて付して、その説明を省略する。
[Embodiment 2]
Next, a second embodiment will be described. This form is a form in which the visual field state information acquisition means sets the sampling period for acquiring the visual field state information in accordance with the traveling state. The configurations of the second embodiment and the subsequent embodiments are substantially the same as the configurations of the first embodiment unless otherwise specified, and this configuration is substantially the same as the configuration of the first embodiment. The same reference numerals and / or names as those used in Embodiment 1 are attached as necessary, and the description thereof is omitted.

(構成−表示制御装置−制御部)
まず、実施の形態2に係る表示制御システム1の構成について説明する。実施の形態2に係る制御部71は、実施の形態1で説明した制御部71の各構成要素に加えて、機能概念的に、サンプリング周期設定部を備えている。サンプリング周期設定部は、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期を設定するサンプリング周期設定手段である。これらの制御部71の各構成要素によって実行される処理の詳細については後述する。
(Configuration-Display control device-Control unit)
First, the configuration of the display control system 1 according to the second embodiment will be described. The control unit 71 according to the second embodiment includes a sampling period setting unit in terms of functional concept in addition to each component of the control unit 71 described in the first embodiment. The sampling cycle setting unit is a sampling cycle setting unit that sets a sampling cycle in which the visual field state information acquisition unit 71a acquires the visual field state information. Details of processing executed by each component of the control unit 71 will be described later.

(構成−表示制御装置−制御テーブル)
図5は、制御テーブル72aに格納されている情報を例示した表である。図5に示したように、実施の形態2に係る制御テーブル72aは、実施の形態1の制御テーブル72aが備えるテーブル項目に加えて、項目「サンプリング周期」を備え、これらに対応する情報が項目「車両状態」に格納されている情報と相互に対応付けて格納されている。項目「サンプリング周期」に対応して格納される情報は、視野状態情報取得部71aが視野状態情報を取得する周期であり、例えば、「車速」が「50km/h未満」の場合に「0.2sec」、「50km/h以上」の場合に「3sec」等の値を格納することができる。
(Configuration-Display control device-Control table)
FIG. 5 is a table illustrating information stored in the control table 72a. As shown in FIG. 5, the control table 72a according to the second embodiment includes an item “sampling period” in addition to the table items included in the control table 72a of the first embodiment, and information corresponding to these items is an item. It is stored in association with the information stored in “vehicle state”. The information stored corresponding to the item “sampling cycle” is a cycle in which the visual field state information acquisition unit 71a acquires the visual field state information. For example, when “vehicle speed” is “less than 50 km / h”, “0. In the case of “2 sec”, “50 km / h or more”, a value such as “3 sec” can be stored.

(処理)
次に、実施の形態2に係る表示制御システム1によって実行される処理について説明する。本実施の形態2においては、表示制御システム1によって実行される処理はサンプリング周期設定処理と表示制御処理とに大別される。以下、各処理について説明する。
(processing)
Next, processing executed by the display control system 1 according to Embodiment 2 will be described. In the second embodiment, the process executed by the display control system 1 is roughly divided into a sampling period setting process and a display control process. Hereinafter, each process will be described.

(処理−サンプリング周期設定処理)
まず、サンプリング周期設定処理について説明する。なお、本実施の形態2におけるサンプリング周期設定処理は、以下に説明する内容を除いて実施の形態1で説明した閾値設定処理と同様であるので、フローチャートの図示を省略する。実施の形態1で説明した閾値設定処理のSA3において閾値設定部71dが閾値の決定及び設定を行う際、サンプリング周期設定部は制御テーブル72aを参照し、車両状態情報取得部71cが取得した車両状態情報及び自車の位置に基づいて、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期Tを決定し、当該視野状態情報取得部71aにサンプリング周期Tを設定する。例えば図5において、車速が50km/h以上であり、現在位置が交差点外又は高速道路であり、ステアリングの操舵角が10度未満であるとの全ての条件が満たされた場合に、サンプリング周期設定部はサンプリング周期Tを3secに決定する。また、実施の形態1における閾値の決定と同様に、車速、現在位置、またはステアリングの操舵角のいずれか一つの値に基づいてサンプリング周期Tを決定してもよく、あるいはこれらの車両状態情報に対応するサンプリング周期Tの中で最も多い値や平均値等を採用してもよい。
(Processing-Sampling cycle setting process)
First, the sampling cycle setting process will be described. Note that the sampling cycle setting process in the second embodiment is the same as the threshold setting process described in the first embodiment except for the contents described below, and thus the illustration of the flowchart is omitted. When the threshold setting unit 71d determines and sets the threshold in SA3 of the threshold setting process described in the first embodiment, the sampling period setting unit refers to the control table 72a, and the vehicle state acquired by the vehicle state information acquisition unit 71c. Based on the information and the position of the host vehicle, the visual field state information acquisition unit 71a determines the sampling period T for acquiring the visual field state information, and sets the sampling period T in the visual field state information acquisition unit 71a. For example, in FIG. 5, the sampling period is set when all the conditions that the vehicle speed is 50 km / h or more, the current position is outside the intersection or the highway, and the steering angle of the steering is less than 10 degrees are satisfied. The unit determines the sampling period T to be 3 sec. Similarly to the determination of the threshold value in the first embodiment, the sampling period T may be determined based on any one of the vehicle speed, the current position, and the steering angle of the steering wheel. The most common value or average value in the corresponding sampling period T may be adopted.

(処理−表示制御処理)
次に、表示制御処理について説明する。図6は表示制御処理のフローチャートである。なお、本実施の形態2に係る表示制御処理におけるSC7からSC11までの各処理の内容は、上述の実施の形態1に係る表示制御処理におけるSB5からSB9までの各処理と同様であるので、詳細な説明を省略する。
(Processing-Display control processing)
Next, the display control process will be described. FIG. 6 is a flowchart of the display control process. Note that the contents of each process from SC7 to SC11 in the display control process according to the second embodiment are the same as the processes from SB5 to SB9 in the display control process according to the first embodiment described above. The detailed explanation is omitted.

表示制御処理が、例えば、サンプリング周期設定処理と同時に自車両のエンジン始動後所定周期毎(例えば0.2秒毎)に起動されると、表示制御部71bは、車両周辺カメラ30によって車両の周辺の画像を取得させる(SC1)。次に、表示制御部71bは、ディスプレイ60に画像を表示させているか否かを判定し(SC2)、既にディスプレイ60に画像を表示させている場合(SC2、Yes)、視野状態情報取得部71aによって視野状態情報が前回取得された時からの経過時間を計時するタイマのタイマ値nと、サンプリング周期設定処理にて設定されたサンプリング周期Tとを比較する(SC3)。   For example, when the display control process is started at a predetermined period (for example, every 0.2 seconds) after the engine of the host vehicle is started simultaneously with the sampling period setting process, the display control unit 71b is Are acquired (SC1). Next, the display control unit 71b determines whether an image is displayed on the display 60 (SC2), and when the image is already displayed on the display 60 (SC2, Yes), the visual field state information acquisition unit 71a. Is compared with the timer value n of the timer that counts the elapsed time from when the visual field state information was acquired last time and the sampling period T set in the sampling period setting process (SC3).

その結果、タイマ値nがサンプリング周期T以上であった場合(SC3、Yes)、又はSC2においてディスプレイ60に画像を表示させていなかった場合(SC2、No)、視野状態情報の取得タイミングが到来したものとし、視野状態情報取得部71aは、タイマ値をリセットし(SC4)、タイマの計測を開始させると共に(SC5)、ドライバカメラ40を介してドライバの頭部位置等の視野状態情報を取得する(SC6)。その後、表示制御部71bは、SC5で取得された視野状態情報の値と前回取得された視野状態情報の値との差分値が閾値以上であるか否かを判定する(SC7)。   As a result, when the timer value n is equal to or greater than the sampling period T (SC3, Yes), or when no image is displayed on the display 60 in SC2 (SC2, No), the timing for obtaining visual field state information has arrived. The visual field state information acquisition unit 71a resets the timer value (SC4), starts timer measurement (SC5), and acquires visual field state information such as the head position of the driver via the driver camera 40. (SC6). Thereafter, the display control unit 71b determines whether or not the difference value between the value of the visual field state information acquired in SC5 and the value of the visual field state information acquired last time is equal to or greater than a threshold value (SC7).

一方、タイマ値nがサンプリング周期T未満であった場合(SC3、No)、前回以前の処理にて記憶された切取範囲をRAM等から読み出し、車両周辺カメラ30によって撮影された画像における切取範囲として設定する(SC9)。以降同様に、所定の周期(例えば0.2秒毎)でSC1からSC11を繰り返す。   On the other hand, when the timer value n is less than the sampling period T (SC3, No), the cutout range stored in the previous process is read from the RAM or the like, and the cutout range in the image taken by the vehicle peripheral camera 30 is read. Set (SC9). Thereafter, similarly, SC1 to SC11 are repeated at a predetermined cycle (for example, every 0.2 seconds).

このように、車速が大きい場合や高速道路を走行中の場合等、ドライバが車両の前方を注視している割合が多く頭部の動きが小さい場合に、サンプリング周期を大きくすることにより、ディスプレイ60に表示される映像の不必要な細動を低減でき、ドライバに与える不快感を低減することができる。一方、車速が小さい場合や交差点を走行中の場合等、ドライバが車両の左右にも注意を払うために頭部の動きが大きくなる場合にサンプリング周期を小さくすることにより、ドライバの頭部の動きに追随させて滑らかに映像をディスプレイ60に表示させることができ、適切な運転支援をドライバに提供することができる。   Thus, when the vehicle speed is high or the vehicle is traveling on a highway, the display 60 is increased by increasing the sampling period when the driver is gazing at the front of the vehicle and the head movement is small. Unnecessary fibrillation of the image displayed on the screen can be reduced, and discomfort given to the driver can be reduced. On the other hand, the movement of the driver's head can be reduced by reducing the sampling period when the movement of the head increases because the driver pays attention to the left and right sides of the vehicle, such as when the vehicle speed is low or when driving at an intersection. Accordingly, the video can be smoothly displayed on the display 60, and appropriate driving assistance can be provided to the driver.

(効果)
このように実施の形態2によれば、車両状態情報に基づいて、視野状態情報取得部71aが視野状態情報を取得するサンプリング周期を設定するので、走行状況に応じて適切なサンプリング周期で視野状態情報を取得できる。例えば、高速走行時にサンプリング周期を大きくすることにより、ドライバの一瞬のわき見によって切取範囲が変化してしまうことを防止することができる。
(effect)
As described above, according to the second embodiment, since the visual field state information acquisition unit 71a sets the sampling period for acquiring the visual field state information based on the vehicle state information, the visual field state is set at an appropriate sampling period according to the traveling state. Information can be acquired. For example, by increasing the sampling period during high-speed traveling, it is possible to prevent the cutout range from changing due to a momentary driver's look.

〔各実施の形態に対する変形例〕
以上、本発明に係る各実施の形態について説明したが、本発明の具体的な構成及び手段は、特許請求の範囲に記載した各発明の技術的思想の範囲内において、任意に改変及び改良することができる。以下、このような変形例について説明する。
[Modifications to Embodiments]
Although the embodiments of the present invention have been described above, the specific configuration and means of the present invention are arbitrarily modified and improved within the scope of the technical idea of each invention described in the claims. be able to. Hereinafter, such a modification will be described.

(解決しようとする課題や発明の効果について)
まず、発明が解決しようとする課題や発明の効果は、上述の内容に限定されるものではなく、発明の実施環境や構成の細部に応じて異なる可能性があり、上述した課題の一部のみを解決したり、上述した効果の一部のみを奏することがある。
(About problems to be solved and effects of the invention)
First, the problems to be solved by the invention and the effects of the invention are not limited to the above-mentioned contents, and may vary depending on the implementation environment and details of the configuration of the invention. May be solved, or only some of the effects described above may be achieved.

(閾値設定処理及び表示制御処理について)
上記実施の形態2では、実施の形態1で説明した閾値設定処理において閾値設定部71dが閾値の決定及び設定を行う際、サンプリング周期設定部はサンプリング周期を設定すると説明したが、閾値の設定を行わずにサンプリング周期のみの設定を行い、当該設定したサンプリング周期に基づき、視野状態情報取得部71aが視野状態情報を取得するようにしてもよい。
(About threshold setting processing and display control processing)
In the second embodiment, it has been described that when the threshold setting unit 71d determines and sets the threshold in the threshold setting process described in the first embodiment, the sampling cycle setting unit sets the sampling cycle. Alternatively, only the sampling period may be set, and the visual field state information acquisition unit 71a may acquire the visual field state information based on the set sampling period.

(制御テーブルについて)
制御テーブル72aの具体的な設定内容は任意に変更することができる。例えば、車両状態として、方向指示器の操作状態を加えてもよく、方向指示器が操作されている場合には、方向指示器が操作されてない場合に比べて、閾値、又はサンプリング周期を小さくしてもよい。また、閾値、又はサンプリング周期は、絶対値ではなく、基準値(デフォルト値)に対する相対値として設定してもよい。
(About the control table)
Specific setting contents of the control table 72a can be arbitrarily changed. For example, the operation state of the direction indicator may be added as the vehicle state, and when the direction indicator is operated, the threshold value or the sampling period is made smaller than when the direction indicator is not operated. May be. Further, the threshold value or the sampling period may be set as a relative value with respect to a reference value (default value) instead of an absolute value.

本発明の実施の形態1に係る表示制御システムを例示するブロック図である。1 is a block diagram illustrating a display control system according to a first embodiment of the present invention. 制御テーブルに格納されている情報を例示した表である。It is the table | surface which illustrated the information stored in the control table. 閾値設定処理のフローチャートである。It is a flowchart of a threshold value setting process. 表示制御処理のフローチャートである。It is a flowchart of a display control process. 制御テーブルに格納されている情報を例示した表である。It is the table | surface which illustrated the information stored in the control table. 表示制御処理のフローチャートである。It is a flowchart of a display control process.

符号の説明Explanation of symbols

1 表示制御システム
10 ステアリングセンサ
20 車速センサ
30 車両周辺カメラ
40 ドライバカメラ
50 現在地検出処理部
60 ディスプレイ
70 表示制御装置
71 制御部
71a 視野状態情報取得部
71b 表示制御部
71c 車両状態情報取得部
71d 閾値設定部
72 データ記録部
72a 制御テーブル
72b 地図情報DB
DESCRIPTION OF SYMBOLS 1 Display control system 10 Steering sensor 20 Vehicle speed sensor 30 Vehicle periphery camera 40 Driver camera 50 Present location detection process part 60 Display 70 Display control apparatus 71 Control part 71a Visual field state information acquisition part 71b Display control part 71c Vehicle state information acquisition part 71d Threshold setting Unit 72 Data recording unit 72a Control table 72b Map information DB

Claims (7)

車両の周辺の画像を取得する周辺画像取得手段と、
前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得手段と、
前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定手段と、
前記画像のうち前記切取範囲に対応する画像を表示する表示手段と、を備える表示制御システムであって、
前記視野状態情報の変化が閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更手段と、
前記車両の状態を特定する車両状態情報を取得する車両状態情報取得手段と、
前記車両状態情報に基づいて、前記閾値を設定する閾値設定手段と、
を備えることを特徴とする表示制御システム。
Peripheral image acquisition means for acquiring an image around the vehicle;
Visual field state information acquisition means for acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle;
A cutting range setting means for setting a cutting range in the image based on the visual field state information;
A display control system comprising: display means for displaying an image corresponding to the cutout range of the image,
Cutting range changing means for changing the cutting range based on the visual field state information when the change in the visual field state information is a threshold value or more,
Vehicle state information acquisition means for acquiring vehicle state information for specifying the state of the vehicle;
Threshold setting means for setting the threshold based on the vehicle state information;
A display control system comprising:
前記車両状態情報は、前記車両の速度を特定する速度情報であること、
を特徴とする請求項1に記載の表示制御システム。
The vehicle state information is speed information for specifying a speed of the vehicle;
The display control system according to claim 1.
前記車両状態情報は、前記車両の現在位置を特定する位置情報であること、
を特徴とする請求項1又は2に記載の表示制御システム。
The vehicle state information is position information for specifying a current position of the vehicle;
The display control system according to claim 1 or 2.
前記車両状態情報は、前記車両のステアリングの操舵角を特定するステアリング情報であること、
を特徴とする請求項1から3のいずれか一項に記載の表示制御システム。
The vehicle state information is steering information for specifying a steering angle of the steering of the vehicle;
The display control system according to any one of claims 1 to 3, wherein:
前記車両状態情報に基づいて、前記視野状態情報取得手段が前記視野状態情報を取得するサンプリング周期を設定するサンプリング周期設定手段を備えること、
を特徴とする請求項1から4のいずれか一項に記載の表示制御システム。
Based on the vehicle state information, the visual field state information acquisition unit includes a sampling period setting unit that sets a sampling period for acquiring the visual field state information;
The display control system according to any one of claims 1 to 4, wherein:
車両の周辺の画像を取得する周辺画像取得ステップと、
前記車両のドライバの視野に関する状態を特定する視野状態情報を取得する視野状態情報取得ステップと、
前記視野状態情報に基づいて、前記画像における切取範囲を設定する切取範囲設定ステップと、
前記画像のうち前記切取範囲に対応する画像を表示手段に表示させる表示ステップと、を含む表示制御方法であって、
前記視野状態情報の変化が所定の閾値以上である場合に前記視野状態情報に基づいて前記切取範囲を変更する切取範囲変更ステップと、
前記車両の状態を特定する車両状態情報を取得する車両状態情報取得ステップと、
前記車両状態情報に基づいて、前記閾値を設定する閾値設定ステップと、
を含むことを特徴とする表示制御方法。
A peripheral image acquisition step of acquiring an image around the vehicle;
Visual field state information acquisition step for acquiring visual field state information for specifying a state related to the visual field of the driver of the vehicle;
A cutting range setting step for setting a cutting range in the image based on the visual field state information;
A display step of displaying on the display means an image corresponding to the cutout range of the image,
A cutting range changing step of changing the cutting range based on the visual field state information when the change in the visual field state information is a predetermined threshold or more,
Vehicle state information acquisition step for acquiring vehicle state information for specifying the state of the vehicle;
A threshold setting step for setting the threshold based on the vehicle state information;
A display control method comprising:
請求項6に記載の方法をコンピュータに実行させることを特徴とする表示制御プログラム。   A display control program for causing a computer to execute the method according to claim 6.
JP2008292800A 2008-11-14 2008-11-14 Display control system, display control method, and display control program Expired - Fee Related JP5263519B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008292800A JP5263519B2 (en) 2008-11-14 2008-11-14 Display control system, display control method, and display control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008292800A JP5263519B2 (en) 2008-11-14 2008-11-14 Display control system, display control method, and display control program

Publications (2)

Publication Number Publication Date
JP2010116124A true JP2010116124A (en) 2010-05-27
JP5263519B2 JP5263519B2 (en) 2013-08-14

Family

ID=42304056

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008292800A Expired - Fee Related JP5263519B2 (en) 2008-11-14 2008-11-14 Display control system, display control method, and display control program

Country Status (1)

Country Link
JP (1) JP5263519B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010179850A (en) * 2009-02-06 2010-08-19 Toyota Motor Corp Vehicular display device
JP2014534697A (en) * 2011-10-14 2014-12-18 コンチネンタル オートモーティブ システムズ インコーポレイテッドContinental Automotive Systems, Inc. Virtual display system for vehicles
JP2015162901A (en) * 2014-02-27 2015-09-07 ハーマン インターナショナル インダストリーズ インコーポレイテッド Virtual see-through instrument cluster with live video
WO2017056495A1 (en) * 2015-09-28 2017-04-06 京セラ株式会社 Image processing device, imaging device, camera monitor system and image processing method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0796768A (en) * 1993-09-27 1995-04-11 Nissan Motor Co Ltd Forward watching degree detector
JP2004064131A (en) * 2002-07-24 2004-02-26 Honda Motor Co Ltd Display for vehicle
JP2007253748A (en) * 2006-03-22 2007-10-04 Takata Corp Object detection system, drive gear and vehicle
JP2008022267A (en) * 2006-07-12 2008-01-31 Aisin Aw Co Ltd Drive assisting method and drive assisting device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0796768A (en) * 1993-09-27 1995-04-11 Nissan Motor Co Ltd Forward watching degree detector
JP2004064131A (en) * 2002-07-24 2004-02-26 Honda Motor Co Ltd Display for vehicle
JP2007253748A (en) * 2006-03-22 2007-10-04 Takata Corp Object detection system, drive gear and vehicle
JP2008022267A (en) * 2006-07-12 2008-01-31 Aisin Aw Co Ltd Drive assisting method and drive assisting device

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010179850A (en) * 2009-02-06 2010-08-19 Toyota Motor Corp Vehicular display device
JP2014534697A (en) * 2011-10-14 2014-12-18 コンチネンタル オートモーティブ システムズ インコーポレイテッドContinental Automotive Systems, Inc. Virtual display system for vehicles
JP2015162901A (en) * 2014-02-27 2015-09-07 ハーマン インターナショナル インダストリーズ インコーポレイテッド Virtual see-through instrument cluster with live video
WO2017056495A1 (en) * 2015-09-28 2017-04-06 京セラ株式会社 Image processing device, imaging device, camera monitor system and image processing method
JPWO2017056495A1 (en) * 2015-09-28 2018-03-01 京セラ株式会社 Image processing apparatus, imaging apparatus, camera monitor system, and image processing method
US10503989B2 (en) 2015-09-28 2019-12-10 Kyocera Corporation Image processing apparatus, imaging apparatus, camera monitor system, and image processing method

Also Published As

Publication number Publication date
JP5263519B2 (en) 2013-08-14

Similar Documents

Publication Publication Date Title
JP5798392B2 (en) Parking assistance device
US10124728B2 (en) Image processing apparatus
JP2009071375A5 (en)
US10061995B2 (en) Imaging system to detect a trigger and select an imaging area
JP6711137B2 (en) Display control program, display control method, and display control device
JP5263519B2 (en) Display control system, display control method, and display control program
US10362231B2 (en) Head down warning system
JP2016134129A (en) Video display system, processing apparatus, video display method, and video display program
JP2008020406A (en) Navigation device
JP6890288B2 (en) Image processing equipment, image display system and image processing method
JP2004173048A (en) Onboard camera system
JP2011022952A (en) Drive assist device, drive assist method, and drive assist program
JP5263520B2 (en) Display control system, display control method, and display control program
JP2005214730A (en) Image display device, method, and program for vehicle
JP2010233080A (en) Driving support device, driving support method, and driving support program
JP2008128867A (en) Device for identifying tire direction
KR20170011817A (en) Image processing apparatus and METHOD USING THE SAME
JP2010009491A (en) Driving assist system, driving assist method, and driving assist program
JP4857159B2 (en) Vehicle driving support device
WO2017213244A1 (en) Image processing device, image processing program, and recording medium
JP2007218655A (en) Navigation device
JP2007052114A (en) Photographing device, photographing controller and photographing system
JP2023001977A (en) Vehicle peripheral information display device, and vehicle peripheral information display method
WO2020144949A1 (en) Recording control device, recording control system, recording control method, and program
JP2010052687A (en) Display control system, display control method, and display control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121031

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130403

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130416

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees