JP4935387B2 - Information display device - Google Patents

Information display device Download PDF

Info

Publication number
JP4935387B2
JP4935387B2 JP2007023336A JP2007023336A JP4935387B2 JP 4935387 B2 JP4935387 B2 JP 4935387B2 JP 2007023336 A JP2007023336 A JP 2007023336A JP 2007023336 A JP2007023336 A JP 2007023336A JP 4935387 B2 JP4935387 B2 JP 4935387B2
Authority
JP
Japan
Prior art keywords
driver
information
distance
light stimulus
pupil
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007023336A
Other languages
Japanese (ja)
Other versions
JP2008191778A (en
Inventor
修 尾崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2007023336A priority Critical patent/JP4935387B2/en
Publication of JP2008191778A publication Critical patent/JP2008191778A/en
Application granted granted Critical
Publication of JP4935387B2 publication Critical patent/JP4935387B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Description

本発明は、情報表示装置に関する。   The present invention relates to an information display device.

従来の情報表示装置として、車両の周囲に存在する物体を検出し、運転者に対して警告表示するとともに、運転者の視線方向に基づき警告表示に対する認知状態を推定し、運転者が警告表示へ視線を向けていない場合には警告を出し続け、運転者が警告表示へ視線を向けた場合には警告の内容を認識したと推定し、警告表示に対する注意喚起は十分に行ったものとみなし、表示画面の輝度を低下、表示位置を変更あるいは表示を停止させるなどして、注意喚起を抑えるものが知られている(例えば、特許文献1)。
特開2005−135037号公報
As a conventional information display device, an object existing around the vehicle is detected and a warning is displayed to the driver, and the recognition state for the warning display is estimated based on the driver's line-of-sight direction so that the driver can display the warning. If the line of sight is not directed, the warning will continue to be issued. A device that suppresses alerting by reducing the brightness of the display screen, changing the display position, or stopping the display is known (for example, Patent Document 1).
JP 2005-135037 A

ここで、運転者の姿勢が変動した場合や、車種や運転者が変わった場合には、例えば、警告表示に対する瞳の位置、あるいは運転者の年齢等も変化し、それらによって、警告表示に対する運転者の認知力は影響を受ける。しかしそれらの影響にも関わらず、上記情報表示装置にあっては、運転者が警告表示へ視線を向けたか否かの判断のみによって当該運転者の認知状態を推定している。従って、運転者の認知力が不足している場合であっても、警告表示へ視線を向けた場合には、実際には十分に認知されていなかったとしてもその注意喚起を抑えてしまう。一方、実際には運転者の認知力が十分である場合であっても、視線がそれていた場合はよそ見をしていると推定され、過剰な注意喚起によって運転者に違和感を与えてしまっていた。以上のように、運転者の姿勢、車種あるいは運転者が変わることによって適切な注意喚起を行うことができないという問題が生じていた。   Here, when the driver's posture fluctuates, or the vehicle type or driver changes, for example, the position of the pupil with respect to the warning display or the age of the driver also changes. A person's cognitive ability is affected. However, in spite of these influences, the information display device estimates the driver's cognitive state only by determining whether or not the driver has turned his / her line of sight to the warning display. Therefore, even when the driver's cognitive ability is insufficient, when the line of sight is directed to the warning display, the alerting is suppressed even if the driver is not sufficiently recognized. On the other hand, even if the driver's cognitive ability is actually sufficient, if the line of sight is deviating, it is presumed that he is looking away, and the driver is uncomfortable due to excessive alerting. It was. As described above, there has been a problem that appropriate alerting cannot be performed by changing the driver's posture, vehicle type, or driver.

本発明は、このような問題を解決するためになされたものであり、運転者の認知力が異なったとしても、運転者に対して適切に情報を認知させることができる情報表示装置を提供することを目的とする。   The present invention has been made in order to solve such a problem, and provides an information display device capable of causing a driver to appropriately recognize information even if the driver's cognitive ability is different. For the purpose.

本発明に係る情報表示装置は、運転者の視覚を刺激する光刺激情報を、表示情報に重畳させて表示し得る表示手段と、光刺激情報に対する運転者の認知力を推定する認知力推定手段と、表示手段で表示する光刺激情報の光刺激量を、認知力推定手段で推定した認知力に応じて調節する光刺激量調節手段と、を備えることを特徴とする。   The information display device according to the present invention includes a display unit that can display light stimulus information that stimulates the driver's vision superimposed on the display information, and a cognitive power estimation unit that estimates the driver's cognitive power with respect to the light stimulus information. And a light stimulus amount adjusting means for adjusting the light stimulus amount of the light stimulus information displayed by the display means according to the cognitive ability estimated by the cognitive ability estimating means.

この情報表示装置では、表示手段で光刺激情報を発生させることにより、表示情報に対する注意を運転者に喚起させ、また、認知力推定手段によって光刺激情報に対する運転者の認知力を推定する。ここで、上述したように、運転者の認知力は、運転者の姿勢、車種あるいは運転者の変化により影響を受けるものであるが、光刺激調節手段により、光刺激情報の光刺激量が運転者の認知力に応じて調節されるため、運転者の認知力が十分に高いときは過剰な注意喚起による違和感を与えることなく、また、運転者の認知力が不足しているときは注意喚起を十分に行うことができる。以上によって、運転者の認知力が異なったとしても、運転者に対して適切に情報を認知させることができる。   In this information display device, the display means generates light stimulus information to alert the driver to the display information, and the cognitive power estimation means estimates the driver's cognitive power with respect to the light stimulus information. Here, as described above, although the driver's cognitive ability is affected by changes in the driver's posture, vehicle type, or driver, the light stimulus amount of the light stimulus information is driven by the light stimulus adjustment means. Because it is adjusted according to the driver's cognitive ability, when the driver's cognitive ability is sufficiently high, it does not give a sense of incongruity due to excessive alerting, and when the driver's cognitive ability is insufficient Can be done sufficiently. As described above, even if the driver's cognitive ability is different, the driver can be made to properly recognize the information.

本発明の上記情報表示装置では、光刺激量調節手段は、光刺激情報の輝度を変化させることによって光刺激量を調節することが好ましい。これによれば、運転者の認知力に応じて光刺激情報の輝度が変化されるため、運転者の認知力に対応して適切に情報を認知させることができる。   In the information display device of the present invention, it is preferable that the light stimulus amount adjusting means adjusts the light stimulus amount by changing the luminance of the light stimulus information. According to this, since the brightness | luminance of light stimulus information changes according to a driver | operator's cognitive power, information can be appropriately recognized according to a driver | operator's cognitive power.

本発明の上記情報表示装置では、光刺激量調節手段は、表示手段における光刺激情報の表示面積を変化させることによって光刺激量を調節することが好ましい。これによれば、運転者の認知力に応じて光刺激情報の表示面積が変化されるため、運転者の認知力に対応して適切に情報を認知させることができる。   In the information display device of the present invention, it is preferable that the light stimulus amount adjusting means adjusts the light stimulus amount by changing a display area of the light stimulus information on the display means. According to this, since the display area of the light stimulus information is changed according to the driver's cognitive ability, the information can be appropriately recognized according to the driver's cognitive ability.

本発明の上記情報表示装置では、認知力推定手段は、表示手段と運転者の瞳との距離に基づいて認知力を推定することが好ましい。   In the information display device of the present invention, it is preferable that the cognitive power estimation means estimates the cognitive power based on the distance between the display means and the driver's pupil.

注意喚起手段と運転者の瞳との距離は、運転者の姿勢、車種あるいは運転者の体の大きさなどによって変動を受けるものであり、光刺激情報に対する運転者の認知力に大きな影響を及ぼす要素である。この情報表示装置では、注意喚起手段と瞳との距離に基づいて認知力を推定しているため、運転者の認知力を正確に推定することができる。   The distance between the alerting means and the driver's pupil is subject to fluctuations depending on the driver's posture, vehicle type or driver's body size, etc., and has a great influence on the driver's cognitive ability with respect to light stimulus information. Is an element. In this information display device, since the cognitive power is estimated based on the distance between the alerting means and the pupil, the cognitive power of the driver can be accurately estimated.

本発明の上記情報表示装置では、光刺激情報の表示領域は所定の幅を有しており、認知力推定手段は、光刺激情報の表示領域に対する運転者の視角に基づいて、認知力を推定することが好ましい。   In the information display device of the present invention, the display area of the light stimulus information has a predetermined width, and the cognitive power estimation means estimates the cognitive power based on the driver's viewing angle with respect to the display area of the light stimulus information. It is preferable to do.

光刺激情報の表示領域に対する運転者の視角は、運転者の姿勢、車種あるいは運転者の体の大きさなどによって変動を受けるものであり、光刺激情報に対する運転者の認知力に大きな影響を及ぼす要素である。この情報表示装置では、表示領域に対する運転者の視角に基づいて認知力を推定しているため、運転者の認知力を正確に推定することができる。   The driver's viewing angle with respect to the display area of the light stimulus information is subject to fluctuations depending on the driver's posture, vehicle type, or the size of the driver's body, and has a great influence on the driver's cognitive ability with respect to the light stimulus information. Is an element. In this information display device, since the cognitive power is estimated based on the driver's viewing angle with respect to the display area, the driver's cognitive power can be accurately estimated.

本発明の上記情報表示装置では、認知力推定手段は、運転者の年齢に基づいて認知力を推定することが好ましい。   In the information display device of the present invention, it is preferable that the cognitive power estimation means estimates the cognitive power based on the age of the driver.

一般的に、年齢が高くなるほど人間の視界は狭くなる傾向にあり、年齢の高い運転者の視界は、低い運転者に比べて狭く、光刺激情報に対する認知力が低くなるため、運転者の年齢は、光刺激情報に対する運転者の認知力に大きな影響を及ぼす要素である。この情報表示装置では、運転者の年齢に基づいて認知力を推定しているため、運転者の認知力をより正確に推定することができる。   In general, the higher the age, the narrower the human field of view, and the older driver's field of view is narrower and the cognitive ability to light stimulus information is lower than that of lower drivers. Is a factor that greatly affects the driver's cognitive ability with respect to light stimulus information. In this information display device, since the cognitive power is estimated based on the age of the driver, the cognitive power of the driver can be estimated more accurately.

本発明によれば、光刺激情報に対する運転者の認知力を推定し、推定した認知力に応じて光刺激量を調節することで、運転者の認知力が異なったとしても、運転者に対して適切に情報を認知させることができる。   According to the present invention, the driver's cognitive ability with respect to the light stimulus information is estimated, and the light stimulus amount is adjusted according to the estimated cognitive power. Information.

以下、図面を参照して、本発明に係る情報表示装置の実施の形態を説明する。なお、本実施の形態において、「上下」「左右」「前後」という表現は、運転時における運転者から見たときの「上下」「左右」「前後」を示すものとする。   Embodiments of an information display device according to the present invention will be described below with reference to the drawings. In the present embodiment, the expressions “up / down”, “left / right”, and “front / rear” indicate “up / down”, “left / right”, and “front / rear” as viewed from the driver during driving.

まず、図1を参照して、情報表示装置1の構成について説明する。図1は、本実施の形態に係る情報表示装置1の構成を示す図である。   First, the configuration of the information display device 1 will be described with reference to FIG. FIG. 1 is a diagram showing a configuration of an information display device 1 according to the present embodiment.

情報表示装置1は、図1に示すように、車両に搭載され、夜間の運転中に車両の周辺の映像を車内に備え付けられたモニタ3に映し出し、歩行者などを検出した場合はそのモニタ3に映し出された歩行者を強調表示して運転者に知らしめることによって、夜間の走行の安全性を高める装置である。情報表示装置1は、外界撮影用カメラ2、モニタ3、瞳検知用カメラ4、距離計測センサ6、ドライバ選択装置7及び電子制御装置(以下「ECU」という)8を備えている。   As shown in FIG. 1, the information display device 1 is mounted on a vehicle, displays an image around the vehicle on a monitor 3 provided in the vehicle during night driving, and detects a pedestrian or the like when the monitor 3 is detected. It is a device that enhances the safety of driving at night by highlighting the pedestrians projected on the road and informing the driver. The information display device 1 includes an external shooting camera 2, a monitor 3, a pupil detection camera 4, a distance measurement sensor 6, a driver selection device 7, and an electronic control device (hereinafter referred to as “ECU”) 8.

本実施の形態では、モニタ3が特許請求の範囲に記載する表示手段に相当し、ECU8が特許請求の範囲に記載する光刺激調節手段及び認知力推定手段に相当する。   In the present embodiment, the monitor 3 corresponds to the display means described in the claims, and the ECU 8 corresponds to the light stimulus adjustment means and the cognitive power estimation means described in the claims.

外界撮影用カメラ2は、車両の前側(例えば、ルームミラーの裏側)に配置され、車両前方に向けて取り付けられる。外界撮影用カメラ2としては、例えば、赤外線を取り込み、その赤外線の強弱に応じた濃淡によって赤外線映像を生成する赤外線カメラ等が用いられる。この赤外線映像は、一定時間毎のフレームの赤外線画像からなる。外界撮影用カメラ2はECU8に接続されており、一定時間毎に、各フレームの画像情報を画像信号としてECU8に送信する。なお、必要に応じて図示されない赤外線投光器を備えてもよいが、ヘッドライトから照射される光の中に赤外線も含まれるので、赤外線投光器を備えない構成としてもよい。   The outside-field photographing camera 2 is disposed on the front side of the vehicle (for example, the back side of the rearview mirror) and is attached toward the front of the vehicle. For example, an infrared camera that captures infrared rays and generates an infrared image by using light and shade according to the strength of the infrared rays is used as the external shooting camera 2. This infrared video is composed of infrared images of frames at regular intervals. The camera 2 for shooting an outside world is connected to the ECU 8 and transmits image information of each frame to the ECU 8 as an image signal at regular time intervals. Note that an infrared projector that is not illustrated may be provided as necessary. However, since the infrared light is included in the light emitted from the headlight, the infrared projector may be omitted.

モニタ3は、運転席前部に配置され、運転者に向けて取り付けられている。このモニタ3は、車両周辺の映像と歩行者情報とを運転者に提供する表示手段であり、例えば、液晶ディスプレイ、ヘッドアップディスプレイなどが用いられる。モニタ3は、ECU8と接続されており、ECU8から画像情報を受信し、その画像情報を表示する。図2は、モニタ3(液晶ディスプレイ)に表示した場合の画像情報の一例を示しており、外界撮影用カメラ2の画像情報から検出された歩行者11が矩形枠12で囲まれ、強調表示されていると共に、運転者の視覚を光によって刺激する注意喚起枠(光刺激情報)13で画像情報が取り囲まれ、運転者に対して光刺激情報を与えることによって歩行者11に対して注意を払うように注意喚起がなされている。この注意喚起枠13の幅Wは、上側縁部13aが幅Wt、右側縁部13bが幅Wr、下側縁部13cが幅Wb、左側縁部13dが幅Wlとされており、注意喚起枠13に対する運転者の認知力に応じてその大きさが調節される。   The monitor 3 is disposed in front of the driver's seat and attached to the driver. This monitor 3 is a display means for providing the driver with video around the vehicle and pedestrian information. For example, a liquid crystal display, a head-up display, or the like is used. The monitor 3 is connected to the ECU 8, receives image information from the ECU 8, and displays the image information. FIG. 2 shows an example of image information displayed on the monitor 3 (liquid crystal display). A pedestrian 11 detected from the image information of the camera 2 for shooting outside the environment is surrounded by a rectangular frame 12 and highlighted. In addition, image information is surrounded by a warning frame (light stimulus information) 13 that stimulates the driver's vision with light, and pays attention to the pedestrian 11 by giving the driver light stimulus information. As such, attention is being paid. The width W of the alerting frame 13 is such that the upper edge 13a has a width Wt, the right edge 13b has a width Wr, the lower edge 13c has a width Wb, and the left edge 13d has a width Wl. The size is adjusted in accordance with the driver's cognitive ability with respect to 13.

図1に戻り、瞳検知用カメラ4は、ステアリングコラムに配置され、運転者の顔に向けて取り付けられる。この瞳検知用カメラ4は、撮像した運転者の顔の画像データを画像処理部(図示せず)に送信する。この画像処理部は、瞳検知用カメラ4に一体で設けられてもよいし、あるいは、ECU8内に構成されてもよい。画像処理部では、顔の画像データから運転者の両方の瞳を特定し、その瞳重心位置を算出する。画像処理部はECU8に接続されており、瞳重心位置を算出したら、その瞳位置情報をECU8に出力する。   Returning to FIG. 1, the pupil detection camera 4 is disposed on the steering column and attached to the driver's face. The pupil detection camera 4 transmits the imaged image data of the driver's face to an image processing unit (not shown). This image processing unit may be provided integrally with the pupil detection camera 4 or may be configured in the ECU 8. The image processing unit identifies both eyes of the driver from the face image data, and calculates the position of the center of gravity of the pupil. The image processing unit is connected to the ECU 8 and outputs the pupil position information to the ECU 8 after calculating the pupil center of gravity position.

距離計測センサ6は、瞳検知用カメラ4と同様に、ステアリングコラムに配置され、運転者の瞳に向けて取り付けられる。この距離計測センサ6は瞳検知用カメラ4から運転者の顔までの距離を計測するものであり、具体的には超音波やミリ波レーダが用いられる。距離計測センサ6はECU8に接続されており、計測した距離情報をECU8に送信する。本実施の形態においては、距離計測機能付きカメラ等のように、距離計測センサ6と瞳検知用カメラ4が一体となった装置を用いる。なお、距離計測センサ6と瞳検知用カメラ4とで別々なものを用いてもよい。   The distance measurement sensor 6 is disposed on the steering column and attached toward the driver's pupil, like the pupil detection camera 4. This distance measuring sensor 6 measures the distance from the pupil detection camera 4 to the driver's face, and specifically, an ultrasonic wave or a millimeter wave radar is used. The distance measurement sensor 6 is connected to the ECU 8 and transmits the measured distance information to the ECU 8. In the present embodiment, an apparatus in which the distance measurement sensor 6 and the pupil detection camera 4 are integrated, such as a camera with a distance measurement function, is used. In addition, you may use a different thing for the distance measurement sensor 6 and the camera 4 for pupil detection.

ドライバ選択装置7は、運転者の年齢層に関する情報を取得するものであり、例えば、運転者自身が入力することによって情報を取得する装置や、運転者のしわの数や匂いなどの生体情報を自動認識することによって情報を取得する装置が用いられる。ドライバ選択装置7はECU8に接続されており、取得した運転者の年齢層に関する年齢情報をECU8に送信する。   The driver selection device 7 acquires information on the age group of the driver. For example, the driver selection device 7 acquires information by inputting by the driver himself, or the biological information such as the number of wrinkles and smell of the driver. A device that acquires information by automatic recognition is used. The driver selection device 7 is connected to the ECU 8 and transmits the acquired age information regarding the age group of the driver to the ECU 8.

ECU8は、演算を行うマイクロプロセッサ、マイクロプロセッサに各処理を実行させるためのプログラム等を記憶するROM、演算結果などの各種データを記憶するRAM及び12Vバッテリによってその記憶内容が保持されるバックアップRAM等により構成されている。そして、上記構成によって、ECU8は、取得した画像情報から歩行者を検出して、モニタ3に表示するために歩行者11が強調表示された画像情報を作成すると共に、取得した瞳重心位置情報、距離情報及び年齢情報に基づいて、注意喚起枠13に対する運転者の認識力を推定し、推定した認知力に応じて注意喚起枠13の幅Wを変化させることによって光刺激量を調節する。   The ECU 8 includes a microprocessor that performs calculations, a ROM that stores a program for causing the microprocessor to execute each process, a RAM that stores various data such as calculation results, and a backup RAM in which the stored contents are held by a 12V battery. It is comprised by. And by the said structure, ECU8 detects the pedestrian from the acquired image information, and creates the image information by which the pedestrian 11 was highlighted in order to display on the monitor 3, and the acquired pupil gravity center position information, Based on the distance information and the age information, the driver's cognitive ability with respect to the alerting frame 13 is estimated, and the amount of light stimulation is adjusted by changing the width W of the alerting frame 13 according to the estimated cognitive ability.

次に、図3を参照して、本実施の形態に係る情報表示装置1の動作について説明する。図3は、情報表示装置1による第1の制御形態に係る情報表示処理の処理手順を示すフローチャートである。この処理は、ECU8において、ECU8の電源がオンされてからオフされるまでの間、所定のタイミングで繰り返し実行される。なお、本実施の形態における処理手順は、外界撮影用カメラ2による画像情報から歩行者を検出し、モニタ3に歩行者を強調表示すると共に、注意喚起枠13を表示させる場合における処理手順とする。   Next, the operation of the information display device 1 according to the present embodiment will be described with reference to FIG. FIG. 3 is a flowchart showing a processing procedure of information display processing according to the first control mode by the information display device 1. This process is repeatedly executed at a predetermined timing in the ECU 8 from when the power source of the ECU 8 is turned on until it is turned off. Note that the processing procedure in the present embodiment is a processing procedure in the case where a pedestrian is detected from the image information obtained by the camera 2 for shooting outside the field, the pedestrian is highlighted on the monitor 3, and the alerting frame 13 is displayed. .

まず、情報表示装置1の処理が開始されると、瞳検知用カメラ4から瞳重心位置情報を取得し(S1)、距離計測センサ6から瞳検知用カメラ4と運転者の顔との距離情報を取得する(S2)。そして、瞳重心位置情報と距離情報に基づいて認知量が一定となるように注意喚起枠13の幅Wを演算する(S3)。   First, when processing of the information display device 1 is started, pupil center-of-gravity position information is acquired from the pupil detection camera 4 (S1), and distance information between the pupil detection camera 4 and the driver's face is obtained from the distance measurement sensor 6. Is acquired (S2). Then, the width W of the alerting frame 13 is calculated so that the recognition amount is constant based on the pupil center-of-gravity position information and the distance information (S3).

ここで、注意喚起枠13の幅Wを演算するための具体的な処理手順を説明する。   Here, a specific processing procedure for calculating the width W of the alerting frame 13 will be described.

ここでは、図4を参照して、上側縁部13aの幅Wtについて考える。図4は、車両左方から車内を見たときの、モニタ3、瞳検知用カメラ4及び運転者14それぞれの位置関係を示した図である。図4に示すように、モニタ3に表示された注意喚起枠13の上側縁部13aの上端部と眼とを結ぶ直線21と上側縁部13aの下端部と眼とを結ぶ直線22とがなす視角αが、約0.3°となる時に注意喚起として最も好ましい幅となり、運転者14に違和感を与えることなく十分に注意喚起を行える。なお、直線21と直線22はいずれもモニタ3の幅方向の中心位置を通過する。   Here, the width Wt of the upper edge portion 13a will be considered with reference to FIG. FIG. 4 is a diagram showing a positional relationship among the monitor 3, the pupil detection camera 4, and the driver 14 when the inside of the vehicle is viewed from the left side of the vehicle. As shown in FIG. 4, a straight line 21 connecting the upper end of the upper edge 13a of the alerting frame 13 and the eye displayed on the monitor 3 and a straight line 22 connecting the lower end of the upper edge 13a and the eye are formed. When the viewing angle α is approximately 0.3 °, the width is most preferable for alerting, and alerting can be sufficiently performed without causing the driver 14 to feel uncomfortable. Note that both the straight line 21 and the straight line 22 pass through the center position of the monitor 3 in the width direction.

以上のことから、モニタ3と瞳検知用カメラ4の位置関係情報に基づいて、モニタ3と瞳重心位置との距離及びモニタ3に対する瞳重心位置の角度を計算することによって運転者14の認知力を推定し、注意喚起枠13に対する運転者14の認知量を一定とすべく、視角αが0.3°となるような注意喚起枠13の上側縁部13aの幅Wtを演算する。   From the above, the cognitive power of the driver 14 is calculated by calculating the distance between the monitor 3 and the pupil centroid position and the angle of the pupil centroid position with respect to the monitor 3 based on the positional relationship information between the monitor 3 and the pupil detection camera 4. And the width Wt of the upper edge portion 13a of the alerting frame 13 such that the viewing angle α is 0.3 ° is calculated so that the recognition amount of the driver 14 with respect to the alerting frame 13 is constant.

処理開始前の段階においては、ECU8に、モニタ3と瞳検知用カメラ4(距離計測センサ6を含んでいる)の位置関係を示す初期位置情報、モニタ3のピクセルピッチp及び最適な視角αの値(0.3°)が格納されている。   In the stage before the start of processing, the ECU 8 has the initial position information indicating the positional relationship between the monitor 3 and the pupil detection camera 4 (including the distance measurement sensor 6), the pixel pitch p of the monitor 3 and the optimum viewing angle α. The value (0.3 °) is stored.

図4及び図5を参照してモニタ3及び瞳検知用カメラ4の位置関係について説明する。図5は、車両上方から車内を見たときの、モニタ3、瞳検知用カメラ4及び運転者14のそれぞれの位置関係を示した図である。図4及び図5における座標系は、車両前方から後方へ向かう方向がX軸方向、車両左方から右方へ向かう方向がY軸方向、車両下方向から上方へ向かう方向がZ軸方向とされており、モニタ3の表示画面の位置がX軸の基準位置(X=0)、瞳検知用カメラ4のレンズの中心位置がY軸の基準位置(Y=0)、車両内部の床面の位置がZ軸の基準位置(Z=0)とされている。   The positional relationship between the monitor 3 and the pupil detection camera 4 will be described with reference to FIGS. FIG. 5 is a diagram illustrating the positional relationship between the monitor 3, the pupil detection camera 4, and the driver 14 when the inside of the vehicle is viewed from above the vehicle. 4 and 5, the direction from the front to the rear of the vehicle is the X-axis direction, the direction from the left to the right of the vehicle is the Y-axis direction, and the direction from the lower to the upper direction is the Z-axis direction. The position of the display screen of the monitor 3 is the X-axis reference position (X = 0), the center position of the lens of the pupil detection camera 4 is the Y-axis reference position (Y = 0), and the floor surface inside the vehicle is The position is the Z-axis reference position (Z = 0).

このような座標系において、図4及び図5では、Z軸基準位置からモニタ3の上端部3aまでのZ軸方向の距離がMz0、モニタ3のZ軸方向の幅がMh、モニタ3のY軸方向の幅がMw、Y軸基準位置からモニタ3の右端部3bまでのY軸方向の距離がMyと示されている。また、X軸基準位置から瞳検知用カメラ4のレンズの中心位置までのX軸方向の距離がCx0、Y軸基準位置から瞳検知用カメラ4のレンズ中心位置までのY方向の距離がCy(Cy=0となる)、Z軸基準位置から瞳検知用カメラ4のレンズの中心位置までのZ軸方向の距離がCz0と示されている。これらの距離Mz0、Mh、Mw、My、Cx0、Cy0、Cz0の値がECU8に格納されている。   In such a coordinate system, in FIGS. 4 and 5, the distance in the Z-axis direction from the Z-axis reference position to the upper end 3a of the monitor 3 is Mz0, the width of the monitor 3 in the Z-axis direction is Mh, and the Y of the monitor 3 is Y. The width in the axial direction is indicated as Mw, and the distance in the Y-axis direction from the Y-axis reference position to the right end 3b of the monitor 3 is indicated as My. The distance in the X-axis direction from the X-axis reference position to the center position of the lens of the pupil detection camera 4 is Cx0, and the distance in the Y direction from the Y-axis reference position to the lens center position of the pupil detection camera 4 is Cy ( The distance in the Z-axis direction from the Z-axis reference position to the center position of the lens of the pupil detection camera 4 is indicated as Cz0. The values of these distances Mz0, Mh, Mw, My, Cx0, Cy0, and Cz0 are stored in the ECU 8.

次に、瞳検知用カメラ4と距離計測センサ6の距離情報から、瞳重心位置とモニタ3との距離を計算する。なお、図4に示すように、瞳検知用カメラ4と運転者14の顔との距離は距離Fとする。図6は瞳検知用カメラ4が取得した画像データ16を示し、(a)は運転者14の顔が瞳検知用カメラ4に対して近い位置にある状態である距離F=Faの場合を示し、(b)は遠い位置にある状態である距離F=Fbの場合を示している。図6(a)及び(b)に示すように、距離計測センサ6にて距離FがFaあるいはFbと検出されたとき、取得した画像データ16の上端部16aと運転者14の瞳重心位置14aとのY軸方向の距離lyは、顔が普通に写っていた場合と大きく写っていた場合でそれぞれly=lya,lybと計測される。   Next, the distance between the center of gravity of the pupil and the monitor 3 is calculated from the distance information of the pupil detection camera 4 and the distance measurement sensor 6. 4, the distance between the pupil detection camera 4 and the face of the driver 14 is a distance F. FIG. 6 shows image data 16 acquired by the pupil detection camera 4, and FIG. 6A shows a case where the distance of the driver 14 is close to the pupil detection camera 4, ie, distance F = Fa. , (B) shows a case where the distance is F = Fb, which is a state at a distant position. As shown in FIGS. 6A and 6B, when the distance measurement sensor 6 detects the distance F as Fa or Fb, the upper end portion 16a of the acquired image data 16 and the pupil center of gravity position 14a of the driver 14 are detected. The distance ly in the Y-axis direction is measured as ly = lya and lyb when the face is captured normally and when the face is captured largely.

距離Fと、距離lyの計測結果に基づいて、図4に示す、瞳重心位置14aと瞳検知用カメラ4とのZ軸方向の距離Fzが、距離F,ly,Fzの関係を定めた3次元マップ(Z軸方向瞳位置マップ)によって取得される。Z軸方向瞳位置マップはECU8に格納されており、ECU8が距離F及び距離lyを取得すると、Z軸方向瞳位置マップが参照されることによって、その距離F及び距離lyに基づいた距離Fzが取得される。   Based on the measurement results of the distance F and the distance ly, the distance Fz in the Z-axis direction between the pupil center of gravity position 14a and the pupil detection camera 4 shown in FIG. 4 determines the relationship between the distances F, ly, and Fz. Obtained by a dimension map (Z-axis direction pupil position map). The Z-axis direction pupil position map is stored in the ECU 8, and when the ECU 8 acquires the distance F and the distance ly, the distance Fz based on the distance F and the distance ly is obtained by referring to the Z-axis direction pupil position map. To be acquired.

Z軸方向瞳位置マップの一例を図7に示す。図7における関数曲線aは距離F=Faにおける距離lyと距離Fzの関係を示した関数曲線であり、関数曲線bは距離F=Fbにおける距離lyと距離Fzの関係を示した関数曲線である。距離F=Fbの場合において、瞳重心位置14aが画像データ16上で同じ距離だけ上方に移動したとしても、距離F=Fbは距離F=Faのときよりも顔が遠い状態であるため、実際の瞳重心位置14aの移動量は距離F=Faの場合よりも大きくなる。従って、関数曲線bは関数曲線aよりも急勾配とされている。このように、距離計測センサ6から距離Fを取得し、瞳位置検出カメラ4の画像データ16から距離lyを取得したら、距離Fに対して設定されている関数曲線に距離lyを当てはめることによって距離Fzが導き出される。   An example of the Z-axis direction pupil position map is shown in FIG. The function curve a in FIG. 7 is a function curve showing the relationship between the distance ly and the distance Fz at the distance F = Fa, and the function curve b is a function curve showing the relationship between the distance ly and the distance Fz at the distance F = Fb. . In the case of the distance F = Fb, even if the pupil centroid position 14a moves upward by the same distance on the image data 16, the distance F = Fb is in a state farther than the distance F = Fa. The amount of movement of the pupil center-of-gravity position 14a is larger than that when the distance F = Fa. Therefore, the function curve b is steeper than the function curve a. As described above, when the distance F is acquired from the distance measurement sensor 6 and the distance ly is acquired from the image data 16 of the pupil position detection camera 4, the distance ly is applied to the function curve set for the distance F. Fz is derived.

このようにして得られた距離Fzに、図4に示す、初期設定値である距離Czを加算することによって、Z軸基準位置と瞳重心位置14aとのZ軸方向の距離Ezが求まる。また、距離Fと距離Fzから瞳重心位置14aと瞳検知用カメラ4とのX軸方向の距離Fxが求まるので、この距離Fxに初期設定値である距離Cxを加算することによって、X軸基準位置と瞳重心位置14aとのX軸方向の距離Exが求まる。   The distance Ez in the Z-axis direction between the Z-axis reference position and the pupil center-of-gravity position 14a is obtained by adding the distance Cz that is an initial setting value shown in FIG. 4 to the distance Fz thus obtained. Further, since the distance Fx in the X-axis direction between the pupil center of gravity position 14a and the pupil detection camera 4 is obtained from the distance F and the distance Fz, the distance Cx, which is an initial setting value, is added to the distance Fx, thereby obtaining the X-axis reference. A distance Ex between the position and the pupil center-of-gravity position 14a in the X-axis direction is obtained.

瞳重心位置14aと瞳検知用カメラ4とのY軸方向の距離Fyも、画像データ16内における瞳重心位置14aと距離Fに基づき、ECU8に格納されたY軸方向瞳位置マップを用いることによって同様に求めることができる。そして、得られた距離Fyに初期設定値である距離Cyを加算することによって、Y軸基準位置と瞳の重心位置とのY軸方向の距離Eyが求まる。なお、距離Cy=0であるので距離Fyがそのまま距離Eyとなる。   The Y-axis direction distance Fy between the pupil center-of-gravity position 14a and the pupil detection camera 4 is also based on the pupil center-of-gravity position 14a and the distance F in the image data 16 by using the Y-axis direction pupil position map stored in the ECU 8. It can be obtained similarly. Then, the distance Ey in the Y-axis direction between the Y-axis reference position and the center of gravity of the pupil is obtained by adding the distance Cy that is an initial setting value to the obtained distance Fy. Since the distance Cy = 0, the distance Fy becomes the distance Ey as it is.

図8は、車両上方から車内を見たときの、モニタ3と瞳重心位置14aとの位置関係を示した図である。次に、得られた距離Fx及び距離Fyに基づいて、図8に示す、瞳重心位置14aとモニタ3の幅方向中心位置3cとのXY平面上における距離Lxを導き出す。モニタ3のY軸方向の幅がMw、Y軸基準位置からモニタ3の右端部3bの位置までのY軸方向の距離がMyであるため、Y軸方向におけるモニタ3の幅方向中心位置3cの位置はY=−{(Mw/2)+My}と示される。よって、距離Lxは次の数式(1)によって求められる。   FIG. 8 is a diagram showing a positional relationship between the monitor 3 and the pupil barycenter position 14a when the inside of the vehicle is viewed from above the vehicle. Next, based on the obtained distance Fx and distance Fy, a distance Lx on the XY plane between the pupil barycenter position 14a and the width direction center position 3c of the monitor 3 shown in FIG. 8 is derived. Since the width in the Y-axis direction of the monitor 3 is Mw and the distance in the Y-axis direction from the Y-axis reference position to the position of the right end 3b of the monitor 3 is My, the width-direction central position 3c of the monitor 3 in the Y-axis direction is The position is indicated as Y = − {(Mw / 2) + My}. Therefore, the distance Lx is obtained by the following formula (1).

Figure 0004935387
Figure 0004935387

図9は、車両左方から車内を見たときの、モニタ3と瞳重心位置14aとの位置関係を示した図であり、距離Lxを求めたら図9に示す位置関係からモニタ3に表示する注意喚起枠13の上側縁部13aの幅Wtを求める。図9に示すように、Z軸基準位置とモニタ3の上端部3aとのZ軸方向の距離はMz0であり、Z軸基準位置と瞳重心位置14aとのZ軸方向の距離はEzであるため、モニタ3の上端部3aと瞳重心位置14aとのZ軸方向の距離はEz−Mz0で示される。このとき、幅方向中心位置3cにおけるモニタ3の上端部3aと瞳重心位置14aとを結ぶ直線23(上述の直線21と一致する)が、瞳重心位置14aを通過するXY平面と平行な平面に対してなす角度をθとすると、そのθと視角α、距離Ez,Mz0及び注意喚起枠13の上側縁部13aの幅Wtの関係は、数式(2)のように示される。   FIG. 9 is a diagram showing the positional relationship between the monitor 3 and the pupil center of gravity position 14a when the inside of the vehicle is viewed from the left side of the vehicle. When the distance Lx is obtained, it is displayed on the monitor 3 from the positional relationship shown in FIG. The width Wt of the upper edge 13a of the alerting frame 13 is obtained. As shown in FIG. 9, the distance in the Z-axis direction between the Z-axis reference position and the upper end 3a of the monitor 3 is Mz0, and the distance in the Z-axis direction between the Z-axis reference position and the pupil center of gravity position 14a is Ez. Therefore, the distance in the Z-axis direction between the upper end 3a of the monitor 3 and the pupil barycentric position 14a is represented by Ez-Mz0. At this time, a straight line 23 (which coincides with the straight line 21 described above) connecting the upper end 3a of the monitor 3 and the pupil centroid position 14a at the center position 3c in the width direction is a plane parallel to the XY plane passing through the pupil centroid position 14a. Assuming that the angle formed with respect to θ is θ, the relationship between θ, the viewing angle α, the distances Ez, Mz0, and the width Wt of the upper edge portion 13a of the alerting frame 13 is expressed as Equation (2).

Figure 0004935387
Figure 0004935387

この数式(2)を組み合わせることによって、視角αを最適値である0.3°とするような幅Wtは、数式(3)によって求められる。   By combining this equation (2), the width Wt for setting the viewing angle α to the optimum value of 0.3 ° is obtained by the equation (3).

Figure 0004935387
Figure 0004935387

なお、右側縁部13bの幅Wr、下側縁部13cの幅Wb、左側縁部13dの幅Wlについても上側縁部13aの幅Wtと同様の方法によって、瞳重心位置14aに対する視角が最適値となるように幅Wを求める。   Note that the viewing angle with respect to the pupil center-of-gravity position 14a is the optimum value for the width Wr of the right edge 13b, the width Wb of the lower edge 13c, and the width Wl of the left edge 13d in the same manner as the width Wt of the upper edge 13a. The width W is obtained so that

図3に戻り、注意喚起枠13の幅Wを求めたら、幅WをECU8に格納しているピクセルピッチpで割ることによって、幅Wに対する画素数Pを決定する(S4)。   Returning to FIG. 3, when the width W of the alerting frame 13 is obtained, the number P of pixels with respect to the width W is determined by dividing the width W by the pixel pitch p stored in the ECU 8 (S4).

その後、ドライバ選択装置7から運転者14の年齢層に関する年齢情報を取得する(S5)。その後、取得した年齢情報に応じて注意喚起枠13の幅Wを増幅させるための係数であるウエイトw値を定めた2次元マップ(光刺激量マップ)から対応するウエイトw値を取得する(S6)。光刺激量マップはECU8に格納されており、ECUが年齢情報を取得すると、光刺激量マップが参照されることによって、その年齢に応じたウエイトw値が演算される。そして、注意喚起枠13の幅Wに対する画素数Pにウエイトw値を掛け合わせることによって幅Wを増幅させて表示させるための画素数P´に変換する。   Thereafter, age information regarding the age group of the driver 14 is acquired from the driver selection device 7 (S5). Thereafter, a corresponding weight w value is acquired from a two-dimensional map (photostimulation amount map) that defines a weight w value that is a coefficient for amplifying the width W of the alerting frame 13 according to the acquired age information (S6). ). The photostimulation amount map is stored in the ECU 8. When the ECU acquires age information, the weight w value corresponding to the age is calculated by referring to the photostimulation amount map. Then, by multiplying the number of pixels P with respect to the width W of the alerting frame 13 by the weight w value, the width W is amplified and converted to the number of pixels P ′ for display.

光刺激量マップの一例を図10に示す。図10は運転者の年齢層とウエイトw値の関係を示した光刺激量マップを示す図であり、(a)はウエイトw値を二段階に分けた光刺激量マップで、(b)はウエイトw値をN段階に分けた光刺激量マップである。高齢の運転者14は若い運転者14よりも視界が狭くなるため、注意喚起枠13による光刺激量を増加させなくては、認知量を一定に保つことができない。従って、図10(a)においては、運転者14が65歳以下の場合はウエイトw値を1.0とし、注意喚起枠13の幅Wを予め設定した視角αに相当する幅としているが、65歳を超えた場合はウエイトw値を増加させることによって、幅Wを予め設定した視角αに相当する幅よりも大きくすることによって、光刺激量を増加させる。また、図10(b)においては、年齢の増加と共に、徐々にウエイトw値を増加させることによって、光刺激量を徐々に増加させるようにしている。   An example of the light stimulus amount map is shown in FIG. FIG. 10 is a diagram showing a light stimulus amount map showing the relationship between the driver's age group and the weight w value. FIG. 10A is a light stimulus amount map in which the weight w value is divided into two stages, and FIG. It is a light stimulus amount map in which the weight w value is divided into N stages. Since the elderly driver 14 has a narrower field of view than the younger driver 14, the recognition amount cannot be kept constant without increasing the amount of light stimulation by the alerting frame 13. Accordingly, in FIG. 10A, when the driver 14 is 65 years old or younger, the weight w value is 1.0, and the width W of the alerting frame 13 is a width corresponding to the preset viewing angle α. When over 65 years old, the amount of light stimulation is increased by increasing the weight w value to make the width W larger than the width corresponding to the preset viewing angle α. In FIG. 10B, the light stimulus amount is gradually increased by gradually increasing the weight w value as the age increases.

モニタ3に表示させる注意喚起枠13の画素数P´を決定したら、外界撮影用カメラ2から得た画像情報に基づいて描画された車両周辺の景色と歩行者の画像情報に、歩行者11を取り囲む矩形枠12と注意喚起枠13とを重畳させた画像情報を作成する(S7)。そして、作成した画像情報をモニタ3に出力する(S8)。ここまでの処理が終了すると、再びS1へ戻り、同様の処理手順が繰り返される。   When the number of pixels P ′ of the alerting frame 13 to be displayed on the monitor 3 is determined, the pedestrian 11 is added to the scenery around the vehicle and the pedestrian image information drawn based on the image information obtained from the camera 2 for shooting the outside world. Image information in which the surrounding rectangular frame 12 and the alerting frame 13 are superimposed is created (S7). Then, the created image information is output to the monitor 3 (S8). When the processing so far is completed, the process returns to S1 again, and the same processing procedure is repeated.

以上のような実施の形態においては、運転者14の認知力は運転者14の姿勢、車種あるいは運転者14に影響を受けるものであるにも関わらず、注意喚起枠13の幅Wを変化させて、運転者14にとって最適な注意喚起となる視角αを保つことによって、運転者14の認知量を一定に保っている。従って、運転者14が十分に認識しているときは過剰な注意喚起による違和感を与えることなく、また、運転者14の認知力が不足しているときは注意喚起を十分に行うことができる。以上によって、運転者14の認知力が異なっていても、運転者14に対して適切な注意喚起をすることができる。   In the embodiment as described above, the width W of the alerting frame 13 is changed even though the cognitive power of the driver 14 is affected by the posture, the vehicle type, or the driver 14 of the driver 14. Thus, the recognition amount of the driver 14 is kept constant by maintaining the viewing angle α that is the most suitable alert for the driver 14. Therefore, when the driver 14 is sufficiently aware, it is possible not to give a sense of incongruity due to excessive attention, and when the driver 14 is insufficient in cognitive ability, sufficient alerting can be performed. As described above, even if the driver 14 has different cognitive power, the driver 14 can be appropriately alerted.

また、運転者14の認知力が異なっていたとしても、注意喚起枠13の幅Wの大きさ、即ち表示面積を変化させて運転者の認知量を変化させることができ、これによって確実に運転者の認知量を一定に保つことができる。   Further, even if the driver's 14 cognitive ability is different, the driver's recognition amount can be changed by changing the size of the width W of the alerting frame 13, that is, the display area, thereby reliably driving. The amount of recognition of the person can be kept constant.

また、モニタ3に対する瞳重心位置14aの距離及び直線21と直線22とがなす角度は、運転者14の姿勢、車種あるいは運転者14の体の大きさなどによって変動を受けるものであり、注意喚起枠13に対する運転者14の認知力に大きな影響を及ぼす要素である。この情報表示装置1では、そのような要素に基づいて認知力を推定しているため、運転者14の認知力を正確に推定することができ、運転者14の姿勢、車種あるいは運転者14の体の大きさなどによることなく、確実に運転者14の認知量を一定に保つことができる。   Further, the distance of the pupil center of gravity position 14a to the monitor 3 and the angle formed by the straight line 21 and the straight line 22 are subject to fluctuations depending on the posture of the driver 14, the type of vehicle, the size of the body of the driver 14, and the like. This is an element that greatly affects the cognitive power of the driver 14 with respect to the frame 13. In this information display device 1, since the cognitive power is estimated based on such elements, the cognitive power of the driver 14 can be accurately estimated, and the attitude of the driver 14, the vehicle type, or the driver 14 The amount of recognition of the driver 14 can be reliably kept constant without depending on the size of the body.

また、年齢の高い運転者14の視界は、低い運転者14に比べて狭く、注意喚起枠13に対する認知力が低くなるため、運転者14の年齢は、認知力に大きな影響を及ぼす要素である。この情報表示装置1では、そのような要素に基づいて認知力を推定しているため、運転者14の認知力を正確に推定することができ、運転者14の年齢によることなく、確実に運転者14の認知量を一定に保つことができる。   In addition, since the field of view of the older driver 14 is narrower than that of the lower driver 14 and the cognitive power with respect to the alerting frame 13 is reduced, the age of the driver 14 is an element that greatly affects the cognitive power. . In this information display device 1, since the cognitive power is estimated based on such elements, the cognitive power of the driver 14 can be accurately estimated, and driving without fail depending on the age of the driver 14. The amount of recognition of the person 14 can be kept constant.

次に、情報表示装置1による第2の制御形態に係る情報表示処理について図11に示されるフローチャートを参照して説明する。図11は、情報表示装置1による第2の制御形態に係る情報表示処理の処理手順を示すフローチャートである。この第2の制御形態は上述した第1の制御形態の変形であり、図11に示されるように、上述したステップS6に代えてステップS9が実行される点で第1の制御形態と相違する。その他の処理ステップについては第1の制御形態と同一であるのでここでは説明を省略する。   Next, information display processing according to the second control mode by the information display device 1 will be described with reference to the flowchart shown in FIG. FIG. 11 is a flowchart illustrating a processing procedure of information display processing according to the second control mode performed by the information display device 1. This second control form is a modification of the first control form described above, and as shown in FIG. 11, is different from the first control form in that step S9 is executed instead of step S6 described above. . The other processing steps are the same as those in the first control mode, and therefore description thereof is omitted here.

第2の制御形態では、ステップS9において、取得した年齢情報に応じて注意喚起枠13の輝度を増加させるための係数であるウエイトw値を定めた2次元マップ(光刺激量マップ)から対応するウエイトw値を取得する。   In a 2nd control form, it respond | corresponds from the two-dimensional map (photostimulation amount map) which defined the weight w value which is a coefficient for increasing the brightness | luminance of the alerting frame 13 according to the acquired age information in step S9. Get the weight w value.

本制御形態によれば、運転者14の認知力が異なっていたとしても、注意喚起枠13の輝度によって、運転者14の認知量を変化させることができ、これによって確実に運転者14の認知量を一定に保つことができる。   According to this control mode, even if the cognitive power of the driver 14 is different, the amount of recognition of the driver 14 can be changed by the brightness of the alerting frame 13, thereby reliably recognizing the driver 14. The amount can be kept constant.

以上、本発明の実施の形態について説明したが、本発明は、上記実施の形態に限定されるものではなく種々の変形が可能である。例えば、上記実施の形態では、本発明をナイトビジョンに適用しているが、これに限られず、カーナビゲーションシステム等のように、所定の情報を運転者に提供する装置にも適用可能である。   Although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments, and various modifications can be made. For example, in the above embodiment, the present invention is applied to night vision. However, the present invention is not limited to this, and the present invention can also be applied to an apparatus that provides predetermined information to a driver, such as a car navigation system.

また、注意喚起枠の輝度のみを変化させることによって認知量を一定に保つこととしてもよい。   Moreover, it is good also as keeping recognition amount constant by changing only the brightness | luminance of an alerting frame.

更に、モニタに注意喚起枠を表示させることによって光刺激情報を与えていたが、モニタ以外の装置から光刺激情報を発生させてもよい。   Furthermore, although the light stimulus information is given by displaying the alerting frame on the monitor, the light stimulus information may be generated from a device other than the monitor.

本実施の形態に係る情報表示装置1の構成を示す図である。It is a figure which shows the structure of the information display apparatus 1 which concerns on this Embodiment. モニタに表示された画像情報の一例を示す図である。It is a figure which shows an example of the image information displayed on the monitor. 情報表示装置1による第1の制御形態に係る情報表示処理の処理手順を示すフローチャートである。4 is a flowchart showing a processing procedure of information display processing according to a first control mode by the information display device 1. 車両左方から車内を見たときの、モニタ、瞳検知用カメラ及び運転者それぞれの位置関係を示した図である。It is the figure which showed the positional relationship of a monitor, a camera for pupil detection, and a driver when the inside of the vehicle is viewed from the left side of the vehicle. 車両上方から車内を見たときの、モニタ、瞳検知用カメラ及び運転者それぞれの位置関係を示した図である。It is the figure which showed the positional relationship of a monitor, a camera for pupil detection, and a driver when the inside of the vehicle is viewed from above the vehicle. 瞳検知用カメラが取得した画像データを示し、(a)は運転者の顔が瞳検知用カメラに対して近い位置にある状態である距離F=Faの場合を示し、(b)は遠い位置にある状態である距離F=Fbの場合を示している。The image data acquired by the pupil detection camera is shown, (a) shows the case where the driver's face is close to the pupil detection camera, and distance F = Fa, and (b) shows the far position. In this case, the distance F = Fb is shown. Z軸方向瞳位置マップの一例を示す図である。It is a figure which shows an example of a Z-axis direction pupil position map. 車両上方から車内を見たときの、モニタと瞳重心位置との位置関係を示した図である。It is the figure which showed the positional relationship of a monitor and a pupil gravity center position when the inside of a vehicle is seen from the vehicle upper direction. 車両左方から車内を見たときの、モニタと瞳重心位置との位置関係を示した図である。It is the figure which showed the positional relationship of a monitor and a pupil gravity center position when the inside of a vehicle is seen from the vehicle left side. 運転者の年齢層とウエイトw値の関係を示した光刺激マップを示す図であり、(a)はウエイトw値を二段階に分けた光刺激量マップで、(b)はウエイトw値をN段階に分けた光刺激量マップである。It is a figure which shows the light stimulus map which showed the driver | operator's age group and the weight w value, (a) is a light stimulus amount map which divided weight w value into two steps, (b) is weight w value. It is a light stimulus amount map divided into N stages. 情報表示装置1による第2の制御形態に係る処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which concerns on the 2nd control form by the information display apparatus.

符号の説明Explanation of symbols

1…情報表示装置、3…モニタ(表示手段)、8…ECU(光刺激調節手段、認知力推定手段)、13…注意喚起枠(光刺激情報)、14…運転者。   DESCRIPTION OF SYMBOLS 1 ... Information display apparatus, 3 ... Monitor (display means), 8 ... ECU (light stimulus adjustment means, cognitive ability estimation means), 13 ... Warning frame (light stimulus information), 14 ... Driver.

Claims (4)

運転者の視覚を刺激する光刺激情報を、表示情報に重畳させて表示し得る表示手段と、
前記光刺激情報に対する前記運転者の認知力を推定する認知力推定手段と、
前記表示手段で表示する前記光刺激情報の光刺激量を、前記認知力推定手段で推定した前記認知力に応じて調節する光刺激量調節手段と、を備え
前記光刺激情報は、前記表示情報を取り囲んで、前記運転者の視覚を光によって刺激する注意喚起枠であり、
前記認知力推定手段は、少なくとも、前記表示手段と前記運転者の瞳との距離、及び前記表示手段に対する前記運転者の瞳の角度に基づいて前記認知力を推定し、
前記光刺激量調節手段は、前記注意喚起枠の縁部の幅を変化させることによって前記光刺激量を調節することを特徴とする情報表示装置。
Display means capable of superimposing display information on light stimulus information that stimulates the driver's vision;
Cognitive ability estimating means for estimating the driver's cognitive ability with respect to the light stimulus information;
A light stimulus amount adjusting means for adjusting a light stimulus amount of the light stimulus information displayed by the display means according to the cognitive power estimated by the cognitive power estimating means ,
The light stimulus information is a caution frame that surrounds the display information and stimulates the driver's vision with light,
The cognitive power estimation means estimates the cognitive power based on at least a distance between the display means and the driver's pupil, and an angle of the driver's pupil with respect to the display means,
The information display device, wherein the light stimulation amount adjusting means adjusts the light stimulation amount by changing a width of an edge of the alerting frame .
前記光刺激量調節手段は、前記光刺激情報の輝度を変化させることによって前記光刺激量を調節することを特徴とする請求項1記載の情報表示装置。   The information display device according to claim 1, wherein the light stimulus amount adjusting unit adjusts the light stimulus amount by changing a luminance of the light stimulus information. 前記光刺激情報の表示領域は所定の幅を有しており、前記認知力推定手段は、前記光刺激情報の前記表示領域に対する前記運転者の視角に基づいて、前記認知力を推定することを特徴とする請求項1または2に記載の情報表示装置。 The display area of the photostimulation information has a predetermined width, and the cognitive power estimation means estimates the cognitive power based on a visual angle of the driver with respect to the display area of the photostimulation information. The information display device according to claim 1, wherein the information display device is a display device. 前記認知力推定手段は、前記運転者の年齢に基づいて前記認知力を推定することを特徴とする請求項1〜3のいずれか一項に記載の情報表示装置。 The information display apparatus according to claim 1 , wherein the cognitive power estimation unit estimates the cognitive power based on the age of the driver.
JP2007023336A 2007-02-01 2007-02-01 Information display device Expired - Fee Related JP4935387B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007023336A JP4935387B2 (en) 2007-02-01 2007-02-01 Information display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007023336A JP4935387B2 (en) 2007-02-01 2007-02-01 Information display device

Publications (2)

Publication Number Publication Date
JP2008191778A JP2008191778A (en) 2008-08-21
JP4935387B2 true JP4935387B2 (en) 2012-05-23

Family

ID=39751847

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007023336A Expired - Fee Related JP4935387B2 (en) 2007-02-01 2007-02-01 Information display device

Country Status (1)

Country Link
JP (1) JP4935387B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5157845B2 (en) * 2008-11-21 2013-03-06 トヨタ自動車株式会社 Visual assistance device
JP5755275B2 (en) * 2013-03-22 2015-07-29 ヤフー株式会社 Affiliate system, affiliate method and server
BR112016023042B1 (en) 2014-04-02 2022-01-11 Nissan Motor Co. Ltd VEHICLE INFORMATION PRESENTATION DEVICE

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003076355A (en) * 2001-08-31 2003-03-14 Sharp Corp Picture display device, picture display method, recording medium, and program
JP2003317197A (en) * 2002-04-26 2003-11-07 Aisin Aw Co Ltd Alarm system
JP2004110546A (en) * 2002-09-19 2004-04-08 Denso Corp Display device, acoustic device and actuator control device
JP2006148541A (en) * 2004-11-19 2006-06-08 Denso Corp Navigation device and program

Also Published As

Publication number Publication date
JP2008191778A (en) 2008-08-21

Similar Documents

Publication Publication Date Title
US10311735B2 (en) Vehicle display system and method of controlling vehicle display system
US10336188B2 (en) Vehicle display system and method of controlling vehicle display system
JP4872245B2 (en) Pedestrian recognition device
US10479202B2 (en) Vehicle display system and method of controlling vehicle display system
CN108621940B (en) Display system for vehicle and control method for display system for vehicle
JP5092776B2 (en) Gaze direction detection device and gaze direction detection method
JP5482737B2 (en) Visual load amount estimation device, driving support device, and visual load amount estimation program
CN110573369A (en) Head-up display device and display control method thereof
US10227002B2 (en) Vehicle display system and method of controlling vehicle display system
EP3330117A1 (en) Vehicle display device
JP6693489B2 (en) Information processing device, driver monitoring system, information processing method, and information processing program
JP2005247224A (en) Vehicular display device
JP6683185B2 (en) Information processing device, driver monitoring system, information processing method, and information processing program
JP2009244959A (en) Driving support device and driving support method
JP5855206B1 (en) Transmission display device for vehicle
EP2447759A2 (en) Real-time warning system for vehicle windshield and performing method thereof
CN109415020B (en) Luminance control device, luminance control system and luminance control method
US11827148B2 (en) Display control device, display control method, moving body, and storage medium
JP4337130B2 (en) Control device for driving device
JP2007008382A (en) Device and method for displaying visual information
JP2018022958A (en) Vehicle display controller and vehicle monitor system
JP2017056909A (en) Vehicular image display device
JP4779780B2 (en) Image display device
JP4935387B2 (en) Information display device
JP2009248812A (en) Driving assistance device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110621

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110822

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120124

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120206

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150302

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150302

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees