JP2022151067A - awakening device - Google Patents

awakening device Download PDF

Info

Publication number
JP2022151067A
JP2022151067A JP2021053967A JP2021053967A JP2022151067A JP 2022151067 A JP2022151067 A JP 2022151067A JP 2021053967 A JP2021053967 A JP 2021053967A JP 2021053967 A JP2021053967 A JP 2021053967A JP 2022151067 A JP2022151067 A JP 2022151067A
Authority
JP
Japan
Prior art keywords
image
arousal
awakening
state
determination unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021053967A
Other languages
Japanese (ja)
Inventor
彩子 小谷
Ayako Kotani
有華里 伊藤
Yukari Ito
真紀子 杉浦
Makiko Sugiura
政治 河合
Seiji Kawai
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2021053967A priority Critical patent/JP2022151067A/en
Priority to PCT/JP2022/011352 priority patent/WO2022202445A1/en
Publication of JP2022151067A publication Critical patent/JP2022151067A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Social Psychology (AREA)
  • Biomedical Technology (AREA)
  • Human Computer Interaction (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Mathematical Physics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Traffic Control Systems (AREA)
  • Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

To provide an awakening device which prevents a passenger from feeling troublesomeness.SOLUTION: An awakening device comprises an awakening determination unit and a stimulation determination unit. The awakening determination unit determines an awakened state of a passenger of a vehicle. The stimulation determination unit presents an image 410 including an awakening image 440 in which a blur is applied to an end side including a boundary with a background image 420 to the passenger by an image display unit in accordance the awakened state determined by the awakening determination unit. With this, visual stimulation that enhances the awakened state of the passenger is given to the passenger.SELECTED DRAWING: Figure 5

Description

本明細書に記載の開示は、覚醒装置に関するものである。 The disclosure provided herein relates to wakefulness devices.

特許文献１に示されるように、眠気検出部と制御部を有する覚醒誘導制御装置が知られている。眠気検出部は車両の運転手などのユーザの眠気レベルを検出する。制御部は眠気レベルが基準値以上になると覚醒誘導部を駆動する。 As shown in Patent Document 1, a wakefulness induction control device having a drowsiness detection section and a control section is known. A drowsiness detector detects a drowsiness level of a user such as a driver of a vehicle. The control unit drives the awakening induction unit when the drowsiness level reaches or exceeds the reference value.

国際公開第２０１８／２１６６６９号WO2018/216669

特許文献１に示される覚醒誘導部は、音、光、および、熱などによってユーザに刺激を与える。これによりユーザの覚醒が誘導される。しかしながら、係る刺激の付加によって、ユーザ（搭乗者）が煩わしいと感じる虞がある The wakefulness induction unit disclosed in Patent Document 1 stimulates the user with sound, light, heat, and the like. This induces the awakening of the user. However, the user (passenger) may feel annoyed by the addition of such a stimulus.

本開示の目的は、搭乗者が煩わしいと感じることの抑制された覚醒装置を提供することである。 An object of the present disclosure is to provide an awakening device that is less annoying for passengers.

本開示の一態様による覚醒装置は、車両の搭乗者の覚醒状態を判定する覚醒判定部（３４０）と、
覚醒判定部によって判定された覚醒状態に応じて、背景画像（４２０）との境を含む端側にぼかしの付加された覚醒画像（４４０）を含む画像（４１０）を画像表示部（４００）によって搭乗者に提示させることで、搭乗者の覚醒状態を高める視覚刺激を搭乗者に与える刺激判定部（３５０）と、を有する。 An arousal device according to one aspect of the present disclosure includes an arousal determination unit (340) that determines an arousal state of an occupant of a vehicle;
An image (410) including an arousal image (440) with a blurred edge including a boundary with a background image (420) is displayed by an image display unit (400) according to the arousal state determined by the arousal determination unit. and a stimulus determination unit (350) that provides the passenger with a visual stimulus that enhances the wakefulness of the passenger by presenting it to the passenger.

これによれば、搭乗者が煩わしいと感じることが抑制される。それとともに、搭乗者の覚醒状態が改善される。 According to this, it is suppressed that a passenger feels troublesome. At the same time, the arousal state of the passenger is improved.

なお、上記の括弧内の参照番号は、後述の実施形態に記載の構成との対応関係を示すものに過ぎず、技術的範囲を何ら制限するものではない。 It should be noted that the reference numbers in parentheses above merely indicate the correspondence with the configurations described in the embodiments described later, and do not limit the technical scope in any way.

覚醒システムを示すブロック図である。1 is a block diagram showing an arousal system; FIG. 眠気レベルとドライバ状態の関係を示す図表である。4 is a chart showing the relationship between drowsiness level and driver state; 眠気レベルと覚醒画像の関係を示す図表である。FIG. 11 is a chart showing the relationship between drowsiness levels and wakefulness images; FIG. 眠気レベル０の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image when the drowsiness level is 0; 眠気レベル１の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image when the drowsiness level is 1; 眠気レベル２の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image at drowsiness level 2; 眠気レベル３の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image at sleepiness level 3; 眠気レベル４の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image at drowsiness level 4; 眠気レベル５の時の画像を示す模式図である。FIG. 10 is a schematic diagram showing an image at drowsiness level 5; 車外視覚情報レベルと補正の関係を示す図表である。4 is a chart showing the relationship between external visual information level and correction; 画像表示処理を説明するためのフローチャートである。4 is a flowchart for explaining image display processing; 画像表示処理を説明するためのフローチャートである。4 is a flowchart for explaining image display processing; 画像表示処理を説明するためのフローチャートである。4 is a flowchart for explaining image display processing; 画像表示処理を説明するためのフローチャートである。4 is a flowchart for explaining image display processing; 画像表示処理を説明するためのフローチャートである。4 is a flowchart for explaining image display processing;

以下、図面を参照しながら本開示を実施するための複数の形態を説明する。各形態において先行する形態で説明した事項に対応する部分には同一の参照符号を付して重複する説明を省略する場合がある。各形態において構成の一部のみを説明している場合は、構成の他の部分については先行して説明した他の形態を適用することができる。 A plurality of modes for carrying out the present disclosure will be described below with reference to the drawings. In each form, the same reference numerals may be given to the parts corresponding to the matters described in the preceding form, and overlapping explanations may be omitted. When only a part of the configuration is described in each form, the previously described other forms can be applied to other parts of the configuration.

各実施形態で具体的に組み合わせが可能であることを明示している部分同士の組み合わせが可能である。また、特に組み合わせに支障が生じなければ、組み合わせが可能であることを明示していなくても、実施形態同士、実施形態と変形例、および、変形例同士を部分的に組み合せることも可能である。 It is possible to combine the parts that are specifically stated to be combinable in each embodiment. In addition, if there is no particular problem with the combination, it is possible to partially combine the embodiments, the embodiments and the modified examples, and the modified examples even if it is not explicitly stated that the combination is possible. be.

（第１実施形態）
図１～図１１に基づいて覚醒システムを説明する。 (First embodiment)
The awakening system will be described based on FIGS. 1 to 11. FIG.

＜覚醒システム＞
図１に示すように覚醒システム１００は、センサ２００と、覚醒装置３００と、画像表示部４００と、を有する。センサ２００で検出されたセンサ情報が覚醒装置３００に入力される。車両情報などが図示しない車載ＥＣＵから覚醒装置３００に入力される。この車載ＥＣＵと覚醒装置３００との間の情報の伝達は図面において白抜き矢印で示している。 <Awakening system>
As shown in FIG. 1 , the awakening system 100 has a sensor 200 , an awakening device 300 and an image display section 400 . Sensor information detected by the sensor 200 is input to the awakening device 300 . Vehicle information and the like are input to the awakening device 300 from an in-vehicle ECU (not shown). Transmission of information between this in-vehicle ECU and the awakening device 300 is indicated by white arrows in the drawing.

覚醒装置３００は入力されたセンサ情報と車両情報に基づいて通知情報を算出する。そして覚醒装置３００はその通知情報を含む指示信号を画像表示部４００に出力する。画像表示部４００は入力された指示信号に含まれる通知情報を画像４１０として出力する。 The awakening device 300 calculates notification information based on the input sensor information and vehicle information. Then, the awakening device 300 outputs an instruction signal including the notification information to the image display section 400 . The image display unit 400 outputs the notification information included in the input instruction signal as an image 410 .

図４に示すように、画像４１０には背景画像４２０と状態画像４３０が含まれる。状態画像４３０は車両速度などの車両状態を示す画像である。また、車両の搭乗者の覚醒状態が低い場合、図５～図９に示すように、搭乗者の覚醒を促す覚醒画像４４０が画像４１０に表示される。図面では画像４１０の表示領域を破線で囲って示している。状態画像４３０にハッチングを付加している。 As shown in FIG. 4, image 410 includes background image 420 and state image 430 . The state image 430 is an image showing the vehicle state such as vehicle speed. Further, when the occupant of the vehicle is in a low arousal state, an arousal image 440 for prompting the occupant's arousal is displayed in the image 410, as shown in FIGS. In the drawing, the display area of the image 410 is indicated by enclosing it with a dashed line. The state image 430 is hatched.

本実施形態の画像表示部４００は、ヘッドアップディスプレイである。図面では画像表示部４００をＨＵＤと表記している。画像表示部４００は画像４１０をフロントガラスなどに表示する。そのため、上記した背景画像４２０の明度は、車外状況に応じて変化する。例えばトンネル内や夜の場合、背景画像４２０は暗くなる。 The image display unit 400 of this embodiment is a head-up display. In the drawings, the image display unit 400 is indicated as HUD. The image display unit 400 displays an image 410 on the windshield or the like. Therefore, the brightness of the background image 420 described above changes according to the conditions outside the vehicle. For example, in a tunnel or at night, the background image 420 is dark.

画像表示部４００は、主として車両に搭乗している運転手に向けて画像４１０を表示する。以下においては、車両に搭乗している運転手を、単にドライバと表記する。 The image display unit 400 displays an image 410 mainly for the driver in the vehicle. In the following, the driver on board the vehicle is simply referred to as the driver.

図１に示すように、覚醒装置３００には車載機器５００が接続されている。図面では車載機器５００をＡＥと表記している。車載機器５００にはスピーカーやメータなどの車載アクセサリーが含まれている。覚醒装置３００は入力されたセンサ情報や車両情報に基づいて、車載機器５００を制御する。 As shown in FIG. 1, an in-vehicle device 500 is connected to the awakening device 300 . In the drawings, the vehicle-mounted device 500 is denoted as AE. The in-vehicle device 500 includes in-vehicle accessories such as speakers and meters. The awakening device 300 controls the in-vehicle device 500 based on the input sensor information and vehicle information.

＜センサ＞
センサ２００は、ドライバカメラ２１０、外部環境カメラ２２０、および、照度センサ２３０を有する。図面では、ドライバカメラ２１０をＤＣと表記している。外部環境カメラ２２０をＥＥＣと表記している。照度センサ２３０をＩＳと表記している。 <Sensor>
Sensor 200 has driver camera 210 , external environment camera 220 and illumination sensor 230 . In the drawings, the driver camera 210 is denoted as DC. The external environment camera 220 is written as EEC. The illuminance sensor 230 is written as IS.

ドライバカメラ２１０はドライバの顔と身体を撮影する。外部環境カメラ２２０は車両外部の環境を撮影する。照度センサ２３０は車両外部の照度を検出する。これらセンサで検出された、ドライバの撮影映像、車外環境の撮影映像、および、車外照度が覚醒装置３００に入力される。 Driver camera 210 captures the driver's face and body. The external environment camera 220 photographs the environment outside the vehicle. The illuminance sensor 230 detects illuminance outside the vehicle. The captured image of the driver, the captured image of the environment outside the vehicle, and the illuminance outside the vehicle, which are detected by these sensors, are input to the awakening device 300 .

＜覚醒装置＞
覚醒装置３００は、通信部３１０と、記憶部３２０と、演算部３３０と、を有する。図面では、通信部３１０をＣＵと表記している。記憶部３２０をＭＵと表記している。 <Awakening device>
The awakening device 300 has a communication section 310 , a storage section 320 and a calculation section 330 . In the drawing, the communication unit 310 is denoted as CU. The storage unit 320 is written as MU.

通信部３１０は車載ＥＣＵ、センサ２００、画像表示部４００、および、車載機器５００との間での電気信号の送受信を行う。 The communication unit 310 transmits and receives electrical signals to and from the vehicle-mounted ECU, the sensor 200 , the image display unit 400 , and the vehicle-mounted device 500 .

記憶部３２０はコンピュータやプロセッサによって読み取り可能なデータとプログラムを非一時的に記憶する非遷移的実体的記憶媒体である。記憶部３２０は揮発性メモリと不揮発性メモリとを有している。記憶部３２０は通信部３１０に入力された諸情報や演算部３３０の処理結果を記憶する。記憶部３２０は演算部３３０が演算処理するための各種プログラムと各種参照値を記憶している。 The storage unit 320 is a non-transitional physical storage medium that non-temporarily stores data and programs readable by a computer or processor. Storage unit 320 has a volatile memory and a nonvolatile memory. The storage unit 320 stores various information input to the communication unit 310 and processing results of the calculation unit 330 . The storage unit 320 stores various programs and various reference values for arithmetic processing by the arithmetic unit 330 .

演算部３３０にはプロセッサが含まれている。演算部３３０は通信部３１０に入力された諸情報を記憶部３２０に記憶する。演算部３３０は記憶部３２０に記憶された情報に基づいて各種演算処理を実行する。この演算処理された結果を含む電気信号が通信部３１０を介して車載ＥＣＵ、画像表示部４００、および、車載機器５００に出力される。 Arithmetic unit 330 includes a processor. The calculation unit 330 stores various information input to the communication unit 310 in the storage unit 320 . The calculation unit 330 executes various calculation processes based on information stored in the storage unit 320 . An electric signal including the result of this arithmetic processing is output to the vehicle-mounted ECU, the image display unit 400 and the vehicle-mounted device 500 via the communication unit 310 .

演算部３３０は、機能的な構成要素として、覚醒判定部３４０と刺激判定部３５０を有する。図面では、覚醒判定部３４０をＷＤＵと表記している。刺激判定部３５０をＳＤＵと表記している。 The calculation unit 330 has an arousal determination unit 340 and a stimulus determination unit 350 as functional components. In the drawing, the awakening determination unit 340 is written as WDU. The stimulus determination unit 350 is denoted as SDU.

＜覚醒判定部＞
覚醒判定部３４０はドライバの撮影映像と、図２に示す眠気レベルとドライバ状態との関係に基づいて、ドライバの覚醒状態（眠気レベル）を判定する。図２では、眠気レベルをＳＬと表記している。ドライバ状態をＤＳと表記している。この眠気レベルとドライバ状態との関係が記憶部３２０に参照値として記憶されている。 <Awakening determination part>
The arousal determination unit 340 determines the driver's arousal state (drowsiness level) based on the captured image of the driver and the relationship between the drowsiness level and the driver's state shown in FIG. In FIG. 2, the drowsiness level is indicated as SL. The driver state is denoted as DS. The relationship between the drowsiness level and the driver's state is stored in the storage unit 320 as a reference value.

覚醒判定部３４０は、ドライバの視線移動が速くて頻繁だったり、瞬きが周期的で安定していたり、身体の動きが活発だったりした場合、ドライバの眠気レベルは０だと判定する。覚醒判定部３４０は、ドライバが眠気を感じていないと判定する。 The arousal determining unit 340 determines that the drowsiness level of the driver is 0 when the driver's line of sight moves quickly and frequently, the blinks are periodic and stable, or the body moves actively. Arousal determination unit 340 determines that the driver does not feel sleepy.

覚醒判定部３４０は、ドライバの視線移動が遅かったり、唇が開いていたりした場合、ドライバの眠気レベルは１だと判定する。覚醒判定部３４０は、ドライバが眠気を少し感じていると判定する。 The arousal determination unit 340 determines that the drowsiness level of the driver is 1 when the line of sight movement of the driver is slow or the lips are open. Arousal determination unit 340 determines that the driver feels a little sleepy.

覚醒判定部３４０は、ドライバの瞬きがゆっくりで頻発していたり、口の動きがあったり、座り直しがあったり、顔に手をやる動作があったりした場合、ドライバの眠気レベルは２だと判定する。覚醒判定部３４０は、ドライバが眠気を感じていると判定する。 The arousal determination unit 340 determines that the drowsiness level of the driver is 2 when the driver blinks slowly and frequently, moves the mouth, sits down, or touches the face. judge. Arousal determination unit 340 determines that the driver is feeling sleepy.

覚醒判定部３４０は、ドライバの視線移動と瞬きが遅かったり、意識的な瞬きがあったり、無用な身体の動きがあったり、あくびが頻発したりした場合、ドライバの眠気レベルは３だと判定する。覚醒判定部３４０は、ドライバが眠気を強く感じていると判定する。 The arousal determination unit 340 determines that the driver's drowsiness level is 3 when the driver's line of sight movement and blinking are slow, when the driver consciously blinks, when there is unnecessary body movement, and when the driver yawns frequently. do. Arousal determination unit 340 determines that the driver is strongly feeling drowsiness.

覚醒判定部３４０は、ドライバの頭が前や後ろに傾いた場合、ドライバの眠気レベルは４だと判定する。覚醒判定部３４０は、ドライバが眠気を酷く強く感じていると判定する。 The arousal determining unit 340 determines that the drowsiness level of the driver is 4 when the driver's head tilts forward or backward. Arousal determining unit 340 determines that the driver feels extremely drowsy.

覚醒判定部３４０は、ドライバの瞳が数秒間閉じることが継続されている場合、ドライバの眠気レベルは５だと判定する。覚醒判定部３４０は、ドライバが眠っていると判定する。 Arousal determination unit 340 determines that the driver's drowsiness level is 5 when the driver's eyes continue to close for several seconds. Arousal determination unit 340 determines that the driver is asleep.

以上に示したように、覚醒判定部３４０は眠気レベルを６段階に分けて判定している。図２において破線で分けて示すように、眠気レベル１以下と眠気レベル２以上とでは、ドライバの覚醒状態に大きな差がある。眠気レベル１以下は、ドライバの運転に影響がない眠気レベルを示している。眠気レベル２以上は、ドライバの運転に影響がある眠気レベルを示している。眠気レベル０が第１レベルに相当する。眠気レベル１が第２レベルに相当する。眠気レベル２以上が第３レベルに相当する。 As described above, the arousal determination unit 340 determines the drowsiness level by dividing it into six levels. As shown by the dashed lines in FIG. 2, there is a large difference in the arousal state of the driver between sleepiness level 1 or lower and sleepiness level 2 or higher. A drowsiness level of 1 or less indicates a drowsiness level that does not affect the driving of the driver. A drowsiness level of 2 or higher indicates a drowsiness level that affects the driving of the driver. Drowsiness level 0 corresponds to the first level. Sleepiness level 1 corresponds to the second level. Sleepiness level 2 or higher corresponds to the third level.

眠気レベル１以下では、ドライバの眠気レベルの改善よりも、ドライバの快適な運転が優先される。眠気レベル２以上では、ドライバの快適な運転よりも、ドライバの眠気レベルの改善が優先される。 At drowsiness level 1 or less, comfortable driving of the driver is prioritized over improvement of the drowsiness level of the driver. At drowsiness level 2 or higher, improvement of the drowsiness level of the driver is prioritized over comfortable driving of the driver.

なお、当然ながらにして、図２に示す眠気レベルの判定は一例に過ぎない。眠気レベルを、６段階ではなく例えば１０段階に分けてもよい。ドライバの運転に影響がない眠気レベルを、２段階ではなく例えば４段階に分けてもよい。ドライバの運転に影響がある眠気レベルを、４段階ではなく例えば６段階に分けてもよい。 Of course, the sleepiness level determination shown in FIG. 2 is merely an example. The sleepiness level may be divided into, for example, 10 stages instead of 6 stages. The drowsiness level that does not affect the driving of the driver may be divided into, for example, four stages instead of two stages. The drowsiness level that affects the driving of the driver may be divided into, for example, six stages instead of four stages.

＜刺激判定部＞
刺激判定部３５０は、覚醒判定部３４０で判定された眠気レベルに基づいて、ドライバに与える刺激レベルを判定する。刺激判定部３５０は、覚醒判定部３４０で判定された眠気レベルに基づいて、覚醒画像４４０を画像表示部４００によって画像４１０に表示させるか否かを判定する。刺激判定部３５０は、覚醒判定部３４０で判定された眠気レベルに基づいて、如何なる態様の覚醒画像４４０を画像表示部４００によって画像４１０に表示させるかを判定する。 <Stimulus determination part>
The stimulus determination unit 350 determines the stimulus level to be given to the driver based on the drowsiness level determined by the arousal determination unit 340 . Based on the drowsiness level determined by the arousal determination unit 340 , the stimulation determination unit 350 determines whether or not to display the awakening image 440 on the image 410 by the image display unit 400 . Based on the drowsiness level determined by the arousal determination unit 340 , the stimulus determination unit 350 determines in what manner the awakening image 440 should be displayed on the image 410 by the image display unit 400 .

眠気レベル０の場合、刺激判定部３５０はドライバの眠気レベルを改善するための処置が不要と判断する。この場合、刺激判定部３５０は、覚醒画像４４０を画像表示部４００によって画像４１０に表示させないことを決定する。 If the drowsiness level is 0, the stimulus determination unit 350 determines that no action is required to improve the drowsiness level of the driver. In this case, the stimulus determination unit 350 determines not to display the awakening image 440 on the image 410 by the image display unit 400 .

眠気レベル１以上の場合、刺激判定部３５０はドライバの眠気レベルを改善するための処置が必要と判断する。この場合、刺激判定部３５０は、覚醒画像４４０を画像表示部４００によって画像４１０に表示させることを決定する。 If the drowsiness level is 1 or higher, the stimulus determination unit 350 determines that treatment is necessary to improve the drowsiness level of the driver. In this case, the stimulation determination section 350 determines to display the awakening image 440 on the image 410 by the image display section 400 .

眠気レベル１の場合、刺激判定部３５０はドライバの眠気レベルを改善するための処置よりも、ドライバの快適な運転を優先させる。眠気レベル２以上の場合、刺激判定部３５０はドライバの快適な運転よりも、ドライバの眠気レベルを改善するための処置を優先する。このように、優先事項が眠気レベル１と眠気レベル２以上とでは異なる。そのため、両者の場合において、画像４１０に表示される覚醒画像４４０の態様が異なる。両者の場合において、覚醒画像４４０の端側の明瞭さに差がある。 In the case of drowsiness level 1, the stimulus determination unit 350 gives priority to comfortable driving of the driver over measures for improving the drowsiness level of the driver. When the drowsiness level is 2 or higher, the stimulus determination unit 350 gives priority to measures for improving the drowsiness level of the driver over comfortable driving of the driver. Thus, the priority is different between sleepiness level 1 and sleepiness level 2 or higher. Therefore, in both cases, the aspect of the awakening image 440 displayed on the image 410 is different. In both cases, there is a difference in edge clarity of the awakened image 440 .

＜覚醒画像＞
記憶部３２０には、図３に示す眠気レベルと覚醒画像４４０の態様との関係が参照値として記憶されている。図３では、眠気レベルをＳＬと表記している。覚醒画像４４０の背景画像４２０との境のぼかしをＧＤと表記している。そして、覚醒画像４４０の色、大きさ、形状、明度、彩度を、ＣＬ、ＳＩ、ＳＨ、ＬＩ、ＣＨと表記している。 <Awakening image>
Storage unit 320 stores the relationship between the drowsiness level shown in FIG. 3 and the mode of wakefulness image 440 as a reference value. In FIG. 3, the drowsiness level is indicated as SL. The blurring of the boundary between the awakening image 440 and the background image 420 is denoted by GD. The color, size, shape, brightness, and saturation of the awakening image 440 are denoted by CL, SI, SH, LI, and CH.

刺激判定部３５０はこの図３に示す関係と覚醒判定部３４０で判定された眠気レベルとに基づいて、覚醒画像４４０の表示と非表示とを判定する。覚醒画像４４０を表示する場合、刺激判定部３５０は表示する覚醒画像４４０の態様を決定する。 Based on the relationship shown in FIG. When displaying the arousal image 440, the stimulus determination unit 350 determines the aspect of the arousal image 440 to be displayed.

眠気レベル０の場合、ドライバの眠気レベルの改善が不要である。そのために刺激判定部３５０は、覚醒画像４４０の非表示を決定する。この場合、例えば図４に示すように、背景画像４２０と状態画像４３０が画像４１０に表示される。覚醒画像４４０は画像４１０に表示されない。 If the drowsiness level is 0, improvement of the driver's drowsiness level is unnecessary. Therefore, the stimulus determination unit 350 determines not to display the awakening image 440 . In this case, the background image 420 and the state image 430 are displayed in the image 410 as shown in FIG. 4, for example. Awakening image 440 is not displayed in image 410 .

眠気レベル１の場合、ドライバの眠気レベルの改善よりも、ドライバの快適な運転が優先される。そのために刺激判定部３５０は、覚醒画像４４０のぼかし、色、大きさ、形状、明度、および、彩度が第１状態の覚醒画像４４０の表示を決定する。この場合、例えば図５に示すように、ぼかしの付加された覚醒画像４４０が画像４１０に表示される。ぼかしのために、背景画像４２０との境を含む端側が不明瞭な覚醒画像４４０が画像４１０に表示される。覚醒画像４４０の色は状態画像４３０の色と同等に設定される。覚醒画像４４０の大きさ、形状、明度、および、彩度は初期値に設定される。 In the case of drowsiness level 1, priority is given to comfortable driving of the driver over improvement of the drowsiness level of the driver. Therefore, stimulus determination section 350 determines display of awakening image 440 in the first state in terms of blurring, color, size, shape, brightness, and saturation of awakening image 440 . In this case, a blurred awakening image 440 is displayed in the image 410 as shown in FIG. 5, for example. Due to blurring, an awake image 440 with unclear edges including the border with the background image 420 is displayed in the image 410 . The color of the awakening image 440 is set equal to the color of the state image 430 . The size, shape, brightness, and saturation of the awakening image 440 are set to initial values.

画像４１０の表示領域には、状態画像４３０の表示される状態表示領域と、覚醒画像４４０の表示される覚醒表示領域と、が含まれている。状態画像４３０は常に表示される。覚醒画像４４０は稀に表示される。そのために状態表示領域は主として画像４１０の表示領域の中央側に設定される。覚醒表示領域は主として画像４１０の表示領域の端側に設定される。 The display area of the image 410 includes a state display area where the state image 430 is displayed and an awakening display area where the awakening image 440 is displayed. State image 430 is always displayed. Awakening image 440 is rarely displayed. Therefore, the state display area is mainly set on the central side of the display area of the image 410 . The arousal display area is mainly set on the edge side of the display area of image 410 .

本実施形態では、覚醒画像４４０は表示領域の下側に表示される。覚醒画像４４０は表示領域の左側と右側それぞれに表示される。覚醒画像４４０は対称形状を成している。覚醒画像４４０の左側の形状と、右側の形状とは同等になっている。 In this embodiment, the awakening image 440 is displayed below the display area. Awakening images 440 are displayed on the left and right sides of the display area, respectively. Awakening image 440 has a symmetrical shape. The shape on the left side of the awakened image 440 is equivalent to the shape on the right side.

ぼかしは、状態画像４３０の端側に付加される。そのために状態画像４３０の端側は中央側と比べて不明瞭になっている。ぼかしは中央側から端側に向かうにしたがって強くなっている。 Blur is added to the edges of state image 430 . Therefore, the edge sides of the state image 430 are unclear compared to the central side. Blurring increases from the center side to the edge side.

ぼかしを除去すると、本実施形態の覚醒画像４４０の左側と右側それぞれの概略的な形状は直角三角形になっている。１つの直角三角形の短辺が表示領域の左端側若しくは右端側に位置している。２つの直角三角形それぞれの長辺が表示領域の下側に位置している。２つの直角三角形それぞれの斜辺が長辺よりも表示領域の上側に位置している。２つの直角三角形それぞれの斜辺は長辺よりも状態表示領域側に位置している。 When the blurring is removed, the schematic shapes of the left and right sides of the awakening image 440 of this embodiment are right-angled triangles. A short side of one right-angled triangle is located on the left end side or the right end side of the display area. The long sides of each of the two right-angled triangles are located below the display area. The oblique sides of each of the two right-angled triangles are located above the long sides of the display area. The oblique sides of each of the two right triangles are located closer to the state display area than the long sides.

覚醒画像４４０は、左側の直角三角形を成す部位と、右側の直角三角形を成す部位それぞれの斜辺と長辺との交差する角部が重なる形状を成している。ぼかしを除外すると、覚醒画像４４０は五角形を成している。 Awakening image 440 has a shape in which the corners of the portion forming the right triangle on the left side and the oblique sides and long sides of the portion forming the right triangle overlap each other. Excluding the blur, the awakened image 440 forms a pentagon.

なお、もちろんではあるが、覚醒画像４４０の形状としては上記例に限定されない。例えば、覚醒画像４４０の形状としては円形などを採用することもできる。また、覚醒画像４４０の数も１つに限定されない。覚醒画像４４０の数としては複数を採用することもできる。複数の覚醒画像４４０が対称配置された構成を採用することもできる。 Of course, the shape of the awakening image 440 is not limited to the above example. For example, a circular shape can be adopted as the shape of the awakening image 440 . Also, the number of awakening images 440 is not limited to one. A plurality of awakening images 440 may be employed. A configuration in which a plurality of awakening images 440 are arranged symmetrically can also be adopted.

基本、状態表示領域と覚醒表示領域とは重ならないように設定される。しかしながら、状態画像４３０に覚醒画像４４０の一部が重なってもよい。この場合、刺激判定部３５０は、状態画像４３０が明示されるように、状態画像４３０を覚醒画像４４０よりも優先して表示する。刺激判定部３５０は、状態画像４３０における覚醒画像４４０と重なる部位の色を、状態画像４３０における覚醒画像４４０と重ならない部位の色と異ならせてもよい。 Basically, the state display area and the awakening display area are set so as not to overlap. However, part of the awakening image 440 may overlap the state image 430 . In this case, stimulus determination section 350 displays state image 430 with priority over awakening image 440 so that state image 430 is clearly shown. Stimulus determination section 350 may make the color of the portion of state image 430 that overlaps awakening image 440 different from the color of the portion of state image 430 that does not overlap awakening image 440 .

覚醒画像４４０の端側をぼかす場合、覚醒画像４４０の端側のすべてを均一にぼかさなくともよい。例えば、覚醒画像４４０の状態画像４３０側の端部を、覚醒画像４４０の状態画像４３０から離間した側の端部よりもぼかして表示してもよい。 When the edge side of the awakening image 440 is blurred, it is not necessary to uniformly blur the entire edge side of the awakening image 440 . For example, the edge of the awakening image 440 on the state image 430 side may be displayed more blurred than the edge of the awakening image 440 on the side away from the state image 430 .

図５に示す例の場合、覚醒画像４４０の左側と右側の直角三角形をなす部位の斜辺が長辺よりも状態画像４３０側に位置している。この斜辺側が長辺側よりもぼかして表示される。 In the example shown in FIG. 5, the oblique sides of the left and right right triangle portions of the awakening image 440 are positioned closer to the state image 430 than the long sides. The oblique side is displayed more blurred than the long side.

眠気レベル２の場合、ドライバの快適な運転よりも、ドライバの眠気レベルの改善が優先される。そのために刺激判定部３５０は、覚醒画像４４０のぼかしが第２状態の覚醒画像４４０の表示を決定する。この場合、例えば図６に示すように、背景画像４２０との境にぼかしの設定されない覚醒画像４４０が画像４１０に表示される。背景画像４２０との境が明瞭な覚醒画像４４０が画像４１０に表示される。 In the case of drowsiness level 2, priority is given to improving the drowsiness level of the driver over comfortable driving of the driver. Therefore, the stimulus determination unit 350 determines to display the awakening image 440 in which the blurring of the awakening image 440 is in the second state. In this case, for example, as shown in FIG. 6, an awakening image 440 that is not blurred at the boundary with the background image 420 is displayed in the image 410 . An awakening image 440 with a clear boundary with the background image 420 is displayed in the image 410 .

眠気レベル３以上の場合、刺激判定部３５０は、眠気レベル２で表示する覚醒画像４４０の色、大きさ、形状、明度、および、彩度などを種々変化させる。こうすることで刺激判定部３５０はドライバの眠気レベルを改善するための視覚刺激を、眠気レベルに応じて強める。以下、図３に示す一例における、眠気レベル３以上の場合の覚醒画像４４０を説明する。 When the drowsiness level is 3 or higher, the stimulus determination unit 350 variously changes the color, size, shape, brightness, saturation, and the like of the awakening image 440 displayed at the drowsiness level 2 . By doing so, the stimulus determination unit 350 strengthens the visual stimulus for improving the drowsiness level of the driver according to the drowsiness level. The awakening image 440 in the case of sleepiness level 3 or higher in the example shown in FIG. 3 will be described below.

眠気レベル３の場合、刺激判定部３５０は、色が第２状態の覚醒画像４４０の表示を決定する。この場合、例えば図７において図６とはハッチングを異ならせて示すように、覚醒画像４４０は背景画像４２０とは異なる色に設定される。覚醒画像４４０の色は、例えば、標識などにおいて注意を喚起するアンバーなどが採用される。 In the case of drowsiness level 3, the stimulus determination unit 350 determines to display the awakening image 440 whose color is in the second state. In this case, the awakening image 440 is set to a color different from that of the background image 420, for example, as shown in FIG. 7 with hatching different from that in FIG. For the color of the awakening image 440, for example, an amber or the like is used to call attention to a sign or the like.

眠気レベル４の場合、刺激判定部３５０は、大きさが第２状態の覚醒画像４４０の表示を決定する。この場合、例えば図８に示すように、覚醒画像４４０が大きく表示される。図８においては、第２状態の覚醒画像４４０と第１状態の覚醒画像４４０との境に破線を付与している。第２状態の覚醒画像４４０は第１状態の覚醒画像４４０よりも表示領域の上側に大きく表示される。 In the case of drowsiness level 4, the stimulus determination unit 350 determines to display the awakening image 440 whose size is the second state. In this case, for example, as shown in FIG. 8, a large awakening image 440 is displayed. In FIG. 8, a dashed line is given to the boundary between the awakened image 440 in the second state and the awakened image 440 in the first state. The awakening image 440 in the second state is displayed larger than the awakening image 440 in the first state above the display area.

眠気レベル５の場合、刺激判定部３５０は、大きさが第３状態の覚醒画像４４０の表示を決定する。この場合、例えば図９に示すように、覚醒画像４４０が大きく表示される。図９においては、第３状態の覚醒画像４４０と第２状態の覚醒画像４４０との境に破線を付与している。第３状態の覚醒画像４４０は第２状態の覚醒画像４４０よりも表示領域の上側に大きく表示される。 In the case of drowsiness level 5, the stimulus determination unit 350 determines to display the awakening image 440 whose size is the third state. In this case, for example, as shown in FIG. 9, a large awakening image 440 is displayed. In FIG. 9, a dashed line is added to the boundary between the awakened image 440 in the third state and the awakened image 440 in the second state. The awakening image 440 in the third state is displayed larger than the awakening image 440 in the second state in the upper side of the display area.

＜覚醒画像の補正＞
上記したように、刺激判定部３５０には、外部環境カメラ２２０から車外環境の撮影映像が入力される。本実施形態の刺激判定部３５０は、眠気レベルに基づいて決定した覚醒画像４４０を車外環境の撮影映像に基づいて補正する。 <Correction of awakening image>
As described above, the stimulus determination unit 350 receives a captured image of the environment outside the vehicle from the external environment camera 220 . The stimulus determination unit 350 of the present embodiment corrects the awakening image 440 determined based on the drowsiness level based on the captured image of the environment outside the vehicle.

記憶部３２０には、図１０に示す外部視覚情報レベルと補正レベルとの関係が参照値として記憶されている。図１０では、外部視覚情報レベルをＥＶＩＬと表記している。補正レベルをＣＬと表記している。 The storage unit 320 stores the relationship between the external visual information level and the correction level shown in FIG. 10 as a reference value. In FIG. 10, the external visual information level is indicated as EVIL. A correction level is denoted as CL.

記憶部３２０には外部視覚情報レベルを判定するための複数の閾値が参照値として記憶されている。刺激判定部３５０は車外環境の撮影映像とこの閾値とを比較することで、外部視覚情報レベルを判定する。刺激判定部３５０は、外部視覚情報レベルが高くなるごとに、視覚刺激が強くなるように、眠気レベルに基づいて決定された覚醒画像４４０の態様を補正する。例えば、交通量が多いために車両外部の視覚情報の変化量が多いと、外部視覚情報レベルは高くなる。 Storage unit 320 stores a plurality of thresholds as reference values for determining the external visual information level. The stimulus determination unit 350 determines the level of external visual information by comparing the captured image of the environment outside the vehicle with this threshold value. The stimulus determination unit 350 corrects the aspect of the awakening image 440 determined based on the drowsiness level so that the visual stimulus becomes stronger as the external visual information level increases. For example, if the amount of change in the visual information outside the vehicle is large due to heavy traffic, the external visual information level will be high.

外部視覚情報レベルが０の場合、刺激判定部３５０はドライバの視覚刺激を強める外部視覚情報がないと判断する。刺激判定部３５０は眠気レベルに基づいて決定した覚醒画像４４０を補正しないと決定する。例えば、眠気レベル１であれば、刺激判定部３５０は覚醒画像４４０のぼかし、色、大きさ、形状、明度、および、彩度それぞれを第１状態のままにする。 When the external visual information level is 0, the stimulus determination unit 350 determines that there is no external visual information that enhances the driver's visual stimulus. The stimulus determination unit 350 determines not to correct the awakening image 440 determined based on the drowsiness level. For example, at drowsiness level 1, the stimulus determination unit 350 leaves the blur, color, size, shape, brightness, and saturation of the awakening image 440 in the first state.

外部視覚情報レベルが１の場合、刺激判定部３５０はドライバの視覚刺激を強める外部視覚情報があると判断する。刺激判定部３５０は眠気レベルに基づいて決定した覚醒画像４４０を第１補正レベルで補正することを決定する。例えば、眠気レベル１であれば、刺激判定部３５０は覚醒画像４４０のぼかし、色、大きさ、形状、明度、および、彩度の少なくとも一部を第１状態とは異ならせる。例えば、刺激判定部３５０は、覚醒画像４４０の明度を第１状態よりも明るくしたり、彩度を第１状態よりも鮮やかにしたりする。 When the external visual information level is 1, the stimulus determination unit 350 determines that there is external visual information that enhances the driver's visual stimulus. The stimulus determination unit 350 determines to correct the arousal image 440 determined based on the drowsiness level at the first correction level. For example, at drowsiness level 1, the stimulus determination unit 350 makes at least part of the blur, color, size, shape, brightness, and saturation of the awakening image 440 different from those in the first state. For example, the stimulus determination unit 350 makes the brightness of the awakening image 440 brighter than in the first state, or makes the saturation more vivid than in the first state.

外部視覚情報レベルが２の場合、刺激判定部３５０はドライバの視覚刺激を強める外部視覚情報が多いと判断する。刺激判定部３５０は眠気レベルに基づいて決定した覚醒画像４４０を第２補正レベルで補正することを決定する。例えば、眠気レベル１であれば、刺激判定部３５０は覚醒画像４４０のぼかし、色、大きさ、形状、明度、および、彩度の少なくとも一部を、第１補正時よりも第１状態から大きく異ならせる。例えば、刺激判定部３５０は、覚醒画像４４０の明度を第１補正時よりも明るくしたり、彩度を第１補正時よりも鮮やかにしたりする。 When the external visual information level is 2, the stimulus determination unit 350 determines that there is a large amount of external visual information that strengthens the driver's visual stimulus. The stimulus determination unit 350 determines to correct the arousal image 440 determined based on the drowsiness level with the second correction level. For example, if the drowsiness level is 1, the stimulus determination unit 350 increases at least part of the blur, color, size, shape, brightness, and saturation of the awakening image 440 from the first state compared to the time of the first correction. make different. For example, the stimulus determination unit 350 makes the brightness of the awakening image 440 brighter than during the first correction, or makes the saturation more vivid than during the first correction.

なお、覚醒画像４４０の態様ではなく、覚醒画像４４０の表示方法を変化させることで、上記補正を行ってもよい。例えば、覚醒画像４４０を点滅表示させる場合、補正無し、第１補正レベル、第２補正レベルにおいて、その点滅表示の周期を異ならせてもよい。このように覚醒画像４４０を点滅表示させることで、ドライバに視覚刺激を効果的に与えることができる。 Note that the above correction may be performed by changing the display method of the awakening image 440 instead of changing the mode of the awakening image 440 . For example, when blinking the awakening image 440, the cycle of the blinking display may be varied among no correction, the first correction level, and the second correction level. By blinking the awakening image 440 in this way, it is possible to effectively give a visual stimulus to the driver.

また、上記したように、刺激判定部３５０には、照度センサ２３０から車外照度が入力される。刺激判定部３５０は、車外照度に基づいて、覚醒画像４４０を補正してもよい。 In addition, as described above, the stimulus determination unit 350 receives the external illuminance from the illuminance sensor 230 . The stimulus determination unit 350 may correct the awakening image 440 based on the illuminance outside the vehicle.

例えば、車両がトンネルに侵入したために、車内が明るい状態から暗い状態になった場合、背景画像４２０が暗色になる。そこで刺激判定部３５０は、覚醒画像４４０の明度を明るくしてもよい。車両がトンネルから出たために、車内が暗い態から明るい状態になった場合、背景画像４２０が明色になる。そこで刺激判定部３５０は、覚醒画像４４０の明度を暗くしてもよい。 For example, when the vehicle enters a tunnel and the interior of the vehicle changes from a bright state to a dark state, the background image 420 becomes dark. Therefore, stimulus determination section 350 may increase the brightness of awakening image 440 . When the vehicle exits the tunnel and the interior of the vehicle changes from dark to bright, the background image 420 becomes bright. Therefore, the stimulus determination section 350 may darken the brightness of the awakening image 440 .

＜画像表示処理＞
次に、図１１に基づいて画像表示処理を説明する。演算部３３０は係る画像表示処理をサイクルタスクとして実行している。図面では開始をＳ、終了をＥで表記している。 <Image display processing>
Next, image display processing will be described based on FIG. The calculation unit 330 executes such image display processing as a cycle task. In the drawing, S indicates the start and E indicates the end.

ステップＳ１０において演算部３３０は、ドライバカメラ２１０からドライバの撮影映像を取得する。そして演算部３３０はこのドライバの撮影映像と、図２に示す眠気レベルとドライバ状態との関係に基づいて、ドライバの覚醒状態（眠気レベル）を判定する。この後に演算部３３０はステップＳ２０へ進む。 In step S<b>10 , the calculation unit 330 acquires the captured image of the driver from the driver camera 210 . Then, the calculation unit 330 determines the arousal state (drowsiness level) of the driver based on the photographed image of the driver and the relationship between the drowsiness level and the driver state shown in FIG. After that, the calculation unit 330 proceeds to step S20.

ステップＳ２０へ進むと演算部３３０は、眠気レベルが１以上か否かを判定する。すなわち演算部３３０は、眠気レベルが０か否かを判定する。眠気レベルが０の場合、演算部３３０は画像表示処理を終了する。この場合、覚醒画像４４０が画像４１０に表示されなくなる。眠気レベルが１以上の場合、演算部３３０はステップＳ３０へ進む。 When proceeding to step S20, the calculation unit 330 determines whether or not the drowsiness level is 1 or higher. That is, the calculation unit 330 determines whether or not the drowsiness level is zero. If the drowsiness level is 0, the calculation unit 330 terminates the image display process. In this case, the awakening image 440 is no longer displayed on the image 410 . If the drowsiness level is 1 or higher, the calculation unit 330 proceeds to step S30.

ステップＳ３０へ進むと演算部３３０は、外部環境カメラ２２０から車外環境の撮影映像を取得する。そして演算部３３０はこの車外環境の撮影映像と、図１０に示す外部視覚情報レベルと補正レベルとの関係に基づいて、補正レベルを判定する。この後に演算部３３０はステップＳ４０へ進む。 When proceeding to step S<b>30 , the calculation unit 330 acquires a photographed image of the environment outside the vehicle from the external environment camera 220 . Then, the calculation unit 330 determines the correction level based on the photographed image of the environment outside the vehicle and the relationship between the external visual information level and the correction level shown in FIG. After that, the calculation unit 330 proceeds to step S40.

ステップＳ４０へ進むと演算部３３０は、これまでに決定した眠気レベルと補正レベルに基づいて、如何なる態様の覚醒画像４４０を画像４１０に表示するのかを決定する。この後に演算部３３０はステップＳ５０へ進む。なお、この際、演算部３３０は照度センサ２３０から入力される車外照度にも基づいて、如何なる態様の覚醒画像４４０を画像４１０に表示するのかを決定してもよい。 When the process proceeds to step S40, the calculation unit 330 determines in what form the awakening image 440 is to be displayed in the image 410 based on the drowsiness level and the correction level determined so far. After this, the calculation unit 330 proceeds to step S50. Note that, at this time, the calculation unit 330 may also determine in what manner the awakening image 440 is to be displayed in the image 410 based on the vehicle exterior illuminance input from the illuminance sensor 230 .

ステップＳ５０へ進むと演算部３３０は、ステップＳ４０で決定した覚醒画像４４０を記憶部３２０に記憶する。また演算部３３０は、これまでに決定した眠気レベルと補正レベルも記憶部３２０に記憶する。この後に演算部３３０はステップＳ６０へ進む。 When proceeding to step S50, the calculation unit 330 stores the awakening image 440 determined in step S40 in the storage unit 320. FIG. The calculation unit 330 also stores the drowsiness level and correction level determined so far in the storage unit 320 . After this, the calculation unit 330 proceeds to step S60.

ステップＳ６０へ進むと演算部３３０は、ステップＳ４０で決定した覚醒画像４４０を含む通知情報を算出する。そして演算部３３０はその通知情報を含む指示信号を画像表示部４００に出力する。この後、演算部３３０は画像表示処理を終了する。 Upon proceeding to step S60, the calculation unit 330 calculates notification information including the awakening image 440 determined in step S40. Operation unit 330 then outputs an instruction signal including the notification information to image display unit 400 . After that, the calculation unit 330 terminates the image display processing.

＜作用効果＞
ドライバの眠気レベルが１の場合、背景画像４２０との境の不明瞭な覚醒画像４４０がドライバに表示される。係る覚醒画像４４０の表示による視覚刺激のため、ドライバが煩わしいと感じることが抑制される。また、係る境の不明瞭な覚醒画像４４０の表示の場合、例えば、明度や彩度などが状態画像４３０とは異なる覚醒画像４４０をドライバに表示した場合と比べて、ドライバの覚醒状態が改善されやすくなる。 <Effect>
When the driver's drowsiness level is 1, the driver is presented with an awake image 440 with an unclear boundary with the background image 420 . Due to the visual stimulation by the display of the awakening image 440, the driver is restrained from feeling annoyed. In addition, in the case of displaying the awakening image 440 with an unclear boundary, the driver's arousal state is improved compared to the case where the driver is displayed with the awakening image 440 different in brightness, saturation, etc. from the state image 430, for example. easier.

ドライバの眠気レベルが２以上の場合、背景画像４２０との境の明瞭な覚醒画像４４０がドライバに表示される。係る覚醒画像４４０の表示による視覚刺激のため、ドライバが多少煩わしいと感じるとしても、ドライバの覚醒状態が改善されやすくなる。 When the driver's drowsiness level is 2 or higher, an arousal image 440 with a clear boundary with the background image 420 is displayed to the driver. Even if the driver feels somewhat annoyed by the visual stimulus displayed by the arousal image 440, the arousal state of the driver is likely to be improved.

ドライバの眠気レベルが３以上の場合、色、大きさ、形状、明度、彩度のうちの少なくとも１つが変化された覚醒画像４４０がドライバに表示される。係る覚醒画像４４０の表示による視覚刺激のため、ドライバの覚醒状態が改善されやすくなる。 If the driver's drowsiness level is 3 or higher, the driver is presented with an awakening image 440 in which at least one of color, size, shape, brightness, and saturation has been changed. Due to the visual stimulation caused by the display of the arousal image 440, the arousal state of the driver is likely to be improved.

ドライバの眠気レベルが３以上の場合、覚醒画像４４０の色が標識などにおいて注意を喚起するアンバーになる。これによれば、ドライバの覚醒状態が改善されやすくなる。 When the driver's drowsiness level is 3 or higher, the color of the awakening image 440 becomes amber, which calls attention to a sign or the like. According to this, the wakefulness of the driver is likely to be improved.

ドライバの眠気レベルが３，４，５と上がるにしたがって、覚醒画像４４０の大きさが大きくなる。これにより、ドライバの覚醒状態が改善されやすくなる。 As the drowsiness level of the driver increases to 3, 4, and 5, the size of the awakening image 440 increases. As a result, the wakefulness of the driver is likely to be improved.

ドライバの眠気レベルが０の場合、覚醒画像４４０がドライバに表示されなくなる。これにより、覚醒状態のドライバに覚醒画像４４０の表示による視覚刺激が与えられることが抑制される。ドライバが煩わしいと感じることが抑制される。 If the driver's drowsiness level is 0, the awakening image 440 will not be displayed to the driver. This suppresses the display of the awake image 440 from giving a visual stimulus to the awake driver. It is suppressed that the driver feels troublesome.

状態表示領域と覚醒表示領域とは重ならないように設定される。状態画像４３０に覚醒画像４４０の一部が重なる場合、状態画像４３０が明示されるように、状態画像４３０が覚醒画像４４０よりも優先して表示される。例えば、状態画像４３０における覚醒画像４４０と重なる部位の色が、状態画像４３０における覚醒画像４４０と重ならない部位の色と異なるように設定される。これにより、ドライバが状態画像４３０を識別することが困難になることが抑制される。 The state display area and the arousal display area are set so as not to overlap each other. When state image 430 partially overlaps awakening image 440 , state image 430 is displayed with priority over awakening image 440 so that state image 430 is clearly visible. For example, the color of the portion of state image 430 that overlaps awakening image 440 is set to be different from the color of the portion of state image 430 that does not overlap awakening image 440 . This prevents the driver from having difficulty in identifying the state image 430 .

覚醒画像４４０は対称形状を成しており、表示領域の左側と右側に表示される。これによれば、覚醒画像４４０が画像４１０に表示された際に、ドライバが覚醒画像４４０に誘目されることが抑制される。 The awakening image 440 has a symmetrical shape and is displayed on the left and right sides of the display area. This prevents the driver from being attracted to the awakening image 440 when the awakening image 440 is displayed in the image 410 .

刺激判定部３５０は、外部視覚情報レベルが高くなると、視覚刺激が強くなるように、眠気レベルに基づいて決定された覚醒画像４４０の態様を補正する。これによれば、車両外部の視覚情報の変化による視覚刺激のドライバへの付加のために、覚醒画像４４０の視覚刺激によるドライバの覚醒状態の改善が妨げられることが抑制される。 The stimulus determination unit 350 corrects the aspect of the awakening image 440 determined based on the drowsiness level so that the visual stimulus becomes stronger as the external visual information level increases. According to this, it is suppressed that the improvement of the arousal state of the driver by the visual stimulus of the arousal image 440 is hindered due to the addition of the visual stimulus to the driver due to the change of the visual information outside the vehicle.

覚醒画像４４０の状態画像４３０側の端部は、覚醒画像４４０の状態画像４３０から離間した側の端部よりもぼかして表示される。これによれば、覚醒画像４４０の表示のために、ドライバが状態画像４３０を視認しがたくなることが抑制される。 The edge of awakening image 440 on the state image 430 side is displayed more blurred than the edge of awakening image 440 on the side away from state image 430 . According to this, it is possible to prevent the driver from having difficulty in visually recognizing the state image 430 due to the display of the awakening image 440 .

（第２実施形態）
次に、第２実施形態を図１２に基づいて説明する。 (Second embodiment)
Next, a second embodiment will be described with reference to FIG.

第１実施形態では、眠気レベル１の時の覚醒画像４４０の端側がぼかされ、眠気レベル２以上の時の覚醒画像４４０の端側がぼかされない例を示した。これに対し本実施形態では、ドライバの覚醒状態が改善されたか否かに応じて、覚醒画像４４０の端側がぼかされるか否かが決定される。 In the first embodiment, the edge side of the awakening image 440 is blurred when the sleepiness level is 1, and the edge side of the awakening image 440 is not blurred when the sleepiness level is 2 or higher. In contrast, in the present embodiment, it is determined whether or not the edge side of the awakening image 440 is blurred depending on whether the driver's awakening state has improved.

演算部３３０は図１２に示す画像表示処理を実行する。この画像表示処理は、図１１に示す画像表示処理に対してステップＳ１１０、ステップＳ１２０、ステップＳ１３０、および、ステップＳ１４０が付加されている。 The calculation unit 330 executes the image display processing shown in FIG. This image display process has steps S110, S120, S130, and S140 added to the image display process shown in FIG.

ステップＳ２０において眠気レベルが１以上であると判定すると、演算部３３０はステップＳ１１０へ進む。ステップＳ１１０で演算部３３０は、ドライバの眠気レベルが変化したか否かを判定する。 If it is determined in step S20 that the drowsiness level is 1 or more, the calculation unit 330 proceeds to step S110. In step S110, the calculation unit 330 determines whether or not the sleepiness level of the driver has changed.

第１実施形態で説明したように演算部３３０は画像表示処理をサイクルタスクで実行している。そして演算部３３０はステップＳ５０において眠気レベルを記憶部３２０に記憶する。 As described in the first embodiment, the calculation unit 330 executes image display processing as cycle tasks. Then, the calculation unit 330 stores the drowsiness level in the storage unit 320 in step S50.

例えば、演算部３３０が第１時間での画像表示処理のステップＳ１０において眠気レベル３と判定した場合、この眠気レベル３が記憶部３２０に記憶される。サイクルタスク周期が経過して、第１時間から第２時間になると、演算部３３０は再び画像表示処理を実行する。この際に記憶部３２０に眠気レベル３が記憶されている。またこの際に演算部３３０はステップＳ１０において再度眠気レベルを判定する。ステップＳ１１０において演算部３３０は、この再度判定した眠気レベルと、記憶部３２０に記憶されている眠気レベルとを比較する。 For example, when the calculation unit 330 determines that the sleepiness level is 3 in step S10 of the image display processing for the first time, this sleepiness level 3 is stored in the storage unit 320 . When the cycle task period has passed and the time has changed from the first time to the second time, the calculation unit 330 executes the image display process again. At this time, drowsiness level 3 is stored in storage unit 320 . At this time, the calculation unit 330 determines the drowsiness level again in step S10. In step S<b>110 , calculation unit 330 compares the re-determined sleepiness level with the sleepiness level stored in storage unit 320 .

ステップＳ１１０において、眠気レベルが変化していないと判定すると、演算部３３０はステップＳ３０へ進む。眠気レベルが変化していると判定すると、演算部３３０はステップＳ１２０へ進む。 If it is determined in step S110 that the drowsiness level has not changed, the calculation unit 330 proceeds to step S30. When determining that the drowsiness level has changed, the calculation unit 330 proceeds to step S120.

ステップＳ１２０へ進むと演算部３３０は、眠気レベルが低下したか否かを判定する。すなわち、演算部３３０は、ドライバの覚醒状態が改善されたか否かを判定する。ドライバの覚醒状態が改善されたと判定すると、演算部３３０はステップＳ１３０へ進む。ドライバの覚醒状態が改善されていないと判定すると、演算部３３０はステップＳ１４０へ進む。 When proceeding to step S120, the calculation unit 330 determines whether or not the drowsiness level has decreased. That is, the calculation unit 330 determines whether or not the alertness of the driver has improved. If it is determined that the wakefulness of the driver has improved, the calculation unit 330 proceeds to step S130. If it is determined that the driver's arousal state has not improved, the calculation unit 330 proceeds to step S140.

例えば、眠気レベルが３から２に変化した場合、演算部３３０はステップＳ１３０へ進む。眠気レベルが３から４に変化した場合、演算部３３０はステップＳ１４０へ進む。 For example, when the drowsiness level changes from 3 to 2, the calculation unit 330 proceeds to step S130. If the drowsiness level has changed from 3 to 4, the operation unit 330 proceeds to step S140.

ステップＳ１３０へ進むと演算部３３０は、覚醒画像４４０の端側にぼかしをいれることで、ドライバに与える視覚刺激を弱めることを決定する。係るぼかし付加の決定は、例えば図３に示す関係に優先して実行される。 When proceeding to step S130, the calculation unit 330 determines to weaken the visual stimulus given to the driver by blurring the edge side of the awakening image 440. FIG. Such determination of blur addition is executed with priority given to the relationship shown in FIG. 3, for example.

ステップＳ１４０へ進むと演算部３３０は、覚醒画像４４０の端側にぼかしをいれないと決定する。係るぼかし非付加の決定は、例えば図３に示す関係に優先して実行される。 When proceeding to step S140, the calculation unit 330 determines not to blur the edges of the awakening image 440. FIG. Such determination of non-blurring is executed with priority given to the relationship shown in FIG. 3, for example.

以上に示したように、覚醒状態が改善された場合、覚醒画像４４０の端側にぼかしが付加される。そのため、覚醒状態の改善されたドライバが、覚醒画像４４０のために、煩わしいと感じることが抑制される。 As described above, when the arousal state is improved, the edges of the arousal image 440 are blurred. Therefore, the driver whose arousal state has been improved is prevented from feeling annoyed by the arousal image 440 .

また、ぼかしの付加と非付加によって、覚醒画像４４０の表示態様に変化がつけられる。これにより、ドライバが覚醒画像４４０によって与えられる視覚刺激に慣れることが抑制される。覚醒画像４４０によって与えられる視覚刺激によってドライバが覚醒しがたくなることが抑制される。 Also, the display mode of the awakening image 440 is changed by adding or not adding blurring. This prevents the driver from becoming accustomed to the visual stimulus given by the awakening image 440 . The visual stimulus provided by the awakening image 440 suppresses the driver's difficulty in awakening.

また、上記したように覚醒画像４４０の表示態様の変化が、ぼかしの付加と非付加になる。そのため、例えば明度、彩度、および、形状などの変化によって覚醒画像４４０の表示態様に変化がつけられる構成と比べて、ドライバが煩わしいと感じることが抑制される。 Further, as described above, the change in the display mode of the awakening image 440 is addition or non-addition of blurring. Therefore, compared to a configuration in which the display mode of the awakening image 440 is changed according to, for example, changes in brightness, saturation, shape, etc., it is possible to prevent the driver from feeling annoyed.

なお本実施形態に記載の覚醒装置３００には、第１実施形態に記載の覚醒装置３００と同等の構成要素が含まれている。そのために本実施形態の覚醒装置３００が第１実施形態に記載の覚醒装置３００と同等の作用効果を奏することは言うまでもない。そのためにその記載を省略する。 The awakening device 300 described in this embodiment includes the same components as the awakening device 300 described in the first embodiment. Therefore, it goes without saying that the awakening device 300 of this embodiment has the same effect as the awakening device 300 described in the first embodiment. Therefore, description thereof is omitted.

（第１の変形例）
第１実施形態では、図１１に基づいて説明したように、演算部３３０はステップＳ３０において補正レベルを判定する例を示した。しかしながら、例えば図１３に示すように、演算部３３０はステップＳ３０を実行しなくともよい。演算部３３０は、外部環境カメラ２２０から入力される車外環境の撮影映像と、図１０に示す外部視覚情報レベルと補正レベルとの関係に基づいて、補正レベルを判定しなくともよい。 (First modification)
In the first embodiment, as described with reference to FIG. 11, the calculation unit 330 shows an example in which the correction level is determined in step S30. However, for example, as shown in FIG. 13, the calculation unit 330 does not have to execute step S30. The calculation unit 330 does not have to determine the correction level based on the image of the environment outside the vehicle input from the external environment camera 220 and the relationship between the external visual information level and the correction level shown in FIG. 10 .

（第２の変形例）
第２実施形態では、ステップＳ１１０において演算部３３０は、再度判定した眠気レベルと、記憶部３２０に記憶されている眠気レベルとを比較することで、眠気レベルが変化したか否かを判定する例を示した。しかしながら、例えば図１３に示すように、演算部３３０はステップＳ１１０に代わって、ステップＳ２１０を実行してもよい。 (Second modification)
In the second embodiment, in step S110, the calculation unit 330 compares the re-determined drowsiness level with the drowsiness level stored in the storage unit 320, thereby determining whether the drowsiness level has changed. showed that. However, for example, as shown in FIG. 13, the calculation unit 330 may execute step S210 instead of step S110.

ステップＳ２１０において演算部３３０は、所定時間経過したか否かを判定する。所定時間経過した場合、演算部３３０はステップＳ２２０へ進む。所定時間経過していない場合、演算部３３０はステップＳ３０へ進む。 In step S210, the calculation unit 330 determines whether or not a predetermined time has passed. If the predetermined time has passed, the calculation unit 330 proceeds to step S220. If the predetermined time has not elapsed, the calculation unit 330 proceeds to step S30.

ステップＳ２２０へ進むと演算部３３０は覚醒画像４４０のぼかしを変化させる。ぼかしの付加された覚醒画像４４０を表示させていたら、演算部３３０はぼかしの非付加の覚醒画像４４０を表示させることを決定する。ぼかしの非付加の覚醒画像４４０を表示させていたら、演算部３３０はぼかしの付加された覚醒画像４４０を表示させることを決定する。このように、所定時間経過する毎にぼかしの態様を変化させる。これにより、ドライバが覚醒画像４４０によって与えられる視覚刺激に慣れることが抑制される。 When proceeding to step S<b>220 , the calculation unit 330 changes the blurring of the awakening image 440 . If the blurred awakening image 440 has been displayed, the calculation unit 330 determines to display the unblurred awakening image 440 . If the awakening image 440 without blurring has been displayed, the calculation unit 330 determines to display the awakening image 440 with blurring. In this way, the mode of blurring is changed each time a predetermined time elapses. This prevents the driver from becoming accustomed to the visual stimulus given by the awakening image 440 .

（第３の変形例）
なお、ドライバが煩わしいと感じることを避けるために、係る処理は、例えば図１５に示すように、眠気レベル２以上で実行されるようにしてもよい。 (Third modification)
Note that, in order to avoid the driver feeling annoyed, such processing may be executed at drowsiness level 2 or higher, as shown in FIG. 15, for example.

本変形例では、図１４に示す画像表示処理に対して、ステップＳ２００が付加されている。演算部３３０はステップＳ２０において眠気レベルが１以上であると判定すると、ステップＳ２００へ進む。 In this modification, step S200 is added to the image display processing shown in FIG. When calculating unit 330 determines in step S20 that the drowsiness level is 1 or higher, the process proceeds to step S200.

ステップＳ２００へ進むと演算部３３０は、眠気レベルが２以上であるか否かを判定する。眠気レベルが２以上の場合、演算部３３０はステップＳ２１０へ進む。眠気レベルが２よりも小さい場合、演算部３３０はステップＳ３０へ進む。すなわち、眠気レベルが１の場合、演算部３３０はステップＳ３０へ進む。 When proceeding to step S200, the calculation unit 330 determines whether or not the drowsiness level is 2 or higher. If the drowsiness level is 2 or higher, the calculation unit 330 proceeds to step S210. If the sleepiness level is less than 2, the calculation unit 330 proceeds to step S30. That is, when the drowsiness level is 1, the calculation unit 330 proceeds to step S30.

このように、眠気レベルが１の場合、演算部３３０は所定時間経過する毎にぼかしの態様を変化させる処理を実行しなくともよい。これにより、眠気レベルが１のドライバが煩わしいと感じることが抑制される。 In this way, when the drowsiness level is 1, the calculation unit 330 does not have to execute the process of changing the mode of blurring every time a predetermined period of time elapses. As a result, it is suppressed that the driver whose drowsiness level is 1 feels annoyed.

（その他の変形例）
各実施形態では、ドライバの運転に影響がない眠気レベルを、眠気レベル０、眠気レベル１の２段階で判断する例を示した。そして、眠気レベル１の場合のみ、覚醒画像４４０にぼかしを付加する例を示した。ぼかしレベルが１つだけの例を示した。 (Other modifications)
In each embodiment, an example of determining the drowsiness level that does not affect the driving of the driver in two stages, drowsiness level 0 and drowsiness level 1, has been shown. Then, only in the case of drowsiness level 1, an example of adding blurring to the awakening image 440 is shown. An example with only one blur level is shown.

しかしながら、ドライバの運転に影響がない眠気レベルを、２段階ではなく例えば３段階に分けてもよい。眠気レベル１と眠気レベル２の場合、覚醒画像４４０にぼかしを付加してもよい。そして、ぼかしレベルを２つにしてもよい。ぼかしの付加具合を、眠気レベル１、眠気レベル２と高まるにつれて、薄めてもよい。ぼかしレベル１、ぼかしレベル２と高まるにつれて、覚醒画像４４０の端側を不明瞭から明瞭にしてもよい。 However, the drowsiness level that does not affect the driving of the driver may be divided into, for example, three stages instead of two stages. For drowsiness level 1 and drowsiness level 2, blurring may be added to the awakening image 440 . Then, the blur level may be set to two. The degree of blurring may be diluted as the drowsiness level 1 and the drowsiness level 2 increase. As blur level 1 and blur level 2 increase, the edge side of the awakening image 440 may be changed from unclear to clear.

本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態が本開示に示されているが、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。 Although the present disclosure has been described with reference to examples, it is understood that the present disclosure is not limited to such examples or structures. The present disclosure also includes various modifications and modifications within the equivalent range. In addition, while various combinations and configurations are shown in this disclosure, other combinations and configurations, including single elements, more, or less, are within the scope and spirit of this disclosure. It is.

１００…覚醒システム、２００…センサ、３００…覚醒装置、３４０…覚醒判定部、３５０…刺激判定部、４００…画像表示部、４１０…画像、４２０…背景画像、４３０…状態画像、４４０…覚醒画像、５００…車載機器 DESCRIPTION OF SYMBOLS 100... Arousal system 200... Sensor 300... Arousal apparatus 340... Arousal determination part 350... Stimulus determination part 400... Image display part 410... Image 420... Background image 430... State image 440... Arousal image , 500... In-vehicle equipment

Claims (9)

車両の搭乗者の覚醒状態を判定する覚醒判定部（３４０）と、
前記覚醒判定部によって判定された前記覚醒状態に応じて、背景画像（４２０）との境を含む端側にぼかしの付加された覚醒画像（４４０）を含む画像（４１０）を画像表示部（４００）によって前記搭乗者に提示させることで、前記搭乗者の前記覚醒状態を高める視覚刺激を前記搭乗者に与える刺激判定部（３５０）と、を有する覚醒装置。 an arousal determination unit (340) that determines the arousal state of a passenger of the vehicle;
An image (410) including an arousal image (440) with a blurred edge including a boundary with a background image (420) is displayed by an image display unit (400) according to the arousal state determined by the arousal determination unit. a stimulus determination unit (350) that provides the passenger with a visual stimulus that enhances the wakefulness of the passenger by presenting the passenger with a stimulus determination unit (350). 前記覚醒判定部は、前記覚醒状態を、高い順に、第１レベル、第２レベル、および、第３レベルに判定しており、
前記刺激判定部は、
前記覚醒判定部によって前記覚醒状態が前記第１レベルと判定された場合、前記画像表示部によって前記覚醒画像を前記画像に表示させず、
前記覚醒判定部によって前記覚醒状態が前記第２レベルと判定された場合、前記画像表示部によって前記ぼかしの付加された前記覚醒画像を前記画像に表示させ、
前記覚醒判定部によって前記覚醒状態が前記第３レベルと判定された場合、前記画像表示部によって前記ぼかしの非付加の前記覚醒画像を前記画像に表示させる請求項１に記載の覚醒装置。 The arousal determination unit determines the arousal state as a first level, a second level, and a third level in descending order,
The stimulus determination unit
when the arousal determination unit determines that the arousal state is the first level, the image display unit does not display the arousal image in the image;
when the arousal determination unit determines that the arousal state is the second level, causing the image display unit to display the blurred arousal image on the image;
2. The arousal device according to claim 1, wherein, when the arousal determination unit determines that the arousal state is the third level, the image display unit displays the arousal image without the blur added on the image. 前記刺激判定部は、前記覚醒状態が前記第２レベル以上の場合、前記画像表示部によって前記ぼかしの付加された前記覚醒画像と、前記ぼかしの非付加の前記覚醒画像を前記搭乗者に交互に提示させる請求項２に記載の覚醒装置。 When the arousal state is equal to or higher than the second level, the stimulus determination unit alternately presents the arousal image to which the blur is added and the arousal image to which the blur is not added by the image display unit. 3. The awakening device according to claim 2, which is presented. 前記刺激判定部は、前記覚醒状態が前記第３レベルの場合、前記画像表示部によって、前記覚醒状態が前記第２レベルの時の前記覚醒画像の色、大きさ、形状、明度、および、彩度のうちの少なくとも１つの変化された前記覚醒画像を前記画像に表示させる請求項２または請求項３に記載の覚醒装置。 When the arousal state is the third level, the stimulus determination unit causes the image display unit to determine the color, size, shape, brightness, and saturation of the arousal image when the arousal state is the second level. 4. Arousal device according to claim 2 or claim 3, wherein the arousal image having at least one of the degrees changed is displayed on the image. 前記刺激判定部は、前記画像表示部によって前記覚醒画像を点滅表示させる請求項１～４のいずれか１項に記載の覚醒装置。 The awakening device according to any one of claims 1 to 4, wherein the stimulus determination unit blinks the awakening image by the image display unit. 前記画像には、前記車両の状態に関連する状態画像（４３０）が含まれており、
前記画像の表示領域には、前記状態画像の表示される状態表示領域と、前記覚醒画像の表示される覚醒表示領域と、が含まれる請求項１～５のいずれか１項に記載の覚醒装置。 the images include a state image (430) associated with the state of the vehicle;
6. The awakening device according to claim 1, wherein the image display area includes a state display area where the state image is displayed and an awakening display area where the awakening image is displayed. . 前記画像表示部は、前記状態画像と前記覚醒画像の色を異ならせて、前記状態画像と前記覚醒画像を表示する請求項６に記載の覚醒装置。 7. The awakening device according to claim 6, wherein the image display unit displays the state image and the awakening image with different colors for the state image and the awakening image. 前記刺激判定部は、前記画像表示部によって前記覚醒画像を前記表示領域において対称形状に表示させる請求項６または請求項７に記載の覚醒装置。 8. The awakening device according to claim 6, wherein the stimulus determination unit causes the image display unit to display the awakening image in a symmetrical shape in the display area. 前記刺激判定部は、前記車両の外部の視覚情報が閾値以上と判定すると、前記車両の外部の視覚情報が前記閾値よりも小さい場合と比べて、前記画像表示部による前記覚醒画像の表示によって前記搭乗者に提示される前記視覚刺激を強める請求項１～８のいずれか１項に記載の覚醒装置。 When the stimulus determination unit determines that the visual information outside the vehicle is equal to or greater than a threshold value, compared with the case where the visual information outside the vehicle is smaller than the threshold value, the display of the awakening image by the image display unit causes the A wake-up device according to any one of claims 1 to 8, which enhances the visual stimulus presented to the occupant.
JP2021053967A 2021-03-26 2021-03-26 awakening device Pending JP2022151067A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021053967A JP2022151067A (en) 2021-03-26 2021-03-26 awakening device
PCT/JP2022/011352 WO2022202445A1 (en) 2021-03-26 2022-03-14 Alerting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021053967A JP2022151067A (en) 2021-03-26 2021-03-26 awakening device

Publications (1)

Publication Number Publication Date
JP2022151067A true JP2022151067A (en) 2022-10-07

Family

ID=83397166

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021053967A Pending JP2022151067A (en) 2021-03-26 2021-03-26 awakening device

Country Status (2)

Country Link
JP (1) JP2022151067A (en)
WO (1) WO2022202445A1 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003317197A (en) * 2002-04-26 2003-11-07 Aisin Aw Co Ltd Alarm system
JPWO2011138855A1 (en) * 2010-05-07 2013-07-22 パナソニック株式会社 Awakening state maintaining device and awakening state maintaining method
WO2017068697A1 (en) * 2015-10-22 2017-04-27 日産自動車株式会社 Parking support information display method and parking support device
JP7205154B2 (en) * 2018-10-16 2023-01-17 トヨタ自動車株式会社 Display device

Also Published As

Publication number Publication date
WO2022202445A1 (en) 2022-09-29

Similar Documents

Publication Publication Date Title
JP4896002B2 (en) Electronic display medium and screen display control method used for electronic display medium
JP4462231B2 (en) Auto light device for vehicle
JP5056831B2 (en) Head-up display device
JP5109750B2 (en) Driver state detection device, consciousness state detection method
JP6314435B2 (en) Driver monitoring device
US20200216095A1 (en) Vehicle driving assistance apparatus
CN111452616B (en) Information display control method and device and vehicle
US11084424B2 (en) Video image output apparatus, video image output method, and medium
JP6361318B2 (en) VEHICLE IMAGE DISPLAY DEVICE AND VEHICLE IMAGE DISPLAY METHOD
JP6662352B2 (en) Drowsy driving alarm
JP2013009825A (en) Visual confirmation load amount estimation device, drive support device and visual confirmation load amount estimation program
JP2015007933A (en) Display controller, display system, information providing method, and program
JP7233449B2 (en) Emotion estimation device and emotion estimation method
WO2022202445A1 (en) Alerting device
JP7046748B2 (en) Driver status determination device and driver status determination method
JP6658095B2 (en) Awakening maintenance device and program
JP4552747B2 (en) Vehicle display apparatus and method
JP2018136849A (en) Arousal maintaining device
JP5266812B2 (en) In-vehicle video presentation device and video presentation method
JP2017076180A (en) State determination device
JP7251466B2 (en) Condition improvement device
JP7151603B2 (en) awakening device
JP2020003704A (en) Information processing device
JP7487728B2 (en) Monitoring device, monitoring computer program, and monitoring method
JP2022012358A (en) Drowsiness sign notification system