JP2009251647A - Driver awakening device - Google Patents

Driver awakening device Download PDF

Info

Publication number
JP2009251647A
JP2009251647A JP2008094963A JP2008094963A JP2009251647A JP 2009251647 A JP2009251647 A JP 2009251647A JP 2008094963 A JP2008094963 A JP 2008094963A JP 2008094963 A JP2008094963 A JP 2008094963A JP 2009251647 A JP2009251647 A JP 2009251647A
Authority
JP
Japan
Prior art keywords
driver
awakening
state
water vapor
wake
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008094963A
Other languages
Japanese (ja)
Inventor
Takeshi Sasuga
岳史 流石
Takashi Hattori
貴司 服部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2008094963A priority Critical patent/JP2009251647A/en
Publication of JP2009251647A publication Critical patent/JP2009251647A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Processing (AREA)
  • Emergency Alarm Devices (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a driver awakening device for improving the level of awakening of a driver by promoting the active operation of the driver to remove any water drop attached to a windshield or the like. <P>SOLUTION: This driver awakening device for awakening a driver according to the state of a driver who drives a vehicle includes: a driver information acquisition means for acquiring information related with the operation of the driver; a driver's state detection means for detecting such a state that the driver does not concentrate on driving based on the information acquired by the driver information acquisition means; and a driver awakening means for spraying water vapor to the room of the vehicle when the state is detected by the driver state detection means. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、運転者が所定状態となった場合に、フロントガラスに向かって水蒸気を噴霧することによって、当該運転者を覚醒させる技術に関する。   The present invention relates to a technique for awakening a driver by spraying water vapor toward a windshield when the driver enters a predetermined state.

従来、車両の運転者が居眠りをしていると検知された場合には、警告音の発報、シートの振動、ステアリングの振動等の制御を実施して、運転者の注意を喚起し、覚醒を促すことが行われている(特許文献1)。
特開2005−62911号公報
Conventionally, when it is detected that the driver of the vehicle is falling asleep, control of warning sound, seat vibration, steering vibration, etc. is performed to alert the driver and awaken Is promoted (Patent Document 1).
JP 2005-62911 A

しかしながら、上記技術においては、運転者に対し直接的に又は間接的に刺激を与えて、注意及び覚醒を促すことを目的としているが、当該刺激が繰り返されるうちに慣れが生じ、その効果が薄れてしまうという問題点があった。   However, in the above technique, the purpose is to give a driver a stimulus directly or indirectly to promote attention and arousal. There was a problem that it was.

そこで、本発明では、上記問題点に鑑み、フロントガラス等に付着した水滴を取り除くという運転者の能動的作業を促し、当該運転者の覚醒度を向上させる運転者覚醒装置を提供することを目的とする。   Therefore, in view of the above problems, the present invention aims to provide a driver awakening device that promotes the driver's active work of removing water droplets attached to the windshield and the like and improves the driver's arousal level. And

本発明に係る運転者覚醒装置では、車両を運転する運転者の状態に応じて該運転者を覚醒させる運転者覚醒装置であって、前記運転者の動作に係る情報を取得する運転者情報取得手段と、前記運転者情報取得手段により取得された前記情報に基づき、前記運転者が運転に集中していない状態を検出する運転者状態検出手段と、前記運転者状態検出手段により前記状態が検出された場合に、前記車両の室内に水蒸気を噴霧する運転者覚醒手段と、を有することを特徴とする。   The driver wake-up device according to the present invention is a driver wake-up device that wakes up the driver in accordance with the state of the driver driving the vehicle, and acquires driver information for acquiring information related to the operation of the driver. Based on the information acquired by the driver information acquisition means, a driver state detection means for detecting a state where the driver is not concentrated on driving, and the state detected by the driver state detection means And a driver awakening means for spraying water vapor into the interior of the vehicle.

また、本発明に係る運転者覚醒装置の一形態では、前記運転に集中していない状態とは、居眠り状態であることを特徴とする。   Moreover, in one form of the driver | operator awakening apparatus which concerns on this invention, the state which is not concentrating on the said driving | operation is a dozing state, It is characterized by the above-mentioned.

また、本発明に係る運転者覚醒装置の一形態では、前記運転者覚醒手段は、前記車両のフロントガラスに向かって前記水蒸気を噴霧することを特徴とする。   In one form of the driver awakening device according to the present invention, the driver awakening means sprays the water vapor toward a windshield of the vehicle.

また、本発明に係る運転者覚醒装置の一形態では、前記運転者覚醒手段は、前記運転者に向かって前記水蒸気を噴霧することを特徴とする。   Moreover, in one form of the driver wake-up device according to the present invention, the driver wake-up means sprays the water vapor toward the driver.

また、本発明に係る運転者覚醒装置の一形態では、前記運転者覚醒手段は、前記水蒸気を噴霧すると共に、警告音を発することを特徴とする。   In one form of the driver awakening device according to the present invention, the driver awakening means sprays the water vapor and emits a warning sound.

また、本発明に係る運転者覚醒装置の一形態では、前記運転者覚醒手段は、前記運転に集中していない状態のレベルに応じて、噴霧する前記水蒸気の量を変化させることを特徴とする。   In one form of the driver wake-up device according to the present invention, the driver wake-up means changes the amount of the water vapor sprayed according to the level of the state not concentrated on the drive. .

また、本発明に係る運転者覚醒装置の一形態では、前記運転者覚醒手段は、前記運転に集中していない状態のレベルに応じて、前記警告音を変更することを特徴とする。   Moreover, in one form of the driver wake-up device according to the present invention, the driver wake-up means changes the warning sound according to the level of the state not concentrated on the driving.

従って、本発明では、フロントガラス等に付着した水滴を取り除くという運転者の能動的作業を促し、当該運転者の覚醒度を向上させる運転者覚醒装置を提供することができる。   Therefore, according to the present invention, it is possible to provide a driver wake-up device that promotes the driver's active work of removing water droplets attached to the windshield and the like and improves the driver's wakefulness.

本発明では、フロントガラス等に付着した水滴を取り除くという運転者の能動的作業を促し、当該運転者の覚醒度を向上させる運転者覚醒装置を提供することができる。   In the present invention, it is possible to provide a driver wake-up device that promotes the driver's active work of removing water droplets attached to the windshield and the like and improves the driver's wakefulness.

図面を参照しながら、本発明を実施するための最良の形態について説明する。   The best mode for carrying out the present invention will be described with reference to the drawings.

(本実施の形態に係る運転者覚醒装置の動作原理)
図1を用いて、本実施の形態に係る運転者覚醒装置の動作原理を説明する。図1は、本実施の形態に係る運転者覚醒装置100の動作原理を説明する図である。
(Operation Principle of Driver Awakening Device According to this Embodiment)
The operation principle of the driver awakening device according to the present embodiment will be described with reference to FIG. FIG. 1 is a diagram for explaining the operating principle of the driver awakening device 100 according to the present embodiment.

運転者覚醒装置100は、運転者情報取得手段110、運転者状態検出手段120、覚醒方法決定手段130、運転者覚醒手段140、空調制御手段150、スピーカ制御手段160、データベース240、車載カメラ250、水蒸気噴霧器(空調装置)260、警告音・音声出力装置(スピーカ)270を有する。   The driver awakening device 100 includes a driver information acquisition unit 110, a driver state detection unit 120, a waking method determination unit 130, a driver awakening unit 140, an air conditioning control unit 150, a speaker control unit 160, a database 240, an in-vehicle camera 250, It has a water vapor sprayer (air conditioner) 260 and a warning sound / audio output device (speaker) 270.

データベース240は、運転者の居眠り状態等を検出するための画像認識処理に利用されるデータベースである。   The database 240 is a database used for image recognition processing for detecting a driver's sleep state.

また、図2は、車載カメラ250による運転者の撮影を説明する図である。車載カメラ250は、図2に示すように、運転者の近傍に設置され、運転者の頭部を撮影する装置である。   FIG. 2 is a diagram for explaining the photographing of the driver by the in-vehicle camera 250. As shown in FIG. 2, the in-vehicle camera 250 is a device that is installed in the vicinity of the driver and photographs the head of the driver.

水蒸気噴霧器260は、水蒸気を目標物に対して、吹き掛ける装置である。   The water vapor sprayer 260 is a device that sprays water vapor onto a target.

警告音・音声出力装置270は、チャイムやブザー等の警告音、運転者に対する指示・警告等の音声を出力する装置である。   The warning sound / sound output device 270 is a device that outputs a warning sound such as a chime or a buzzer and a sound such as an instruction / warning for the driver.

運転者情報取得手段110は、運転者の動作に係る情報を取得する。当該運転者の動作に係る情報は、車載カメラ250で撮影された運転者の画像データである。   The driver information acquisition unit 110 acquires information related to the driver's operation. The information related to the driver's operation is image data of the driver taken by the in-vehicle camera 250.

また、当該運転者の動作に係る情報は、車載カメラ250からではなく、運転者の動作を検知する動作検知センサから取得する形態であっても良い。   Moreover, the form which acquires the information which concerns on the said driver | operator's operation | movement from the operation | movement detection sensor which detects not the vehicle-mounted camera 250 but a driver | operator's operation | movement may be sufficient.

ここで、運転者の動作とは、運転者の頭部、顔の方向、視線の方向、肩等の動きであり、また、瞬きのような微少な動作であっても良い。   Here, the operation of the driver is a movement of the driver's head, face direction, line of sight, shoulders, etc., and may be a minute operation such as blinking.

例えば、運転者状態検出手段120は、運転者情報取得手段110により取得された運転者の動作に係る情報に基づき、当該運転者が運転に集中していない状態を検出する。   For example, the driver state detection unit 120 detects a state in which the driver is not concentrated on driving based on information related to the driver's operation acquired by the driver information acquisition unit 110.

ここで、運転者が運転に集中していない状態とは、居眠り状態、又は意識レベルが低いままで脇見をしている状態等、正常な運転状態ではない状態である。   Here, the state where the driver is not concentrating on driving is a state where the driver is not in a normal driving state, such as a dozing state or a state of looking aside with a low level of consciousness.

運転者状態検出手段120は、車載カメラ250が取得した運転者の頭部の画像に対する画像認識処理を行い、運転者の視線の方向、顔の向き、及び頭部の位置等を認識する。   The driver state detection unit 120 performs image recognition processing on the image of the driver's head acquired by the in-vehicle camera 250, and recognizes the driver's line-of-sight direction, face orientation, head position, and the like.

具体的には、運転者状態検出手段120は、運転者の頭部の画像データとデータベース240の基準画像データとを比較し、頭部がどれだけ傾いているか、または、どれだけ横方向に振り向いているか等の運転の動作情報を生成する。   Specifically, the driver state detection means 120 compares the image data of the driver's head with the reference image data in the database 240, and how much the head is tilted or how much it is turned sideways. The operation information of the driving is generated.

次に、運転者状態検出手段120は、生成した運転の動作情報に基づいて、運転者の状態を判定する。例えば、運転者の状態が、居眠り状態や意識レベルが低いままで脇見をしている状態等であるか否かを判定する。   Next, the driver state detection unit 120 determines the state of the driver based on the generated driving operation information. For example, it is determined whether or not the driver's state is a dozing state or a state of looking aside while the level of consciousness is low.

また、単に、居眠り状態や意識レベルが低いままで脇見をしている状態等であるか否かを検出するだけでなく、当該状態の軽重の度合いについても判定する。例えば、軽度の居眠り状態なのか、重度の居眠り状態なのかについても判定する。ここで、前述の重度や軽度の区分は幾つに区分されても良い。   In addition, it is determined not only whether the patient is in a dozing state or in a state of looking aside while the level of consciousness is low, but also the degree of lightness of the state is determined. For example, it is also determined whether the patient is in a mild doze state or a severe doze state. Here, the above-mentioned severe and mild divisions may be divided into any number.

覚醒方法決定手段130は、運転者状態検出手段120により検出された運転者の状態に応じて、当該運転者を覚醒するための方法、手段を決定する。例えば、運転者が重度の居眠り状態にあると検出された場合に、覚醒方法決定手段130は、非常に強い刺激を運転者に与えることを決定する。一方、運転者が軽度の居眠り状態にあると検出された場合に、覚醒方法決定手段130は、運転者に与える刺激は弱いものに止める決定をする。   The awakening method determination unit 130 determines a method and means for waking up the driver according to the driver's state detected by the driver state detection unit 120. For example, when it is detected that the driver is in a severe doze state, the awakening method determination unit 130 determines to give a very strong stimulus to the driver. On the other hand, when it is detected that the driver is in a mild dozing state, the awakening method determination means 130 determines to stop the stimulus given to the driver to be weak.

また、覚醒方法決定手段130は、当該運転者を覚醒するために決定される方法、手段は、1つであっても良く、複数であっても良い。   The awakening method determination means 130 may be one or more methods and means that are determined to wake up the driver.

ここで、図3は、運転者の居眠り状態のレベルと、当該居眠り状態のレベルによって定まる動作内容の例を説明する図である。   Here, FIG. 3 is a diagram for explaining an example of the operation content determined by the level of the driver's sleep state and the level of the sleep state.

覚醒方法決定手段130は、図3に示すように、運転者状態検出手段120により検出された居眠り状態のレベルによって、覚醒手段を決定する。図3に示す例では、レベル1が最も軽度な居眠り状態のレベルであり、レベルが高まるに連れて重度の居眠り状態となる。   As shown in FIG. 3, the awakening method determination means 130 determines the awakening means according to the level of the dozing state detected by the driver state detection means 120. In the example shown in FIG. 3, level 1 is the level of the lightest dozing state, and the level becomes higher as the level increases.

また、図3に示す例では、居眠り状態のレベル1(最軽度の居眠り状態)に対応する覚醒手段は、噴霧される水蒸気量が少なく、警告音も小さい。一方、居眠り状態のレベル5(最重度の居眠り状態)に対応する覚醒手段は、噴霧される水蒸気量が多く、音声による警告が行われる。   Moreover, in the example shown in FIG. 3, the awakening means corresponding to the level 1 of the dozing state (the lightest dozing state) has a small amount of water vapor sprayed and a low warning sound. On the other hand, the awakening means corresponding to level 5 of the dozing state (the most severe dozing state) has a large amount of water vapor to be sprayed, and a voice warning is given.

運転者覚醒手段140は、覚醒方法決定手段130により決定された方法、手段に従って、運転者を覚醒させる。   The driver awakening means 140 awakens the driver according to the method and means determined by the awakening method determination means 130.

具体的には、運転者覚醒手段140は、後述する空調制御手段150に対し、水蒸気噴霧器260を用いて、運転者が運転する車両の室内に水蒸気を噴霧させる制御を実施するように要求をする。また、運転者覚醒手段140は、後述するスピーカ制御手段160に対し、警告音・音声出力装置270を用いて、警告音又は音声を出力させる制御を実施するように要求をする。   Specifically, the driver awakening means 140 requests the air conditioning control means 150 (described later) to perform control for spraying water vapor into the interior of the vehicle driven by the driver using the water vapor sprayer 260. . In addition, the driver awakening unit 140 requests the speaker control unit 160 (to be described later) to perform control to output a warning sound or sound using the warning sound / sound output device 270.

空調制御手段150は、運転者覚醒手段140による要求に基づき、水蒸気噴霧器260を制御し、車室内に水蒸気を噴霧させる。当該水蒸気は、車室内のフロントガラスに向かって噴霧される。また、当該水蒸気は、当該フロントガラスの運転者側に集中して噴霧される形態としても良い。また、当該水蒸気は、運転者に対して、噴霧される形態としても良い。   The air conditioning control means 150 controls the water vapor sprayer 260 based on the request from the driver awakening means 140 to spray water vapor into the passenger compartment. The water vapor is sprayed toward the windshield in the passenger compartment. Further, the water vapor may be sprayed in a concentrated manner on the driver side of the windshield. Moreover, the said water vapor | steam is good also as a form sprayed with respect to a driver | operator.

スピーカ制御手段140は、運転者覚醒手段140による要求に基づき、警告音・音声出力装置270を制御し、警告音又は音声を出力させる。   The speaker control unit 140 controls the warning sound / sound output device 270 based on the request from the driver awakening unit 140 to output a warning sound or sound.

ここで、当該音声は、運転者が居眠り状態又は脇見をしている状態であることを報知するための音声である。また、当該音声は、運転者に運転する車両を停止させるように誘導する内容の音声であっても良い。   Here, the said audio | voice is an audio | voice for alert | reporting that a driver | operator is a state of dozing or looking aside. In addition, the voice may be a voice that guides the driver to stop the driving vehicle.

以下で、運転者覚醒装置100の処理動作の流れについて説明する。   Hereinafter, the flow of the processing operation of the driver awakening device 100 will be described.

はじめに、運転者情報取得手段110が、車載カメラ250が撮影した運転者の頭部の画像データを取得する。   First, the driver information acquisition unit 110 acquires image data of the driver's head taken by the in-vehicle camera 250.

次に、運転者状態検出手段120が、当該画像データに対し画像認識処理を実施し、運転者の視線の方向、顔の向き、及び頭部の位置等を認識する。続いて、運転者状態検出手段120が、当該認識した運転者頭部の状態に基づき、運転者が居眠り状態又は意識レベルが低いままで脇見をしている状態にあるか否かを判定する。   Next, the driver state detection unit 120 performs image recognition processing on the image data, and recognizes the driver's line-of-sight direction, face direction, head position, and the like. Subsequently, based on the recognized state of the driver's head, the driver state detection unit 120 determines whether or not the driver is asleep or is looking aside with a low level of consciousness.

そして、覚醒方法決定手段130が、運転者状態検出手段120により検出された運転者の状態に係る情報、つまり、居眠り状態又は脇見をしている状態等の情報に基づき、運転者を覚醒させる方法を決定する。   Then, the awakening method determination unit 130 wakes up the driver based on information related to the driver's state detected by the driver state detection unit 120, that is, information such as a dozing state or a state of looking aside. To decide.

その次に、運転者覚醒手段140が、各制御手段150、160に対し、覚醒方法決定手段130が決定した方法・手段に従って、水蒸気噴霧器260と警告音・音声出力装置270とを制御するよう指示を通知する。   Next, the driver awakening means 140 instructs each of the control means 150 and 160 to control the water vapor sprayer 260 and the warning sound / sound output device 270 according to the method / means determined by the awakening method determination means 130. To be notified.

そして、各制御手段150、160が、上記指示に従って、水蒸気噴霧器260と警告音・音声出力装置270とを制御し、水蒸気を車室内に噴霧させ、警告音等を出力させる。   Then, each control means 150, 160 controls the water vapor sprayer 260 and the warning sound / sound output device 270 according to the above instructions to spray water vapor into the passenger compartment and output a warning sound or the like.

上記のような処理を行うことで、居眠り状態にある運転者に、フロントガラスに付着した水滴を取り除くという能動的作業を促し、当該運転者の覚醒度を向上させることができる。また、運転者に対し、さらに音による警告を行うことで、運転者の覚醒度を一層向上させることができる。
上記のように、運転者に能動的作業を行わせるため、運転者の慣れによる注意喚起効果の低減も小さい。
By performing the processing as described above, it is possible to prompt the driver who is in a dozing state to perform an active work of removing water droplets attached to the windshield, and to improve the driver's arousal level. Further, the driver's arousal level can be further improved by further warning the driver with sound.
As described above, since the driver performs active work, the reduction in the alerting effect due to the driver's familiarity is small.

(本実施の形態に係る運転者覚醒装置のハードウェア構成)
図4を用いて、本実施の形態に係る運転者覚醒装置のハードウェア構成を説明する。図4は、本実施の形態に係る運転者覚醒装置100のハードウェア構成の一例である。
(Hardware Configuration of Driver Awakening Device According to this Embodiment)
The hardware configuration of the driver awakening device according to the present embodiment will be described with reference to FIG. FIG. 4 is an example of a hardware configuration of the driver awakening apparatus 100 according to the present embodiment.

運転者覚醒装置100は、CPU(Central Processing Unit)210、ROM(Read−Only Memory)220、RAM(Random Access Memory)230、HDD(Hard Disc Drive)240、車載カメラ250、空調装置260、スピーカ270、表示装置280を有する。   The driver awakening device 100 includes a CPU (Central Processing Unit) 210, a ROM (Read-Only Memory) 220, a RAM (Random Access Memory) 230, a HDD (Hard Disc Drive) 240, an in-vehicle camera 250, an air conditioner 260, and a speaker 270. And a display device 280.

CPU210は、ROM220に記憶されたプログラムを実行する装置で、RAM230に展開(ロード)されたデータを、プログラムの命令に従って演算処理し、運転者覚醒装置100の全体を制御する。   The CPU 210 is a device that executes a program stored in the ROM 220 and performs arithmetic processing on the data expanded (loaded) in the RAM 230 in accordance with instructions of the program to control the entire driver awakening device 100.

ROM220は、CPU210が実行するプログラムやデータを記憶している。   The ROM 220 stores programs executed by the CPU 210 and data.

RAM230は、CPU210でROM220に記憶されたプログラムを実行する際に、実行するプログラムやデータが展開(ロード)され、演算の間、演算データを一時的に保持する。   When the CPU 210 executes a program stored in the ROM 220 by the CPU 210, the program or data to be executed is expanded (loaded), and temporarily holds the operation data during the operation.

HDD240は、基本ソフトウェアであるOS(Operating System)、本実施の形態に係るアプリケーションプログラムなどを、関連するデータとともに記憶する装置である。本実施の形態でHDD240は、運転者状態検出手段120により運転者頭部の画像認識処理を行う場合に、車載カメラ250が撮影した運転者頭部の画像データと比較するための基本画像データを記憶するデータベースとしても利用される。   The HDD 240 is a device that stores an OS (Operating System) that is basic software, an application program according to the present embodiment, and the like together with related data. In the present embodiment, when the driver state detection unit 120 performs the driver head image recognition process, the HDD 240 stores basic image data for comparison with the driver head image data captured by the in-vehicle camera 250. It is also used as a database to store.

車載カメラ250は、被写体の画像を取得するための装置である。ここで、当該取得される画像は静止画像であっても、動画像であっても良い。本実施の形態で車載カメラ250は、図2に示すように、運転者の近傍に設置され、運転者の頭部を撮影する。   The in-vehicle camera 250 is a device for acquiring a subject image. Here, the acquired image may be a still image or a moving image. In the present embodiment, as shown in FIG. 2, the in-vehicle camera 250 is installed in the vicinity of the driver and photographs the head of the driver.

空調装置260は、車室内の空気の調整を行う装置である。本実施の形態で空調装置260は、当該空調装置260の吹き出し口から水蒸気を車室内に噴霧する。当該水蒸気は、フロントガラスに対して噴霧される。   The air conditioner 260 is a device that adjusts the air in the passenger compartment. In the present embodiment, the air conditioner 260 sprays water vapor into the passenger compartment from the air outlet of the air conditioner 260. The water vapor is sprayed on the windshield.

スピーカ270は、電気信号を物理振動に変えて、音声等の音を生み出す装置である。本実施の形態でスピーカ270は、警告音や運転者に警告するための音声を出力する。   The speaker 270 is a device that generates sound such as sound by converting an electrical signal into physical vibration. In this embodiment, the speaker 270 outputs a warning sound or a sound for warning the driver.

表示装置280は、ハードキーによるキースイッチとLCD(Liquid Crystal Display)とから構成され、運転者覚醒装置100が有する機能をユーザが利用する際や、各種設定を行う際などのユーザインタフェースとして機能する装置である。   The display device 280 includes a key switch using hard keys and an LCD (Liquid Crystal Display), and functions as a user interface when the user uses the functions of the driver awakening device 100 or when performing various settings. Device.

以下で、運転者覚醒装置100の処理の流れを、各手段が使用するハードウェアを含めて説明する。ただし、各手段は、CPU210が、ROM220又はHDD240に記憶された各手段に対応するプログラムを実行することにより実現されるため、この点に関しては説明を省略する。   Hereinafter, the processing flow of the driver awakening device 100 will be described including the hardware used by each means. However, since each means is realized by the CPU 210 executing a program corresponding to each means stored in the ROM 220 or the HDD 240, description thereof will be omitted.

はじめに、運転者情報取得手段110が、車載カメラ250が撮影した運転者の頭部の画像データを取得する。   First, the driver information acquisition unit 110 acquires image data of the driver's head taken by the in-vehicle camera 250.

次に、運転者状態検出手段120が、当該画像データとHDD240に記憶した基本画像データとを比較して、運転者の視線の方向、顔の向き、及び頭部の位置等を認識する。続いて、運転者状態検出手段120が、当該認識した運転者頭部の状態に基づき、運転者が居眠り状態又は意識レベルが低いままで脇見をしている状態にあるか否かを判定する。   Next, the driver state detection unit 120 compares the image data with the basic image data stored in the HDD 240 to recognize the driver's line-of-sight direction, face direction, head position, and the like. Subsequently, based on the recognized state of the driver's head, the driver state detection unit 120 determines whether or not the driver is asleep or is looking aside with a low level of consciousness.

そして、覚醒方法決定手段130が、運転者状態検出手段120により検出された運転者の居眠り状態等の情報と、HDD240に記憶する図3に示すような居眠り状態のレベルと覚醒手段の対応表とに基づき、運転者を覚醒させる方法を決定する。   Then, the awakening method determination means 130 includes information such as the driver's drowsiness state detected by the driver state detection means 120, and a correspondence table between the levels of the drowsiness state and the awakening means as shown in FIG. 3 stored in the HDD 240. To determine how to wake the driver.

その次に、運転者覚醒手段140が、空調制御手段150又はスピーカ制御手段160に対し、覚醒方法決定手段130が決定した方法、手段に従って、空調装置260とスピーカ270とを制御するよう指示を通知する。   Next, the driver awakening means 140 notifies the air conditioning control means 150 or the speaker control means 160 to instruct to control the air conditioner 260 and the speaker 270 according to the method and means determined by the awakening method determination means 130. To do.

そして、空調制御手段150又はスピーカ制御手段160が、上記指示に従って、空調装置260とスピーカ270とを制御し、水蒸気を車室内に噴霧させ、警告音等を出力させる。   And the air-conditioning control means 150 or the speaker control means 160 controls the air conditioner 260 and the speaker 270 according to the said instruction | indication, sprays water vapor | steam in a vehicle interior, and outputs a warning sound etc.

(本実施の形態に係る運転者覚醒装置の処理例)
図5を用いて、本実施の形態に係る運転者覚醒装置の処理例について説明する。図5は、本実施の形態に係る運転者覚醒装置100の処理例を示すフローチャートである。
(Processing example of driver awakening device according to the present embodiment)
A processing example of the driver awakening device according to the present embodiment will be described with reference to FIG. FIG. 5 is a flowchart showing a processing example of the driver awakening apparatus 100 according to the present embodiment.

S1で運転者覚醒装置100は処理を開始する。   In S1, the driver awakening device 100 starts processing.

S2で車載カメラ250が、運転者の頭部を撮影し、画像データを出力する。   In S2, the in-vehicle camera 250 images the driver's head and outputs image data.

S3で運転者情報取得手段110が、車載カメラ250が撮影した運転者頭部の画像データを取得する。   In S3, the driver information acquisition unit 110 acquires image data of the driver's head taken by the in-vehicle camera 250.

S4で運転者状態検出手段120が、運転者情報取得手段110により取得された画像データと、HDD240に記憶する基本画像データとを比較し、運転者の視線の方向、顔の向き、頭の位置を検出する。   In S4, the driver state detection unit 120 compares the image data acquired by the driver information acquisition unit 110 with the basic image data stored in the HDD 240, and the driver's line-of-sight direction, face direction, and head position. Is detected.

S5で運転者状態検出手段120が、S4で検出した運転者の視線の方向、顔の向き、頭の位置に係る情報に基づき、運転者の居眠り状態を検出・判定する。   In S5, the driver state detection unit 120 detects and determines the driver's dozing state based on information relating to the driver's line-of-sight direction, face direction, and head position detected in S4.

S6で運転者状態検出手段120が、運転者は居眠り状態にあると判定した場合(S6でYesの場合)、S7で覚醒方法決定手段130が、運転者を覚醒させる方法・手段を決定する。   If the driver state detection unit 120 determines in S6 that the driver is in a doze state (Yes in S6), the awakening method determination unit 130 determines a method / means for waking the driver in S7.

ここで、運転者状態検出手段120は、運転者の居眠り状態を検出した場合、その居眠り度合いの軽重まで検出する。そして、運転者状態検出手段120は、図3の左列に示すように、居眠り度合いの軽重により、居眠り状態のレベル1からレベル5を区別して検出する。   Here, when the driver state detection unit 120 detects the driver's drowsiness state, the driver state detection unit 120 detects the lightness of the degree of drowsiness. Then, as shown in the left column of FIG. 3, the driver state detection unit 120 detects level 1 to level 5 of the dozing state by distinguishing the dozing level based on the lightness of the dozing level.

そして、S7で覚醒方法決定手段130は、運転者状態検出手段120の検出した居眠り状態のレベルに応じて、図3の右列に示す覚醒手段を決定する。例えば、運転者状態検出手段120が居眠り状態のレベル1と検出した場合、覚醒方法決定手段130は覚醒手段を「水蒸気量:少、警告音:小」と決定する。一方、運転者状態検出手段120が居眠り状態のレベル5と検出した場合、覚醒方法決定手段130は覚醒手段を「水蒸気量:多、警告音声」と決定する。   In S7, the awakening method determination means 130 determines the awakening means shown in the right column of FIG. 3 according to the level of the dozing state detected by the driver state detection means 120. For example, when the driver state detection unit 120 detects that the level is 1 in the dozing state, the wake-up method determination unit 130 determines the wake-up unit as “water vapor amount: low, warning sound: low”. On the other hand, when the driver state detection unit 120 detects that the level is 5 in the dozing state, the wake-up method determination unit 130 determines the wake-up unit as “water vapor amount: high, warning sound”.

S6で運転者状態検出手段120が、運転者は居眠り状態にはないと判定した場合(S6でNoの場合)、運転者覚醒装置100はS9の処理に移行する。   When the driver state detection unit 120 determines in S6 that the driver is not in a dozing state (No in S6), the driver awakening device 100 proceeds to the process of S9.

S8で運転者覚醒手段140が、覚醒方法決定手段130により決定された覚醒手段を空調制御手段150、スピーカ制御手段160に実行させる。   In S8, the driver awakening means 140 causes the air conditioning control means 150 and the speaker control means 160 to execute the awakening means determined by the awakening method determination means 130.

例えば、S7で覚醒方法決定手段130が覚醒手段を「水蒸気量:少、警告音:小」と決定した場合、S8で運転者覚醒手段140は、空調制御手段150に対し、空調装置260からフロントガラスに向かって少量の水蒸気を噴霧するよう指示を行う。また、この場合、S8で運転者覚醒手段140は、スピーカ制御手段160に対し、スピーカ270から小さい音量の警告音を鳴らすよう指示を行う。   For example, when the awakening method determination means 130 determines that the awakening means is “low water vapor amount, low warning sound: low” in S7, the driver awakening means 140 in front of the air conditioning control means 150 from the air conditioner 260 to the front. Instruct the glass to spray a small amount of water vapor. In this case, in S8, the driver awakening unit 140 instructs the speaker control unit 160 to sound a low-volume warning sound from the speaker 270.

そして、S8で空調制御手段150が上記指示に従い、空調装置260からフロントガラスに向かって少量の水蒸気を噴霧するよう制御し、同時に、スピーカ制御手段160が上記指示に従い、スピーカ270を用いて小さい音量で警告音を鳴らすよう制御する。   In step S8, the air conditioning control unit 150 controls to spray a small amount of water vapor from the air conditioner 260 toward the windshield according to the above instruction. At the same time, the speaker control unit 160 follows the above instruction and uses the speaker 270 to reduce the volume. Controls to sound a warning sound.

一方、S7で覚醒方法決定手段130が覚醒手段を「水蒸気量:多、警告音声」と決定した場合、S8で運転者覚醒手段140は、空調制御手段150に対し、空調装置260からフロントガラスに向かって多量の水蒸気を噴霧するよう指示を行う。また、この場合、S8で運転者覚醒手段140は、スピーカ制御手段160に対し、スピーカ270から大きな音声で警告を行うよう指示を行う。   On the other hand, when the awakening method determination means 130 determines that the awakening means is “water vapor amount: high, warning sound” in S7, the driver awakening means 140 sends the air conditioning control means 150 to the windshield from the air conditioning control means 150 in S8. Instruct to spray a large amount of water vapor. In this case, the driver awakening unit 140 instructs the speaker control unit 160 to issue a warning with a loud sound from the speaker 270 in S8.

そして、S8で空調制御手段150が上記指示に従い、空調装置260からフロントガラスに向かって多量の水蒸気を噴霧するよう制御し、同時に、スピーカ制御手段160が上記指示に従い、スピーカ270を用いて大きな音量で警告音声を出力するよう制御する。   In step S8, the air conditioning control unit 150 controls to spray a large amount of water vapor from the air conditioner 260 toward the windshield according to the above instruction. At the same time, the speaker control unit 160 follows the above instruction and uses the speaker 270 to increase the volume. Control to output warning sound.

S9で運転者覚醒装置100が処理終了命令を受信した場合(S9でYesの場合)、S10で運転者覚醒装置100は処理を終了する。   If the driver awakening device 100 receives a process end command in S9 (Yes in S9), the driver awakening device 100 ends the process in S10.

S9で運転者覚醒装置100が処理終了命令を受信しない場合(S9でNoの場合)、S2で運転者覚醒装置100は待機する。   If the driver awakening device 100 does not receive the processing end command in S9 (No in S9), the driver awakening device 100 waits in S2.

(総括)
本発明では、運転者が居眠り状態にある場合、空調装置を利用して、フロントガラスに水蒸気を吹き付ける処理を行う。こうすることによって、居眠り状態にある運転者に、フロントガラスに付着した水滴を取り除くという能動的作業を促し、当該運転者の覚醒度を向上させる。
(Summary)
In this invention, when a driver | operator is in a dozing state, the process which sprays water vapor | steam on a windshield using an air conditioner is performed. By doing so, the driver who is in a dozing state is encouraged to perform an active work of removing water droplets attached to the windshield, and the driver's arousal level is improved.

上記のように運転者は能動的に作業を行う必要があるため、運転者の慣れによる注意喚起効果の低減は小さい。   Since the driver needs to work actively as described above, the reduction in the alerting effect due to the driver's familiarity is small.

また、居眠り状態にある運転者に対して、フロントガラスへの水蒸気の噴霧と合わせて、音による警告を行うことで、運転者の覚醒度を一層向上させる。   In addition, the driver's arousal level is further improved by giving a warning by sound to the driver in a dozing state together with the spray of water vapor on the windshield.

以上、本発明の実施の形態について詳述したが、本発明は係る特定の実施の形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲において、種々の変形・変更が可能である。   Although the embodiment of the present invention has been described in detail above, the present invention is not limited to the specific embodiment, and various modifications are possible within the scope of the gist of the present invention described in the claims.・ Change is possible.

本実施の形態に係る運転者覚醒装置の動作原理を示す図である。It is a figure which shows the principle of operation of the driver | operator awakening apparatus which concerns on this Embodiment. 本実施の形態に係る車載カメラによる運転者の撮影を説明する図である。It is a figure explaining a driver | operator's imaging | photography with the vehicle-mounted camera which concerns on this Embodiment. 本実施の形態に係る運転者の居眠り状態のレベルと、居眠り状態のレベルによって定まる動作内容の例を説明する図である。It is a figure explaining the example of the operation content defined by the level of a driver's dozing state and the level of a dozing state concerning this embodiment. 本実施の形態に係る運転者覚醒装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the driver | operator awakening apparatus which concerns on this Embodiment. 本実施の形態に係る運転者覚醒装置の処理例を示すフローチャートである。It is a flowchart which shows the process example of the driver | operator awakening apparatus which concerns on this Embodiment.

符号の説明Explanation of symbols

100 運転者覚醒装置
110 運転者情報取得手段
120 運転者状態検出手段
130 覚醒方法決定手段
140 運転者覚醒手段
150 空調制御手段
160 スピーカ制御手段
210 CPU
220 ROM
230 RAM
240 HDD
250 車載カメラ
260 空調装置(水蒸気噴霧器)
270 スピーカ(警告音・音声出力装置)
280 表示装置
100 Driver Awakening Device 110 Driver Information Acquisition Unit 120 Driver State Detection Unit 130 Awakening Method Determination Unit 140 Driver Awakening Unit 150 Air Conditioning Control Unit 160 Speaker Control Unit 210 CPU
220 ROM
230 RAM
240 HDD
250 On-vehicle camera 260 Air conditioner (water vapor sprayer)
270 Speaker (warning sound / audio output device)
280 display device

Claims (6)

車両を運転する運転者の状態に応じて該運転者を覚醒させる運転者覚醒装置であって、
前記運転者の動作に係る情報を取得する運転者情報取得手段と、
前記運転者情報取得手段により取得された前記情報に基づき、前記運転者が運転に集中していない状態を検出する運転者状態検出手段と、
前記運転者状態検出手段により前記状態が検出された場合に、前記車両の室内に水蒸気を噴霧する運転者覚醒手段と、を有することを特徴とする運転者覚醒装置。
A driver awakening device that awakens the driver according to the state of the driver driving the vehicle,
Driver information acquisition means for acquiring information related to the operation of the driver;
Based on the information acquired by the driver information acquisition means, a driver state detection means for detecting a state in which the driver is not concentrated on driving;
A driver wake-up device comprising: driver wake-up means for spraying water vapor into the vehicle interior when the state is detected by the driver state detection means.
前記運転に集中していない状態とは、居眠り状態であることを特徴とする請求項1に記載の運転者覚醒装置。   The driver wake-up device according to claim 1, wherein the state not concentrated on driving is a dozing state. 前記運転者覚醒手段は、前記車両のフロントガラスに向かって前記水蒸気を噴霧することを特徴とする請求項1又は2に記載の運転者覚醒装置。   The driver awakening device according to claim 1, wherein the driver awakening means sprays the water vapor toward a windshield of the vehicle. 前記運転者覚醒手段は、前記水蒸気を噴霧すると共に、警告音を発することを特徴とする請求項1乃至3のいずれか一に記載の運転者覚醒装置。   The driver awakening device according to any one of claims 1 to 3, wherein the driver awakening means sprays the water vapor and emits a warning sound. 前記運転者覚醒手段は、前記運転に集中していない状態のレベルに応じて、噴霧する前記水蒸気の量を変化させることを特徴とする請求項1乃至4のいずれか一に記載の運転者覚醒装置。   5. The driver awakening unit according to claim 1, wherein the driver awakening unit changes an amount of the water vapor to be sprayed according to a level of a state where the driver is not concentrated on the driving. apparatus. 前記運転者覚醒手段は、前記運転に集中していない状態のレベルに応じて、前記警告音を変更することを特徴とする請求項1乃至5のいずれか一に記載の運転者覚醒装置。   The driver wake-up device according to any one of claims 1 to 5, wherein the driver wake-up means changes the warning sound according to a level in a state where the driver is not concentrated on the drive.
JP2008094963A 2008-04-01 2008-04-01 Driver awakening device Pending JP2009251647A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008094963A JP2009251647A (en) 2008-04-01 2008-04-01 Driver awakening device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008094963A JP2009251647A (en) 2008-04-01 2008-04-01 Driver awakening device

Publications (1)

Publication Number Publication Date
JP2009251647A true JP2009251647A (en) 2009-10-29

Family

ID=41312346

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008094963A Pending JP2009251647A (en) 2008-04-01 2008-04-01 Driver awakening device

Country Status (1)

Country Link
JP (1) JP2009251647A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015133050A (en) * 2014-01-15 2015-07-23 みこらった株式会社 Automatic driving vehicle
JP2017059043A (en) * 2015-09-17 2017-03-23 トヨタ自動車株式会社 Awakening control system for vehicle
WO2019098091A1 (en) * 2017-11-14 2019-05-23 アイシン精機株式会社 On-board warning device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015133050A (en) * 2014-01-15 2015-07-23 みこらった株式会社 Automatic driving vehicle
JP2017059043A (en) * 2015-09-17 2017-03-23 トヨタ自動車株式会社 Awakening control system for vehicle
WO2019098091A1 (en) * 2017-11-14 2019-05-23 アイシン精機株式会社 On-board warning device
JP2019091205A (en) * 2017-11-14 2019-06-13 アイシン精機株式会社 On-vehicle alarm device
JP7073682B2 (en) 2017-11-14 2022-05-24 株式会社アイシン In-vehicle alarm device

Similar Documents

Publication Publication Date Title
JP4973551B2 (en) Driver status determination device
JP6314435B2 (en) Driver monitoring device
JP5830944B2 (en) Vehicle driving support apparatus and vehicle driving support method
JP2008146481A (en) Apparatus for assisting driving
TWI459333B (en) An Attractive Force Detection Device and Its Method for Interactive Voice
JP7047821B2 (en) Driving support device
US20130188838A1 (en) Attention detection method based on driver&#39;s reflex actions
JP2010020618A (en) Driver awakener
JP2009251647A (en) Driver awakening device
JP5447335B2 (en) Notification system
JP2014229123A (en) Awakening maintenance support apparatus
JP2019021154A (en) Electronic device with awakening function, awakening program and awakening method
JPH0911773A (en) Vehicle running condition detecting device and dozing driving warning device
JP2008102777A (en) Driver information presentation apparatus
JP6946789B2 (en) Awakening maintenance device
JP2005087284A (en) Wakefulness determining device and wakefulness determining method
JP2009090876A (en) Nap prevention device
JP2019008427A (en) Wakefulness maintaining device
JPH0475560B2 (en)
JP2009120013A (en) Equipment control device for vehicle
JP2009277145A (en) Drowsiness awakening device
JP2010026807A (en) Alarm display control apparatus for vehicle
US11299010B2 (en) Alertness maintenance apparatus
JP2009241860A (en) Method of reducing current consumption in operation device for vehicle
JP2009067146A (en) Doze preventing device for hybrid vehicle