WO2019069999A1 - 眠気度予測装置及び眠気度予測方法 - Google Patents

眠気度予測装置及び眠気度予測方法 Download PDF

Info

Publication number
WO2019069999A1
WO2019069999A1 PCT/JP2018/037096 JP2018037096W WO2019069999A1 WO 2019069999 A1 WO2019069999 A1 WO 2019069999A1 JP 2018037096 W JP2018037096 W JP 2018037096W WO 2019069999 A1 WO2019069999 A1 WO 2019069999A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
degree
sleepiness
vehicle
information
Prior art date
Application number
PCT/JP2018/037096
Other languages
English (en)
French (fr)
Inventor
佐藤 晴彦
弘雅 三浦
双 呉
毛利 宏
壮椰 青木
Original Assignee
カルソニックカンセイ株式会社
国立大学法人東京農工大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by カルソニックカンセイ株式会社, 国立大学法人東京農工大学 filed Critical カルソニックカンセイ株式会社
Priority to US16/753,381 priority Critical patent/US11040720B2/en
Publication of WO2019069999A1 publication Critical patent/WO2019069999A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0097Predicting future conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/30Driving style
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/10Historical data
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B31/00Predictive alarm systems characterised by extrapolation or other computation using updated historic data

Definitions

  • the present invention relates to a sleepiness level prediction apparatus and a sleepiness level prediction method.
  • the detection device disclosed in Patent Document 1 determines the opening and closing of the driver's eyes by detecting the degree of opening and closing indicating the degree of opening of the driver's eyes and the direction of the driver's line of sight.
  • the driver needs to maintain a certain degree or more of awakening while driving. Even in the case of automatic driving, for example, when switching from automatic driving to manual driving, it is necessary for the driver to maintain the awake state to such an extent that manual driving can be performed.
  • an external stimulus such as a temperature or an olfactory stimulus is given to the driver.
  • the object of the present invention made in view of the above problems is to provide a sleepiness level prediction device and a sleepiness level prediction method capable of accurately predicting the driver's sleepiness level in advance with high accuracy.
  • a sleepiness degree predicting apparatus is A vehicle information acquisition unit that acquires information on a vehicle; A driver information acquisition unit for acquiring information on a driver; Based on the acquired information on the vehicle, the amount of stimulation provided to the driver is calculated based on the current driving load of the driver and the driving load after a predetermined time, and the change in the calculated amount of stimulation is calculated.
  • the driver's current drowsiness degree calculated on the basis of the acquired information on the driver, and calculating the A control unit that predicts the drowsiness level after the predetermined time of the driver based on the degree of freedom; Equipped with
  • a sleepiness degree prediction method is Obtaining information about the vehicle; Obtaining information about the driver; Based on the acquired information on the vehicle, the amount of stimulation provided to the driver is calculated based on the current driving load of the driver and the driving load after a predetermined time, and the change in the calculated amount of stimulation is calculated. Calculating a degree of non-acclimation indicating the degree to which the driver is not accustomed to driving; Predicting the drowsiness level after a predetermined time of the driver based on the current drowsiness level of the driver estimated on the basis of the acquired information on the driver and the non-accustomed degree of the driver calculated; including.
  • the sleepiness degree prediction device and the sleepiness degree prediction method according to the embodiment of the present invention it is possible to predict the sleepiness degree of the driver with high accuracy in advance.
  • FIG. 6 is a diagram showing an example of a time change of the degree of non-acclimation calculated based on Formula 1. It is a figure which shows an example of the time change of the estimated value of sleepiness. It is a figure which shows an example of the data regarding a transition probability. It is the figure which showed the value of the transition probability for every non-familiarization level. It is a figure which shows the time change of the future sleepiness degree estimated by the sleepiness degree prediction apparatus of FIG. It is a figure which shows the time change of the present sleepiness degree actually estimated by the sleepiness degree prediction apparatus of FIG. It is a flowchart which shows operation
  • the drowsiness level prediction device 1 calculates the driver's degree of non-acclimation H based on the acquired information on the vehicle.
  • the drowsiness level prediction device 1 determines the driver's future drowsiness level D 1 based on the current drowsiness level D 0 of the driver estimated based on the acquired information on the driver and the calculated non-adaptation level H. Predict. Future drowsiness level D 1 corresponds to the drowsiness level D 1 of the predetermined time after the claim.
  • the driver's current drowsiness D 0 and future drowsiness D 1 are not distinguished, the two are collectively referred to as drowsiness D.
  • FIG. 1 is a block diagram showing the configuration of the sleepiness degree predicting apparatus 1 according to an embodiment.
  • the sleepiness degree prediction device 1 includes an information acquisition unit configured of a vehicle information acquisition unit 10 and a driver information acquisition unit 20, a storage unit 30, and a control unit 40.
  • the vehicle information acquisition unit 10 includes an appropriate sensor such as, for example, a camera, a light detection and ranging (LIDAR), a radar, a speed sensor, or a steering angle sensor.
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device that configures a car navigation system.
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device that configures an advanced driving support system (ADAS).
  • ADAS advanced driving support system
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device that configures an in-vehicle infotainment (IVI) system.
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device that configures an automatic driving system.
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device connected to a controller area network (CAN), which is one communication method in the in-vehicle network.
  • CAN controller area network
  • the vehicle information acquisition unit 10 may include, for example, an appropriate device for performing inter-vehicle and road-to-vehicle communication (V2X).
  • V2X road-to-vehicle communication
  • the vehicle information acquisition unit 10 acquires information on a vehicle.
  • the information related to the vehicle includes, for example, information related to changes in the traveling environment of the vehicle, information related to the vehicle state, and information related to the position of the vehicle, as described below.
  • the information on the change in the traveling environment of the vehicle includes, for example, information on the change in the traffic participant's situation such as the feature, the position or the traveling speed of the traffic participant.
  • the information on the change of the traveling environment of the vehicle includes, for example, the information on the change of the road condition or the signal condition such as the condition of the road surface, the interval with the white line of the road, the road type or the number of lanes.
  • the information related to the change in the traveling environment of the vehicle includes, for example, information related to the change in the front vehicle condition, the rear vehicle condition, the parallel vehicle condition, or the intersection vehicle condition.
  • the information related to the change in the traveling environment of the vehicle includes, for example, information related to the state of communication with the external network, the state of a mobile over the surrounding area, or a change in POI (Point Of Interest).
  • the information on the change in the traveling environment of the vehicle includes, for example, information on the destination and a planned route to the destination.
  • the information on the vehicle state includes, for example, vehicle speed, accelerator state, brake state, clutch state, blinker state, gear state, wiper state, door mirror state, seat state, audio state, warning state, light state, steering state, idle state, It contains information on air conditioner status, seat belt status or driving operation level.
  • the information on the position of the host vehicle includes, for example, information on the current position of the host vehicle indicated by the latitude, longitude, altitude, inclination or traveling lane position of the host vehicle.
  • the information on the position of the vehicle includes, for example, information on temperature, humidity, weather, brightness or transparency at the current position of the vehicle.
  • the driver information acquisition unit 20 includes an appropriate sensor such as a camera or a wearable sensor, for example.
  • the driver information acquisition unit 20 may include, for example, an appropriate sensor connected to the CAN.
  • the driver information acquisition unit 20 acquires information on the driver.
  • the information on the driver includes, for example, information on the driver's driving behavior and information on the driver's condition, as described below.
  • Information on the driver's driving behavior is, for example, the driver's accelerator operation, brake operation, clutch operation, blinker operation, gear operation, wiper operation, door mirror operation, seat operation, audio operation, light operation, steering operation, air conditioner operation or seat.
  • the information on the driving behavior of the driver includes, for example, information on speed adjustment, lane keeping, forward confirmation, backward confirmation, side confirmation, object tracking, forward scan or side scan.
  • Information on the driver's condition includes, for example, the driver's physical condition, face direction, gaze direction, blink state, physical movement, excitement, excitement, enjoyment, satisfaction, emotion, required content, driving (ride) duration time, It includes information on legibility, glare, easiness to hear or speech content.
  • the driver's biological condition includes, for example, brain waves, cerebral blood flow, blood pressure, blood sugar level, blood amino acids, HbA1c, ⁇ -GPT, usual medicine blood concentration, heart rate, body temperature, sensory temperature, hunger or fatigue. Including.
  • driver information acquisition unit 20 has been described as acquiring the above information regarding the driver, the present invention is not limited to this.
  • the driver information acquisition unit 20 may acquire similar information regarding a passenger.
  • the above information acquired by the information acquisition unit configured by the vehicle information acquisition unit 10 and the driver information acquisition unit 20 is output to the control unit 40 and stored in the storage unit 30 as needed.
  • the storage unit 30 includes, for example, a semiconductor memory or a magnetic memory.
  • the storage unit 30 is not limited to these, and may include any storage device.
  • the storage unit 30 may include, for example, an optical storage device such as an optical disk, or may include a magneto-optical disk or the like.
  • the storage unit 30 stores the various types of information acquired from the control unit 40 as needed.
  • the storage unit 30 stores a program or the like executed by the control unit 40 in order to operate the sleepiness level prediction device 1.
  • the storage unit 30 stores various data such as calculation results by the control unit 40 as needed.
  • the storage unit 30 may function as a work memory when the control unit 40 operates.
  • the control unit 40 includes, for example, a processor that controls and manages the entire sleepiness level prediction device 1, including each functional block of the sleepiness level prediction device 1.
  • the control unit 40 includes, for example, a processor such as a CPU (Central Processing Unit) that executes a program defining a control procedure. Such a program is stored, for example, in the storage unit 30.
  • a processor such as a CPU (Central Processing Unit) that executes a program defining a control procedure.
  • a program is stored, for example, in the storage unit 30.
  • FIG. 2 is a schematic view showing a process performed by the control unit 40 of the sleepiness degree predicting apparatus 1 of FIG. Referring to FIG. 2, the processing of the control unit 40 for realizing the functions of the drowsiness level prediction apparatus 1 for predicting the future drowsiness level D 1 of the driver will be described in detail.
  • the control unit 40 calculates a change ⁇ S of the stimulation amount S given to the driver based on the information on the vehicle acquired by the vehicle information acquisition unit 10.
  • the method of calculating the amount of stimulation S is, for example, driving of a driver driving a vehicle with an indicator called VACP which quantitatively estimates cognitive resources necessary for various operations in order to estimate the workload of a pilot at the design stage of an aircraft. Based on the method applied to the action.
  • the stimulation amount S given to the driver is calculated based on the VACP value applied to the driver's driving behavior, interpreting as corresponding to, for example, the driving load amount applied to the driver.
  • the stimulus amount S is quantified using the VACP applied to the driver's driving behavior.
  • VACP is a cognitive resource that is consumed by dividing human behavior into four elements of visual (V: Visual), auditory (A: Auditory), recognition (C: Cognitive), and mind (P: Psychomotor). It is an index represented by a numerical value from 1.0 to 7.0 according to the amount. The sum of the numerical values of the four factors is the loading amount. The amount of cognitive resources consumed is defined by a pairwise comparison study. Conventional VACP values for estimating pilot workload are specifically illustrated in Table 1 below.
  • the VACP values for the driving behavior of the driver driving the vehicle are estimated based on the conventional VACP values described in Table 1, for example as shown in Table 2 below. Based on this, the control unit 40 calculates the VACP value applied to the driver's driving behavior.
  • the control unit 40 can objectively determine the driving load amount for each driver. The control unit 40 determines that the driving load amount of the driver is small when the VACP is low, and determines that the driving load amount of the driver is large when the VACP is high.
  • the control unit 40 acquires, from the vehicle information acquisition unit 10, information on a destination set by a driver or the like using a car navigation system and a planned route to the destination.
  • the control unit 40 predicts the driver's driving behavior from the present to the predetermined time later based on the acquired information on the planned route, and calculates the driver's VACP value from the present to the predetermined time.
  • the predetermined time includes the time from the execution of drowsiness elimination control by the vehicle until the drowsiness inhibitory effect of the driver is exhibited.
  • the drowsiness elimination control by the vehicle includes, for example, temperature control by the air conditioner such as directing cold air from the air conditioner to the face of the driver, or odor control such as generating scent from any device.
  • the predetermined time includes the time until the drowsiness suppressing effect of the driver is exhibited by the external stimulus such as the temperature or the olfactory stimulus.
  • the control unit 40 determines that the driving behavior of the driver who visually recognizes the forward traveling environment corresponds to the "front confirmation" in Table 2 to monitor the automatic driving, and 4.0 and "recognizing" about “vision”. To calculate the VACP value as 5.0.
  • the control unit 40 calculates the stimulation amount S to be given to the driver for a predetermined time after the current based on the VACP value of the driver for a predetermined time after the current calculated based on the acquired information on the planned route. . More specifically, the control unit 40 calculates the ratio to the maximum value based on the calculated VACP value, and calculates the stimulation amount S as a value of 0 to 1.0.
  • the maximum value of VACP for example, a VACP value calculated in a state where a large load is applied to the driver is adopted.
  • the maximum value of VACP may be 80 calculated when driving a difficult narrow road.
  • the control unit 40 calculates the non-acclimation degree H by the equation 1 based on the calculated change ⁇ S of the stimulation amount S in each time from the present time to the predetermined time later.
  • the control unit 40 uses Equation 1 to predict the future degree of non-acclimation H.
  • is a coefficient.
  • the degree of non-acclimation H indicates the degree to which the driver is not accustomed to changes in the externally applied stimulus in driving.
  • the control unit 40 determines that the driver is not accustomed to the change in the stimulus when the non-adaptation degree H is high, and determines that the driver is accustomed to the change in the stimulus when the non-adaptation degree H is low. .
  • the control unit 40 sets, for example, 1 to the value of the degree of non-acclimation H in the initial state in which the driver is not accustomed to the change in stimulation.
  • the non-acclimation degree H has a first-order lag characteristic with respect to the change ⁇ S of the stimulation amount S. As described later, the non-acclimation degree H shows a characteristic such that the change amount of the non-accumulation degree H gradually decreases as time passes while decreasing with the time constant 1 / ⁇ .
  • Control unit 40 the driver of the current drowsiness level Markov model state transition transition probability Pij of transition from D 0 to a predetermined future drowsiness level D 1 is dependent on unconditioned degree H calculated by the above method Based on the driver's future sleepiness D 1 is predicted.
  • the control unit 40 estimates the current sleepiness degree D 0 of the driver based on the information on the driver obtained by the driver information obtaining unit 20.
  • the control unit 40 calculates the feature amount of the driver's eyes such as the cleavage rate or the eyelid opening / closing speed from the face image of the driver captured by a camera, for example, and uses the histogram for a predetermined time related to the feature amount of the eye to estimate the current drowsiness D 0 of the driver.
  • Method of estimating current drowsiness level D 0 of the driver by the control unit 40 is not limited to this and may be any method.
  • the control unit 40 may estimate the current drowsiness degree D 0 of the driver by determining the opening and closing of the driver's eyes by detecting the driver's cleavage rate and the direction of the driver's line of sight. .
  • the drowsiness level D of the driver is estimated, for example, in five stages from level 1 to level 5.
  • the control unit 40 determines that the drowsiness of the driver is promoted as the level increases and the numerical value of the drowsiness level D increases.
  • the control unit 40 determines that the drowsiness of the driver is suppressed as the level decreases and the numerical value of the drowsiness level D decreases.
  • Level 1 corresponds to, for example, "not sleepy at all.”
  • Level 2 corresponds to, for example, "somewhat sleepy”.
  • Level 3 corresponds to, for example, "sleepy”.
  • Level 4 corresponds to, for example, "very sleepy”.
  • Level 5 corresponds to, for example, "very sleepy”.
  • the method of level division by the numerical value of the sleepiness degree D is not limited to the above.
  • the control unit 40 may divide the sleepiness level D into any number and any content.
  • Control unit 40 determines the transition probability Pij of transition from the current sleepiness degree D 0 of the driver to a predetermined future drowsiness level D 1.
  • i represents each level value of the current sleepiness degree D 0 of the driver.
  • j represents each level value of the driver's future drowsiness D 1 .
  • i and j change the value to be taken according to the number of level divisions.
  • the control unit 40 determines the transition probability Pij by, for example, comparing the non-acclimatizing degree H calculated using Equation 1 with the data on the transition probability Pij for each value of the non-acclimating degree H.
  • Data on the transition probability Pij for each value of the non-acclimation degree H is, for example, experimentally acquired in advance and stored in the storage unit 30 in advance.
  • the control unit 40 predicts the driver's future drowsiness D 1 from the transition probability P ij determined based on the non-acclimating degree H and the driver's current drowsiness D 0 .
  • Control unit 40, future drowsiness level D 1 of the driver is higher than a predetermined value, if after a predetermined time awake state of the driver is predicted to decrease, perform any measures to suppress the drowsiness of the driver.
  • the predetermined value may be determined in advance by the manufacturer of the sleepiness level prediction device 1 or may be determined at any time by the user such as the driver.
  • Optional measures include, for example, providing an external stimulus to the driver.
  • the control unit 40 controls any on-vehicle device so as to provide the driver with an external stimulus such as visual, auditory, olfactory, tactile sense or thermal stimulation.
  • control unit 40 uniquely determines the driver's future drowsiness D 1 to the highest level value with transition probability P ij, and suppresses drowsiness based on the determined future drowsiness D 1 .
  • the method of taking measures is not limited to this, and may be any method.
  • Control unit 40 for example a probability level value of the future predicted drowsiness level D 1 is 3 or more may perform any measures is higher than a predetermined value.
  • the predetermined value in this case may be determined in advance by the manufacturer of the sleepiness degree predicting apparatus 1 or may be determined at any time by the user such as the driver.
  • the control unit 40 predicts a future drowsiness level D 1 of the driver.
  • the control unit 40 estimates the driver's current sleepiness degree D estimated in real time based on the driver's future sleepiness degree D 1 predicted in the past and the information on the driver acquired by the driver information acquisition unit 20.
  • the transition probability Pij may be updated by comparing with 0 .
  • the control unit 40 may determine whether the two sleepiness degrees D match. When it is determined that the two sleepiness degrees D match, the control unit 40 updates the transition probabilities Pij such that the two sleepiness degrees D do not match while maintaining the transition probability Pij. You may
  • FIG. 3 is a diagram showing an example of the temporal change of the degree of non-acclimation H calculated based on the equation 1.
  • the degree of non-habitation H in FIG. 3 indicates a value calculated under the condition that a predetermined driving load is given to the driver once every predetermined time.
  • FIG. 4 is a view showing an example of a time change of the estimated value of the sleepiness degree D.
  • the drowsiness level D in FIG. 4 indicates a value actually estimated using the driver information acquisition unit 20 in accordance with the time change of the non-acclimation degree H of FIG. 3.
  • the drowsiness level D in FIG. 4 is divided into 9 levels from 1 to 5 every 0.5.
  • Figures 3 and 4 show the results obtained together by the same trial. It should be understood that the times on the horizontal axes of FIGS. 3 and 4 correspond to one another and represent the same scale and the same absolute value.
  • the non-acclimation degree H shows a characteristic such that the change amount of the non-accumulation degree H gradually decreases with time while decreasing with the time constant 1 / ⁇ . Since the change ⁇ S of the stimulation amount S is increased by the predetermined driving load given to the driver once at predetermined time intervals, the non-adapting degree H shows a sawtooth waveform which is increased each time.
  • the drowsiness level D tends to gradually increase while repeating the short increase and decrease contrary to the non-acclimation degree H.
  • the degree of non-acclimation H and the degree of sleepiness D have a negative correlation. If the non-acclimatizing degree H is high and the driver is not accustomed to the change in stimulation, the drowsiness degree D is low. Conversely, when the non-acclimatizing degree H is low and the driver is accustomed to the change in stimulation, the drowsiness level D is high.
  • FIG. 5 is a diagram showing an example of data related to the transition probability Pij.
  • the upper part of FIG. 5 shows how the relationship between the degree of non-acclimation H and the current degree of sleepiness D 0 of the driver is plotted at a point.
  • the vertical axis shows the current drowsiness level D 0 of the driver.
  • the horizontal axis indicates the degree of non-acclimation H.
  • the lower part of FIG. 5 shows an example of the value of each transition probability P ij determined for each level of the non-acclimating degree H.
  • the rows of the matrix shown at the bottom of FIG. 5 indicate the level i of the current sleepiness degree D 0
  • the columns indicate the level j of the future sleepiness degree D 1 .
  • the sleepiness degree D is divided into nine levels from 1 to 5 every 0.5. Therefore, the matrix of the transition probability Pij is a 9 ⁇ 9 matrix.
  • the non-accumulation degree H is divided into any number of levels, for example, in the range of 0 to 1.
  • the non-acclimatizing degree H is divided into, for example, four non-acclimatizing levels H '.
  • the transition probability Pij is determined for each non-acclimatizing level H '.
  • the lower part of FIG. 5 shows, as an example, only the value of each transition probability Pij when the value of the non-familiarity level H 'is 1 or 2.
  • FIG. 6 is a diagram showing the value of the transition probability Pij for each non-familiarity level H ′.
  • the level value of the unconditioned level H 'is 3 that is, when the driver is not accustomed to changes in external stimuli, the probability of future drowsiness level D 1 is transitioned to Level 2 , And the non-acclimatizing level H 'is higher than in the case of 1 and 2 level value.
  • the driver is likely to transition to a state in which drowsiness is more suppressed if the driver is not accustomed to changes in external stimuli.
  • Figure 7 is a graph showing a temporal change of the future predicted drowsiness level D 1 by drowsiness level predicting device 1 in FIG. 1.
  • the vertical axis of FIG. 7 shows the transition probabilities Pij is the highest future drowsiness level D 1 transition after a predetermined time.
  • FIG. 8 is a diagram showing the time change of the current sleepiness degree D 0 actually estimated by the sleepiness degree prediction device 1 of FIG. 1. 7 and 8 show the results obtained together by the same trial. It should be understood that the times on the horizontal axes of FIGS. 7 and 8 correspond to one another and represent the same scale and the same absolute value.
  • the starting point of the data relating to the drowsiness level D 1 future predicted is after a predetermined time.
  • Future drowsiness level D at the starting point 1 shows the predicted level value in the start point of the data relating to the current sleepiness degree D 0 is time 0 seconds in FIG. 7 and FIG. 8 can be understood that although the respective timings are slightly different, the tendency to swing upward mainly based on the sleepiness degree 2 can be matched.
  • FIG. 9 is a flowchart showing the operation of the sleepiness degree predicting apparatus 1 of FIG. Referring to FIG. 9 will be described driver of future drowsiness level D 1 flow of the processing of the control unit 40 for realizing the functions of the drowsiness level prediction apparatus 1 for predicting.
  • the control unit 40 acquires information on the driver from the driver information acquisition unit 20 (step S101).
  • Control unit 40 estimates the current sleepiness degree D 0 of the driver based on the information on the obtained driver (step S102).
  • the control unit 40 acquires information on the vehicle from the vehicle information acquisition unit 10 (step S103).
  • the control unit 40 calculates the change ⁇ S of the stimulation amount S given to the driver based on the acquired information on the vehicle (step S104).
  • the control unit 40 calculates the degree of non-acclimation H based on the calculated change ⁇ S of the stimulation amount S (step S105).
  • the control unit 40 determines the transition probability Pij on the basis of the degree of non-habitation H calculated using Equation 1 (step S106).
  • the control unit 40 predicts the driver's future sleepiness D 1 based on the estimated current driver's current sleepiness D 0 and the determined transition probability P ij (step S 107).
  • Control unit 40 determines that the future drowsiness level D 1 of the predicted driver in the past, whether the current drowsiness level D 0 of the driver estimated in real time to match (step S108). If the control unit 40 determines that the two sleepiness degrees D match, the process proceeds to step S109. If the control unit 40 determines that the two sleepiness degrees D do not match, the process proceeds to step S110.
  • control unit 40 maintains the transition probability Pij (step S109).
  • control unit 40 updates the transition probability Pij (step S110).
  • the control unit 40 returns to step S101 and repeats the same flow again.
  • the sleepiness degree prediction apparatus 1 can predict the sleepiness degree D of the driver with high accuracy in advance.
  • the drowsiness level prediction device 1 can objectively quantify the non-adaptability level H having a negative correlation with the drowsiness level D by calculating the driver's non-adaptation level H based on the acquired information on the vehicle .
  • Drowsiness level predicting device 1 by predicting the future drowsiness level D 1 of the driver based on the unconditioned degree H and the calculated current drowsiness level D 0 of the driver, regarding accustomed future driver state can be accurately predict changes from the current sleepiness degree D 0 to predict. Therefore, the sleepiness degree predicting apparatus 1 can perform a measure to suppress the driver's sleepiness at an optimal timing.
  • the drowsiness level prediction device 1 can exhibit the effect of suppressing the driver's drowsiness to the maximum by performing such a measure in advance.
  • the drowsiness level prediction device 1 flexibly responds to the calculation of the non-adaptation degree H according to the planned route set by the driver, for example, by calculating the non-acclimation degree H of the driver based on the information on the change in the traveling environment of the vehicle. it can.
  • the sleepiness level prediction device 1 can calculate the driver's degree of non-acclimation H with high accuracy in accordance with the current and future actual traveling environments. As a result, the sleepiness level prediction apparatus 1 can predict the driver's future sleepiness level D 1 more accurately.
  • the drowsiness level prediction device 1 can objectively quantify the driving load associated with the driving behavior of the driver by calculating the driving load amount of the driver based on the information on the change in the traveling environment of the vehicle.
  • the sleepiness level prediction apparatus 1 can objectively quantify the stimulation amount S given to the driver by calculating the change ⁇ S of the stimulation amount S given to the driver.
  • the sleepiness level prediction apparatus 1 can calculate the non-adaptation degree H more accurately according to the driver's situation by calculating the non-adaptation degree H based on the calculated change ⁇ S of the stimulation amount S.
  • the sleepiness level prediction apparatus 1 can predict the driver's future sleepiness level D 1 more accurately.
  • the drowsiness level prediction device 1 objectively quantifies the driving load accompanying the driver's driving behavior by calculating the stimulation amount S using VACP, and accurately calculates the stimulation amount S to be given to the driver it can.
  • the drowsiness level prediction device 1 can easily calculate the non-acclimation degree H by using the equation 1 having the characteristic of the first-order lag with respect to the change ⁇ S of the stimulation amount S.
  • the drowsiness level prediction device 1 uses the state transition model in which the transition probability Pij depends on the calculated non-familiarity level H, and therefore the accuracy even if the variation in drowsiness level D with respect to the predetermined non-familiar level H is large
  • the driver's future sleepiness D 1 can be predicted well.
  • the sleepiness degree prediction device 1 stochastically predicts the sleepiness degree D based on the non-habitatability degree H, so that the sleepiness degree D with respect to the predetermined non-habituation degree H can be compared with the case where the sleepiness degree D is uniquely predicted. It is possible to suppress the decrease in prediction accuracy due to the variation of
  • the sleepiness degree prediction apparatus 1 updates the transition probability Pij when it is determined that the future sleepiness degree D 1 and the current sleepiness degree D 0 do not coincide with each other, and the sleepiness degree D matches the driver. It can predict accurately. Even if the prediction target changes to a new driver, the sleepiness degree prediction device 1 may update the transition probability Pij adapted to the original driver before the change to adapt it to the new driver. it can. The sleepiness degree prediction device 1 can be customized for each driver.
  • the present invention can also be realized as a drowsiness level prediction method substantially corresponding to the above-described drowsiness level prediction apparatus 1.
  • the present invention can also be realized as a program for causing a computer to execute the sleepiness prediction method. It should be understood that these are also included in the scope of the present invention.
  • the drowsiness level prediction device 1 has been described as calculating the driver's degree of non-acclimation H based on the information on the change in the traveling environment of the vehicle.
  • the method of calculating the degree of non-acclimation H is not limited to this.
  • the sleepiness degree prediction apparatus 1 may calculate the driver's degree of non-habituation H based on the information on any vehicle acquired by the vehicle information acquisition unit 10.
  • the sleepiness degree prediction device 1 calculates the change ⁇ S of the VACP and the stimulation amount S based on the information on the change of the traveling environment of the vehicle and calculates the non-acclimation degree H.
  • the method of calculating the degree of non-acclimation H is not limited to this.
  • the sleepiness degree predicting apparatus 1 may calculate the non-adaptation degree H directly using only information related to the change in the traveling environment of the vehicle, or may calculate the non-adaptation degree H by any other appropriate method.
  • Drowsiness level predicting device 1 may be directly predict future drowsiness level D 1 by using only information about the change in the running environment of the vehicle.
  • the drowsiness level prediction device 1 has been described as calculating the driver's degree of non-acclimation H based on the information on the vehicle acquired by the vehicle information acquisition unit 10.
  • the method of calculating the degree of non-acclimation H is not limited to this.
  • the sleepiness degree prediction device 1 calculates the driver's non-acclimation degree H based on the information on the driver acquired by the driver information acquisition unit 20 in addition to the information on the vehicle acquired by the vehicle information acquisition unit 10 May be
  • the drowsiness level prediction device 1 has been described as calculating the non-adaptation level H using the equation 1 having the characteristic of the first-order delay with respect to the change ⁇ S of the stimulation amount S.
  • the method of calculating the degree of non-acclimation H is not limited to this.
  • the sleepiness level prediction apparatus 1 may calculate the non-ameditative level H based on the stimulation amount S using another appropriate method.
  • Drowsiness level predicting device 1 has been described as predicting the future drowsiness level D 1 of the driver based on the state transition model transition probability Pij is dependent on the unconditioned degree H calculated.
  • the prediction method of future sleepiness degree D 1 is not limited to this. If the drowsiness degree prediction device 1 corresponds the calculated non-acclimation degree H and the drowsiness degree D with high accuracy, the drowsiness degree of the driver in the future by any method not using such a state transition model D 1 may be predicted.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Mathematical Physics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Social Psychology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Developmental Disabilities (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本発明の一実施形態に係る眠気度予測装置(1)は、車両に関する情報を取得する車両情報取得部(10)と、運転者に関する情報を取得する運転者情報取得部(20)と、取得された車両に関する情報に基づいて運転者の現在の運転負荷と所定時間後の運転負荷とに基づき運転者に与えられる刺激量(S)を算出し、算出された刺激量(S)の変化(ΔS)に基づいて運転者が運転に対して慣れない度合いを示す非馴化度(H)を算出し、取得された運転者に関する情報に基づいて推定した運転者の現在の眠気度(D0)と、算出された非馴化度(H)とに基づいて運転者の所定時間後の眠気度(D1)を予測する制御部(40)と、を備える。

Description

眠気度予測装置及び眠気度予測方法 関連出願の相互参照
 本出願は、2017年10月6日に日本国に特許出願された特願2017-196301の優先権を主張するものであり、この出願の開示全体をここに参照のために取り込む。
 本発明は、眠気度予測装置及び眠気度予測方法に関する。
 従来、居眠り運転等を防止するために、運転者の眠気度を推定する運転支援装置の開発が進んでいる。
 特許文献1に開示された検出装置は、運転者の目の開け具合を示す開閉度及び運転者の視線の方向を検出して運転者の目の開閉を判定する。
特開第2010-134608号公報
 運転者は、運転中において一定程度以上の覚醒状態を維持する必要がある。自動運転においても、例えば自動運転から手動運転へと切り替える際に、運転者は手動運転を行うことができる程度の覚醒状態を維持している必要がある。運転者の覚醒状態を維持させるために、例えば、温度又は嗅覚刺激等の外部刺激が運転者に対して与えられる。しかしながら、このような外部刺激による運転者の眠気の抑制効果が発揮されるまでに時間を要する場合がある。したがって、所定時間後の運転者の眠気度を事前に予測する必要がある。
 上記のような課題に鑑みてなされた本発明の目的は、運転者の眠気度を事前に精度良く予測できる眠気度予測装置及び眠気度予測方法を提供することにある。
 本発明の一実施形態に係る眠気度予測装置は、
 車両に関する情報を取得する車両情報取得部と、
 運転者に関する情報を取得する運転者情報取得部と、
 取得された前記車両に関する情報に基づいて前記運転者の現在の運転負荷と所定時間後の運転負荷とに基づき前記運転者に与えられる刺激量を算出し、算出された前記刺激量の変化に基づいて前記運転者が運転に対して慣れない度合いを示す非馴化度を算出し、取得された前記運転者に関する情報に基づいて推定した前記運転者の現在の眠気度と、算出された前記非馴化度とに基づいて前記運転者の所定時間後の眠気度を予測する制御部と、
 を備える。
 本発明の一実施形態に係る眠気度予測方法は、
 車両に関する情報を取得するステップと、
 運転者に関する情報を取得するステップと、
 取得された前記車両に関する情報に基づいて前記運転者の現在の運転負荷と所定時間後の運転負荷とに基づき前記運転者に与えられる刺激量を算出し、算出された前記刺激量の変化に基づいて前記運転者が運転に対して慣れない度合いを示す非馴化度を算出するステップと、
 取得された前記運転者に関する情報に基づいて推定した前記運転者の現在の眠気度と、算出された前記非馴化度とに基づいて前記運転者の所定時間後の眠気度を予測するステップと、
 を含む。
 本発明の一実施形態に係る眠気度予測装置及び眠気度予測方法によれば、運転者の眠気度を事前に精度良く予測できる。
一実施形態に係る眠気度予測装置の構成を示すブロック図である。 図1の眠気度予測装置の制御部によって実行される処理を示した模式図である。 式1に基づいて算出された非馴化度の時間変化の一例を示す図である。 眠気度の推定値の時間変化の一例を示す図である。 遷移確率に関するデータの一例を示す図である。 非馴化度レベルごとに遷移確率の値を示した図である。 図1の眠気度予測装置により予測された将来の眠気度の時間変化を示す図である。 図1の眠気度予測装置により実際に推定された現在の眠気度の時間変化を示す図である。 図1の眠気度予測装置の動作を示すフローチャートである。
 以下、図面を参照して本発明の一実施形態について説明する。
 一実施形態に係る眠気度予測装置1は、取得された車両に関する情報に基づいて運転者の非馴化度Hを算出する。眠気度予測装置1は、取得された運転者に関する情報に基づいて推定した運転者の現在の眠気度D0と、算出された非馴化度Hとに基づいて運転者の将来の眠気度D1を予測する。将来の眠気度D1は、請求項に記載の所定時間後の眠気度D1に対応する。以下では、運転者の現在の眠気度D0と将来の眠気度D1とを区別しない場合、2つをまとめて眠気度Dと表記する。
 図1は、一実施形態に係る眠気度予測装置1の構成を示すブロック図である。眠気度予測装置1は、車両情報取得部10及び運転者情報取得部20により構成される情報取得部と、記憶部30と、制御部40とを有する。
 車両情報取得部10は、例えばカメラ、ライダ(LIDAR:Light Detection And Ranging)、レーダ又は速度センサ若しくはステアリング舵角センサ等の適宜なセンサを含む。車両情報取得部10は、例えばカーナビゲーションシステムを構成する適宜な装置を含んでもよい。車両情報取得部10は、例えば先進運転支援システム(ADAS)を構成する適宜な装置を含んでもよい。車両情報取得部10は、例えば車載インフォテイメント(IVI:In-Vehicle Infotainment)システムを構成する適宜な装置を含んでもよい。車両情報取得部10は、例えば自動運転システムを構成する適宜な装置を含んでもよい。車両情報取得部10は、例えば車載ネットワークにおける1つの通信方式であるコントローラエリアネットワーク(CAN)に接続された適宜な装置を含んでもよい。車両情報取得部10は、例えば車車間及び路車間通信(V2X)を行うための適宜な装置を含んでもよい。
 車両情報取得部10は、車両に関する情報を取得する。車両に関する情報は、以下に説明するように、例えば車両の走行環境の変化に関する情報、車両状態に関する情報及び自車位置状況に関する情報を含む。
 車両の走行環境の変化に関する情報は、例えば交通参加者の特徴、位置又は移動速度等の交通参加者状況の変化に関する情報を含む。車両の走行環境の変化に関する情報は、例えば路面の状態、道路の白線との間隔、道路種別若しくは車線数等の道路状況又は信号状況の変化に関する情報を含む。車両の走行環境の変化に関する情報は、例えば前方車両状況、後方車両状況、並走車両状況又は交差車両状況の変化に関する情報を含む。車両の走行環境の変化に関する情報は、例えば外部ネットワークとの通信状態、周辺上空移動体状況又はPOI(Point Of Interest)の変化に関する情報を含む。車両の走行環境の変化に関する情報は、例えば目的地及び当該目的地までの計画経路に関する情報を含む。
 車両状態に関する情報は、例えば車両の速度、アクセル状態、ブレーキ状態、クラッチ状態、ウィンカ状態、ギア状態、ワイパー状態、ドアミラー状態、シート状態、オーディオ状態、ワーニング状態、ライト状態、ステアリング状態、アイドル状態、エアコン状態、シートベルト状態又は運転操作レベルに関する情報を含む。
 自車位置状況に関する情報は、例えば車両の緯度、経度、高度、斜度又は走行車線位置等によって示される自車の現在位置に関する情報を含む。自車位置状況に関する情報は、例えば自車の現在位置における温度、湿度、天候、明るさ又は透明度に関する情報を含む。
 運転者情報取得部20は、例えばカメラ又はウェアラブルセンサ等の適宜なセンサを含む。運転者情報取得部20は、例えばCANに接続された適宜なセンサを含んでもよい。運転者情報取得部20は、運転者に関する情報を取得する。運転者に関する情報は、以下に説明するように、例えば運転者の運転行動に関する情報及び運転者の状態に関する情報を含む。
 運転者の運転行動に関する情報は、例えば運転者のアクセル操作、ブレーキ操作、クラッチ操作、ウィンカ操作、ギア操作、ワイパー操作、ドアミラー操作、シート操作、オーディオ操作、ライト操作、ステアリング操作、エアコン操作又はシートベルト操作に関する情報を含む。運転者の運転行動に関する情報は、例えば速度調節、走行車線維持、前方確認、後方確認、側方確認、物体追跡、前方スキャン又は側方スキャンに関する情報を含む。
 運転者の状態に関する情報は、例えば運転者の生体状態、顔向き、視線、瞬き状態、体動、わくわく度、感動度、楽しさ、満足度、感情、要求内容、運転(乗車)継続時間、見やすさ、まぶしさ、聞きやすさ又は発話内容に関する情報を含む。ここで、運転者の生体状態とは、例えば脳波、脳血流、血圧、血糖値、血中アミノ酸、HbA1c、γ-GPT、常備薬血中濃度、心拍、体温、体感温度、空腹感又は疲れを含む。
 運転者情報取得部20は、運転者に関して上記の情報を取得するとして説明したが、これに限定されない。運転者情報取得部20は、同乗者に関して同様の情報を取得してもよい。
 車両情報取得部10及び運転者情報取得部20により構成される情報取得部によって取得された上記の情報は、制御部40に出力され、必要に応じて記憶部30に格納される。
 記憶部30は、例えば半導体メモリ又は磁気メモリを含む。記憶部30は、これらに限定されず、任意の記憶装置を含んでもよい。記憶部30は、例えば光ディスクのような光学記憶装置を含んでもよいし、光磁気ディスク等を含んでもよい。記憶部30は、制御部40から取得した上記の各種情報を必要に応じて記憶する。記憶部30は、眠気度予測装置1を動作させるために制御部40によって実行されるプログラム等を記憶する。記憶部30は、制御部40による演算結果等の各種データを必要に応じて記憶する。記憶部30は、制御部40が動作する際のワークメモリとして機能してもよい。
 制御部40は、例えば眠気度予測装置1の各機能ブロックをはじめとして、眠気度予測装置1の全体を制御及び管理するプロセッサを含む。制御部40は、例えば制御手順を規定したプログラムを実行するCPU(Central Processing Unit)等のプロセッサを含む。このようなプログラムは、例えば記憶部30に格納される。
 図2は、図1の眠気度予測装置1の制御部40によって実行される処理を示した模式図である。図2を参照して、運転者の将来の眠気度D1を予測する眠気度予測装置1の機能を実現するための制御部40の処理について詳細に説明する。
 制御部40は、車両情報取得部10によって取得された車両に関する情報に基づいて運転者に与えられる刺激量Sの変化ΔSを算出する。刺激量Sの算出方法は、例えば、航空機の設計段階でパイロットの作業負荷を推定するために各種操作に必要な認知資源を定量的に見積もったVACPと呼ばれる指標を車両を運転する運転者の運転行動に適用する方法に基づく。運転者に与えられる刺激量Sは、例えば運転者に加わる運転負荷量に対応すると解釈して、運転者の運転行動に適用されたVACP値に基づき算出される。このように、刺激量Sは、運転者の運転行動に適用されたVACPを用いて定量化される。
 VACPは、人間の行動を視覚(V:Visual)、聴覚(A:Auditory)、認識(C:Cognitive)及び精神(P:Psychomotor)の4つの要素に分けた状態で、消費される認知資源の量に応じて1.0から7.0までの数値で表された指標である。4つの要素の数値の合計が負荷量となる。消費される認知資源の量は、一対比較法の調査によって定義されている。パイロットの作業負荷を推定するための従来のVACP値を以下の表1に具体的に示す。
Figure JPOXMLDOC01-appb-T000001
 車両を運転する運転者の運転行動に関するVACP値は、表1に記載の従来のVACP値に基づいて、例えば以下の表2に示すように見積もられる。これに基づいて、制御部40は運転者の運転行動に適用されたVACP値を算出する。制御部40は、運転者ごとの運転負荷量を客観的に判定できる。制御部40は、VACPが低いと運転者の運転負荷量が小さいと判定し、VACPが高いと運転者の運転負荷量が大きいと判定する。
Figure JPOXMLDOC01-appb-T000002
 制御部40は、例えば運転者等がカーナビゲーションシステムを利用して設定した目的地及び当該目的地までの計画経路に関する情報を車両情報取得部10から取得する。制御部40は、取得した計画経路に関する情報に基づいて現在から所定時間後までの運転者の運転行動を予測し、現在から所定時間後までの運転者のVACP値を算出する。所定時間は、車両による眠気解消制御の実施から、運転者の眠気の抑制効果が発揮されるまでの時間を含む。車両による眠気解消制御は、例えば、空調装置からの冷風を運転者の顔に向ける等の空調装置による温度制御、又は任意の装置から香りを発生させる等のにおい制御等を含む。このように、所定時間は、例えば温度又は嗅覚刺激等の外部刺激により運転者の眠気の抑制効果が発揮されるまでの時間を含む。制御部40は、例えば自動運転を監視するために前方の走行環境を視認する運転者の運転行動を表2における「前方確認」に該当すると判定し、「視覚」に関する4.0と「認識」に関する1.0とを加算してVACP値を5.0と算出する。
 制御部40は、取得した計画経路に関する情報に基づいて算出した現在から所定時間後までの運転者のVACP値に基づいて、現在から所定時間後までの運転者に与えられる刺激量Sを算出する。より具体的には、制御部40は、算出したVACP値に基づいてその最大値に対する比率をそれぞれ算出し、0~1.0の値として刺激量Sを算出する。VACPの最大値として、例えば運転者に対して大きな負荷が加わっている状態で算出されたVACP値が採用される。一例として、VACPの最大値は、難度の高い狭路を運転するときに算出される80であってもよい。
 制御部40は、算出された現在から所定時間後までの各時間における刺激量Sの変化ΔSに基づいて式1により非馴化度Hを算出する。制御部40は、式1を用いて将来の非馴化度Hを予測する。式1において、αは係数である。
Figure JPOXMLDOC01-appb-M000003
 非馴化度Hは、運転において外部から与えられる刺激の変化に対して運転者が慣れない度合いを示す。制御部40は、非馴化度Hが高いと刺激の変化に対して運転者が慣れていないと判定し、非馴化度Hが低いと刺激の変化に対して運転者が慣れていると判定する。制御部40は、刺激の変化に対して運転者が慣れていない初期状態での非馴化度Hの値を例えば1に設定する。
 式1を参照すると、非馴化度Hは、刺激量Sの変化ΔSに対する一次遅れの特性を有する。非馴化度Hは、後述するように、時定数1/αで減少しながら時間が経過するにつれて非馴化度Hの変化量が徐々に小さくなるような特性を示す。
 制御部40は、運転者の現在の眠気度D0から所定の将来の眠気度D1に遷移する遷移確率Pijが上記の方法で算出された非馴化度Hに依存する状態遷移のマルコフモデルに基づいて、運転者の将来の眠気度D1を予測する。
 より具体的には、制御部40は、運転者情報取得部20から取得した運転者に関する情報に基づいて運転者の現在の眠気度D0を推定する。制御部40は、例えばカメラによって撮像された運転者の顔画像から瞼開率又は瞼開閉速度等の運転者の目の特徴量を算出し、目の特徴量に係る所定時間におけるヒストグラムを用いることで運転者の現在の眠気度D0を推定する。制御部40による運転者の現在の眠気度D0の推定方法はこれに限定されず、任意の方法であってよい。例えば、制御部40は、運転者の瞼開率及び運転者の視線の方向を検出して運転者の目の開閉を判定することで運転者の現在の眠気度D0を推定してもよい。
 運転者の眠気度Dは、例えばレベル1からレベル5までの5段階で推定される。制御部40は、レベルが上がって眠気度Dの数値が大きくなる程運転者の眠気が促進されていると判定する。制御部40は、レベルが下がって眠気度Dの数値が小さくなる程運転者の眠気が抑制されていると判定する。レベル1は、例えば「全く眠くない」に対応する。レベル2は、例えば「やや眠い」に対応する。レベル3は、例えば「眠い」に対応する。レベル4は、例えば「かなり眠い」に対応する。レベル5は、例えば「非常に眠い」に対応する。眠気度Dの数値によるレベル分けの方法は、上記に限定されない。制御部40は、任意の数及び任意の内容で眠気度Dをレベル分けしてもよい。
 制御部40は、式1を用いて算出された非馴化度Hに基づいて、運転者の現在の眠気度D0から所定の将来の眠気度D1に遷移する遷移確率Pijを決定する。iは、運転者の現在の眠気度D0の各レベル値を示す。jは、運転者の将来の眠気度D1の各レベル値を示す。i及びjは、レベル分けの数に応じてとる値を変化させる。運転者の眠気度Dがレベル1からレベル5までの5段階で推定される場合、i及びjそれぞれは、1から5までの値をとる。制御部40は、例えば式1を用いて算出された非馴化度Hと非馴化度Hの値ごとの遷移確率Pijに関するデータとを比較することで遷移確率Pijを決定する。非馴化度Hの値ごとの遷移確率Pijに関するデータは、例えば実験的に予め取得され、記憶部30に事前に格納される。
 制御部40は、非馴化度Hに基づいて決定した遷移確率Pijと運転者の現在の眠気度D0とにより、運転者の将来の眠気度D1を予測する。制御部40は、運転者の将来の眠気度D1として例えば遷移確率Pijが最も高いレベル値を採用する。制御部40は、運転者の将来の眠気度D1が所定値よりも高く、所定時間後に運転者の覚醒状態が低下すると予測した場合、運転者の眠気を抑制させる任意の施策を行う。所定値は、眠気度予測装置1の製造業者によって予め決定されてもよいし、運転者等のユーザ自身によって随時決定されてもよい。任意の施策は、例えば運転者に対して外部刺激を与えることを含む。制御部40は、運転者に対して例えば視覚、聴覚、嗅覚、触覚又は温度刺激等の外部刺激を与えるように任意の車載機器を制御する。
 このように、制御部40は、遷移確率Pijが最も高いレベル値に運転者の将来の眠気度D1を一意的に決定し、決定された将来の眠気度D1に基づいて眠気を抑制させる任意の施策を行う。施策を行う方法は、これに限定されず任意の方法であってよい。制御部40は、例えば予測した将来の眠気度D1のレベル値が3以上である確率が所定値よりも高い場合に任意の施策を行ってもよい。この場合の所定値は、眠気度予測装置1の製造業者によって予め決定されてもよいし、運転者等のユーザ自身によって随時決定されてもよい。
 以上のような方法により、制御部40は運転者の将来の眠気度D1を予測する。制御部40は、過去に予測された運転者の将来の眠気度D1と、運転者情報取得部20によって取得された運転者に関する情報に基づいてリアルタイムに推定した運転者の現在の眠気度D0とを比較して遷移確率Pijを更新してもよい。制御部40は、これら2つの眠気度Dが一致するか否かを判定してもよい。制御部40は、2つの眠気度Dが一致すると判定した場合、遷移確率Pijを維持する一方で、2つの眠気度Dが一致しないと判定した場合、それぞれが一致するように遷移確率Pijを更新してもよい。
 以下では、上記の各処理段階における各パラメータの振る舞いを実験的に検証した結果について詳細に説明する。
 図3は、式1に基づいて算出された非馴化度Hの時間変化の一例を示す図である。図3における非馴化度Hは、所定時間ごとに一回運転者に対して所定の運転負荷を与えるという条件のもとで算出された値を示す。図4は、眠気度Dの推定値の時間変化の一例を示す図である。図4における眠気度Dは、図3の非馴化度Hの時間変化に対応させて運転者情報取得部20を用いて実際に推定された値を示す。図4における眠気度Dは、1から5まで0.5ごとに9段階でレベル分けされている。図3及び図4は、同一の試行により共に取得された結果を示す。図3及び図4の横軸の時間は互いに対応しており、同一の尺度及び同一の絶対値を示すと理解されたい。
 図3を参照すると、非馴化度Hは、時定数1/αで減少しながら時間が経過するにつれて非馴化度Hの変化量が徐々に小さくなるような特性を示す。所定時間ごとに一回運転者に対して与えられる所定の運転負荷によって刺激量Sの変化ΔSが増大するので、非馴化度Hはその都度増加してのこぎり状の波形を示す。
 図3と共に図4を参照すると、眠気度Dは、非馴化度Hとは逆に短い増減を繰り返しながら徐々に増加する傾向にある。このように、非馴化度Hと眠気度Dとは負の相関関係にあることが分かる。非馴化度Hが高く運転者が刺激の変化に対して慣れていない場合、眠気度Dは低い。逆に、非馴化度Hが低く運転者が刺激の変化に対して慣れている場合、眠気度Dは高い。
 図5は、遷移確率Pijに関するデータの一例を示す図である。図5の上部は、非馴化度Hと運転者の現在の眠気度D0との関係を点でプロットした様子を示す。縦軸は、運転者の現在の眠気度D0を示す。横軸は、非馴化度Hを示す。図5の下部は、非馴化度Hのレベルごとに決定された各遷移確率Pijの値の一例を示す。図5の下部に示した行列の行は現在の眠気度D0のレベルiを示し、列は将来の眠気度D1のレベルjを示す。
 図5を参照すると、眠気度Dは、1から5まで0.5ごとに9段階でレベル分けされている。したがって、遷移確率Pijの行列は9×9行列となる。事前の実験において非馴化度Hの値ごとに遷移確率Pijを決定する際、非馴化度Hは、例えば0から1の範囲において任意の数のレベルに分けられる。非馴化度Hは、例えば4つの非馴化度レベルH’に分けられる。遷移確率Pijは、非馴化度レベルH’ごとに決定される。図5の下部は、一例として、非馴化度レベルH’の値が1又は2のときの各遷移確率Pijの値のみを示す。
 図6は、非馴化度レベルH’ごとに遷移確率Pijの値を示した図である。図6は、現在の眠気度D0のレベル値を2.5として、所定時間後に遷移する将来の眠気度D1ごとに遷移確率Pij(i=2.5)の値をグラフで示した図である。図6は、3つの非馴化度レベル1、2、3について、遷移確率Pij(i=2.5)の値を示す。
 図6を参照すると、非馴化度レベルH’のレベル値が3、つまり運転者が外部からの刺激の変化に対して慣れていない場合、将来の眠気度D1がレベル2に遷移する確率は、非馴化度レベルH’のレベル値が1、2の場合と比較して高い。運転者は、外部からの刺激の変化に対して慣れていない場合眠気がより抑制された状態に遷移しやすい。
 図7は、図1の眠気度予測装置1により予測された将来の眠気度D1の時間変化を示す図である。図7の縦軸は、所定時間後に遷移する遷移確率Pijが最も高い将来の眠気度D1を示す。図8は、図1の眠気度予測装置1により実際に推定された現在の眠気度D0の時間変化を示す図である。図7及び図8は、同一の試行により共に取得された結果を示す。図7及び図8の横軸の時間は互いに対応しており、同一の尺度及び同一の絶対値を示すと理解されたい。
 図7を参照すると、予測された将来の眠気度D1に関するデータの開始点は、所定時間後にある。当該開始点における将来の眠気度D1は、図8の現在の眠気度D0に関するデータの開始点である時間0秒において予測されたレベル値を示す。図7及び図8を比較すると、それぞれのタイミングは若干異なっているものの眠気度2をベースとして主に上方向に振れる傾向は合っていると解釈することができる。
 図9は、図1の眠気度予測装置1の動作を示すフローチャートである。図9を参照して、運転者の将来の眠気度D1を予測する眠気度予測装置1の機能を実現するための制御部40の処理のフローについて説明する。
 制御部40は、運転者情報取得部20から運転者に関する情報を取得する(ステップS101)。
 制御部40は、取得された運転者に関する情報に基づいて運転者の現在の眠気度D0を推定する(ステップS102)。
 制御部40は、車両情報取得部10から車両に関する情報を取得する(ステップS103)。
 制御部40は、取得された車両に関する情報に基づいて、運転者に与えられる刺激量Sの変化ΔSを算出する(ステップS104)。
 制御部40は、算出された刺激量Sの変化ΔSに基づいて非馴化度Hを算出する(ステップS105)。
 制御部40は、式1を用いて算出された非馴化度Hに基づいて遷移確率Pijを決定する(ステップS106)。
 制御部40は、推定された運転者の現在の眠気度D0及び決定された遷移確率Pijに基づいて運転者の将来の眠気度D1を予測する(ステップS107)。
 制御部40は、過去に予測された運転者の将来の眠気度D1と、リアルタイムに推定した運転者の現在の眠気度D0とが一致するか否かを判定する(ステップS108)。制御部40は、2つの眠気度Dが一致すると判定した場合、ステップS109に進む。制御部40は、2つの眠気度Dが一致しないと判定した場合、ステップS110に進む。
 制御部40は、2つの眠気度Dが一致すると判定した場合、遷移確率Pijを維持する(ステップS109)。
 制御部40は、2つの眠気度Dが一致しないと判定した場合、遷移確率Pijを更新する(ステップS110)。
 制御部40は、ステップS101に戻り、再度同様のフローを繰り返す。
 以上のような一実施形態に係る眠気度予測装置1は、運転者の眠気度Dを事前に精度良く予測できる。眠気度予測装置1は、取得された車両に関する情報に基づいて運転者の非馴化度Hを算出することで、眠気度Dと負の相関関係を有する非馴化度Hを客観的に定量化できる。眠気度予測装置1は、運転者の現在の眠気度D0と算出された非馴化度Hとに基づいて運転者の将来の眠気度D1を予測することで、将来の運転者の慣れに関する状態を予測して現在の眠気度D0からの変化を精度良く予測できる。したがって、眠気度予測装置1は、運転者の眠気を抑制するような施策を最適なタイミングで行うことができる。眠気度予測装置1は、このような施策を事前に行うことで、運転者の眠気を抑制する効果を最大限に発揮させることができる。
 眠気度予測装置1は、車両の走行環境の変化に関する情報に基づいて運転者の非馴化度Hを算出することで、例えば運転者が設定した計画経路に従って非馴化度Hの算出に柔軟に対応できる。眠気度予測装置1は、現在及び将来の実際の走行環境に対応させて精度良く運転者の非馴化度Hを算出できる。結果として、眠気度予測装置1は、より精度良く運転者の将来の眠気度D1を予測できる。
 眠気度予測装置1は、車両の走行環境の変化に関する情報に基づいて運転者の運転負荷量を算出することで、運転者の運転行動に伴う運転負荷を客観的に定量化できる。
 眠気度予測装置1は、運転者に与えられる刺激量Sの変化ΔSを算出することで、運転者に与えられる刺激量Sを客観的に定量化できる。眠気度予測装置1は、算出された刺激量Sの変化ΔSに基づいて非馴化度Hを算出することで、運転者の状況に合わせてより精度良く非馴化度Hを算出できる。結果として、眠気度予測装置1は、より精度良く運転者の将来の眠気度D1を予測できる。例えば、眠気度予測装置1は、VACPを用いて刺激量Sを算出することで、運転者の運転行動に伴う運転負荷を客観的に定量化して運転者に与えられる刺激量Sを正確に算出できる。
 眠気度予測装置1は、刺激量Sの変化ΔSに対する一次遅れの特性を有する式1を用いることで、非馴化度Hを容易に算出できる。
 眠気度予測装置1は、算出された非馴化度Hに遷移確率Pijが依存する状態遷移モデルを用いることで、所定の非馴化度Hに対する眠気度Dのばらつきが大きい場合であっても、精度良く運転者の将来の眠気度D1を予測できる。眠気度予測装置1は、非馴化度Hに基づいて確率的に眠気度Dを予測することで、一意的に眠気度Dを予測する場合に比べて、所定の非馴化度Hに対する眠気度Dのばらつきによる予測精度の低下を抑制できる。
 眠気度予測装置1は、将来の眠気度D1と現在の眠気度D0とが一致しないと判定した場合に遷移確率Pijを更新することで、運転者ごとに適合した状態で眠気度Dを精度良く予測できる。眠気度予測装置1は、予測対象が新たな運転者に変わった場合であっても、変更前の元の運転者に適合した遷移確率Pijを更新して、新たな運転者に適合させることができる。眠気度予測装置1は、運転者ごとにカスタマイズ可能である。
 本発明を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形又は修正を行うことが容易であることに注意されたい。したがって、これらの変形又は修正は本発明の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を1つに組み合わせたり、或いは分割したりすることが可能である。
 本発明の一実施形態として眠気度予測装置1を主に説明したが、本発明は、上述した眠気度予測装置1に実質的に相当する眠気度予測方法としても実現し得る。本発明は、コンピュータに、眠気度予測方法を実行させるためのプログラムとしても実現し得る。本発明の範囲にはこれらも包含されるものと理解されたい。
 眠気度予測装置1は、車両の走行環境の変化に関する情報に基づいて運転者の非馴化度Hを算出するとして説明した。非馴化度Hの算出方法は、これに限定されない。眠気度予測装置1は、車両情報取得部10によって取得される任意の車両に関する情報に基づいて運転者の非馴化度Hを算出してもよい。
 眠気度予測装置1は、車両の走行環境の変化に関する情報に基づいてVACP及び刺激量Sの変化ΔSを算出し、非馴化度Hを算出するとして説明した。非馴化度Hの算出方法は、これに限定されない。眠気度予測装置1は、車両の走行環境の変化に関する情報のみを用いて直接的に非馴化度Hを算出してもよいし、その他の適宜な方法で非馴化度Hを算出してもよい。眠気度予測装置1は、車両の走行環境の変化に関する情報のみを用いて直接的に将来の眠気度D1を予測してもよい。
 眠気度予測装置1は、車両情報取得部10によって取得された車両に関する情報に基づいて運転者の非馴化度Hを算出するとして説明した。非馴化度Hの算出方法は、これに限定されない。眠気度予測装置1は、車両情報取得部10によって取得された車両に関する情報に加えて、運転者情報取得部20によって取得された運転者に関する情報に基づいて運転者の非馴化度Hを算出してもよい。
 眠気度予測装置1は、刺激量Sの変化ΔSに対する一次遅れの特性を有する式1を用いて非馴化度Hを算出するとして説明した。非馴化度Hの算出方法は、これに限定されない。眠気度予測装置1は、他の適宜な方法を用いて刺激量Sに基づいて非馴化度Hを算出してもよい。
 眠気度予測装置1は、算出された非馴化度Hに遷移確率Pijが依存する状態遷移モデルに基づいて運転者の将来の眠気度D1を予測するとして説明した。将来の眠気度D1の予測方法は、これに限定されない。眠気度予測装置1は、算出された非馴化度Hと眠気度Dとが精度良く対応しているのであれば、このような状態遷移モデルを用いない任意の方法で運転者の将来の眠気度D1を予測してもよい。
 1  眠気度予測装置
 10 車両情報取得部
 20 運転者情報取得部
 30 記憶部
 40 制御部

Claims (9)

  1.  車両に関する情報を取得する車両情報取得部と、
     運転者に関する情報を取得する運転者情報取得部と、
     取得された前記車両に関する情報に基づいて前記運転者の現在の運転負荷と所定時間後の運転負荷とに基づき前記運転者に与えられる刺激量を算出し、算出された前記刺激量の変化に基づいて前記運転者が運転に対して慣れない度合いを示す非馴化度を算出し、取得された前記運転者に関する情報に基づいて推定した前記運転者の現在の眠気度と、算出された前記非馴化度とに基づいて前記運転者の所定時間後の眠気度を予測する制御部と、
     を備える、
     眠気度予測装置。
  2.  前記車両に関する情報は、車両の走行環境の変化に関する情報を含む、
     請求項1に記載の眠気度予測装置。
  3.  前記制御部は、前記車両の走行環境の変化に関する情報に基づいて前記運転者の運転負荷量を算出する、
     請求項2に記載の眠気度予測装置。
  4.  前記制御部は、取得された前記車両に関する情報に基づいて、前記運転者に与えられる前記刺激量の変化を算出し、算出された前記刺激量の変化に基づいて前記非馴化度を算出する、
     請求項1に記載の眠気度予測装置。
  5.  前記非馴化度は、前記刺激量の変化に対する一次遅れの特性を有する、
     請求項4に記載の眠気度予測装置。
  6.  前記制御部は、前記運転者の現在の眠気度から所定時間後の眠気度に遷移する遷移確率が算出された前記非馴化度に依存する状態遷移モデルに基づいて、前記運転者の所定時間後の眠気度を予測する、
     請求項1に記載の眠気度予測装置。
  7.  前記制御部は、
     過去に予測された前記運転者の所定時間後の眠気度と、取得された前記運転者に関する情報に基づいて推定した前記運転者の現在の眠気度とが一致するか否かを判定し、
     2つの眠気度が一致しないと判定した場合、それぞれが一致するように前記遷移確率を更新する、
     請求項6に記載の眠気度予測装置。
  8.  前記所定時間は、前記車両による眠気解消制御の実施から、前記運転者の眠気の抑制効果が発揮されるまでの時間を含む、
     請求項1に記載の眠気度予測装置。
  9.  車両に関する情報を取得するステップと、
     運転者に関する情報を取得するステップと、
     取得された前記車両に関する情報に基づいて前記運転者の現在の運転負荷と所定時間後の運転負荷とに基づき前記運転者に与えられる刺激量を算出し、算出された前記刺激量の変化に基づいて前記運転者が運転に対して慣れない度合いを示す非馴化度を算出するステップと、
     取得された前記運転者に関する情報に基づいて推定した前記運転者の現在の眠気度と、算出された前記非馴化度とに基づいて前記運転者の所定時間後の眠気度を予測するステップと、
     を含む、
     眠気度予測方法。
PCT/JP2018/037096 2017-10-06 2018-10-03 眠気度予測装置及び眠気度予測方法 WO2019069999A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/753,381 US11040720B2 (en) 2017-10-06 2018-10-03 Sleepiness level prediction device and sleepiness level prediction method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-196301 2017-10-06
JP2017196301A JP6983028B2 (ja) 2017-10-06 2017-10-06 眠気度予測装置及び眠気度予測方法

Publications (1)

Publication Number Publication Date
WO2019069999A1 true WO2019069999A1 (ja) 2019-04-11

Family

ID=65994312

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/037096 WO2019069999A1 (ja) 2017-10-06 2018-10-03 眠気度予測装置及び眠気度予測方法

Country Status (3)

Country Link
US (1) US11040720B2 (ja)
JP (1) JP6983028B2 (ja)
WO (1) WO2019069999A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112019007457T5 (de) * 2019-07-25 2022-04-14 Mitsubishi Electric Corporation Fahrerunterstützungsvorrichtung, fahrerunterstützungsverfahren, fahrerunterstützungsprogramm und fahrerunterstützungssystem
JP7328828B2 (ja) * 2019-08-27 2023-08-17 フォルシアクラリオン・エレクトロニクス株式会社 状態推定装置、状態推定プログラムおよび状態推定方法
US11738763B2 (en) * 2020-03-18 2023-08-29 Waymo Llc Fatigue monitoring system for drivers tasked with monitoring a vehicle operating in an autonomous driving mode
KR102520188B1 (ko) * 2021-10-29 2023-04-10 전남대학교 산학협력단 인공 지능을 이용하여 운전자의 상태를 판단하는 차량 장치 및 그 제어 방법

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01250221A (ja) * 1987-12-09 1989-10-05 Nippon Denso Co Ltd 居眠り検出装置
JP2000185575A (ja) * 1998-10-16 2000-07-04 Fuji Heavy Ind Ltd 車両用の覚醒度推定装置および覚醒度推定方法
JP2003061939A (ja) * 2001-08-28 2003-03-04 Pioneer Electronic Corp 情報提供システム、情報提供方法、情報提供プログラム、情報提供システムにおけるサーバ装置および、情報提供システムにおける端末装置
JP2008228759A (ja) * 2007-03-16 2008-10-02 Toyota Central R&D Labs Inc 意識低下判定装置及びプログラム
JP2009157606A (ja) * 2007-12-26 2009-07-16 Toyota Central R&D Labs Inc ドライバ状態推定装置及びプログラム
JP2010140358A (ja) * 2008-12-12 2010-06-24 Toyota Motor Corp 走行支援装置
US20140046546A1 (en) * 2011-04-20 2014-02-13 Peter Kollegger Vehicle with a safety system involving prediction of driver tiredness
WO2014167811A1 (ja) * 2013-04-10 2014-10-16 株式会社デンソー 眠気予測装置及び眠気予測システム
JP2017127616A (ja) * 2015-07-22 2017-07-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 覚醒度予測方法および覚醒度予測装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6335689B1 (en) 1998-10-16 2002-01-01 Fuji Jukogyo Kabushiki Kaisha Driver's arousal level estimating apparatus for vehicle and method of estimating arousal level
JP4915413B2 (ja) 2008-12-03 2012-04-11 オムロン株式会社 検出装置および方法、並びに、プログラム
US8427326B2 (en) * 2009-07-30 2013-04-23 Meir Ben David Method and system for detecting the physiological onset of operator fatigue, drowsiness, or performance decrement
WO2017222997A1 (en) * 2016-06-20 2017-12-28 Magic Leap, Inc. Augmented reality display system for evaluation and modification of neurological conditions, including visual processing and perception conditions
US10083397B2 (en) * 2016-08-25 2018-09-25 TCL Research America Inc. Personalized intelligent wake-up system and method based on multimodal deep neural network

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01250221A (ja) * 1987-12-09 1989-10-05 Nippon Denso Co Ltd 居眠り検出装置
JP2000185575A (ja) * 1998-10-16 2000-07-04 Fuji Heavy Ind Ltd 車両用の覚醒度推定装置および覚醒度推定方法
JP2003061939A (ja) * 2001-08-28 2003-03-04 Pioneer Electronic Corp 情報提供システム、情報提供方法、情報提供プログラム、情報提供システムにおけるサーバ装置および、情報提供システムにおける端末装置
JP2008228759A (ja) * 2007-03-16 2008-10-02 Toyota Central R&D Labs Inc 意識低下判定装置及びプログラム
JP2009157606A (ja) * 2007-12-26 2009-07-16 Toyota Central R&D Labs Inc ドライバ状態推定装置及びプログラム
JP2010140358A (ja) * 2008-12-12 2010-06-24 Toyota Motor Corp 走行支援装置
US20140046546A1 (en) * 2011-04-20 2014-02-13 Peter Kollegger Vehicle with a safety system involving prediction of driver tiredness
WO2014167811A1 (ja) * 2013-04-10 2014-10-16 株式会社デンソー 眠気予測装置及び眠気予測システム
JP2017127616A (ja) * 2015-07-22 2017-07-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 覚醒度予測方法および覚醒度予測装置

Also Published As

Publication number Publication date
US11040720B2 (en) 2021-06-22
US20200276978A1 (en) 2020-09-03
JP6983028B2 (ja) 2021-12-17
JP2019068935A (ja) 2019-05-09

Similar Documents

Publication Publication Date Title
JP7288911B2 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
US9956963B2 (en) Apparatus for assessing, predicting, and responding to driver fatigue and drowsiness levels
US10317900B2 (en) Controlling autonomous-vehicle functions and output based on occupant position and attention
WO2019069999A1 (ja) 眠気度予測装置及び眠気度予測方法
WO2019095937A1 (zh) 一种碰撞预警方法及装置
EP3779921A1 (en) Information processing device, moving apparatus, method, and program
US10146221B2 (en) Information presenting apparatus and information presenting method
US11214280B2 (en) Autonomous vehicle providing driver education
JP5326521B2 (ja) 覚醒状態判断装置及び覚醒状態判断方法
US20230054024A1 (en) Information processing apparatus, information processing system, information processing method, and information processing program
CN110892351A (zh) 车辆控制装置和车辆控制方法
WO2018190152A1 (ja) 情報処理装置、情報処理方法、及び、プログラム
CN111656423A (zh) 信息处理装置、移动装置、方法以及程序
CN110843798A (zh) 协调通知到车辆驾驶员的递送以减少注意力分散
JP2018180983A (ja) 情報処理装置、情報処理方法、及び、プログラム
JP2008217274A (ja) 運転者状態判定装置、及び運転支援装置
US11702103B2 (en) Affective-cognitive load based digital assistant
CN107010077B (zh) 用于将信息传输给机动车的驾驶员的方法和适应性的驾驶员协助系统
JP6988075B2 (ja) 違和感判別方法及び違和感判別装置
JP2018008575A (ja) 車両制御装置
US11383640B2 (en) Techniques for automatically reducing annoyance levels of drivers when using driver monitoring systems
Abendroth et al. Capabilities of humans for vehicle guidance
CN110998688A (zh) 信息控制装置
JP7468329B2 (ja) 運転支援装置、運転支援方法、運転支援プログラム
JP6806627B2 (ja) 情報制御装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18864666

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18864666

Country of ref document: EP

Kind code of ref document: A1