WO2014017009A1 - 運転者状態推定装置、運転者状態推定方法 - Google Patents

運転者状態推定装置、運転者状態推定方法 Download PDF

Info

Publication number
WO2014017009A1
WO2014017009A1 PCT/JP2013/003747 JP2013003747W WO2014017009A1 WO 2014017009 A1 WO2014017009 A1 WO 2014017009A1 JP 2013003747 W JP2013003747 W JP 2013003747W WO 2014017009 A1 WO2014017009 A1 WO 2014017009A1
Authority
WO
WIPO (PCT)
Prior art keywords
deceleration
driver
biological information
time
information
Prior art date
Application number
PCT/JP2013/003747
Other languages
English (en)
French (fr)
Inventor
壮一郎 森
清水 洋志
三浦 宏明
康弘 福山
寸田 剛司
Original Assignee
日産自動車株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日産自動車株式会社 filed Critical 日産自動車株式会社
Priority to JP2014526733A priority Critical patent/JP5854142B2/ja
Priority to EP13822977.8A priority patent/EP2878263A4/en
Priority to CN201380037074.6A priority patent/CN104427936A/zh
Priority to US14/415,063 priority patent/US20150203121A1/en
Publication of WO2014017009A1 publication Critical patent/WO2014017009A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A61B5/02055Simultaneously evaluating both cardiovascular condition and temperature
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • A61B5/022Measuring pressure in heart or blood vessels by applying pressure to close blood vessels, e.g. against the skin; Ophthalmodynamometers
    • A61B5/0225Measuring pressure in heart or blood vessels by applying pressure to close blood vessels, e.g. against the skin; Ophthalmodynamometers the pressure being controlled by electric signals, e.g. derived from Korotkoff sounds
    • A61B5/02255Measuring pressure in heart or blood vessels by applying pressure to close blood vessels, e.g. against the skin; Ophthalmodynamometers the pressure being controlled by electric signals, e.g. derived from Korotkoff sounds the pressure being controlled by plethysmographic signals, e.g. derived from optical sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0245Detecting, measuring or recording pulse rate or heart rate by using sensing means generating electric signals, i.e. ECG signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026Measuring blood flow
    • A61B5/0261Measuring blood flow using optical means, e.g. infrared light
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168Evaluating attention deficit, hyperactivity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893Cars
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00Brake-action initiating means
    • B60T7/12Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/14Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated upon collapse of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00Brake-action initiating means
    • B60T7/12Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/16Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated by remote control, i.e. initiating means not mounted on vehicle
    • B60T7/18Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated by remote control, i.e. initiating means not mounted on vehicle operated by wayside apparatus
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16ZINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS, NOT OTHERWISE PROVIDED FOR
    • G16Z99/00Subject matter not provided for in other main groups of this subclass
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2218/00Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers
    • A61B2503/22Motor vehicles operators, e.g. drivers, pilots, captains
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • B60W2520/105Longitudinal acceleration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F04POSITIVE - DISPLACEMENT MACHINES FOR LIQUIDS; PUMPS FOR LIQUIDS OR ELASTIC FLUIDS
    • F04CROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT MACHINES FOR LIQUIDS; ROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT PUMPS
    • F04C2270/00Control; Monitoring or safety arrangements
    • F04C2270/04Force
    • F04C2270/041Controlled or regulated
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms

Definitions

  • the present invention relates to a driver state estimation device and a driver state estimation method.
  • Patent Document 1 The prior art described in Patent Document 1 is a navigation device for searching and providing facilities existing around the current position, which measures biological information such as blood pressure, pulse and temperature of the passenger, and the health of the passenger. We provide facility information according to the condition.
  • the blood pressure which is one of the biological information can not be grasped the value of normal unless the person to be measured is at rest.
  • blood pressure generally increases after exercise, after eating, when smoking, when in a cold, etc., and also generally increases when the user is in an excited state or a tense state as the feeling is undone. Therefore, in order to grasp the blood pressure value in normal times, it is first necessary to grasp whether the subject is at rest physically or mentally, but it is correct that the subject is at rest. It is difficult to estimate itself.
  • the blood pressure fluctuation during traveling is large, and even when the vehicle is stopped, it is not always in the resting state.
  • An object of the present invention is to improve the estimation accuracy when estimating the driver's resting state.
  • the driver state estimation device records the driver's biological information, and detects a deceleration start time when the vehicle in the traveling state starts to decelerate and stops. Then, referring to the biological information within a predetermined period recorded before the deceleration start time, the pre-deceleration biological information which is a representative value of the referred biological information is extracted and recorded after the deceleration start time. The post-deceleration biological information which is a representative value of the referred biological information is extracted with reference to the biological information within a predetermined period. Then, by comparing the extracted pre-deceleration biological information and the post-deceleration biological information, it is estimated whether the driver after deceleration is in the resting state.
  • estimation accuracy can be improved. That is, if the driver's biometric information changes with the vehicle deceleration, then the driver's biometric information will be focused on the tendency to be stabilized uniformly, and by comparing the pre-deceleration biometric information and the post-deceleration biometric information It can be estimated whether the driver after deceleration is at rest.
  • FIG. 1 is a schematic configuration diagram of a driver state estimation device.
  • the driver state estimation device is mounted in a car, and includes a pulse wave sensor 11, an electrocardiogram sensor 12, a vehicle speed sensor 13, a brake switch 14, an acceleration sensor 15, a navigation system 16, and a controller 17. Is equipped.
  • the pulse wave sensor 11 detects a driver's pulse wave (volume pulse wave).
  • the pulse wave is biological information representing a change in volume of peripheral arterial blood vessels associated with the pulsation of the heart.
  • the pulse wave sensor 11 utilizes the characteristic that near-infrared wavelength light passes through a living body and is absorbed in blood hemoglobin, and from a photoelectric sensor in which a light emitting element and a light receiving element of infrared light are combined. Become. Specifically, for example, it is provided in the grip portion of the steering wheel, irradiates infrared light to the palm or finger tip of the driver, and inputs to the controller 17 a voltage signal according to the amount of the reflected light reflected. Do. The controller 17 determines a pulse wave from the input voltage signal.
  • the electrocardiograph 12 detects the driver's electrocardiographic waveform.
  • this electrocardiograph 12 for example, a plurality of electrodes are provided on the seat surface, back surface, and the like of the seat, and a controller that detects potential difference signals generated between the electrodes by depolarization accompanying stimulation conduction when the cardiac muscle of the driver extends and contracts.
  • the controller 17 determines an electrocardiogram waveform from the input potential difference signal.
  • clothes and cloth intervene between the driver's skin and the electrode it is desirable to adopt the Laplacian electrode arrangement method or to increase the input impedance of the capacitive measurement circuit.
  • the driver state estimation device of the present embodiment is premised to be mounted on a vehicle, and it is desirable that the pulse wave sensor 11 and the electrocardiograph 12 continuously acquire biological information without restraining the driver, and therefore the steering It is provided on the holding surface of the wheel and the seat and back of the seat. If the driver's biological information can be acquired, the pulse wave sensor 11 or the electrocardiograph 12 is provided in a portion operated by the driver within a range where a part of the body reaches or a portion supported by the driver's body It is also good.
  • the vehicle speed sensor 13 detects a vehicle speed (hereinafter referred to as a vehicle speed) V.
  • the vehicle speed sensor 13 is provided, for example, in a driven gear on the output side of the transmission, detects magnetic lines of force of the sensor rotor by a detection circuit, converts a change in magnetic field accompanying the rotation of the sensor rotor into a pulse signal and inputs it to the controller 17 Do.
  • the controller 17 determines the vehicle speed V from the input pulse signal.
  • the brake switch 14 detects ON / OFF of the brake.
  • the brake switch 14 inputs a voltage signal corresponding to ON / OFF of the brake to the controller 17 via, for example, a detection circuit of a normally closed contact.
  • the controller 17 determines ON / OFF of the brake from the input voltage signal.
  • the acceleration sensor 15 detects an acceleration / deceleration G in the longitudinal direction of the vehicle.
  • the acceleration sensor 15 detects, for example, the positional displacement of the movable electrode with respect to the fixed electrode as a change in capacitance, converts it into a voltage signal proportional to the degree of acceleration and deceleration, and inputs it to the controller 17.
  • the controller 17 determines the acceleration / deceleration G from the input voltage signal.
  • the navigation system 16 recognizes the current position of the vehicle and road map information at the current position.
  • the navigation system 16 has a GPS receiver, and recognizes the position (latitude, longitude, altitude) of the vehicle and the traveling direction based on the time difference between radio waves arriving from three or more GPS satellites. Then, referring to road map information including road type, road alignment, lane width, passing direction of vehicle, etc. stored in the DVD-ROM drive or hard disk drive, the controller recognizes the road map information at the current position of the own vehicle Enter 17 Note that various data may be received from the infrastructure using two-way wireless communication (DSRC: Dedicated Short Range Communication) as a driving safety support system (DSSS).
  • DSRC Dedicated Short Range Communication
  • controller 17 directly inputs each detection signal from sensors, it is not limited to this.
  • the controller 17 may be connected to another control unit to receive various data via, for example, CSMA / CA multiplex communication (CAN: Controller Area Network).
  • CSMA / CA multiplex communication CAN: Controller Area Network
  • the controller 17 is, for example, a microcomputer, and executes driver's state estimation processing every predetermined time (for example, 10 msec).
  • FIG. 2 is a block diagram showing a driver state estimation process.
  • the driver state estimation process performed by the controller 17 includes a biological information recording unit 21, a deceleration start time point detection unit 22, a biological information extraction unit 23, and a driver state estimation unit 24.
  • the biological information recording unit 21 records the vital signs of the circulatory system of the driver affected by the autonomic nerve as biological information.
  • the heart rate R is the number of beats of the heart within a fixed time, and generally refers to the number of beats per minute. Specifically, the heart rate R is calculated based on the pulse wave detected by the pulse wave sensor 11 and the electrocardiogram waveform detected by the electrocardiogram sensor 12, and the heart rate R is recorded as biological information.
  • the biological information recording unit 21 accumulates and manages the heart rate R together with time information in the non-volatile memory.
  • the cycle time of the pulse propagating from the cardiac output to the erasure is measured.
  • the heart rate (seconds) is calculated by dividing a unit time (for example, 60 seconds) by the time from the peak value in the pulse wave or the electrocardiogram waveform to the next peak value (the time for one beat). The above is the process of recording the heart rate R by the biological information recording unit 21.
  • the deceleration start time detection unit 22 detects a deceleration start time tg when the vehicle in the traveling state starts to decelerate and stops. Specifically, the vehicle speed V detected by the vehicle speed sensor 14 and the ON / OFF state detected by the brake switch 14 are read. Then, with the vehicle speed V greater than 0, the brakes switch from OFF to ON including the engine brake, and when the vehicle speed V becomes 0 after the vehicle decelerates, the driver's deceleration operation switches to ON. The point in time is detected as the deceleration start point tg.
  • the deceleration start time tg substantially corresponds to the time when the driver recognizes that the vehicle needs to be stopped.
  • the biological information extraction unit 23 uses the deceleration start time point tg detected by the deceleration start time point detection unit 22 as a reference, and within a predetermined pre-deceleration comparison period Tb recorded by the biological information recording unit 21 before the deceleration start time tg.
  • the pre-deceleration heart rate Rb which is a representative value of the referred heart rate R is extracted with reference to the heart rate R of Furthermore, the heart rate R after deceleration which is a representative value of the heart rate R referred to is referred to with reference to the heart rate R within the predetermined post-deceleration comparison period Ta recorded in the biological information recording unit 21 after the deceleration start time tg. Extract
  • FIG. 3 is a time chart showing the pre-deceleration comparison period Tb and the post-deceleration comparison period Ta.
  • Tf corresponds to the time from the start of deceleration until the heart rate R starts to decrease
  • the average value of the heart rate R is extracted as the pre-deceleration heart rate Rb as described below.
  • i R1, R2, ..., RN.
  • Rb ⁇ R (i) / N
  • the average value of the heart rate R is extracted as the post-deceleration heart rate Ra.
  • i R1, R2, ..., RN.
  • the heart rate R data group is referred to, and the average value is used as a representative value of the referenced heart rate R.
  • the present invention is not limited thereto.
  • the maximum value or the like may be used as a representative value. The above is the extraction processing of the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra by the biological information extraction unit 23.
  • the driver state estimation unit 24 estimates the resting state of the driver after deceleration by comparing the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra extracted by the biological information extraction unit 23.
  • (a) is a case where the blood pressure which has risen along with the decelerating action falls after decelerating
  • (b) is a case where the blood pressure which has been rising before the decelerating action falls after decelerating is there.
  • one threshold Rt is set, and whether the driver after deceleration is at rest or not depends on whether the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is larger than the threshold Rt.
  • the estimation is made in stages, it is not limited to this. That is, depending on which range the difference ⁇ R is in, a plurality of threshold values are set, the driver's resting state after deceleration is, for example, “stable”, “slightly stable”, “not stable” ] Etc., you may estimate by three or more steps.
  • the driver state estimation process based on the block diagram of FIG.
  • FIG. 5 is a flowchart showing the driver state estimation process.
  • the heart rate R is calculated based on the pulse wave detected by the pulse wave sensor 11 and the electrocardiogram detected by the electrocardiogram sensor 12 corresponding to the processing in the living body information recording unit 21.
  • the number R is recorded as biometric information.
  • step S102 it is determined whether the vehicle speed V is zero.
  • the vehicle speed V is greater than 0, it is determined that the vehicle is in a traveling state, and the process proceeds to step S103.
  • the vehicle speed V is 0, it is determined that the vehicle is in the stop state, and the process proceeds to step S109.
  • step S103 the pre-deceleration comparison period Tb and the pre-deceleration heart rate Rb set by the biological information extraction unit 23 are reset.
  • step S104 the post-deceleration comparison period Ta and the post-deceleration heart rate Ra set by the biological information extraction unit 23 are reset.
  • step S105 it is determined whether the brake is ON, including the engine brake.
  • the brake is off, it is determined that the deceleration operation has not been performed, and the process proceeds to step S100.
  • the brake is ON, it is determined that the deceleration operation is performed, and the process proceeds to step S107.
  • the driver may switch ON / OFF the brake operation continuously, such as a pumping brake, when the brake switch 14 is switched from OFF to ON, the brake switch 14 continues until a predetermined time elapses. It is possible to take measures to consider that is the state of ON.
  • Step S100 determines whether the accelerator is on.
  • the accelerator is ON, it is determined that the acceleration operation is performed, and the process proceeds to step S106.
  • the accelerator is off, it is determined that the acceleration operation is not performed, and the process returns to the predetermined main program as it is.
  • Step S106 corresponds to the processing in the deceleration start time point detection unit 22. After the deceleration start time point tg is reset, the process returns to the predetermined main program.
  • step S107 it is determined whether the deceleration start time tg is unrecorded.
  • the deceleration start time tg is unrecorded, it is determined that it is immediately after the start of the brake operation, and the process proceeds to step S108.
  • the deceleration start time tg has been recorded, it is determined that it is not immediately after the start of the brake operation, and the process returns to the predetermined main program as it is.
  • step S108 the deceleration start time tg when the vehicle in the traveling state starts to decelerate is recorded, and then the process returns to the predetermined main program.
  • step S109 it is determined whether the deceleration start time tg is unreferenced.
  • the deceleration start time point tg is not referred to, it is determined that the vehicle has just stopped and the process proceeds to step S110.
  • Step S110 corresponds to the processing in the deceleration start time detection unit 22, and reads out (refers to) the deceleration start time tg when the vehicle in the traveling state starts to decelerate.
  • a subsequent step S111 corresponds to the processing in the biological information extraction unit 23, and sets a pre-deceleration comparison period Tb.
  • the deceleration start time tg is set as the pre-deceleration reference end time tb2, and the deceleration before these deceleration reference start time tb1
  • the period up to the previous reference end time tb2 is set as the pre-deceleration comparison period Tb.
  • the subsequent step S112 corresponds to the processing in the biological information extraction unit 23, refers to the data group of the heart rate R recorded in the pre-deceleration comparison period Tb, and takes the average value of the heart rate R as the pre-deceleration heart rate Rb. Extract.
  • a subsequent step S113 corresponds to the processing in the biological information extraction unit 23, and sets a post-deceleration comparison period Ta.
  • the required time Tf from the deceleration start time tg to stabilization of the driver's biological information is set, and a reference start time ta1 after deceleration after a predetermined time Tf from the deceleration start time tg is set, and this deceleration A post-deceleration reference end time ta2 is set after a predetermined time Te has elapsed from the post-reference start time ta1.
  • the post-deceleration comparison period Ta from the post-deceleration reference start time ta1 to the post-deceleration reference end time ta2 is set.
  • step S114 it is determined whether (Tf + Te) has elapsed from the deceleration start time tg.
  • (Tf + Te) corresponds to the time from the start of the deceleration to the decrease in heart rate R and the return to the state before the start of the deceleration.
  • (Tf + Te) has not yet elapsed, it is determined that the post-deceleration comparison period Ta has not ended and it is determined that the post-deceleration heart rate Ra can not be extracted, and the process returns to the predetermined main program.
  • (Tf + Te) has elapsed, it is determined that the post-deceleration comparison period Ta ends and the post-deceleration heart rate Ra can be extracted, and the process proceeds to step S115.
  • Step S115 corresponds to the processing in the biological information extraction unit 23, refers to the data group of the heart rate R recorded in the post-deceleration comparison period Ta, and extracts the average value of the heart rate R as the post-deceleration heart rate Ra.
  • a subsequent step S116 corresponds to the processing in the driver state estimation unit 24, and determines whether or not the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is equal to or greater than a predetermined threshold Rt.
  • a predetermined threshold Rt a predetermined threshold
  • Step S117 corresponds to the process in the driver state estimation unit 24, and records the estimation result that the driver after deceleration is in the resting state, for example, as a history on a predetermined drive recorder, and then proceeds to step S119.
  • Step S118 corresponds to the processing in the driver state estimation unit 24 and records the estimation result that the driver after deceleration is not in the resting state, for example, as a history in a predetermined drive recorder, and then proceeds to step S119.
  • step S119 the pre-deceleration comparison period Tb and the pre-deceleration heart rate Rb set by the biological information extraction unit 23 are reset, and then the process returns to the predetermined main program.
  • step S120 the post-deceleration comparison period Ta and the post-deceleration heart rate Ra set by the biological information extraction unit 23 are reset, and then the process returns to the predetermined main program.
  • the blood pressure which is one of the biological information can not be grasped the value of normal unless the person to be measured is at rest. For example, it is known that blood pressure is increased due to exercise, diet, excitement or tension, or smoking or cold, and conversely, blood pressure is decreased due to warmth or rest, relaxation or the like. Among these, self-control is possible for things other than mental factors, but self-control alone may not be sufficient for things of mental factors.
  • the driver's heart rate R changes with the vehicle deceleration, then it pays attention to the tendency that the driver's heart rate R becomes stable uniformly, and the pre-deceleration heart rate Rb and after the deceleration
  • the heart rate R which is a vital sign of the driver's circulatory system is calculated based on the pulse wave and the electrocardiogram waveform of the driver, and is recorded together with the time information (step S101).
  • the driver's heart rate R changes with the vehicle deceleration, then the driver's heart rate R focuses on the tendency to be stabilized uniformly, and the deceleration start time made prior to the vehicle stop By observing how the driver's heart rate R changes before and after tg, the driver's resting state after deceleration is estimated.
  • step S110 when the vehicle speed V is greater than 0 (the determination in step S102 is "No") and the brake is switched from OFF to ON (the determination in step S105 is “Yes”), that point is taken as the deceleration start time tg. It records (step S108). Then, at the vehicle stop time ts when the vehicle is stopped by the decelerating operation (the determination in step S102 is "Yes"), the recorded deceleration start time tg is read (step S110).
  • the pre-deceleration reference start time tb1 and the pre-deceleration reference end time tb2 are set according to the deceleration start time tg and the predetermined time Tr, and the pre-deceleration reference start time tb1
  • the period up to the reference end time tb2 is set as the pre-deceleration comparison period Tb (step S111).
  • the heart rate R in the pre-deceleration comparison period Tb is referred to, and the average value of the data group of the heart rate R is extracted as the pre-deceleration heart rate Rb (step S112).
  • this pre-deceleration comparison period Tb both the blood pressure value and the heart rate are in a stable state.
  • deceleration reference start time ta1 and deceleration after reference end time ta2 are set according to deceleration start time tg, predetermined time Tf and predetermined time Te, and after deceleration reference is made
  • a period from the start time ta1 to the post-deceleration reference end time ta2 is set as the post-deceleration comparison period Ta (step S113).
  • the blood pressure tends to rise along with the deceleration operation.
  • the blood pressure is turned from the elevated state to the lowered state and eventually returns to the stable state.
  • the heart rate R also decreases once, it starts rising again and eventually returns to the stable state.
  • step S114 determines whether (Tf + Te) elapses from the deceleration start time point tg (the determination in step S114 is "No"), that is, it waits until data collection of the heart rate R in the post-deceleration comparison period Ta is completed. Then, when (Tf + Te) has elapsed (the determination of 114S is “Yes”), the heart rate R in the post-deceleration comparison period Ta is referenced, and the average value of the heart rate R data group is extracted as the post-deceleration heart rate Ra. (Step S115). In this post-deceleration comparison period Ta, both the heart rate R and the heart rate are in a stable state.
  • step S116 when the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is equal to or greater than a predetermined threshold Rt (the determination in step S116 is “ Yes "), it is estimated that the driver after deceleration is in the resting state (step S117).
  • a predetermined threshold Rt the determination in step S116 is “ Yes "
  • the difference ⁇ R is smaller than the threshold Rt, it is estimated that the driver after deceleration is not in the resting state (step S118).
  • the pre-deceleration comparison period Tb is set according to the deceleration start time tg and the predetermined time Tr, and by referring to the data group of the heart rate R recorded in the pre-deceleration comparison period Tb, before the deceleration start It is easy to extract a highly reliable pre-deceleration heart rate Rb that can be regarded as being stable. Also, by extracting the average value of the heart rate R data group recorded in the pre-deceleration comparison period Tb as the pre-deceleration heart rate Rb, the distribution degree of the data observed in the pre-deceleration comparison period Tb is statistically averaged. Representative values can be easily extracted.
  • the post-deceleration comparison period Ta is set according to the deceleration start time tg, the predetermined time Tf, and the predetermined time Te, and the data group of the heart rate R recorded in the post-deceleration comparison period Ta is referenced.
  • the average value of the heart rate R data group recorded in the post-deceleration comparison period Ta as the post-deceleration heart rate Ra is statistically averaged. Representative values can be easily extracted.
  • the point in time when the driver's brake is switched on is detected as the deceleration start point tg, but the reaction time Tx from when the driver recognizes that the vehicle needs to be stopped until when the driver starts the deceleration operation
  • the deceleration start time tg ′ may be detected in consideration of First, a reaction time Tx from when the driver recognizes that the vehicle needs to be stopped until when the driver starts decelerating operation is set in advance.
  • This reaction time is the reflection time (for example, 0.4 to 0.5 seconds) from the recognition of the need to stop the vehicle until the foot is moved, and the switching time from the accelerator pedal to the brake pedal (for example 0.2) Second) and the depression time (for example, 0.1 to 0.3 seconds) from when the brake pedal is depressed to when the brake switch 14 is turned OFF, and Tx is approximately 0.7 to 1.0 seconds It becomes.
  • FIG. 6 is a time chart showing the reaction time Tx and the deceleration start time tg.
  • the post-deceleration heart rate Ra is extracted in a state where the heart rate R, which has already started to fall, deviates from the post-deceleration comparison period Ta, which affects the estimation accuracy of the resting state. Therefore, in order to improve the estimation accuracy of the resting state, it is necessary to properly set the pre-deceleration comparison period Tb and the post-deceleration comparison period Ta, and for this purpose, it is also possible to accurately detect the deceleration start time tg ′. desired.
  • the reaction time Tx from when the driver recognizes that the vehicle needs to be stopped until when the deceleration operation is started is set, and the reaction time Tx is set from time tg when the brake switch 14 is turned ON.
  • the retrospective point in time is detected as the deceleration start point tg '.
  • the deceleration start time tg ' is approximated to the time when the driver recognizes that the vehicle needs to be stopped, so that the pre-deceleration comparison period Tb and the post-deceleration comparison period Ta can be properly set. Can improve the estimation accuracy of the resting state.
  • step S101 which is the process of the biological information recording unit 21
  • step S108 and S110 which is the process of the deceleration start time detection unit 22
  • step S110 to S115 which is processing in the biological information extraction unit 23
  • steps S116 to S118 which is processing in the driver state estimation unit 24
  • the driver state estimation device records the driver's biological information by the processing of the biological information recording unit 21 and is in the traveling state by the processing of the deceleration start time tg detection unit 22.
  • the processing at the biological information extraction unit 23 refers to the heart rate R within a predetermined period recorded by the biological information recording unit 21 before the deceleration start time tg, and the representative value of the referred heart rate R To extract the pre-deceleration heart rate Rb.
  • the heart rate R within a predetermined period recorded by the biological information recording unit 21 after the deceleration start time tg is referred to, and the post-deceleration heart rate Ra which is a representative value of the referred heart rate R is extracted. Then, by the processing in the driver state estimation unit 24, the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra extracted by the biological information extraction unit 23 are compared to determine whether the driver after deceleration is in a resting state or not. presume.
  • the driver's rest state is compared by comparing the pre-deceleration heart rate Rb which has been stable before the deceleration start time tg with the post-deceleration heart rate Ra which may change after the deceleration start time tg.
  • the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is equal to or greater than a predetermined threshold Rt by the process of the driver state estimation unit 24 Sometimes it is estimated that the driver after deceleration is at rest. As described above, since it is estimated whether the driver after deceleration is at rest or not by the magnitude of the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra, it is at rest or not Can be easily estimated.
  • the driver's state estimation device sets a time point retroactively from the deceleration start time point tg by a predetermined time Tr as the reference start time point before deceleration tb1 by the processing in the biological information extraction unit 23.
  • the deceleration start time tg is set as the pre-deceleration reference end time tb2. Then, among the heart rates R recorded in the living body information recording unit 21, the heart rate R from the pre-deceleration reference start time point tb1 to the pre-deceleration reference end time point tb 2 is referred to Extract the pre-heart rate Rb.
  • the driver's state estimation apparatus sets the time after the predetermined time Tf has elapsed from the deceleration start time tg as the post-deceleration reference start time ta1 by the processing in the biological information extraction unit 23, A point at which a predetermined time Te has elapsed from the post-deceleration reference start time ta1 is set as the post-deceleration reference end time ta2.
  • the heart rate R from the post-deceleration reference start time ta1 to the post-deceleration reference end time ta2 is referred to, and the deceleration is a representative value of the referred heart rate R Extract the post heart rate Ra.
  • the deceleration is a representative value of the referred heart rate R Extract the post heart rate Ra.
  • the driver's state estimation device causes the heart rate within a predetermined period recorded by the biological information recording unit 21 before the deceleration start time tg to be processed by the biological information extraction unit 23
  • an average value of the referred heart rate R is extracted as a pre-deceleration heart rate Rb.
  • the heart rate R within a predetermined period recorded in the biological information recording unit 21 after the deceleration start time tg is referred to, and the average value of the referred heart rate R is extracted as the post-deceleration heart rate Ra.
  • the dispersion degree of the data observed in the pre-deceleration comparison period Tb was equalized.
  • Statistical representative values can be easily extracted.
  • the distribution degree of the data observed in the post-deceleration comparison period Ta is made statistical Representative values can be easily extracted.
  • the driver state estimation device records the heart rate R of the driver as biological information by the processing in the biological information recording unit 21. As described above, by recording the heart rate R affected by the autonomic nerve, it can be accurately estimated whether the driver after deceleration is in the resting state.
  • the driver state estimation device uses the processing in the deceleration start time point detection unit 22 to recognize in advance the reaction time Tx from when the driver recognizes that the vehicle needs to be stopped to when the deceleration operation is started. Set Then, a point in time when the driver starts the decelerating operation from the point in time tg retroactively by the reaction time Tx is detected as a deceleration start point in time tg '.
  • the post-deceleration comparison period Ta is accurately set. As a result, the estimation accuracy of the resting state can be improved.
  • the driver state estimation method records the heart rate R of the driver and detects the deceleration start time tg when the vehicle in the traveling state starts to decelerate and stops. Then, referring to the heart rate R in a predetermined period recorded before the deceleration start time tg, the pre-deceleration heart rate Rb which is a representative value of the referred heart rate R is extracted, and the deceleration start time tg.
  • the post-deceleration heart rate Ra which is a representative value of the referred heart rate R, is extracted with reference to the heart rate R within a predetermined period recorded later. Then, by comparing the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra, it is estimated whether the driver after deceleration is at rest.
  • the driver's rest state is compared by comparing the pre-deceleration heart rate Rb which has been stable before the deceleration start time tg with the post-deceleration heart rate Ra which may change after the deceleration start time tg.
  • FIG. 7 is a block diagram showing a driver state estimation process of the second embodiment.
  • the processing in the above-described biological information recording unit 21, the biological information extraction unit 23, and the driver state estimation unit 24 is changed, and the driver information acquisition unit 25 is newly added. Is the same as that of the first embodiment described above, and thus the description thereof is omitted.
  • the biological information recording unit 21 calculates a blood pressure value P in addition to the heart rate R, and also records the blood pressure value P as biological information.
  • the biological information recording unit 21 accumulates and manages the blood pressure value P together with time information in a non-volatile memory. In the present embodiment, using the negative correlation between the pulse wave propagation time Tp until the pulse is propagated from the cardiac output to the peripheral, and the blood pressure value P, the blood pressure from the pulse wave propagation time Tp is used. Calculate the value P.
  • FIG. 8 is a diagram for explaining a method of calculating the blood pressure value P.
  • (A) in the figure shows the pulse wave propagation time Tp according to the pulse wave and the electrocardiogram waveform
  • (b) shows the blood pressure value P according to the pulse wave propagation time Tp.
  • time t1 at which the peak value of the electrocardiogram waveform is shown is the time of cardiac output
  • time t2 at which the peak value of the pulse wave is shown is the time when the pulse wave reaches the fingertip.
  • the difference (t2-t1) between the peak time t2 of these pulse waves and the peak time t1 of the electrocardiogram waveform is the pulse wave propagation time Tp.
  • the biological information extraction unit 23 refers to the blood pressure value P within the predetermined post-deceleration stable period Ts recorded by the biological information recording unit 21 after the deceleration start time point tg, and the average change rate ⁇ ⁇ of the referred blood pressure value P And the standard deviation ⁇ .
  • FIG. 9 is a time chart showing the post-deceleration stable period Ts.
  • Th corresponds to the time from when deceleration is started to when the changed heart rate R starts to stabilize again.
  • the average change rate ⁇ and the standard deviation ⁇ of the blood pressure value P are extracted.
  • the above is the description of the process of extracting the average change rate ⁇ and the standard deviation ⁇ by the biological information extraction unit 23.
  • the driver state estimation unit 24 decelerates when the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is equal to or greater than a predetermined threshold Rt and the average change rate ⁇ is smaller than the predetermined threshold ⁇ t. It is presumed that the later driver is at rest.
  • the driver after deceleration is in a resting state Estimated to be in In the driver information acquisition unit 25, when the driver state estimation unit 24 estimates that the driver after deceleration is in the resting state, the blood pressure information, the electrocardiogram information, the heart rate information, the respiration information, and the pulse wave of the driver At least one of information, skin potential information, body temperature information, facial expression information, and speech information is acquired as driver information.
  • the driver state estimation process based on the block diagram of FIG.
  • FIG. 10 is a flowchart showing a driver state estimation process of the second embodiment.
  • the process of new step S202-S205 is added and the process of other steps S101-S120 and S100 was mentioned above The description is omitted because it is the same as the first embodiment.
  • step S201 it is determined whether (Th + Ti) has elapsed from the deceleration start time tg. Th corresponds to the time from the start of deceleration until the changed heart rate R begins to stabilize again.
  • Th corresponds to the time from the start of deceleration until the changed heart rate R begins to stabilize again.
  • (Th + Ti) has not yet elapsed, it is determined that the post-deceleration stable period Ts has not ended and the average change rate ⁇ and the standard deviation ⁇ of the blood pressure value P can not be extracted.
  • (Th + Ti) has elapsed, it is determined that the post-deceleration stable period Ts ends and the average change rate ⁇ and the standard deviation ⁇ of the blood pressure value P can be extracted, and the process proceeds to step S115.
  • Step S202 corresponds to the processing in the biological information extraction unit 23, and refers to the blood pressure value referred to with reference to the blood pressure value P in the post-deceleration stable period Ts recorded in the biological information recording unit 21 after the deceleration start time tg.
  • Step S203 corresponds to the process in the driver state estimation unit 24, and determines whether the average change rate ⁇ of the blood pressure value P is smaller than a predetermined threshold value tt.
  • step S117 when the average change rate ⁇ ⁇ of the blood pressure value P is smaller than the threshold value tt, it is estimated that the driver after deceleration is surely in the resting state, and the process proceeds to step S117 described above.
  • the average change rate ⁇ ⁇ of the blood pressure value P is equal to or more than the threshold value tt, it is estimated that the driver after deceleration may not be in the resting state, and the process proceeds to step S204.
  • Step S204 corresponds to the process in the driver state estimation unit 24, and determines whether the standard deviation ⁇ of the blood pressure value P is smaller than a predetermined threshold value ⁇ t.
  • a predetermined threshold value ⁇ t it is estimated that the driver after deceleration is surely in the resting state, and the process proceeds to step S117 described above.
  • the standard deviation ⁇ of the blood pressure value P is equal to or greater than the threshold value ⁇ t, it is estimated that the driver after deceleration may not be in the resting state, and the process proceeds to step S118 described above.
  • Step S205 corresponds to the processing in the driver information acquisition unit 25, and includes blood pressure information, electrocardiogram information, heart rate information, respiration information, pulse wave information, skin potential information, body temperature information, facial expression information, and speech information of the driver.
  • the process proceeds to step S119 described above. The above is the description of the driver state estimation process based on the flowchart of FIG.
  • step S116 When the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is equal to or greater than the threshold Rt (the determination in step S116 is “Yes”), and the average change rate ⁇ of the blood pressure value P is smaller than the threshold tt. (The determination in step S203 is “Yes”), it is estimated that the driver after deceleration is surely in the resting state.
  • the driver after deceleration is surely in the resting state.
  • the driver after deceleration enters a resting state by considering not only the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra, but also the average change rate ⁇ and the standard deviation ⁇ of the blood pressure P. It can be estimated more accurately whether there is any.
  • the information includes the blood pressure information, the electrocardiogram information, the heart rate information, the respiration information, the pulse wave information, the skin potential information, the body temperature information, the facial expression information, the speech information, and the like of the driver.
  • the processes of steps S203 and S204 are included in the “driver state estimation unit”, and the process of step S205, which is the process of the driver information acquisition unit 25, corresponds to the “driver information acquisition unit”.
  • the driver state estimation device In the driver state estimation device according to the present embodiment, the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is larger than the threshold Rt and the living body is processed by the driver state estimation unit 24 Among the blood pressure values P recorded in the information recording unit 21, the blood pressure value P from the stable period reference start time ts1 to the stable period reference end time ts2 is referred to, and the average change rate ⁇ of the referred blood pressure value P is from the threshold value tt When it is also small, it is estimated that the driver after deceleration is at rest.
  • the difference ⁇ R between the pre-deceleration heart rate Rb and the post-deceleration heart rate Ra is larger than the threshold Rt and the living body is processed by the driver state estimation unit 24
  • the blood pressure value P from the stable period reference start time ts1 to the stable period reference end time ts2 is referred to, and the standard deviation ⁇ of the referred blood pressure value P is higher than the threshold value ⁇ t.
  • the driver state estimation unit 24 estimates that the driver after deceleration is in the resting state by the processing in the driver information acquisition unit 25, At least one of the driver's blood pressure information, electrocardiogram information, heart rate information, respiration information, pulse wave information, skin potential information, body temperature information, facial expression information, and speech information is acquired as the driver information.
  • the driver information As described above, when it is estimated that the driver after deceleration is in the resting state, it is possible to grasp the normal state in which the driver is relaxing by acquiring the driver information.
  • FIG. 11 is a block diagram showing a driver's state estimation process of the third embodiment.
  • the driver information recording unit 26 is newly added, and the other processes are the same as in the second embodiment described above, and thus the description thereof is omitted.
  • the driver information recording unit 26 records the driver information acquired by the driver information acquiring unit 25 in association with date and time information and current position information of the host vehicle. This recording is not limited to recording in a car-mounted storage device such as a DVD-ROM drive, hard disk drive, flash memory drive, etc., and may be recorded on a portable information terminal or other portable audio device provided with a communication function. It is also good.
  • the driver information recording unit 26 further classifies the driver information based on the date and time information and the current position information, refers to the driver information recorded in the past, and determines the date, time zone, traveling route, etc. The driver information under the same condition is extracted, and the transition of the driver information in the resting state is extracted. In addition, driver information with the same conditions such as date, time zone, travel route, etc. is extracted to estimate the driver's state in the future. The above is the description of the driver state estimation process based on the block diagram of FIG.
  • FIG. 12 is a flowchart showing a driver state estimation process of the third embodiment.
  • a new process of step S301 is added after the process of step S205 described above, and the processes of steps S101 to S120, S100, and S201 to S205 are similar to those of the second embodiment described above. I omit explanation.
  • Step S301 corresponds to the processing in the driver information recording unit 26, and records the driver information acquired by the driver information acquiring unit 25 in association with date and time information and current position information of the host vehicle.
  • the process proceeds to step S119.
  • the above is the description of the driver state estimation process based on the flowchart of FIG.
  • step S301 Information and current position information are correlated and recorded. Therefore, when extracting past driver information later according to date and time information and current position information, the transition of the driver state is analyzed, and it is estimated what the driver state will change in the future.
  • the driver's state estimation apparatus uses the processing by the driver's information recording unit 26 to make the driver's information acquired by the driver's information acquisition unit 25 date / time information and current position information of the host vehicle And record.
  • the driver information when it is estimated that the driver is surely in the resting state is recorded, the driver information of the past is later extracted according to the date and time information and the current position information.
  • pulse wave sensor 11 pulse wave sensor 12 electrocardiograph 13 vehicle speed sensor 14 brake switch 15 acceleration sensor 16 navigation system 17 controller 21 biological information recording unit 22 deceleration start point detection unit 23 biological information extraction unit 24 driver state estimation unit 25 driver information acquisition unit 26 Driver information recording unit

Abstract

 運転者の安静状態を推定する際の推定精度を向上させる。 運転者の心拍数Rを記録し、走行状態にある車両が減速を開始して停止した際の減速開始時点tgを検出する。また、減速開始時点tgよりも以前に生体情報記録部(21)で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速前心拍数Rbを抽出する。また、減速開始時点tgよりも後に生体情報記録部(21)で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速後心拍数Raを抽出する。そして、生体情報抽出部(23)で抽出した減速前心拍数Rb及び減速後心拍数Raを比較して運転者の減速後の安静状態を推定する。すなわち、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが予め定めた閾値Rt以上であるときに、減速後の運転者が安静状態にあると推定する。

Description

運転者状態推定装置、運転者状態推定方法
 本発明は、運転者状態推定装置、及び運転者状態推定方法に関するものである。
 特許文献1に記載された従来技術は、現在位置周辺に存在する施設を検索して提供するナビゲーション装置であって、搭乗者の血圧、脈拍、体温等の生体情報を測定し、搭乗者の健康状態に応じた施設情報を提供している。
特開2007-47196号公報
 ところで、生体情報の一つである血圧は、測定対象者が安静状態にないと、平常時の値を把握することができない。例えば、運動後、食後、喫煙時、寒冷時等は一般に血圧は高くなり、また感情の起伏に伴い興奮状態や緊張状態にあるときも一般に血圧は高くなる。したがって、平常時の血圧値を把握するには、先ず測定対象者が身体的また精神的な安静状態にあるか否かを把握しなければならないが、測定対象者が安静状態にあることを正確に推定すること自体が難しい。特に運転者については、走行中の血圧変動が大きく、車両を停止させたときであっても安静状態にあるとは限らない。
 本発明の課題は、運転者の安静状態を推定する際の推定精度を向上させることである。
 本発明の一態様に係る運転者状態推定装置は、運転者の生体情報を記録しておき、走行状態にある車両が減速を開始して停止した際の、減速開始時点を検出する。そして、減速開始時点よりも以前に記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速前生体情報を抽出すると共に、減速開始時点よりも後に記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速後生体情報を抽出する。そして、抽出した減速前生体情報及び減速後生体情報を比較することにより、減速後の運転者が安静状態にあるか否かを推定する。
 本発明によれば、減速開始時点よりも以前の減速前生体情報と、減速開始時点よりも後の減速後生体情報と、を比較して減速後の運転者が安静状態にあるか否かを推定するので、推定精度を向上させることができる。すなわち、車両減速に伴って運転者の生体情報が変化すると、その後、運転者の生体情報が一様に安定するという傾向に着目し、減速前生体情報と減速後生体情報とを比較することにより、減速後の運転者が安静状態にあるか否かを推定することができる。
運転者状態推定装置の概略構成図である。 運転者状態推定処理を示すブロック図である。 減速前比較期間Tb、及び減速後比較期間Taを示すタイムチャートである。 安静状態の推定について説明した図である。 運転者状態推定処理を示すフローチャートである。 反応時間Tx、及び減速開始時点tgを示すタイムチャートである。 第2実施形態の運転者状態推定処理を示すブロック図である。 血圧値Pの算出手法について説明した図である。 減速後安定期間Tsを示すタイムチャートである。 第2実施形態の運転者状態推定処理を示すフローチャートである。 第3実施形態の運転者状態推定処理を示すブロック図である。 第3実施形態の運転者状態推定処理を示すフローチャートである。
 以下、本発明の実施形態を図面に基づいて説明する。
《第1実施形態》
 《構成》
 本実施形態は、運転者の安静状態を推定するものである。
 図1は、運転者状態推定装置の概略構成図である。
 運転者状態推定装置は、自動車に搭載されており、脈波センサ11と、心電センサ12と、車速センサ13と、ブレーキスイッチ14と、加速度センサ15と、ナビゲーションシステム16と、コントローラ17と、を備えている。
 脈波センサ11は、運転者の脈波(容積脈波)を検出する。脈波とは、心臓の拍動に伴う末梢動脈血管の容積変化を表す生体情報である。この脈波センサ11は、近赤外波長光が生体を透過し血中ヘモグロビンに吸収される特性を利用したものであり、赤外光の発光素子と受光素子とを組み合わせた光電式のセンサからなる。具体的には、例えばステアリングホイールの把持部に設けられており、運転者の掌や指尖に対して赤外光を照射し、反射した散乱光の光量に応じた電圧信号をコントローラ17に入力する。コントローラ17は、入力された電圧信号から脈波を判断する。
 心電計12は、運転者の心電波形を検出する。この心電計12では、例えばシートの座面や背面等に複数の電極を設けてあり、運転者の心筋が伸縮するときの刺激伝導に伴う脱分極によって、各電極間に生じる電位差信号をコントローラ17に入力する。コントローラ17は、入力された電位差信号から心電波形を判断する。なお、運転者の皮膚と電極との間に、衣類や生地が介在するため、ラプラシアン電極配列法を採用したり、容量性計測回路の入力インピーダンスを高くしたりすることが望ましい。
 本実施形態の運転者状態推定装置は、車両搭載を前提としており、脈波センサ11や心電計12は、運転者を拘束することなく連続的に生体情報を取得することが望ましいため、ステアリングホイールの把持部やシートの座面や背面に設けている。運転者の生体情報を取得することができれば、脈波センサ11や心電計12を、体の一部が届く範囲で運転者が操作する箇所や、運転者の体を支持する箇所に設けてもよい。
 車速センサ13は、車体速度(以下、車速と称す)Vを検出する。この車速センサ13は、例えばトランスミッションにおける出力側のドリブンギヤに設けられ、センサロータの磁力線を検出回路によって検出しており、センサロータの回転に伴う磁界の変化をパルス信号に変換してコントローラ17に入力する。コントローラ17は、入力されたパルス信号から車速Vを判断する。
 ブレーキスイッチ14は、ブレーキのON/OFFを検出する。このブレーキスイッチ14は、例えば常閉型接点の検出回路を介して、ブレーキのON/OFFに応じた電圧信号をコントローラ17に入力する。コントローラ17は、入力された電圧信号からブレーキのON/OFFを判断する。
 加速度センサ15は、車両前後方向の加減速度Gを検出する。この加速度センサ15は、例えば固定電極に対する可動電極の位置変位を静電容量の変化として検出しており、加減速度と方向に比例した電圧信号に変換してコントローラ17に入力する。コントローラ17は、入力された電圧信号から加減速度Gを判断する。
 ナビゲーションシステム16は、自車両の現在位置と、その現在位置における道路地図情報を認識する。このナビゲーションシステム16は、GPS受信機を有し、三つ以上のGPS衛星から到着する電波の時間差に基づいて自車両の位置(緯度、経度、高度)と進行方向とを認識する。そして、DVD‐ROMドライブやハードディスクドライブに記憶された道路種別、道路線形、車線幅員、車両の通行方向等を含めた道路地図情報を参照し、自車両の現在位置における道路地図情報を認識しコントローラ17に入力する。なお、安全運転支援システム(DSSS:Driving Safety Support Systems)として、双方向無線通信(DSRC:Dedicated Short Range Communication)を利用し、各種データをインフラストラクチャから受信してもよい。
 なお、コントローラ17は、センサ類から各検出信号を直接入力しているが、これに限定されるものではない。コントローラ17を他のコントロールユニットと接続し、例えばCSMA/CA方式の多重通信(CAN:Controller Area Network)を介して各種データを受信してもよい。
 コントローラ17は、例えばマイクロコンピュータからなり、所定時間(例えば10msec)毎に運転者状態推定処理を実行する。
 図2は、運転者状態推定処理を示すブロック図である。
 コントローラ17で実行する運転者状態推定処理は、生体情報記録部21と、減速開始時点検出部22と、生体情報抽出部23と、運転者状態推定部24と、を備える。
 生体情報記録部21では、自律神経の影響を受ける運転者の循環器系のバイタルサインを生体情報として記録する。心拍数Rとは、一定の時間内に心臓が拍動する回数であり、一般に1分間あたりの拍動回数を指す。具体的には、脈波センサ11で検出した脈波、及び心電センサ12で検出した心電波形に基づいて心拍数Rを算出し、この心拍数Rを生体情報として記録する。生体情報記録部21は、心拍数Rを時刻情報と共に不揮発性メモリに蓄積し管理する。
 ここで、心拍数Rの算出について説明する。
 本実施形態では、心臓の拍出から抹消に伝播する脈動の周期時間を測定する。例えば、脈波又は心電波形におけるピーク値から次のピーク値までの時間(一拍分の時間)で、単位時間(例えば60秒)を除算することにより、心拍数(秒)を算出する。
 上記が生体情報記録部21による心拍数Rの記録処理である。
 減速開始時点検出部22では、走行状態にある車両が減速を開始して停止した際の減速開始時点tgを検出する。具体的には、車速センサ14で検出した車速Vと、ブレーキスイッチ14で検出したON/OFF状態等を読込む。そして、車速Vが0よりも大きい状態で、エンジンブレーキも含めてブレーキがOFFからONに切り替わり、車両の減速を経て車速Vが0になったときに、運転者の減速操作がONに切り替わった時点を、減速開始時点tgとして検出する。この減速開始時点tgは、運転者が車両の停止を必要と認識した時点に略相当する。
 生体情報抽出部23では、減速開始時点検出部22で検出した減速開始時点tgを基準とし、減速開始時点tgよりも以前に生体情報記録部21で記録された予め定めた減速前比較期間Tb内の心拍数Rを参照し、参照した心拍数Rの代表値である減速前心拍数Rbを抽出する。さらに、減速開始時点tgよりも後に生体情報記録部21で記録された予め定めた減速後比較期間Ta内の心拍数Rを参照し、参照した心拍数Rの代表値である減速後心拍数Raを抽出する。
 図3は、減速前比較期間Tb、及び減速後比較期間Taを示すタイムチャートである。
 先ず、減速開始時点tgから予め定めた時間Trだけ遡及した時点を減速前参照開始時点tb1として設定し(tg-Tr=tb1)、減速開始時点tgを減速前参照終了時点tb2として設定する(tg=tb2)。そして、減速前参照開始時点tb1から減速前参照終了時点tb2までの期間を、減速前比較期間Tbとして設定する(tb2-tb1=Tb=Tr)。
 また、減速開始時点tgから予め定めた時間Tfだけ経過した時点を減速後参照開始時点ta1として設定し(tg+Tf=ta1)、この減速後参照開始時点ta1から予め定めた時間Teだけ経過した時点を減速後参照終了時点ta2として設定する(ta1+Te=ta2)。ここで、Tfとは減速を開始してから心拍数Rが低下し始めるまでの時間に相当し、Teとは心拍数Rが低下し始めてから減速を開始する前の状態に復帰するまでの時間に相当する。そして、減速後参照開始時点ta1から減速後参照終了時点ta2までの期間を、減速後比較期間Taとして設定する(ta2-ta1=Ta=Te)。
 そして、減速前比較期間Tb内に記録された心拍数Rのデータ群を参照し、下記に示すように、心拍数Rの平均値を減速前心拍数Rbとして抽出する。なお、i=R1、R2、……、RNである。
  Rb=ΣR(i)/N
 また、減速後比較期間Ta内に記録された心拍数Rのデータ群を参照し、下記に示すように、心拍数Rの平均値を減速後心拍数Raとして抽出する。なお、i=R1、R2、……、RNである。
  Ra=ΣR(i)/N
 なお、本実施形態では、心拍数Rのデータ群を参照し、参照した心拍数Rの代表値として平均値を利用しているが、これに限定されるものはなく、他にも中間値や最大値などを代表値としてもよい。
 上記が生体情報抽出部23による減速前心拍数Rb及び減速後心拍数Raの抽出処理である。
 運転者状態推定部24では、生体情報抽出部23で抽出した減速前心拍数Rb及び減速後心拍数Raを比較することにより、運転者の減速後の安静状態を推定する。
 図4は、安静状態の推定について説明した図である。
 先ず、図中の(a)及び(b)に示すように、減速前心拍数Rbと減速後心拍数Raとの差分ΔR(=Rb-Ra)が、予め定めた閾値Rt以上であるときには、減速後の運転者が安静状態にあると推定する。ここで、(a)は減速行動に伴って上昇した血圧が、減速後に低下してくる場合であり、(b)は減速行動前から上昇していた血圧が、減速後に低下してくる場合である。
 一方、図中の(c)及び(d)に示すように、減速前心拍数Rbと減速後心拍数Raとの差分ΔR(=Rb-Ra)が、予め定めた閾値Rt未満であるときには、減速後の運転者が安静状態にはないと推定する。ここで、(c)は減速行動に伴って上昇した血圧が、減速後も維持している場合であり、(d)は減速行動前も減速後も血圧に変化が見られない場合である。
 なお、一つの閾値Rtを設定し、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが閾値Rtより大きいか否かで、減速後の運転者が安静状態にあるか否かの二段階で推定しているが、これに限定されるものではない。すなわち、複数の閾値を設定し、差分ΔRがどの範囲にあるかで、運転者の減速後の安静状態を、例えば『安定状態にある』、『やや安定状態にある』、『安定状態にない』等のように、三段階以上で推定してもよい。
 上記が、図2のブロック図に基づく運転者状態推定処理の説明である。
 次に、運転者状態推定処理をフローチャートに基づいて説明する。
 図5は、運転者状態推定処理を示すフローチャートである。
 先ずステップS101は、生体情報記録部21での処理に対応し、脈波センサ11で検出した脈波、及び心電センサ12で検出した心電波形に基づいて心拍数Rを算出し、この心拍数Rを生体情報として記録する。
 続くステップS102では、車速Vが0であるか否かを判定する。ここで、車速Vが0より大きいときには、車両は走行状態にあると判断してステップS103に移行する。一方、車速Vが0であるときには、車両が停止状態にあると判断してステップS109に移行する。
 ステップS103では、生体情報抽出部23で設定される減速前比較期間Tb及び減速前心拍数Rbをリセットする。
 続くステップS104では、生体情報抽出部23で設定される減速後比較期間Ta及び減速後心拍数Raをリセットする。
 続くステップS105では、エンジンブレーキも含めてブレーキがONであるか否かを判定する。ここで、ブレーキがOFFであるときには、減速操作はなされていないと判断してステップS100に移行する。一方、ブレーキがONであるときには、減速操作がなされていると判断してステップS107に移行する。なお、ポンピングブレーキ等、運転者が連続的にブレーキ操作のON/OFFを切替える場合もあるため、ブレーキスイッチ14がOFFからONになったときには、予め定めた時間が経過するまでは、ブレーキスイッチ14がONの状態であると見なすような対策をしてもよい。
 ステップS100は、アクセルがONであるか否かを判定する。ここで、アクセルがONであるときには、加速操作がなされていると判断してステップS106に移行する。一方、アクセルがOFFであるときには、加速操作はなされていないと判断して、そのまま所定のメインプログラムに復帰する。
 ステップS106は、減速開始時点検出部22での処理に対応し、減速開始時点tgをリセットしてから所定のメインプログラムに復帰する。
 ステップS107では、減速開始時点tgが未記録であるか否かを判定する。ここで、減速開始時点tgが未記録であるときには、ブレーキ操作を開始した直後であると判断してステップS108に移行する。一方、減速開始時点tgが記録済であるときには、ブレーキ操作を開始した直後ではないと判断して、そのまま所定のメインプログラムに復帰する。
 ステップS108では、走行状態にある車両が減速を開始したときの減速開始時点tgを記録してから所定のメインプログラムに復帰する。
 ステップS109では、減速開始時点tgが未参照であるか否かを判定する。ここで、減速開始時点tgが未参照であるときには、車両が停止した直後であると判断してステップS110に移行する。一方、減速開始時点tgを参照済であるときには、車両が停止した直後ではないと判断してステップS114に移行する。
 ステップS110は、減速開始時点検出部22での処理に対応し、走行状態にある車両が減速を開始したときの減速開始時点tgの読出し(参照)を行う。
 続くステップS111は、生体情報抽出部23での処理に対応し、減速前比較期間Tbを設定する。すなわち、減速開始時点tgから予め定めた時間Trだけ遡及した減速前参照開始時点tb1を設定すると共に、減速開始時点tgを減速前参照終了時点tb2として設定し、これら減速前参照開始時点tb1から減速前参照終了時点tb2までを、減速前比較期間Tbとして設定する。
 続くステップS112は、生体情報抽出部23での処理に対応し、減速前比較期間Tb内に記録された心拍数Rのデータ群を参照し、心拍数Rの平均値を減速前心拍数Rbとして抽出する。
 続くステップS113は、生体情報抽出部23での処理に対応し、減速後比較期間Taを設定する。すなわち、減速開始時点tgから運転者の生体情報が安定するまでの所要時間Tfを設定し、減速開始時点tgから予め定めた時間Tfだけ経過した減速後参照開始時点ta1を設定すると共に、この減速後参照開始時点ta1から予め定めた時間Teだけ経過した減速後参照終了時点ta2を設定する。そして、減速後参照開始時点ta1から減速後参照終了時点ta2までの減速後比較期間Taを設定する。
 続くステップS114では、減速開始時点tgから(Tf+Te)が経過したか否かを判定する。(Tf+Te)は、減速を開始してから心拍数Rが低下し、そして減速を開始する前の状態に復帰するまでの時間に相当する。ここで、(Tf+Te)が未だ経過していないときには、減速後比較期間Taが終了しておらず減速後心拍数Raを抽出できないと判断して、そのまま所定のメインプログラムに復帰する。一方、(Tf+Te)が経過しているときには、減速後比較期間Taが終了しており減速後心拍数Raを抽出できると判断してステップS115に移行する。
 ステップS115は、生体情報抽出部23での処理に対応し、減速後比較期間Ta内に記録された心拍数Rのデータ群を参照し、心拍数Rの平均値を減速後心拍数Raとして抽出する。
 続くステップS116は、運転者状態推定部24での処理に対応し、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが予め定めた閾値Rt以上であるか否かを判定する。ここで、差分ΔRが予め定めた閾値Rt以上であるときには、減速後の運転者が安静状態にあると推定してステップS117に移行する。一方、差分ΔRが閾値Rt未満であるときには、減速後の運転者が安静状態にはないと推定してステップS118に移行する。
 ステップS117は、運転者状態推定部24での処理に対応し、減速後の運転者が安静状態にあるという推定結果を、例えば所定のドライブレコーダに履歴として記録してからステップS119に移行する。
 ステップS118は、運転者状態推定部24での処理に対応し、減速後の運転者が安静状態にはないという推定結果を、例えば所定のドライブレコーダに履歴として記録してからステップS119に移行する。
 ステップS119では、生体情報抽出部23で設定される減速前比較期間Tb及び減速前心拍数Rbをリセットしてから所定のメインプログラムに復帰する。
 続くステップS120では、生体情報抽出部23で設定される減速後比較期間Ta及び減速後心拍数Raをリセットしてから所定のメインプログラムに復帰する。
 上記が、図6のフローチャートに基づく運転者状態推定処理の説明である。
 《作用》
 次に、第1実施形態の作用について説明する。
 生体情報の一つである血圧は、測定対象者が安静状態にないと、平常時の値を把握することができない。例えば、運動、食事、興奮状態や緊張状態、あるいは喫煙、寒冷等により血圧は高くなり、逆に、温暖や安静状態、リラックス等で血圧は低下することが知られている。この中で、精神的な要因以外のものについては、セルフコントロールが可能であるが、精神的な要因のものについては、セルフコントロールのみでは十分でない場合がある。
 また、血圧測定用の腕帯を装着しただけで、血圧が上がってしまうような人もおり、何度も測定をしなければ、本当の安静状態の血圧値が測定できない場合がある。そこで、血圧を測定する前に使用者は数分間にわたり休息などして各種変動要因を緩和した上で、測定数値の精度を確保する必要があり、また各種変動要因は使用者の身体上の運動や心理上の感情の起伏に影響されることも考慮しなければならない。このため、生体情報を測定するにあたり、精度良く安静状態にあるときの生体情報を測定することは難しく、重要な課題となっている。
 そこで、本実施形態では、車両減速に伴って運転者の心拍数Rが変化すると、その後、運転者の心拍数Rが一様に安定するという傾向に着目し、減速前心拍数Rbと減速後心拍数Raとを比較することにより、減速後の運転者が安静状態にあるか否かを推定する。
 先ず運転者の脈波と心電波形とに基づいて、運転者の循環器系のバイタルサインである心拍数Rを算出し時刻情報と共に記録する(ステップS101)。本実施形態では、車両減速に伴って運転者の心拍数Rが変化すると、その後、運転者の心拍数Rが一様に安定するという傾向に着目し、車両停止に先立ってなされた減速開始時点tgよりも前と後で、運転者の心拍数Rがどのように変化するかを観察することで、減速後の運転者の安静状態を推定する。
 先ず、車速Vが0より大きい状態で(ステップS102の判定が“No”)、ブレーキがOFFからONに切り替わったときに(ステップS105の判定が“Yes”)、その時点を減速開始時点tgとして記録しておく(ステップS108)。そして、その減速操作によって車両が停止した車両停止時点tsで(ステップS102の判定が“Yes”)、記録された減速開始時点tgの読出しを行う(ステップS110)。
 そして、図3に示すように、減速開始時点tg、及び予め定めた時間Trに従って、減速前参照開始時点tb1、及び減速前参照終了時点tb2を設定し、この減速前参照開始時点tb1から減速前参照終了時点tb2までの期間を、減速前比較期間Tbとして設定する(ステップS111)。そして、減速前比較期間Tb内の心拍数Rを参照し、心拍数Rのデータ群の平均値を、減速前心拍数Rbとして抽出する(ステップS112)。この減速前比較期間Tbでは、血圧値及び心拍数も共に安定状態にある。
 また、図4に示すように、減速開始時点tg、予め定めた時間Tf、及び予め定めた時間Teに従って、減速後参照開始時点ta1、及び減速後参照終了時点ta2を設定し、この減速後参照開始時点ta1から減速後参照終了時点ta2までの期間を、減速後比較期間Taとして設定する(ステップS113)。ここで、減速開始時点tgから車両停止時点tsまでの期間は、一般に心拍数に大きな変動はないものの、減速操作に伴って血圧が上昇する傾向にある。そして、車両が完全に停止すると、血圧は上昇した状態から低下に転じ、やがて安定状態へと戻る。一方、心拍数Rも一旦は低下するものの、再び上昇に転じ、やがて安定状態へと戻る。
 そして、減速開始時点tgから(Tf+Te)が経過するまで(ステップS114の判定が“No”)、つまり減速後比較期間Taにおける心拍数Rのデータ収集が完了するまでは待機する。そして、(Tf+Te)が経過したら(114Sの判定が“Yes”)、減速後比較期間Ta内の心拍数Rを参照し、心拍数Rのデータ群の平均値を、減速後心拍数Raとして抽出する(ステップS115)。この減速後比較期間Taでは、心拍数R及び心拍数も共に安定状態にある。
 そして、図4の(a)又は(b)に示すように、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが、予め定めた閾値Rt以上であるときには(ステップS116の判定が“Yes”)、減速後の運転者が安静状態にあると推定する(ステップS117)。一方、図4の(c)又は(d)に示すように、差分ΔRが閾値Rtよりも小さいときには、減速後の運転者が安静状態にはないと推定する(ステップS118)。このように、減速前心拍数Rbと減速後心拍数Raとを比較することにより、減速後の運転者が安静状態にあるか否かを精度よく推定することができる。また、減速前心拍数Rbと減速後心拍数Raとの差分ΔRの大きさで、安静状態であるか否かを推定しているので、安静状態であるか否かを、容易に推定することができる。
 また、減速開始時点tg、及び予め定めた時間Trに応じて減速前比較期間Tbを設定し、その減速前比較期間Tbに記録された心拍数Rのデータ群を参照することで、減速開始前に安定状態にあると見なせる信頼度の高い減速前心拍数Rbを容易に抽出することができる。また、減速前比較期間Tbに記録された心拍数Rのデータ群の平均値を減速前心拍数Rbとして抽出することで、減速前比較期間Tbに観測されたデータの分散度合を均した統計的な代表値を容易に抽出することができる。
 また、減速開始時点tg、予め定めた時間Tf、及び予め定めた時間Teに応じて減速後比較期間Taを設定し、その減速後比較期間Taに記録された心拍数Rのデータ群を参照することで、一般的に減速行動後に低下する信頼度の高い減速後心拍数Raを容易に抽出することができる。また、減速後比較期間Taに記録された心拍数Rのデータ群の平均値を減速後心拍数Raとして抽出することで、減速後比較期間Taに観測されたデータの分散度合を均した統計的な代表値を容易に抽出することができる。
 《応用例1》
 本実施形態では、運転者のブレーキがONに切り替わった時点を、減速開始時点tgとして検出しているが、運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間Txを加味して、減速開始時点tg′を検出してもよい。
 先ず、運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間Txを予め設定する。この反応時間とは、車両停止の必要を認識してから足を動かすまでの反射時間(例えば0.4~0.5秒)と、アクセルペダルからブレーキペダルへの踏替え時間(例えば0.2秒)と、ブレーキペダルを踏み始めてブレーキスイッチ14がOFFに切り替わるまでの踏込み時間(例えば0.1~0.3秒)とを加算した時間であり、Txは約0.7~1.0秒となる。
 図6は、反応時間Tx、及び減速開始時点tgを示すタイムチャートである。
 減速開始時点検出部22では、ブレーキスイッチ14がONに切り替わった時点tgから反応時間Txだけ遡及した時点を、減速開始時点tg′として検出する(tg-Tx=tg′)。
 生体情報抽出部23では、減速開始時点tg′から予め定めた時間Trだけ遡及した時点を減速前参照開始時点tb1として設定する(tg′-Tr=tb1)。また、減速開始時点tg′から予め定めた時間Tfだけ経過した時点を減速後参照開始時点ta1として設定する(tg′+Tf=ta1)。
 次に、上記応用例の作用について説明する。
 運転者が車両停止の必要を認識した時点と、ブレーキスイッチ14がONに切り替わった時点との間には、認知・判断・行動に伴う微小な時間差(ロスタイム)がある。このため、ブレーキスイッチ14がONに切り替わった減速開始時点tgを基準にして、予め定めた時間Tf及びTeによって減速後比較期間Taを設定すると、減速後参照開始時点ta1の直前の心拍数Rは、既に低下し始めている可能性がある。この場合、既に低下し始めている心拍数Rが減速後比較期間Taから外れた状態で減速後心拍数Raを抽出することになり、安静状態の推定精度に影響を与えてしまう。
 したがって、安静状態の推定精度を向上させるには、減速前比較期間Tb及び減速後比較期間Taを的確に設定することが必要であり、そのためにも減速開始時点tg′を正確に検出することが望まれる。
 そこで、本応用例のように、運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間Txを設定し、ブレーキスイッチ14がONに切り替わった時点tgから反応時間Txだけ遡及した時点を減速開始時点tg′として検出する。これにより、減速開始時点tg′は、運転者が車両停止の必要を認識した時点に近似するようになるため、減速前比較期間Tb及び減速後比較期間Taを的確に設定することができ、延いては安静状態の推定精度を向上させることができる。
 以上、生体情報記録部21での処理となるステップS101の処理が「生体情報記録部」に対応し、減速開始時点検出部22での処理となるステップS108、S110の処理が「減速開始時点検出部」に対応する。また、生体情報抽出部23での処理となるステップS110~S115の処理が「生体情報抽出部」に対応し、運転者状態推定部24での処理となるステップS116~S118の処理が「運転者状態推定部」に対応する。
 《効果》
 次に、第1実施形態における主要部の効果を記す。
(1)本実施形態に係る運転者状態推定装置は、生体情報記録部21での処理により、運転者の生体情報を記録し、減速開始時点tg検出部22での処理により、走行状態にある車両が減速を開始して停止した際の減速開始時点tgを検出する。また、生体情報抽出部23での処理により、減速開始時点tgよりも以前に生体情報記録部21で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速前心拍数Rbを抽出する。また、減速開始時点tgよりも後に生体情報記録部21で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速後心拍数Raを抽出する。そして、運転者状態推定部24での処理により、生体情報抽出部23で抽出した減速前心拍数Rb及び減速後心拍数Raを比較して減速後の運転者が安静状態にあるか否かを推定する。
 このように、減速開始時点tgよりも以前に安定状態にあった減速前心拍数Rbと、減速開始時点tgよりも後に変化し得る減速後心拍数Raと、を比較して運転者の安静状態を推定するので、推定精度を向上させることができる。すなわち、車両減速に伴って運転者の心拍数Rが低下すると、その後、運転者の心拍数Rが一様に安定するという傾向に着目し、安定状態にあると見なせる減速前心拍数Rbと、変化し得る減速後心拍数Raとを比較することにより、減速後の運転者が安静状態にあるか否かを精度よく推定することができる。
(2)本実施形態に係る運転者状態推定装置は、運転者状態推定部24での処理により、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが予め定めた閾値Rt以上であるときに、減速後の運転者が安静状態にあると推定する。
 このように、減速前心拍数Rbと減速後心拍数Raとの差分ΔRの大きさで、減速後の運転者が安静状態にあるか否かを推定しているので、安静状態にあるか否かを、容易に推定することができる。
(3)本実施形態に係る運転者状態推定装置は、生体情報抽出部23での処理により、減速開始時点tgから予め定めた時間Trだけ遡及した時点を減速前参照開始時点tb1として設定し、減速開始時点tgを減速前参照終了時点tb2として設定する。そして、生体情報記録部21に記録された心拍数Rのうち、減速前参照開始時点tb1から減速前参照終了時点tb2までの心拍数Rを参照し、参照した心拍数Rの代表値である減速前心拍数Rbを抽出する。
 このように、減速前比較期間Tbに記録された心拍数Rのデータ群を参照することで、減速開始前に安定状態にあると見なせる信頼度の高い減速前心拍数Rbを容易に抽出することができる。
(4)本実施形態に係る運転者状態推定装置は、生体情報抽出部23での処理により、減速開始時点tgから予め定めた時間Tfだけ経過した時点を減速後参照開始時点ta1として設定し、減速後参照開始時点ta1から予め定めた時間Teだけ経過した時点を減速後参照終了時点ta2として設定する。そして、生体情報記録部21に記録された心拍数Rのうち、減速後参照開始時点ta1から減速後参照終了時点ta2までの心拍数Rを参照し、参照した心拍数Rの代表値である減速後心拍数Raを抽出する。
 このように、減速後比較期間Taに記録された心拍数Rのデータ群を参照することで、車両停止後に安定状態にあると見なせる信頼度の高い減速後心拍数Raを容易に抽出することができる。
(5)本実施形態に係る運転者状態推定装置は、生体情報抽出部23での処理により、減速開始時点tgよりも以前に生体情報記録部21で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの平均値を減速前心拍数Rbとして抽出する。また、減速開始時点tgよりも後に生体情報記録部21で記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの平均値を減速後心拍数Raとして抽出する。
 このように、減速前比較期間Tbに記録された心拍数Rのデータ群の平均値を減速前心拍数Rbとして抽出することで、減速前比較期間Tbに観測されたデータの分散度合をならした統計的な代表値を容易に抽出することができる。また、減速後比較期間Taに記録された心拍数Rのデータ群の平均値を減速後心拍数Raとして抽出することで、減速後比較期間Taに観測されたデータの分散度合をならした統計的な代表値を容易に抽出することができる。
(6)本実施形態に係る運転者状態推定装置は、生体情報記録部21での処理により、運転者の心拍数Rを生体情報として記録する。
 このように、自律神経の影響を受ける心拍数Rを記録することで、減速後の運転者が安静状態にあるか否かを精度よく推定することができる。
(7)本実施形態に係る運転者状態推定装置は、減速開始時点検出部22での処理により、運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間Txを予め設定する。そして、運転者が減速操作を開始した時点tgから反応時間Txだけ遡及した時点を、減速開始時点tg′として検出する。
 このように、運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間Txを加味して減速開始時点tg′を検出することで、減速後比較期間Taを的確に設定することができ、延いては安静状態の推定精度を向上させることができる。
(8)本実施形態に係る運転者状態推定方法は、運転者の心拍数Rを記録しておき、走行状態にある車両が減速を開始して停止した際の減速開始時点tgを検出する。そして、減速開始時点tgよりも以前に記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速前心拍数Rbを抽出すると共に、減速開始時点tgよりも後に記録された予め定めた期間内の心拍数Rを参照し、参照した心拍数Rの代表値である減速後心拍数Raを抽出する。そして、減速前心拍数Rb及び減速後心拍数Raを比較することにより、減速後の運転者が安静状態にあるか否かを推定する。
 このように、減速開始時点tgよりも以前に安定状態にあった減速前心拍数Rbと、減速開始時点tgよりも後に変化し得る減速後心拍数Raと、を比較して運転者の安静状態を推定するので、推定精度を向上させることができる。すなわち、車両減速に伴って運転者の心拍数Rが低下すると、その後、運転者の心拍数Rが一様に安定するという傾向に着目し、安定状態にあると見なせる減速前心拍数Rbと、変化し得る減速後心拍数Raとを比較することにより、減速後の運転者が安静状態にあるか否かを精度よく推定することができる。
《第2実施形態》
 《構成》
 本実施形態は、減速後の運転者が安静状態にあるか否かを、より高精度に推定し、運転者が安静状態にあるときに、そのときの運転者情報を取得するものである。
 ここでは、前述した第1実施形態と異なる点について説明し、同一箇所については説明を省略する。
 以下、コントローラ17で実行する運転者状態推定処理について説明する。
 先ず、第2実施形態の運転者状態推定処理をブロック図に基づいて説明する。
 図7は、第2実施形態の運転者状態推定処理を示すブロック図である。
 ここでは、前述した生体情報記録部21、生体情報抽出部23及び運転者状態推定部24での処理に変更を加えると共に、新たに運転者情報取得部25を追加しており、その他の処理については、前述した第1実施形態と同様であるため、説明を省略する。
 生体情報記録部21では、心拍数Rの他に、血圧値Pを算出し、この血圧値Pも生体情報として記録する。生体情報記録部21は、血圧値Pを時刻情報と共に不揮発性メモリに蓄積し管理する。
 本実施形態では、心臓の拍出から抹消に脈が伝播するまでの脈波伝播時間Tpと、血圧値Pとの間に負の相関関係があることを利用し、脈波伝播時間Tpから血圧値Pを算出する。
 図8は、血圧値Pの算出手法について説明した図である。
 図中の(a)は脈波及び心電波形に応じた脈波伝播時間Tpを示し、(b)は脈波伝播時間Tpに応じた血圧値Pを示している。また、(a)において、心電波形のピーク値を示す時点t1は心臓の拍出時点であり、脈波のピーク値を示す時点t2は指先に脈波が到達した時点である。これら脈波のピーク時点t2と心電波形のピーク時点t1との差(t2-t1)が脈波伝播時間Tpである。そして、図中の(b)に示すように、脈波伝播時間Tpと血圧値Pとの間には、P=α×Tp+βという関係がある。この関係式に従い、脈波伝播時間Tpに応じて血圧値Pを算出する。
 上記が生体情報記録部21による血圧値Pの記録処理である。
 生体情報抽出部23では、減速開始時点tgよりも後に生体情報記録部21で記録された予め定めた減速後安定期間Ts内の血圧値Pを参照し、参照した血圧値Pの平均変化率ρ及び標準偏差σを抽出する。
 図9は、減速後安定期間Tsを示すタイムチャートである。
 減速開始時点tgから予め定めた時間Thだけ経過した時点を安定期参照開始時点ts1として設定し(tg+Th=ts1)、この安定期参照開始時点ts1から予め定めた時間Tiだけ経過した時点を安定期参照終了時点ts2として設定する(ts1+Ti=ts2)。ここで、Thとは減速を開始してから変化した心拍数Rが再び安定し始めるまでの時間に相当する。そして、安定期参照開始時点ts1から安定期参照終了時点ts2までの期間を、減速後安定期間Tsとして設定する(ts2-ts1=Ts=Ti)。
 そして、減速後安定期間Ts内に記録された血圧値Pのデータ群を参照し、血圧値Pの平均変化率ρ及び標準偏差σを抽出する。
 上記が、生体情報抽出部23による平均変化率ρ及び標準偏差σの抽出処理の説明である。
 運転者状態推定部24では、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが予め定めた閾値Rt以上で、且つ平均変化率ρが予め定めた閾値ρtよりも小さいときに、減速後の運転者が安静状態にあると推定する。また、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが予め定めた閾値Rt以上で、且つ標準偏差σが予め定めた閾値σtよりも小さいときに、減速後の運転者が安静状態にあると推定する。
 運転者情報取得部25では、運転者状態推定部24で減速後の運転者が安静状態にあると推定されたときに、運転者の血圧情報、心電情報、心拍情報、呼吸情報、脈波情報、皮膚電位情報、体温情報、表情情報、及び発話情報の少なくとも一つを運転者情報として取得する。
 上記が、図7のブロック図に基づく運転者状態推定処理の説明である。
 次に、第2実施形態の運転者状態推定処理をフローチャートに基づいて説明する。
 図10は、第2実施形態の運転者状態推定処理を示すフローチャートである。
 ここでは、前述したステップS114の処理を新たなステップS201の処理に変更すると共に、新たなステップS202~S205の処理を追加しており、その他のステップS101~S120、S100の処理については、前述した第1実施形態と同様であるため、説明を省略する。
 ステップS201では、減速開始時点tgから(Th+Ti)が経過したか否かを判定する。Thは減速を開始してから変化した心拍数Rが再び安定し始めるまでの時間に相当する。ここで、(Th+Ti)が未だ経過していないときには、減速後安定期間Tsが終了しておらず血圧値Pの平均変化率ρ及び標準偏差σを抽出できないと判断して、そのまま所定のメインプログラムに復帰する。一方、(Th+Ti)が経過しているときには、減速後安定期間Tsが終了しており血圧値Pの平均変化率ρ及び標準偏差σを抽出できると判断してステップS115に移行する。
 ステップS202は、生体情報抽出部23での処理に対応し、減速開始時点tgよりも後に生体情報記録部21で記録された減速後安定期間Ts内の血圧値Pを参照し、参照した血圧値Pの平均変化率ρ及び標準偏差σを抽出してから前述したステップS116に移行する。
 ステップS203は、運転者状態推定部24での処理に対応し、血圧値Pの平均変化率ρが予め定めた閾値ρtよりも小さいか否かを判定する。ここで、血圧値Pの平均変化率ρが閾値ρtよりも小さいときには、減速後の運転者が確実に安静状態にあると推定して前述したステップS117に移行する。一方、血圧値Pの平均変化率ρが閾値ρt以上であるときには、減速後の運転者が安静状態にはない可能性があると推定してステップS204に移行する。
 ステップS204は、運転者状態推定部24での処理に対応し、血圧値Pの標準偏差σが予め定めた閾値σtよりも小さいか否かを判定する。ここで、血圧値Pの標準偏差σが閾値σtよりも小さいときには、減速後の運転者が確実に安静状態にあると推定して前述したステップS117に移行する。一方、血圧値Pの標準偏差σが閾値σt以上であるときには、減速後の運転者が安静状態にはない可能性があると推定して前述したステップS118に移行する。
 ステップS205は、運転者情報取得部25での処理に対応し、運転者の血圧情報、心電情報、心拍情報、呼吸情報、脈波情報、皮膚電位情報、体温情報、表情情報、及び発話情報の少なくとも一つを運転者情報として取得してから前述したステップS119に移行する。
 上記が、図10のフローチャートに基づく運転者状態推定処理の説明である。
 《作用》
 次に、第2実施形態の作用について説明する。
 本実施形態では、減速前心拍数Rbと減速後心拍数Raとの差分ΔRのみならず、血圧値Pの平均変化率ρ及び標準偏差σも加味して、減速後の運転者が安静状態にあるか否かを推定する。すなわち、減速開始時点tgから(Th+Ti)が経過したときに(ステップS201の判定が“Yes”)、血圧値Pの平均変化率ρ及び標準偏差σを抽出する(ステップS202)。
 そして、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが閾値Rt以上で(ステップS116の判定が“Yes”)、且つ血圧値Pの平均変化率ρが閾値ρtよりも小さいときに(ステップS203の判定が“Yes”)、減速後の運転者が確実に安静状態にあると推定する。このとき、血圧値Pの平均変化率ρが閾値ρt以上であっても(ステップS203の判定が“No”)、血圧値Pの標準偏差σが閾値σtよりも小さいときには(ステップS204の判定が“Yes”)、減速後の運転者が確実に安静状態にあると推定する。
 このように、減速前心拍数Rbと減速後心拍数Raとの差分ΔRのみならず、血圧値Pの平均変化率ρ及び標準偏差σも加味することで、減速後の運転者が安静状態にあるか否かをより正確に推定することができる。
 このように、減速後の運転者が確実に安静状態にあると推定されたときには、運転者がリラックスしており平常時の状態にあることを意味するので、このときに運転者の情報を取得しておく。例えば、運転者の血圧情報、心電情報、心拍情報、呼吸情報、脈波情報、皮膚電位情報、体温情報、表情情報、及び発話情報等である。これらの情報を取得しておくことで、運転者がリラックスしている平常時の状態を把握することができる。
 以上、ステップS203、S204の処理が「運転者状態推定部」に含まれ、運転者情報取得部25での処理となるステップS205の処理が「運転者情報取得部」に対応する。
 《効果》
 次に、第2実施形態における主要部の効果を記す。
(1)本実施形態に係る運転者状態推定装置は、運転者状態推定部24での処理により、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが閾値Rtよりも大きく、且つ生体情報記録部21に記録された血圧値Pのうち、安定期参照開始時点ts1から安定期参照終了時点ts2までの血圧値Pを参照し、参照した血圧値Pの平均変化率ρが閾値ρtよりも小さいときに、減速後の運転者が安静状態にあると推定する。
 このように、減速前心拍数Rbと減速後心拍数Raとの差分ΔRのみならず、血圧値Pの平均変化率ρも加味することで、減速後の運転者が安静状態にあるか否かをより正確に推定することができる。
(2)本実施形態に係る運転者状態推定装置は、運転者状態推定部24での処理により、減速前心拍数Rbと減速後心拍数Raとの差分ΔRが閾値Rtよりも大きく、且つ生体情報記録部21に記録された血圧値Pのうち、安定期参照開始時点ts1から安定期参照終了時点ts2までの血圧値Pを参照し、参照した血圧値Pの標準偏差σが閾値σtよりも小さいときに、減速後の運転者が安静状態にあると推定する。
 このように、減速前心拍数Rbと減速後心拍数Raとの差分ΔRのみならず、血圧値Pの標準偏差σも加味することで、減速後の運転者が安静状態にあるか否かをより正確に推定することができる。
(3)本実施形態に係る運転者状態推定装置は、運転者情報取得部25での処理により、運転者状態推定部24で減速後の運転者が安静状態にあると推定されたときに、運転者の血圧情報、心電情報、心拍情報、呼吸情報、脈波情報、皮膚電位情報、体温情報、表情情報、及び発話情報の少なくとも一つを運転者情報として取得する。
 このように、減速後の運転者が安静状態にあると推定されたときに、運転者情報を取得しておくことで、運転者がリラックスしている平常時の状態を把握することができる。
《第3実施形態》
 《構成》
 本実施形態は、減速後の運転者が安静状態にあると推定されたときに取得した運転者情報を記録し活用するものである。
 ここでは、前述した第2実施形態と異なる点について説明し、同一箇所については説明を省略する。
 以下、コントローラ17で実行する運転者状態推定処理について説明する。
 先ず、第3実施形態の運転者状態推定処理をブロック図に基づいて説明する。
 図11は、第3実施形態の運転者状態推定処理を示すブロック図である。
 ここでは、新たに運転者情報記録部26を追加しており、その他の処理については、前述した第2実施形態と同様であるため、説明を省略する。
 運転者情報記録部26では、運転者情報取得部25で取得した運転者情報に、日時情報、及び自車両の現在位置情報を対応付けて記録する。この記録は、DVD‐ROMドライブ、ハードディスクドライブ、フラッシュメモリドライブ等、車載の記憶装置での記録に限定されるものではなく、通信機能を備えた携帯情報端末や他のポータブルオーディオ等に記録してもよい。
 運転者情報記録部26では、さらに日時情報、及び現在位置情報に基づいて運転者情報を分類しておき、過去に記録された運転者情報を参照し、日付や時間帯、また走行経路等、同一条件となる運転者情報を抽出し、安静状態にある運転者情報の推移を抽出する。また、日付や時間帯、また走行経路等、同一条件となる運転者情報を抽出し、今後の運転者の状態を推定したりする。
 上記が図11のブロック図に基づく運転者状態推定処理の説明である。
 次に、第3実施形態の運転者状態推定処理をフローチャートに基づいて説明する。
 図12は、第3実施形態の運転者状態推定処理を示すフローチャートである。
 ここでは、前述したステップS205の処理後に、新たなステップS301の処理を追加しており、ステップS101~S120、S100、S201~S205の処理については、前述した第2実施形態と同様であるため、説明を省略する。
 ステップS301は、運転者情報記録部26での処理に対応し、運転者情報取得部25で取得した運転者情報に、日時情報、及び自車両の現在位置情報を対応付けて記録してから前述したステップS119に移行する。
 上記が、図12のフローチャートに基づく運転者状態推定処理の説明である。
 《作用》
 次に、第3実施形態の作用について説明する。
 減速後の運転者が確実に安静状態にあると推定されたときには、運転者がリラックスしており平常時の状態にあることを意味するので、このときに運転者の情報を取得し、それに日時情報や現在位置情報を対応付けて記録しておく(ステップS301)。
 したがって、後に日時情報や現在位置情報に応じて、過去の運転者情報を抽出するときに、運転者状態の推移を分析したり、また今後の運転者状態がどのようい変化するかを推定したりすることができる。
 以上、運転者情報記録部26での処理となるステップS301の処理が「運転者情報記録部」に対応する。
 《効果》
 次に、第3実施形態における主要部の効果を記す。
(1)本実施形態に係る運転者状態推定装置は、運転者情報記録部26での処理により、運転者情報取得部25で取得した運転者情報に、日時情報、及び自車両の現在位置情報を対応付けて記録する。
 このように、運転者が確実に安静状態にあると推定されたときの運転者情報を記録しておくことで、後に日時情報や現在位置情報に応じて、過去の運転者情報を抽出するときに、運転者状態の推移を分析したり、また今後の運転者状態がどのようい変化するかを推定したりすることができる。
 以上、本願が優先権を主張する日本国特許出願P2012-166225(2012年7月26日出願)の全内容は、ここに引用例として包含される。
 ここでは、限られた数の実施形態を参照しながら説明したが、権利範囲はそれらに限定されるものではなく、上記の開示に基づく実施形態の改変は、当業者にとって自明のことである。
11 脈波センサ
12 心電計
13 車速センサ
14 ブレーキスイッチ
15 加速度センサ
16 ナビゲーションシステム
17 コントローラ
21 生体情報記録部
22 減速開始点検出部
23 生体情報抽出部
24 運転者状態推定部
25 運転者情報取得部
26 運転者情報記録部

Claims (12)

  1.  運転者の生体情報を記録する生体情報記録部と、
     走行状態にある車両が減速を開始して停止した際の、減速開始時点を検出する減速開始時点検出部と、
     前記減速開始時点検出部で検出した減速開始時点よりも以前に前記生体情報記録部で記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速前生体情報を抽出すると共に、前記減速開始時点よりも後に前記生体情報記録部で記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速後生体情報を抽出する生体情報抽出部と、
     前記生体情報抽出部で抽出した減速前生体情報及び減速後生体情報を比較することにより、減速後の運転者が安静状態にあるか否かを推定する運転者状態推定部と、を備えることを特徴とする運転者状態推定装置。
  2.  前記運転者状態推定部は、
     前記減速前生体情報と前記減速後生体情報との差分が予め定めた差分用閾値よりも大きいときに、減速後の運転者が安静状態にあると推定することを特徴とする請求項1に記載の運転者状態推定装置。
  3.  前記生体情報抽出部は、
     前記減速開始時点から予め定めた時間だけ遡及した時点を減速前参照開始時点として設定し、
     前記減速開始時点を減速前参照終了時点として設定し、
     前記生体情報記録部に記録された生体情報のうち、前記減速前参照開始時点から前記減速前参照終了時点までの生体情報を参照し、参照した生体情報の代表値である前記減速前生体情報を抽出することを特徴とする請求項1に記載の運転者状態推定装置。
  4.  前記生体情報抽出部は、
     前記減速開始時点から予め定めた時間だけ経過した時点を減速後参照開始時点として設定し、
     前記減速後参照開始時点から予め定めた時間だけ経過した時点を減速後参照終了時点として設定し、
     前記生体情報記録部に記録された生体情報のうち、前記減速後参照開始時点から前記減速後参照終了時点までの生体情報を参照し、参照した生体情報の代表値である前記減速後生体情報を抽出することを特徴とする請求項1に記載の運転者状態推定装置。
  5.  前記運転者状態推定部は、
     前記減速開始時点から予め定めた時間だけ経過した時点を安定期参照開始時点として設定し、
     前記安定期参照開始時点から予め定めた時間だけ経過した時点を安定期参照終了時点として設定し、
     前記減速前生体情報と前記減速後生体情報との差分が前記差分用閾値よりも大きく、且つ前記生体情報記録部に記録された生体情報のうち、前記安定期参照開始時点から前記安定期参照終了時点までの生体情報を参照し、参照した生体情報の平均変化率が予め定めた平均変化率用閾値よりも小さいときに、減速後の運転者が安静状態にあると推定することを特徴とする請求項1に記載の運転者状態推定装置。
  6.  前記運転者状態推定部は、
     前記減速開始時点から予め定めた時間だけ経過した時点を安定期参照開始時点として設定し、
     前記安定期参照開始時点から予め定めた時間だけ経過した時点を安定期参照終了時点として設定し、
     前記減速前生体情報と前記減速後生体情報との差分が前記差分用閾値よりも大きく、且つ前記生体情報記録部に記録された生体情報のうち、前記安定期参照開始時点から前記安定期参照終了時点までの生体情報を参照し、参照した生体情報の標準偏差が予め定めた標準偏差用閾値よりも小さいときに、減速後の運転者が安静状態にあると推定することを特徴とする請求項1に記載の運転者状態推定装置。
  7.  前記生体情報抽出部は、
     前記減速開始時点よりも以前に前記生体情報記録部で記録された予め定めた期間内の生体情報を参照し、参照した生体情報の平均値を前記減速前生体情報として抽出すると共に、前記減速開始時点よりも後に前記生体情報記録部で記録された予め定めた期間内の生体情報を参照し、参照した生体情報の平均値を前記減速後生体情報として抽出することを特徴とする請求項1に記載の運転者状態推定装置。
  8.  前記生体情報記録部は、
     運転者の心拍数を前記生体情報として記録することを特徴とする請求項1に記載の運転者状態推定装置。
  9.  前記運転者状態推定部で減速後の運転者が安静状態にあると推定されたときに、運転者の血圧情報、心電情報、心拍情報、呼吸情報、脈波情報、皮膚電位情報、体温情報、表情情報、及び発話情報の少なくとも一つを運転者情報として取得する運転者情報取得部を備えることを特徴とする請求項1に記載の運転者状態推定装置。
  10.  前記運転者情報取得部で取得した前記運転者情報に、日時情報、及び自車両の現在位置情報を対応付けて記録する運転者情報記録部を備えることを特徴とする請求項9に記載の運転者状態推定装置。
  11.  前記減速開始時点検出部は、
     運転者が車両停止の必要を認識してから減速操作を開始するまでの反応時間を予め設定し、
     運転者が減速操作を開始した時点から前記反応時間だけ遡及した時点を、前記減速開始時点として検出することを特徴とする請求項1に記載の運転者状態推定装置。
  12.  運転者の生体情報を記録し、
     走行状態にある車両が減速を開始して停止した際の減速開始時点を検出し、
     前記減速開始時点よりも以前に記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速前生体情報を抽出すると共に、前記減速開始時点よりも後に記録された予め定めた期間内の生体情報を参照し、参照した生体情報の代表値である減速後生体情報を抽出し、
     前記減速前生体情報及び前記減速後生体情報を比較することにより、減速後の運転者が安静状態にあるか否かを推定することを特徴とする運転者状態推定方法。
     
PCT/JP2013/003747 2012-07-26 2013-06-14 運転者状態推定装置、運転者状態推定方法 WO2014017009A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2014526733A JP5854142B2 (ja) 2012-07-26 2013-06-14 運転者状態推定装置、運転者状態推定方法
EP13822977.8A EP2878263A4 (en) 2012-07-26 2013-06-14 DEVICE AND METHOD FOR ASSESSING THE STATUS OF A DRIVER
CN201380037074.6A CN104427936A (zh) 2012-07-26 2013-06-14 驾驶者状态推定装置、驾驶者状态推定方法
US14/415,063 US20150203121A1 (en) 2012-07-26 2013-06-14 Driver's state estimation apparatus and driver's state estimation method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-166225 2012-07-26
JP2012166225 2012-07-26

Publications (1)

Publication Number Publication Date
WO2014017009A1 true WO2014017009A1 (ja) 2014-01-30

Family

ID=49996837

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/003747 WO2014017009A1 (ja) 2012-07-26 2013-06-14 運転者状態推定装置、運転者状態推定方法

Country Status (5)

Country Link
US (1) US20150203121A1 (ja)
EP (1) EP2878263A4 (ja)
JP (1) JP5854142B2 (ja)
CN (1) CN104427936A (ja)
WO (1) WO2014017009A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7462300B2 (ja) 2020-05-08 2024-04-05 公立大学法人北九州市立大学 血圧測定装置、血圧測定システム、乗物、及び血圧測定方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6273311B2 (ja) * 2016-04-19 2018-01-31 Cocoro Sb株式会社 感情決定システム、システム及びプログラム
JP6694649B2 (ja) * 2016-07-07 2020-05-20 国立研究開発法人産業技術総合研究所 生理状態判定装置、生理状態判定方法、生理状態判定装置用プログラムおよび、生理状態判定システム
JP6765976B2 (ja) * 2017-01-04 2020-10-07 オムロン株式会社 血圧測定装置、システム、方法及びプログラム
JP7045639B2 (ja) * 2017-02-28 2022-04-01 パナソニックIpマネジメント株式会社 作業適正度判定システム
FR3067685B1 (fr) * 2017-06-19 2019-06-28 Peugeot Citroen Automobiles Sa Dispositif d’assistance d’un conducteur d’un vehicule pour effectuer des exercices physiques connecte a un serveur distant
KR20200038937A (ko) * 2017-08-08 2020-04-14 스미도모쥬기가이고교 가부시키가이샤 쇼벨, 쇼벨의 지원장치, 및 쇼벨의 관리장치
US11151865B2 (en) * 2018-03-28 2021-10-19 Robert Bosch Gmbh In-vehicle system for estimating a scene inside a vehicle cabin
CN109040455B (zh) * 2018-08-13 2021-12-14 青岛民航凯亚系统集成有限公司 一种来电处理方法、装置、终端及计算机可读存储介质
CN113119860B (zh) * 2021-05-18 2022-08-19 刘宇晟 一种基于云计算的司机智能辅助驾驶系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003061921A (ja) * 2001-08-30 2003-03-04 Mitsuba Corp 体調判別方法および体調判別装置
JP2007047196A (ja) 2005-08-05 2007-02-22 Aisin Aw Co Ltd ナビゲーション装置
JP2009213768A (ja) * 2008-03-12 2009-09-24 Denso Corp 運転者状態判定装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2817110B2 (ja) * 1993-11-17 1998-10-27 本田技研工業株式会社 車両用警報装置
JP2003118421A (ja) * 2001-10-12 2003-04-23 Pioneer Electronic Corp 生体状態測定装置及び方法、移動体用ナビゲーションシステム及び方法、ライブラリ装置並びにコンピュータプログラム
KR100495504B1 (ko) * 2002-12-12 2005-06-14 한국전자통신연구원 뇌파를 이용한 자동차 브레이크 제어 장치 및 제어 방법
US20080071177A1 (en) * 2005-04-28 2008-03-20 Pioneer Corporation Bioinformation Sensor
JP2007133486A (ja) * 2005-11-08 2007-05-31 Nissan Motor Co Ltd 運転支援装置
CN202010160U (zh) * 2010-09-20 2011-10-19 天津职业技术师范大学 基于方向盘握力和温度的驾驶员疲劳监测装置
JP5720462B2 (ja) * 2011-07-20 2015-05-20 日産自動車株式会社 運転者疲労度推定装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003061921A (ja) * 2001-08-30 2003-03-04 Mitsuba Corp 体調判別方法および体調判別装置
JP2007047196A (ja) 2005-08-05 2007-02-22 Aisin Aw Co Ltd ナビゲーション装置
JP2009213768A (ja) * 2008-03-12 2009-09-24 Denso Corp 運転者状態判定装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MOTOHIRO TAKIZAWA ET AL.: "The Psychological Influence on the Driver by the Change of Running Circumstance", THE JAPAN SOCIETY OF MECHANICAL ENGINEERS KOTSU-BUTSURYU BUMON TAIKAI KOEN RONBUNSHU, vol. 12TH, 8 December 2003 (2003-12-08), pages 233 - 236, XP008175674 *
See also references of EP2878263A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7462300B2 (ja) 2020-05-08 2024-04-05 公立大学法人北九州市立大学 血圧測定装置、血圧測定システム、乗物、及び血圧測定方法

Also Published As

Publication number Publication date
EP2878263A1 (en) 2015-06-03
US20150203121A1 (en) 2015-07-23
CN104427936A (zh) 2015-03-18
JP5854142B2 (ja) 2016-02-09
EP2878263A4 (en) 2015-08-26
JPWO2014017009A1 (ja) 2016-07-07

Similar Documents

Publication Publication Date Title
WO2014017009A1 (ja) 運転者状態推定装置、運転者状態推定方法
US10238304B2 (en) System and method for determining changes in a body state
JP5858157B2 (ja) ストレス状態推定装置
CN106963348B (zh) 基于行驶环境的用于车辆座椅的生物信号测量系统
US8548578B2 (en) Living body state monitor apparatus
JP4802842B2 (ja) 健康管理支援装置及び健康管理システム
JP5181741B2 (ja) 生体情報生成装置、生体情報管理システム
US20140303899A1 (en) System and method for biometric identification in a vehicle
JP5720462B2 (ja) 運転者疲労度推定装置
CN104507390A (zh) 驾驶者疲劳度推定装置及驾驶者疲劳度推定方法
US20130158415A1 (en) Ballistocardiogram analysis apparatus and method, and system for utilizing ballistocardiogram for vehicle using the same
JPWO2008149559A1 (ja) 脈波検出装置、機器制御装置および脈波検出方法
KR101731190B1 (ko) 심전도를 이용한 운전자 상태 감시 장치 및 그 방법
JP2015033457A (ja) 運転状態推定装置及び運転状態推定方法
KR20160078020A (ko) 심박 신호 기반 운전자 상태 판단 장치 및 방법
JP2009172205A (ja) 生体情報取得装置
JP2012083886A (ja) 漫然状態判定装置
US9545205B2 (en) Dozing prevention method, and dozing prevention device
US11517804B2 (en) Method and apparatus for false start detection
JP2015054219A (ja) 脱水状態判定装置
Cheol Jeong et al. Using individualized pulse transit time calibration to monitor blood pressure during exercise
JP5522210B2 (ja) 車両制御装置
CN212353957U (zh) 健康调节系统
JP6477792B2 (ja) 脱水状態判定装置
KR20060066822A (ko) 차량용 운전자 생체변화 자가감시 및 피드백 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13822977

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014526733

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14415063

Country of ref document: US

REEP Request for entry into the european phase

Ref document number: 2013822977

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2013822977

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE