WO2020003697A1 - 評価装置、評価方法 - Google Patents

評価装置、評価方法 Download PDF

Info

Publication number
WO2020003697A1
WO2020003697A1 PCT/JP2019/016182 JP2019016182W WO2020003697A1 WO 2020003697 A1 WO2020003697 A1 WO 2020003697A1 JP 2019016182 W JP2019016182 W JP 2019016182W WO 2020003697 A1 WO2020003697 A1 WO 2020003697A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
information
evaluation
control unit
wave
Prior art date
Application number
PCT/JP2019/016182
Other languages
English (en)
French (fr)
Inventor
高橋 修一
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US17/254,359 priority Critical patent/US11299165B2/en
Publication of WO2020003697A1 publication Critical patent/WO2020003697A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893Cars
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7275Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/746Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • B60W2556/55External transmission of data to or from the vehicle using telemetry

Definitions

  • the present technology relates to an evaluation device and a method for performing a state evaluation related to danger perception of a user, for example, a driver of a vehicle.
  • Patent Literatures 1 to 3 it has been considered that the psychological state and health state of a driver of a vehicle are monitored through biological information such as a pulse and a heartbeat to utilize for safety control.
  • biological information such as a pulse and a heartbeat to utilize for safety control.
  • an abnormality is found in the driver's condition, it is conceivable to alert the occupant of the vehicle or the surrounding vehicles or to perform automatic deceleration.
  • This technology aims to increase the safety of vehicle operation.
  • the evaluation device a communication unit capable of communicating with the vehicle, performs a state evaluation related to danger perception of the user based on the brain waves of the user detected by the brain wave sensor, and the evaluation result information And a control unit for transmitting to the vehicle by a communication unit.
  • a state evaluation related to danger detection such as whether or not the user has perceived danger is performed, and the evaluation result information is transmitted to the vehicle side.
  • control unit may be configured to perform the danger detection based on at least one of the amplitude of the ⁇ wave in the brain wave, the power of the ⁇ wave, and the phase of the ⁇ wave. It is desirable to conduct a state evaluation.
  • the state evaluation is performed in consideration of the amplitude of the ⁇ wave, the strength of the power, and the phase.
  • control unit performs the state evaluation related to the danger detection based on a relative comparison between the ⁇ wave in the brain wave and a component other than the ⁇ wave.
  • the state evaluation related to danger detection is performed based on a relative comparison with components other than the ⁇ wave such as the ⁇ wave and the ⁇ wave.
  • control unit detects the current position by the brain wave sensor when the avoidance action is taken in the past and the brain wave immediately before the avoidance action is recorded. It is desirable to evaluate the state related to the danger detection based on the result of matching based on the brain wave and the brain wave immediately before the avoidance action.
  • control unit executes a transmission process of transmitting the current position information, the information of the brain wave detected by the brain wave sensor, and the motion information detected by the motion sensor to an external device. It is desirable to do.
  • the user can manage information such as the place where the user perceived danger, the brain waves at the time of danger perception, the details of the avoidance action taken in response to the perception of danger, and the presence / absence of an accident (presence or absence of a collision).
  • Database table information
  • control unit executes the transmission process according to a result of a state evaluation related to the danger detection.
  • the process of transmitting information for risk analysis such as brain waves to an external device is executed when the user has been judged to be dangerous, and is not executed when the user is not judged to be dangerous. Is made possible.
  • control unit extracts a feature amount of an electroencephalogram detected by the electroencephalogram sensor and transmits information on the extracted feature amount by the transmission process.
  • the data amount can be reduced as compared with the case where the brain wave signal itself detected by the brain wave sensor is transmitted.
  • control unit transmits the vehicle information acquired from the vehicle via the communication unit by the transmission process.
  • a database for managing information indicating the vehicle state corresponding to the danger detection is constructed outside the evaluation device. It is possible to do.
  • control unit transmits the information of the avoidance action recorded corresponding to the current position to the vehicle by the communication unit based on a result of the state evaluation related to the danger detection. It is desirable to make it.
  • the evaluation method according to the present technology performs a state evaluation related to danger perception of the user based on the brain waves of the user detected by the brain wave sensor, and transmits the evaluation result information to a communication unit capable of communicating with the vehicle. This is an evaluation method for causing the vehicle to transmit.
  • FIG. 1 is a diagram illustrating a configuration example of a driving support system including an evaluation device as an embodiment according to the present technology.
  • FIG. 1 is a diagram illustrating an example of an external configuration of an evaluation device and a vehicle according to an embodiment. It is a figure showing an example of an internal configuration of an evaluation device as an embodiment. It is a figure showing an example of an internal configuration of a vehicle as an embodiment.
  • FIG. 3 is a diagram illustrating an example of an internal configuration of a server device as an embodiment. It is a functional block diagram for explaining the function which the evaluation device as an embodiment has.
  • FIG. 3 is a functional block diagram for explaining functions of the server device according to the embodiment.
  • FIG. 1 is a diagram illustrating a configuration example of a driving support system including an evaluation device as an embodiment according to the present technology.
  • FIG. 1 is a diagram illustrating an example of an external configuration of an evaluation device and a vehicle according to an embodiment. It is a figure showing an example of an internal configuration of an evaluation device as an embodiment
  • FIG. 4 is a diagram illustrating an example of a data structure of an analysis table according to the embodiment.
  • FIG. 4 is a diagram illustrating an example of a data structure of an evaluation table according to the embodiment. It is a flow chart which showed a processing procedure which an evaluation device should implement in order to realize a driving support technique as an embodiment. It is a flowchart of the information transmission process to the server apparatus which the evaluation apparatus as embodiment performs.
  • FIG. 11 is a diagram illustrating an example of a data structure of an evaluation table according to a first modification. It is the flowchart which showed the processing procedure which an evaluation apparatus should implement in order to implement
  • FIG. 1 illustrates a configuration example of a driving support system 5 including an evaluation device 1 as an embodiment according to the present technology.
  • the driving support system 5 includes a plurality of evaluation devices 1, a plurality of vehicles 2, and a server device 4 configured to be able to communicate with each evaluation device 1 via the network 3.
  • the network 3 is, for example, the Internet.
  • the evaluation device 1 is a device worn by a user as a driver of the vehicle 2, and is configured to be able to perform data communication with the vehicle 2.
  • the vehicle 2 is configured to be able to execute control related to driving assistance such as automatic braking and automatic steering.
  • FIG. 2 shows an example of the external configuration of the evaluation device 1 and the vehicle 2.
  • the vehicle 2 is a motorcycle
  • the evaluation device 1 has, for example, a helmet shape.
  • the evaluation device 1 has a function of detecting a brain wave of the user.
  • the evaluation device 1 also has a current position detection function, a function of detecting movement with an acceleration sensor, and the like, and a function of acquiring vehicle information such as a vehicle speed from the vehicle 2.
  • the evaluation apparatus 1 is not limited to a form worn by the user, and may take a form worn on the vehicle 2. In that case, an electroencephalogram sensor 11 described later is externally attached to the evaluation device 1.
  • the evaluation device 1 performs a state evaluation related to danger perception of the user based on a result of detecting a brain wave of the user driving the vehicle 2. Then, the evaluation device 1 transmits information indicating the result of the state evaluation related to the danger detection to the corresponding vehicle 2 (that is, the vehicle 2 driven by the user wearing the evaluation device 1). Thereby, the vehicle 2 can reflect the state evaluation result related to the danger detection of the user in the driving support control.
  • the evaluation device 1 evaluates whether or not the user has perceived danger based on the detected brain waves, and when the user has evaluated that he / she has perceived danger, The information indicating the situation at the time when the danger is detected is transmitted to the server device 4 via the network 3. Although the details of the information transmitted at this time will be described later, at least the information of the detected brain waves, the information indicating the detected movement, and the vehicle information obtained from the vehicle 2 are stored in the server together with the current position information obtained at the time of danger detection. Transmit to the device 4.
  • the server device 4 it is possible to collect, from each of the evaluation devices 1, a place where the user feels a danger, a movement when the danger is felt (it can be paraphrased with the behavior of the vehicle 2), and vehicle information. It is said.
  • the information collected in this way can be used to analyze where the user driving the vehicle 2 feels danger, and what kind of avoidance action the user took when he felt danger. it can.
  • FIG. 3 is a diagram illustrating an example of the internal configuration of the evaluation device 1.
  • the evaluation device 1 includes an electroencephalogram sensor 11 for detecting an electroencephalogram, a position sensor 12 for detecting a position, a motion sensor 13 for detecting a motion, and a control unit 14 to which a detection signal from each of these sensors is input. And a storage unit 15 for storing various information, and a first communication unit 16 and a second communication unit 17 for performing data communication with an external device.
  • the electroencephalogram sensor 11 has a plurality of electrodes in contact with the scalp of the user, and detects the electroencephalogram of the user with the electrodes.
  • the position sensor 12 is, for example, a GNSS (Global Navigation Satellite System) sensor such as a GPS (Global Positioning System) sensor and performs position detection.
  • the motion sensor 13 comprehensively represents a sensor that detects a motion, such as a G sensor (acceleration sensor) or a gyro sensor (angular velocity sensor). In this example, a G sensor and a gyro sensor are provided as the motion sensor 13, and the motion information detected by the motion sensor 13 is information on acceleration and angular velocity.
  • the control unit 14 includes a microcomputer having a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and executes processing according to a program stored in the ROM. Performs overall control of the evaluation device 1. For example, the control unit 14 performs data communication with the vehicle 2 via the first communication unit 16. The first communication unit 16 performs short-range wireless communication using a predetermined communication method such as Bluetooth (registered trademark). Communication between the evaluation device 1 and the vehicle 2 is not limited to wireless, but may be wired.
  • a predetermined communication method such as Bluetooth (registered trademark).
  • control unit 14 performs data communication with an external device via the second communication unit 17.
  • the second communication unit 17 is configured to be able to perform data communication via the network 3, and the control unit 14 controls the external device connected to the network 3 via the second communication unit 14 (particularly, in this example). Then, data communication is performed with the server device 4).
  • the control unit 14 performs a state evaluation related to danger perception of the user based on the brain waves of the user detected by the brain wave sensor 11, and performs an information transmission process to the vehicle 2 or the server device 4 according to the evaluation result. Will be described later.
  • the storage unit 15 comprehensively represents a storage device such as a hard disk drive (HDD) or a solid state drive (SSD), and is used for various data storage in the evaluation device 1.
  • Various data necessary for control by the control unit 14 is stored in the storage unit 15.
  • the storage unit 15 of the present example stores an evaluation table 15a used by the control unit 14 to perform the above-described state evaluation related to danger detection, which will be described later.
  • FIG. 4 is a diagram illustrating an example of the internal configuration of the vehicle 2.
  • the vehicle 2 includes an imaging unit 2 that captures an image of the outside of the vehicle, an image processing unit 22 that processes an image captured by the imaging unit 2, and a driving assistance control unit 23 that performs control related to driving assistance.
  • Unit 25 an engine control unit 26, an engine-related actuator 27, a steering control unit 28, a steering-related actuator 29, a brake control unit 30, a brake-related actuator 31, sensors / operators 32, a bus 33, and a communication unit 34. I have.
  • the imaging unit 21 has at least two camera units that image the outside of the vehicle.
  • Each camera unit includes a camera optical system and an image pickup device such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS).
  • CCD charge coupled device
  • CMOS complementary metal oxide semiconductor
  • a subject image is formed on the image pickup surface of the image pickup device by the camera optical system.
  • An image is formed and an electric signal corresponding to the amount of received light is obtained for each pixel.
  • two camera units are directed in the vehicle traveling direction. These two camera units are installed so that distance measurement can be performed by a so-called stereo imaging method.
  • the electric signal obtained by each camera section is subjected to A / D conversion and predetermined correction processing, and is supplied to the image processing section 22 as a digital image signal (captured image data) representing a luminance value of a predetermined gradation in pixel units.
  • the image processing unit 22 includes, for example, a microcomputer having a CPU, a ROM, a RAM, and the like. Based on captured image data obtained by the imaging unit 21 capturing an image of the outside of the vehicle, a predetermined image related to recognition of the environment outside the vehicle. Execute the process. In particular, the image processing unit 22 performs various image processing based on each captured image data obtained by stereo imaging, recognizes forward information such as three-dimensional object data and white line data in front of the vehicle, and recognizes these recognition information and the like. The own vehicle travel path is estimated on the basis of. Further, the image processing unit 22 detects a preceding vehicle on the own vehicle traveling path based on the recognized three-dimensional object data and the like.
  • the image processing unit 22 performs, for example, the following process as a process based on each captured image data obtained by stereo imaging.
  • distance information is generated based on the principle of triangulation from a displacement amount (parallax) of a corresponding position with respect to a captured image pair as each captured image data.
  • a well-known grouping process is performed on the distance information, and the grouped distance information is compared with pre-stored three-dimensional road shape data, three-dimensional object data, and the like, so that white line data and along the road can be obtained.
  • Data such as guardrails, curbs, etc., existing three-dimensional objects such as vehicles.
  • the own vehicle speed is a running speed of the own vehicle detected by a vehicle speed sensor 32a described later.
  • the image processing unit 22 recognizes another vehicle existing in the own vehicle traveling lane among other vehicles in the same direction as a preceding vehicle. In addition, the image processing unit 22 recognizes, among other vehicles in the same direction, those in which the vehicle speed of the other vehicle is equal to or less than a predetermined value (for example, 4 km / h or less) and is not accelerating, as other vehicles in a substantially stopped state. .
  • the image processing unit 22 also performs a process of recognizing an object other than another vehicle, such as a pedestrian or an obstacle, as the three-dimensional object data.
  • the driving support control unit 23 includes, for example, a microcomputer having a CPU, a ROM, a RAM, and the like, and includes a result of image processing by the image processing unit 22, detection information obtained by the sensors / operators 32, and operation input information. Based on the above, various control processes relating to driving support are executed.
  • the driving support control unit 23 is connected to the display control unit 24, the engine control unit 26, the steering control unit 28, and the brake control unit 30 via a bus 33, each of which includes a microcomputer. It is possible to mutually perform data communication with these control units.
  • the driving support control unit 23 instructs a necessary control unit among the above-described control units to execute an operation related to the driving support.
  • the sensors / operators 32 comprehensively represent various sensors and operators provided in the vehicle 2.
  • the sensors included in the sensors / operators 32 include a vehicle speed sensor 32a for detecting the speed of the host vehicle as the host vehicle speed, an engine speed sensor 32b for detecting the engine speed, and an accelerator opening sensor 32c for detecting the accelerator opening.
  • a position sensor 32d for detecting (positioning) a position based on latitude / longitude / altitude, a yaw rate sensor 32e for detecting a yaw rate, a G sensor 32f for detecting acceleration, and ON / OFF in accordance with operation / non-operation of a brake.
  • the sensors / operators 32 are other sensors, for example, an intake air amount sensor that detects the amount of intake air to the engine, and are interposed in an intake passage and supplied to each cylinder of the engine. It also has a throttle opening sensor for detecting the opening of a throttle valve for adjusting the intake air amount, a water temperature sensor for detecting a cooling water temperature indicating the engine temperature, and the like. Although illustration is omitted, as the controls provided in the sensors and controls 32, there are provided controls for performing various operation instructions to the vehicle 2, and for example, an ignition switch for instructing start / stop of the engine. And a turn signal switch for instructing lighting / non-lighting of a direction indicator.
  • the display unit 25 comprehensively represents a display device installed at a position visible to the driver.
  • the display control unit 24 controls a display operation of the display unit 25 based on an instruction from a control unit connected to the bus 33, such as the driving support control unit 23.
  • the engine control unit 26 controls various actuators provided as the engine-related actuator 27 based on a detection signal from a predetermined sensor in the sensors / operators 32, operation input information by the operators, and the like.
  • various actuators for driving the engine such as a throttle actuator for driving a throttle valve and an injector for injecting fuel are provided.
  • the engine control unit 26 performs start / stop control of the engine in accordance with the operation of the above-described ignition switch.
  • the engine control unit 26 also controls fuel injection timing, fuel injection pulse width, throttle opening, and the like based on detection signals from predetermined sensors such as an engine speed sensor 32b and an accelerator opening sensor 32c.
  • the engine control unit 26 obtains a target throttle opening from a map, for example, based on an instruction from the driving support control unit 23, and controls the throttle actuator (engine output control) based on the obtained throttle opening. It is also possible.
  • the steering control unit 28 controls an actuator provided as a steering-related actuator 29 based on information on a steering angle instructed by the driving support control unit 23.
  • Examples of the steering-related actuator 29 include a steering motor that applies a steering torque to a steering shaft.
  • the steering angle can be changed regardless of the driver's steering.
  • the brake control unit 30 controls various actuators provided as the brake-related actuator 31 based on a detection signal from a predetermined sensor in the sensors / operators 32 and the like.
  • various brake-related actuators such as a hydraulic pressure control actuator for controlling an output hydraulic pressure from a brake booster to a master cylinder and a hydraulic pressure in a brake fluid pipe are provided.
  • the brake control unit 30 calculates a wheel slip ratio from detection information of a predetermined sensor (for example, an axle rotation speed sensor or a vehicle speed sensor 32a), and adjusts the hydraulic pressure by the hydraulic control actuator according to the slip ratio. By increasing and decreasing the pressure, so-called ABS (Antilock Brake System) control is realized.
  • ABS Antilock Brake System
  • the brake control unit 30 controls the hydraulic control actuator based on the hydraulic pressure instruction information output from the driving support control unit 23 to brake the vehicle 2. This realizes a so-called automatic brake that brakes the vehicle 2 regardless of the driver's brake operation.
  • the communication unit 34 is connected to the driving support control unit 23.
  • the communication unit 34 performs short-range wireless communication using the same communication method as the first communication unit 16 in the evaluation device 1 such as, for example, Bluetooth.
  • the driving support control unit 23 can perform data communication with the control unit 14 in the evaluation device 1.
  • FIG. 5 shows an example of the internal configuration of the server device 4.
  • the server device 4 includes a control unit 41, a storage unit 42, an input unit 43, an output unit 44, a communication unit 45, and a bus 46.
  • the control unit 41, the storage unit 42, the input unit 43, the output unit 44, and the communication unit 45 are connected via a bus 46.
  • the control unit 41 includes, for example, a microcomputer having a CPU, a ROM, a RAM, and the like, and executes various processes according to a program stored in the ROM or a program loaded from the storage unit 42 into the RAM.
  • the storage unit 42 comprehensively represents storage devices such as HDDs and SSDs, and is used in the server device 4 for storing various data.
  • the storage unit 42 stores various data required for control by the control unit 41.
  • an analysis table 42a created based on information acquired from each evaluation device 1 is stored, which will be described later.
  • the input unit 43 processes an input signal from an input device such as a keyboard, a mouse, and a touch panel, and transmits input information from the input device to the control unit 41.
  • the output unit 44 includes a display including an LCD (Liquid Crystal Display), an organic EL (Electroluminescence) panel, and a speaker.
  • the communication unit 45 is configured to enable data communication with an external device via the network 3.
  • the control unit 41 performs data communication with an external device, particularly in this example, the evaluation device 1 via the network 3 via the communication unit 45.
  • FIG. 6 is a functional block diagram for explaining functions of the evaluation device 1.
  • the evaluation device 1 has functions as a communication unit F1 and a control unit F2.
  • the communication unit F1 is capable of communicating with the vehicle 2.
  • the function as the communication unit F1 is realized by the first communication unit 16 in this example.
  • the control unit F2 performs a state evaluation related to danger perception of the user based on the brain waves of the user detected by the brain wave sensor 11, and causes the communication unit F1 to transmit the evaluation result information to the vehicle 2.
  • the function as the control unit F2 is realized by the control unit 14 in this example.
  • the control unit F2 performs a state evaluation related to danger detection based on the ⁇ wave in the brain wave.
  • the brain wave includes a plurality of components such as a ⁇ wave, a ⁇ wave, an ⁇ wave, and a ⁇ wave. These components have different frequency bands, for example, the ⁇ wave is a band component of about 8 Hz to 12 Hz, and the ⁇ wave is a band component of about 13 Hz to 20 Hz.
  • the ⁇ wave is the lowest band component among the ⁇ wave, the ⁇ wave, the ⁇ wave, and the ⁇ wave, and the ⁇ wave, and the ⁇ wave, and the ⁇ wave, and the ⁇ wave is a component in the frequency band between the ⁇ wave and the ⁇ wave.
  • the ⁇ wave tends to appear when the user is in a relaxed state, while the ⁇ wave tends to appear when the person is in a nervous state. For this reason, in the present example, based on the ⁇ wave, an evaluation as to whether or not the user has perceived danger, in other words, a determination as to whether or not the user has perceived danger is performed.
  • a method of determining the presence or absence of danger detection based on the ⁇ -wave a method based on at least one of the magnitude of the amplitude of the ⁇ -wave, the intensity of the power of the ⁇ -wave, and the phase of the ⁇ -wave,
  • a determination method based on the magnitude of the amplitude of the ⁇ wave is adopted as an example will be described.
  • the determination of the presence or absence of danger detection by the user can be performed based on the ⁇ wave alone, but in this example, in order to improve the evaluation accuracy of the presence or absence of danger detection, the presence or absence of danger detection is based on a relative comparison with other components of the brain wave. Is determined. Specifically, in this example, the determination as to whether or not the amplitude difference ⁇ between the ⁇ wave and the ⁇ wave exceeds a predetermined threshold value TH ⁇ is performed as the determination of whether or not the user has perceived danger. That is, when the amplitude difference ⁇ exceeds the threshold value TH ⁇ , a risk detection result is obtained, and when the amplitude difference ⁇ is equal to or less than the threshold value TH ⁇ , a determination result indicating no danger detection is obtained.
  • the determination of the presence or absence of danger detection is not limited to being performed based on the relative comparison between the ⁇ wave and the other single component as in the above example, but based on the relative comparison between the ⁇ wave and the other multiple components. You can do it
  • the determination of the presence or absence of danger detection by the user may be performed based on the result of comparison with the predetermined threshold value in the same manner as described above, as a determination method based on the power of the ⁇ wave.
  • a determination method based on the phase of the ⁇ wave is a method corresponding to a case where brain waves are detected at a plurality of positions in the brain by a plurality of electrodes.
  • a method of evaluating the presence or absence of danger detection based on ⁇ waves at a plurality of positions there is a method of using an average of ⁇ waves at a plurality of positions as an evaluation index of the presence or absence of danger detection.
  • the control unit F2 of the present example uses the communication unit F1 to transmit information representing a state evaluation result relating to danger detection, that is, evaluation result information to the communication unit F1.
  • the vehicle 2 (the driving support control unit 23) is caused to transmit.
  • the vehicle 2 starts driving support control for avoiding danger before the user takes an avoidance action to avoid danger such as sudden braking or sudden steering in response to danger detection.
  • Control for braking and steering can be started. Since a command transmission to the motor area in the brain and a command transmission from the motor area to necessary muscles are required between the time when the person senses the danger and take the avoidance action, a corresponding time lag occurs.
  • the time required to perform the evaluation related to the presence or absence of danger detection from the brain wave detection result and transmit the evaluation result information, and the time required until the vehicle 2 side starts the driving support control based on the evaluation result information are very short. is there. For this reason, it is possible to start driving support control for avoiding danger before the user perceives danger and actually takes action.
  • control unit F2 of the present example uses the above-described evaluation table 15a (see FIG. 3) as the state evaluation related to the danger detection of the user, in addition to the determination of the presence or absence of the danger detection based on the detected electroencephalogram as described above. Evaluation is also performed, which will be described later.
  • noise of the electroencephalogram is generated when the user's body is moving, so that the noise suppression processing on the electroencephalogram detection signal is performed based on the motion information detected by the motion sensor 13. You may.
  • the control unit F2 when determining that there is danger detection, transmits predetermined information including information on brain waves detected by the brain wave sensor 11 to the server device 4. Is transmitted.
  • the transmission information to the server device 4 is the information provided to the analysis table 42a described above. Specifically, the information detected by the electroencephalogram sensor 11 and the position detected by the position sensor 12 together with the information on the electroencephalogram are detected. Information, motion information detected by the motion sensor 13 (in this example, information on acceleration and angular velocity), and vehicle information acquired from the vehicle 2 are transmitted.
  • the waveform information for a certain period in the past is transmitted from the timing when it is determined that danger is detected.
  • the electroencephalogram information instead of transmitting the detection signal (electroencephalogram signal) itself from the electroencephalogram sensor 11, a feature amount is extracted from the electroencephalogram signal, and information on the extracted feature amount is transmitted. Specifically, the information of the ⁇ wave extracted from the brain wave signal is transmitted. Thereby, the amount of data transmitted to the server device 4 can be reduced.
  • the position information detected by the position sensor 12 is transmitted at the timing when it is determined that danger is detected.
  • the information for a certain period after the timing when it is determined that danger is detected is transmitted. This allows the server device 4 to analyze the avoidance action taken after the danger is detected and to analyze the presence or absence of a collision of the vehicle 2.
  • vehicle information information on the vehicle speed acquired from the vehicle 2 (driving support control unit 23), recognition information on pedestrians and other vehicles (the number of recognized pedestrians and other vehicles, the positional relationship with the vehicle 2, and the like) Is transmitted.
  • FIG. 7 is a functional block diagram for explaining functions of the control unit 41 of the server device 4.
  • the control unit 41 of the server device 4 has functions as an analysis table creation unit 41a, an evaluation table information generation unit 41b, and an information transmission unit 41c.
  • the analysis table creation unit 41a creates the analysis table 42a based on the brain wave information, the position information, the movement information, and the vehicle information transmitted from the evaluation device 1.
  • FIG. 8 shows an example of the data structure of the analysis table 42a.
  • the position, the brain wave data, the avoidance behavior, the vehicle state, and the information on the presence or absence of a collision are associated with each other for each date and time.
  • the date and time is the date and time when the brain wave information, the position information, the motion information, and the vehicle information are received from the evaluation device 1.
  • the information of the date and time is In other words, it can be expressed as information indicating the date and time when the user perceived danger.
  • the position is the position information received from the evaluation device 1
  • the brain wave data is the data of the brain wave information received from the evaluation device 1.
  • the avoidance action means an avoidance action taken by the user in response to the perception of danger, and is analyzed based on, for example, the motion information received by the control unit 41 from the evaluation device 1.
  • the analysis of the sudden braking and the rapid steering is performed for the avoidance behavior. Specifically, it is analyzed based on the motion information whether any of the avoiding actions of “sudden braking”, “sudden steering”, “sudden braking and sudden steering” has been performed. In the analysis, a result indicating that any of these avoidance actions was not taken may be obtained.
  • the part where “avoidance action” is blank means that no evasion action was taken.
  • information based on the vehicle information received from the evaluation device 1 is stored. Specifically, in this example, information indicating the vehicle speed, the presence or absence of a pedestrian, and the presence or absence of another vehicle is stored.
  • the presence / absence of collision is information indicating the presence / absence of collision of the vehicle 2 after the danger is detected, and is analyzed based on, for example, the motion information received by the control unit 41 from the evaluation device 1.
  • the vehicle information (information indicating the vehicle state) at the time of danger detection is also stored in the analysis table 42a, so that, for example, even if the same avoidance action is taken, the vehicle state is not changed.
  • a more detailed risk analysis can be performed, for example, it is possible to perform a finer classification according to the difference.
  • the evaluation table information generation unit 41b generates evaluation table information that is information to be stored in the evaluation table 15a in the evaluation device 1 based on the information in the analysis table 42a.
  • FIG. 9 shows an example of the data structure of the evaluation table 15a.
  • brain wave representative data is associated with each position.
  • the position here is a position in the analysis table 42a, that is, a position where the user has perceived danger in this example.
  • EEG representative data means representative data of EEG data for each position.
  • electroencephalogram data calculated as an average waveform of electroencephalogram ( ⁇ wave) for each position is used as the representative data.
  • the electroencephalogram representative data is not limited to calculating the average waveform, but may be, for example, one electroencephalogram data having an average waveform from the electroencephalogram data for each position, such as using the electroencephalogram data acquired for that position. May be used.
  • the evaluation table information generation unit 41b illustrated in FIG. 7 obtains the electroencephalogram representative data of the electroencephalogram data having the same position among the electroencephalogram data stored in the analysis table 42a. In addition, as for the position in the analysis table 42a where only one electroencephalogram data is obtained, the obtained one electroencephalogram data is used as the electroencephalogram representative data. Then, the evaluation table information generation unit 41b generates information associating the position with the brain wave representative data as the evaluation table information.
  • the information transmission unit 41c performs a process for transmitting the evaluation table information generated by the evaluation table information generation unit 41b to the evaluation device 1. For example, the information transmission unit 41c performs a transmission process of the evaluation table information in response to a request from the evaluation device 1.
  • the evaluation device 1 that has requested the evaluation table information generates the evaluation table 15a as shown in FIG. 9 based on the received evaluation table information.
  • the evaluation table 15a has already been generated based on the evaluation table information received in the past, the information content of the evaluation table 15a is updated based on the received evaluation table information.
  • the information content of the evaluation table 15a can be updated to the latest content.
  • the control unit F2 performs not only the evaluation of the presence or absence of danger detection based on the magnitude of the ⁇ wave as described above, An evaluation based on the table 15a is also performed. Specifically, the control unit F2 determines from the evaluation table 15a that the brain wave corresponding to the current position detected by the position sensor 12 in response to determining that the user is aware of the danger based on the magnitude of the amplitude of the ⁇ wave. Get representative data.
  • the control unit F2 determines whether or not the acquired electroencephalogram representative data and the electroencephalogram data obtained from the electroencephalogram sensor 11 (the electroencephalogram data used for evaluating the presence or absence of danger detection) match, and determines that the two match. In this case, high-level alert information is generated as alert information for the vehicle 2 and transmitted to the vehicle 2 by the first communication unit 16.
  • control unit F2 determines that the electroencephalogram representative data obtained from the evaluation table 15a does not match the electroencephalogram data obtained from the electroencephalogram sensor 11, or that the electroencephalogram representative data corresponding to the current position is included in the evaluation table 15a. If no exists, low-level alert information is generated as alert information for the vehicle 2 and transmitted to the vehicle 2 by the first communication unit 16. That is, when it is evaluated that the certainty that the user has perceived danger is relatively low, low-level alert information is transmitted.
  • the driving support control unit 23 determines the level of the driving support control, for example, the allowable level of the sudden braking and the sudden steering (how much “steep” braking and steering are permitted). It is configured to be able to be switched in a timely manner. Then, if the alert information received from the evaluation device 1 is the low-level alert information, the driving support control unit 23 performs the driving support control with the allowable levels of sudden braking and sudden steering being “normal”. On the other hand, if the alert information received from the evaluation device 1 is high-level alert information, the driving support control is performed with the allowable level of sudden braking or sudden steering raised to a level higher than “normal” (that is, the risk avoidance capability is reduced). A state in which enhanced driving support control is possible).
  • the evaluation device 1 performs not only the magnitude of the amplitude of the ⁇ -wave but also the state evaluation related to the danger perception of the user including the match / mismatch with the electroencephalogram representative data in the evaluation table 15a.
  • the vehicle 2 can switch the level of the driving support control according to the state evaluation level related to the danger detection of the user. As a result, it is possible to prevent the driving support control from being performed at an excessive control level when the user is less certain that danger detection is performed. Can be done.
  • Processing Procedure> With reference to the flowchart of FIG. 10, a processing procedure to be executed by the evaluation device 1 to realize the driving support method as the embodiment described above will be described. Note that the processing shown in FIG. 10 is executed by the control unit 14 in the evaluation device 1 according to a program stored in the ROM.
  • control unit 14 first performs a process of acquiring position information (current position information) detected by the position sensor 12 as the position acquisition process of step S101.
  • step S102 the control unit 14 acquires an electroencephalogram detected by the electroencephalogram sensor 11 as an electroencephalogram acquisition process, and extracts ⁇ wave and ⁇ wave components from the acquired brain wave by the feature amount extraction process in step S103. Perform processing.
  • step S104 the control unit 14 determines whether the amplitude of the ⁇ wave is large. That is, in this example, the amplitude difference ⁇ between the ⁇ wave and the ⁇ wave obtained in step S103 is calculated, and it is determined whether or not the amplitude difference ⁇ exceeds the threshold value TH ⁇ .
  • the control unit 14 proceeds to step S112, and determines whether or not the processing is completed, that is, for example, the evaluation device 1 It is determined whether a predetermined process end condition such as turning off the power is satisfied, and if not, the process returns to step S101. That is, when it is determined that the amplitude of the ⁇ wave is not large, the information transmission to the server device 4 (S105) and the transmission of the alert information to the vehicle 2 (S111) are not performed.
  • control unit 14 proceeds to step S105, and performs information transmission to the server device 4 as transmission process execution control. Controls execution of transmission processing.
  • control unit 14 can execute the transmission process shown in FIG. 11 in parallel with the process shown in FIG.
  • the control unit 14 starts the transmission processing shown in FIG. 11 according to the execution control in step S105.
  • step S201 the control unit 14 executes a motion information acquisition process. That is, the motion information detected by the motion sensor 13 is acquired.
  • the motion information here, information for a certain period after the timing when it is determined that danger is detected (that is, the timing when a positive result is obtained in step S104) is acquired.
  • step S202 the control unit 14 executes a process of acquiring vehicle information from the vehicle 2 as a vehicle information acquisition process.
  • vehicle information the information on the vehicle speed and the recognition information on the pedestrian and other vehicles are acquired from the driving support control unit 23.
  • the control unit 14 executes a process for transmitting the position, the brain wave feature amount, the motion information, and the vehicle information to the server device 4. That is, the second communication unit 17 causes the server device 4 to transmit the current position information acquired in step S101, the feature amount as a ⁇ wave extracted in step S103, the motion information acquired in steps S201 and S202, and the vehicle information.
  • the control unit 14 determines whether there is corresponding data of the current position in the table in step S106 in response to executing the transmission process execution control in step S105. That is, it is determined whether or not the electroencephalogram representative data corresponding to the current position exists in the evaluation table 15a. If there is corresponding data of the current position in the table, the control unit 14 proceeds to step S107, and executes a feature amount comparison process. That is, matching is performed between the data of the ⁇ wave extracted in step S103 and the brain wave representative data ( ⁇ wave in this example) corresponding to the current position whose existence is confirmed in the evaluation table 15a in step S106.
  • step S107 the control unit 14 determines whether or not both data match as a result of the matching. If it is determined that the two data match, the control unit 14 proceeds to step S109, generates high-level alert information, and executes processing for transmitting the alert information to the vehicle 2 in step S111. That is, the generated alert information is transmitted to the vehicle 2 via the first communication unit 16.
  • control unit 14 advances the processing to step S110 when it is determined in step S106 that there is no corresponding data of the current position in the table, and when it is determined in step S108 that the data does not match, the low-level alert is performed. Generate information. Then, in response to executing the process of step S110, the control unit 14 executes an alert information transmission process of step S111. Thereby, when the detected brain wave does not match the brain wave acquired in the past at the same position, or when there is no brain wave data corresponding to the evaluation table 15a in the first place and the matching determination with the past brain wave is impossible. , Low-level alert information is transmitted to the vehicle 2.
  • the control unit 14 executes the end determination processing of step S112 described above in response to executing the transmission processing of step S111.
  • the control unit 14 determines that the process is completed in step S112, the control unit 14 ends a series of processes illustrated in FIG.
  • Embodiment> [4-1. First modified example]
  • the recommended avoidance behavior can be determined, for example, by analyzing for each position an avoidance behavior in which the rate of “absence” of “absence” in the analysis table 42a is equal to or greater than a predetermined value.
  • the analysis for each vehicle state is also performed as the recommended avoidance action. That is, for example, when the vehicle 2 is in a low-speed running state, the accident rate is relatively remarkably low when the avoidance action is abrupt braking, and when the vehicle 2 is in a high-speed running state, the avoidance action is a sudden braking and a sharp steering.
  • the recommended avoidance behavior may differ depending on the vehicle state, such as a relatively remarkably low accident rate.
  • the relationship between the avoidance behavior and the accident rate is analyzed for each vehicle state, and when the avoidance behavior indicating a low accident rate differs relatively significantly depending on the vehicle state, Assigns these different avoidance actions as recommended avoidance actions for each vehicle state at the position.
  • the avoidance action indicating a low accident rate is narrowed down to a single avoidance action regardless of the vehicle state
  • the single avoidance action is assigned as a recommended avoidance action of the position.
  • the control unit 41 performs the above-described process of obtaining the electroencephalogram representative data for each position based on the analysis table 42a, and performs the above-described recommended avoidance behavior analysis process for each position. Then, evaluation table information is generated based on the results of these processes. Specifically, as the evaluation table information in this case, information in which the position, the brain wave representative data, and the recommended avoidance action at the position when there is a recommended avoidance action are generated.
  • FIG. 12 shows an example of the data structure of the evaluation table 15a in the present modification.
  • the control unit 41 in the server device 4 determines whether the avoidance behavior indicating a low accident rate at a low speed (for example, less than 40 km / h) and a high speed (for example, 40 km / h or more) is relatively remarkably different.
  • Evaluation table information is generated in which the avoidance behavior at low speed and the avoidance behavior at high speed are respectively assigned as recommended avoidance behavior.
  • the control unit 41 assigns the single avoidance action as the recommended avoidance action. Generates table information, and generates evaluation table information in which only the electroencephalogram representative data is associated with a position where no significant difference occurs in the accident rate regardless of the avoidance action regardless of whether the vehicle is moving at low speed or high speed. .
  • control unit 14 in the evaluation device 1 also requests the server device 4 to transmit the evaluation table information. Then, the evaluation table 15a is generated and updated based on the evaluation table information received in response to the request. Thus, an evaluation table 15a as shown in FIG. 12 is constructed in the storage unit 15 in this case.
  • the control unit 14 in this modification causes the information on recommended avoidance behavior to be transmitted to the vehicle 2 together with the alert information based on the evaluation table 15a shown in FIG.
  • the vehicle 2 can perform the driving support control based on the recommended avoidance action, that is, the information indicating the avoidance action in which the past accident rate was low with respect to the danger occurring at the current position, and the safety can be improved.
  • the information of the recommended avoidance action according to the vehicle state can be notified to the vehicle 2, that is, the driving support control is performed on the vehicle 2 side based on the information indicating the appropriate recommended avoidance action according to the vehicle state. Since it can be performed, safety can be further improved.
  • FIG. 13 is a flowchart illustrating a processing procedure to be executed by the control unit 14 of the evaluation device 1 in order to realize the driving support method as the first modified example.
  • the same processes as those already described in FIG. 10 are denoted by the same step numbers, and description thereof is omitted.
  • control unit 14 executes the processing of steps S301 to S303 instead of the processing of step S111. Specifically, in this case, the control unit 14 advances the process to step S301 when the high-level alert information is generated in step S109 and when the low-level alert information is generated in step S110. In step S301, the control unit 14 determines whether or not a recommended avoidance action corresponding to the current position exists in the evaluation table 15a. If it is determined that the recommended avoidance action exists, in step S302, the alert information and the recommended avoidance action are determined. A process for transmitting the action information to the vehicle 2 is performed, and the process proceeds to step S112. On the other hand, if it is determined that the recommended avoidance action does not exist, the control unit 14 executes a process for transmitting the alert information to the vehicle 2 in step S303, and proceeds to step S112.
  • the representative electroencephalogram data at this time can also be the electroencephalogram representative data when the avoidance action is taken.
  • the evaluation table 15a stores, as the electroencephalogram representative data, the electroencephalogram representative data in the case where the user perceives danger and then performs an avoidance action.
  • control unit 14 in this case performs matching between the electroencephalogram representative data corresponding to the current position in the evaluation table 15a and the electroencephalogram data from the electroencephalogram sensor 11, as in the processing in steps S106 to S108.
  • Matching with the brain wave immediately before the avoidance action taken in the past at the current position can be performed. That is, instead of vaguely evaluating the presence or absence of danger detection, it is possible to evaluate whether or not danger of such a degree that an avoidance action is taken is detected.
  • the evaluation operation by the control unit 14 as the second modification as described above can be paraphrased as follows. That is, when the current position is the position where the avoidance action has been taken in the past and the electroencephalogram immediately before the avoidance action has been recorded, the control unit 14 controls the electroencephalogram detected by the electroencephalogram sensor 11 and the electroencephalogram immediately before the avoidance action. Based on the result of matching based on the above, a state evaluation related to danger perception of the user is performed. This makes it possible to appropriately evaluate the possibility that the user will take an avoidance action such as sudden braking or sudden steering in response to danger detection based on past records. Therefore, it is possible to cause the vehicle 2 to start the driving support control for the avoidance action in response to the case where the user is highly likely to take the avoidance action, and it is possible to enhance safety.
  • the analysis table 42a in the server device 4 stores the information of the brain wave transmitted from each evaluation device 1, but not only the brain wave but also, for example, the amount of sweating, the heart rate, the pulse rate, and the like. Also, biological information other than brain waves can be collected from each evaluation device 1 and accumulated. At this time, a corresponding biosensor is provided in the evaluation device 1, and the biometric information detected by the biosensor is transmitted to the server device 4.
  • the motion information is transmitted from the evaluation device 1 side. It is possible to send. Specifically, the evaluation device 1 also determines the presence or absence of a collision based on the motion information such as acceleration, and transmits the brain wave information immediately before the collision to the server device 4 in response to determining that the collision has occurred. Conceivable. Alternatively, it is conceivable to constantly transmit brain wave information to the server device 4.
  • the analysis for generating the analysis table 42a based on the transmission information from the evaluation device 1 and the analysis for generating the evaluation table information based on the analysis table 42a are performed by the server device 4 (control unit). Although the example performed by the unit 41) has been described, these analyzes and analyzes can also be performed outside the server device 4.
  • the present technology is not limited to motorcycles, and is also applicable to vehicles with three or more wheels.
  • the present technology is not limited to automobiles, and can be applied to vehicles in which the driving source is human power (for example, a bicycle having a steering assist function).
  • the position sensor 12 and the motion sensor 13 are provided integrally with the evaluation device 1.
  • a configuration in which at least one of these sensors is externally attached to the evaluation device 1 can be adopted.
  • the evaluation device (1) is based on the communication unit (the F1 and the first communication unit 16) capable of communicating with the vehicle and the user's brain wave detected by the brain wave sensor. And a control unit (F2, F14) for causing the communication unit to perform state evaluation related to danger perception of the user and transmit the evaluation result information to the vehicle.
  • a state evaluation related to danger detection such as whether or not the user has perceived danger is performed, and the evaluation result information is transmitted to the vehicle side.
  • a command transmission to the motor area in the brain and a command transmission from the motor area to necessary muscles are required between the time when the person senses the danger and take the avoidance action, a corresponding time lag occurs.
  • the brain responds and appears as a change in the brain wave, so as described above, the evaluation result information related to the danger detection is obtained based on the brain wave and transmitted to the vehicle side, so that the danger detection is performed. Accordingly, it is possible to cause the vehicle to start control for avoiding danger before the user takes an avoidance action. Therefore, safety in vehicle operation can be improved.
  • control unit performs a state evaluation related to danger detection based on at least one of the amplitude of the ⁇ wave in the brain wave, the power of the ⁇ wave, and the phase of the ⁇ wave. It is carried out.
  • the state evaluation is performed in consideration of the amplitude of the ⁇ wave, the strength of the power, and the phase. Therefore, it is possible to appropriately perform the state evaluation related to the danger perception of the user.
  • control unit performs a state evaluation related to danger detection based on a relative comparison between ⁇ waves and components other than ⁇ waves in brain waves.
  • the state evaluation relating to danger detection is performed based on a relative comparison with components other than the ⁇ wave such as the ⁇ wave and the ⁇ wave. Therefore, it is possible to improve the accuracy of the state evaluation related to the danger detection.
  • the control unit controls the electroencephalogram detected by the electroencephalogram sensor.
  • a state evaluation relating to danger detection is performed based on the result of matching based on the brain wave immediately before the avoidance action (see the second modification).
  • control unit executes a transmission process of transmitting the current position information, the information of the brain wave detected by the brain wave sensor, and the motion information detected by the motion sensor to an external device. I have.
  • the user can manage information such as the place where the user perceived danger, the brain waves at the time of danger perception, the details of avoidance actions taken in response to perception of danger, and the presence / absence of an accident (presence or absence of a collision).
  • Database table information
  • the control unit executes the transmission process according to the result of the state evaluation related to danger detection.
  • the process of transmitting information for risk analysis such as brain waves to an external device is executed when the user has been judged to be dangerous, and is not executed when the user is not judged to be dangerous. Is made possible. Therefore, it is not necessary to constantly transmit information for risk analysis, so that the amount of communication data and the processing load can be reduced.
  • the control unit extracts a feature amount of the brain wave detected by the brain wave sensor, and transmits information of the extracted feature amount by a transmission process.
  • the data amount can be reduced as compared with the case where the brain wave signal itself detected by the brain wave sensor is transmitted. Therefore, the amount of communication data can be reduced.
  • control unit transmits vehicle information obtained from the vehicle via the communication unit by transmission processing.
  • a database for managing information indicating the vehicle state corresponding to the danger detection is constructed outside the evaluation device. It is possible to do. Therefore, a more detailed risk analysis can be performed.
  • control unit causes the communication unit to transmit the information of the avoidance action recorded corresponding to the current position to the vehicle based on the result of the state evaluation related to the danger detection.
  • the information of the avoidance action recorded corresponding to the current position can be transmitted to the vehicle. Therefore, it is possible to notify the vehicle of an avoidance action in which the past accident rate was low with respect to the danger that occurs at the current position.
  • the evaluation method performs a state evaluation related to danger perception of a user based on a brain wave of the user detected by an electroencephalogram sensor, and transmits the evaluation result information to a vehicle by a communication unit capable of communicating with the vehicle. Is an evaluation method to be transmitted.
  • a communication unit capable of communicating with the vehicle A control unit that performs a state evaluation related to danger perception of the user based on the brain waves of the user detected by the brain wave sensor, and causes the communication unit to transmit evaluation result information to the vehicle.
  • the control unit includes: The evaluation device according to (1), wherein the state evaluation related to the danger detection is performed based on at least one of a magnitude of an amplitude of the ⁇ wave, a power of the ⁇ wave, and a phase of the ⁇ wave in the brain wave.
  • the control unit includes: The evaluation device according to (1) or (2), wherein a state evaluation relating to the danger detection is performed based on a relative comparison between a ⁇ wave and a component other than the ⁇ wave in the brain wave.
  • the control unit includes: When the current position is a position where an avoidance action has been taken in the past and an electroencephalogram immediately before the avoidance action has been recorded, a result of performing matching based on an electroencephalogram detected by the electroencephalogram sensor and an electroencephalogram immediately before the avoidance action.
  • the evaluation device according to any one of (1) to (3), wherein a state evaluation relating to the danger perception is performed based on: (5)
  • the control unit includes: The evaluation according to any one of (1) to (4), wherein a transmission process is performed to cause the external device to transmit current position information, brain wave information detected by the brain wave sensor, and motion information detected by a motion sensor.
  • the control unit includes: The evaluation device according to (5), wherein the transmission process is performed according to a result of a state evaluation related to the danger detection.
  • the control unit includes: The evaluation device according to (5) or (6), wherein a feature amount of the brain wave detected by the brain wave sensor is extracted, and information of the extracted feature amount is transmitted by the transmission process.
  • the control unit includes: The evaluation device according to any one of (5) to (7), wherein vehicle information acquired from the vehicle via the communication unit is transmitted by the transmission processing.
  • the control unit includes: The evaluation according to any one of (1) to (8), wherein the communication unit transmits information of the avoidance action recorded corresponding to the current position to the vehicle based on a result of the state evaluation related to the danger detection. apparatus.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Psychology (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Social Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

車両運行上の安全性を高める。 本技術に係る評価装置は、車両との通信が可能とされた通信部と、脳波センサにより検出されたユーザの脳波に基づいてユーザの危険察知に係る状態評価を行い、評価結果情報を通信部により車両に送信させる制御部とを備える。すなわち、例えば車両の運転者等とされるユーザの脳波に基づいて、ユーザが危険を察知しているか否か等の危険察知に係る状態評価を行い、評価結果情報が車両側に送信されるようにする。

Description

評価装置、評価方法
 本技術は、例えば車両の運転者等とされたユーザの危険察知に係る状態評価を行う評価装置とその方法に関する。
 例えば下記特許文献1乃至3に開示されるように、車両の運転者の心理状態や健康状態を例えば脈拍や心拍等といった生体情報を通じて監視し、安全制御に役立てるということが考えられている。
 運転者の状態に異常が認められた場合には、車両の乗員や周囲の車両に注意喚起を行ったり、自動的な減速を行ったりすることが考えられる。
特開2006-280513号公報 特開2014-89557号公報 国際公開第2014-24606号
 本技術は、車両運行上の安全性を高めることを目的とするものである。
 本技術に係る評価装置は、車両との通信が可能とされた通信部と、脳波センサにより検出されたユーザの脳波に基づいて前記ユーザの危険察知に係る状態評価を行い、評価結果情報を前記通信部により前記車両に送信させる制御部と、を備えるものである。
 すなわち、例えば車両の運転者等とされるユーザの脳波に基づいて、ユーザが危険を察知しているか否か等の危険察知に係る状態評価を行い、評価結果情報が車両側に送信されるようにする。
 上記した本技術に係る評価装置においては、前記制御部は、脳波におけるβ波の振幅の大きさ、β波のパワーの強さ、β波の位相の少なくとも何れかに基づいて前記危険察知に係る状態評価を行うことが望ましい。
 危険が迫り緊張度が高まるとβ波の振幅やパワーに変化が生じる。また、脳の複数位置で検出されるβ波に位相ずれが生じていると危険察知に係る状態評価の精度が低下する虞がある。そのため、β波の振幅の大きさ、パワーの強さ、位相を考慮した状態評価を行う。
 上記した本技術に係る評価装置においては、前記制御部は、脳波におけるβ波とβ波以外の成分との相対比較に基づいて前記危険察知に係る状態評価を行うことが望ましい。
 すなわち、β波単体に基づく評価とするのではなく、α波やθ波といったβ波以外の成分との相対的な比較に基づいて危険察知に係る状態評価を行う。
 上記した本技術に係る評価装置においては、前記制御部は、現在位置が、過去に回避行動がとられ該回避行動直前の脳波が記録された位置である場合において、前記脳波センサにより検出された脳波と前記回避行動直前の脳波とに基づくマッチングを行った結果に基づき前記危険察知に係る状態評価を行うことが望ましい。
 これにより、ユーザが危険察知に応じて急ブレーキや急操舵等の回避行動をとる可能性についての評価を、過去の記録に基づいて適切に行うことが可能とされる。
 上記した本技術に係る評価装置においては、前記制御部は、現在位置情報、前記脳波センサにより検出された脳波の情報、及び動きセンサにより検出された動き情報を外部装置に送信させる送信処理を実行することが望ましい。
 これにより、評価装置の外部において、ユーザが危険察知した場所や危険察知時の脳波、危険察知に応じとられた回避行動の内容、及び事故の有無(衝突の有無)等の情報を管理するためのデータベース(テーブル情報)を構築することが可能とされる。
 上記した本技術に係る評価装置においては、前記制御部は、前記送信処理を前記危険察知に係る状態評価の結果に応じて実行することが望ましい。
 これにより、脳波等の危険分析用の情報の外部装置に対する送信処理は、ユーザが危険察知したと評価された場合に実行し、危険察知していないと評価される場合は実行しないものとすることが可能とされる。
 上記した本技術に係る評価装置においては、前記制御部は、前記脳波センサにより検出された脳波の特徴量を抽出し、抽出した特徴量の情報を前記送信処理により送信させることが望ましい。
 これにより、脳波センサにより検出された脳波信号そのものを送信する場合よりもデータ量削減が図られる。
 上記した本技術に係る評価装置においては、前記制御部は、前記通信部を介し前記車両から取得した車両情報を前記送信処理により送信させることが望ましい。
 これにより、ユーザが危険察知したり回避行動をとったり事故が発生したりした場所を表す情報に加えて、危険察知時に対応した車両状態を表す情報を管理するためのデータベースを評価装置の外部において構築することが可能とされる。
 上記した本技術に係る評価装置においては、前記制御部は、前記危険察知に係る状態評価の結果に基づき、現在位置に対応して記録された回避行動の情報を前記通信部により前記車両に送信させることが望ましい。
 これにより、ユーザが危険察知していると評価される場合に、現在位置に対応して記録された回避行動の情報が車両に送信されるようにすることが可能とされる。
 また、本技術に係る評価方法は、脳波センサにより検出されたユーザの脳波に基づいて前記ユーザの危険察知に係る状態評価を行い、評価結果情報を車両との通信が可能とされた通信部により前記車両に送信させる評価方法である。
 このような評価方法によっても、上記した本技術に係る評価装置と同様の作用が得られる。
 本技術によれば、車両運行上の安全性を高めることができる。
 なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術に係る実施形態としての評価装置を含んで構成される運転支援システムの構成例を示した図である。 実施形態としての評価装置と車両の外観構成例を示した図である。 実施形態としての評価装置の内部構成例を示した図である。 実施形態としての車両の内部構成例を示した図である。 実施形態としてのサーバ装置の内部構成例を示した図である。 実施形態としての評価装置が有する機能を説明するための機能ブロック図である。 実施形態としてのサーバ装置が有する機能を説明するための機能ブロック図である。 実施形態における分析用テーブルのデータ構造例を示した図である。 実施形態における評価用テーブルのデータ構造例を示した図である。 実施形態としての運転支援手法を実現するために評価装置が実行すべき処理手順を示したフローチャートである。 実施形態としての評価装置が実行するサーバ装置への情報送信処理のフローチャートである。 第一変形例における評価用テーブルのデータ構造例を示した図である。 第一変形例としての運転支援手法を実現するために評価装置が実行すべき処理手順を示したフローチャートである。
 以下、添付図面を参照し、本技術に係る実施形態を次の順序で説明する。

<1.運転支援システムの概要>
[1-1.システムの概要]
[1-2.評価装置の構成]
[1-3.車両の構成]
[1-4.サーバ装置の構成]
<2.実施形態としての運転支援手法>
<3.処理手順>
<4.実施形態の変形例>
[4-1.第一変形例]
[4-2.第二変形例]
[4-3.その他変形例]
<5.実施形態のまとめ>
<6.本技術>
<1.運転支援システムの概要>
[1-1.システムの概要]

 図1は、本技術に係る実施形態としての評価装置1を備えた運転支援システム5の構成例を示している。
 運転支援システム5は、複数の評価装置1と、複数の車両2と、各評価装置1との間でネットワーク3を介して通信可能に構成されたサーバ装置4とを備えている。ネットワーク3は、例えばインターネット等とされる。
 本例において、評価装置1は、車両2の運転者としてのユーザに装着される装置とされ、車両2との間でデータ通信を行うことが可能に構成されている。
 車両2は、自動ブレーキや自動操舵等、運転支援に係る制御を実行可能に構成されている。
 図2は、評価装置1と車両2の外観構成例を示しているが、本例では、車両2は自動二輪車とされ、評価装置1は例えばヘルメット型の形状を有するものとされる。
 後述するように、評価装置1は、ユーザの脳波を検出する機能を有する。また評価装置1は、現在位置検出機能、加速度センサ等により動きを検出する機能、及び車両2から車速等の車両情報を取得する機能も有している。
 なお、評価装置1はユーザに装着される形態に限らず、車両2に装着される形態も採り得る。その場合、後述する脳波センサ11は、評価装置1に外付けされる。
 運転支援システム5において、評価装置1は、車両2を運転するユーザの脳波を検出した結果に基づき、ユーザの危険察知に係る状態評価を行う。そして評価装置1は、該危険察知に係る状態評価の結果を表す情報を対応する車両2(つまり評価装置1を装着したユーザが運転する車両2)に送信する。これにより車両2は、ユーザの危険察知に係る状態評価結果を運転支援制御に反映させることができる。
 また、本例の運転支援システム5において、評価装置1は、検出した脳波に基づき、ユーザが危険を察知しているか否かについての評価を行い、危険を察知していると評価した場合は、危険察知された際の状況を表す情報をネットワーク3を介してサーバ装置4に送信する。
 この際に送信する情報の詳細については後述するが、少なくとも検出した脳波の情報、検出された動きを表す情報、及び車両2から取得した車両情報を、危険察知時に取得された現在位置情報と共にサーバ装置4に送信する。
 これによりサーバ装置4においては、ユーザが危険を感じた場所や、危険を感じた際の動き(車両2の挙動と換言することもできる)や車両情報を各評価装置1から収集することが可能とされる。
 このように収集された情報は、車両2を運転するユーザがどのような場所で危険を感じ、また、危険を感じた際にユーザがどのような回避行動をとったか等の分析に用いることができる。
[1-2.評価装置の構成]

 図3は、評価装置1の内部構成例を示した図である。
 図示のように評価装置1は、脳波を検出する脳波センサ11と、位置を検出する位置センサ12と、動きを検出する動きセンサ13と、これら各センサによる検出信号が入力される制御部14と、各種情報を記憶する記憶部15と、外部装置との間でデータ通信を行うための第一通信部16及び第二通信部17とを備えている。
 脳波センサ11は、ユーザの頭皮に接する複数の電極を有し、該電極によりユーザの脳波を検出する。
 位置センサ12は、例えばGPS(Global Positioning System)センサ等のGNSS(Global Navigation Satellite System)センサとされ、位置検出を行う。
 動きセンサ13は、例えばGセンサ(加速度センサ)やジャイロセンサ(角速度センサ)等、動きを検出するセンサを包括的に表している。本例において、動きセンサ13としてはGセンサとジャイロセンサが設けられ、従って動きセンサ13により検出される動き情報は加速度と角速度の情報とされる。
 制御部14は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を有するマイクロコンピュータを備えて構成され、ROMに記憶されたプログラムに従った処理を実行することで評価装置1の全体制御を行う。
 例えば、制御部14は、第一通信部16を介し車両2との間でデータ通信を行う。
 第一通信部16は、例えばBluetooth(登録商標)等の所定通信方式による近距離無線通信を行う。
 なお、評価装置1と車両2との間の通信は無線に限定されるものではなく有線であってもよい。
 また、制御部14は、第二通信部17を介し外部装置との間でデータ通信を行う。
 第二通信部17は、ネットワーク3を介したデータ通信を行うことが可能に構成されており、制御部14は、第二通信部14を介し、ネットワーク3に接続された外部装置(特に本例ではサーバ装置4)との間でデータ通信を行う。
 制御部14は、脳波センサ11により検出されたユーザの脳波に基づいて、ユーザの危険察知に係る状態評価や、評価結果に応じた車両2やサーバ装置4に対する情報送信処理を行うが、これについては後述する。
 記憶部15は、例えばHDD(Hard Disk Drive)やSSD(Solid State Drive)等の記憶デバイスを包括的に表したものであり、評価装置1において各種のデータ記憶に用いられる。記憶部15には、制御部14による制御に必要な各種データが記憶される。特に、本例の記憶部15には、制御部14が上記した危険察知に係る状態評価を行うために用いる評価用テーブル15aが記憶されるが、これについては後述する。
[1-3.車両の構成]

 図4は、車両2の内部構成例を示した図である。
 なお、図4では、車両2の内部構成のうち主として本技術に係る要部の構成のみを抽出して示している。
 車両2は、車外を撮像する撮像部2と、撮像部2による撮像画像を処理する画像処理部22と、運転支援に係る制御を行う運転支援制御部23を備えると共に、表示制御部24、表示部25、エンジン制御部26、エンジン関連アクチュエータ27、操舵制御部28、操舵関連アクチュエータ29、ブレーキ制御部30、ブレーキ関連アクチュエータ31、センサ・操作子類32、バス33、及び通信部34を備えている。
 撮像部21は、車外を撮像する少なくとも二つのカメラ部を有する。各カメラ部は、それぞれカメラ光学系とCCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)などの撮像素子とを有して構成され、カメラ光学系により撮像素子の撮像面に被写体像が結像されて受光光量に応じた電気信号が画素単位で得られる。
 撮像部21では、二つのカメラ部が車両進行方向に向けられている。これら二つのカメラ部は、いわゆるステレオ撮像法による測距が可能となるように設置されている。各カメラ部で得られた電気信号はA/D変換や所定の補正処理が施され、画素単位で所定階調による輝度値を表すデジタル画像信号(撮像画像データ)として画像処理部22に供給される。
 画像処理部22は、例えばCPU、ROM、RAM等を有するマイクロコンピュータを備えて構成され、撮像部21が車外を撮像して得られた撮像画像データに基づき、車外環境の認識に係る所定の画像処理を実行する。
 特に、画像処理部22は、ステレオ撮像により得られた各撮像画像データに基づく各種の画像処理を実行し、自車前方の立体物データや白線データ等の前方情報を認識し、これら認識情報等に基づいて自車走行路を推定する。さらに、画像処理部22は、認識した立体物データ等に基づいて自車走行路上の先行車両の検出を行う。
 具体的に、画像処理部22は、ステレオ撮像された各撮像画像データに基づく処理として、例えば以下のような処理を行う。先ず、各撮像画像データとしての撮像画像対に対し、対応する位置のずれ量(視差)から三角測量の原理に基づき距離情報を生成する。そして、距離情報に対して周知のグルーピング処理を行い、グルーピング処理した距離情報を予め記憶しておいた三次元的な道路形状データや立体物データ等と比較することにより、白線データ、道路に沿って存在するガードレール、縁石等の側壁データ、車両等の立体物データ等を抽出する。さらに、画像処理部22は、白線データや側壁データ等に基づいて自車走行路を推定し、自車走行路(片側複数走行車線の場合は自車走行車線とその隣接走行車線を含む)上に存在する立体物であって、自車両と略同じ方向に所定の速度(例えば、0Km/h以上)で移動するものを同方向他車両として抽出(検出)する。そして、同方向他車両を検出した場合には、その車両情報として、相対距離(=自車両との離間距離)、相対速度(=相対距離の変化割合)、他車両車速(相対速度+自車速)、及び他車両加速度(=他車両車速の微分値)を算出する。なお、自車速は、後述する車速センサ32aが検出する自車両の走行速度である。画像処理部22は、同方向他車両のうち自車走行車線上に存在する他車両を先行車両として認識する。また、画像処理部22は、同方向他車両の中で、特に他車両車速が所定値以下(例えば、4Km/h以下)で且つ加速していないものは、略停止状態の他車両として認識する。
 また、画像処理部22は、上記した立体物データとして、他車両以外の物体、例えば歩行者や障害物等を認識する処理も行う。
 運転支援制御部23は、例えばCPU、ROM、RAM等を有するマイクロコンピュータを備えて構成され、画像処理部22による画像処理の結果や、センサ・操作子類32で得られる検出情報、操作入力情報等に基づき、運転支援に関する各種の制御処理を実行する。運転支援制御部23は、同じくマイクロコンピュータを有して構成された表示制御部24、エンジン制御部26、操舵制御部28、ブレーキ制御部30の各制御部とバス33を介して接続されており、これら各制御部との間で相互にデータ通信を行うことが可能とされる。運転支援制御部23は、上記の各制御部のうち必要な制御部に対して指示を行って運転支援に係る動作を実行させる。
 センサ・操作子類32は、車両2に設けられた各種のセンサや操作子を包括的に表している。センサ・操作子類32が有するセンサとしては、自車両の速度を自車速として検出する車速センサ32a、エンジンの回転数を検出するエンジン回転数センサ32b、アクセル開度を検出するアクセル開度センサ32c、緯度・経度・高度による位置を検出(測位)する位置センサ32d、ヨーレート(Yaw Rate)を検出するヨーレートセンサ32e、加速度を検出するGセンサ32f、及びブレーキの操作/非操作に応じてON/OFFされるブレーキスイッチ32gがある。
 また、図示は省略したが、センサ・操作子類32は、他のセンサとして、例えばエンジンへの吸入空気量を検出する吸入空気量センサ、吸気通路に介装されてエンジンの各気筒に供給する吸入空気量を調整するスロットル弁の開度を検出するスロットル開度センサ、エンジン温度を示す冷却水温を検出する水温センサ等も有する。
 なお、図示は省略したが、センサ・操作子類32が備える操作子としては、車両2に対する各種動作指示を行うための操作子が設けられ、例えばエンジンの始動/停止を指示するためのイグニッションスイッチや、方向指示器の点灯/非点灯を指示するためのウィンカースイッチ等がある。
 表示部25は、運転者により視認可能な位置に設置された表示デバイスを包括的に表している。表示制御部24は、例えば運転支援制御部23等、バス33に接続された制御部からの指示に基づいて表示部25による表示動作を制御する。
 エンジン制御部26は、センサ・操作子類32における所定のセンサからの検出信号や操作子による操作入力情報等に基づき、エンジン関連アクチュエータ27として設けられた各種アクチュエータを制御する。エンジン関連アクチュエータ27としては、例えばスロットル弁を駆動するスロットルアクチュエータや燃料噴射を行うインジェクタ等のエンジン駆動に係る各種のアクチュエータが設けられる。
 例えば、エンジン制御部26は、前述したイグニッションスイッチの操作に応じてエンジンの始動/停止制御を行う。また、エンジン制御部26は、エンジン回転数センサ32bやアクセル開度センサ32c等の所定のセンサからの検出信号に基づき、燃料噴射タイミング、燃料噴射パルス幅、スロットル開度等の制御も行う。
 またエンジン制御部26は、運転支援制御部23からの指示に基づき、目標とするスロットル開度を例えばマップ等から求め、求めたスロットル開度に基づきスロットルアクチュエータの制御(エンジンの出力制御)を行うことも可能とされる。
 操舵制御部28は、運転支援制御部23から指示される操舵角の情報に基づいて、操舵関連アクチュエータ29として設けられたアクチュエータを制御する。操舵関連アクチュエータ29としては、例えばステアリングシャフトに操舵トルクを与えるステアリングモータ等が挙げられる。
 これにより、運転者の操舵によらず操舵角を変更可能とされている。
 ブレーキ制御部30は、センサ・操作子類32における所定のセンサからの検出信号等に基づき、ブレーキ関連アクチュエータ31として設けられた各種のアクチュエータを制御する。ブレーキ関連アクチュエータ31としては、例えば、ブレーキブースターからマスターシリンダへの出力液圧やブレーキ液配管内の液圧をコントロールするための液圧制御アクチュエータ等、ブレーキ関連の各種のアクチュエータが設けられる。例えば、ブレーキ制御部30は、所定のセンサ(例えば車軸の回転速度センサや車速センサ32a)の検出情報から車輪のスリップ率を計算し、スリップ率に応じて上記の液圧制御アクチュエータにより液圧を加減圧させることで、所謂ABS(Antilock Brake System)制御を実現する。
 また、ブレーキ制御部30は、運転支援制御部23から出力された液圧の指示情報に基づき、上記の液圧制御アクチュエータを制御して車両2を制動させる。これにより、運転者のブレーキ操作によらず車両2を制動させるいわゆる自動ブレーキが実現される。
 通信部34は、運転支援制御部23に接続されている。通信部34は、例えばBluetooth等、評価装置1における第一通信部16と同様の通信方式による近距離無線通信を行う。これにより運転支援制御部23は、評価装置1における制御部14との間でデータ通信を行うことが可能とされる。
[1-4.サーバ装置の構成]

 図5は、サーバ装置4の内部構成例を示している。
 サーバ装置4は、制御部41、記憶部42、入力部43、出力部44、通信部45、及びバス46を備えている。図示のように制御部41、記憶部42、入力部43、出力部44、及び通信部45はバス46を介して接続されている。
 制御部41は、例えばCPU、ROM、RAM等を有するマイクロコンピュータを備えて構成され、ROMに記憶されたプログラム、または記憶部42からRAMにロードされたプログラムに従って各種の処理を実行する。
 記憶部42は、例えばHDDやSSD等の記憶デバイスを包括的に表したものであり、サーバ装置4において各種のデータ記憶に用いられる。例えば、記憶部42には、制御部41による制御に必要な各種データが記憶される。また、特に、本例の記憶部42には、各評価装置1からの取得情報に基づいて作成される分析用テーブル42aが記憶されるが、これについては後述する。
 入力部43は、キーボード、マウス、タッチパネルなどの入力デバイスからの入力信号を処理し、入力デバイスによる入力情報を制御部41に伝達する。
 出力部44は、LCD(Liquid Crystal Display)、有機EL(Electroluminescence)パネルなどよりなるディスプレイ、並びにスピーカなどにより構成される。
 通信部45は、ネットワーク3を介した外部装置との間でのデータ通信が可能に構成される。制御部41は、通信部45を介して、ネットワーク3経由で外部装置、特に本例では評価装置1との間でデータ通信を行う。
<2.実施形態としての運転支援手法>

 図6は、評価装置1が有する機能を説明するための機能ブロック図である。
 図示のように評価装置1は、通信部F1及び制御部F2としての機能を有する。
 通信部F1は、車両2との通信が可能とされる。この通信部F1としての機能は、本例では第一通信部16により実現される。
 制御部F2は、脳波センサ11により検出されたユーザの脳波に基づいて、ユーザの危険察知に係る状態評価を行い、評価結果情報を通信部F1により車両2に送信させる。この制御部F2としての機能は、本例では制御部14により実現される。
 具体的に、制御部F2は、脳波におけるβ波に基づいて危険察知に係る状態評価を行う。
 ここで、脳波には、δ波、θ波、α波、β波などの複数の成分が含まれている。これら成分は、それぞれ周波数帯域が異なるものとされ、例えばα波は8Hz~12Hz程度の帯域成分とされ、β波は13Hz~20Hz程度の帯域成分とされている。δ波は、δ波、θ波、α波、β波のうち最も低帯域の成分とされ、θ波はδ波とα波との間の周波数帯域の成分とされる。
 脳波を構成する成分のうち、α波はリラックス状態にあるときに出現し易い傾向とされるのに対し、β波は緊張状態にあるときに出現し易い傾向とされる。このため本例では、β波に基づき、ユーザが危険察知しているか否かについての評価、換言すればユーザによる危険察知有無の判定を行う。
 具体的に、β波に基づく危険察知有無の判定手法としては、β波の振幅の大きさ、β波のパワーの強さ、β波の位相の少なくとも何れかに基づく手法が挙げられるが、以下の説明では一例として、β波の振幅の大きさに基づく判定手法を採用する場合を例示する。
 ユーザの危険察知有無の判定は、β波単体に基づき行うことも可能であるが、本例では危険察知有無の評価精度向上を図るべく、脳波の他成分との相対比較に基づいて危険察知有無の判定を行う。具体的に本例では、α波とβ波との振幅差Δが所定の閾値THΔを超えるか否かの判定を、ユーザの危険察知有無の判定として行う。すなわち、振幅差Δが閾値THΔを超えた場合は危険察知有り、振幅差Δが閾値THΔ以下である場合は危険察知無しとの判定結果を得る。
 なお、危険察知有無の判定は、上記例のようにβ波とそれ以外の単一の成分との相対比較に基づき行うことに限らず、β波とそれ以外の複数成分との相対比較に基づき行うこともできる。
 ここで、ユーザの危険察知有無の判定について、上述したβ波のパワーの強さに基づく判定手法としても、上記と同様に所定閾値との比較結果に基づき行うものとすればよい。
 また、β波の位相に基づく判定手法としては、複数の電極により脳の複数位置で脳波を検出する場合に対応した手法となる。複数位置のβ波に基づき危険察知有無の評価を行う手法としては、複数位置のβ波の加算平均を危険察知有無の評価指標として用いる手法が挙げられるが、このとき、位置によってβ波の位相に差が生じていると、上記の評価指標を計算するため各位置のβ波を加算したときに、少なくとも一部のβ波間で波形が打ち消し合って正確な評価指標を計算できなくなる虞がある。このため、各位置のβ波についてフーリエ変換により位相成分を抽出し、位相成分が特定の時間範囲内でどのように変化しているかを解析し、評価指標の計算に反映させる。これにより、危険察知有無の評価精度の向上を図ることができる。
 本例の制御部F2は、上記のような危険察知有無の判定の結果、危険察知有りと判定した場合には、危険察知に係る状態評価結果を表す情報、すなわち評価結果情報を通信部F1により車両2(運転支援制御部23)に送信させる。
 これにより車両2側では、ユーザが危険察知に応じて急ブレーキや急操舵等の危険を回避するための回避行動をとる前に、危険回避のための運転支援制御を開始する、例えば車両2の制動や操舵のための制御を開始することが可能とされる。
 人が危険を察知してから回避行動をとるまでの間には、脳内における運動野への指令伝達、及び運動野から必要な筋肉への指令伝達を要することから、相応のタイムラグが生じる。一方で、脳波検出結果から危険察知有無に係る評価を行って評価結果情報を送信するまでに要する時間、及び評価結果情報に基づき車両2側が運転支援制御を開始するまでに要する時間はごく僅かである。このため、ユーザが危険察知して実際に行動を起こすよりも前に、危険回避のための運転支援制御を開始することが可能となる。
 なお、本例の制御部F2は、ユーザの危険察知に係る状態評価としては、上記のような検出脳波に基づく危険察知有無の判定以外に、前述した評価用テーブル15a(図3参照)を用いた評価も行うが、これについては後述する。
 ここで、脳波センサ11により脳波を検出する場合において、ユーザの体が動いていると脳波のノイズとなるので、動きセンサ13で検出した動き情報に基づいて脳波検出信号についてのノイズ抑圧処理を行ってもよい。
 また、本例の制御部F2は、上記のような危険察知有無の判定の結果、危険察知有りと判定した場合には、脳波センサ11により検出された脳波の情報を含む所定情報をサーバ装置4に対して送信させる処理を行う。
 ここでのサーバ装置4に対する送信情報としては、前述した分析用テーブル42aに供される情報とされ、具体的には、脳波センサ11により検出された脳波の情報と共に、位置センサ12が検出した位置情報、動きセンサ13が検出した動き情報(本例では加速度及び角速度の情報)、及び車両2から取得した車両情報を送信させる。
 この際、脳波の情報については、危険察知有りと判定したタイミングから過去一定期間の波形情報を送信させる。
 またこの際、脳波情報としては、脳波センサ11による検出信号(脳波信号)そのものを送信させるのではなく、脳波信号から特徴量を抽出し、抽出した特徴量の情報を送信させる。具体的には、脳波信号から抽出したβ波の情報を送信させる。
 これにより、サーバ装置4への送信データ量の削減を図ることができる。
 また、位置情報については、危険察知有りと判定したタイミングにおいて位置センサ12により検出された位置情報を送信させる。
 動き情報については、危険察知有りと判定したタイミング以降一定期間の情報を送信させる。これによりサーバ装置4側では、危険察知後にとられた回避行動の分析や、車両2の衝突有無についての分析を行うことが可能とされる。
 さらに、車両情報については、車両2(運転支援制御部23)から取得した車速の情報や、歩行者及び他車の認識情報(歩行者、他車それぞれの認識数や車両2との位置関係等を表す情報)を送信させる。
 図7は、サーバ装置4の制御部41が有する機能を説明するための機能ブロック図である。
 図示のようにサーバ装置4の制御部41は、分析用テーブル作成部41a、評価用テーブル情報生成部41b、及び情報送信部41cとしての機能を有する。
 分析用テーブル作成部41aは、評価装置1より送信される脳波情報、位置情報、動き情報、及び車両情報に基づき、分析用テーブル42aを作成する。
 図8は、分析用テーブル42aのデータ構造例を示している。
 図示のように分析用テーブル42aにおいては、日時ごとに、位置、脳波データ、回避行動、車両状態、及び衝突有無の情報が対応づけられている。
 日時は、評価装置1より脳波情報、位置情報、動き情報、及び車両情報を受信した日時である。本例では、これら脳波情報、位置情報、動き情報、及び車両情報は、上述のようにユーザが危険察知したと判定されたことに応じて評価装置1より送信されるため、該日時の情報はユーザが危険察知した日時を表す情報と換言できる。
 位置は、評価装置1より受信した位置情報であり、脳波データは評価装置1より受信した脳波情報のデータである。
 回避行動は、ユーザが危険察知に応じてとった回避行動を意味するものであり、例えば制御部41が評価装置1より受信した動き情報に基づいて解析する。本例では、回避行動については急ブレーキと急操舵の解析を行う。具体的には、「急ブレーキ」「急操舵」「急ブレーキ及び急操舵」の何れの回避行動がとられたかを動き情報に基づいて解析する。
 なお、解析では、これら何れの回避行動もとられなかったとの結果が得られることもある。図中において「回避行動」が空欄となっている部分は、何れの回避行動もとられなかったことを意味している。
 車両状態は、評価装置1より受信した車両情報に基づく情報が格納される。具体的に本例では、車速、歩行者の有無、及び他車の有無を表す情報が格納される。
 衝突有無は、危険察知後における車両2の衝突有無を表す情報であり、例えば制御部41が評価装置1より受信した動き情報に基づいて解析する。
 このような分析用テーブル42aを作成することで、各車両2のユーザが危険察知したり回避行動をとったり事故が発生したりした場所を容易に管理することが可能となり、危険分析に役立てることができる。
 また、本例では、分析用テーブル42aには危険察知時における車両情報(車両状態を表す情報)も格納されるが、これにより、例えば同じ回避行動がとられた場合であっても車両状態の違いに応じたより細かな場合分けを行うことができる等、より詳細な危険分析を行うことができる。
 図7に説明を戻す。
 評価用テーブル情報生成部41bは、分析用テーブル42aの情報に基づき、評価装置1における評価テーブル15aに格納されるべき情報である評価用テーブル情報を生成する。
 図9は、評価用テーブル15aのデータ構造例を示している。
 図示のように評価用テーブル15aにおいては、位置ごとに脳波代表データが対応づけられている。
 ここでの位置は、分析用テーブル42aにおける位置、すなわち本例ではユーザが危険察知した位置である。脳波代表データは、位置ごとの脳波データの代表データを意味する。代表データとしては、本例では位置ごとの脳波(β波)の平均波形として計算した脳波データを用いる。
 なお、脳波代表データとしては、平均波形を計算することに限定されず、例えば位置ごとの脳波データのうちから平均的な波形を有する一つの脳波データを用いる等、その位置について取得された脳波データの代表的なデータが用いられるようにすればよい。
 図7に示す評価用テーブル情報生成部41bは、分析用テーブル42aに格納された脳波データのうち、位置が一致する脳波データの脳波代表データを求める。
 なお、分析用テーブル42aにおける位置のうち脳波データが一つのみ取得されている位置については、該取得された一つの脳波データを脳波代表データとして用いる。
 そして、評価用テーブル情報生成部41bは、位置と脳波代表データとを対応づけた情報を評価用テーブル情報として生成する。
 情報送信部41cは、評価用テーブル情報生成部41bが生成した評価用テーブル情報を評価装置1に対して送信するための処理を行う。例えば、情報送信部41cは、評価装置1からの要求に応じて評価用テーブル情報の送信処理を行う。
 評価用テーブル情報を要求した評価装置1は、受信した評価用テーブル情報に基づいて図9に示したような評価用テーブル15aを生成する。或いは、既に過去に受信した評価用テーブル情報に基づいて評価用テーブル15aを生成済みの場合には、受信した評価用テーブル情報に基づいて評価用テーブル15aの情報内容を更新する。これにより、評価用テーブル15aの情報内容を最新内容に更新することができる。
 ここで、本例の評価装置1において、制御部F2は、ユーザの危険察知に係る状態評価として、上述したようなβ波の振幅の大きさに基づく危険察知有無の評価のみでなく、評価用テーブル15aに基づく評価も行う。
 具体的に制御部F2は、β波の振幅の大きさに基づきユーザが危険察知していると判定したことに応じて、評価用テーブル15aより、位置センサ12が検出する現在位置に対応した脳波代表データを取得する。この際、現在位置に対応した脳波代表データとしては、評価用テーブル15aにおける位置のうち、現在位置と一致する位置に対応づけられた脳波代表データのみでなく、現在位置に対する誤差が例えば数メートル~十数メートル程度の所定誤差内となる位置に対応づけられた脳波代表データを含んでもよい。
 そして、制御部F2は、取得した脳波代表データと、脳波センサ11より取得した脳波データ(危険察知有無の評価に用いた脳波データ)とが一致するか否かを判定し、両者が一致すると判定した場合は、車両2に対するアラート情報として、高レベルアラート情報を生成し、第一通信部16により車両2側に送信させる。
 これにより、β波の振幅の大きさに基づきユーザが危険察知していると評価され、且つその際の脳波が過去に現在位置での危険察知時に検出された脳波と一致するとされた場合、すなわち、ユーザが危険察知している確証性がより高いと評価される場合には、車両2に対するアラート情報として、高レベルアラート情報が送信される。
 一方、制御部F2は、評価用テーブル15aより取得した脳波代表データと、脳波センサ11より取得した脳波データとが一致しないと判定した場合や、評価用テーブル15aに現在位置に対応した脳波代表データが存在しない場合には、車両2に対するアラート情報として低レベルアラート情報を生成し、第一通信部16により車両2側に送信させる。すなわち、ユーザが危険察知している確証性が比較的低いと評価される場合には、低レベルアラート情報が送信される。
 ここで、本例の車両2において、運転支援制御部23は、運転支援制御のレベル、例えば急ブレーキや急操舵の許容レベル(どの程度「急」なブレーキ、操舵までを許容するか)を段階的に切り替えられるように構成されている。そして、運転支援制御部23は、評価装置1より受信したアラート情報が低レベルアラート情報であれば、急ブレーキや急操舵の許容レベルを「通常」とした運転支援制御を行う。一方、評価装置1より受信したアラート情報が高レベルアラート情報であれば、急ブレーキや急操舵の許容レベルを「通常」よりも引き上げたレベルとした運転支援制御を行う(つまりより危険回避能力を高めた運転支援制御を可能な状態とする)。
 上記のように評価装置1がβ波の振幅の大きさのみでなく、評価用テーブル15aにおける脳波代表データとの一致/不一致も含めてユーザの危険察知に係る状態評価を行い、その評価レベルに応じたアラート情報を車両2側に送信することで、車両2側では、ユーザの危険察知に係る状態評価レベルに応じて運転支援制御のレベルを切り替えることができる。
 これにより、ユーザが危険察知している確証性が低い場合に過剰な制御レベルによる運転支援制御が行われてしまうことの防止を図ることができる等、適切な制御レベルでの運転支援制御が実行されるようにすることができる。
<3.処理手順>

 図10のフローチャートを参照して、上記により説明した実施形態としての運転支援手法を実現するために評価装置1が実行すべき処理手順を説明する。
 なお、これら図10に示す処理は評価装置1における制御部14がROMに格納されたプログラムに従って実行する。
 図10において、制御部14は、先ずステップS101の位置取得処理として、位置センサ12により検出される位置情報(現在位置情報)を取得する処理を行う。
 次いで、ステップS102で制御部14は、脳波取得処理として脳波センサ11により検出される脳波を取得し、ステップS103の特徴量抽出処理により、該取得した脳波からβ波及びα波の成分を抽出する処理を行う。
 ステップS103に続くステップS104で制御部14は、β波の振幅が大きいか否かを判定する。つまり本例では、ステップS103で得たβ波とα波の振幅差Δを計算し、振幅差Δが閾値THΔを超えているか否かの判定を行う。
 振幅差Δが閾値THΔを超えておらず、β波の振幅が大きくないとの否定結果が得られた場合、制御部14はステップS112に進み、処理終了か否か、すなわち、例えば評価装置1が電源オフとされる等の所定の処理終了条件が成立したか否かを判定し、処理終了でなければステップS101に戻る。すなわち、β波の振幅が大きくないと判定される場合には、サーバ装置4に対する情報送信(S105)や車両2に対するアラート情報の送信(S111)は行われない。
 一方、振幅差Δが閾値THΔを超えており、β波の振幅が大きいとの肯定結果が得られた場合、制御部14はステップS105に進み、送信処理実行制御として、サーバ装置4への情報送信処理の実行制御を行う。
 ここで、図11のフローチャートによりサーバ装置4への情報送信処理について説明する。本例において、制御部14は、図11に示す送信処理を図10に示す処理と並行して実行可能とされる。制御部14は、ステップS105の実行制御に応じて図11に示す送信処理を開始する。
 図11において、制御部14はステップS201で、動き情報取得処理を実行する。すなわち、動きセンサ13により検出される動き情報を取得する。先の説明から理解されるように、ここでの動き情報としては、危険察知有りと判定したタイミング(つまりステップS104で肯定結果が得られたタイミング)以降一定期間の情報を取得する。
 次いで、ステップS202で制御部14は、車両情報取得処理として、車両2から車両情報を取得する処理を実行する。先の説明から理解されるように、車両情報については、運転支援制御部23より車速の情報、歩行者及び他車の認識情報を取得する。
 そして、制御部14は続くステップS203で、位置、脳波特徴量、動き情報、及び車両情報をサーバ装置4に送信するための処理を実行する。すなわち、ステップS101で取得した現在位置情報、ステップS103で抽出したβ波としての特徴量、ステップS201、S202でそれぞれ取得した動き情報、車両情報を第二通信部17によりサーバ装置4に送信させる。
 説明を図10に戻す。
 制御部14は、ステップS105の送信処理実行制御を実行したことに応じ、ステップS106でテーブルに現在位置の対応データがあるか否かを判定する。すなわち、評価テーブル15aに現在位置に対応した脳波代表データが存在するか否かを判定する。
 テーブルに現在位置の対応データがあれば、制御部14はステップS107に進み、特徴量比較処理を実行する。すなわち、ステップS103で抽出したβ波のデータと、ステップS106で評価テーブル15aにおける存在が確認された現在位置に対応する脳波代表データ(本例ではβ波)とのマッチングを行う。
 そして、続くステップS107で制御部14は、当該マッチングの結果、両データが一致するか否かを判定する。
 両データが一致すると判定した場合、制御部14はステップS109に進み、高レベルアラート情報を生成した上で、ステップS111でアラート情報を車両2に送信するための処理を実行する。すなわち、生成したアラート情報を第一通信部16を介して車両2側に送信させる。
 また、制御部14は、ステップS106でテーブルに現在位置の対応データがないと判定した場合、及びステップS108でデータが一致しないと判定した場合のそれぞれにおいて、処理をステップS110に進めて低レベルアラート情報を生成する。そして、該ステップS110の処理を実行したことに応じ、制御部14はステップS111のアラート情報送信処理を実行する。
 これにより、検出された脳波が過去に同位置について取得された脳波と一致しない場合や、そもそも評価用テーブル15aに対応する脳波データがなく過去の脳波との一致判定が不能とされた場合には、車両2に対して低レベルアラート情報が送信される。
 制御部14は、ステップS111の送信処理を実行したことに応じ、先に説明したステップS112の終了判定処理を実行する。
 制御部14は、ステップS112で処理終了と判定した場合は、図10に示す一連の処理を終える。
<4.実施形態の変形例>
[4-1.第一変形例]

 ここで、サーバ装置4においては、図8に示したような分析用テーブル42aに基づき、事故回避にあたっての推奨回避行動を位置ごとに分析することが可能である。推奨回避行動としては、例えば、分析用テーブル42aにおける「衝突有無」が「無」となる率が所定値以上となる回避行動を位置ごとに分析することで求めることができる。
 本変形例では、推奨回避行動としては、車両状態ごとの分析も行う。すなわち、例えば車両2が低速走行状態であった場合には回避行動=急ブレーキのときに事故率が比較的顕著に低く、また高速走行状態であった場合には回避行動=急ブレーキ及び急操舵のときに事故率が比較的顕著に低いといったように、推奨回避行動が車両状態に応じて異なるケースがあり得る。そのため、位置ごとの推奨回避行動の分析においては、車両状態ごとに回避行動と事故率との関係性を分析し、車両状態によって低い事故率を示す回避行動が比較的顕著に異なっている場合には、それら異なる回避行動を該位置の車両状態ごとの推奨回避行動として割り当てる。一方、車両状態によらず、低い事故率を示す回避行動が単一の回避行動に絞られる位置については、該単一の回避行動を該位置の推奨回避行動として割り当てる。また、位置よっては、何れの回避行動をとっても事故率に顕著な差が生じない場合もあり得る。そのような場合、該位置についての推奨回避行動の割り当ては行わない。
 本変形例におけるサーバ装置4において、制御部41は、分析用テーブル42aに基づき、前述した位置ごとの脳波代表データを求める処理を行う共に、上記のような位置ごとの推奨回避行動の分析処理を行い、それら処理の結果に基づいて評価用テーブル情報を生成する。具体的に、この場合の評価用テーブル情報としては、位置と、脳波代表データと、該位置の推奨回避行動がある場合には推奨回避行動とを対応づけた情報を生成する。
 図12は、本変形例における評価用テーブル15aのデータ構造例を示している。ここでは、推奨回避行動の車両状態ごとの分析として、低速時、高速時ごとの分析が行われた例を示している。
 サーバ装置4における制御部41は、低速時(例えば40km/h未満)と高速時(例えば40km/h以上)とで低い事故率を示す回避行動が比較的顕著に異なっている位置については、それら低速時の回避行動及び高速時の回避行動をそれぞれ推奨回避行動として割り当てた評価用テーブル情報を生成する。
 また、制御部41は、低速時、高速時に関わらず、低い事故率を示す回避行動が単一の回避行動に絞られる位置については、該単一の回避行動を推奨回避行動として割り当てた評価用テーブル情報を生成し、また、低速時、高速時に関わらず、何れの回避行動をとっても事故率に顕著な差が生じない位置については、脳波代表データのみを対応づけた評価用テーブル情報を生成する。
 この場合の評価装置1における制御部14としても、サーバ装置4に対する評価用テーブル情報の送信要求を行う。そして、該要求に応じて受信した評価用テーブル情報に基づき、評価用テーブル15aの生成、更新を行う。これにより、この場合の記憶部15には図12に示すような評価用テーブル15aが構築される。
 本変形例における制御部14は、図12に示す評価用テーブル15aに基づき、推奨回避行動の情報をアラート情報と共に車両2に対して送信させる。
 これにより車両2は、推奨回避行動、すなわち現在位置で生じる危険に対して過去事故率が低かった回避行動を表す情報に基づいて運転支援制御を行うことができ、安全性を高めることができる。特に、本変形例では、車両状態に応じた推奨回避行動の情報を車両2側に通知できる、すなわち車両2側では車両状態に応じた適切な推奨回避行動を表す情報に基づいて運転支援制御を行うことができるため、より安全性を高めることができる。
 図13は、上記した第一変形例としての運転支援手法を実現するために評価装置1の制御部14が実行すべき処理手順を示したフローチャートである。
 なお図13において、既に図10で説明済みとなった処理と同様の処理については同一ステップ番号を付して説明を省略する。
 この場合の制御部14は、ステップS111の処理に代えて、ステップS301~S303の処理を実行する。
 具体的に、この場合の制御部14は、ステップS109で高レベルアラート情報を生成した場合、及びステップS110で低レベルアラート情報を生成した場合のそれぞれにおいて、処理をステップS301に進める。
 ステップS301で制御部14は、評価用テーブル15aにおいて、現在位置に対応する推奨回避行動が存在するか否かを判定し、推奨回避行動が存在すると判定した場合はステップS302でアラート情報及び推奨回避行動の情報を車両2に送信するための処理を実行し、ステップS112に進む。
 一方、推奨回避行動が存在しないと判定した場合、制御部14はステップS303でアラート情報を車両2に送信するための処理を実行し、ステップS112に進む。
[4-2.第二変形例]

 ここで、実施形態では、β波に基づきユーザが危険察知していると判定した場合には、現在位置に対応する脳波代表データとのマッチングを行った結果に基づいて危険察知に係る状態評価を行うものとしたが、この際の脳波代表データは、回避行動がとられた際の脳波代表データとすることもできる。
 この場合、評価用テーブル15aには、脳波代表データとして、ユーザが危険察知しその後に回避行動がとられた場合についての脳波の代表データが格納される。つまり、この場合の制御部14は、ステップS106~S108の処理のように、評価用テーブル15aにおける現在位置に対応した脳波代表データと、脳波センサ11からの脳波データとのマッチングを行うことで、現在位置で過去にとられた回避行動直前の脳波とのマッチングを行うことができる。すなわち、漠然と危険察知の有無を評価するのではなく、回避行動がとられる程度の危険が察知されているか否かについての評価を行うことができる。
 ここで、上記のような第二変形例としての制御部14による評価動作は、次のように換言することができる。すなわち、制御部14は、現在位置が、過去に回避行動がとられ該回避行動直前の脳波が記録された位置である場合において、脳波センサ11により検出された脳波と、上記回避行動直前の脳波とに基づくマッチングを行った結果に基づき、ユーザの危険察知に係る状態評価を行うものである。
 これにより、ユーザが危険察知に応じて急ブレーキや急操舵等の回避行動をとる可能性についての評価を、過去の記録に基づいて適切に行うことが可能とされる。
 従って、ユーザが回避行動をとる可能性が高い場合に対応して車両2側に回避行動のための運転支援制御を開始させることができ、安全性を高めることができる。
[4-3.その他変形例]

 これまでの説明では、サーバ装置4における分析用テーブル42aについて、各評価装置1から送信された脳波の情報を蓄積するものとしたが、脳波のみでなく、例えば発汗量や心拍数、脈拍数等、脳波以外の生体情報を各評価装置1から収集して蓄積することもできる。
 その際、評価装置1には、対応する生体センサを設け、該生体センサが検出した生体情報をサーバ装置4に対して送信する。
 また、事故が生じる際、ユーザは必ずしも事前に危険察知しているとは限らない。例えば、脇見運転による事故や、後方から他車両が追突する事故等を挙げることができる。
 サーバ装置4側の解析でこのような事故の特定を可能とするために、β波に基づく危険察知有無判定において危険察知なしと判定される場合であっても、評価装置1側から動き情報を送信することが考えられる。具体的には、評価装置1側でも加速度等の動き情報に基づいて衝突の有無を判定し、衝突があったと判定したことに応じ衝突直前の脳波の情報をサーバ装置4に送信するといったことが考えられる。或いは、脳波の情報をサーバ装置4に常時送信するといったことも考えられる。
 また、これまでの説明では、評価装置1からの送信情報に基づく分析用テーブル42a生成のための解析や、分析用テーブル42aに基づいた評価用テーブル情報生成のための分析をサーバ装置4(制御部41)が実行する例を挙げたが、これら解析や分析はサーバ装置4の外部において実行することもできる。
 なお、上記では、本技術が自動二輪車としての車両に適用される例を挙げたが、本技術は二輪車に限定されず、三輪以上の車両にも適用可能である。また、自動車に限定されず、駆動源が人力による車両にも本技術は適用できる(例えば、操舵支援機能を有する自転車等)。
 また、上記では、位置センサ12や動きセンサ13が評価装置1に一体に設けられる例を挙げたが、これらセンサの少なくとも何れかが評価装置1に外付けされる構成を採ることもできる。
<5.実施形態のまとめ>

 上記のように実施形態としての評価装置(同1)は、車両との通信が可能とされた通信部(同F1、第一通信部16)と、脳波センサにより検出されたユーザの脳波に基づいてユーザの危険察知に係る状態評価を行い、評価結果情報を通信部により車両に送信させる制御部(同F2、14)とを備えるものである。
 すなわち、例えば車両の運転者等とされるユーザの脳波に基づいて、ユーザが危険を察知しているか否か等の危険察知に係る状態評価を行い、評価結果情報が車両側に送信されるようにする。
 人が危険を察知してから回避行動をとるまでの間には、脳内における運動野への指令伝達、及び運動野から必要な筋肉への指令伝達を要することから、相応のタイムラグが生じる。一方で、危険を察知した時点で脳は反応を示し、脳波の変化として表れるため、上記のように脳波に基づき危険察知に係る評価結果情報を得、車両側に送信することで、危険察知に応じてユーザが回避行動をとる前の段階で車両に危険回避のための制御を開始させることが可能とされる。
 従って、車両運行上の安全性を高めることができる。
 また、実施形態としての評価装置においては、制御部は、脳波におけるβ波の振幅の大きさ、β波のパワーの強さ、β波の位相の少なくとも何れかに基づいて危険察知に係る状態評価を行っている。
 危険が迫り緊張度が高まるとβ波の振幅やパワーに変化が生じる。また、脳の複数位置で検出されるβ波に位相ずれが生じていると危険察知に係る状態評価の精度が低下する虞がある。そのため、β波の振幅の大きさ、パワーの強さ、位相を考慮した状態評価を行う。
 従って、ユーザの危険察知に係る状態評価を適切に行うことができる。
 また、危険察知の評価にあたり過去に検出された脳波とのマッチングを行うことを不要とすることができる。従って、過去に脳波の記録がない位置においても危険察知の評価を適切に行うことができ、安全性を高めることができる。
 さらに、実施形態としての評価装置においては、制御部は、脳波におけるβ波とβ波以外の成分との相対比較に基づいて危険察知に係る状態評価を行っている。
 すなわち、β波単体に基づく評価とするのではなく、α波やθ波といったβ波以外の成分との相対的な比較に基づいて危険察知に係る状態評価を行う。
 従って、危険察知に係る状態評価の精度向上を図ることができる。
 さらにまた、実施形態としての評価装置においては、制御部は、現在位置が、過去に回避行動がとられ該回避行動直前の脳波が記録された位置である場合において、脳波センサにより検出された脳波と回避行動直前の脳波とに基づくマッチングを行った結果に基づき危険察知に係る状態評価を行っている(第二変形例参照)。
 これにより、ユーザが危険察知に応じて急ブレーキや急操舵等の回避行動をとる可能性についての評価を、過去の記録に基づいて適切に行うことが可能とされる。
 従って、ユーザが回避行動をとる可能性が高い場合に対応して車両側に回避行動のための運転支援制御を開始させることができ、安全性を高めることができる。
 また、実施形態としての評価装置においては、制御部は、現在位置情報、脳波センサにより検出された脳波の情報、及び動きセンサにより検出された動き情報を外部装置に送信させる送信処理を実行している。
 これにより、評価装置の外部において、ユーザが危険察知した場所や危険察知時の脳波、危険察知に応じとられた回避行動の内容、及び事故の有無(衝突の有無)等の情報を管理するためのデータベース(テーブル情報)を構築することが可能とされる。
 従って、危険箇所の分析を容易化することができる。
 さらに、実施形態としての評価装置においては、制御部は、送信処理を危険察知に係る状態評価の結果に応じて実行している。
 これにより、脳波等の危険分析用の情報の外部装置に対する送信処理は、ユーザが危険察知したと評価された場合に実行し、危険察知していないと評価される場合は実行しないものとすることが可能とされる。
 従って、危険分析用の情報を常時送信する必要がなくなるため、通信データ量の削減、及び処理負担の軽減を図ることができる。
 さらにまた、実施形態としての評価装置においては、制御部は、脳波センサにより検出された脳波の特徴量を抽出し、抽出した特徴量の情報を送信処理により送信させている。
 これにより、脳波センサにより検出された脳波信号そのものを送信する場合よりもデータ量削減が図られる。
 従って、通信データ量の削減を図ることができる。
 また、実施形態としての評価装置においては、制御部は、通信部を介し車両から取得した車両情報を送信処理により送信させている。
 これにより、ユーザが危険察知したり回避行動をとったり事故が発生したりした場所を表す情報に加えて、危険察知時に対応した車両状態を表す情報を管理するためのデータベースを評価装置の外部において構築することが可能とされる。
 従って、より詳細な危険分析を行うことができる。
 さらに、実施形態としての評価装置においては、制御部は、危険察知に係る状態評価の結果に基づき、現在位置に対応して記録された回避行動の情報を通信部により車両に送信させている。
 これにより、ユーザが危険察知していると評価される場合に、現在位置に対応して記録された回避行動の情報が車両に送信されるようにすることが可能とされる。
 従って、現在位置で生じる危険に対して過去事故率が低かった回避行動を車両に通知することができる等、より安全性の高まる運転支援制御が車両において実行されるようにすることができる。
 また、実施形態としての評価方法は、脳波センサにより検出されたユーザの脳波に基づいてユーザの危険察知に係る状態評価を行い、評価結果情報を車両との通信が可能とされた通信部により車両に送信させる評価方法である。
 このような実施形態としての評価方法によっても、上記した実施形態としての評価装置と同様の作用及び効果を得ることができる。
 なお、本明細書に記載された効果はあくまでも例示であって限定されるものではなく、また他の効果があってもよい。
<6.本技術>

 なお本技術は以下のような構成も採ることができる。
(1)
 車両との通信が可能とされた通信部と、
 脳波センサにより検出されたユーザの脳波に基づいて前記ユーザの危険察知に係る状態評価を行い、評価結果情報を前記通信部により前記車両に送信させる制御部と、を備える
 評価装置。
(2)
 前記制御部は、
 脳波におけるβ波の振幅の大きさ、β波のパワーの強さ、β波の位相の少なくとも何れかに基づいて前記危険察知に係る状態評価を行う
 前記(1)に記載の評価装置。
(3)
 前記制御部は、
 脳波におけるβ波とβ波以外の成分との相対比較に基づいて前記危険察知に係る状態評価を行う
 前記(1)又は(2)に記載の評価装置。
(4)
 前記制御部は、
 現在位置が、過去に回避行動がとられ該回避行動直前の脳波が記録された位置である場合において、前記脳波センサにより検出された脳波と前記回避行動直前の脳波とに基づくマッチングを行った結果に基づき前記危険察知に係る状態評価を行う
 前記(1)乃至(3)の何れかに記載の評価装置。
(5)
 前記制御部は、
 現在位置情報、前記脳波センサにより検出された脳波の情報、及び動きセンサにより検出された動き情報を外部装置に送信させる送信処理を実行する
 前記(1)乃至(4)の何れかに記載の評価装置。
(6)
 前記制御部は、
 前記送信処理を前記危険察知に係る状態評価の結果に応じて実行する
 前記(5)に記載の評価装置。
(7)
 前記制御部は、
 前記脳波センサにより検出された脳波の特徴量を抽出し、抽出した特徴量の情報を前記送信処理により送信させる
 前記(5)又は(6)に記載の評価装置。
(8)
 前記制御部は、
 前記通信部を介し前記車両から取得した車両情報を前記送信処理により送信させる
 前記(5)乃至(7)の何れかに記載の評価装置。
(9)
 前記制御部は、
 前記危険察知に係る状態評価の結果に基づき、現在位置に対応して記録された回避行動の情報を前記通信部により前記車両に送信させる
 前記(1)乃至(8)の何れかに記載の評価装置。
 1 評価装置、2 車両、4 サーバ装置、5 運転支援システム、11 脳波センサ、12 位置センサ、13 動きセンサ、14 制御部、16 第一通信部、23 運転支援制御部、41 制御部、41a 分析用テーブル作成部、41b 評価用テーブル情報生成部、41c 情報送信部、42a 分析用テーブル、F1 通信部、F2 制御部

Claims (10)

  1.  車両との通信が可能とされた通信部と、
     脳波センサにより検出されたユーザの脳波に基づいて前記ユーザの危険察知に係る状態評価を行い、評価結果情報を前記通信部により前記車両に送信させる制御部と、を備える
     評価装置。
  2.  前記制御部は、
     脳波におけるβ波の振幅の大きさ、β波のパワーの強さ、β波の位相の少なくとも何れかに基づいて前記危険察知に係る状態評価を行う
     請求項1に記載の評価装置。
  3.  前記制御部は、
     脳波におけるβ波とβ波以外の成分との相対比較に基づいて前記危険察知に係る状態評価を行う
     請求項1に記載の評価装置。
  4.  前記制御部は、
     現在位置が、過去に回避行動がとられ該回避行動直前の脳波が記録された位置である場合において、前記脳波センサにより検出された脳波と前記回避行動直前の脳波とに基づくマッチングを行った結果に基づき前記危険察知に係る状態評価を行う
     請求項1に記載の評価装置。
  5.  前記制御部は、
     現在位置情報、前記脳波センサにより検出された脳波の情報、及び動きセンサにより検出された動き情報を外部装置に送信させる送信処理を実行する
     請求項1に記載の評価装置。
  6.  前記制御部は、
     前記送信処理を前記危険察知に係る状態評価の結果に応じて実行する
     請求項5に記載の評価装置。
  7.  前記制御部は、
     前記脳波センサにより検出された脳波の特徴量を抽出し、抽出した特徴量の情報を前記送信処理により送信させる
     請求項5に記載の評価装置。
  8.  前記制御部は、
     前記通信部を介し前記車両から取得した車両情報を前記送信処理により送信させる
     請求項5に記載の評価装置。
  9.  前記制御部は、
     前記危険察知に係る状態評価の結果に基づき、現在位置に対応して記録された回避行動の情報を前記通信部により前記車両に送信させる
     請求項1に記載の評価装置。
  10.  脳波センサにより検出されたユーザの脳波に基づいて前記ユーザの危険察知に係る状態評価を行い、評価結果情報を車両との通信が可能とされた通信部により前記車両に送信させる
     評価方法。
PCT/JP2019/016182 2018-06-27 2019-04-15 評価装置、評価方法 WO2020003697A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/254,359 US11299165B2 (en) 2018-06-27 2019-04-15 Evaluation device and evaluation method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018122301 2018-06-27
JP2018-122301 2018-06-27

Publications (1)

Publication Number Publication Date
WO2020003697A1 true WO2020003697A1 (ja) 2020-01-02

Family

ID=68987018

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/016182 WO2020003697A1 (ja) 2018-06-27 2019-04-15 評価装置、評価方法

Country Status (2)

Country Link
US (1) US11299165B2 (ja)
WO (1) WO2020003697A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111739303A (zh) * 2020-08-19 2020-10-02 交通运输部公路科学研究所 一种智慧高速雨雾行车安全诱导系统的评价方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7044000B2 (ja) * 2018-07-20 2022-03-30 株式会社デンソー 車両制御装置および車両制御方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007171154A (ja) * 2005-11-22 2007-07-05 Equos Research Co Ltd 運転支援装置
JP2017037359A (ja) * 2015-08-06 2017-02-16 アルパイン株式会社 車載装置、注意喚起システム及びコンピュータプログラム
JP2017068761A (ja) * 2015-10-01 2017-04-06 日産自動車株式会社 情報提示装置、走行支援システム、及び情報提示方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2217899A (en) * 1998-01-08 1999-07-26 Richard B. Levin Eeg based consciousness-alert monitoring system
JP2006280513A (ja) 2005-03-31 2006-10-19 National Institute Of Information & Communication Technology 乗り物操縦者のモニター方法及びシステム
EP2371286B1 (en) * 2009-10-29 2019-12-04 Panasonic Corporation Organism fatigue evaluation device and organism fatigue evaluation method
CN104508729B (zh) 2012-08-07 2018-08-14 索尼公司 信息处理装置、信息处理方法和信息处理系统
JP2014089557A (ja) 2012-10-30 2014-05-15 Micware Co Ltd 車載装置、危険予測方法、およびプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007171154A (ja) * 2005-11-22 2007-07-05 Equos Research Co Ltd 運転支援装置
JP2017037359A (ja) * 2015-08-06 2017-02-16 アルパイン株式会社 車載装置、注意喚起システム及びコンピュータプログラム
JP2017068761A (ja) * 2015-10-01 2017-04-06 日産自動車株式会社 情報提示装置、走行支援システム、及び情報提示方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111739303A (zh) * 2020-08-19 2020-10-02 交通运输部公路科学研究所 一种智慧高速雨雾行车安全诱导系统的评价方法及装置

Also Published As

Publication number Publication date
US20210269043A1 (en) 2021-09-02
US11299165B2 (en) 2022-04-12

Similar Documents

Publication Publication Date Title
US10108190B2 (en) Autonomous driving apparatus
CN107121979B (zh) 自主置信控制
CN107117179B (zh) 基于乘员注意的自主控制
JP6237685B2 (ja) 車両制御装置
JP4458072B2 (ja) 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
US9429946B2 (en) Driving control system and dynamic decision control method thereof
US20170315550A1 (en) Autonomous driving control apparatus
US10328802B2 (en) Systems and methods for adaptive braking using brake wear data
US20150183441A1 (en) Driving characteristics estimating device and drive assisting system
US20170240183A1 (en) Autonomous driving apparatus
CN103635362B (zh) 用于控制机动车中的安全带的可逆的安全带收紧器的方法
CN110770100B (zh) 单辙车辆的紧急制动系统
US11396305B2 (en) Systems and methods for improving driver warnings during automated driving
JP7035447B2 (ja) 車両制御装置
US11008012B2 (en) Driving consciousness estimation device
CN111527532A (zh) 车辆控制系统、车辆控制方法及程序
WO2020003697A1 (ja) 評価装置、評価方法
US20240000354A1 (en) Driving characteristic determination device, driving characteristic determination method, and recording medium
CN114030475A (zh) 一种车辆辅助驾驶方法、装置、车辆及存储介质
KR102658769B1 (ko) 운전자 보조 장치 및 그 제어 방법
US10745029B2 (en) Providing relevant alerts to a driver of a vehicle
JP5838577B2 (ja) 走行評価装置
US8948992B2 (en) System and methods for limiting standing start acceleration control using driver monitoring system (driver attention monitor)
JP2017151704A (ja) 自動運転装置
CN114103966A (zh) 一种辅助驾驶的控制方法、装置和系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19826156

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19826156

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP