WO2021193118A1 - 情報提示制御装置及び機能制御装置 - Google Patents

情報提示制御装置及び機能制御装置 Download PDF

Info

Publication number
WO2021193118A1
WO2021193118A1 PCT/JP2021/009885 JP2021009885W WO2021193118A1 WO 2021193118 A1 WO2021193118 A1 WO 2021193118A1 JP 2021009885 W JP2021009885 W JP 2021009885W WO 2021193118 A1 WO2021193118 A1 WO 2021193118A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
permissible
information
information presentation
driving
Prior art date
Application number
PCT/JP2021/009885
Other languages
English (en)
French (fr)
Inventor
哲洋 林
拓弥 久米
有華里 伊藤
一輝 小島
しおり 間根山
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Priority to CN202180023032.1A priority Critical patent/CN115335269A/zh
Priority to DE112021001776.4T priority patent/DE112021001776T8/de
Publication of WO2021193118A1 publication Critical patent/WO2021193118A1/ja
Priority to US17/945,371 priority patent/US20230001948A1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/656Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being a passenger
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • B60W40/072Curvature of the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/161Explanation of functions, e.g. instructions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/172Driving mode indication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/175Autonomous driving
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/195Blocking or enabling display functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/197Blocking or enabling of input functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/741Instruments adapted for user detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/223Posture, e.g. hand, foot, or seat position, turned or inclined
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/30Road curve radius

Definitions

  • the disclosure in this specification relates to support for the implementation of actions different from the driver's driving operation permitted in a vehicle equipped with an automatic driving function.
  • Patent Document 1 states that, in a vehicle having an automatic driving function capable of performing a driving action on behalf of a driver, when it is determined that the automatic driving function is in operation, an application image is displayed on an information presenting device. Is disclosed.
  • the vehicle driver of Patent Document 1 can view and operate the above-mentioned application image as an act other than driving when the automatic driving function is activated.
  • One of the purposes of the disclosure of this specification is to provide an information presentation control device and a function control device that facilitate the driver to take an appropriate action when the automatic driving function is activated.
  • One of the embodiments disclosed here is an information presentation control device that is used in a vehicle having an automatic driving function capable of performing a driving action on behalf of a driver and controls an information presentation device that presents information to the driver.
  • the permissible action discriminating unit that discriminates the permissible actions allowed by the driver, It is provided with an information presentation content control unit that causes an information presentation device to present information on a determination result of an allowable act.
  • the information presenting device presents the information regarding the determination result of the permissible act determined by the permissible act discriminating unit.
  • the automatic driving function is activated, which makes it less necessary for the driver to grasp the situation such as the driving environment of the vehicle, the driver can obtain information on the determination result of the permissible action through the information presenting device. Therefore, the driver can easily take an appropriate action when the automatic driving function is activated by referring to such information.
  • one of the embodiments disclosed here is a function control device used in a vehicle having an automatic driving function capable of performing a driving action on behalf of a driver and controlling the function of a controlled device.
  • the permissible action discriminating unit that discriminates the permissible actions allowed by the driver, It is provided with a function limiting unit that limits the functions of the controlled device that can realize actions other than permissible actions among actions other than driving.
  • the function of the controlled target device capable of realizing the non-permissible action among the non-driving actions is limited based on the permissible action determined by the permissible action discriminating unit.
  • the information presentation control device As shown in FIG. 1, the information presentation control device according to the first embodiment of the present disclosure is an HCU (Human Machine Interface Control Unit) 10.
  • the HCU 10 constitutes an information presentation system IPS together with the information presentation device 20 and the like.
  • the HCU 10 is an electronic control device that controls the information presentation device 20 and realizes an information presentation function and an action execution support function that supports the execution of actions other than driving such as a second task in a complex manner.
  • the HCU 10 is used in the vehicle 1, and is mounted on the vehicle 1, for example.
  • the HCU 10 is communicably connected to the communication bus 99 of the vehicle-mounted network mounted on the vehicle 1.
  • the HCU 10 is one of a plurality of nodes provided in the vehicle-mounted network mounted on the vehicle 1.
  • a DSM 31, a seat sensor 32, a peripheral monitoring sensor 33, a locator 34, an out-of-vehicle communication device 35, a travel control ECU 36, a driving support ECU 37, an automatic driving ECU 40, and the like are connected to the communication bus 99 of the vehicle-mounted network as nodes.
  • the DSM (Driver Status Monitor) 31 is a status detection device that detects the status of the driver.
  • the DSM 31 includes a near-infrared light source, a near-infrared camera, and a control unit for controlling them.
  • the DSM 31 is installed in a posture in which the near-infrared camera is directed toward the headrest portion of the driver's seat, for example, on the upper surface of the steering column portion or the upper surface of the instrument panel.
  • the DSM 31 uses a near-infrared camera to photograph the head of the driver irradiated with near-infrared light by a near-infrared light source.
  • the image captured by the near-infrared camera is image-analyzed by the control unit.
  • the control unit extracts state information such as the driver's eye point position, line-of-sight direction, pupil blur, and driver's posture from the captured image, and provides the extracted driver state information to the HCU 10 and the like via the communication bus 99. do.
  • the control unit can provide the captured image itself to the HCU 10 or the like via the communication bus 99.
  • the seat sensor 32 is a sensor that detects the driver's seating state in the driver's seat.
  • the seat sensor 32 has a function of detecting whether or not the driver is seated in the driver's seat, a function of detecting whether or not the driver is wearing a seatbelt, a function of detecting the reclining angle of the driver's seat, and the like.
  • the seat sensor 32 provides information on the seated state to the HCU 10 and the like via the communication bus 99.
  • the peripheral monitoring sensor 33 is an autonomous sensor that monitors the surrounding environment of the vehicle 1. From the detection range around the own vehicle, the peripheral monitoring sensor 33 determines the road surface such as pedestrians, cyclists, animals other than humans, moving objects such as other vehicles, falling objects on the road, guardrails, curbs, road markings, and lane markings. It is possible to detect stationary objects such as signs and structures on the side of the road.
  • the peripheral monitoring sensor 33 provides detection information of an object around the own vehicle to the driving support ECU 37, the automatic driving ECU 40, the HCU 10, and the like through the communication bus 99.
  • the peripheral monitoring sensor 33 includes, for example, a camera unit and a millimeter-wave radar.
  • the camera unit may be configured to include a monocular camera or may be configured to include a compound eye camera.
  • the camera unit is mounted on the vehicle 1 so that the front range, the side range, the rear range, and the like of the vehicle 1 can be photographed.
  • the camera unit outputs at least one of the imaging data obtained by photographing the surroundings of the vehicle and the analysis result of the imaging data as detection information.
  • the millimeter wave radar irradiates a millimeter wave or a quasi-millimeter wave toward the surroundings of the vehicle.
  • the millimeter wave radar outputs the detection information generated by the process of receiving the reflected wave reflected by a moving object, a stationary object, or the like.
  • the peripheral monitoring sensor 33 may be provided with a rider, a sonar, or the like in a form of being added or replaced with the camera unit and the millimeter wave radar.
  • the locator 34 has a configuration including a GNSS (Global Navigation Satellite Systems) receiver, an inertial sensor, and the like.
  • the locator 34 sequentially positions the own vehicle position, the traveling direction, and the like of the vehicle 1 by combining the positioning signal received by the GNSS receiver, the measurement result of the inertia sensor, the vehicle speed information output to the communication bus 99, and the like.
  • the locator 34 sequentially outputs the position information and the direction information of the vehicle 1 based on the positioning result to the communication bus 99 as the locator information.
  • the locator 34 further has a map database 34a.
  • the map database 34a is mainly composed of a large-capacity non-volatile storage medium that stores a large number of three-dimensional map data and two-dimensional map data.
  • the three-dimensional map data is so-called high-precision map data, and includes information necessary for advanced driving support and automatic driving, such as three-dimensional shape information of roads and detailed information of each lane.
  • the locator 34 reads the map data around the current position from the map database 34a and provides the map data to the driving support ECU 37, the automatic driving ECU 40, and the like together with the locator information.
  • a user terminal such as a smartphone or a navigation device may provide position information, direction information, map data, and the like to the driving support ECU 37 and the automatic driving ECU 40.
  • the out-of-vehicle communication device 35 is a communication module (Data Communication Module) mounted on the vehicle 1.
  • the out-of-vehicle communication device 35 transmits and receives radio waves between the vehicle 1 and surrounding base stations by wireless communication in accordance with communication standards such as LTE (Long Term Evolution) and 5G.
  • LTE Long Term Evolution
  • 5G 5th Generationан ⁇
  • the out-of-vehicle communication device 35 acquires various data from a probe server provided on the cloud. Examples of various data include the latest map data of the road on which the vehicle 1 travels, traffic information data, weather information data, reproduction data of contents such as a movie to be reproduced by the information presenting device 20, and the like.
  • the traffic information data includes, for example, road information such as the traffic volume of the road on which the vehicle 1 travels, traffic accidents, and traffic regulation due to construction.
  • the travel control ECU 36 is an electronic control device mainly including a microcomputer.
  • the travel control ECU 36 generates vehicle speed information indicating the current travel speed of the vehicle 1 based on the detection signal of the wheel speed sensor provided on the hub portion of each wheel, and sequentially outputs the vehicle speed information to the communication bus 99.
  • the travel control ECU 36 controls the operation of the operation actuator.
  • the driving actuator has a configuration including a vehicle steering device, a vehicle driving device, and a vehicle braking device for performing a driving operation.
  • Driving operations include vehicle steering, vehicle driving and vehicle braking.
  • the vehicle steering device is a device that controls a steering angle given to, for example, the front wheels of the vehicle 1.
  • the vehicle drive device is a device that drives, for example, the front wheels of the vehicle 1 by using the power provided from the power source of the vehicle 1.
  • the vehicle braking device is a device that brakes, for example, the front wheels of the vehicle 1 by a braking method such as friction braking or regenerative braking.
  • the driving support ECU 37 and the automatic driving ECU 40 constitute the automatic driving system ADS in the vehicle 1.
  • the vehicle 1 is provided with an automatic driving function.
  • the driving support ECU 37 is an electronic control device that realizes a driving support function that supports the driving operation of the driver.
  • the driving support ECU 37 enables advanced driving support or partial automatic driving control of about level 2 at the automatic driving level.
  • the operation support ECU 37 mainly includes a computer including a processing unit, a RAM (Random Access Memory), a storage unit, an input / output interface, a bus connecting these, and the like.
  • the driving support ECU 37 has a plurality of functional units that realize advanced driving support by executing a computer program by the processing unit and outputting a control signal to the traveling control ECU 36.
  • the driving support ECU 37 has an ACC function unit that realizes an ACC (Adaptive Cruise Control) function and an LTA function unit that realizes an LTA (Lane Tracing Assist) function. Further, the driving support ECU 37 has an LCA function unit or the like that realizes an LCA (Lane Change Assist) function.
  • the automatic driving ECU 40 is an electronic control device that realizes an automatic driving function capable of acting as a driver's driving operation.
  • the automatic driving ECU 40 enables level 3 autonomous driving in which the system of the vehicle 1 is the main control body only in a preset limited operation design area (Operational Design Domain, hereinafter referred to as a limited area).
  • the limited area includes the driving environment conditions that are premised for the normal operation of autonomous driving by the automatic driving ECU 40.
  • the limited area may be set based on the road traffic law and ordinance of the country and region where the vehicle 1 travels, and technically due to the state of infrastructure development of the road on which the vehicle 1 travels, the road shape, etc. It may be set based on various restrictions.
  • the division of the limited area based on the above road conditions, geographical conditions, etc. is included in the information of the map database 34a, for example, in association with the above-mentioned map data.
  • the automatic operation ECU 40 has a configuration mainly including a computer including a processing unit 41, a RAM 42, a storage unit 43, an input / output interface 44, a bus connecting these, and the like.
  • the processing unit 41 is hardware for arithmetic processing combined with the RAM 42.
  • the processing unit 41 has a configuration including at least one arithmetic core such as a CPU (Central Processing Unit) and a GPU (Graphic Processing Unit).
  • the processing unit 41 may be configured to further include RISC (Reduced Instruction Set Computer), FPGA (Field-Programmable Gate Array), an IP core having other dedicated functions, and the like.
  • the processing unit 41 executes various processes for realizing the functions of each functional unit, which will be described later, by accessing the RAM 42.
  • the storage unit 43 is configured to include at least one non-volatile storage medium such as a semiconductor memory.
  • the storage unit 43 stores various computer programs (for example, automatic operation programs) executed by the processing unit 41.
  • the automatic operation ECU 40 has a plurality of functional units that realize automatic operation by executing a computer program stored in the storage unit 43 by the processing unit 41. Specifically, as shown in FIG. 2, the automatic operation ECU 40 has a state management unit Y1 and an operation control unit Y2.
  • the state management unit Y1 can be used for locator information and map information acquired from the locator 34, detection information acquired from the peripheral monitoring sensor 33, traffic information and weather information acquired through the external communication device 35, and an evacuation request from the HCU 10. Based on this, the state of automatic operation is managed.
  • the state management unit Y1 of the first embodiment manages the automatic operation level as the state of automatic operation and switches it in a timely manner.
  • the automatic operation level takes a discrete numerical value which is an integer of 0 or more and 3 or less.
  • the automatic driving level means that as the numerical value increases, the range in which the system becomes the control subject in the driving action increases.
  • the driving action is defined as a concept in which peripheral monitoring is added to the above-mentioned driving operation.
  • the automatic driving level switched by the state management unit Y1 conforms to the automatic driving level specified by the American Society of Automotive Engineers of Japan.
  • the driver when the automatic driving level is level 0, the driver is the main driver for all driving activities. So-called manual operation is carried out.
  • vehicle 1 specifically, driving support ECU 37
  • vehicle 1 specifically, driving support ECU 37
  • the vehicle 1 specifically, the driving support ECU 37
  • the driver becomes the main body of peripheral monitoring, monitors the implementation status of the driving operation by the vehicle 1, and maintains a state in which immediate driving operation such as holding the steering wheel is possible so that the driver can always intervene in the driving operation. There is a need.
  • the vehicle 1 is the main body performing all the driving actions of vehicle steering, vehicle driving, vehicle braking, and peripheral monitoring, and the automatic driving ECU 40 on the vehicle 1 side executes these driving actions.
  • the driver can perform an action other than driving different from the driving within a range permitted by safety, without constantly monitoring the execution status of the driving action by the automatic driving ECU 40.
  • the safety-allowed range may be stipulated by law or based on safety in actual driving.
  • Actions other than driving that the driver can perform include viewing content, playing computer games, viewing and sending e-mail, browsing websites, operating mobile phones or smartphones, eating, making up, reading, sleeping, etc. Is included.
  • the contents include, for example, moving images such as movies, music, audio books, and the like.
  • second tasks, secondary tasks, secondary activities, and other activities are sometimes referred to as second tasks, secondary tasks, secondary activities, and other activities.
  • these names may refer to acts other than driving itself, and may indicate acts other than driving that are generally permitted for safety, depending on various situations among acts other than driving. Individually, it may indicate an act that is specifically permitted for safety.
  • the actions that are individually and specifically permitted for safety according to various situations are defined as the permitted actions and the explanation will be continued.
  • the range of permissible behavior may change according to changes over time in various situations.
  • the state management unit Y1 switches such automatic operation levels in a timely manner.
  • the automatic driving level is level 0
  • the driving support ECU 37 and the automatic driving ECU 40 do not substantially intervene in the driving action, and the driving control ECU 36 and the driving actuator are directly controlled by the driving action of the driver.
  • the automatic driving level is level 1 or 2
  • the driving control ECU 36 and the driving actuator are controlled in such a manner that the driving support ECU 37 supports the driving action of the driver.
  • the traveling control ECU 36 and the driving actuator are controlled based on the calculation of the automatic driving ECU 40.
  • the state management unit Y1 sets the upper limit of the automatic driving level to level 3.
  • the state management unit Y1 basically sets the upper limit of the automatic driving level to level 2 and the upper limit of the automatic driving level to level 3 under exceptional conditions.
  • This exceptional condition is, for example, a condition that the road on which the vehicle 1 travels is congested and the vehicle 1 is traveling at a low speed of less than a predetermined speed. From the above, the limited area indicated by the map database 34a and the congested section where the vehicle travels at low speed are permitted areas for at least a part of the second tasks.
  • the state management unit Y1 may lower the automatic driving level from level 3 to level 2 or lower even when the vehicle 1 travels in a limited area. For example, the state management unit Y1 suddenly lowers the automatic operation level to level 2 or lower when the automatic operation function deviates from the usage conditions or is predicted to deviate from the usage conditions. For example, when the detection accuracy of the peripheral monitoring sensor 33 deteriorates due to deterioration of environmental conditions due to bad weather such as heavy rain, snowfall, heavy fog, and sandstorm, the usage conditions that are premised on the operation of the automatic driving function may be deviated. In addition, if a traffic accident occurs around the vehicle, the automatic driving function may deviate from the usage conditions.
  • the state management unit Y1 decides to lower the automatic driving level from level 3 to level 2 or less due to the end schedule of the permitted area or deviation from the usage conditions, the information presenting device 20 notifies the driver of the driving change. Request HCU10 to present the information to be used.
  • the state management unit Y1 actually lowers the automatic driving level from level 3 to level 2 or lower. If the driver does not respond to the driving change even after waiting for a predetermined time after the notice of the driving change, the state management unit Y1 can decide to control the vehicle 1 by MRM (Minimal Risk Manoeuvre).
  • MRM control is a vehicle control that minimizes the risk in an emergency, and specifically means a control that searches for and sets an evacuation site and moves and stops the own vehicle at the evacuation site.
  • the operation control unit Y2 functions as an execution body of the driving action when the state management unit Y1 sets the automatic operation level to level 3, and controls the travel control ECU 36. Specifically, the driving control unit Y2 recognizes the road shape on which the vehicle 1 travels, the position of another vehicle, and the like based on the locator information and map information acquired from the locator 34, the detection information acquired from the peripheral monitoring sensor 33, and the like. .. The driving control unit Y2 generates a planned traveling line on which the vehicle 1 travels based on the recognition result of the road shape, the position of another vehicle, and the like. The operation control unit Y2 travels the vehicle 1 along the generated planned travel line in cooperation with the travel control ECU 36.
  • the driving control unit Y2 gradually reduces the traveling speed of the vehicle 1 while issuing an alarm such as a siren to the surroundings of the vehicle to the vehicle 1, and causes the vehicle 1 to be on the side of the road or the like. Stop in a relatively safe place.
  • the information presentation device 20 is a device that presents information to the driver. As shown in FIG. 1, the information presenting device 20 includes a plurality of displays 21 and a plurality of speakers 22.
  • the plurality of displays 21 are installed on, for example, an instrument panel.
  • the plurality of displays 21 include, for example, a graphic meter (Graphic Meter), a center information display (Center Information Display, CID), and the like.
  • a head-up display (HUD) may be included in the display 21.
  • Each display 21 is a device that presents visual information to the driver, and is configured to be able to display an image. At least a part of the display 21 (for example, CID) has a display function and an operation function for accepting a touch operation or the like in a complex manner.
  • the plurality of speakers 22 are arranged, for example, in the vicinity of the display screen in the instrument panel, the door panel, the rear quarter panel, and the like.
  • Each speaker 22 is a device that presents auditory information to the driver. Specifically, each speaker 22 can play a sound by converting the input electric signal into a physical signal using a voice coil and a diaphragm.
  • the speaker 22 may be provided individually corresponding to each display 21, may be provided in common for a part or all of each display 21, and may be provided completely independently of the display 21. May be good.
  • the HCU 10 is an electronic control device that integrally controls information presentation to occupants such as drivers in cooperation with the automatic driving ECU 40 and the information presentation device 20.
  • the HCU 10 mainly includes a computer including a processing unit 11, a RAM 12, a storage unit 13, an input / output interface 14, and a bus connecting them.
  • the processing unit 11 is hardware for arithmetic processing combined with the RAM 12.
  • the processing unit 11 has a configuration including at least one arithmetic core such as a CPU, GPU, and RISC.
  • the processing unit 11 may be configured to further include an FPGA and an IP core having other dedicated functions.
  • the RAM 12 may be configured to include a video RAM for video generation.
  • the processing unit 11 executes various processes for realizing the functions of each functional unit, which will be described later, by accessing the RAM 12.
  • the storage unit 13 is configured to include at least one non-volatile storage medium such as a semiconductor memory.
  • the storage unit 13 stores various computer programs (for example, information presentation programs) executed by the processing unit 11.
  • the HCU 10 has a plurality of functional units by executing the program stored in the storage unit 13 by the processing unit 11. Specifically, as shown in FIG. 2, the HCU 10 includes a driving environment estimation unit X1, an alertness estimation unit X2, a stress estimation unit X3, an allowable action determination unit X4, an occupant monitoring unit X5, an alarm determination unit X6, and an evacuation request unit X7. It also has an information presentation content control unit X8.
  • the traveling environment estimation unit X1 travels on the road on which the vehicle 1 travels based on the detection information acquired from the peripheral monitoring sensor 33, the locator information and map data acquired from the locator 34, the traffic information acquired through the external communication device 35, and the like. Estimate the environment. Information such as the road shape recognized by the operation control unit Y2 of the automatic driving ECU 40, the position of another vehicle, and the information of the planned traveling line may be further used for estimating the traveling environment of the road.
  • the driving environment is a concept that includes the road shape and the driving scene.
  • Road shapes include road widths, road slopes, road curvatures, road lane markings, and the like.
  • the driving scene includes setting of a limited area, traffic volume, and the like.
  • the traveling environment information estimated by the traveling environment estimation unit X1 in this way is provided to the permissible action determination unit X4.
  • the driving environment estimation unit X1 updates the driving environment information in a timely manner based on the latest information.
  • the driving environment to be estimated includes the driving environment of the road on which the vehicle 1 is currently traveling. Further, in the first embodiment, the traveling environment to be estimated further includes the traveling environment of the road on which the vehicle 1 is scheduled to travel.
  • the arousal level estimation unit X2 estimates the arousal level of the driver based on the driver status information acquired from the DSM31.
  • the driver's alertness is an index showing the driver's drowsiness by level. The higher the level of alertness, the closer the driver is to sleep.
  • the arousal level takes a discrete numerical value which is an integer of 0 or more and 3 or less.
  • the arousal level estimation unit X2 sets the arousal level to level 0. Presumed to be.
  • the alertness estimation unit X2 estimates the alertness level to be level 1.
  • the arousal level estimation unit X2 estimates the arousal level as level 2.
  • the arousal level estimation unit X2 estimates the arousal level to be level 3.
  • the arousal level information estimated by the arousal level estimation unit X2 in this way is provided to the permissible action determination unit X4.
  • the arousal level estimation unit X2 updates the arousal level information in a timely manner based on the latest information.
  • the stress estimation unit X3 estimates the driver's stress based on the driver's state information acquired from DSM31. Specifically, the stress estimation unit X3 estimates the presence or absence of stress in the driver. For estimating the presence or absence of stress in the driver, for example, analysis of the driver's eye blur state is used. Further, a biosensor for detecting the driver's heart rate can be provided in the driver's seat, the steering wheel, or the like, and the estimation accuracy by the stress estimation unit X3 can be improved by using the heart rate information detected by the biosensor.
  • the stress information estimated by the stress estimation unit X3 is provided to the permissible action determination unit X4. The stress estimation unit X3 updates the stress information in a timely manner based on the latest information.
  • the permissible action determination unit X4 is an permissible action allowed by the driver based on the driving environment information acquired from the driving environment estimation unit X1, the arousal level information acquired from the arousal level estimation unit X2, and the stress information acquired from the stress estimation unit X3. To determine.
  • the permissible act determination unit X4 determines the permissible act currently allowed by the driver.
  • the determination result of the permissible act by the permissible act discriminating unit X4 may change according to the change of the traveling environment information, the arousal degree information and the stress information, that is, the change of various situations.
  • the permissible action determination unit X4 determines the determination result in response to a change in driving environment information, a change in alertness information, or a change in stress information based on the latest information provided. Update in a timely manner.
  • the discrimination theory by the permissible action discriminating unit X4 is that when the passive driving function whose automatic driving level is level 3 is operating, the driver "is in the minimum safe posture and can change driving in an emergency". It is built with the guideline of being able to maintain a “good condition”. That is, when a sudden cause of driving change occurs in the level 3 automatic driving, an action other than driving is permitted as an allowable action within a range in which the driver can safely take over the driving.
  • the permissible act discriminating unit X4 sets a plurality of discriminant viewpoints in discriminating the permissible act. Then, the permissible act discriminating unit X4 temporarily calculates an individual discriminant result for each discriminant viewpoint. After that, the permissible act discriminating unit X4 deterministically discriminates the act that is commonly determined as the permissible act among the individual permissible acts for each discriminating viewpoint calculated provisionally among the discriminant viewpoints. do.
  • the permissible action determination unit X4 has the narrowest range of permissible actions among the provisional results for each discrimination viewpoint. Extract the judgment result (in other words, the least acceptable). The permissible act discriminating unit X4 sets the determination result having the narrowest permissible act range as a definitive discrimination result (final result). The permissible act determination unit X4 provides the information of the definite determination result to the information presentation content control unit X8.
  • the driver requirement is an index that divides actions other than driving in stages based on the above-mentioned discrimination theory.
  • the driver requirement takes a discrete number that is an integer greater than or equal to 0 and less than or equal to 4.
  • Driver requirement level 0 means that actions other than driving are not allowed and prohibited.
  • the driver requirement level 1 act is an act that allows the driver to easily return to a state in which he / she can drive. For example, one-handed operation of a mobile phone, smartphone or CID, an act of holding a state in which the body does not fall to the left or right, and an act of maintaining an eye position in which all of a plurality of displays 21 can be seen are driver requirement level 1. It is mentioned in the act of. Furthermore, the driver requirement level is the act of being able to immediately detect a driving change request using the sound of the speaker 22 having a low to medium volume, and the act of being able to maintain a state in which the reclining of the driver's seat is not roughly defeated. It is listed as one act. That is, an act in which all five senses can be used even after returning to the driving behavior is regarded as an act of driver requirement level 1.
  • the driver requirement level 2 action is an action that allows the driver to return to a state in which he / she can drive with some movement. For example, operations with both hands on a mobile phone, smartphone or CID, actions such as tilting the body to the left and right up to about ⁇ 20 degrees, actions that can hold a visible eye position except for one of a plurality of displays 21 and the like are performed. , It is an act of driver requirement level 2. Further, an act of using a sound in which the volume of the speaker 22 is medium to high, an act of reclining the driver's seat to about 45 degrees, and the like are also mentioned as actions of the driver requirement level 2.
  • the driver requirement level 3 action is an action that allows the driver to return to driving in an emergency. For example, an act of placing an object on the knee, an act of tilting the body to the left and right to about ⁇ 130 degrees, and an act of maintaining a visible eye position except for two of the plurality of displays 21 can be mentioned.
  • the driver requirement level 4 act is an act that is probable to prohibit the implementation of level 3 autonomous driving. For example, the act of sleeping, the act of drinking alcohol, the act of leaving the seat, the act of releasing the seat belt, the act of reclining the driver's seat up to about 90 degrees, and the act of wearing earphones can be mentioned. It should be noted that it is not normal for the permissible action determination unit X4 to discriminate the action of the driver requirement level 4 as the permissible action when the automatic driving function of the automatic driving level 3 is activated.
  • the permissible act determination unit X4 determines the permissible act based on the road shape information acquired from the traveling environment estimation unit X1. In detail, the permissible act determination unit X4 specifies the road shape of the road on which the vehicle 1 travels from the road width, the road slope, the road curvature, the road lane marking shape, and the like.
  • the permissible act determination unit X4 determines that the act up to the driver requirement level 3 is the permissible act.
  • the permissible act determination unit X4 determines that the act up to the driver requirement level 2 is the permissible act. Specifically, when the road on which the vehicle 1 travels has a curved shape and the length of the curved section exceeds a predetermined distance, the permissible action determination unit X4 narrows the range of determining the permissible action, and the driver requirement. It is determined that the act up to level 2 is an acceptable act.
  • the permissible act determination unit X4 determines that the act up to the driver requirement level 1 is the permissible act. That is, assuming that the driver takes over the driving, the higher the difficulty level of the driving action immediately after taking over the driving, the narrower the range of the permissible action.
  • the second discrimination viewpoint is the driving scene in the driving environment.
  • the permissible action determination unit X4 determines the permissible action based on the information of the driving scene acquired from the driving environment estimation unit X1. In detail, the permissible action determination unit X4 identifies the traveling scene of the vehicle 1 from the setting of the limited area, the traffic volume, and the like.
  • the permissible action determination unit X4 determines that the act up to the driver requirement level 3 is the permissible act.
  • the permissible action determination unit X4 determines that the actions up to the driver requirement level 3 are the permissible actions.
  • the permissible action determination unit X4 determines that the actions up to the driver requirement level 2 are the permissible actions. That is, the higher the possibility of a sudden change of driving to the driver, the narrower the range of permissible actions.
  • the permissible action determination unit X4 determines the permissible action based on the distance from the vehicle 1 to the boundary of the limited area or the arrival time.
  • the permissible action determination unit X4 narrows the range of the permissible action as the distance to the boundary or the arrival time becomes shorter.
  • the third discriminant viewpoint is alertness.
  • the permissible action determination unit X4 determines the permissible action based on the arousal level of the driver acquired from the arousal level estimation unit X2. When the driver's arousal level is level 0, the permissible action determination unit X4 determines that the actions up to the driver requirement level 3 are permissible actions. When the driver's arousal level is level 1, the permissible action determination unit X4 determines that the actions up to the driver requirement level 2 are permissible actions. When the driver's arousal level is level 2, the permissible action determination unit X4 determines that the driver requirement level 1 act is a permissible act. That is, the range of permissible actions is narrowed as the driver's ability to respond to sudden driving changes decreases.
  • the permissible action determination unit X4 outputs a command for executing an alarm to the alarm determination unit X6. ..
  • the fourth discriminant point of view is stress.
  • the permissible action determination unit X4 determines the permissible action based on the stress of the driver acquired from the stress estimation unit X3. When the driver is not stressed, the permissible act determination unit X4 determines that the act up to the driver requirement level 3 is the permissible act. When the driver is stressed, the permissible act determination unit X4 determines that the act up to the driver requirement level 2 is the permissible act. That is, in the assumption that the driver takes over the driving, the range of the permissible action is narrowed as the possibility of the operation error of the driving action immediately after the taking over is high.
  • the result for the low-level discrimination viewpoint in the driver requirements is adopted as the definitive discrimination result. This is because the validity of presenting information on the permissible actions, which will be described later, is enhanced by allowing only the actions that pass the safety criteria from each discrimination viewpoint.
  • the permissible action discriminating unit X4 roughly predicts the transition of the permissible action range in the traveling route to the destination based on the future predictable discriminating viewpoint among the plurality of discriminating viewpoints.
  • the traveling environment of the road on which the vehicle 1 is scheduled to travel can be estimated, the traveling environment corresponds to a determination viewpoint that can predict the future.
  • the occupant monitoring unit X5 monitors the driver's actions based on the driver's status information acquired from the DSM31, the driver's seating information from the seat sensor 32, and the like.
  • the occupant monitoring unit X5 may specify the driver's action by comprehensively judging the image analysis result of the image captured by the DSM 31 and the seating information.
  • a trained artificial intelligence model built mainly on a neural network may be used to identify the driver's actions.
  • the occupant monitoring unit X5 provides the monitoring result of the driver's action to the alarm determination unit X6 and the information presentation content control unit X8.
  • the alarm determination unit X6 compares the driver's action monitoring result acquired from the occupant monitoring unit X5 with the permissible action determination result acquired from the permissible action determination unit X4, and determines whether or not to issue an alarm to the driver. to decide. For example, when the driver continuously performs an act other than the permissible act (hereinafter, non-permissible act) determined by the permissible act determination unit X4 other than driving (hereinafter, non-permissible act) for a predetermined alarm set time or longer. The alarm determination unit X6 decides to execute an alarm for the driver.
  • the alarm determination unit X6 decides to execute the alarm to the driver.
  • the alarm determination unit X6 provides the alarm execution information to the information presentation content control unit X8.
  • the evacuation requesting unit X7 forcibly evacates the vehicle 1 to the automatic driving ECU 40 when the driver continues to perform an unacceptable action for a predetermined evacuation set time or longer after the alarm is started. Demand that.
  • the evacuation referred to here is, for example, the above-mentioned MRM control.
  • the information presentation content control unit X8 controls the content to be presented by the information presentation device 20.
  • the information presentation content control unit X8 acquires the discrimination result from the permissible action discriminating unit X4, and outputs a presentation request for presenting the information regarding the discriminating result to the information presenting device 20 to the information presenting device 20.
  • the information presentation content control unit X8 acquires the above-mentioned definite determination result, and causes the information presenting device 20 to present information on the definite determination result.
  • the information presentation content control unit X8 can cause the information presenting device 20 to present information indicating an action determined to be an acceptable action among the information related to the determination result.
  • the information indicating the action determined to be an acceptable action is, for example, information indicating that the reclining of the driver's seat may be tilted up to 45 degrees when the action up to the driver requirement level 2 is determined to be an acceptable action.
  • the information presentation content control unit X8 presents information indicating that the movie can be shown on the display 21 (for example, CID). Have the device 20 present it.
  • the information presentation content control unit X8 requests the release of the restriction. be able to.
  • the information presentation content control unit X8 requests the information presenting device 20 or the device which is the limiting entity that imposes the limitation on the information presenting device 20 to release the restriction. For example, when a functional restriction is applied to the screening of a movie on the display 21, the information presentation content control unit X8 requests the release of the functional restriction so that the display 21 can perform the screening of the movie.
  • the information presentation content control unit X8 can have the information presenting device 20 present information indicating an action determined to be an unacceptable action among the information related to the determination result.
  • the information indicating an act determined to be an unacceptable act is, for example, information indicating that the reclining of the driver's seat must not be tilted beyond 45 degrees when an act up to the driver requirement level 2 is determined to be an acceptable act. Is.
  • the information presentation content control unit X8 provides information on the judgment result of the permissible action to the information presenting device. It is possible to have 20 present. In the presentation of this timing, the information presentation content control unit X8 tones up the information presentation as the amount of change in the range of the permissible action increases. The larger the amount of change, the better the tone-up in information presentation. For example, when the upper limit of the driver requirement level changes from 3 to 1, the amount of change is 2, and when the upper limit of the driver requirement level changes from 2 to 3, the amount of change is 1.
  • tone-up in the case of display by an image, improvement of saturation, improvement of brightness, increase of display size, thickening of lines used for display, etc. can be mentioned.
  • tone down if it is a notification by sound, raising the volume, using a high frequency range, strengthening the accent of the voice, and the like can be mentioned.
  • the control unit X8 selects a device to be used for information presentation among the information presentation devices 20 based on the driver's action monitoring result acquired from the occupant monitoring unit X5 when presenting information on the discrimination result. That is, in consideration of the nature of actions other than the driver's operation, the device of the information presenting device 20 that is relatively easy to pay attention to is used for information presentation.
  • the information presentation is performed by the display 21. More specifically, when the driver is watching a movie with a CID, the information presentation is performed by the display with the CID. Further, for example, when the driver is operating the smartphone, eating, etc., the information presentation is performed by the notification by the speaker 22.
  • the information presentation content control unit X8 can determine the detailed content in the presentation based on the monitoring result of the driver's action acquired from the occupant monitoring unit X5. For example, when the driver is performing an unacceptable act, the information presentation content control unit X8 has at least one of the reasons why the unacceptable act should not be performed and the advice for shifting the unacceptable act to the acceptable act. Can be presented to the information presenting device 20. Such information presentation is, for example, continuously presented until the driver discontinues the unacceptable act.
  • the reclining angle recognized as the allowable action is 45 degrees or less, and the driver tilts the reclining angle to 70 degrees will be described. do.
  • the reason why the non-permissible act should not be carried out "Because the road shape is curved, considering the burden immediately after the driver takes over the driving, it is possible to return to the state where the driving can be performed with some movement. Because it should be done. " In this case, as an example of advice for shifting the non-permissible behavior to the permissible behavior, there is a reason that "return the reclining angle to 45 degrees or less".
  • the occupant monitoring unit X5 monitors the continuation of the non-permissible behavior.
  • the alarm determination unit X6 determines the execution of the alarm as described above.
  • the information presentation content control unit X8 causes the information presentation device 20 to issue an alarm to the driver.
  • the information presentation content control unit X8 preferably selects a plurality of devices used for alarms among the information presentation devices 20. Further, the information presentation content control unit X8 tones up the alarm as compared with the case of the above-mentioned information presentation.
  • the information presentation content control unit X8 may cause the information presenting device 20 to present a notice of a driving change for lowering the automatic driving level, in other words, for ending the automatic driving for which there is no obligation to monitor the surroundings.
  • the information presentation content control unit X8 does not have to present information on the discrimination result more than necessary.
  • the information presentation content control unit X8 is made to present information on the discrimination result from time to time (for example, periodically) after opening a regulation time interval as a time interval set to regulate the frequency of information presentation. ..
  • tone down is an antonym of tone up.
  • Examples of the tone down include lowering the saturation, lowering the brightness, reducing the display size, and thinning the lines used for the display in the case of displaying by an image. Further, as the tone down, if it is a notification by sound, the volume is lowered, the use of high frequencies is avoided, the accent of the voice is weakened, and the like.
  • the permissible action determination unit X4 of the HCU 10 determines whether the automatic operation level managed by the state management unit Y1 of the automatic operation ECU 40 is in the level 3 state or is scheduled to be level 3. do. If an affirmative judgment is made in S10, the process proceeds to S11. If a negative determination is made in S10, for example, after a predetermined re-determination time has elapsed, the processing of S10 is performed again.
  • the traveling environment estimation unit X1 estimates the traveling environment of the road on which the vehicle 1 travels.
  • the arousal level estimation unit X2 estimates the arousal level of the driver.
  • the stress estimation unit X3 estimates the stress of the driver. After the processing of S11, the process proceeds to S12.
  • the permissible action determination unit X4 determines the permissible action allowed by the driver. After the processing of S12, the process proceeds to S13.
  • the information presentation content control unit X8 causes the information presentation device 20 to present information regarding the determination result of the permissible act.
  • the driver can obtain information on the determination result of the permissible act.
  • the occupant monitoring unit X5 and the alarm determination unit X6 determine whether or not the driver continuously performs the unacceptable action for the alarm set time or longer. When an affirmative judgment is made in S14, it is decided to execute the alarm, and the process proceeds to S15. If a negative determination is made in S14, the process returns to the process of S11.
  • the information presentation content control unit X8 causes the information presentation device 20 to issue an alarm to the driver.
  • the driver can recognize the alarm.
  • the process proceeds to S16.
  • the evacuation request unit X7 determines whether or not the driver continuously executes the unacceptable action for the evacuation set time or longer after the start of the alarm execution. If an affirmative judgment is made in S16, the process proceeds to S17. If a negative determination is made in S16, the process returns to the process of S11.
  • the evacuation request unit X7 requests the automatic driving ECU 40 to forcibly evacuate the vehicle 1.
  • the automatic operation ECU 40 performs MRM control. A series of processes is completed with S17.
  • FIGS. 4 and 5 show the time charts of FIGS. 4 and 5.
  • the solid line corresponds to the action other than the driving actually performed by the driver when the action is applied to the driver requirement level. Is shown.
  • the alternate long and short dash line shows the result of determination by the allowable action determination unit X4 as the driver requirement level.
  • FIG. 4 shows a scene in which the automatic operation level shifts from the state of level 0 to level 3 and then to MRM control.
  • the automatic operation level gradually increases from level 0 to levels 1 and 2. At this point, actions other than driving are not substantially allowed, so the actions performed by the driver are considered to be actions equivalent to level 0 of the driver requirement level.
  • the range of permissible actions based on the discrimination result of the permissible action discriminating unit X4 is set to the actions up to the driver requirement level 3.
  • the event P1 is carried out as an event (hereinafter, information presentation event) in which information is presented by the information presenting device 20 based on the request of the HCU 10.
  • the event P1 is an event that presents to the driver information indicating that the automatic driving level has shifted to level 3 and information indicating that the range of permitted actions is an action up to the driver requirement level 3.
  • the driver shall gradually carry out the driver requirement level 1 act, the level 2 act, and the level 3 act as acts other than driving.
  • the permissible action discriminating unit X4 predicts that the range of permissible actions will be narrowed down to actions up to the driver requirement level 2 based on the future predictable discrimination viewpoint. Then, the event P2 is carried out as an information presentation event. Event P2 is an event that presents to the driver the notice information that the permissible action is scheduled to be narrowed down to the actions from the driver requirement level 3 to level 2.
  • event P3 is carried out as an information presentation event.
  • the event P3 is an event that presents to the driver information indicating that the permissible actions are narrowed down to the actions from the driver requirement level 3 to the level 2.
  • the event W1 is executed as an information presentation event.
  • the event W1 is an event that warns the driver to stop the action of the driver requirement level 3.
  • event W2 is immediately implemented.
  • the event W2 is an event that warns the driver to stop the action of the driver requirement level 4. This warning can be said to be a warning that the driver's posture does not meet the minimum safety posture.
  • the event M1 is executed as an information presentation event.
  • the event M1 is an event that presents information indicating that the operation control has shifted to the MRM control to the driver.
  • the operation control by the automatic operation ECU 40 shifts to the MRM control.
  • FIG. 5 shows a scene in which the automatic driving level shifts from level 3 to level 2 as the vehicle 1 moves from the limited area to the outside of the limited area, that is, a so-called change of driving from the vehicle 1 to the driver. ..
  • Vehicle 1 is traveling in a limited area with an automatic driving level of level 3. As the distance from the vehicle 1 to the boundary of the limited area gets closer, the range of the permissible actions by the permissible action determination unit X4 gradually narrows from the actions up to the driver requirement level 3.
  • event P4 When the range of permissible actions is scheduled to be narrowed from actions up to driver requirement level 3, event P4 will be implemented as an information presentation event.
  • Event P4 is an event that presents to the driver information recommending that an act other than driving be stopped in preparation for a driving change.
  • Event C1 is an event for presenting to the driver information requesting a change of driving from the vehicle 1 to the driver.
  • the automatic driving level in the driving control becomes level 2 or lower.
  • the information presenting device 20 presents information regarding the determination result of the permissible act determined by the permissible act discriminating unit X4.
  • the automatic driving function is activated, which makes it less necessary for the driver to grasp the situation such as the traveling environment of the vehicle 1, the driver can obtain information on the determination result of the permissible action through the information presenting device 20. Therefore, the driver can easily take an appropriate action when the automatic driving function is activated by referring to such information.
  • the information presenting device 20 presents information indicating an allowable act among the acts other than driving. By directly indicating the permissible act, it is possible to increase the sense of security when the driver performs the act.
  • the information presenting device 20 presents information indicating an unacceptable act among the acts other than driving. By directly indicating the non-permissible act, it is possible to increase the ease of avoiding the non-permissible act when the driver performs the act other than driving.
  • the permissible act is determined based on the driving environment.
  • the automatic driving function which reduces the need for the driver to grasp the driving environment of the vehicle 1
  • the consideration of the driving environment in determining the permissible action is complementarily implemented on behalf of the driver. Therefore, it is possible to enhance the validity in carrying out actions other than driving the driver.
  • the permissible act is determined based on the shape of the road on which the vehicle 1 travels. That is, the determination result of the permissible action depends on the difficulty level of the driving action immediately after the taking over of the driving under the assumption that the driver takes over the driving. Therefore, it is possible to make the driver perform an act other than driving while enhancing the safety of the driving act by the driver after the driving change.
  • the range determined as an allowable act is narrowly changed. That is, even if the road on which the vehicle travels has a curved shape, if the curved section is short, the permissible range is maintained at the driver requirement level 3. Therefore, for example, in a scene where the driver is relaxing with the backrest tilted down, it is possible to avoid a situation in which a warning is given each time the driver travels on a short curve section. On the other hand, when the curve section continues for a predetermined distance or more, the driver requirement level is changed to a low level, so that an appropriate warning to the driver can be executed.
  • the permissible act is determined based on the traveling scene of the vehicle 1. That is, the determination result of the permissible action depends on the possibility of a sudden change of driving to the driver. Therefore, it is possible to have the driver perform actions other than driving while improving the safety at the time of driving change.
  • the permissible act is determined based on the arousal level of the driver. That is, the determination result of the permissible action depends on the responsiveness of the driver corresponding to the sudden change of driving. Therefore, it is possible to have the driver perform actions other than driving while improving the safety at the time of driving change.
  • the permissible behavior is determined based on the stress of the driver. That is, the determination result of the permissible action depends on the possibility of an operation error of the driving action immediately after the takeover in the assumption that the driver takes over the driving. Therefore, it is possible to make the driver perform an act other than driving while enhancing the safety of the driving act by the driver after the driving change.
  • individual permissible acts are tentatively discriminated from a plurality of discriminant viewpoints. After that, the act that is commonly determined to be an acceptable act among the discriminant viewpoints is determined to be a definite permissible act. Since multifaceted discrimination is carried out from a plurality of discrimination viewpoints, and the minimum common action is definitely determined to be an acceptable action, the validity in the determination of the allowable action can be remarkably enhanced.
  • the permissible act discriminating unit X4 serves as a discriminating index in which an act other than driving and a high or low tolerance of the permissible act are associated with each other according to the posture of the driver in an act other than driving. Determine permissible behavior based on driver requirements. It is possible to realize a discrimination theory based on the guideline that the driver can maintain "a state in which the driver has a minimum safety posture and can change driving in an emergency" by a relatively simple processing calculation. .. Therefore, it is possible to easily determine a highly valid permissible act.
  • the permissible act discriminating unit X4 serves as a discriminating index in which an act other than driving and a high or low tolerance of the permissible act are associated with each other according to the driver's seat position in the act other than driving. Determine permissible behavior based on driver requirements.
  • the position of the driver's seat in this case is, for example, the reclining angle. It is possible to realize a discrimination theory based on the guideline that the driver can maintain "a state in which the driver has a minimum safety posture and can change driving in an emergency" by a relatively simple processing calculation. .. Therefore, it is possible to easily determine a highly valid permissible act.
  • the restriction is required to be lifted. Therefore, the driver can smoothly carry out the permissible act using the information presenting device 20.
  • the device used for information presentation by the information presenting device 20 is a device that presents visual information and an auditory sense according to an action other than driving that is presumed to be currently performed by the driver. Selected from devices that present information. These choices make the information presented more recognizable to the driver. Presenting information that is easy to recognize makes it easier to guide the driver to the appropriate action.
  • the information presenting device 20 when it is presumed that the driver is performing the non-permissible act, the information presenting device 20 presents the reason why the non-permissible act should not be performed. By letting the driver understand the reason, it becomes easier to guide the driver to the appropriate action.
  • advice for shifting the unacceptable act currently being performed by the driver to an acceptable act is presented by the information presenting device. Will be done. With such advice, the driver's actions can be smoothly transferred to the permissible actions.
  • the information presenting device 20 executes an alarm to the driver. By making the driver recognize the alarm, it is possible to urge the driver to stop the unacceptable act.
  • the information presenting device 20 presents a notice of the driving change to end the automatic driving function.
  • the vehicle 1 if it is estimated that the driver continues to perform the unacceptable act after the alarm is started, the vehicle 1 is required to be forcibly evacuated. By retracting the vehicle 1, it is possible to forcibly avoid a continuous state of inappropriate unacceptable behavior while the automatic driving function is operating.
  • the information presenting device 20 when it is presumed that the driver is performing the permissible act, the information presenting device 20 sometimes presents information on the determination result of the permissible act after a regulation time interval. NS. By leaving a regulation time interval, the frequency of information presentation is regulated, so that the troublesomeness of information presentation felt by the driver can be reduced.
  • the information presentation by the information presenting device 20 is toned up as the amount of change in the permissible action range increases. Since the strength of information presentation is appropriately set according to the degree of influence on actions other than driving by the driver, it is possible to reduce the troublesomeness of information presentation felt by the driver.
  • the second embodiment is a modification of the first embodiment.
  • the second embodiment will be described focusing on the points different from those of the first embodiment.
  • the permissible action determination unit X4 estimates the continuous operation section in which the automatic operation function is scheduled to be continuously operated in response to the automatic operation level by the state management unit Y1 becoming level 3.
  • the continuous operation section means a group of sections in which the vehicle 1 can travel while maintaining the state where the automatic operation level is level 3 by the planned travel line generated by the automatic operation ECU 40.
  • the permissible action discriminating unit X4 estimates the point at which the permissibleness of the permissible action discrimination result is the lowest in the continuous operation section based on the future predictable discrimination viewpoint.
  • the determination result of the permissible act is defined by the driver requirement. Therefore, the driver requirement level corresponds to the tolerance of the determination result. That is, the point where the permissibleness of the determination result of the permissible act is the lowest is the point where the upper limit of the driver requirement level recognized as the permissible act is the lowest.
  • the permissible action determination unit X4 provides the information presentation content control unit X8 with information on the continuous operation section, information on the point where the tolerance is the lowest, and information on the determination result of the permissible action at the point.
  • the information presentation content control unit X8 consistently presents information regarding the determination result of the permissible action for the point where the permissibility is the lowest while the automatic driving function is operating corresponding to the continuous operation section. Have the device 20 present it.
  • the information presentation content control unit X8 causes the information presentation device 20 to present information indicating that actions up to the driver requirement level 2 are permitted.
  • S20 is the same as S10 of the first embodiment. If an affirmative judgment is made in S20, the process proceeds to S21. If a negative determination is made in S20, for example, after a predetermined re-determination time has elapsed, the processing of S20 is performed again.
  • the permissible action determination unit X4 estimates the continuous operation section. After the processing of S21, the process proceeds to S22.
  • the permissible action determination unit X4 estimates the point where the upper limit of the driver requirement level recognized as the permissible action is the lowest in the continuous operation section. After the processing of S22, the process proceeds to S23.
  • the information presentation content control unit X8 causes the information presentation device 20 to present information regarding the determination result of the permissible action at the point estimated in S22.
  • the driver can obtain information on the determination result of the permissible act.
  • a series of processes is completed by S23. Alternatively, after the treatment of S23, the treatment corresponding to S14 to S17 of the first embodiment may be carried out.
  • the range of permissible actions presented is frequently changed in the continuous operation section, and it is possible to suppress the occurrence of a situation in which actions other than driving performed by the driver must be changed each time.
  • the driver will be able to continuously perform actions other than consistent driving that are optimized for the continuous operation section.
  • the third embodiment is a modification of the first embodiment.
  • the third embodiment will be described focusing on the points different from those of the first embodiment.
  • the function control device controls the function of the controlled device CE.
  • the function control device is the automatic driving ECU 340 used in the vehicle 1.
  • the automatic driving ECU 340 of the third embodiment not only realizes automatic driving, but also functions as a controlled device CE to support the proper execution of actions other than driving by the driver when the automatic driving level is level 3. , It is controllable.
  • the controlled device CE includes one or more in-vehicle devices configured to be able to support actions other than the driver's driving.
  • a plurality of in-vehicle devices such as a driver's seat 38, a display 21, a speaker 22, and the like are included in the controlled device CE.
  • the automatic driving ECU 340 includes a driving environment estimation unit Y3, an arousal level estimation unit Y4, and a stress estimation unit Y5, in addition to functional units such as a state management unit Y1 and an operation control unit Y2 provided in the automatic operation ECU 40 of the first embodiment. It has functional units such as a permissible action determination unit Y6 and a function restriction unit Y7.
  • the driving environment estimation unit Y3, the arousal level estimation unit Y4, the stress estimation unit Y5, and the permissible action determination unit Y6 are the driving environment estimation unit X1, the alertness estimation unit X2, and the stress estimation unit X3 provided in the HCU 10 of the first embodiment. And the same as the permissible act determination unit X4. However, the determination result of the permissible act by the permissible act determination unit Y6 is provided to the function restriction unit Y7.
  • the function limiting unit Y7 limits the function of the controlled device CE that realizes the non-permissible action for the driver based on the determination result of the permissible action.
  • the function limiting unit Y7 limits the reclining angle of the driver's seat 38 based on the determination result of the permissible action. For example, when the permissible action determination unit Y6 allows actions up to the driver requirement level 2, the function limiting unit Y7 sets the reclining angle of the driver's seat 38 through the reclining drive device provided in the driver's seat 38. Limit exceeding 45 degrees.
  • the reclining angle limitation allows the driver to easily maintain the safety posture required to prepare for sudden driving shift causes.
  • the function limiting unit Y7 limits the display content of the display 21 based on the determination result of the permissible act. For example, when the permissible action determination unit Y6 allows actions up to the driver requirement level 1, the function limiting unit Y7 is a game function that requires a touch operation with both hands on the display 21 (for example, CID). To limit. Due to the limitation of the display contents of the display 21, the driver can easily maintain the state in which the emergency operation can be changed according to the situation.
  • the function limiting unit Y7 limits the volume of the speaker 22 based on the determination result of the permissible action. For example, when the permissible action determination unit Y6 allows actions up to the driver requirement level 1, the function limiting unit Y7 causes the speaker 22 to perform actions other than driving so that the volume of the speaker 22 does not become loud. Set the upper limit of the volume that can be output in relation to the implementation. By setting the upper limit of the volume, the driver can easily maintain the state in which the emergency operation can be changed according to the situation.
  • Each process performed in S30 to S32 is substantially the same as each process performed in S10 to S12 of the first embodiment. After the processing of S32, the step to be carried out shifts to S33.
  • the function limiting unit Y7 limits the functions of the driver's seat 38, the display 21 and the speaker 22 as necessary based on the determination result of the permissible action in S32. A series of processes is completed by S33.
  • the HCU 10 may or may not have a function of causing the information presenting device to present information regarding the determination result of the permissible act.
  • the function of the controlled target device CE capable of realizing the non-permissible action among the non-driving actions is limited. ..
  • the operation example of the automatic operation ECU 40 and the HCU 10 according to the fourth embodiment shown in FIGS. 9 and 10 is a modification of the first embodiment shown in FIGS. 4 and 5. Also in FIGS. 9 and 10, the solid line indicates the driver requirement level corresponding to the action performed by the driver, and the alternate long and short dash line indicates the driver requirement level which is the determination result of the allowable action determination unit X4. ..
  • the information presentation content control unit X8 sequentially executes the event P1 notifying the transition to the level 3 automatic operation and the events P2 and P3 notifying and notifying the change to the driver requirement level 2. .. Further, the information presentation content control unit X8 executes an event W1 requesting the cancellation of the ongoing action when the driver continues to perform an action exceeding the driver requirement level determined by the permissible action determination unit X4.
  • the permissible act determination unit X4 fixes the driver requirement level to a predetermined level for a predetermined period specified in advance when a warning of an unacceptable act is executed by the information presentation content control unit X8. Specifically, the permissible action determination unit X4 sets the period until the main power supply or the ignition of the vehicle 1 is turned off (hereinafter, the limit period LT), and the driver requirement level is not warned during the limit period LT. Set lower than the case (see FIG. 4). The permissible action determination unit X4 fixes the driver requirement level to the lowest level 1 until the end of the limited period LT. Information presentation content The control unit X8 presents to the driver information indicating that the driver requirement level is intentionally fixed low by the permissible action determination unit X4 during the limited period LT.
  • the state management unit Y1 decides to lower the automatic operation level from level 3 to level 2 or less due to the end schedule of the permitted area (limited area) or the deviation from the usage conditions. In addition, the state management unit Y1 determines the end of the level 3 automatic operation even when it is presumed that the driver continues to perform an act other than the permissible act.
  • the state management unit Y1 sets the change preparation section STR before the change of operation is performed, based on the time (see event C1) or the point at which the change of operation from the automatic operation ECU 40 to the driver is performed.
  • the state management unit Y1 sets the change preparation section STR from the time or point at which the event P4 notifying that the driver requirement level is narrowed to the time or point at which the operation change is started.
  • the permissible action determination unit X4 fixes the driver requirement to a predetermined level or less in the change preparation section STR before the operation change.
  • the permissible action determination unit X4 sets the range to be determined as the permissible action after the information presentation of the event P4 by the information presentation content control unit X8 from the driver requirement level 3 or the like as a predetermined replacement preparation range. Narrow down to requirement level 1 or 0.
  • the permissible action determination unit X4 continues the state in which the driver requirement level is fixed to the lowest level 1 or lower, and then transitions to the driver requirement level 0 in which actions other than driving are prohibited.
  • Information presentation content When the control unit X8 grasps the end schedule of Level 3 automatic driving due to the end of the permitted area, deviation from the usage conditions, continuation of inappropriate actions, etc., in the information presentation at the event P4, At least give notice of driving change to end the automatic driving function.
  • Information presentation content The control unit X8 presents to the driver information indicating the driver requirement level limited to the replacement preparation range in the replacement preparation section STR before the end of the automatic operation announced. Further, the information presentation content control unit X8 presents the information requesting the operation change to the driver at the event C1.
  • the fourth embodiment described so far also has the same effect as that of the first embodiment, and the driver can obtain information on the determination result of the permissible action, so that it becomes easy to take an appropriate action.
  • the driver requirement level is fixed at level 1 in the subsequent limited period LT.
  • Such sanctions control makes it possible to make the driver aware of not performing an unacceptable second task. As a result, overconfidence of the automatic driving function by the driver can be avoided, so that the driver can easily take an appropriate action during the automatic driving period.
  • the information presentation device 20 when the information presentation content control unit X8 grasps the end schedule of the permitted area, the information presentation device 20 is made to present a notice of a driving change to end the automatic driving function. Therefore, as the range of the permissible action is narrowed by the permissible action determination unit X4, it becomes possible for the driver to end the action other than the driving and smoothly start the driving operation.
  • the permissible action determination unit X4 narrows the range determined as the permissible action to a predetermined change preparation range in the change preparation section STR before the driving change from the automatic driving function to the driver is performed. .. Therefore, it is possible to prompt the driver to start a smooth driving operation by terminating the actions other than the driving being performed at an early stage.
  • the fifth embodiment shown in FIGS. 11 to 14 is still another modification of the first embodiment.
  • the operation support ECU 37 of the fifth embodiment shown in FIG. 11 is provided with a deadman function unit Z1.
  • the deadman functional unit Z1 is a functional unit similar to the alertness estimation unit X2, the stress estimation unit X3, the occupant monitoring unit X5, and the like.
  • the deadman function unit Z1 functions as an abnormality detection device that automatically detects that the driver has become difficult to drive due to a reason that is difficult to predict in advance, such as a sudden illness, based on the driver status information acquired from the DSM 31.
  • the deadman function unit Z1 detects the inclination of the driver's upper body and the inclination of the head with respect to the upper body in order to diagnose that the driver has fallen into a difficult driving state, and grasps the driver's posture collapse.
  • the deadman function unit Z1 determines that the driver is in a difficult state to drive when the driver's posture continues to collapse, and outputs a detection result indicating an abnormal state to the communication bus 99.
  • the abnormal state of the driver in the following description indicates a state in which the driver's posture is changed to an inappropriate posture for driving.
  • the HCU 10 further has a driver information acquisition unit X9 in addition to each functional unit for confirming driver requirements in level 3 automatic driving.
  • the driver information acquisition unit X9 acquires the detection result of the abnormal state by the deadman function unit Z1 and grasps the driver state in parallel with the alertness estimation unit X2, the stress estimation unit X3, the occupant monitoring unit X5, and the like.
  • the driver information acquisition unit X9 grasps the driver's difficult-to-operate state, the driver information acquisition unit X9 requests the information presentation content control unit X8 to notify that an abnormality has been detected.
  • Information presentation content The control unit X8 notifies the driver and passengers in the vehicle interior that an abnormality is being detected by voice, display, or the like.
  • the driver in the automatic driving period may, for example, recline the backrest of the driver's seat and spend time in a relaxed posture.
  • a posture has no problem as a driver requirement during automatic driving, but is in a bad state as a driving posture. Therefore, the deadman function unit Z1 may misrecognize the relaxed posture state of the driver during automatic driving as a state in which the driver has collapsed and is difficult to drive, and outputs a detection result indicating an abnormal state. There is.
  • the HCU 10 performs manual operation or automatic operation of level 2 or lower. Carry out a different notification process.
  • an operation example of the HCU 10 and the automatic operation ECU 40 when a detection result indicating an abnormal state is acquired during the level 3 automatic operation will be described with reference to FIG. 11 based on FIG.
  • the information presentation content control unit X8 is used as an information presentation event by the information presentation device 20 when the transition to the level 3 automatic operation is carried out while the driver abnormality detection by the cooperation of the DSM31 and the deadman function unit Z1 is enabled.
  • Event N1 will be held.
  • the event N1 is started before the event P1 that notifies the transition to the level 3 automatic operation, or substantially at the same time as the event P1.
  • the information presentation of the event N1 may be performed in parallel with the information presentation of the event P1.
  • information is presented requesting the driver to take a posture in which the driving posture can be detected by the DSM 31.
  • the deadman function unit Z1 If the driver's driving posture is bad during the level 3 automatic driving period, the deadman function unit Z1 outputs a detection result indicating the driver's abnormal state (posture collapse) to the driver information acquisition unit X9.
  • the information presentation content control unit X8 executes the information presentation event N2 by the information presentation device 20 based on the acquisition of the detection result by the driver information acquisition unit X9.
  • posture abnormality information regarding the driver's posture collapse is sent to the occupants including passengers.
  • at event N2 at least a notification indicating the presence or absence of an abnormality in the driver and a notification indicating the reason for determining that the driver may have an abnormality are executed.
  • the evacuation restriction request unit X7a has, in addition to substantially the same function as the evacuation request unit X7 of the first embodiment, a function of requesting the automatic operation ECU 40 to impose functional restrictions on traveling control. Based on the detection result indicating the abnormal state, the evacuation restriction requesting unit X7a requests the automatic operation ECU 40 to implement the functional restriction of the traveling control substantially at the same time as the event N2. Specifically, the evacuation limit request unit X7a outputs a speed suppression request to the automatic operation ECU 40. Based on the speed suppression request, the automatic operation ECU 40 switches to a set speed slower (lower) than the normal set speed of level 3 automatic operation, and attempts deceleration control. Even if deceleration control is performed due to the driver's poor driving posture, level 3 automatic driving is continued.
  • the information presentation content control unit X8 determines whether or not a user operation has been input to the operation device 24 after presenting a response request for the presence or absence of an abnormality due to the event N2.
  • the operation device 24 is an input unit that receives user operations by a driver, a passenger, or the like, and is, for example, a steering switch, an operation lever, a voice input device, or the like. A occupant such as a driver and a passenger can input a user operation for answering that there is no abnormality in the driver or a user operation for answering that there is an abnormality in the driver to the operation device 24.
  • the information presentation content control unit X8 executes the information presentation event N3 by the information presentation device 20 when the input information of the user operation for answering that there is no abnormality in the driver is acquired.
  • the information presentation content control unit X8 executes a notification indicating the continuation of the level 3 automatic driving and a notification prompting the improvement of the driving posture at the event N3.
  • the driver is urged to improve the driving posture to the extent that the erroneous recognition by the deadman function unit Z1 can be avoided.
  • the information presentation content control unit X8 refers to the content of the detection result acquired by the driver information acquisition unit X9 after presenting the driving posture improvement request by the event N3, and determines whether or not the driver's driving posture has been improved. .. Information presentation content
  • the evacuation restriction request unit X7a outputs a request to cancel the speed suppression to the automatic driving ECU 40.
  • the automatic operation ECU 40 ends the deceleration control and starts traveling at the normal set speed.
  • the information presentation content control unit X8 repeatedly presents a request for improvement of the driving posture. In this case, the speed suppression control by the automatic operation ECU 40 is also continued. Then, when the driver does not respond to the improvement request by the information presentation content control unit X8, the evacuation restriction request unit X7a determines that the improvement of the driving posture cannot be expected, and requests the automatic driving ECU 40 to shift to MRM control.
  • the information presentation content control unit X8 executes the information presentation event M1 based on the start determination of the MRM control by the evacuation restriction request unit X7a, and presents the information indicating that the operation control has shifted to the MRM control to the driver.
  • the evacuation restriction request unit X7a requests the automatic operation ECU 40 to shift to MRM control based on the confirmation determination of the information presentation content control unit X8.
  • MRM control by the automatic driving ECU 40 is started.
  • the information presentation content control unit X8 executes the information presentation event M1 and notifies the passengers of the shift to MRM control mainly.
  • the occupant monitoring unit X5 of the fifth embodiment shown in FIG. 11 grasps the presence or absence of a passenger who is a occupant of the vehicle 1 excluding the driver, in addition to the existence of the driver.
  • the occupant monitoring unit X5 acquires the detection information of the seat sensor 32 provided on the seat surface of the passenger seat and determines whether or not the passenger is seated in the passenger seat.
  • the control unit X8 suspends the presentation of posture abnormality information based on the premise that the passenger is watching the driver's condition when the presence of the passenger is grasped by the occupant monitoring unit X5. That is, even if the driver information acquisition unit X9 has acquired the detection result indicating the abnormal state of the driver, the information presentation content control unit X8 does not immediately present the information of the event N2. As a result, the presentation of the response request as to whether or not there is an abnormality in the driver becomes a standby state.
  • the control unit X8 responds to the presence or absence of a driver abnormality when the collapse of the driving posture, which is a cause of abnormality detection by the deadman function unit Z1, is not improved after the presentation of the posture abnormality information is suspended.
  • Present information That is, based on the continuation of the state in which the improvement of the driver's posture is not grasped by the driver information acquisition unit X9, the information presentation content control unit X8 releases the suspension of the presentation of the posture abnormality information.
  • Information presentation in this case is carried out not only to the driver but also to the passenger in the passenger seat. Similar to the information presentation when there is no passenger, the passenger in the passenger seat is notified of the reason for determining that the driver may be abnormal together with the response request.
  • the permissible action determination unit X4 determines that the driver is in an abnormal state based on the determination result of such permissible actions. Request the deadman function unit Z1 to relax the standard. Based on the relaxation request from the permissible action determination unit X4, the deadman function unit Z1 adjusts a threshold value as a determination standard so that it is difficult to determine an abnormal state during the level 3 automatic operation period. As an example, when the deadman function unit Z1 determines that the abnormal state is caused by the continuation of the posture collapse for a predetermined time (for example, 5 seconds), the threshold adjustment for changing this predetermined time to a longer time (for example, 10 seconds). To carry out.
  • the criterion of the deadman function unit Z1 is optimized for the level 3 automatic operation. It is desirable that the criteria (threshold value) be relaxed within the scope of the deadman's switch-related laws and guidelines in the country or region where the vehicle 1 is used.
  • the information presentation process shown in FIGS. 13 and 14 is started by the HCU 10 based on the start of the level 3 automatic operation.
  • S51 it is determined whether or not the detection result indicating the abnormal state of the driver has been acquired by the driver information acquisition unit X9. If the detection result indicating the abnormal state is not acquired, the determination in S51 is repeated, and the occurrence of the abnormal state due to the detection of the posture collapse is waited for. On the other hand, if it is determined in S51 that the detection result indicating the abnormal state has been acquired, the process proceeds to S52.
  • S52 the presence or absence of a passenger is determined. If it is determined in S52 that there is a passenger, the process proceeds to S55. On the other hand, if it is determined in S52 that the passenger does not exist, the process proceeds to S53 in order to suspend the presentation of information by S55. In S53, it is determined whether or not the improvement of the driver's posture is grasped by the deadman function unit Z1 and the driver information acquisition unit X9. If it is determined in S53 that the driver's posture has been improved, the process returns to S51.
  • S53 determines whether or not the posture improvement is grasped. If it is determined in S54 that the posture improvement is not grasped, the process proceeds to S54. In S54, it is determined whether or not the elapsed time after detecting the driver's posture collapse (abnormal state) exceeds a predetermined time. If it is determined in S54 that the predetermined time has not elapsed after the detection of the posture collapse, the process returns to S53. On the other hand, if it is determined in S54 that a predetermined time has elapsed since the posture collapse was detected, in other words, the state in which the driver's posture improvement is not grasped continues for a predetermined time, the process proceeds to S55. As a result, the suspension of the presentation of the posture abnormality information is released.
  • S55 the above-mentioned information on event N2 is presented, that is, a request for answering whether or not there is a driver abnormality is presented, and a reason for determining the possibility of abnormality is presented.
  • S55 outputs a request for execution of deceleration control by suppressing the set speed to the automatic operation ECU 40.
  • the information presentation of the event N2 and the output of the deceleration control execution request may be executed at different timings.
  • a deceleration control execution request is output.
  • the information presentation of the event N2 may be carried out after the execution request of the speed suppression control.
  • S55 the answer result of whether or not there is an abnormality in the driver is determined. If there is a reply in S56 that the driver is normal and the driver is not in a difficult state, the process proceeds to S58. On the other hand, if there is an abnormality in the driver and there is a reply that the driving is difficult, the process proceeds to S61. Further, if there is no input of an answer by the occupant, the process proceeds to S57.
  • S57 it is determined whether or not the elapsed time since the start of the response request exceeds the predetermined time. If it is determined in S57 that the predetermined time has not elapsed after the start of the response request, the process returns to S56. On the other hand, if it is determined in S57 that the predetermined time has elapsed, the process proceeds to S61.
  • S58 the presentation of the posture abnormality information by the event N2 started in S55 is completed, and the information presentation of the above-mentioned event N3 is performed.
  • the notification indicating the continuation of the level 3 automatic driving and the notification prompting the improvement of the driving posture are sequentially executed, and the process proceeds to S59.
  • the order of implementation of the continuous notification of automatic driving and the request for improvement of the driving posture may be changed as appropriate.
  • S59 it is determined whether or not the driver's posture collapse has been improved. If it is determined in S59 that the driver's posture collapse has been improved, the process proceeds to S62.
  • S62 the automatic operation ECU 40 is requested to release the function restriction of the traveling control requested in S55, that is, the release of the deceleration control, and a series of processes is completed.
  • S60 it is determined whether or not the elapsed time from the start of the driving posture improvement request exceeds the predetermined time. If it is determined in S60 that the predetermined time has not elapsed after the start of the improvement request, the process returns to S59. On the other hand, if it is determined in S60 that the predetermined time has elapsed, the process proceeds to S61. In S61, the presentation of the posture abnormality information and the like is finished, and the information of the event W1 described above is presented. Specifically, in S61, the shift of the operation control to the MRM control is notified. Further, in S61, a request for transition to MRM control is output to the automatic operation ECU 40. As a result, a series of processes is completed.
  • the fifth embodiment described so far also has the same effect as that of the first embodiment, and the driver can obtain information on the determination result of the permissible action, so that it becomes easy to take an appropriate action.
  • the detection result indicating the abnormal state of the driver is acquired by the driver information acquisition unit X9.
  • the driver information acquisition unit X9 the detection result indicating the abnormal state of the driver is acquired by the driver information acquisition unit X9.
  • the collapsed driver's posture is within the allowable range as an allowable action.
  • the posture abnormality information is presented to the information presenting device. Therefore, even if the posture collapse due to a sudden illness satisfies the driver requirements during automatic driving, an inquiry for physical condition confirmation can be made to the occupants such as the driver. As a result, even during the level 3 automatic operation, the deadman system mainly composed of the deadman function unit Z1 can be operated normally.
  • the presentation of the posture abnormality information is terminated when the input request is answered. .. Therefore, after the driver's driving difficulty state is determined, it becomes possible to present highly useful information such as the MRM control state to the anxious passenger in an easy-to-understand manner.
  • the collapsed driver's posture is within the permissible range. Even if there is, functional restrictions are added to the driving control. Therefore, even if the posture collapse due to a sudden illness satisfies the driver requirement during automatic driving, the automatic driving ECU 40 can shift to a running state in which it is easy to shift to MRM control while continuing automatic driving. As a result, when the driver is in a state where it is really difficult to drive, the transition from level 3 automatic driving to MRM control can be smoothly carried out.
  • the automatic driving ECU 40 when the improvement of the driver's posture is grasped by the driver information acquisition unit X9, the automatic driving ECU 40 is required to release the functional restriction of the traveling control. Therefore, when the driver's posture collapse is improved, the traveling state of the vehicle 1 returns to the traveling state by the normal level 3 automatic driving. Therefore, even if the deadman system is an effective in-vehicle system, the convenience of the automatic driving function is not easily impaired.
  • the presentation of the posture abnormality information including the response request as to whether or not the passenger is in an abnormal state is suspended.
  • the passenger can see the driver. Therefore, it is possible to quickly respond to an unexpected situation that occurs in the driver without strictly notifying the driver of the posture collapse. Based on the above, it is possible to avoid a situation in which the occupant feels annoyed by frequent response requests.
  • the fifth embodiment even if the presence of the passenger is known, if the driver's posture is not improved, the suspension of the presentation of the posture abnormality information is released. Therefore, in the case where the driver suddenly becomes ill and it becomes difficult for the passenger to deal with it, it is possible to operate the deadman system normally and shift to MRM control as in the case where there is no passenger.
  • the permissible action discriminating unit X4 requests the deadman function unit Z1 to relax the criteria for determining the abnormal state. Will be done. According to the adjustment process of such a criterion, the relaxed posture of the driver during automatic driving is less likely to be mistaken as a posture collapse due to a sudden illness. As a result, it is possible to avoid a situation in which the occupant feels annoyed by frequently presenting response requests.
  • the occupant monitoring unit X5 corresponds to the "occupant grasping unit”
  • the evacuation restriction request unit X7a corresponds to the "control request unit”
  • the deadman function unit Z1 corresponds to the "abnormality detection device”. ..
  • the permissible act discrimination units X4 and Y6 there may be only one discrimination viewpoint by the permissible act discrimination units X4 and Y6.
  • the permissible action discriminating units X4 and Y6 may discriminate the permissible action by using a trained artificial intelligence model constructed mainly by a neural network.
  • a trained artificial intelligence model constructed mainly by a neural network.
  • an artificial intelligence model is trained in advance using teacher data consisting of a pair of input data including driving environment information, arousal degree information, and stress information, and output data including the determination result of permissible behavior corresponding to these. Can be left.
  • teacher data consisting of a pair of input data including driving environment information, arousal degree information, and stress information
  • the permissible action discriminating units X4 and Y6 do not have to predict the transition of the permissible action range in the traveling route to the destination based on the future predictable discrimination viewpoint.
  • the permissible action determination units X4 and Y6 predict, for example, the transition of the permissible action range in the traveling route to the destination at the start of the operation of the automatic driving function of the automatic driving level 3, and then the driver. It may be configured so as not to determine the currently permissible act.
  • At least one of the information presenting device 20 and the controlled device CE may include a device (for example, a smartphone) brought into the vehicle 1.
  • the information presenting device 20 may supplementarily include a device that presents tactile information, such as a vibrator that vibrates the driver's seat.
  • the presentation of the posture abnormality information when the passenger is grasped is not suspended. Further, in the modified example 8 of the fifth embodiment, the process of requesting the reference relaxation from the permissible action determination unit X4 to the deadman function unit Z1 is omitted. Further, in the modified example 9 of the fifth embodiment, the presentation of the posture abnormality information to the driver is omitted. In the modification 9, only the process of requesting the deadman function unit Z1 to relax the reference from the permissible action determination unit X4 is performed as the cooperation process of the deadman function unit Z1 and the HCU 10.
  • the deadman function unit Z1 according to the modification 10 of the fifth embodiment can use information such as vehicle behavior and driving behavior in addition to driver status information by DSM31 for driver abnormality detection. Further, the deadman function unit Z1 according to the modification 11 is mounted on one independent in-vehicle ECU separate from the driving support ECU 37, and outputs a detection result indicating an abnormal state of the driver to the communication bus 99. Further, the deadman function unit Z1 according to the modification 12 is mounted on the control circuit of the DSM 31, and outputs the detection result of diagnosing the abnormal state to the communication bus 99 together with the driver state information.
  • each function provided by the HCU 10 and the automatic operation ECUs 40 and 340 is provided by the software and the hardware for executing the software, the hardware only, the hardware only, or a combination thereof. It is possible. Further, when such a function is provided by an electronic circuit as hardware, each function can also be provided by a digital circuit including a large number of logic circuits or an analog circuit.
  • the form of the storage medium for storing the program or the like capable of realizing the above-mentioned information presentation and function control may be changed as appropriate.
  • the storage medium is not limited to the configuration provided on the circuit board, is provided in the form of a memory card or the like, is inserted into the slot portion, and is electrically connected to the control circuit of the HCU 10 or the automatic operation ECUs 40 and 340. May be configured.
  • the storage medium may be an optical disk, a hard disk, or the like which is a copy base of the program to the HCU 10 or the automatic operation ECUs 40 and 340.
  • the function limiting unit Y7 provided in the automatic operation ECU 340 in the third embodiment may be provided in the HCU 10 of the first embodiment.
  • the information presentation content control unit X8 provided in the HCU 10 in the first embodiment may be provided in the automatic operation ECU 340 of the third embodiment. That is, the information presentation and the function limitation using the permissible action determination units X4 and Y6 may be realized in a complex manner by one electronic control device.
  • the information presentation control device does not have to be mounted on the vehicle 1.
  • the HCU 10 may not be mounted on the vehicle 1 and may be fixedly arranged outside the vehicle 1 or mounted on another vehicle.
  • the information presenting device 20 is remotely controlled by communication such as the Internet, road-to-vehicle communication, and vehicle-to-vehicle communication.
  • the function control device may not be mounted on the vehicle 1.
  • the vehicle 1 may be optimized according to the road traffic law of each country and region. Further, the information presented by the information presentation control device and the functions restricted by the function control device may be optimized according to the road traffic law of each country and region.
  • control unit and its method described in the present disclosure may be realized by a dedicated computer constituting a processor programmed to execute one or a plurality of functions embodied by a computer program.
  • the apparatus and method thereof described in the present disclosure may be realized by a dedicated hardware logic circuit.
  • the apparatus and method thereof described in the present disclosure may be realized by one or more dedicated computers configured by a combination of a processor that executes a computer program and one or more hardware logic circuits.
  • the computer program may be stored in a computer-readable non-transitional tangible recording medium as an instruction executed by the computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

情報提示制御装置としてのHCU(10)は、ドライバに代わって運転行為を実施可能な自動運転機能を備える車両に用いられ、ドライバへ向けて情報を提示する情報提示機器(20)を制御する。HCUは、自動運転機能の作動時にドライバにより実施され得る運転行為とは異なる運転以外の行為のうち、ドライバに許容される許容行為を判別する許容行為判別部(X4)と、許容行為の判別結果に関する情報を情報提示機器に提示させる情報提示内容制御部(X8)と、を備える。

Description

情報提示制御装置及び機能制御装置 関連出願の相互参照
 この出願は、2020年3月23日に日本に出願された特許出願第2020-51518号、及び、2021年2月26日に日本に出願された特許出願第2021-30063号を基礎としており、基礎の出願の内容を、全体的に、参照により援用している。
 この明細書による開示は、自動運転機能を備える車両において許容されるドライバの運転操作とは異なる行為の実施支援に関する。
 特許文献1には、ドライバに代わって運転行為を実施可能な自動運転機能を備える車両において、自動運転機能が作動中であると判定されている場合に、アプリ画像を情報提示機器に表示することが開示されている。
特開2017-222271号公報
 特許文献1の車両のドライバは、自動運転機能の作動時に、運転以外の行為として、前述のアプリ画像の観賞及び操作を実施することができる。
 一方で、自動運転機能の作動時において、運転以外の行為の中には、許容されるべき行為と、許容されるべきでない行為とが存在し得る。さらに、こうした行為の許容範囲は、例えば車両の走行環境、ドライバの状態等、様々な状況に応じて変化し得る。ところが、様々な状況を的確に認識して、運転以外の行為がどこまで許容されているかを正確に判断することは、ドライバにとって困難な場合がある。
 この明細書の開示による目的のひとつは、ドライバが自動運転機能の作動時に適切な行為を取り易くなる情報提示制御装置及び機能制御装置を提供することにある。
 ここに開示された態様のひとつは、ドライバに代わって運転行為を実施可能な自動運転機能を備える車両に用いられ、ドライバへ向けて情報を提示する情報提示機器を制御する情報提示制御装置であって、
 自動運転機能の作動時にドライバにより実施され得る運転行為とは異なる運転以外の行為のうち、ドライバに許容される許容行為を判別する許容行為判別部と、
 許容行為の判別結果に関する情報を情報提示機器に提示させる情報提示内容制御部と、を備える。
 このような態様によると、許容行為判別部により判別された許容行為の判別結果に関する情報が情報提示機器によって提示される。ドライバにとって車両の走行環境等の状況の把握必要性が低下している自動運転機能の作動時において、ドライバが情報提示機器を介して許容行為の判別結果に関する情報を得ることができる。故に、ドライバは、こうした情報を参考にすることで、自動運転機能の作動時に適切な行為を取り易くなる。
 また、ここに開示された態様のひとつは、ドライバに代わって運転行為を実施可能な自動運転機能を備える車両に用いられ、制御対象機器の機能を制御する機能制御装置であって、
 自動運転機能の作動時にドライバにより実施され得る運転行為とは異なる運転以外の行為のうち、ドライバに許容される許容行為を判別する許容行為判別部と、
 運転以外の行為のうち許容行為以外の行為を実現可能な制御対象機器の機能を制限する機能制限部と、を備える。
 このような態様によると、許容行為判別部によって判別された許容行為に基づき、運転以外の行為のうち許容行為以外の行為を実現可能な制御対象機器の機能は、制限される。ドライバにとって車両の走行環境等の状況の把握必要性が低下している自動運転機能の作動時において、ドライバがうっかり許容行為以外の行為を実施してしまう事態は、機能的制限によって抑制される。故に、ドライバは、自動運転機能の作動時に適切な行為を取り易くなる。
 なお、請求の範囲における括弧内の符号は、後述する実施形態の部分との対応関係を例示的に示すものであって、技術的範囲を限定することを意図するものではない。
車載ネットワークの全体像を示す図である。 HCUの概略的な構成を示す図である。 HCUによる処理を示すフローチャートである。 自動運転ECU及びHCUの作動の一例を示すタイムチャートである。 自動運転ECU及びHCUの作動の他の一例を示すタイムチャートである。 第2実施形態のHCUによる処理を示すフローチャートである。 第3実施形態の自動運転ECUの概略的な構成を示す図である。 第3実施形態の自動運転ECUによる処理を示すフローチャートである。 第4実施形態の自動運転ECU及びHCUの作動の一例を示すタイムチャートである。 第4実施形態の自動運転ECU及びHCUの作動の他の一例を示すタイムチャートである。 第5実施形態の車載ネットワークの全体像を示す図である。 自動運転ECU及びHCUの作動の一例を示すタイムチャートである。 第5実施形態のHCUによる情報提示処理を図14と共に示すフローチャートである。 第5実施形態のHCUによる情報提示処理を図13と共に示すフローチャートである。
 以下、複数の実施形態を図面に基づいて説明する。なお、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合せることができる。
 (第1実施形態)
 図1に示すように、本開示の第1実施形態による情報提示制御装置は、HCU(Human Machine Interface Control Unit)10となっている。HCU10は、情報提示機器20等と共に、情報提示システムIPSを構成している。HCU10は、情報提示機器20を制御し、情報提示機能及びセカンドタスク等の運転以外の行為の実施を支援する行為実施支援機能等を複合的に実現する電子制御装置である。HCU10は、車両1に用いられ、例えば車両1に搭載されている。
 HCU10は、車両1に搭載された車載ネットワークの通信バス99に通信可能に接続されている。HCU10は、車両1に搭載された車載ネットワークに設けられた複数のノードのうちの1つである。車載ネットワークの通信バス99には、DSM31、座席センサ32、周辺監視センサ33、ロケータ34、車外通信機35、走行制御ECU36、運転支援ECU37、及び自動運転ECU40等がそれぞれノードとして接続されている。
 DSM(Driver Status Monitor)31は、ドライバの状態を検出する状態検出装置である。DSM31は、近赤外光源及び近赤外カメラと、これらを制御する制御ユニットとを含む構成である。DSM31は、運転席のヘッドレスト部分に近赤外カメラを向けた姿勢にて、例えばステアリングコラム部の上面又はインスツルメントパネルの上面等に設置されている。DSM31は、近赤外光源によって近赤外光を照射されたドライバの頭部を、近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、ドライバのアイポイントの位置、視線方向、瞳孔のぶれ、さらにはドライバの姿勢等の状態情報を撮影画像から抽出し、抽出したドライバの状態情報を、通信バス99を通じてHCU10等に提供する。あるいは制御ユニットは、撮像画像そのものを、通信バス99を通じてHCU10等に提供することができる。
 座席センサ32は、ドライバの運転席への着座状態を検出するセンサである。座席センサ32は、運転席にドライバが着座しているか否かを検出する機能、ドライバがシートベルトを装着しているか否かを検出する機能、運転席のリクライニング角度を検出する機能等を有する。座席センサ32は、着座状態の情報を、通信バス99を通じてHCU10等に提供する。
 周辺監視センサ33は、車両1の周辺環境を監視する自律センサである。周辺監視センサ33は、自車周囲の検出範囲から、歩行者、サイクリスト、人間以外の動物、及び他車両等移動物体、さらに路上の落下物、ガードレール、縁石、道路標識、走行区画線等の路面標示、及び道路脇の構造物等の静止物体を検出可能である。周辺監視センサ33は、自車周囲の物体の検出情報を、通信バス99を通じて、運転支援ECU37、自動運転ECU40及びHCU10等に提供する。
 周辺監視センサ33には、例えばカメラユニット及びミリ波レーダが含まれている。カメラユニットは、単眼カメラを含む構成であってもよく、複眼カメラを含む構成であってもよい。カメラユニットは、車両1の前方範囲、側方範囲及び後方範囲等を撮影可能なように車両1に搭載されている。カメラユニットは、自車周囲を撮影した撮像データ及び撮像データの解析結果の少なくとも一方を、検出情報として出力する。ミリ波レーダは、ミリ波又は準ミリ波を自車周囲へ向けて照射する。ミリ波レーダは、移動物体及び静止物体等で反射された反射波を受信する処理によって生成した検出情報を出力する。周辺監視センサ33は、カメラユニット及びミリ波レーダに対し追加又は入換される形態で、ライダ及びソナー等を備えていてもよい。
 ロケータ34は、GNSS(Global Navigation Satellite Systems)受信機及び慣性センサ等を含む構成である。ロケータ34は、GNSS受信機で受信する測位信号、慣性センサの計測結果、及び通信バス99に出力された車速情報等を組み合わせ、車両1の自車位置及び進行方向等を逐次測位する。ロケータ34は、測位結果に基づく車両1の位置情報及び方角情報を、ロケータ情報として、通信バス99に逐次出力する。
 ロケータ34は、地図データベース34aをさらに有している。地図データベース34aは、多数の3次元地図データ及び2次元地図データを格納した大容量の不揮発性の記憶媒体を主体とする構成である。3次元地図データは、いわゆる高精度地図データであり、道路の3次元形状情報及び各レーンの詳細情報等、高度運転支援及び自動運転に必要な情報を含んでいる。ロケータ34は、現在位置周辺の地図データを地図データベース34aから読み出し、運転支援ECU37及び自動運転ECU40等に、ロケータ情報と共に提供する。なお、ロケータ34に代えて、スマートフォン等のユーザ端末又はナビゲーション装置等が、位置情報、方角情報及び地図データ等を運転支援ECU37及び自動運転ECU40に提供してもよい。
 車外通信機35は、車両1に搭載される通信モジュール(Data Communication Module)である。車外通信機35は、LTE(Long Term Evolution)及び5G等の通信規格に沿った無線通信により車両1と周囲の基地局との間で電波を送受信する。車外通信機35の搭載により、車両1は、インターネットに接続されたコネクテッドカーとなる。車外通信機35は、クラウド上に設けられたプローブサーバから、各種のデータを取得する。各種のデータとしては、車両1が走行する道路の最新の地図データ、交通情報のデータ、天候情報のデータ、情報提示機器20に再生させる映画等のコンテンツの再生データ等が挙げられる。交通情報のデータには、例えば車両1が走行する道路の交通量、交通事故及び工事による交通規制等の道路情報等が含まれる。
 走行制御ECU36は、マイクロコンピュータを主体として含む電子制御装置である。走行制御ECU36は、各車輪のハブ部分に設けられた車輪速センサの検出信号に基づき、車両1の現在の走行速度を示す車速情報を生成し、通信バス99に逐次出力する。加えて走行制御ECU36は、運転アクチエータの動作を制御する。
 運転アクチエータは、運転操作を実施するための車両操舵装置、車両駆動装置、車両制動装置を含む構成である。運転操作には、車両操舵、車両駆動及び車両制動が含まれる。車両操舵装置は、車両1の例えば前輪に与える操舵角を制御する装置である。車両駆動装置は、車両1の動力源から提供された動力を用いて、車両1の例えば前輪を駆動する装置である。車両制動装置は、摩擦制動、回生制動等の制動方法にて、車両1の例えば前輪を制動する装置である。
 運転支援ECU37及び自動運転ECU40は、車両1において自動運転システムADSを構成している。自動運転システムADSの搭載により、車両1は、自動運転機能を備える。
 運転支援ECU37は、ドライバの運転操作を支援する運転支援機能を実現する電子制御装置である。運転支援ECU37は、自動運転レベルにおいてレベル2程度の高度運転支援又は部分的な自動走行制御を可能にする。運転支援ECU37は、処理部、RAM(Random Access Memory)、記憶部、入出力インターフェース及びこれらを接続するバス等を備えたコンピュータを主体として含む構成である。運転支援ECU37は、処理部によるコンピュータプログラムを実行し、走行制御ECU36へ制御信号を出力することにより、高度運転支援を実現する複数の機能部を有する。具体的に、運転支援ECU37は、ACC(Adaptive Cruise Control)機能を実現するACC機能部、LTA(Lane Tracing Assist)機能を実現するLTA機能部を有する。さらに、運転支援ECU37は、LCA(Lane Change Assist)機能を実現するLCA機能部等を有する。
 自動運転ECU40は、ドライバの運転操作を代行可能な自動運転機能を実現させる電子制御装置である。自動運転ECU40は、予め設定された限定的な運行設計領域(Operational Design Domain,以下、限定領域)に限り、車両1のシステムが制御主体となるレベル3の自律走行を可能にする。
 ここで限定領域は、自動運転ECU40による自律走行を正常に作動させるために前提となる走行環境条件を含んでいる。一例として、限定領域は、車両1が走行する国及び地域の道路交通法、条例に基づき設定されることがあり、車両1が走行する道路のインフラ整備状態、道路形状等を原因とした技術的な制約に基づき設定されることがある。以上の道路条件及び地理条件等に基づく限定領域の区分は、例えば前述の地図データに紐付けられて、地図データベース34aの情報に含まれている。
 自動運転ECU40は、処理部41、RAM42、記憶部43、入出力インターフェース44、及びこれらを接続するバス等を備えたコンピュータを主体として含む構成である。処理部41は、RAM42と結合された演算処理のためのハードウエアである。処理部41は、CPU(Central Processing Unit)及びGPU(Graphic Processing Unit)等の演算コアを少なくとも1つ含む構成である。処理部41は、RISC(Reduced Instruction Set Computer)、FPGA(Field-Programmable Gate Array)及び他の専用機能を備えたIPコア等をさらに含む構成であってもよい。処理部41は、RAM42へのアクセスにより、後述する各機能部の機能を実現するための種々の処理を実行する。記憶部43は、例えば半導体メモリ等の不揮発性の記憶媒体をすくなくとも1つ含む構成である。記憶部43には、処理部41によって実行される種々のコンピュータプログラム(例えば自動運転プログラム)等が格納されている。
 自動運転ECU40は、記憶部43に記憶されたコンピュータプログラムを処理部41によって実行することにより、自動運転を実現する複数の機能部を有する。具体的に自動運転ECU40は、図2に示すように、状態管理部Y1及び運転制御部Y2を有する。
 状態管理部Y1は、ロケータ34から取得したロケータ情報及び地図情報、周辺監視センサ33から取得した検出情報、車外通信機35を通じて取得された交通情報及び天候情報、さらにはHCU10からの退避要求等に基づき、自動運転の状態を管理する。特に第1実施形態の状態管理部Y1は、自動運転の状態としての自動運転レベルを管理し、適時切り替える。第1実施形態において自動運転レベルは、0以上3以下の整数である離散的な数値をとる。自動運転レベルは、数値が大きくなるに従って、運転行為のうちシステムが制御主体となる範囲が大きくなることを意味する。ここで運転行為とは、前述の運転操作に、周辺監視を加えた概念として定義される。状態管理部Y1が切り替える自動運転レベルは、米国自動車技術会が規定する自動運転レベルに準じている。
 例えば自動運転レベルがレベル0の場合では、運転行為の全てについてドライバが実施主体となる。いわゆる手動運転が実施される。自動運転レベルがレベル1の場合では、運転行為のうち、車両操舵か、車両駆動及び車両制動かのいずれか一方の実施主体が車両1(詳細には運転支援ECU37)であり、その他の運転行為の全ての実施主体がドライバとなる。自動運転レベルがレベル2の場合では、車両操舵、車両駆動及び車両制動の運転操作の実施主体が車両1(詳細には運転支援ECU37)である。この場合、ドライバは、周辺監視の実施主体となると共に、車両1による運転操作の実施状況を監視し、当該運転操作に常に介入できるよう、ステアリングホイールを握る等の即時運転操作可能な状態を保つ必要がある。
 自動運転レベルがレベル3の場合では、車両操舵、車両駆動、車両制動及び周辺監視の全ての運転行為の実施主体が車両1となり、車両1側の自動運転ECU40がこれら運転行為を実施する。このとき、ドライバは、自動運転ECU40による運転行為の実施状況を常時監視することなく、運転とは異なる運転以外の行為を、安全上許容された範囲で実施することができる。安全上許容された範囲は、法規的に定められてもよく、実際の運転における安全性に基づいて定められてもよい。
 ドライバが実施し得る運転以外の行為には、コンテンツの観賞、コンピュータゲーム、電子メールの閲覧及び送信作業、ウェブサイトの閲覧、携帯電話又はスマートフォンの操作、食事、メイク(化粧)、読書、睡眠等が含まれる。コンテンツには、例えば映画等の動画、音楽、オーディオブック等が含まれる。これらは、セカンドタスク、セカンダリータスク、セカンダリーアクティビティ、アザーアクディビティと呼称されることがある。但し、これらの呼称は、運転以外の行為そのものを示す場合があり、運転以外の行為のうち一般的に安全上許容された行為を示す場合があり、運転以外の行為のうち各種状況に応じて個別具体的に安全上許容された行為を示す場合がある。以下では、運転以外の行為のうち各種状況に応じて個別具体的に安全上許容された行為を、許容行為と定義して説明を続ける。許容行為と認められる範囲は、各種状況の経時的な変化に応じて、変わり得る。
 状態管理部Y1は、こうした自動運転レベルを適時切り替える。自動運転レベルがレベル0の場合では、運転支援ECU37及び自動運転ECU40が運転行為に実質的に介入せず、ドライバの運転行為により直接的に走行制御ECU36及び運転アクチエータが制御される。自動運転レベルがレベル1又は2の場合では、ドライバの運転行為を運転支援ECU37が支援する態様にて、走行制御ECU36及び運転アクチエータが制御される。自動運転レベルがレベル3の場合では、自動運転ECU40の計算に基づき走行制御ECU36及び運転アクチエータが制御される。
 前述の限定領域を車両1が走行する場合に、状態管理部Y1は、自動運転レベルの上限をレベル3とする。逆に、限定領域外を車両1が走行する場合に、状態管理部Y1は、基本的に自動運転レベルの上限をレベル2とし、例外条件下にて自動運転レベルの上限をレベル3とする。この例外条件は、例えば車両1が走行する道路が渋滞し、かつ、車両1が所定速度未満の低速走行をしているという条件である。以上のことから、地図データベース34aの示す限定領域と、低速走行となる渋滞区間とが、少なくとも一部のセカンドタスクの許可される許可エリアとなる。
 状態管理部Y1は、車両1が限定領域を走行する場合であっても、自動運転レベルをレベル3からレベル2以下に引き下げる場合がある。例えば状態管理部Y1は、自動運転機能がその使用条件から外れた場合又は使用条件から外れることが予測される場合に、突発的に、自動運転レベルをレベル2以下に引き下げる。例えば、大雨、降雪、濃霧及び砂嵐等の悪天候による環境条件の悪化により周辺監視センサ33の検出精度が低下する場合等では、自動運転機能の作動の前提となる使用条件から外れることがある。また、自車周囲にて交通事故が発生した場合には、自動運転機能が使用条件から外れることがある。
 状態管理部Y1は、許可エリアの終了予定又は使用条件からの逸脱により、自動運転レベルをレベル3からレベル2以下に引き下げることを決定した場合、情報提示機器20がドライバへ向けて運転交代を予告する情報を提示するように、HCU10へ要求する。運転交代にドライバが応じた場合、状態管理部Y1は、実際に、自動運転レベルをレベル3からレベル2以下に引き下げる。運転交代の予告後、所定時間待機しても運転交代にドライバが応じない場合、状態管理部Y1は、車両1をMRM(Minimal Risk Manoeuvre)制御することを決定可能である。MRM制御は、非常時において、リスクを最小に抑制した車両制御であり、具体的には、退避場所を探索及び設定し当該退避場所に自車を移動及び停車させる制御を意味する。
 運転制御部Y2は、状態管理部Y1が自動運転レベルをレベル3に設定した場合に、運転行為の実施主体として機能し、走行制御ECU36を制御する。具体的に、運転制御部Y2は、ロケータ34から取得したロケータ情報及び地図情報、周辺監視センサ33から取得した検出情報等に基づき、車両1が走行する道路形状及び他車両の位置等を認識する。運転制御部Y2は、道路形状及び他車両の位置等の認識結果に基づき、車両1を走行させる予定走行ラインを生成する。運転制御部Y2は、走行制御ECU36との連携により、生成された予定走行ラインに沿って車両1を走行させる。
 前述のMRM制御が実施される場合、運転制御部Y2は、自車周囲に対してサイレン等の警報を車両1に発声させつつ、車両1の走行速度を漸次低下させ、車両1を道路脇等の比較的安全な場所に停車させる。
 次に、情報提示システムIPSに含まれる情報提示機器20及びHCU10の各詳細を、順に説明する。
 情報提示機器20は、ドライバへ向けて情報を提示する機器である。図1に示すように、情報提示機器20は、複数のディスプレイ21及び複数のスピーカ22を含む構成である。複数のディスプレイ21は、例えばインスツルメントパネルに設置されている。複数のディスプレイ21には、例えばグラフィックメータ(Graphic Meter)、及びセンターインフォメーションディスプレイ(Center Information Display,CID)等が含まれている。さらに、ヘッドアップディスプレイ(Head Up Display,HUD)がディスプレイ21に含まれていてもよい。各ディスプレイ21は、ドライバへ向けて視覚的情報を提示するデバイスであり、画像を表示可能に構成されている。複数のディスプレイ21のうち少なくとも一部のディスプレイ(例えばCID)は、表示機能と、タッチ操作等を受け付ける操作機能とを、複合的に有する。
 複数のスピーカ22は、例えばインスツルメントパネルにおけるディスプレイ画面の近傍、ドアパネル、リヤクォーターパネル等に配置されている。各スピーカ22は、ドライバへ向けて聴覚的情報を提示するデバイスである。具体的に各スピーカ22は、入力された電気信号を、ボイスコイル及び振動板を用いて物理信号に変換することにより、音を吹鳴可能となっている。スピーカ22は、各ディスプレイ21に対応して個別に設けられてもよく、各ディスプレイ21のうち一部又は全部に対して共通に設けられてもよく、ディスプレイ21とは全く独立して設けられてもよい。
 HCU10は、自動運転ECU40及び情報提示機器20と連携して、ドライバ等の乗員へ向けた情報提示を、統合的に制御する電子制御装置である。HCU10は、処理部11、RAM12、記憶部13、入出力インターフェース14、及びこれらを接続するバス等備えたコンピュータを主体として含む構成である。処理部11は、RAM12と結合された演算処理のためのハードウエアである。処理部11は、CPU、GPU、RISC等の演算コアを少なくとも1つ含む構成である。処理部11は、FPGA及び他の専用機能を備えたIPコア等をさらに含む構成であってもよい。RAM12は、映像生成のためのビデオRAMを含む構成であってもよい。処理部11は、RAM12へのアクセスにより、後述する各機能部の機能を実現するための種々の処理を実行する。記憶部13は、例えば半導体メモリ等の不揮発性の記憶媒体をすくなくとも1つ含む構成である。記憶部13には、処理部11によって実行される種々のコンピュータプログラム(例えば情報提示プログラム)等が格納されている。
 HCU10は、記憶部13に記憶されたプログラムを処理部11によって実行することで、複数の機能部を有する。具体的にHCU10は、図2に示すように、走行環境推定部X1、覚醒度推定部X2、ストレス推定部X3、許容行為判別部X4、乗員監視部X5、警報判断部X6、退避要求部X7及び情報提示内容制御部X8を有する。
 走行環境推定部X1は、周辺監視センサ33から取得した検出情報、ロケータ34から取得したロケータ情報及び地図データ、車外通信機35を通じて取得された交通情報等に基づき、車両1が走行する道路の走行環境を推定する。道路の走行環境の推定には、自動運転ECU40の運転制御部Y2が認識した道路形状、他車両の位置等の情報、及び予定走行ラインの情報がさらに用いられてよい。
 走行環境は、道路形状及び走行シーンを含む概念である。道路形状には、道路幅、道路傾斜、道路曲率、道路区画線形状等が含まれる。走行シーンには、限定領域の設定、交通量等が含まれる。こうして走行環境推定部X1が推定した走行環境情報は、許容行為判別部X4へ提供される。走行環境推定部X1は、最新の情報に基づき、走行環境情報を適時更新する。
 推定対象の走行環境には、車両1が現在走行中の道路の走行環境が含まれる。また第1実施形態では、推定対象の走行環境には、車両1が走行予定の道路の走行環境がさらに含まれる。
 覚醒度推定部X2は、DSM31から取得したドライバの状態情報に基づき、ドライバの覚醒度を推定する。ドライバの覚醒度とは、ドライバの眠気をレベルによって示す指標である。覚醒度は、高いレベルとなる程、ドライバが睡眠状態に近いことを示す。覚醒度は、0以上3以下の整数である離散的な数値をとる。
 例えばドライバの視線の移動が早く、頻繁である状態、瞬きの周期が安定している状態、ドライバの動きが活発である状態等が認められる場合、覚醒度推定部X2は、覚醒度をレベル0と推定する。
 ドライバの唇が開いている状態、視線移動の動きが遅い状態、瞬きがゆっくりと頻発している状態、座り直しが頻発する状態、顔に手をやる状態等が認められる場合、覚醒度推定部X2は、覚醒度をレベル1と推定する。
 ドライバに意識的と思われる瞬きがある状態、頭を振る、肩の上下運動等無用な身体の動きがある状態、あくび又は深呼吸が頻発する状態、瞬き及び視線の動きが遅い状態等が認められる場合、覚醒度推定部X2は、覚醒度をレベル2と推定する。
 ドライバの頭が前に傾く状態、頭が後ろに倒れる状態、瞼を数秒以上閉じる状態が認められる場合、覚醒度推定部X2は、覚醒度をレベル3と推定する。こうして覚醒度推定部X2が推定した覚醒度情報は、許容行為判別部X4へ提供される。覚醒度推定部X2は、最新の情報に基づき、覚醒度情報を適時更新する。
 ストレス推定部X3は、DSM31から取得したドライバの状態情報に基づき、ドライバのストレスを推定する。具体的に、ストレス推定部X3は、ドライバのストレスの有無を推定する。ドライバのストレスの有無の推定には、例えばドライバの目のぶれ状態の解析が用いられる。さらに運転席、ステアリングホイール等にドライバの心拍数を検出する生体センサを設け、当該生体センサが検出した心拍数の情報を用いて、ストレス推定部X3による推定精度を向上させることができる。ストレス推定部X3が推定したストレス情報は、許容行為判別部X4へ提供される。ストレス推定部X3は、最新の情報に基づき、ストレス情報を適時更新する。
 許容行為判別部X4は、走行環境推定部X1から取得した走行環境情報、覚醒度推定部X2から取得した覚醒度情報、ストレス推定部X3から取得したストレス情報に基づき、ドライバに許容される許容行為を判別する。許容行為判別部X4は、ドライバに現在許容される許容行為を判別する。許容行為判別部X4による許容行為の判別結果は、これら走行環境情報、覚醒度情報及びストレス情報の変化、すなわち各種状況の変化に応じて変わり得る。許容行為判別部X4は、自動運転機能が作動している間、提供される最新の情報に基づき、走行環境情報の変化、覚醒度情報の変化又はストレス情報の変化に対応して、判別結果を適時更新する。
 具体的に許容行為判別部X4による判別理論は、自動運転レベルがレベル3である受動運転機能が作動している場合に、ドライバが「最低限の安全姿勢であり、かつ、緊急時運転交代可能な状態」を保つことができることを指針として、構築されている。すなわち、レベル3の自動運転に突発的な運転交代原因が発生した場合に、ドライバが安全に運転を引き継げるような範囲で、運転以外の行為が許容行為として許容される。
 許容行為判別部X4は、許容行為の判別において、複数の判別観点を設定している。そして、許容行為判別部X4は、一旦、判別観点毎に個別の判別結果を、暫定的に算出する。その後、許容行為判別部X4は、暫定的に算出された判別観点毎に個別の許容行為のうち各判別観点間にて共通して許容行為と判別された行為を、確定的に許容行為と判別する。
 許容行為の範囲が以下に説明するドライバ要件として段階的に規定されている第1実施形態では、許容行為判別部X4は、各判別観点に対する暫定的な結果のうち、最も許容行為の範囲が狭い(換言すると最も許容度の低い)判定結果を抽出する。許容行為判別部X4は、許容行為の範囲が最も狭い判定結果を確定的な判別結果(最終結果)とする。許容行為判別部X4は、確定的な判別結果の情報を情報提示内容制御部X8へ提供する。
 ドライバ要件は、前述の判別理論に基づき、運転以外の行為を段階的に区分けした指標である。ドライバ要件は、高いレベルとなる程、許容行為の範囲が広い(換言すると許容度が高い)ことを示す。ドライバ要件は、0以上4以下の整数である離散的な数値をとる。ドライバ要件レベル0は、運転以外の行為が許容されず、禁止されることを意味する。
 ドライバ要件レベル1の行為は、ドライバが容易に運転可能な状態に戻れる行為である。例えば、携帯電話、スマートフォン又はCIDに対する片手での操作、左右に体が倒れない状態を保持可能な行為、複数のディスプレイ21が全て視認可能な眼の位置を保持可能な行為が、ドライバ要件レベル1の行為に挙げられる。さらに、スピーカ22の音量が小音量から中音量である音を用いた運転交代要求を即時に察知可能な行為、運転席のリクライニングを略倒していない状態を保持可能な行為等も、ドライバ要件レベル1の行為に挙げられる。即ち、運転行動に戻っても五感を全て使用可能である行為が、ドライバ要件レベル1の行為とされる。
 ドライバ要件レベル2の行為は、ドライバが多少の動作で運転可能な状態に戻れる行為である。例えば、携帯電話、スマートフォン又はCIDに対する両手での操作、左右に体を±20度程度まで倒す行為、複数のディスプレイ21のうち1つを除いて視認可能な眼の位置を保持可能な行為等が、ドライバ要件レベル2の行為とされる。さらに、スピーカ22の音量が中音量から大音量である音を用いた行為、運転席のリクライニングを45度程度まで倒した状態で実施する行為等も、ドライバ要件レベル2の行為として挙げられる。
 ドライバ要件レベル3の行為は、ドライバが緊急時に運転に戻れる行為である。例えば、膝に物をおいて実施する行為、左右に体を±130度程度まで倒す行為、複数のディスプレイ21のうち2つを除いて視認可能な眼の位置を保持可能な行為が挙げられる。
 ドライバ要件レベル4の行為は、レベル3の自動運転の実施が蓋然的に禁止される行為である。例えば、睡眠行為、飲酒行為、席を外す行為、シートベルトを解除する行為、運転席のリクライニングを90度程度まで倒した状態で実施する行為、イヤホンを装着する行為が挙げられる。なお、ドライバ要件レベル4の行為を、許容行為判別部X4が許容行為と判別することは、自動運転レベル3の自動運転機能作動時において通常ない。
 以下、許容行為判別部X4による許容行為の判別について具体的に説明する。許容行為判別部X4には、4つの判別観点が設定されている。第1の判別観点は、走行環境のうち道路形状である。許容行為判別部X4は、走行環境推定部X1から取得した道路形状の情報に基づき、許容行為を判別する。詳細に、許容行為判別部X4は、道路幅、道路傾斜、道路曲率、道路区画線形状等から、車両1が走行する道路の道路形状を特定する。
 そして、許容行為判別部X4は、道路形状が直線道路である場合には、ドライバ要件レベル3までの行為が許容行為であると判別する。許容行為判別部X4は、道路形状が曲線道路である場合には、ドライバ要件レベル2までの行為が許容行為であると判別する。詳細には、車両1の走行する道路がカーブ形状であり、かつ、カーブ区間の長さが所定距離を超える場合に、許容行為判別部X4は、許容行為と判別する範囲を狭くし、ドライバ要件レベル2までの行為が許容行為であると判別する。また、許容行為判別部X4は、道路形状がレーンチェンジを要する形状の場合には、ドライバ要件レベル1までの行為が許容行為であると判別する。すなわちドライバが運転を引き継ぐ仮定において、運転の引き継ぎ直後の運転行為の難易度が高い程、許容行為の範囲は狭くされる。
 第2の判別観点は、走行環境のうち走行シーンである。許容行為判別部X4は、走行環境推定部X1から取得した走行シーンの情報に基づき、許容行為を判別する。詳細に、許容行為判別部X4は、限定領域の設定、交通量等から、車両1の走行シーンを特定する。
 そして、許容行為判別部X4は、走行シーンが限定領域内の非渋滞時走行である場合には、ドライバ要件レベル3までの行為が許容行為であると判別する。許容行為判別部X4は、走行シーンが限定領域内の渋滞時走行である場合には、ドライバ要件レベル3までの行為が許容行為であると判別する。許容行為判別部X4は、走行シーンが限定領域外の渋滞時走行である場合には、ドライバ要件レベル2までの行為が許容行為であると判別する。すなわちドライバへの突発的な運転交代の可能性が高い程、許容行為の範囲は狭くされる。
 また、走行シーンが限定領域内から限定領域外にこれから移行しようとする場面では、許容行為判別部X4は、車両1から限定領域の境界までの距離又は到達時間に基づき、許容行為を判別する。許容行為判別部X4は、境界までの距離又は到達時間が短くなる程、許容行為の範囲を狭くする。
 第3の判別観点は、覚醒度である。許容行為判別部X4は、覚醒度推定部X2から取得したドライバの覚醒度に基づき、許容行為を判別する。許容行為判別部X4は、ドライバの覚醒度がレベル0である場合には、ドライバ要件レベル3までの行為が許容行為であると判別する。許容行為判別部X4は、ドライバの覚醒度がレベル1である場合には、ドライバ要件レベル2までの行為が許容行為であると判別する。許容行為判別部X4は、ドライバの覚醒度がレベル2である場合には、ドライバ要件レベル1の行為が許容行為であると判別する。すなわち、突発的な運転交代に対応するドライバの対応力が低下している程、許容行為の範囲は狭くされる。
 なお、ドライバの覚醒度がレベル3である場合には、緊急時運転交代不能な状態と推定されるため、許容行為判別部X4は、警報を実施すべき命令を、警報判断部X6へ出力する。
 第4の判別観点は、ストレスである。許容行為判別部X4は、ストレス推定部X3から取得したドライバのストレスに基づき、許容行為を判別する。許容行為判別部X4は、ドライバがストレス無しの場合には、ドライバ要件レベル3までの行為が許容行為であると判別する。許容行為判別部X4は、ドライバがストレス有りの場合には、ドライバ要件レベル2までの行為が許容行為であると判別する。すなわち、ドライバが運転を引き継ぐ仮定において、引き継ぎ直後の運転行為の操作ミスの可能性が高い程、許容行為の範囲は狭くされる。
 以上の各暫定的な判別結果のうち、ドライバ要件におけるレベルの低い判別観点に対する結果が確定的な判別結果に採用される。各判別観点による安全性基準を通過した行為のみが許容されることで、後述する許容行為に関する情報提示の妥当性が高まるからである。
 さらに許容行為判別部X4は、複数の判別観点のうち、未来予測可能な判別観点に基づき、目的地までの走行経路における許容行為の範囲の推移を大まかに予測する。第1実施形態では、車両1が走行予定の道路の走行環境を推定可能となっているため、当該走行環境が未来予測可能な判別観点に該当する。
 乗員監視部X5は、DSM31から取得したドライバの状態情報、座席センサ32からのドライバの着座情報等に基づき、ドライバの行為を監視する。乗員監視部X5は、DSM31による撮像画像の画像解析結果と、着座情報を総合的に判断して、ドライバの行為を特定してよい。ドライバの行為の特定には、ニューラルネットワークを主体として構築された学習済みの人工知能モデルが用いられてもよい。乗員監視部X5は、ドライバの行為の監視結果を警報判断部X6及び情報提示内容制御部X8へ提供する。
 警報判断部X6は、乗員監視部X5から取得したドライバの行為の監視結果と許容行為判別部X4から取得した許容行為の判別結果とを照らし合わせ、ドライバへ向けた警報を実施するか否かを判断する。例えば運転以外のうち許容行為判別部X4による許容行為ではないと判別された許容行為以外の行為(以下、非許容行為)を、ドライバが所定の警報設定時間以上継続して実施している場合、警報判断部X6は、ドライバへ向けた警報の実施を決定する。
 また、許容行為判別部X4から前述のように警報を実施すべき命令が入力された場合に、警報判断部X6は、ドライバへ向けた警報を実施することを決定する。警報判断部X6は、警報実施情報を情報提示内容制御部X8へ提供する。
 退避要求部X7は、警報の実施開始後に、さらにドライバが非許容行為を所定の退避設定時間以上継続して実施している場合に、自動運転ECU40に対して、車両1を強制的に退避させることを要求する。ここでいう退避とは、例えば前述のMRM制御である。
 情報提示内容制御部X8は、情報提示機器20に情報提示させる内容を制御する。情報提示内容制御部X8は、許容行為判別部X4から判別結果を取得し、当該判別結果に関する情報を情報提示機器20に提示させる提示要求を、情報提示機器20へ出力する。情報提示内容制御部X8は、前述の確定的な判別結果を取得し、当該確定的な判別結果に関する情報を情報提示機器20に提示させるようになっている。
 情報提示内容制御部X8は、判別結果に関する情報のうち、許容行為と判別された行為を示す情報を情報提示機器20に提示させることができる。許容行為と判別された行為を示す情報とは、例えばドライバ要件レベル2までの行為が許容行為と判別された場合、運転席のリクライニングを45度まで倒してよい旨を示す情報である。
 また例えば、ドライバ要件レベル3までの行為が許容行為と判別された場合、情報提示内容制御部X8は、ディスプレイ21(例えばCID)にて映画の上映が可能である旨を示す情報を、情報提示機器20に提示させる。このような状況下、情報提示機器20を用いる許容行為を実現するための機能的な制限が情報提示機器20に加えられている場合に、情報提示内容制御部X8は、制限の解除を要求することができる。情報提示内容制御部X8は、情報提示機器20又は情報提示機器20に対して制限を加えている制限主体である装置に対し、制限の解除を要求する。例えば、ディスプレイ21にて映画の上映に対する機能的な制限が加えられている場合、情報提示内容制御部X8は、ディスプレイ21が映画の上映を実施できるよう、機能的な制限の解除を要求する。
 また情報提示内容制御部X8は、判別結果に関する情報のうち、非許容行為と判別された行為を示す情報を情報提示機器20に提示させることができる。非許容行為と判別された行為を示す情報とは、例えばドライバ要件レベル2までの行為が許容行為と判別された場合、運転席のリクライニングを、45度を超えて倒してはいけない旨を示す情報である。
 許容行為の判別結果が更新され、許容行為の範囲(換言するとドライバ要件レベル)が変化することに応じたタイミングにて、情報提示内容制御部X8は、許容行為の判別結果に関する情報を情報提示機器20に提示させることが可能である。このタイミングの提示において情報提示内容制御部X8は、許容行為の範囲の変化量が大きくなる程、情報提示をトーンアップさせる。変化量が大きな程、情報提示におけるトーンアップ化が図られる。例えばドライバ要件レベルの上限が3から1に変化した場合、変化量は2であり、ドライバ要件レベルの上限が2から3に変化した場合、変化量は1である。
 ここでトーンアップとしては、画像による表示であれば、彩度を向上すること、輝度を向上すること、表示サイズを大きくすること、表示に用いる線を太くすること等が挙げられる。またトーンダウンとしては、音による通知であれば、音量を上げること、高音域の使用すること、音声のアクセントを強めること等が挙げられる。
 情報提示内容制御部X8は、判別結果に関する情報を提示させる際、乗員監視部X5から取得したドライバの行為の監視結果に基づき、情報提示機器20のうち情報提示に用いるデバイスを選択する。すなわち、ドライバの運転以外の行為の性質を考慮し、比較的、情報提示機器20のうち注意が及び易いデバイスが情報提示に用いられる。
 例えばドライバが映画を鑑賞している場合には、情報提示はディスプレイ21による表示によって実施される。より詳細に、ドライバがCIDで映画を鑑賞している場合、情報提示はCIDによる表示によって実施される。また例えばドライバがスマートフォンの操作、食事等をしている場合には、情報提示はスピーカ22による通知によって実施される。
 また、情報提示内容制御部X8は、判別結果に関する情報を提示させる際、乗員監視部X5から取得したドライバの行為の監視結果に基づき、提示における詳細な内容を決定することができる。例えばドライバが非許容行為を実施している場合に、情報提示内容制御部X8は、当該非許容行為を実施してはならない理由及び非許容行為を許容行為へ移行させるための助言のうち少なくとも1つを、情報提示機器20に提示させることができる。こうした情報提示は、ドライバが非許容行為を中止するまでの間、例えば継続的に提示される。
 一例として、ドライバ要件レベル1~2の行為が許容行為と判別され、許容行為として認められるリクライニングの角度が45度以下であり、かつ、ドライバがリクライニングの角度を70度まで倒している場合について説明する。この場合、当該非許容行為を実施してはならない理由の例として、「道路形状がカーブなのでドライバが運転を引き継いだ直後の負担を考慮すると、多少の動作で運転行為可能な状態に戻れるようにすべきだから」との理由が挙げられる。またこの場合、非許容行為を許容行為へ移行させるための助言の例として、「リクライニングの角度を45度以下に戻して下さい」との理由が挙げられる。
 こうして情報提示機器20を通じてドライバへ許容行為の判別結果に関する情報を提示したにも関わらず、ドライバが非許容行為を継続する場合、こうした非許容行為の継続を乗員監視部X5が監視する。非許容行為が所定の警報設定時間以上継続されると、前述のように警報判断部X6が警報の実施を決定する。そして、情報提示内容制御部X8は、情報提示機器20にドライバへ向けた警報を実施させる。情報提示内容制御部X8は、情報提示機器20のうち警報に用いるデバイスを、複数選択することが好ましい。さらに情報提示内容制御部X8は、警報を、前述の情報提示の場合よりも、トーンアップさせる。こうした警報に加えて、情報提示内容制御部X8は、自動運転レベルを低下させること、換言すると周辺監視義務のない自動運転を終了させる運転交代の予告を情報提示機器20に提示させてもよい。
 一方、ドライバが許容行為を実施している場合には、情報提示内容制御部X8は、必要以上に判別結果に関する情報を提示させなくてよい。但し、情報提示内容制御部X8は、情報提示の頻度を規制するように設定された時間間隔としての規制時間間隔を開けた上で、時々(例えば定期的に)、判別結果に関する情報を提示させる。
 こうした提示においては、ドライバの許容行為の実施を阻害しないように、ドライバが非許容行為を実施している場合よりもトーンダウンされた態様にて情報が提示されることが好ましい。ここでトーンダウンとは、トーンアップの対義語である。トーンダウンとしては、画像による表示であれば、彩度を低下すること、輝度を低下すること、表示サイズを小さくすること、表示に用いる線を細くすること等が挙げられる。またトーンダウンとしては、音による通知であれば、音量を下げること、高音域の使用を避けること、音声のアクセントを弱めること等が挙げられる。
 次に、記憶部13に記憶され、処理部11に実行される情報提示プログラムに基づき、情報提示する方法を、図3のフローチャートの各ステップに基づき説明する。
 まず、S10では、HCU10の例えば許容行為判別部X4は、自動運転ECU40の状態管理部Y1が管理する自動運転レベルがレベル3の状態であるか、又はレベル3になる予定があるかどうかを判定する。S10にて肯定判定が下されると、S11へ移る。S10にて否定判定が下されると、例えば所定の再判定時間が経過した後に、再度S10の処理が実施される。
 S11では、各判別観点に関する推定が実施される。具体的に、走行環境推定部X1は、車両1が走行する道路の走行環境を推定する。覚醒度推定部X2は、ドライバの覚醒度を推定する。ストレス推定部X3は、ドライバのストレスを推定する。S11の処理後、S12へ移る。
 S12では、許容行為判別部X4は、ドライバに許容される許容行為を判別する。S12の処理後、S13へ移る。
 S13では、情報提示内容制御部X8は、許容行為の判別結果に関する情報を情報提示機器20に提示させる。ドライバは、許容行為の判別結果に関する情報を得ることができる。S13の処理後、S14へ移る。
 S14では、乗員監視部X5及び警報判断部X6は、ドライバが非許容行為を警報設定時間以上継続して実施しているか否かを判定する。S14にて肯定判定が下されると、警報の実施が決定され、S15へ移る。S14にて否定判定が下されると、S11の処理に戻る。
 S15では、情報提示内容制御部X8は、情報提示機器20にドライバへ向けた警報を実施させる。ドライバは、警報を認識することができる。S15の処理後、S16へ移る。
 S16では、退避要求部X7は、警報の実施開始後に、ドライバが非許容行為を退避設定時間以上継続して実施しているか否かを判定する。S16にて肯定判定が下されると、S17へ移る。S16にて否定判定が下されると、S11の処理に戻る。
 S17では、退避要求部X7は、自動運転ECU40に対して、車両1を強制的に退避させることを要求する。自動運転ECU40は、MRM制御を実施する。S17を以て一連の処理を終了する。
 次に、自動運転ECU40及びHCU10の作動の例について、図4及び図5のタイムチャートに基づき説明する。図4及び図5に示す運転以外の行為を示すチャートにおいて、実線は、ドライバが実際に実施している運転以外の行為を、ドライバ要件レベルに当てはめたときに、当該行為がそのレベルに相当するかを示している。一点鎖線は、許容行為判別部X4が判別した結果を、ドライバ要件レベルとして示している。
 図4の作動例は、自動運転レベルがレベル0の状態から、レベル3へ移行し、さらにMRM制御へ移行する場面を示す。
 まず、運転制御において、自動運転レベルがレベル0からレベル1,2と徐々に上がっていく。この時点では、運転以外の行為が実質的に許容されていないため、ドライバが実施している行為は、ドライバ要件レベルのレベル0に相当する行為とみなされる。
 自動運転レベルがレベル3になると、許容行為判別部X4の判別結果による許容行為の範囲は、ドライバ要件レベル3までの行為に設定される。このとき、HCU10の要求に基づき情報提示機器20により情報を提示するイベント(以下、情報提示イベント)として、イベントP1が実施される。イベントP1は、自動運転レベルがレベル3に移行したことを表す情報、及び許容行為の範囲がドライバ要件レベル3までの行為であることを表す情報をドライバへ提示するイベントである。こうした情報提示に対応して、ドライバは、運転以外の行為として、ドライバ要件レベル1の行為、レベル2の行為、レベル3の行為を徐々に実施するものとする。
 許容行為判別部X4は、未来予測可能な判別観点に基づき、許容行為の範囲について、ドライバ要件レベル2までの行為に狭まることを予測する。そうすると、情報提示イベントとして、イベントP2が実施される。イベントP2は、許容行為がドライバ要件レベル3からレベル2までの行為に狭まる予定である予告情報をドライバへ提示するイベントである。
 そして、現在許容される許容行為の範囲がドライバ要件レベル2までの行為に狭まると、情報提示イベントとして、イベントP3が実施される。イベントP3は、許容行為がドライバ要件レベル3からレベル2までの行為に狭まったことを表す情報をドライバへ提示するイベントである。
 こうしたイベントP2,P3に関わらず、警報設定時間以上、ドライバ要件レベル3の行為をドライバが継続すると、情報提示イベントとして、イベントW1が実施される。イベントW1は、ドライバ要件レベル3の行為を中止するように、ドライバに対して警報するイベントである。イベントW1に対応して、ドライバがドライバ要件レベル3の行為を中止し、例えばドライバ要件レベル1の行為に移行すると、退避設定時間のカウントは停止される。
 その後、許容行為の範囲がドライバ要件レベル3までの行為に拡がったとする。こうした状況下、ドライバがドライバ要件レベル4の行為、すなわち、レベル3の自動運転の実施が禁止される行為を実施していると判断された場合には、直ちにイベントW2が実施される。イベントW2は、ドライバ要件レベル4の行為を中止するように、ドライバに対して警報するイベントである。この警告は、ドライバの姿勢が最低限の安全姿勢を満たしていないことに対する警告であるといえる。
 イベントW2にも関わらず、ドライバが、退避設定時間以上、ドライバ要件レベル4の行為を継続すると、情報提示イベントとして、イベントM1が実施される。イベントM1は、運転制御がMRM制御に移行したことを表す情報をドライバへ提示するイベントである。これと共に、自動運転ECU40による運転制御はMRM制御へ移行する。以上により、図4の作動例の説明を終了する。
 図5の作動例は、車両1が限定領域内から限定領域外へ移動するのに伴い、自動運転レベルがレベル3からレベル2へ移行する、いわゆる車両1からドライバへの運転交代の場面を示す。
 車両1が限定領域内を自動運転レベルがレベル3の状態で走行している。車両1から限定領域の境界までの距離が近づくにつれて、許容行為判別部X4による許容行為の範囲がドライバ要件レベル3までの行為から、段階的に狭くなる。
 許容行為の範囲がドライバ要件レベル3までの行為から狭められることが予定されると、情報提示イベントとして、イベントP4が実施される。イベントP4は、運転交代に備えて、運転以外の行為を中止するように推奨する情報をドライバへ提示するイベントである。
 こうしたイベントP4に対応して、ドライバが運転以外の行為を中止し、車両1が限定領域の境界へ接近すると、イベントC1が実施される。イベントC1は、車両1からドライバへの運転交代を要求する情報をドライバへ提示するイベントである。イベントC1に応じてドライバが運転を引き継ぐと、運転制御における自動運転レベルはレベル2以下となる。以上により、図5の作動例の説明を終了する。
 (作用効果)
 以上説明した第1実施形態の作用効果を以下に改めて説明する。
 第1実施形態によると、許容行為判別部X4によって判別された許容行為の判別結果に関する情報が情報提示機器20によって提示される。ドライバにとって車両1の走行環境等の状況の把握必要性が低下している自動運転機能の作動時において、ドライバが情報提示機器20を介して許容行為の判別結果に関する情報を得ることができる。故に、ドライバは、こうした情報を参考にすることで、自動運転機能の作動時に適切な行為を取り易くなる。
 また、第1実施形態によると、運転以外の行為のうち許容行為を表す情報が情報提示機器20によって提示される。許容行為が直接的に示されることにより、ドライバが当該行為を実施する際の安心感を高めることができる。
 また、第1実施形態によると、運転以外の行為のうち非許容行為を表す情報が情報提示機器20によって提示される。非許容行為が直接的に示されることにより、ドライバが運転以外の行為を実施する際に、非許容行為の実施を回避することの容易性を高めることができる。
 また、第1実施形態によると、許容行為は、走行環境に基づいて判別される。ドライバにとって車両1の走行環境の把握必要性が低下している自動運転機能の作動時において、ドライバに代わり、許容行為の判断における走行環境の考慮が補完的に実施される。故に、ドライバの運転以外の行為の実施における妥当性を高めることができる。
 また、第1実施形態によると、許容行為は、車両1が走行する道路の形状に基づいて判別される。すなわち、許容行為の判別結果は、ドライバが運転を引き継ぐ仮定における運転の引き継ぎ直後の運転行為の難易度に応じたものとなる。故に、運転交代後のドライバによる運転行為の安全性を高めつつ、ドライバに運転以外の行為を実施させることが可能となる。
 また、第1実施形態によると、車両1の走行する道路がカーブ形状であり、かつ、カーブ区間の長さが所定距離を超える場合に、許容行為と判別される範囲が狭く変更される。すなわち、走行する道路がカーブ形状であっても、カーブ区間が短い場合には、許容行為となる範囲は、ドライバ要件レベル3に維持される。故に、例えばドライバが背もたれを倒して寛いでいるシーンにおいて、短いカーブ区間を走行するたびに警告を受けるような事態は、回避される。一方で、カーブ区間が所定距離以上継続する場合、ドライバ要件レベルが低く変更されるため、ドライバへ向けた適切な警報が実施され得る。
 また、第1実施形態によると、許容行為は、車両1の走行シーンに基づいて判別される。すなわち、許容行為の判別結果は、ドライバへの突発的な運転交代の可能性に応じたものとなる。故に、運転交代時の安全性を高めつつ、ドライバに運転以外の行為を実施させることが可能となる。
 また、第1実施形態によると、許容行為は、ドライバの覚醒度に基づいて判別される。すなわち、許容行為の判別結果は、突発的な運転交代に対応するドライバの対応力に応じたものとなる。故に、運転交代時の安全性を高めつつ、ドライバに運転以外の行為を実施させることが可能となる。
 また、第1実施形態によると、許容行為は、ドライバのストレスに基づいて判別される。すなわち、許容行為の判別結果は、ドライバが運転を引き継ぐ仮定における引き継ぎ直後の運転行為の操作ミスの可能性に応じたものとなる。故に、運転交代後のドライバによる運転行為の安全性を高めつつ、ドライバに運転以外の行為を実施させることが可能となる。
 また、第1実施形態によると、複数の判別観点について個別の許容行為が暫定的に判別される。その後、各判別観点間にて共通して許容行為と判別された行為が、確定的な許容行為と判別される。複数の判別観点により多角的な判別が実施され、さらに、最小限の共通した行為が、確定的に許容行為と判別されるので、許容行為の判別における妥当性を格段に高めることができる。
 また、第1実施形態によると、許容行為判別部X4は、運転以外の行為におけるドライバの姿勢に応じて、運転以外の行為と、許容行為の許容度の高低とが関連付けられた判別指標としてのドライバ要件に基づき、許容行為を判別する。ドライバが「最低限の安全姿勢であり、かつ、緊急時運転交代可能な状態」を保つことができることを指針とした判別理論が比較的に簡潔な処理演算にて具現されることが可能となる。故に、妥当性の高い許容行為の判別を、容易に実現することができる。
 また、第1実施形態によると、許容行為判別部X4は、運転以外の行為における運転席ポジションに応じて、運転以外の行為と、許容行為の許容度の高低とが関連付けられた判別指標としてのドライバ要件に基づき、許容行為を判別する。この場合の運転席のポジションは、例えばリクライニングの角度である。ドライバが「最低限の安全姿勢であり、かつ、緊急時運転交代可能な状態」を保つことができることを指針とした判別理論が比較的に簡潔な処理演算にて具現されることが可能となる。故に、妥当性の高い許容行為の判別を、容易に実現することができる。
 また、第1実施形態によると、情報提示機器20を用いる許容行為を実現するための機能的な制限が情報提示機器20に加えられている場合に、制限の解除が要求される。故に、ドライバは、情報提示機器20を用いる許容行為を円滑に実施することができる。
 また、第1実施形態によると、情報提示機器20による情報提示に用いるデバイスは、ドライバが現在実施していると推定される運転以外の行為に応じて、視覚的情報を提示するデバイス及び聴覚的情報を提示するデバイスの中から選択される。こうした選択によって、提示する情報がよりドライバに認識され易くなる。認識され易い情報提示によって、適切な行為へドライバを誘導し易くなる。
 また、第1実施形態によると、ドライバが非許容行為を実施していると推定される場合、非許容行為を実施してはならない理由が情報提示機器20によって提示される。ドライバに理由を理解させることにより、適切な行為へドライバを誘導し易くなる。
 また、第1実施形態によると、ドライバが非許容行為を実施していると推定される場合、ドライバが現在実施している非許容行為を許容行為へ移行させるための助言が情報提示機器によって提示される。こうした助言により、ドライバの行為を円滑に許容行為へと移行させることができる。
 また、第1実施形態によると、ドライバが非許容行為を継続して実施していると推定される場合、ドライバへ向けた警報が情報提示機器20によって実施される。ドライバに警報を認識させることにより非許容行為の中止を促すことができる。
 また、第1実施形態によると、警報の実施と共に、自動運転機能を終了させる運転交代の予告が情報提示機器20によって提示される。ドライバにこのままだと自動運転機能が終了してしまうことを認識させることにより、非許容行為の中止促進効果を高めることができる。
 また、第1実施形態によると、警報の実施開始後、ドライバが非許容行為をさらに継続して実施していると推定される場合、車両1を強制的な退避が要求される。車両1を退避させることにより、自動運転機能の作動中にて不適切な非許容行為の継続状態を、強制的に回避することができる。
 また、第1実施形態によると、ドライバが許容行為を実施していると推定される場合、規制時間間隔を空けた上で、時々、許容行為の判別結果に関する情報が情報提示機器20により提示される。規制時間間隔を空けることにより、情報提示の高頻度化が規制されるので、ドライバが感じる情報提示の煩わしさを軽減することができる。
 また、第1実施形態によると、判別された許容行為の範囲が変化した場合に、許容行為の範囲の変化量が大きくなる程、情報提示機器20による情報提示がトーンアップする。ドライバの運転以外の行為への影響度に応じて、情報提示の強弱が適切に設定されるので、ドライバが感じる情報提示の煩わしさを軽減することができる。
 (第2実施形態)
 図6に示すように、第2実施形態は第1実施形態の変形例である。第2実施形態について、第1実施形態とは異なる点を中心に説明する。
 第2実施形態において許容行為判別部X4は、状態管理部Y1による自動運転レベルがレベル3になることに対応して、自動運転機能が連続的に作動する予定の連続作動区間を推定する。連続作動区間は、自動運転ECU40によって生成された予定走行ラインによって、自動運転レベルがレベル3の状態を維持して、車両1が走行可能であるひとかたまりの区間を意味する。
 さらに許容行為判別部X4は、未来予測可能な判別観点に基づき、連続作動区間内において許容行為の判別結果の許容度が最も低くなるポイントを推定する。第2実施形態においても、第1実施形態と同様に、許容行為の判別結果は、ドライバ要件によって規定されている。したがって、ドライバ要件レベルが判別結果の許容度に対応する。すなわち、許容行為の判別結果の許容度が最も低くなるポイントは、許容行為として認められるドライバ要件レベルの上限が最も低くなるポイントである。許容行為判別部X4は、こうした連続作動区間の情報、許容度が最も低くなるポイントの情報、及び当該ポイントにおける許容行為の判別結果の情報を、情報提示内容制御部X8に提供する。
 そして、情報提示内容制御部X8は、連続作動区間に対応して自動運転機能が作動している間、一貫して、許容度が最も低くなるポイントに対する許容行為の判別結果に関する情報を、情報提示機器20に提示させる。
 例えば、当該ポイントにおいて、ドライバ要件レベル2までの行為が許容されている場合、連続作動区間において一時的にドライバ要件レベル3までの行為が許容される状態になったとする。この一時的な状態においても、情報提示内容制御部X8は、ドライバ要件レベル2までの行為が許容されていることを表す情報を、情報提示機器20に提示させる。
 次に、記憶部13に記憶され、処理部11に実行される情報提示プログラムに基づき、情報提示する方法を、図6のフローチャートの各ステップに基づき説明する。
 S20は、第1実施形態のS10と同様である。S20にて肯定判定が下されると、S21へ移る。S20にて否定判定が下されると、例えば所定の再判定時間が経過した後に、再度S20の処理が実施される。
 S21では、許容行為判別部X4は、連続作動区間を推定する。S21の処理後、S22へ移る。
 S22では、許容行為判別部X4は、連続作動区間内において、許容行為として認められるドライバ要件レベルの上限が最も低くなるポイントを推定する。S22の処理後、S23へ移る。
 S23では、情報提示内容制御部X8は、S22にて推定されたポイントにおける許容行為の判別結果に関する情報を情報提示機器20に提示させる。ドライバは、許容行為の判別結果に関する情報を得ることができる。S23を以て一連の処理を終了する。あるいは、S23の処理後、第1実施形態のS14~S17に相当する処理を実施してもよい。
 以上説明した第2実施形態によると、連続作動区間において、提示される許容行為の範囲が頻繁に変更され、ドライバが実施する運転以外の行為を都度変更しなければならない事態の発生を抑制できる。ドライバは、連続作動区間に最適化され、かつ一貫した運転以外の行為を、継続的に実施できるようになる。
 (第3実施形態)
 図7及び図8に示すように、第3実施形態は第1実施形態の変形例である。第3実施形態について、第1実施形態とは異なる点を中心に説明する。
 本開示の第3実施形態では、図7に示すように、機能制御装置が制御対象機器CEの機能を制御する。第3実施形態において機能制御装置は、車両1に用いられる自動運転ECU340となっている。第3実施形態の自動運転ECU340は、自動運転の実現だけでなく、自動運転レベルがレベル3の状態でのドライバによる運転以外の行為の適切な実施を支援するための制御対象機器CEの機能を、制御可能となっている。
 ここで制御対象機器CEは、ドライバの運転以外の行為を支援可能に構成された1つ以上の車載機器が含まれる。一例として、運転席38、ディスプレイ21、スピーカ22等の複数の車載機器が制御対象機器CEに含まれている。
 自動運転ECU340は、第1実施形態の自動運転ECU40に設けられた状態管理部Y1及び運転制御部Y2等の機能部に加えて、走行環境推定部Y3、覚醒度推定部Y4、ストレス推定部Y5、許容行為判別部Y6、機能制限部Y7等の機能部を有する。
 走行環境推定部Y3、覚醒度推定部Y4、ストレス推定部Y5及び許容行為判別部Y6は、第1実施形態のHCU10に設けられた走行環境推定部X1、覚醒度推定部X2、ストレス推定部X3及び許容行為判別部X4と同様である。ただし、許容行為判別部Y6による許容行為の判別結果は、機能制限部Y7に提供される。
 機能制限部Y7は、許容行為の判別結果に基づいて、ドライバに対して非許容行為を実現させるような制御対象機器CEの機能を制限する。機能制限部Y7は、運転席38のリクライニングが可能な角度を、許容行為の判別結果に基づいて制限する。例えば、許容行為判別部Y6によりドライバ要件レベル2までの行為が許容されている場合には、機能制限部Y7は、運転席38に設けられたリクライニング駆動装置を通じて、運転席38のリクライニングの角度が45度を超えることを制限する。リクライニングの角度制限により、ドライバは、突発的な運転交代原因に備えるために求められる安全姿勢を、容易に維持可能となる。
 機能制限部Y7は、ディスプレイ21の表示内容を、許容行為の判別結果に基づき制限する。例えば、許容行為判別部Y6によりドライバ要件レベル1までの行為が許容されている場合には、機能制限部Y7は、ディスプレイ21(例えばCID)に対して両手でのタッチ操作が必要なゲームの機能を、制限する。ディスプレイ21の表示内容の制限により、ドライバは、状況に応じた緊急時運転交代可能な状態を、容易に維持可能となる。
 機能制限部Y7は、スピーカ22の音量を、許容行為の判別結果に基づき制限する。例えば、許容行為判別部Y6によりドライバ要件レベル1までの行為が許容されている場合には、機能制限部Y7は、スピーカ22の音量が大音量とならないように、スピーカ22が運転以外の行為の実施に関連して出力可能な音量の上限を設定する。音量の上限が設定されることにより、ドライバは、状況に応じた緊急時運転交代可能な状態を、容易に維持可能となる。
 次に、記憶部43に記憶され、処理部41に実行される機能制御プログラムに基づき、制御対象機器CEの機能を制限する方法を、図8のフローチャートの各ステップに基づき説明する。
 S30~S32にて実施される各処理は、第1実施形態のS10~S12に実施される各処理と実質的に同一である。S32の処理後、実施されるステップは、S33へ移る。
 S33では、機能制限部Y7は、S32での許容行為の判別結果に基づき、運転席38、ディスプレイ21及びスピーカ22に対して、必要に応じて機能を制限する。S33を以て一連の処理を終了する。
 なお、第3実施形態においてHCU10には、許容行為の判別結果に関する情報を情報提示機器に提示させる機能が備わっていてもよく、備わっていなくてもよい。
 以上説明した第3実施形態によると、許容行為判別部Y6によって判別された許容行為に基づき、運転以外の行為のうち許容行為以外の行為を実現可能な制御対象機器CEの機能は、制限される。ドライバにとって車両1の走行環境等の状況の把握必要性が低下している自動運転機能の作動時において、ドライバがうっかり許容行為以外の行為を実施してしまう事態は、機能的制限によって抑制される。故に、ドライバは、自動運転機能の作動時に適切な行為を取り易くなる。
 (第4実施形態)
 図9及び図10に示す第4実施形態による自動運転ECU40及びHCU10の作動例は、図4及び図5に示す第1実施形態の変形例である。図9及び図10においても、実線は、ドライバによって実施されている行為が該当するドライバ要件レベルを示しており、一点鎖線は、許容行為判別部X4の判別結果であるドライバ要件レベルとして示している。
 図9に示す作動例において、情報提示内容制御部X8は、レベル3自動運転への移行を通知するイベントP1、並びにドライバ要件レベル2への変更を予告及び通知するイベントP2,P3を順次実施する。さらに、情報提示内容制御部X8は、許容行為判別部X4によって判別されたドライバ要件レベルを超えた行為をドライバが継続実施すると、実施中の行為の中止を要請するイベントW1を実施する。
 許容行為判別部X4は、情報提示内容制御部X8によって許容されない行為の警告が実施された場合、予め規定された所定の期間、ドライバ要件レベルを所定のレベルに固定する。具体的に、許容行為判別部X4は、車両1のメイン電源又はイグニッションがオフされるまでの期間(以下、制限期間LT)とし、制限期間LTのうちはドライバ要件レベルを警告が実施されない通常のケース(図4参照)よりも低く設定する。許容行為判別部X4は、制限期間LTの終了まで、ドライバ要件レベルを最低のレベル1に固定する。情報提示内容制御部X8は、制限期間LTにて、許容行為判別部X4によってドライバ要件レベルが意図的に低く固定されていることを表す情報をドライバへ提示する。
 図10に示す作動例のシーンでは、許可エリア(限定領域)の終了予定又は使用条件からの逸脱により、状態管理部Y1は、自動運転レベルをレベル3からレベル2以下に引き下げることを決定する。加えて、状態管理部Y1は、ドライバが許容行為以外の行為を継続して実施していると推定される場合にも、レベル3の自動運転の終了を決定する。状態管理部Y1は、自動運転ECU40からドライバへの運転交代が行われる時刻(イベントC1参照)又は地点を基準とし、運転交代が行われる以前に交代準備区間STRを設定する。状態管理部Y1は、ドライバ要件レベルを狭めることを通知するイベントP4が完了する時刻又は地点から、運転交代が開始される時刻又は地点までを交代準備区間STRとする。
 許容行為判別部X4は、運転交代以前の交代準備区間STRにおいて、ドライバ要件を所定レベル以下に固定する。一例として、許容行為判別部X4は、情報提示内容制御部X8によるイベントP4の情報提示の後に、許容行為と判別する範囲を、ドライバ要件レベル3等のから、交代準備範囲として予め設定されたドライバ要件レベル1又は0まで狭くする。許容行為判別部X4は、ドライバ要件レベルを最低のレベル1以下に固定した状態を継続した後、運転以外の行為を禁止したドライバ要件レベル0に遷移させる。
 情報提示内容制御部X8は、許可エリアの終了、使用条件からの逸脱、及び不適切な行為の継続等により、レベル3の自動運転の終了予定を把握した場合、イベントP4での情報提示において、自動運転機能を終了させる運転交代の予告を少なくとも実施する。情報提示内容制御部X8は、予告した自動運転終了以前の交代準備区間STRにおいて、交代準備範囲まで制限されたドライバ要件レベルを表す情報をドライバに提示する。さらに、情報提示内容制御部X8は、イベントC1にて、運転交代を要請する情報をドライバに提示する。
 ここまで説明した第4実施形態でも、第1実施形態と同様の効果を奏し、ドライバは、許容行為の判別結果に関する情報を得ることができるため、適切な行為を取り易くなる。
 加えて第4実施形態によると、許容されていない行為に対する警告が提示された場合には、それ以降の制限期間LTにおいて、ドライバ要件レベルがレベル1に固定される。こうした制裁制御によれば、許容されないセカンドタスクを実施しないようにドライバを意識付けることが可能になる。その結果、ドライバによる自動運転機能の過信が回避され得るため、ドライバは、自動運転期間において適切な行為を取り易くなる。
 また第4実施形態によると、情報提示内容制御部X8は、許可エリアの終了予定を把握した場合に、自動運転機能を終了させる運転交代の予告を情報提示機器20に提示させる。故に、許容行為判別部X4によって許容行為の範囲が狭められるのに合わせて、ドライバに運転以外の行為を終了させて、運転操作を円滑に開始させることが可能になる。
 さらに第4実施形態によると、許容行為判別部X4は、自動運転機能からドライバへの運転交代が行われる以前の交代準備区間STRにおいて、許容行為と判別する範囲を所定の交代準備範囲まで狭くする。故に、実施中の運転以外の行為を早期に終了させて、円滑な運転操作の開始をドライバに促すことが可能になる。
 (第5実施形態)
 図11~図14に示す第5実施形態は、第1実施形態のさらに別の変形例である。図11に示す第5実施形態の運転支援ECU37には、デッドマン機能部Z1が設けられている。デッドマン機能部Z1は、覚醒度推定部X2、ストレス推定部X3及び乗員監視部X5等に類似する機能部である。デッドマン機能部Z1は、DSM31から取得するドライバの状態情報に基づき、急病等の予め予測困難な理由によってドライバが運転困難な状態となったことを自動で検知する異常検知装置として機能する。デッドマン機能部Z1は、ドライバが運転困難状態に陥ったことを診断するため、ドライバの上体の傾き及び頭部の上体に対する傾き等を検出し、ドライバの姿勢崩れを把握する。デッドマン機能部Z1は、ドライバの姿勢崩れが継続した場合に、運転困難な状態であると判断し、異常状態を示す検知結果を通信バス99に出力する。尚、以下の説明におけるドライバの異常状態は、ドライバの姿勢が運転に不適切な姿勢に崩れた状態を示す。
 HCU10は、レベル3の自動運転におけるドライバ要件を確認する各機能部に加えて、ドライバ情報取得部X9をさらに有する。ドライバ情報取得部X9は、デッドマン機能部Z1による異常状態の検知結果を取得し、覚醒度推定部X2、ストレス推定部X3及び乗員監視部X5等と併行して、ドライバの状態を把握する。ドライバ情報取得部X9は、ドライバの運転困難な状態を把握すると、異常が検知されたことの報知の実施を情報提示内容制御部X8に要求する。情報提示内容制御部X8は、車室内のドライバ及び同乗者へ向けて、異常検知中である旨の報知を、音声及び表示等によって実施する。
 ここで、周辺監視義務のないレベル3の自動運転期間であれば、上述したように、睡眠、飲酒、シートベルト外すといった特異行為を除く運転以外の行為が車室内のドライバに許容され得る。そのため、自動運転期間におけるドライバは、例えば運転席の背もたれをリクライニングさせ、リラックスした姿勢で過ごす場合がある。こうした姿勢は、自動運転中のドライバ要件としては問題がない一方で、運転姿勢としては悪い状態となる。故に、デッドマン機能部Z1は、自動運転中のリラックスしたドライバの姿勢状態を、ドライバが姿勢崩れを起こしており運転困難な状態であると誤認識し、異常状態を示す検知結果を出力する可能性がある。
 こうした問題に対処するため、HCU10は、レベル3の自動運転期間中にドライバ情報取得部X9にて異常状態(姿勢崩れ)を示す検知結果を取得した場合、手動運転時又はレベル2以下の自動運転時とは異なる報知プロセスを実施する。以下、レベル3の自動運転中に異常状態を示す検知結果が取得された場合のHCU10及び自動運転ECU40の作動例を、図12に基づき、図11を参照しつつ説明する。
 情報提示内容制御部X8は、DSM31及びデッドマン機能部Z1の連携によるドライバの異常検知が有効な状態下、レベル3自動運転への移行が実施される場合、情報提示機器20による情報提示イベントとして、イベントN1を実施する。イベントN1は、レベル3自動運転への移行を報知するイベントP1以前、又はイベントP1と実質同時に開始される。イベントN1の情報提示は、イベントP1の情報提示と併行実施されてもよい。イベントN1では、DSM31による運転姿勢の検出が可能な姿勢をとるようにドライバに要請する情報提示が実施される。
 レベル3の自動運転期間にてドライバの運転姿勢が悪い場合、デッドマン機能部Z1からドライバ情報取得部X9にドライバの異常状態(姿勢崩れ)を示す検知結果が出力される。情報提示内容制御部X8は、ドライバ情報取得部X9による検知結果の取得に基づき、情報提示機器20による情報提示イベントN2を実施する。イベントN2では、崩れたドライバの姿勢がレベル3自動運転中に許容行為として許容される範囲内の姿勢であっても、ドライバの姿勢の崩れに関する姿勢異常情報が同乗者も含めた乗員へ向けて提示される。イベントN2では、ドライバの異常の有無を回答させる報知と、ドライバに異常の可能性があると判断した理由を示す報知とが少なくとも実施される。
 退避制限要求部X7aは、第1実施形態の退避要求部X7と実質同一の機能に加えて、走行制御に機能的な制限をかけるよう自動運転ECU40に要求する機能をさらに有している。退避制限要求部X7aは、異常状態を示す検知結果に基づき、イベントN2と実質同時に、走行制御の機能的な制限の実施を自動運転ECU40に要求する。具体的に、退避制限要求部X7aは、速度の抑制要求を自動運転ECU40に出力する。自動運転ECU40は、速度抑制要求に基づき、レベル3の自動運転の通常の設定速度よりも遅い(低い)設定速度に切り替え、減速制御を試みる。尚、ドライバの運転姿勢が悪いことで減速制御が実施されても、レベル3の自動運転は継続される。
 情報提示内容制御部X8は、イベントN2による異常の有無の回答要求の提示後、操作デバイス24へのユーザ操作の入力の有無を判定する。操作デバイス24は、ドライバ及び同乗者等によるユーザ操作を受け付ける入力部であり、例えばステアスイッチ、操作レバー及び音声入力装置等である。ドライバ及び同乗者等の乗員は、ドライバに異常がないことを回答するユーザ操作、又はドライバに異常があることを回答するユーザ操作を、操作デバイス24に入力可能である。
 情報提示内容制御部X8は、ドライバに異常がないことを回答するユーザ操作の入力情報を取得した場合、情報提示機器20による情報提示イベントN3を実施する。情報提示内容制御部X8は、イベントN3において、レベル3の自動運転の継続を示す報知と、運転姿勢の改善を促す報知とを実施する。イベントN3での情報提示では、デッドマン機能部Z1による誤認識を回避できる程度までの運転姿勢の改善が、ドライバに促される。
 情報提示内容制御部X8は、イベントN3による運転姿勢の改善要求の提示後、ドライバ情報取得部X9によって取得される検知結果の内容を参照し、ドライバの運転姿勢が改善されたか否かを判定する。情報提示内容制御部X8にてドライバの運転姿勢が改善されたと判定された場合、退避制限要求部X7aから自動運転ECU40に、速度抑制をキャンセルする要求が出力される。その結果、自動運転ECU40は、減速制御を終了し、通常の設定速度での走行を開始する。
 一方、情報提示内容制御部X8は、ドライバの運転姿勢が改善されない場合、運転姿勢の改善要求の提示を繰り返し実施する。この場合、自動運転ECU40による速度抑制制御も継続される。そして、情報提示内容制御部X8による改善要求にドライバが応じない場合、退避制限要求部X7aは、運転姿勢の改善が見込めないと判断し、自動運転ECU40にMRM制御への移行を要求する。情報提示内容制御部X8は、退避制限要求部X7aによるMRM制御を開始判断に基づき、情報提示イベントM1を実施し、運転制御がMRM制御に移行したことを表す情報をドライバへ提示する。
 情報提示内容制御部X8は、イベントN2による異常の有無の回答要求の提示後、ドライバに異常があることを回答するユーザ操作の入力情報を取得した場合、又は乗員からの回答がなかった場合、ドライバが運転困難状態にある旨の確定判定を実施する。退避制限要求部X7aは、情報提示内容制御部X8の確定判定に基づき、自動運転ECU40にMRM制御への移行を要求する。以上により、ドライバに急病等が生じた場合には、自動運転ECU40によるMRM制御が開始される。この場合、情報提示内容制御部X8は、情報提示イベントM1を実施し、MRM制御への移行を主に同乗者へ向けて報知する。
 さらに、図11に示す第5実施形態の乗員監視部X5は、ドライバの存在に加えて、ドライバを除く車両1の乗員である同乗者の有無を把握する。乗員監視部X5は、助手席の座面等に設けられた座席センサ32の検出情報を取得し、助手席に同乗者が着座しているか否かを判定する。
 情報提示内容制御部X8は、乗員監視部X5によって同乗者の存在が把握されている場合、同乗者がドライバの状態を見ているとの前提に基づき、姿勢異常情報の提示を保留する。すなわち、ドライバ情報取得部X9によってドライバの異常状態を示す検知結果が取得されていても、情報提示内容制御部X8は、イベントN2の情報提示を直ちには実施しない。これにより、ドライバの異常の有無の回答要求の提示が、待機状態となる。
 情報提示内容制御部X8は、姿勢異常情報の提示の保留後、デッドマン機能部Z1による異常検知の要因となる運転姿勢の崩れが改善されない場合には、ドライバの異常の有無を回答させるイベントN2の情報提示を実施する。すなわち、ドライバの姿勢の改善がドライバ情報取得部X9によって把握されない状態の継続に基づき、情報提示内容制御部X8は、姿勢異常情報の提示の保留を解除する。この場合の情報提示は、ドライバだけでなく、助手席の同乗者へ向けても実施される。同乗者がいない場合の情報提示と同様に、助手席の同乗者には、ドライバに異常の可能性があると判断した理由が、回答要求と共に報知される。
 許容行為判別部X4は、レベル3の自動運転期間にて、ドライバ要件レベルをレベル1~3のいずれかに設定した場合、こうした許容行為の判別結果に基づき、ドライバが異常状態にあると判定する基準の緩和をデッドマン機能部Z1に要求する。デッドマン機能部Z1は、許容行為判別部X4からの緩和要求に基づき、レベル3の自動運転期間において、異常状態と判定し難くなるように、判定基準となる閾値を調整する。一例として、デッドマン機能部Z1は、所定時間(例えば、5秒)の姿勢崩れの継続によって異常状態と判定していた場合、この所定時間をより長い時間(例えば、10秒)に変更する閾値調整を実施する。以上により、デッドマン機能部Z1の判定基準が、レベル3の自動運転に最適化される。尚、判定基準(閾値)の緩和は、車両1が使用される国又は地域におけるデッドマン装置関連の法規及びガイドラインの範囲内で実施されることが望ましい。
 次に、ここまで説明したデッドマン関連の各イベントの情報提示を行う情報提示処理の詳細を、図13及び図14に示すフローチャートに基づき、図11及び図12を参照しつつ、以下説明する。図13及び図14に示す情報提示処理は、レベル3の自動運転開始に基づき、HCU10によって開始される。
 S51では、ドライバの異常状態を示す検知結果がドライバ情報取得部X9に取得されたか否かを判定する。異常状態を示す検知結果の取得がない場合、S51の判定を繰り返し、姿勢崩れの検知による異常状態の発生を待機する。一方、S51にて、異常状態を示す検知結果が取得されたと判定した場合、S52に進む。
 S52では、同乗者の有無を判定する。S52にて、同乗者が存在すると判定した場合、S55に進む。一方、S52にて、同乗者が存在しないと判定した場合、S55による情報提示を保留するため、S53に進む。S53では、ドライバの姿勢の改善がデッドマン機能部Z1及びドライバ情報取得部X9にて把握されたか否かを判定する。S53にて、ドライバの姿勢改善があったと判定した場合、S51に戻る。
 対して、S53にて、姿勢改善が把握されないと判定した場合、S54に進む。S54では、ドライバの姿勢崩れ(異常状態)を検知した後の経過時間が所定時間を超えたか否かを判定する。S54にて、姿勢崩れの検知後、所定時間が経過する前であると判定した場合、S53に戻る。一方、S54にて、姿勢崩れが検知されてから所定時間が経過した、言い替えると、ドライバの姿勢改善が把握されない状態が所定時間継続したと判定した場合、S55に進む。以上により、姿勢異常情報の提示の保留が解除される。
 S55では、上述したイベントN2の情報提示、すなわち、ドライバ異常の有無の回答要求の提示と、異常可能性を判断した理由の提示とを実施する。加えてS55では、自動運転ECU40へ向けて、設定速度の抑制による減速制御の実施要求を出力する。ここで、イベントN2の情報提示と、減速制御の実施要求を出力とは、異なるタイミングで実施されてもよい。一例として、イベントN2の情報提示後に、減速制御の実施要求が出力される。こうした変形例であれば、乗員は、ドライバの異常状態の検知を知ったうえで、減速制御を体感する。故に、減速制御に伴う挙動変化に対し、乗員のパニックは発生し難くなる。また、速度抑制制御の実施要求後に、イベントN2の情報提示が実施されてもよい。
 S55では、ドライバに異常があるか否かの回答結果を判定する。S56にて、ドライバに異常はなく、運転困難な状態でないとの回答があった場合、S58に進む。一方、ドライバに異常があり、運転困難な状態であるとの回答があった場合、S61に進む。さらに、乗員による回答の入力がない場合、S57に進む。
 S57では、回答要求を開始してからの経過時間が所定時間を超えたか否かを判定する。S57にて、回答要求の開始後、所定時間が経過する前であると判定した場合、S56に戻る。一方、S57にて、所定時間が経過したと判定した場合、S61に進む。
 S58では、S55にて開始したイベントN2による姿勢異常情報の提示を終了させ、上述したイベントN3の情報提示を実施する。具体的に、S58では、レベル3の自動運転の継続を示す報知と、運転姿勢の改善を促す報知とを順次実施し、S59に進む。自動運転の継続報知と運転姿勢の改善要求との実施順序は、適宜入れ替えられてよい。S59では、ドライバの姿勢崩れが改善されたか否かを判定する。S59にて、ドライバの姿勢崩れが改善されたと判定した場合、S62に進む。S62では、S55にて要求した走行制御の機能制限の解除、すなわち、減速制御の解除を自動運転ECU40に要求し、一連の処理を終了する。
 一方、S59にて、ドライバの姿勢崩れが改善されていないと判定した場合、S60に進む。S60では、運転姿勢の改善要求を開始してからの経過時間が所定時間を超えたか否かを判定する。S60にて、改善要求の開始後、所定時間が経過する前であると判定した場合、S59に戻る。一方、S60にて、所定時間が経過したと判定した場合、S61に進む。S61では、姿勢異常情報等の提示を終了し、上述したイベントW1の情報提示を実施する。具体的に、S61では、運転制御のMRM制御への移行が報知される。さらに、S61では、MRM制御への移行要求が自動運転ECU40へ向けて出力される。以上により、一連の処理が終了される。
 ここまで説明した第5実施形態でも、第1実施形態と同様の効果を奏し、ドライバは、許容行為の判別結果に関する情報を得ることができるため、適切な行為を取り易くなる。
 加えて第5実施形態によると、ドライバの異常状態を示す検知結果がドライバ情報取得部X9によって取得される。その結果、レベル3の自動運転中にドライバが急病等で運転困難な状態となった場合でも、レベル3の自動運転からMRM制御への確実な移行が実行可能になる。
 また第5実施形態によると、レベル3の自動運転機能の作動時にドライバの姿勢の崩れを示す検知結果が取得された場合、崩れたドライバの姿勢が許容行為として許容される範囲内の姿勢であっても、姿勢異常情報が情報提示機器に提示される。故に、急病による姿勢崩れが自動運転中のドライバ要件を満たしていても、ドライバ等の乗員へ向けた体調確認の問い合わせが実施され得る。その結果、レベル3の自動運転中であっても、デッドマン機能部Z1を主体としたデッドマンシステムを正常に作動させることが可能になる。
 さらに第5実施形態によると、運転困難な状態か否かの回答の入力が乗員に要求された後、当該入力の要求に対して回答があった場合に、姿勢異常情報の提示が終了される。故に、ドライバの運転困難状態が確定した後は、MRM制御の状態等の有用性の高い情報を、不安を抱えた同乗者へ向けて分かり易く提示することが可能になる。
 加えて第5実施形態によると、レベル3の自動運転機能の作動時にドライバの姿勢の崩れを示す検知結果が取得された場合、崩れたドライバの姿勢が許容行為として許容される範囲内の姿勢であっても、走行制御に機能的な制限が加えられる。故に、急病による姿勢崩れが自動運転中のドライバ要件を満たしていても、自動運転ECU40は、自動運転を継続しつつ、MRM制御に移行し易い走行状態に予め移行させておくことができる。その結果、ドライバが本当に運転困難な状態となっていた場合、レベル3の自動運転からMRM制御への移行が円滑に実施され得る。
 また第5実施形態によると、ドライバの姿勢の改善がドライバ情報取得部X9にて把握された場合、走行制御の機能的な制限の解除が自動運転ECU40に要求される。故に、ドライバの姿勢崩れが改善された場合、車両1の走行状態は、通常のレベル3の自動運転による走行状態に復帰する。故に、デッドマンシステムが有効な車載システムであっても、自動運転機能の利便性が損なわれ難い。
 さらに第5実施形態によると、同乗者の存在が把握されている場合、異常状態か否かの回答要求を含む姿勢異常情報の提示が保留される。このように、同乗者が存在する場合、同乗者がドライバを見ることができる。故に、ドライバの姿勢崩れを厳密に報知しなくても、ドライバに生じた不測の事態への迅速な対応が可能になる。以上によれば、頻繁な回答要求によって乗員に煩わしさを感じさせてしまう事態が回避される。
 加えて第5実施形態によると、同乗者の存在が把握されていた場合でも、ドライバの姿勢の改善されない状態が継続した場合、姿勢異常情報の提示の保留が解除される。故に、ドライバが急病となり、同乗者による対処が困難となるケースでは、同乗者がいない場合と同様に、デッドマンシステムを正常に作動させて、MRM制御に移行させることが可能になる。
 また第5実施形態によると、レベル3の自動運転中にドライバに許容される許容行為の判別結果に基づき、許容行為判別部X4からデッドマン機能部Z1に、異常状態を判定する基準の緩和が要求される。こうした判定基準の調整処理によれば、自動運転中でのドライバのリラックスした姿勢が急病による姿勢崩れと誤認され難くなる。その結果、頻繁な回答要求の提示によって乗員に煩わしさを感じさせてしまう事態が回避される。
 尚、第5実施形態において、乗員監視部X5が「乗員把握部」に相当し、退避制限要求部X7aが「制御要求部」に相当し、デッドマン機能部Z1が「異常検知装置」に相当する。
 (他の実施形態)
 以上、複数の実施形態について説明したが、本開示は、それらの実施形態に限定して解釈されるものではなく、本開示の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
 具体的に変形例1としては、許容行為判別部X4,Y6による判別観点は、1つのみであってもよい。
 変形例2としては、許容行為判別部X4,Y6は、ニューラルネットワークを主体として構築された学習済みの人工知能モデルを用いて、許容行為を判別してもよい。例えば、走行環境情報、覚醒度情報及びストレス情報を含む入力データと、これらに対応した許容行為の判別結果を含む出力データとの対からなる教師データを用いて、予め人工知能モデルを学習させておくことができる。こうした学習済み人工知能モデルによって、複数の判別観点に対して個別の暫定的な判別結果を算出する必要なく、複数の判別観点を総合的に評価することができる。
 変形例3としては、許容行為判別部X4,Y6は、未来予測可能な判別観点に基づき、目的地までの走行経路における許容行為の範囲の推移を予測しなくてもよい。
 変形例4としては、許容行為判別部X4,Y6は、例えば自動運転レベル3の自動運転機能の作動開始時に、目的地までの走行経路における許容行為の範囲の推移を予測し、その後、ドライバに現在許容される許容行為を判別しない構成となっていてもよい。
 変形例5としては、情報提示機器20及び制御対象機器CEの少なくとも一方に、車両1に持ち込まれる機器(例えばスマートフォン)等が含まれていてもよい。
 第1,2実施形態に関する変形例6としては、情報提示機器20に、例えば運転席を振動させるバイブレータ等、触覚的情報を提示するデバイスが補助的に含まれていてもよい。
 上記第5実施形態の変形例7では、同乗者が把握される場合の姿勢異常情報の提示の保留が実施されない。また、上記第5実施形態の変形例8では、許容行為判別部X4からデッドマン機能部Z1へ基準緩和を要求する処理が省略される。さらに、上記第5実施形態の変形例9では、ドライバへ向けた姿勢異常情報の提示が省略される。変形例9では、デッドマン機能部Z1とHCU10との連携処理として、許容行為判別部X4からデッドマン機能部Z1へ基準緩和を要求する処理のみが実施される。
 上記第5実施形態の変形例10によるデッドマン機能部Z1は、DSM31によるドライバ状態情報に加えて、車両挙動及び運転行動等の情報を、ドライバの異常検知に用いることができる。また、変形例11によるデッドマン機能部Z1は、運転支援ECU37とは別の一つの独立した車載ECUに実装され、ドライバの異常状態を示す検知結果を通信バス99に出力する。さらに、変形例12によるデッドマン機能部Z1は、DSM31の制御回路に実装され、ドライバの状態情報と共に、異常状態を診断した検知結果を通信バス99に出力する。
 変形例13としては、HCU10及び自動運転ECU40,340によって提供されていた各機能は、ソフトウエア及びそれを実行するハードウエア、ソフトウエアのみ、ハードウエアのみ、あるいはそれらの複合的な組み合わせによっても提供可能である。さらに、こうした機能がハードウエアとしての電子回路によって提供される場合、各機能は、多数の論理回路を含むデジタル回路、又はアナログ回路によっても提供可能である。
 変形例14としては、上述の情報提示及び機能制御を実現可能なプログラム等を記憶する記憶媒体(持続的有形コンピュータ読み取り媒体,non-transitory tangible storage medium)の形態も、適宜変更されてよい。例えば記憶媒体は、回路基板上に設けられた構成に限定されず、メモリカード等の形態で提供され、スロット部に挿入されて、HCU10又は自動運転ECU40,340の制御回路に電気的に接続される構成であってもよい。さらに記憶媒体は、HCU10又は自動運転ECU40,340へのプログラムのコピー基となる光学ディスク及びハードディスク等であってもよい。
 変形例15としては、第3実施形態において自動運転ECU340に設けられていた機能制限部Y7が第1実施形態のHCU10に設けられてもよい。第1実施形態においてHCU10に設けられていた情報提示内容制御部X8が第3実施形態の自動運転ECU340に設けられていてもよい。すなわち、許容行為判別部X4,Y6を利用した情報提示及び機能制限が、1つの電子制御装置により複合的に実現されていてもよい。
 変形例16としては、情報提示制御装置は、車両1に搭載されていなくてもよい。例えば、情報提示制御装置がHCU10である場合、HCU10は、車両1に搭載されず、車両1の外に固定配置されているか、又は他車両に搭載されていてもよい。こうした変形例16では、情報提示機器20は、インターネット、路車間通信、車車間通信等の通信によって遠隔制御される。同様に、機能制御装置が車両1に搭載されていなくてもよい。
 変形例17としては、車両1は、それぞれの国及び地域の道路交通法に応じて最適化されてよい。さらに情報提示制御装置によって提示される情報、及び機能制御装置によって制限される機能は、それぞれの国及び地域の道路交通法に応じて最適化されてよい。
 本開示に記載の制御部及びその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の装置及びその手法は、専用ハードウエア論理回路により、実現されてもよい。もしくは、本開示に記載の装置及びその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウエア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていてもよい。

Claims (37)

  1.  ドライバに代わって運転行為を実施可能な自動運転機能を備える車両(1)に用いられ、前記ドライバへ向けて情報を提示する情報提示機器(20)を制御する情報提示制御装置であって、
     前記自動運転機能の作動時に前記ドライバにより実施され得る前記運転行為とは異なる運転以外の行為のうち、前記ドライバに許容される許容行為を判別する許容行為判別部(X4)と、
     前記許容行為の判別結果に関する情報を前記情報提示機器に提示させる情報提示内容制御部(X8)と、を備える情報提示制御装置。
  2.  前記情報提示内容制御部は、前記運転以外の行為のうちの前記許容行為を表す情報を前記情報提示機器に提示させる請求項1に記載の情報提示制御装置。
  3.  前記情報提示内容制御部は、前記運転以外の行為のうちの前記許容行為以外の行為を表す情報を前記情報提示機器に提示させる請求項1又は2に記載の情報提示制御装置。
  4.  前記許容行為判別部は、走行環境に基づいて、前記許容行為を判別する請求項1から3のいずれか1項に記載の情報提示制御装置。
  5.  前記許容行為判別部は、前記走行環境としての前記車両が走行する道路の形状に基づいて、前記許容行為を判別する請求項4に記載の情報提示制御装置。
  6.  前記許容行為判別部は、前記車両の走行する道路がカーブ形状であり、かつ、カーブ区間の長さが所定距離を超える場合に、前記許容行為と判別する範囲を狭くする請求項5に記載の情報提示制御装置。
  7.  前記許容行為判別部は、前記走行環境としての前記車両の走行シーンに基づいて、前記許容行為を判別する請求項4から6のいずれか1項に記載の情報提示制御装置。
  8.  前記許容行為判別部は、前記ドライバの覚醒度に基づいて、前記許容行為を判別する請求項1から7のいずれか1項に記載の情報提示制御装置。
  9.  前記許容行為判別部は、前記ドライバのストレスに基づいて、前記許容行為を判別する請求項1から8のいずれか1項に記載の情報提示制御装置。
  10.  前記許容行為判別部は、
     複数の判別観点を設定し、
     各前記判別観点について、個別の前記許容行為を暫定的に判別し、
     各前記判別観点に対する個別の前記許容行為のうち、各前記判別観点間にて共通して前記許容行為と判別された行為を、確定的に前記許容行為と判別する請求項1から9のいずれか1項に記載の情報提示制御装置。
  11.  前記許容行為判別部は、前記運転以外の行為における前記ドライバの姿勢に応じて、前記運転以外の行為と、前記許容行為の許容度の高低とが関連付けられた判別指標に基づき、前記許容行為を判別する請求項1から10のいずれか1項に記載の情報提示制御装置。
  12.  前記許容行為判別部は、前記運転以外の行為における運転席のリクライニング角度に応じて、前記運転以外の行為と、前記許容行為の許容度の高低とが関連付けられた判別指標に基づき、前記許容行為を判別する請求項1から11のいずれか1項に記載の情報提示制御装置。
  13.  前記情報提示内容制御部は、前記情報提示機器を用いる前記許容行為を実現するための機能的な制限が前記情報提示機器に加えられている場合に、前記制限の解除を要求する請求項1から12のいずれか1項に記載の情報提示制御装置。
  14.  前記情報提示機器は、視覚的情報を提示するデバイス(21)及び聴覚的情報を提示するデバイス(22)を含み、
     前記情報提示内容制御部は、前記ドライバが現在実施していると推定される前記運転以外の行為に応じて、情報提示に用いるデバイスを、前記視覚的情報を提示するデバイス及び前記聴覚的情報を提示するデバイスの中から選択する請求項1から13のいずれか1項に記載の情報提示制御装置。
  15.  前記情報提示内容制御部は、前記ドライバが前記運転以外の行為のうちの前記許容行為以外の行為を実施していると推定される場合、前記許容行為以外の行為を実施してはならない理由を前記情報提示機器に提示させる請求項1から14のいずれか1項に記載の情報提示制御装置。
  16.  前記情報提示内容制御部は、前記ドライバが前記運転以外の行為のうちの前記許容行為以外の行為を実施していると推定される場合、前記ドライバが実施している前記許容行為以外の行為を前記許容行為へ移行させるための助言を前記情報提示機器に提示させる請求項1から15のいずれか1項に記載の情報提示制御装置。
  17.  前記情報提示内容制御部は、前記ドライバが前記運転以外の行為のうちの前記許容行為以外の行為を継続して実施していると推定される場合、前記情報提示機器に前記ドライバへ向けた警報を実施させる請求項1から16のいずれか1項に記載の情報提示制御装置。
  18.  前記警報の実施開始後、前記ドライバが前記運転以外の行為のうちの前記許容行為以外の行為をさらに継続して実施していると推定される場合、前記車両に対し、前記車両を強制的に退避させることを要求する退避要求部(X7)を、さらに備える請求項17に記載の情報提示制御装置。
  19.  前記情報提示内容制御部は、前記警報の実施と共に、前記自動運転機能を終了させる運転交代の予告を前記情報提示機器に提示させる請求項17又は18に記載の情報提示制御装置。
  20.  前記情報提示内容制御部は、前記運転以外の行為が許可される許可エリアの終了予定を把握した場合に、前記自動運転機能を終了させる運転交代の予告を前記情報提示機器に提示させる請求項1から19のいずれか1項に記載の情報提示制御装置。
  21.  前記許容行為判別部は、前記自動運転機能から前記ドライバへの運転交代が行われる以前の交代準備区間(STR)において、前記許容行為と判別する範囲を所定の交代準備範囲まで狭くする請求項19又は20に記載の情報提示制御装置。
  22.  前記ドライバが運転困難な状態となったことを検知する異常検知装置(Z1)から、前記ドライバの異常状態を示す検知結果を取得するドライバ情報取得部(X9)、をさらに備える請求項1から21のいずれか1項に記載の情報提示制御装置。
  23.  前記情報提示内容制御部は、前記自動運転機能の作動時に前記ドライバの姿勢の崩れを示す前記検知結果が取得された場合、崩れた前記ドライバの姿勢が前記許容行為として許容される範囲内の姿勢であっても、前記ドライバの姿勢の崩れに関する姿勢異常情報を前記情報提示機器に提示させる請求項22に記載の情報提示制御装置。
  24.  前記情報提示内容制御部は、
     前記姿勢異常情報の提示にて、前記運転困難な状態か否かの回答の入力を前記車両の乗員に要求し、
     前記入力の要求に対して回答があった場合に、前記姿勢異常情報の提示を終了させる請求項23に記載の情報提示制御装置。
  25.  前記自動運転機能の作動時に前記ドライバの姿勢の崩れを示す前記検知結果が取得された場合、崩れた前記ドライバの姿勢が前記許容行為として許容される範囲内の姿勢であっても、前記自動運転機能による走行制御に機能的な制限を加えるよう要求する制限要求部、(X7a)をさらに備える請求項23又は24に記載の情報提示制御装置。
  26.  前記制限要求部は、前記ドライバの姿勢の改善が前記ドライバ情報取得部にて把握された場合、前記走行制御の機能的な制限の解除を前記自動運転機能に要求する請求項25に記載の情報提示制御装置。
  27.  前記ドライバを除く前記車両の乗員である同乗者の有無を把握する乗員把握部(X5)、をさらに備え、
     前記情報提示内容制御部は、前記乗員把握部にて前記同乗者の存在が把握されている場合、前記姿勢異常情報の提示を保留する請求項23から26のいずれか1項に記載の情報提示制御装置。
  28.  前記情報提示内容制御部は、前記ドライバの姿勢の改善が前記ドライバ情報取得部にて把握されない状態が継続した場合、前記姿勢異常情報の提示の保留を解除する請求項27に記載の情報提示制御装置。
  29.  前記許容行為判別部は、前記許容行為の前記判別結果に基づき、前記ドライバの姿勢の崩れを判定する基準の緩和を前記異常検知装置に要求する請求項22から28のいずれか1項に記載の情報提示制御装置。
  30.  前記情報提示内容制御部は、前記ドライバが前記運転以外の行為のうちの前記許容行為を実施していると推定される場合、情報提示の頻度を規制する規制時間間隔を空けた上で、前記許容行為の前記判別結果に関する情報を前記情報提示機器に提示させる請求項1から29のいずれか1項に記載の情報提示制御装置。
  31.  前記情報提示内容制御部は、前記許容行為判別部によって判別された前記許容行為の範囲が変化した場合に、前記許容行為の範囲の変化を示す情報を前記情報提示機器に提示させる請求項1から30のいずれか1項に記載の情報提示制御装置。
  32.  前記許容行為判別部は、前記自動運転機能が作動している間、最新の情報に基づいて前記許容行為の前記判別結果を更新可能となっており、
     前記情報提示内容制御部は、前記許容行為判別部によって判別された前記許容行為の範囲が変化した場合に、前記許容行為の範囲の変化量が大きくなる程、前記情報提示機器による情報提示をトーンアップさせる請求項1から30のいずれか1項に記載の情報提示制御装置。
  33.  前記許容行為判別部は、前記自動運転機能が連続的に作動する予定の連続作動区間と、前記連続作動区間内において前記許容行為の前記判別結果の許容度が最も低くなるポイントと、を推定し、
     前記情報提示内容制御部は、前記連続作動区間に対応して前記自動運転機能が実際に作動している間、前記ポイントに対する前記判別結果に関する情報を前記情報提示機器に提示させる請求項1から30のいずれか1項に記載の情報提示制御装置。
  34.  ドライバに代わって運転行為を実施可能な自動運転機能を備える車両(1)に用いられ、制御対象機器(CE)の機能を制御する機能制御装置であって、
     前記自動運転機能の作動時に前記ドライバにより実施され得る前記運転行為とは異なる運転以外の行為のうち、前記ドライバに許容される許容行為を判別する許容行為判別部(Y6)と、
     前記運転以外の行為のうち前記許容行為以外の行為を実現可能な前記制御対象機器の機能を制限する機能制限部(Y7)と、を備える機能制御装置。
  35.  前記制御対象機器は、前記ドライバが着座する運転席(38)を含み、
     前記機能制限部は、前記運転席のリクライニングが可能な角度を、前記許容行為の判別結果に応じて制限する請求項34に記載の機能制御装置。
  36.  前記制御対象機器は、前記ドライバへ向けて表示を行なうディスプレイ(21)を含み、
     前記機能制限部は、前記ディスプレイの表示内容を、前記許容行為の判別結果に応じて制限する請求項34又は35に記載の機能制御装置。
  37.  前記制御対象機器は、前記ドライバへ向けて音を出力するスピーカ(22)を含み、
     前記機能制限部は、前記スピーカの音量を、前記許容行為の判別結果に応じて制限する請求項34から36のいずれか1項に記載の機能制御装置。
PCT/JP2021/009885 2020-03-23 2021-03-11 情報提示制御装置及び機能制御装置 WO2021193118A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202180023032.1A CN115335269A (zh) 2020-03-23 2021-03-11 信息提示控制装置以及功能控制装置
DE112021001776.4T DE112021001776T8 (de) 2020-03-23 2021-03-11 Informationspräsentationssteuervorrichtung und Funktionssteuervorrichtung
US17/945,371 US20230001948A1 (en) 2020-03-23 2022-09-15 Information presentation control device and function control device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2020051518 2020-03-23
JP2020-051518 2020-03-23
JP2021-030063 2021-02-26
JP2021030063A JP7384185B2 (ja) 2020-03-23 2021-02-26 情報提示制御装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/945,371 Continuation US20230001948A1 (en) 2020-03-23 2022-09-15 Information presentation control device and function control device

Publications (1)

Publication Number Publication Date
WO2021193118A1 true WO2021193118A1 (ja) 2021-09-30

Family

ID=77886621

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/009885 WO2021193118A1 (ja) 2020-03-23 2021-03-11 情報提示制御装置及び機能制御装置

Country Status (5)

Country Link
US (1) US20230001948A1 (ja)
JP (2) JP7384185B2 (ja)
CN (1) CN115335269A (ja)
DE (1) DE112021001776T8 (ja)
WO (1) WO2021193118A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023063186A1 (ja) * 2021-10-12 2023-04-20 株式会社デンソー 車両用装置及び車両用推定方法
KR20230092059A (ko) * 2021-12-16 2023-06-26 한국자동차연구원 주행 모드 간 전환을 지원하는 차량 내 자율 주행 시스템

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015133050A (ja) * 2014-01-15 2015-07-23 みこらった株式会社 自動運転車
WO2018220826A1 (ja) * 2017-06-02 2018-12-06 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
JP2019124554A (ja) * 2018-01-16 2019-07-25 クラリオン株式会社 情報提供装置、及び情報提供方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105579321B (zh) * 2013-07-23 2018-05-11 日产自动车株式会社 车辆用驾驶辅助装置及车辆用驾驶辅助方法
JP2015217798A (ja) * 2014-05-16 2015-12-07 三菱電機株式会社 車載情報表示制御装置
JP2017207859A (ja) * 2016-05-17 2017-11-24 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
JP6819086B2 (ja) 2016-06-15 2021-01-27 株式会社デンソー 車両用表示制御装置
CN109789782B (zh) * 2016-09-26 2021-10-29 富士胶片株式会社 投影型显示装置、投影显示方法、及存储介质
JP2018118603A (ja) * 2017-01-25 2018-08-02 本田技研工業株式会社 車両システム、車両制御方法、および車両制御プログラム
JP2018177064A (ja) * 2017-04-17 2018-11-15 株式会社デンソーテン コンテンツ再生装置及びコンテンツ再生方法
JP7088799B2 (ja) 2018-09-27 2022-06-21 ニッタ化工品株式会社 空気ばね及びその組立方法
US10611017B1 (en) 2019-08-22 2020-04-07 Toughbuilt Industries, Inc. Storage bag with enhanced interior visibility

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015133050A (ja) * 2014-01-15 2015-07-23 みこらった株式会社 自動運転車
WO2018220826A1 (ja) * 2017-06-02 2018-12-06 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
JP2019124554A (ja) * 2018-01-16 2019-07-25 クラリオン株式会社 情報提供装置、及び情報提供方法

Also Published As

Publication number Publication date
DE112021001776T5 (de) 2023-06-07
DE112021001776T8 (de) 2023-08-17
JP7384185B2 (ja) 2023-11-21
JP2023184663A (ja) 2023-12-28
US20230001948A1 (en) 2023-01-05
CN115335269A (zh) 2022-11-11
JP2021152888A (ja) 2021-09-30

Similar Documents

Publication Publication Date Title
JP7155122B2 (ja) 車両制御装置及び車両制御方法
JP6946351B2 (ja) 車両制御装置及び車両制御方法
JP4307833B2 (ja) ドライバ能力向上のためのシステム及び方法
US20220340166A1 (en) Presentation control device, presentation control program, and driving control device
JP2019021229A (ja) 車両制御装置および車両制御方法
JP2017074918A (ja) 報知管理装置及び報知管理方法
US20230001948A1 (en) Information presentation control device and function control device
JP7431223B2 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
JP6733293B2 (ja) 情報処理装置
JP7352566B2 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
JP2019159711A (ja) 覚醒度維持装置
JP2008282022A (ja) 車両運転手の能力を向上させるための方法及び装置
JPWO2019044427A1 (ja) 支援方法およびそれを利用した支援システム、支援装置
WO2021210316A1 (ja) 制御装置及び制御プログラム
CN116034408A (zh) 信息处理设备、信息处理方法和信息处理程序
JP2024026575A (ja) 自動運転制御装置および自動運転制御プログラム
JP6856086B2 (ja) 報知管理装置及び報知管理プログラム
JP2020050204A (ja) 車両の走行制御方法及び走行制御装置
CN115443495A (zh) 提示控制装置以及提示控制程序
US20230278565A1 (en) Driving assistance device
JP2019012046A (ja) 通知装置、通知システムおよび通知方法
JP7338653B2 (ja) 提示制御装置及び提示制御プログラム
JP7347459B2 (ja) 制御装置及び制御プログラム
JP2021041884A (ja) 車両制御装置
KR102667182B1 (ko) 차량 제어 디바이스 및 차량 제어 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21775981

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21775981

Country of ref document: EP

Kind code of ref document: A1