WO2016157816A1 - 情報提示装置及び情報提示方法 - Google Patents

情報提示装置及び情報提示方法 Download PDF

Info

Publication number
WO2016157816A1
WO2016157816A1 PCT/JP2016/001621 JP2016001621W WO2016157816A1 WO 2016157816 A1 WO2016157816 A1 WO 2016157816A1 JP 2016001621 W JP2016001621 W JP 2016001621W WO 2016157816 A1 WO2016157816 A1 WO 2016157816A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
driver
vehicle
control
display
Prior art date
Application number
PCT/JP2016/001621
Other languages
English (en)
French (fr)
Inventor
光雄 玉垣
下ノ本 詞之
裕章 田中
卓也 森
友紀 藤澤
神谷 玲朗
拓弥 久米
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2015250778A external-priority patent/JP6292218B2/ja
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Priority to CN201680020464.6A priority Critical patent/CN107408349B/zh
Priority to US15/562,575 priority patent/US10723367B2/en
Publication of WO2016157816A1 publication Critical patent/WO2016157816A1/ja
Priority to US16/599,466 priority patent/US11492017B2/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/007Emergency override
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/23
    • B60K35/28
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T17/00Component parts, details, or accessories of power brake systems not covered by groups B60T8/00, B60T13/00 or B60T15/00, or presenting other characteristic features
    • B60T17/18Safety devices; Monitoring
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00Brake-action initiating means
    • B60T7/12Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/14Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated upon collapse of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0051Handover processes from occupants to vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • B60K2360/161
    • B60K2360/175
    • B60K2360/178
    • B60K2360/184
    • B60K2360/334
    • B60K35/29
    • B60K35/654
    • B60K35/656
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/26Incapacity
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Definitions

  • This disclosure relates to an information presentation apparatus and an information presentation method for presenting information to a vehicle occupant by display.
  • an emergency evacuation device disclosed in Patent Document 1 discloses a technique for automatically stopping a vehicle on behalf of the driver when the vehicle driver falls into a difficult driving state.
  • a vehicle that can perform such retreat travel is equipped with a driving support HMI (Human-Machine-Interface) that presents the driver with operation information of an emergency retreat device, for example.
  • HMI Human-Machine-Interface
  • the driving assistance HMI disclosed in Patent Document 1 can confirm whether or not to operate the evacuation traveling, for example, as information presentation to the driver.
  • crew of the vehicle except a driver is not considered at all. Therefore, when the vehicle starts to evacuate, there is a possibility that the occupants of the vehicle other than the driver may feel strong anxiety.
  • This disclosure is intended to provide an information presentation device and an information presentation method that can relieve the anxiety of a passenger in a vehicle traveling by automatic evacuation control.
  • the vehicle is mounted on a vehicle in which automatic evacuation control is activated when it is determined that it is difficult for the driver to continue driving, and is visible by a vehicle occupant excluding the driver.
  • An information presentation device for presenting information to the occupant by displaying one display area includes an operation information acquisition unit that acquires operation information of the automatic evacuation control, and the first display when the automatic evacuation control is operating.
  • a display generation unit configured to generate an occupant notification display that is displayed in the region and notifies the information related to the automatic evacuation control.
  • the occupant notification display includes an explanation image that describes a process that is currently being executed among a plurality of processes that are performed by the automatic evacuation control, and a progress image that indicates the current degree of progress in the automatic evacuation control. It is.
  • the current progress degree in the automatic evacuation control including a plurality of processes is informed by the progress image included in the passenger notification display. Therefore, the occupant can be able to image the entire image of the automatic evacuation control and the end of the automatic evacuation control.
  • the occupant can generally predict the movement of the vehicle traveling without depending on the driver.
  • the occupant notification display can relieve the anxiety of the occupants in the vehicle traveling by the automatic evacuation control.
  • a display area that can be visually recognized by an occupant of the vehicle excluding the driver.
  • the information presentation method for presenting information to the occupant by display includes acquiring the operation information of the automatic evacuation control and displaying the automatic evacuation control in the display area when the automatic evacuation control is operating.
  • the occupant notification display includes an explanation image that describes a process that is currently being executed among a plurality of processes that are performed by the automatic evacuation control, and a progress image that indicates the current degree of progress in the automatic evacuation control. It is. Acquisition of operation information and generation of an occupant notification display are executed by at least one processor.
  • the current progress degree in the automatic evacuation control composed of a plurality of processes is informed by the progress image included in the passenger notification display. Therefore, the occupant can be able to image the entire image of the automatic evacuation control and the end of the automatic evacuation control.
  • the occupant can generally predict the movement of the vehicle traveling without depending on the driver.
  • the occupant notification display can relieve the anxiety of the occupants in the vehicle traveling by the automatic evacuation control.
  • FIG. 1 is a diagram showing a layout around a driver's seat in the own vehicle.
  • FIG. 2 is a block diagram showing the overall configuration of the in-vehicle network.
  • FIG. 3 is a diagram showing functional blocks constructed in the control circuit of the vehicle control ECU.
  • FIG. 4 is a time chart for explaining the process from when an abnormality occurs to the driver until automatic evacuation control is started.
  • FIG. 5 is a time chart for explaining the process from when an abnormality occurs to the driver until automatic evacuation control is started.
  • FIG. 6 is a time chart for explaining the process from when the automatic evacuation control is started until an emergency call is made, FIG.
  • FIG. 7 is a time chart for explaining the process from when the automatic evacuation control is started until an emergency call is made
  • FIG. 8 is a diagram showing functional blocks constructed in the control circuit of the HCU.
  • FIG. 9 is a diagram showing the display of the combination meter in the first notification related to the first pre-retraction control
  • FIG. 10 is a diagram showing a display projected by the HUD device in the first notification
  • FIG. 11 is a diagram showing the display of the combination meter in the second notification related to the second pre-retraction control
  • FIG. 12 is a diagram showing a display projected by the HUD device in the second notification
  • FIG. 13 is a diagram showing the display of the CID in the second notification
  • FIG. 14 is a diagram showing the transition of the CID display in the automatic save control execution notification.
  • FIG. 9 is a diagram showing the display of the combination meter in the first notification related to the first pre-retraction control
  • FIG. 10 is a diagram showing a display projected by the HUD device in the first notification
  • FIG. 15 is a diagram showing transition of the display of the combination meter in the execution notification of the automatic evacuation control.
  • FIG. 16 is a diagram illustrating a transition of a display projected by the HUD device in the execution notification of the automatic evacuation control.
  • FIG. 17 is a flowchart showing processing performed by the control circuit of the vehicle control ECU.
  • FIG. 18 is a flowchart showing processing performed by the control circuit of the vehicle control ECU.
  • FIG. 19 is a flowchart showing processing performed by the control circuit of the HCU.
  • FIG. 20 is a flowchart showing processing performed by the control circuit of the HCU.
  • FIG. 21 is a flowchart showing processing performed by the control circuit of the HCU.
  • FIG. 22 is a diagram showing a modification of FIG. FIG.
  • FIG. 23 is a diagram showing a modification of FIG.
  • FIG. 24 is a diagram showing a modification of the progress image and the explanation image.
  • FIG. 25 is a diagram illustrating another modified example of the progress image and the explanation image.
  • FIG. 26 is a block diagram showing the overall configuration of the in-vehicle network of the fifth embodiment
  • FIG. 27 is a diagram showing functional blocks constructed in the control circuit of the HCU
  • FIG. 28 is a time chart for explaining the process from when an abnormality occurs to the driver until automatic evacuation control is started.
  • FIG. 29 is a time chart for explaining a process from when the automatic evacuation control is started until an emergency call is made
  • FIG. 30 is a diagram showing the display of the CID when the hazard switch is operated only once.
  • FIG. 31 is a diagram showing a display of the combination meter in a state where the hazard switch is operated only once.
  • FIG. 32 is a diagram showing still another modified example of the progress image and the explanation image.
  • FIG. 33 is a diagram showing a modification of the passenger notification display,
  • FIG. 34 is a diagram showing a modification of the passenger notification display.
  • the HCU 20 according to the first embodiment to which the present disclosure is applied is an electronic device mounted on the host vehicle A as illustrated in FIGS. 1 and 2.
  • the HCU 20 is one of a plurality of nodes provided in the in-vehicle network 1 mounted on the host vehicle A.
  • the in-vehicle network 1 includes an ADAS locator 96, an in-vehicle communication device 97, a headlight control device 95, an external environment recognition system 90, an HMI system 10, a vehicle control system 60, and the like. These components are connected to a communication bus 99 and can exchange information with each other by communication.
  • the ADAS (Advanced Driver Assistance Systems) locator 96 includes a GNSS (Global Navigation Satellite System) receiver, an inertial sensor such as a gyro sensor, and a memory for storing map data.
  • the ADAS locator 96 measures the position of the host vehicle A by combining signals from a plurality of artificial satellites received by the GNSS receiver and measurement results of the inertial sensor.
  • the ADAS locator 96 reads map data ahead of the host vehicle from the memory, and extracts road information such as the curvature radius of the curve, the rotation angle, and the start position.
  • the ADAS locator 96 outputs the position information of the host vehicle A and road information ahead to the communication bus 99.
  • the in-vehicle communication device 97 is connected to an antenna 98 for wireless communication.
  • the in-vehicle communication device 97 can perform inter-vehicle communication by wireless communication with the in-vehicle communication device of another vehicle A1 (see FIG. 6) located around the host vehicle A.
  • the in-vehicle communication device 97 can perform mobile communication with a base station outside the host vehicle A.
  • the in-vehicle communication device 97 can transmit the information of the own vehicle A output on the communication bus 99 to another vehicle A1 and a call center.
  • the in-vehicle communication device 97 can output the information received from the other vehicle A1 and the information received from the call center or the like to the communication bus 99.
  • the headlamp control device 95 is mainly composed of a microcomputer having a processor and a memory.
  • the headlamp control device 95 includes a plurality of lamps mounted on the vehicle A such as a passing headlamp (low beam), a traveling headlamp (high beam) 95a, a winker (direction indicator), a hazard lamp, and the like. It is connected.
  • the headlamp control device 95 controls the operation of each lamp based on the lamp request information acquired from the communication bus 99.
  • the external environment recognition system 90 includes external sensors such as a front camera unit 92 and radar units 93 and 94, and a surrounding monitoring ECU 91.
  • the outside recognition system 90 includes moving objects such as pedestrians, non-human animals, bicycles, motorcycles, and other vehicles, as well as falling objects on the road, traffic signals, guardrails, curbs, road signs, road markings, lane markings, And detecting static objects such as trees.
  • the external recognition system 90 can include external sensors such as lidar and sonar in addition to the units 92 to 94.
  • the front camera unit 92 is, for example, a monocular or compound eye camera installed near the rearview mirror of the host vehicle A.
  • the front camera unit 92 is directed in the traveling direction of the host vehicle A, and can photograph a range of about 80 meters from the host vehicle A with a horizontal viewing angle of about 45 degrees, for example.
  • the front camera unit 92 sequentially outputs data of a captured image 154 (see FIG. 14A) that shows a moving object, a stationary object, a road in the traveling direction, and the like to the periphery monitoring ECU 91.
  • the radar unit 93 is installed, for example, at the front part of the host vehicle A.
  • the radar unit 93 emits 77 GHz millimeter waves from the transmission antenna toward the traveling direction of the host vehicle A.
  • the radar unit 93 receives millimeter waves reflected by a moving object and a stationary object in the traveling direction by a receiving antenna.
  • the radar unit 93 can scan a range of about 60 meters from the host vehicle A at a horizontal scanning angle of about 55 degrees, for example.
  • the radar unit 93 sequentially outputs the scanning result based on the received signal to the periphery monitoring ECU 91.
  • the radar units 94 are installed on the left and right of the front part and the rear part of the own vehicle A, for example.
  • the radar unit 94 emits a quasi-millimeter wave in the 24 GHz band toward the front and rear sides of the host vehicle A from the transmission antenna.
  • the radar unit 94 receives a quasi-millimeter wave reflected by a moving object, a stationary object, and the like on the front side and the rear side by a receiving antenna.
  • the radar unit 94 can scan a range of about 30 meters from the host vehicle A at a horizontal scanning angle of about 120 degrees, for example.
  • the radar unit 94 sequentially outputs the scanning result based on the received signal to the periphery monitoring ECU 91.
  • the periphery monitoring ECU 91 is mainly configured by a microcomputer having a processor and a memory.
  • the periphery monitoring ECU 91 is connected to the front camera unit 92 and the radar units 93 and 94 so as to communicate with each other.
  • the surrounding monitoring ECU 91 detects the relative position and the like of a moving object and a stationary object (hereinafter “detected object”) in the traveling direction by integrating information acquired from the units 92 and 93.
  • the periphery monitoring ECU 91 detects the relative positions of detected objects on the front side and the rear side based on information acquired from the radar unit 94.
  • the peripheral monitoring ECU 91 outputs the relative position information of the preceding and parallel vehicles traveling around the host vehicle A, the shape information of the lane marking in the traveling direction of the host vehicle A, and the like as monitoring information to the communication bus 99. .
  • the peripheral monitoring ECU 91 determines whether or not a lane change to the adjacent lane is possible based on detection of another vehicle A1 (see FIG. 6) traveling in the adjacent lane, and communicates the determination result as monitoring information. Output to bus 99.
  • the periphery monitoring ECU 91 acquires the search request information from the communication bus 99
  • the surrounding monitoring ECU 91 uses the position information and road information acquired from the ADAS locator 96 and the information acquired from the units 92 and 93 to perform automatic retraction control to be described later.
  • the peripheral monitoring ECU 91 outputs the position information of the retreat location set by the search to the communication bus 99. Further, the periphery monitoring ECU 91 outputs image data of a captured image 154 (see FIG. 14A) by the front camera unit 92 to the communication bus 99.
  • the HMI system 10 includes a plurality of display devices such as a combination meter 12, a CID 13, and a HUD device 14.
  • the HMI system 10 includes an audio speaker 112, an ultrasonic speaker 113, and the like as acoustic devices that perform information notification by voice.
  • the HMI system 10 is provided with a plurality of operation devices 15, a DSM (Driver Status Monitor) 11, an HCU (HMI (Human Machine Interface) Control Unit), and the like.
  • the HMI system 10 presents information to the driver of the host vehicle A seated in the driver's seat 17d and other passengers of the host vehicle A.
  • the combination meter 12 is disposed in front of the driver's seat 17d in the passenger compartment of the host vehicle A.
  • the combination meter 12 has a liquid crystal display.
  • the liquid crystal display is provided with a display screen 12a that can be viewed by a driver sitting in the driver's seat 17d.
  • the combination meter 12 displays an image of the speedometer 41 and the like on the display screen 12a of the liquid crystal display based on the image data acquired from the HCU 20.
  • the CID (Center Information Display) 13 is disposed above the center cluster in the passenger compartment of the host vehicle A and is accommodated in the instrument panel 19.
  • the CID 13 has a liquid crystal display.
  • the liquid crystal display is provided with a display screen 13a that is visible not only to the driver but also to passengers of the vehicle excluding the driver, for example, passengers sitting on the passenger seat 17p.
  • the display screen 13a has a longitudinal shape whose longitudinal direction is the width direction WD of the host vehicle A in which the driver's seat 17d and the passenger seat 17p are arranged.
  • the CID 13 displays a navigation guidance screen, an air conditioner operation screen, an audio device operation screen, and the like on the liquid crystal display based on the image data acquired from the HCU 20.
  • the HUD (Head-Up Display) device 14 projects the light of the image based on the image data acquired from the HCU 20 onto the projection area 14 a defined by the windshield 18.
  • the light of the image reflected on the vehicle interior side by the windshield 18 is perceived by the driver sitting in the driver's seat 17d.
  • the driver can visually recognize the virtual image of the image projected by the HUD device 14 on the outside scene in front of the host vehicle A.
  • the audio speaker 112 is located inside the door lining of the host vehicle A, and is located beside the driver seat 17d and the passenger seat 17p.
  • the audio speaker 112 reproduces sound that can be heard by all the passengers of the vehicle A.
  • the audio speaker 112 can notify all occupants by information to be reproduced.
  • a pair of ultrasonic speakers 113 are installed in the passenger compartment of the host vehicle A, in front of the driver's seat 17d and above the windshield 18.
  • the ultrasonic speaker 113 outputs ultrasonic waves with high directivity toward the vicinity of the headrest of the driver's seat 17d.
  • the ultrasonic speaker 113 generates audible sound due to distortion generated in the ultrasonic wave propagating in the air.
  • the ultrasonic speaker 113 reproduces a sound that can be heard only by the driver sitting in the driver's seat 17d among the passengers of the own vehicle A.
  • the ultrasonic speaker 113 can notify information only to the driver by the reproduced voice.
  • the installation position of the ultrasonic speaker 113 can be changed as appropriate as long as the ultrasonic waves can be directly emitted toward the vicinity of the headrest.
  • the ultrasonic speaker 113 can be installed, for example, at the base of the pillar on the side of the windshield 18.
  • the operation device 15 includes a steering switch 15a and a hazard switch 15b.
  • the steering switch 15a is disposed in a spoke spoke portion of the host vehicle A.
  • An operation for changing settings of the HMI system 10 and the vehicle control system 60 is input to the steering switch 15a by the driver.
  • the hazard switch 15b is arranged in a center cluster provided in the vehicle interior.
  • An operation for blinking the hazard lamp of the host vehicle A is input to the hazard switch 15b by the driver or the occupant.
  • the steering switch 15a and the hazard switch 15b output an operation signal based on an operation input to the HCU 20.
  • the DSM 11 includes a near-infrared light source and a near-infrared camera and a control unit for controlling them.
  • the DSM 11 is disposed on the upper surface of the instrument panel 19 in a posture in which the near-infrared camera faces the driver's seat 17d.
  • the DSM 11 photographs a driver's face irradiated with near infrared light from a near infrared light source with a near infrared camera.
  • the image captured by the near-infrared camera is analyzed by the control unit.
  • the control unit extracts, for example, the direction of the driver's face and the degree of eye opening from the captured image.
  • the DSM 11 outputs a detection signal indicating a driver abnormality to the HCU 20.
  • the HCU 20 includes a main processor 21, a drawing processor 22, a rewritable nonvolatile memory 23, an input / output interface 24 for inputting / outputting information, and a control circuit 20a having a bus connecting them.
  • the HCU 20 is connected to each display device, each acoustic device, the operation device 15, the DSM 11, and the like.
  • the HCU 20 acquires an operation signal output from the steering switch 15 a and the hazard switch 15 b and a detection signal output from the DSM 11.
  • the HCU 20 controls the display by these display devices by outputting control signals and image data to the respective display devices.
  • the HCU 20 outputs sound data to each sound device, thereby causing the sound devices to reproduce sound.
  • the vehicle control system 60 includes operation detection sensors such as an accelerator position sensor 61, a brake pedal force sensor 62, and a steering torque sensor 63, and a vehicle speed sensor 64 that detects the traveling state of the host vehicle A.
  • the vehicle control system 60 includes a travel control device such as an electronic control throttle 66, a brake actuator 67, and an EPS motor 68, and a vehicle control ECU 70.
  • the vehicle control system 60 controls the traveling of the host vehicle A based on the driving operation by the driver, the monitoring information by the external environment recognition system 90, the position information by the ADAS locator 96, road information, and the like.
  • the accelerator position sensor 61 detects the amount of depression of the accelerator pedal by the driver and outputs it to the vehicle control ECU 70.
  • the brake pedaling force sensor 62 detects the pedaling force of the brake pedal by the driver and outputs it to the vehicle control ECU 70.
  • the steering torque sensor 63 detects the steering torque of the steering by the driver and outputs it to the vehicle control ECU 70.
  • the vehicle speed sensor 64 detects the current traveling speed of the host vehicle A and outputs it to the vehicle control ECU 70.
  • the electronic control throttle 66 controls the opening of the throttle based on a control signal output from the vehicle control ECU 70.
  • the brake actuator 67 controls the braking force generated on each wheel by generating a brake pressure based on a control signal output from the vehicle control ECU 70.
  • An EPS motor (Electric Power Steering) 68 controls the steering force and the steering force applied to the steering mechanism based on a control signal output from the vehicle control ECU 70.
  • the vehicle control ECU (Electronic Control Unit) 70 is one or a plurality of types including at least an integrated control ECU among a power unit control ECU, a brake control ECU, and an integrated control ECU.
  • the vehicle control ECU 70 includes a processor 71, a rewritable nonvolatile memory 73, an input / output interface 74 for inputting / outputting information, and a control circuit 70a having a bus for connecting them.
  • the vehicle control ECU 70 is connected to the sensors 61 to 64 and the travel control devices.
  • the vehicle control ECU 70 acquires detection signals output from the sensors 61 to 64 and outputs control signals to the travel control devices.
  • the vehicle control ECU 70 outputs detection signals from the sensors 61 to 64 to the communication bus 99 as vehicle information.
  • the vehicle control ECU 70 is provided with a plurality of driving support functions for supporting or acting on behalf of the driver by controlling the driving force, braking force, steering force, and the like of the host vehicle A.
  • the driving support function includes a cruise control function and a lane departure prevention function.
  • the vehicle control ECU 70 activates these driving support functions based on an input of an operation to the steering switch 15a by the driver.
  • the cruise control function is described as ACC (Adaptive Cruise Control)
  • LKA Lane Keeping Assist
  • the vehicle control ECU 70 controls the traveling speed of the host vehicle A by adjusting the driving force and the braking force based on the monitoring information of the preceding vehicle acquired from the surrounding monitoring ECU 91.
  • the ACC causes the host vehicle A to travel at a constant speed at the target speed set by the driver.
  • the ACC causes the host vehicle A to follow the preceding vehicle while maintaining the inter-vehicle distance to the preceding vehicle.
  • the vehicle control ECU 70 controls the steering force and the holding force based on the shape information of the lane markings in the traveling direction acquired from the surrounding monitoring ECU 91.
  • the LKA causes the host vehicle A to travel along the lane by applying a steering force to the steering in a direction that prevents the approach to the lane marking.
  • the road information output by the ADAS locator 96 may be used for vehicle control by the ACC and LKA.
  • the vehicle control ECU 70 automatically moves the host vehicle A when the driver is in a state where it is difficult for the driver to continue driving (hereinafter, “driving difficult state”).
  • Automatic evacuation control to stop the vehicle can be implemented.
  • the vehicle control ECU 70 causes the periphery monitoring ECU 91 to search for a evacuation place where the own vehicle A is stopped.
  • the vehicle control ECU 70 moves the host vehicle A to the evacuation place set by the search by the periphery monitoring ECU 91 and stops the host vehicle A at the evacuation place.
  • the vehicle control ECU 70 can perform pre-retreat control that assists the driving operation of the driver by automatically starting the above-described driving support function before starting the automatic retraction control.
  • the control circuit 70a of the vehicle control ECU 70 executes a program stored in the memory 73 by the processor 71, thereby constructing a plurality of functional blocks (80 to 89).
  • FIG. 3 details of the functional blocks related to the automatic evacuation control and the pre-evacuation control will be described based on FIG. 3 with reference to FIG. 1 and FIG.
  • the anomaly information acquisition unit 81 acquires detection information by the DSM 11 via the HCU 20 and the communication bus 99. When the driver's abnormality detection continues, the abnormality information acquisition unit 81 continues to acquire the detection information from the DSM 11.
  • the reaction determination unit 86 determines whether or not the driver has reacted to the notification performed by the abnormality notification unit 84 or the like based on the change in the driver's state detected by the DSM 11.
  • the operation accepting unit 88 can accept a driving operation by the driver based on an operation signal output from each of the sensors 61 to 63.
  • the operation reception unit 88 receives a driving operation by the driver after the start of the pre-retraction control and before the start of the automatic retraction control. On the other hand, after the automatic evacuation control is started, the operation receiving unit 88 prohibits the driver from receiving a driving operation.
  • the state determination unit 80 can perform provisional determination and formal determination that the driver is in an abnormal state, and determination that the driver is in a difficult driving state.
  • the provisional determination of the abnormal state of the driver is performed before the formal determination of the abnormal state.
  • the temporary determination of the abnormal state is performed when the abnormality detection by the DSM 11 continues for the first threshold time TH1 (see FIG. 4).
  • the first threshold time TH1 is set depending on the abnormality detection resolution of the DSM 11. For example, if the DSM 11 repeats detection every 0.1 seconds, the state determination unit 80 performs provisional determination when abnormality detection continues continuously a plurality of times (for example, about 3 to 5 times). . In this case, the first threshold time TH1 is 0.3 to 0.5 seconds. By setting the first threshold time TH1, erroneous detection of an abnormal state by the DSM 11 can be eliminated.
  • the official determination of the abnormal state of the driver is performed based on the continuation of the abnormality detection of the driver after the provisional determination of the abnormal state and before the determination that the driver is in a difficult driving state.
  • the formal determination of the abnormal state is performed when the abnormality detection by the DSM 11 continues for the second threshold time TH2 (for example, 2.0 seconds, see FIG. 4).
  • the second threshold time TH2 is set longer than a general upper limit time (about 1.6 seconds) for the driver to look aside. Such a setting of the second threshold time TH2 avoids a situation in which an aside is misjudged as an abnormal state.
  • the determination that the driver is in a difficult driving state is carried out when the abnormality detection of the driver acquired by the abnormality information acquisition unit 81 continues further. Specifically, when there is no response operation by the driver between the official determination of the abnormal state and the elapse of a preset response time AT (3 to 8 seconds, see FIG. 4), the state determination unit 80 Determines that the driver is in a difficult driving state.
  • the response time AT is set to a time that is generally sufficient for the driver who has recognized the abnormality detection notification from the HMI system 10 to input the response operation.
  • the response operation is, for example, an operation of pushing the steering switch 15a.
  • the determination that the vehicle is in the driving difficulty state is also performed when the confirmation operation for determining the driving difficulty state is performed during the response time AT.
  • the confirmation operation is an operation of pushing the steering switch 15a different from the response operation, for example.
  • the evacuation control unit 82 starts the automatic driving control based on the state determination unit 80 determining that the driver is in a driving difficulty state.
  • the retreat control unit 82 performs integrated control of the travel control devices such as the electronic control throttle 66, the brake actuator 67, and the EPS motor 68, so that the host vehicle A follows the planned travel route to the retreat location set by the peripheral monitoring ECU 91. Move. Then, the retreat control unit 82 stops the host vehicle A at the retreat location.
  • the support control unit 83 starts control (driving support control) by a driving support function including at least LKA from when an abnormality is detected until it is determined as a driving difficulty state. After detecting the driver's abnormality, the support control unit 83 activates LKA before other support functions among the plurality of support functions included in the drive support control.
  • the support control unit 83 operates the LKA based on a provisional determination before it is officially determined to be in an abnormal state. Thereafter, the support control unit 83 operates the ACC as another support function different from the LKA based on the formal determination that the state is abnormal. The support control unit 83 stops the driving support control when the driving operation is received by the operation receiving unit 88 after the driving support control is started.
  • the abnormality notification unit 84 and the transition notification unit 85 control each display device and each acoustic device of the HMI system 10 based on the notification request information output to the HCU 20.
  • the abnormality notifying unit 84 notifies the driver of the content of the abnormality detected by the DSM 11 (for example, posture collapse) based on the start of the driving support control accompanying the temporary determination of the abnormal state by the display device.
  • the transition notification unit 85 notifies the driver of the transition to automatic evacuation control by using each display device and each acoustic device.
  • the search control unit 87 causes the periphery monitoring ECU 91 to search for a retreat location where the host vehicle A is stopped in the automatic retraction control based on the search request information output to the periphery monitoring ECU 91.
  • the search control unit 87 can cause the periphery monitoring ECU 91 to start searching for a evacuation place after the abnormality of the driver is detected and before the state determination unit 80 determines that the driving is difficult. Specifically, the periphery monitoring ECU 91 starts searching for an evacuation location based on the formal determination of the abnormal state.
  • the vehicle outside notification unit 89 starts a process for urging the other vehicle A1 (see FIG. 6) traveling around the host vehicle A to vigilance. .
  • the vehicle outside notification unit 89 causes the other vehicle A1 to transmit information indicating that the driver of the host vehicle A is in a driving difficulty state based on the transmission request information output to the in-vehicle communication device 97.
  • the vehicle outside notification unit 89 causes the hazard lamp of the host vehicle A to blink according to the lighting request information output to the headlight control device 95 and starts to turn on the traveling headlight 95a.
  • the driver When the driver's consciousness is lost (T1), the driver then loses posture (T2).
  • the posture collapse can be immediately detected by the DSM 11.
  • the vehicle control ECU 70 makes a temporary determination of an abnormal state (T3). Based on this temporary determination, the LKA operation is started as the first pre-retraction control.
  • the HMI system 10 performs the first notification based on the provisional determination based on the notification request information output from the vehicle control ECU 70 to the HCU 20.
  • the vehicle control ECU 70 When the posture collapse continues for the second threshold time TH2, the vehicle control ECU 70 officially determines the abnormal state (T4). Based on this formal determination, the operation of the ACC is started together with the LKA as the second pre-evacuation control. In addition, the search for the evacuation location by the periphery monitoring ECU 91 is started. Furthermore, the second notification is performed by the HMI system 10 based on the notification request information output from the vehicle control ECU 70 to the HCU 20.
  • the driver is inquired about whether or not automatic evacuation control can be performed.
  • the driver in a normal state can operate the steering switch 15a corresponding to “Yes”.
  • the shift to the automatic evacuation control is canceled.
  • the driver who is in a mild driving difficulty state can operate the steering switch 15a corresponding to “No”.
  • the shift to the automatic evacuation control is forcibly performed without waiting for the response time AT to elapse.
  • the vehicle control ECU 70 Before the response time AT elapses from the official determination, the vehicle control ECU 70 starts braking control for slowing down the host vehicle A (T5). Then, based on the elapse of the response time AT, the vehicle control ECU 70 determines that the driver is in a driving difficulty state (T6). Based on the determination of the difficult driving state, the vehicle control ECU 70 shifts the control mode of the host vehicle A from the pre-retraction control to the automatic retraction control.
  • the vehicle control ECU 70 starts a setting process.
  • a setting process a evacuation place where the host vehicle A is stopped and a planned travel route to the evacuation place are set.
  • the vehicle control ECU 70 may set the evacuation location and the planned travel route, and the vehicle control ECU 70 may acquire at least one of the evacuation location and the planned travel route set by the periphery monitoring ECU 91.
  • a process for notifying the other vehicle A1 traveling in the vicinity of the difficult driving state is performed.
  • warning delivery by vehicle-to-vehicle communication based on transmission request information to the in-vehicle communication device 97, blinking of a hazard lamp, lighting of a headlight for traveling 95a, and the like are performed. Further, based on the notification request information output from the vehicle control ECU 70 to the HCU 20, an automatic retreat control execution notification is performed by the HMI system 10.
  • the vehicle control ECU 70 shifts the automatic evacuation control process to the movement process.
  • the host vehicle A is moved based on the planned travel route.
  • a lane change to an adjacent lane is performed in the movement process as necessary.
  • the lane change is set to a standby state based on the determination that the lane change is impossible.
  • the lane change impossibility determination is canceled, the lane change to the adjacent lane is started (T8).
  • the vehicle control ECU 70 slowly decelerates the host vehicle A to a speed at which it can be easily stopped.
  • the vehicle control ECU 70 shifts the automatic evacuation control process to the stopping process.
  • the vehicle control ECU 70 causes the host vehicle A to leave the traveling lane.
  • the vehicle control ECU 70 causes the braking force to act on the own vehicle A that has retreated to the road shoulder, the roadside belt, etc., and stops the own vehicle A at the intended retreat location (T11).
  • the vehicle control ECU 70 shifts the automatic evacuation control process to the call process (T12).
  • the call process contact is made with a preset call center.
  • the vehicle control ECU 70 ends the automatic evacuation control (T13).
  • the HMI system 10 presents information such as the first notification, the second notification, and the execution notification to the driver and the occupant.
  • the execution notification the transition from the setting process to the traveling process, the transition from the traveling process to the stopping process, and the transition from the stopping process to the calling process are notified to the passenger of the own vehicle A by the HMI system 10.
  • the control circuit 20a of the HCU 20 shown in FIG. 2 constructs a plurality of functional blocks (31 to 36) by executing the program stored in the memory 23 by each of the processors 21 and 22. .
  • FIGS. 1 and 2 details of these functional blocks will be described with reference to FIGS. 1 and 2 based on FIG. 8.
  • the information acquisition unit 31 acquires various information output to the communication bus 99.
  • the information acquisition unit 31 includes vehicle information such as the traveling speed output to the communication bus 99 by the vehicle control ECU 70, notification request information for instructing the execution of each notification, operation information for each of the driving support function and the automatic evacuation control.
  • the operation information of the driving support function includes information such as whether or not ACC and LKA are activated.
  • the operation information of the automatic evacuation control includes information indicating a process currently being executed, information indicating an evacuation location and a planned travel route, etc., among a plurality of processes executed in the automatic evacuation control.
  • the image acquisition unit 32 acquires data of a captured image 154 (see FIG. 14) output to the communication bus 99 by the periphery monitoring ECU 91.
  • the captured image 154 is a camera image in the traveling direction captured by the front camera unit 92.
  • the captured image 154 includes a scheduled travel route set by automatic evacuation control.
  • the illumination requesting unit 33 controls the operation of the traveling headlamp 95a by outputting the lighting request information to the headlamp control device 95, similarly to the vehicle outside notification unit 89 (see FIG. 3).
  • the lighting request unit 33 causes the headlamp control device 95 to start lighting with the traveling headlamp 95a when the operation information of the automatic retraction control is acquired.
  • the planned travel route can be visually recognized at night and in tunnels where there is little external light.
  • the planned travel route is clearly captured in the captured image 154 (see FIG. 14).
  • the reproduction request unit 34 outputs audio data to the audio speaker 112 and the ultrasonic speaker 113, thereby causing the speakers 112 and 113 to reproduce audio.
  • the reproduction request unit 34 reproduces a sound for notifying the occupant of the contents of the process after the transition so that it can be heard by all occupants based on the transition of the process executed by the automatic evacuation control.
  • the display generation unit 35 generates each display of the display screen 12a of the combination meter 12, the display screen 13a of the CID 13, and the projection area 14a of the HUD device 14.
  • the display generation unit 35 generates each display of the first notification and the second notification when the pre-retreat control is operating (see FIGS. 9 to 13).
  • the display generation unit 35 displays the occupant notification display 150 (see FIG. 14) displayed on the display screen 13a and the operation displayed on the display screen 12a and the projection area 14a when the automatic evacuation control is operating.
  • Person notification displays 140 and 146 are generated.
  • the emergency call unit 36 makes an emergency call to a preset call center after completing the movement and stopping to the evacuation site by automatic evacuation control.
  • the emergency call unit 36 can acquire the current position of the host vehicle A and transmit the acquired information to the call center through the in-vehicle communication device 97.
  • the combination meter 12 displays an indicator 41a indicating the LKA operation in addition to the other displays as shown in FIG. It is displayed on 13a.
  • the HUD device 14 projects an indicator 46a indicating the operation of the LKA and a posture collapse icon 45 indicating the detection of posture collapse on the projection region 14a.
  • a notification sound for notifying the driver of the detection of posture collapse is reproduced by the ultrasonic speaker 113.
  • the combination meter 12 has an indicator 41b indicating the operation of ACC and a message image 42 in addition to the LKA indicator 41a as shown in FIG. Is displayed on the display screen 12a.
  • the message image 42 is an image that informs the driver of the contents of the detected abnormality and the advance notice of shift to automatic evacuation control by text.
  • the message image 42 notifies the driver of an operation for canceling the shift to the automatic evacuation control and an operation for starting the forced shift to the automatic evacuation control to the driver.
  • the background portion 42a of the message image 42 is displayed in a red color such as amber (orange) or red that causes an urgency in order to prompt the driver to take an action in a state where the driver can or can recover. Is displayed.
  • the HUD device 14 projects an indicator 46b indicating the operation of the ACC in addition to the LKA indicator 46a onto the lower edge area of the projection area 14a.
  • the HUD device 14 projects a message image 47 and an operation icon 48 on the central area of the projection area 14a. Similar to the message image 42 (see FIG. 8) displayed on the combination meter 12, the message image 47 notifies the driver of the detected abnormality content and the advance notice of transition to automatic evacuation control by text.
  • the background portion 47a of the message image 47 is displayed in a red color as in the background portion 42a (see FIG. 11) of the combination meter 12.
  • the operation icon 48 informs the driver that the shift to automatic evacuation control and the forced shift to automatic evacuation control can be performed by operating the steering switch 15a (see FIG. 1).
  • the CID 13 displays the posture collapse icon 50 and the message image 51 on the display screen 13a as shown in FIG.
  • the posture collapse icon 50 and the message image 51 have substantially the same shape as the posture collapse icon 45 and the message image 47 (see FIG. 9) projected on the projection region 14a.
  • the display by CID13 can also be visually recognized by a passenger of the own vehicle A (see FIG. 1) other than the driver. Therefore, the color of the background portion 51a of the message image 51 is different from the color of the background portions 42a and 47a of the message images 42 and 47 directed to the driver. Specifically, the background portion 51a of the message image 51 is displayed in a green color so as to give the passenger a sense of security.
  • the notification sound based on the official determination is reproduced by the audio speaker 112 toward the passenger.
  • the audio speaker 112 utters a guide voice for notifying the shift to the automatic driving control toward the passenger after the notification sound.
  • the audio speaker 112 reproduces, for example, a message such as “An attitude change has been detected. The vehicle will move to evacuation soon. To cancel, press the steering switch.”
  • the CID 13 displays an occupant notification display 150 on the display screen 13a as shown in FIG.
  • the occupant notification display 150 displays information related to the automatic evacuation control mainly when the operation information of the automatic evacuation control is acquired by the information acquisition unit 31 (see FIG. 8). It is a display to notify. 14A to 14D show aspects of the passenger notification display 150 in the setting process, the movement process, the stop process, and the call process, respectively.
  • the occupant notification display 150 has a horizontally long shape, similar to the display screen 13a.
  • the occupant notification display 150 includes a progress image 151, an explanation image 152, a message image 153, a captured image 154, and a map image 156.
  • the progress image 151 is an image formed in a circular shape.
  • the progress image 151 is divided into a plurality (four) of regions in the circumferential direction.
  • the progress image 151 indicates a region corresponding to the currently executing process by periodically repeating (blinking) a bright state and a dark state.
  • the progress image 151 blinks a specific area corresponding to the completed process briefly according to the notification sound.
  • the progress image 151 maintains the area corresponding to the completed process in a lighting state.
  • the progress image 151 moves the area to be blinked clockwise and increases the area to be lit one by one.
  • the progress image 151 can indicate the current degree of progress in the automatic evacuation control step by step.
  • the blinking accompanying the completion of the process allows the progress image 151 to inform the occupant that the process has been completed and to give a sense of security.
  • a specific area corresponding to the process being executed can be blinked as the background of the explanation image 152.
  • the time during which the bright state is maintained (for example, 0.7 seconds) is set longer than the time during which the dark state is maintained by turning off the light (0.3 seconds).
  • the cycle of blinking each region (for example, 1.0 second) is set to be approximately the same as the normal heart rate of a human.
  • the explanation image 152 is an image that explains, by text, a process that is currently being executed among a plurality of processes that are executed by the automatic saving control. Specifically, the description image 152 displays character groups such as “evacuation route setting”, “evacuation location movement”, “evacuation location stop”, and “emergency call”. In the explanation image 152, each character group is displayed on each area of the progress image 151 one by one. The explanation image 152 and the progress image 151 are displayed in a range closer to the driver's seat 17d (see FIG. 1) than to the passenger seat 17p (see FIG. 1) in the display screen 13a.
  • the message image 153 is an image that guides by text the current running by the automatic evacuation control and the coping action to the automatic evacuation control being executed.
  • the message image 153 includes, for example, a message “retreating traveling” and an operation method for stopping the automatic retraction control.
  • the message image 153 is displayed in the upper edge area of the display screen 13a.
  • the content of the message image 153 has been changed from a message (FIGS. 14A to 14C) notifying travel by automatic evacuation control to a message (FIG. 14D) notifying the execution of an emergency call in accordance with the transition to the call process.
  • the message image may be changed to a message image that recommends staying in the vehicle, such as “please refrain from going outside the vehicle”.
  • the captured image 154 is an image captured by the front camera unit 92 (see FIG. 2).
  • a planned travel route scheduled for travel by automatic retraction control is shown.
  • a route explicit image portion 155 formed in an arrow shape is superimposed.
  • the route explicit image unit 155 is drawn based on the information on the planned travel route set by the automatic evacuation control.
  • the route explicit image unit 155 can clearly indicate the planned travel route that appears in the captured image 154.
  • the captured image 154 is displayed side by side with the map image 156 in the horizontal direction.
  • the map image 156 is an image showing the evacuation place set by the automatic evacuation control to the occupant together with the road shape around the host vehicle A (see FIG. 1). Specifically, the map image 156 displays a host vehicle icon 156a indicating the position of the host vehicle A, a road image portion 156b indicating a road shape around the host vehicle A, and a stop icon 156c indicating a retreat location. The The map image 156 is displayed on the passenger seat 17p side of the captured image 154 in the display screen 13a.
  • the combination meter 12 displays a driver notification display 140 on the display screen 12a as shown in FIG.
  • the driver notification display 140 is a display for notifying a driver sitting on the driver's seat 17d (see FIG. 1) of information related to the automatic evacuation control.
  • 15A to 15D show aspects of the driver notification display 140 in the setting process, the movement process, the stop process, and the call process, respectively.
  • the driver notification display 140 is displayed on the display screen 12a in a form superimposed on the normal display of the combination meter 12.
  • the driver notification display 140 includes a progress image 141, an explanation image 142, and a guidance image 143.
  • the progress image 141 is an image having substantially the same form as the progress image 151 (see FIG. 14) of the occupant notification display 150, and the region to be blinked is moved clockwise in accordance with the transition of the automatic evacuation control process. . With such display, the progress image 141 can indicate the current degree of progress in the automatic evacuation control.
  • the explanation image 142 is an image having substantially the same form as the explanation image 152 (see FIG. 14) of the occupant notification display 150 and is superimposed on the progress image 141.
  • the progress image 141 and the explanation image 142 are arranged in the center of the display screen 12a. In the first embodiment, the number of processes shown in the progress image 151 of the passenger notification display 150 and the number of processes shown in the progress image 141 of the driver notification display 140 are set to be the same.
  • the guidance image 143 is an image that guides the coping action to the automatic evacuation control being executed by characters, like the message image 153 (see FIG. 14) of the passenger notification display 150.
  • the guide image 143 is arranged, for example, on the right side of the progress image 141 and the explanation image 142 on the display screen 12a.
  • the guidance image 143 is changed from a message (FIGS. 15A to 15C) describing a method for canceling automatic evacuation control to an icon (FIG. 15D) indicating the execution of an emergency call in accordance with the transition to the call process.
  • the HUD device 14 displays a driver notification display 146 in the projection area 14a as shown in FIG.
  • the driver notification display 146 is a display for notifying the driver of information related to the automatic evacuation control together with the driver notification display 140 (see FIG. 15) of the combination meter 12.
  • FIGS. 16A to 16D respectively show aspects of the driver notification display 146 in the setting process, the movement process, the stop process, and the call process.
  • the driver notification display 146 includes at least a message image 148.
  • the message image 148 is an image that guides by text that the vehicle is currently being driven by the automatic evacuation control, similarly to the message image 153 (see FIG. 14) of the passenger notification display 150.
  • the message image 148 is displayed in the lower edge area of the projection area 14a.
  • the content of the message image 148 has been changed from a message (FIGS. 16A to 16C) notifying travel by automatic evacuation control to a message (FIG. 16D) notifying the execution of an emergency call in accordance with the transition to the call process.
  • a notification sound and a voice message are reproduced by the audio speaker 112 shown in FIG. 1 in accordance with the shift of the automatic saving control process.
  • the audio speaker 112 reproduces a voice “starting evacuation” (T6, voice 1 in FIG. 7).
  • the audio speaker 112 reproduces a sound “The evacuation location has been set”.
  • a voice “moving to the evacuation location” is played (T7, voice 2 in FIG. 7).
  • a voice “The lane change is completed” is reproduced (T9, voice 4 in FIG. 7).
  • the voice “Stopping at a safe place soon” is played (T10, voice 5 in FIG. 7). Then, when the vehicle stops at the evacuation site, the voice “Stopped at the evacuation site” is reproduced (T11, audio 6 in FIG. 7). Furthermore, at the time of transition from the stop process to the call process, a voice message “Contacting the call center about the evacuation location” is reproduced (T12, voice 7 in FIG. 7).
  • FIGS. 17 and 18 Details of processing performed by the control circuit 70a before the start of the automatic evacuation control will be described based on FIGS. 17 and 18 with reference to FIGS.
  • the processing shown in the flowcharts of FIGS. 17 and 18 is started by the control circuit 70a based on the fact that the host vehicle A can travel by switching the selector lever 16 (see FIG. 1) to the D range.
  • S101 based on the information detected by the DSM 11, it is determined whether or not there is a possibility that the driver has an abnormality. If the abnormality detection is continued beyond the first threshold time TH1, in S101, a provisional determination (T3 in FIG. 4) that the driver may be abnormal is performed, and the process proceeds to S102. In S102, the first notification is performed using the HMI system 10, and the process proceeds to S103. On the other hand, when the abnormality detection does not exceed the first threshold time TH1, S101 is repeated and the driver's monitoring is continued.
  • S103 it is determined whether or not the driving support function is operating. When both LKA and ACC are operating, the process proceeds to S107. On the other hand, when at least one of LKA and ACC is not operating, the process proceeds to S104. In S104, the LKA is activated by the start of the first pre-evacuation control, and the process proceeds to S105.
  • S105 based on the information detected by the DSM 11, it is determined whether or not the driver is in an abnormal state. If the abnormality detection does not continue beyond the second threshold time TH2, the process proceeds to S113.
  • S113 it is determined from the driving posture based on the detection information of the DSM 11 and the steering force by the steering torque sensor 63 whether or not the driver can drive properly.
  • the process proceeds to S114.
  • S114 for example, a display for alerting a side look is performed, and the process returns to S113.
  • the process proceeds to S115.
  • the LKA is stopped to shift to manual operation, and the process returns to S101.
  • S107 it is determined whether or not the driver is in an abnormal state. If the abnormality detection does not continue beyond the second threshold time TH2, the process returns to S101. On the other hand, if the abnormality detection is continued, a formal determination (T4 in FIG. 4) that the driver is in an abnormal state is made in S107, and the process proceeds to S108.
  • the second notification is performed using the HMI system 10, and the process proceeds to S109.
  • the search request information is output to cause the periphery monitoring ECU 91 to start searching for the evacuation location, and the process proceeds to S110.
  • braking control for slowly decelerating the host vehicle A is started (T5 in FIG. 4), and the process proceeds to S111.
  • S111 it is determined whether or not a condition for shifting to automatic evacuation control is satisfied.
  • the process returns to S101.
  • the shift to the automatic retraction control is agreed by the operation of the “No” button of the steering switch 15a, or when the response time AT has elapsed without the operation of the steering switch 15a, the process proceeds to S112.
  • S112 automatic evacuation control is started, and a series of processing ends.
  • warning distribution by inter-vehicle communication, blinking of a hazard lamp, lighting of the headlight for traveling 95a, etc. are performed as processing for notifying other vehicle A1 of a difficult driving state (FIG. 7, T6). .
  • FIGS. 19 to 21 Details of processing performed by the control circuit 20a after the start of the automatic evacuation control will be described based on FIGS. 19 to 21 with reference to FIGS.
  • the processing shown in the flowcharts of FIGS. 19 to 21 is started by the control circuit 70a based on the fact that the driving difficulty state has been determined.
  • each display by the combination meter 12, CID13, and HUD device 14 is switched to each notification display 140, 150, 146 for execution notification, and the process proceeds to S132.
  • the audio speaker 112 is made to reproduce the sound for notifying the start of evacuation travel, and the process proceeds to S133 (T6, voice 1 in FIG. 7).
  • S133 it is determined whether or not the setting of the evacuation location and the planned travel route by the automatic evacuation control is completed.
  • the process waits until the setting of the evacuation location or the like is completed, and proceeds to S134 based on the completion of the setting of the evacuation location or the like.
  • the audio speaker 112 is made to reproduce the sound for notifying the completion of the save location setting, and the process proceeds to S135.
  • the operation information of the automatic evacuation control is acquired, and it is determined whether or not the process currently being executed in the automatic evacuation control has shifted from the setting process to the movement process.
  • the process waits until the transition to the movement process is completed, and proceeds to S136 based on the completion of the transition to the movement process.
  • an occupant notification display 150 (see FIGS. 14B and 15B) in which the progress images 141 and 151 are changed to a display indicating that the movement process is being performed is generated, and the process proceeds to S137.
  • the audio speaker 112 is caused to reproduce the sound notifying the start of movement, and the process proceeds to S138 (T7, sound 2 in FIG. 7).
  • S138 it is determined whether or not a lane change is necessary based on the information on the planned travel route. If it is determined in S138 that a lane change is necessary, the process proceeds to S139. In S139, the process waits until the lane change is possible, and proceeds to S140 based on the fact that the lane change is possible. In S140, the audio speaker 112 is caused to reproduce the sound for notifying the start of the lane change, and the process proceeds to S141 (T8, voice 3 in FIG. 7).
  • S141 it is determined whether or not the lane change is completed.
  • the process waits until the lane change is completed, and proceeds to S142 based on the completion of the lane change.
  • S142 the audio speaker 112 is caused to reproduce the sound for notifying completion of the lane change (FIG. 7, T9, sound 4), and the process returns to S138. Thereby, in S138, the necessity of a lane change is determined again.
  • S143 the operation information of the automatic evacuation control is acquired, and it is determined whether or not the process currently being executed in the automatic evacuation control has shifted from the moving process to the stopping process.
  • S135 the process waits until the transition to the stopping process is completed, and proceeds to S144 based on the completion of the transition to the stopping process.
  • S144 an occupant notification display 150 (see FIGS. 14C and 15C) in which the progress images 141 and 151 are changed to a display indicating that the movement process is being performed is generated, and the process proceeds to S145.
  • the audio speaker 112 is caused to reproduce the sound that notifies the stop start to the evacuation place, and the process proceeds to S146 (T10, sound 5 in FIG. 7).
  • S146 based on the traveling speed of the own vehicle A, it is determined whether or not the vehicle has stopped at the evacuation site. In S146, it waits until the own vehicle A becomes a stop state, and based on having become the stop state, it progresses to S147. In S147, the audio speaker 112 is caused to reproduce a sound notifying that the vehicle has stopped at the evacuation site, and the process proceeds to S148 (T11, sound 6 in FIG. 7).
  • the operation information of the automatic evacuation control is acquired, and it is determined whether or not the process currently being executed in the automatic evacuation control has shifted from the stop process to the call process.
  • the process waits until the transition to the call process is completed, and proceeds to S149 based on the completion of the transition to the call process.
  • an occupant notification display 150 (see FIGS. 14D and 15D) in which the progress images 141 and 151 are changed to a display indicating that the movement process is being performed is generated, and the process proceeds to S150.
  • the audio speaker 112 is made to reproduce the voice for notifying the call center (FIG. 7, T12, voice 7), and the series of processing ends.
  • the progress image 151 included in the occupant notification display 150 notifies the current degree of progress in automatic evacuation composed of a plurality of processes. Therefore, the occupant can be able to image the entire image of the automatic evacuation control and the end of the automatic evacuation control.
  • the occupant can roughly predict the movement of the host vehicle A traveling without depending on the driver. Accordingly, the occupant notification display 150 can relieve the anxiety of the occupants in the own vehicle A traveling by the automatic evacuation control.
  • the information related to the automatic evacuation control is presented not only to the passenger except the driver but also to the driver. Therefore, in the first embodiment, the progress of the automatic evacuation control is also notified to the driver by the display screen 12a visible to the driver and the driver notification displays 140 and 146 displayed on the projection area 14a. As a result, information presentation that is easy for the driver to understand is realized.
  • the method of canceling the evacuation travel is guided as a coping action to be taken when the automatic evacuation control is activated. Therefore, the driver who has returned from the difficult driving state can take appropriate coping behavior by referring to the guide image 143. In addition, since the coping behavior is also guided to the occupant, the anxiety of the occupant can be further eliminated.
  • the number of processes shown in each of the progress images 141 and 151 is the same. Therefore, for example, even if a driver who has returned from a difficult driving state visually recognizes the combination meter 12 and the CID 13, the driver can grasp the current situation without being confused.
  • operator are mutually different. . Therefore, the green background portion 51a of CID 13 can relieve the passenger's anxiety, while the red background portions 42a and 47a can increase the driver's tension and promote the response. .
  • the progress images 141 and 151 that repeat blinking can attract the driver and the occupant. Therefore, the process currently being executed indicated by the progress images 141 and 151 is easily recognized by the driver and the occupant. Also, the explanation images 142 and 152 are superimposed on the progress images 141 and 151, respectively. Therefore, blinking of the progress images 141 and 151 also makes it possible to attract the explanation images 142 and 152. Further, although the progress images 141 and 151 are displayed in a blinking manner, a long time for maintaining a bright state is secured. Therefore, even if each explanatory image 142,152 is overlapped with each blinking progress image 141,151, it can be an easy-to-read display.
  • a route explicit image portion 155 that clearly indicates the planned travel route is superimposed on the captured image 154 obtained by photographing the traveling direction of the host vehicle A. Therefore, an occupant who visually recognizes the occupant notification display 150 can know in advance the route planned for traveling by automatic evacuation control. As a result, occupant anxiety can be reduced.
  • the operation of the traveling headlamp 95a can notify a vehicle around the host vehicle A that the host vehicle A is not in a normal state.
  • the captured image 154 can clearly display the planned traveling route by illumination of the planned traveling route by the traveling headlamp 95a.
  • the occupant can roughly grasp the distance to the evacuation place where the own vehicle A stops. It becomes. Therefore, it becomes easier for the occupant to imagine the end of the automatic evacuation control. According to such a display, the passenger's anxiety can be further reduced.
  • the process transition in the automatic evacuation control is notified to the occupant not only by display but also by voice. Therefore, it is possible to increase the accuracy of information transmission to the occupant and further reduce occupant anxiety.
  • the progress image 151 and the explanation image 152 are displayed closer to the driver's seat 17d in the display screen 13a. Therefore, a situation in which the progress image 151 or the like becomes difficult to see due to the instrument panel 19 or the like around the display screen 13a can be avoided. As a result, a passenger sitting on the passenger seat 17p can easily view the progress image 151 and the explanation image 152 regardless of the seat position of the passenger seat 17p. Therefore, the effect of reducing the anxiety of the progress image 151 and the explanation image 152 by notifying the progress degree of the automatic evacuation control is surely exhibited.
  • the display screen 12a and the projection area 14a correspond to the “second display area”
  • the display screen 13a corresponds to the “display area” and the “first display area”.
  • the information acquisition unit 31 corresponds to an “operation information acquisition unit”
  • the audio speaker 112 corresponds to a “voice reproduction device”
  • the message image 153 corresponds to a “guidance image”.
  • S135, S143, and S148 correspond to an “operation information acquisition step”
  • S136, S144, and S149 correspond to a “display generation step”.
  • the HCU 20 corresponds to an “information presentation device”.
  • the second embodiment of the present disclosure shown in FIGS. 22 and 23 is a modification of the first embodiment.
  • the display forms of the occupant notification display 250 and the driver notification display 240 in the notification of execution of automatic evacuation control are different from those in the first embodiment.
  • details of each notification display in the second embodiment will be described.
  • the passenger notification display 250 shown in FIG. 22A to 22D show aspects of the passenger notification display 250 in the setting process, the movement process, the stop process, and the call process, respectively.
  • the occupant notification display 250 includes a progress image 251, an explanation image 252, a message image 253, a captured image 254, and a map image 256, as in the first embodiment.
  • the progress image 251 is formed by a combination of an icon indicating “!”, An annular image portion, and an arc-shaped image portion.
  • the circular and arc image portions surround the icon.
  • the arc-shaped image portion is superimposed on the annular image portion.
  • the line width of the arc-shaped image portion is larger than the line width of the annular image portion.
  • the annular image portion extends clockwise along the annular image portion as the process proceeds in the automatic retraction control. With such display, the progress image 251 can continuously indicate the current degree of progress in the automatic evacuation control.
  • the progress image 251 is displayed on the display screen 13a mainly in the movement process and the stop process.
  • the explanation image 252 is displayed at a position away from the progress image 251 on the display screen 13a.
  • the explanation image 252 is superimposed on a flashing background. By such blinking, the sight line of the passenger is guided to the explanation image 252.
  • the message image 253 guides by text that the vehicle is currently running by automatic evacuation control.
  • the message image 253 does not include an operation method for stopping the automatic saving control.
  • the message image 253 is not displayed in the moving process and the stopping process.
  • the captured image 254 is an image captured by the front camera unit 92 (see FIG. 2), similarly to the captured image 154 (see FIG. 14) of the first embodiment.
  • the map image 256 is an image showing the evacuation place set by the automatic evacuation control, and includes a vehicle icon 256a, a road image portion 256b, And a stop icon 256c.
  • the map image 256 is displayed so as to overlap the captured image 254.
  • the captured image 254 is displayed on the display screen 13a mainly in the movement process and the stop process.
  • the map image 256 is displayed on the display screen 13a mainly in the movement process.
  • the driver notification display 240 shown in FIG. FIGS. 23A to 23D show aspects of the driver notification display 240 in the setting process, the movement process, the stop process, and the call process, respectively.
  • the driver notification display 240 includes a progress image 241, an explanation image 242, and guide images 243a and 243b.
  • the progress image 241 is an image having substantially the same form as the progress image 251 (see FIG. 22) of the occupant notification display 250, and the arc-shaped image portion is extended clockwise in accordance with the shift of the automatic evacuation control process. . With such display, the progress image 241 can indicate the current degree of progress in the automatic evacuation control.
  • the explanation image 242 is displayed at a position away from the progress image 241 on the display screen 12a.
  • the explanation image 242 is arranged on the side (for example, the left side) of the progress image 241.
  • the guidance image 243a is an image that guides by text that the vehicle is currently traveling by automatic evacuation control.
  • the guide image 243a is arranged on the left side of the progress image 241.
  • the guide image 243b is an image that guides the coping behavior to the automatic evacuation control being executed by characters.
  • the guide image 243b is arranged on the right side of the progress image 241.
  • the image for guiding the coping behavior is included only in the driver notification display 240 among the driver notification display 240 and the occupant notification display 250 (see FIG. 22).
  • the coping method for stopping the automatic evacuation control is displayed only on the combination meter 12 among the combination meter 12 and the CID 13 so as to be transmitted only to the driver. According to such a display, it is possible to avoid a situation in which a coping action based on an erroneous determination is performed by an impulsive occupant after the shift to automatic evacuation control.
  • FIG. 24 The third embodiment of the present disclosure shown in FIG. 24 is another modification of the first embodiment.
  • the progress image 351 in the notification of execution of automatic evacuation control is different from the progress image 151 (see FIG. 14) of the first embodiment.
  • FIGS. 24A to 24D respectively show aspects of the progress image 351 in the setting process, the movement process, the stop process, and the call process.
  • the progress image 351 is displayed at a position distant from other areas by shifting the area 351a corresponding to the currently executing process among the divided areas to the outer peripheral side.
  • the area 351a is displayed in a blinking manner and is enlarged in the radial direction as compared with other areas.
  • the explanation image 352 superimposed on the area 351a moves to the outer peripheral side together with the area 351a and is displayed in an enlarged manner.
  • the area 351a is reduced and integrated with another area.
  • the progress image 351 can indicate the current degree of progress in the automatic evacuation control in an easy-to-understand manner by moving the area 351a clockwise as the automatic evacuation control process proceeds.
  • the progress image 141 (see FIG. 15) displayed on the combination meter 12 can also be set to a display mode in which a specific area 351a is enlarged, like the progress image 351.
  • the fourth embodiment of the present disclosure illustrated in FIG. 25 is still another modification of the first embodiment.
  • the number of automatic evacuation control processes (six) shown in the progress image 451 of the fourth embodiment is larger than the number of processes (four) shown in the progress image 151 (see FIG. 14) of the first embodiment. There have been many. Therefore, the number of processes shown in the progress image 451 displayed on the CID 13 is larger than the number of processes shown on the progress image 141 (see FIG. 15) displayed on the combination meter 12.
  • the progress image 451 displayed toward the passenger in the passenger seat 17p is more advanced than the progress image 141 (see FIG. 15) displayed toward the driver.
  • the process performed by the evacuation function can be presented in detail. Such detailed information presentation can contribute to the relief of passengers' anxiety.
  • the number shown in the progress image 451 can be changed as appropriate. For example, if the lane change is scheduled to be repeated a plurality of times, the progress image 451 can increase the number of areas by the number of times the lane change is scheduled.
  • the fifth embodiment of the present disclosure shown in FIG. 26 to FIG. 29 is still another modified example of the first embodiment.
  • the air conditioning system 180 and the seat controller 186 included in the in-vehicle network 501 of the host vehicle A are further used for presenting information to the driver and the occupant during the retreat travel.
  • the HMI system 10 according to the fifth embodiment includes two sets of ultrasonic speakers 113 and 114 as acoustic devices that perform voice information notification.
  • the configuration of the fifth embodiment will be described based on FIG. 26 and FIG. 27 with reference to FIG.
  • the air-conditioning system 180 is a vehicle air-conditioning system that acquires air-conditioning request information including air-conditioning-related setting values set by the driver and passengers from the HCU 20 and adjusts the temperature, cleanliness, airflow, and the like in the passenger compartment.
  • the air conditioning system 180 includes an air conditioner unit 182, an aroma unit 183, and an air conditioning control ECU 181.
  • the air conditioner unit 182 generates hot air and cold air that are supplied to the passenger compartment from the air outlets 19d and 19p provided in the instrument panel 19 and the like.
  • the air conditioner unit 182 individually changes the temperature of air blown from the outlet 19d toward the periphery of the driver seat 17d and the temperature of air blown from the outlet 19p toward the periphery of the passenger seat 17p. Is possible.
  • the aroma unit 183 atomizes aroma oil such as essential oil containing an aroma component.
  • the fragrance component atomized by the aroma unit 183 is mixed with the airflow generated by the air conditioner unit 182 and supplied at least from the air outlet 19p on the passenger seat 17p side to the vehicle interior.
  • the fragrance component diffused in the passenger compartment can exert an effect of reducing occupant stress.
  • the air conditioning control ECU 181 is mainly composed of a microcomputer having a processor and a memory.
  • the air conditioning control ECU 181 is connected to the communication bus 99 and receives the air conditioning request information output from the HCU 20 to the communication bus 99.
  • the air conditioning control ECU 181 is connected to the air conditioning unit 182 and the aroma unit 183, and controls the operation of the air conditioning unit 182 and the aroma unit 183 based on the acquired air conditioning request information.
  • the seat controller 186 is a control device that integrally controls the operations of the devices related to the driver's seat 17d and the passenger seat 17p, for example, the seat actuators 187 and 188, the seat heater 189, and the like.
  • the sheet controller 186 is mainly composed of a microcomputer having a processor and a memory.
  • the sheet controller 186 receives the sheet request information output from the HCU 20 through the communication bus 99, and controls the operations of the sheet actuators 187 and 188 and the seat heater 189 based on the sheet request information.
  • the seat actuator 187 makes it possible to adjust the seat position of the driver's seat 17d by changing the positions of the driver's seat 17d and the postures of the seat cushion, the seat back, and the like.
  • the seat actuator 188 makes it possible to adjust the seat position of the passenger seat 17p by changing the front-rear position of the passenger seat 17p and the postures of the seat cushion and the seat back.
  • the seat heater 189 can warm the seat cushion and the seat back of the passenger seat 17p.
  • a pair of ultrasonic speakers 114 are installed in the passenger compartment of the host vehicle A, in front of the passenger seat 17p and above the windshield 18.
  • the ultrasonic speaker 114 has substantially the same configuration as the ultrasonic speaker 113 provided on the driver's seat 17d side.
  • the ultrasonic speaker 114 outputs ultrasonic waves with high directivity toward the vicinity of the headrest of the passenger seat 17p.
  • the ultrasonic speaker 114 reproduces a sound that can be heard only by a driver sitting in the passenger seat 17p among the passengers of the host vehicle A.
  • the ultrasonic speaker 114 can notify information only to the passenger in the passenger seat 17p by the reproduced sound.
  • the control circuit 20a of the HCU 20 executes the program stored in the memory 23 by each of the processors 21 and 22, and in addition to the functional blocks (31 to 36) substantially the same as those of the first embodiment, the air conditioning control request unit 137 and the sheet control request unit 138 are constructed.
  • the air conditioning control request unit 137 controls the operation of the air conditioning unit 182 and the aroma unit 183 by outputting air conditioning request information to the air conditioning control ECU 181.
  • the air-conditioning control request unit 137 individually adjusts the temperature of the airflow blown toward the driver and the occupant when the pre-evacuation control and automatic evacuation control operation information is acquired, and is directed toward the passenger seat 17p. Start spraying the fragrant ingredients.
  • the sheet control request unit 138 controls the operations of the sheet actuators 187 and 188 and the seat heater 189 by outputting sheet request information to the sheet controller 186.
  • the seat control requesting unit 138 individually adjusts the seat positions of the driver seat 17d and the passenger seat 17p and starts to raise the temperature of the passenger seat 17p when the pre-evacuation control and automatic evacuation control operation information is acquired.
  • each display device in 5th embodiment is substantially the same as 1st embodiment.
  • the notification sound is reproduced from only the ultrasonic speaker 113 provided on the driver's seat 17d side, out of the two sets of ultrasonic speakers 113 and 114.
  • the notification sound reproduced by the ultrasonic speaker 113 is set to a relatively high sound of about 2 kilohertz, for example, which urges the driver to be nervous.
  • cold air blowing at a temperature lower than the current room temperature is blown out from the air outlet 19d provided in front of the driver's seat 17d so as to increase the driver's tension.
  • the notification sound based on the formal determination is reproduced from each of the two sets of ultrasonic speakers 113 and 114.
  • the notification sound reproduced by the ultrasonic speaker 114 provided on the passenger seat 17p side is lower than the notification sound reproduced by the ultrasonic speaker 113 and has a different height so as not to increase the passenger's anxiety. It is a chord that combines multiple sounds.
  • Each of the ultrasonic speakers 113 and 114 follows the notification sound, and the automatic operation control to “automatic posture control has been detected. Shifting to evacuation will be started soon. To cancel, press the steering switch.” Play a guide voice to announce the transition.
  • the seat actuator 187 performs an operation of changing the seat position of the driver's seat 17d so as to stimulate the inherent perception by moving the driver's arms and back muscles.
  • the seat position of the passenger seat 17p is changed to a state in which the occupant is relaxed, for example, by an operation such as further tilting the seat back backward.
  • the temperature of the passenger seat 17p is increased by the operation of the seat heater 189 (see FIG. 26).
  • each of the ultrasonic speakers 113 and 114 continuously reproduces a notification sound for notifying completion of the process and a voice message as the process of the automatic evacuation control is shifted.
  • the notification sounds reproduced by the ultrasonic speakers 113 and 114 are different from each other as in the execution of the pre-retraction control.
  • the voice messages reproduced by the respective ultrasonic speakers 113 and 114 have substantially the same contents, and are substantially the same as the voice messages reproduced by the audio speaker 112 (see FIG. 2) in the first embodiment. Content.
  • each of the ultrasonic speakers 113 and 114 reproduces a voice message “Starting evacuation” following each notification sound (T6, voice 1). Then, upon completion of the setting of the evacuation location and the scheduled travel route, each of the ultrasonic speakers 113 and 114 reproduces a voice message that “the evacuation location has been set” (T7, audio 2).
  • a voice message “I will stop at a safe place soon” is played (T10, voice 5).
  • a voice message “Stopped at the evacuation site” is reproduced (T11, audio 6).
  • both the blowing of cool air from the air outlet 19d and the change in the seat position of the driver's seat 17d, which have been performed to increase the driver's tension, are completed.
  • the warm air from the air outlet 19p and the adjustment of the seat position and the seat temperature of the passenger seat 17p are both continued for giving the passengers a sense of security.
  • a voice message “I contacted the call center with the evacuation location” is reproduced only from the ultrasonic speaker 114 on the passenger seat 17p side (T12, voice 7).
  • the temperature around the occupant, the aroma environment, and the like are adjusted in order to calm the occupant seated in the passenger seat 17p. Based on the above, the passenger's anxiety during the evacuation travel can be further alleviated.
  • each display of the CID 13 and the combination meter 12 is changed to a mode as shown in FIGS. 30 and 31, respectively. Is done. More specifically, the message image 153 and the guidance image 143 that were supposed to “press the hazard twice” (see FIG. 14A and FIG. 15A) are the message image and the guidance that “cancel the hazard once more and cancel”. The image 143 is changed.
  • the driver and the occupant can realize normal operation of the system of the host vehicle A. As a result, the driver and the passenger can obtain a sense of security.
  • the CID 13 and the combination meter 12 can perform a blinking display that emphasizes the acceptance of the operation.
  • FIG. 32 shows a progress image 651 and an explanation image 652 according to Modification 1 of the above embodiment.
  • the progress image 651 has a frame-shaped image portion formed in a horizontally long rectangular shape, and a bar-shaped image portion positioned in the frame-shaped image portion.
  • the progress image 651 extends the bar-shaped image portion from one end portion toward the other end portion in the frame-shaped image portion as the process of the automatic retraction control proceeds. With such display, the progress image 651 can indicate the current degree of progress in the automatic evacuation control.
  • the explanation image 652 is arranged below the progress image 651, and can indicate a process currently being executed.
  • FIG. 33 shows an occupant notification display 750 according to the second modification of the above embodiment.
  • the occupant notification display 750 is displayed on a CID display screen 713a that is formed vertically.
  • the occupant notification display 750 is a vertically long image in accordance with the shape of the display screen 713a.
  • a message image 753, a captured image 754, and a map image 756 are arranged in order from the top to the bottom.
  • the occupant notification display 750 can effectively utilize the area of the display screen 713a to realize easy-to-see information presentation to the occupant.
  • the captured image 754 disposed above the map image 756 can be positioned in the vicinity of the windshield 18 (see FIG. 1). As a result, the occupant can easily associate the AR (Augmented Reality) display based on the captured image 754 with the foreground seen through the windshield 18 (see FIG. 1).
  • FIG. 34 shows an occupant notification display 850 according to the third modification of the above embodiment.
  • the occupant notification display 850 is displayed on a small-sized CID display screen 813a.
  • the captured image is omitted from the occupant notification display 850 in accordance with the shape of the display screen 813a.
  • the captured image, the map image, and the message image can be omitted from the passenger notification display according to the size of the display screen.
  • the displayed image may be selectable by setting by the passenger.
  • a display in which a captured image and a map image are switched every few seconds may be used.
  • a passenger who has never experienced the operation of automatic evacuation control as in the above embodiment is likely to have anxiety about the operation of automatic evacuation control in an emergency. Therefore, for example, when the host vehicle A is in a stationary state, the HCU may be able to execute a demo mode in which a simulated experience is performed in advance for each process performed when the pre-retraction control and the automatic retraction control are executed.
  • an abnormal state such as a driver's posture collapse has been detected by the DSM.
  • the configuration for detecting driver information is not limited to DSM.
  • the vehicle control ECU can determine the abnormal state of the driver based on the driver's biological information transmitted from the wearable device attached to the driver.
  • the biological information is information such as a pulse rate, a heart rate, and a body temperature.
  • the override prohibition in the automatic evacuation control can be canceled by pressing the hazard switch twice.
  • the operation for releasing the prohibition of overriding is not limited to the multiple pressing operation of the hazard switch, and can be changed as appropriate. Further, overriding prohibition during automatic evacuation control may be disabled. Furthermore, it is possible to prohibit override during pre-evacuation.
  • the passenger is notified by the display device and the acoustic device.
  • the notification to the occupant may be performed only by the display device.
  • the notification to the driver is performed by both the combination meter and the HUD device, but may be performed by any one display device. Alternatively, the notification to the driver may not be performed. Or the notification to the driver
  • an occupant notification display with the CID display screen as the “display area” is displayed in order to present information to the occupant seated in the passenger seat.
  • the occupant notification display may be displayed with the display screen of the monitor of the rear entertainment system as the “display area”.
  • an occupant notification display may be displayed with the display screen of the monitor of the electronic mirror system as a “display area”.
  • the functions provided by the processors 21 and 22 of the HCU 20 can be provided by hardware and software different from those described above, or a combination thereof.
  • part or all of the processing for realizing display to which the information presentation method according to the present disclosure is applied is performed by a processor of the vehicle control ECU or a processor provided in the display device. It is feasible.
  • each section is expressed as S101, for example.
  • each section can be divided into a plurality of subsections, while a plurality of sections can be combined into one section.
  • each section configured in this manner can be referred to as a device, module, or means.

Abstract

 運転者による運転の継続が困難な場合に自動退避制御が作動する車両に搭載され、前記運転者を除く前記車両の乗員によって視認可能な表示領域(13a,713a,813a)に情報を提示する情報提示装置は、前記自動退避制御の作動情報を取得する作動情報取得部(31)と、前記自動退避制御が作動している場合に、表示領域に表示されて前記自動退避制御に係る情報を報知する乗員報知表示(150,250,750,850)を生成する表示生成部(35)とを備える。前記乗員報知表示には、現在実行中のプロセスを説明する説明画像(152,252,352,652)と、前記自動退避制御の進捗度合いを示す進捗画像(151,251,351,451,651)とが含まれる。

Description

情報提示装置及び情報提示方法 関連出願の相互参照
 本出願は、2015年4月3日に出願された日本特許出願番号2015-77090号および2015年12月23日に出願された日本特許出願番号2015―250778号に基づくもので、ここにその記載内容を援用する。
 本開示は、表示によって車両の乗員へ情報を提示する情報提示装置及び情報提示方法に関するものである。
 従来、例えば特許文献1に開示の緊急退避装置のように、車両の運転者が運転困難な状態に陥った場合に、運転者に代わって車両を自動で停止させる技術が知られている。このような退避走行を実行可能な車両には、例えば緊急退避装置の作動情報等を運転者へ提示する運転支援HMI(Human Machine Interface)が搭載されている。
 さて、特許文献1に開示の運転支援HMIは、運転者に対する情報提示として、例えば退避走行を作動させるか否かの確認を行うことができる。しかし、特許文献1では、運転者を除く車両の乗員への情報提示は、何ら考慮されていない。そのため、車両が退避走行を開始した場合に、運転者を除く車両の乗員が強い不安を覚えるおそれがあった。
国際公開第2013/008299号
 本開示は、自動退避制御によって走行している車両内の乗員の不安を和らげることが可能な情報提示装置及び情報提示方法を提供することを目的とする。
 本開示の第一の態様において、運転者による運転の継続が困難であると判定された場合に自動退避制御が作動する車両に搭載され、前記運転者を除く前記車両の乗員によって視認可能な第一表示領域の表示により当該乗員へ情報を提示する情報提示装置は、前記自動退避制御の作動情報を取得する作動情報取得部と、前記自動退避制御が作動している場合に、前記第一表示領域に表示されて前記自動退避制御に係る情報を報知する乗員報知表示を生成する表示生成部とを備える。前記乗員報知表示には、前記自動退避制御によって実施される複数のプロセスのうちで、現在実行中のプロセスを説明する説明画像と、前記自動退避制御における現在の進捗度合いを示す進捗画像とが含まれる。
 上記の情報提示装置によれば、乗員報知表示に含まれる進捗画像により、複数のプロセスからなる自動退避制御における現在の進捗度合いが知らされる。故に、乗員は、自動退避制御の全体像と、自動退避制御の終わりをメージできるようになり得る。加えて、現在実行中のプロセスを説明画像によって乗員に説明することで、乗員は、運転者に依らないで走行する車両の動きを概ね予測し得る。これらにより、乗員報知表示は、自動退避制御によって走行している車両内の乗員の不安を和らげることが可能となる。
 本開示の第二の態様において、運転者による運転の継続が困難であると判定された場合に自動退避制御が作動する車両において、前記運転者を除く前記車両の乗員によって視認可能な表示領域の表示により当該乗員へ情報を提示する情報提示方法は、前記自動退避制御の作動情報を取得することと、前記自動退避制御が作動している場合に、前記表示領域に表示されて前記自動退避制御に係る情報を報知する乗員報知表示を生成することとを含む。前記乗員報知表示には、前記自動退避制御によって実施される複数のプロセスのうちで、現在実行中のプロセスを説明する説明画像と、前記自動退避制御における現在の進捗度合いを示す進捗画像とが含まれる。作動情報の取得と乗員報知表示の生成は、少なくとも一つのプロセッサにより実行される。
 上記の情報提示方法によれば、乗員報知表示に含まれる進捗画像により、複数のプロセスからなる自動退避制御における現在の進捗度合いが知らされる。故に、乗員は、自動退避制御の全体像と、自動退避制御の終わりをメージできるようになり得る。加えて、現在実行中のプロセスを説明画像によって乗員に説明することで、乗員は、運転者に依らないで走行する車両の動きを概ね予測し得る。これらにより、乗員報知表示は、自動退避制御によって走行している車両内の乗員の不安を和らげることが可能となる。
 本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は、
図1は、自車両における運転席周辺のレイアウトを示す図であり、 図2は、車載ネットワークの全体構成を示すブロック図であり、 図3は、車両制御ECUの制御回路に構築される機能ブロックを示す図であり、 図4は、運転者に異常が生じてから自動退避制御が開始されるまでの過程を説明するタイムチャートであり、 図5は、運転者に異常が生じてから自動退避制御が開始されるまでの過程を説明するタイムチャートであり、 図6は、自動退避制御が開始されてから緊急通報が行われるまでの過程を説明するタイムチャートであり、 図7は、自動退避制御が開始されてから緊急通報が行われるまでの過程を説明するタイムチャートであり、 図8は、HCUの制御回路に構築される機能ブロックを示す図であり、 図9は、第一プレ退避制御に係る第一の報知において、コンビネーションメータの表示を示す図であり、 図10は、第一の報知において、HUD装置によって投影される表示を示す図であり、 図11は、第二プレ退避制御に係る第二の報知において、コンビネーションメータの表示を示す図であり、 図12は、第二の報知において、HUD装置によって投影される表示を示す図であり、 図13は、第二の報知におけるCIDの表示を示す図であり、 図14は、自動退避制御の実行通知において、CIDの表示の推移を示す図であり、 図15は、自動退避制御の実行通知において、コンビネーションメータの表示の推移を示す図であり、 図16は、自動退避制御の実行通知において、HUD装置によって投影される表示の推移を示す図であり、 図17は、車両制御ECUの制御回路によって実施される処理を示すフローチャートであり、 図18は、車両制御ECUの制御回路によって実施される処理を示すフローチャートであり、 図19は、HCUの制御回路によって実施される処理を示すフローチャートであり、 図20は、HCUの制御回路によって実施される処理を示すフローチャートであり、 図21は、HCUの制御回路によって実施される処理を示すフローチャートであり、 図22は、図14の変形例を示す図であり、 図23は、図15の変形例を示す図であり、 図24は、進捗画像及び説明画像の変形例を示す図であり、 図25は、進捗画像及び説明画像の別の変形例を示す図であり、 図26は、第五実施形態の車載ネットワークの全体構成を示すブロック図であり、 図27は、HCUの制御回路に構築される機能ブロックを示す図であり、 図28は、運転者に異常が生じてから自動退避制御が開始されるまでの過程を説明するタイムチャートであり、 図29は、自動退避制御が開始されてから緊急通報が行われるまでの過程を説明するタイムチャートであり、 図30は、ハザードスイッチが一回だけ操作された状態のCIDの表示を示す図であり、 図31は、ハザードスイッチが一回だけ操作された状態のコンビネーションメータの表示を示す図であり、 図32は、進捗画像及び説明画像のさらに別の変形例を示す図であり、 図33は、乗員報知表示の変形例を示す図であり、 図34は、乗員報知表示の変形例を示す図である。
 以下、本開示の複数の実施形態を図面に基づいて説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合わせることができる。そして、複数の実施形態及び変形例に記述された構成同士の明示されていない組み合わせも、以下の説明によって開示されているものとする。
 (第一実施形態)
 本開示が適用される第一実施形態のHCU20は、図1及び図2に示すように、自車両Aに搭載される電子装置である。HCU20は、自車両Aに搭載される車載ネットワーク1に設けられた複数のノードのうちの一つとなる。車載ネットワーク1は、ADASロケータ96、車載通信機97、前照灯制御装置95、外界認識システム90、HMIシステム10、及び車両制御システム60等によって構成されている。これらの構成は、通信バス99に接続されており、通信によって互いに情報をやり取りすることができる。
 ADAS(Advanced Driver Assistance Systems)ロケータ96は、GNSS(Global Navigation Satellite System)受信機、ジャイロセンサ等の慣性センサ、地図データを格納するメモリを備えている。ADASロケータ96は、GNSS受信機によって受信する複数の人工衛星からの信号と、慣性センサの計測結果とを組み合わせることにより、自車両Aの位置を測位する。ADASロケータ96は、メモリから自車両前方の地図データを読み出し、カーブの曲率半径、回転角、開始位置等の道路情報を抽出する。ADASロケータ96は、自車両Aの位置情報と、前方の道路情報とを、通信バス99へ出力する。
 車載通信機97は、無線通信のためのアンテナ98と接続されている。車載通信機97は、自車両Aの周囲に位置する他の車両A1(図6参照)の車載通信機との間で、無線通信による車車間通信を行うことができる。加えて車載通信機97は、自車両A外部の基地局との間にて、移動体通信を行うことができる。車載通信機97は、通信バス99上に出力された自車両Aの情報を、他の車両A1及びコールセンター等へ送信可能である。車載通信機97は、他の車両A1から受信した情報、及びコールセンター等から受信した情報を、通信バス99へ出力可能である。
 前照灯制御装置95は、プロセッサ及びメモリを有するマイクロコンピュータを主体として構成されている。前照灯制御装置95は、すれ違い用前照灯(ロービーム)、走行用前照灯(ハイビーム)95a、ウィンカー(方向指示器)、ハザードランプ等の自車両Aに搭載された複数の灯火器と接続されている。前照灯制御装置95は、通信バス99から取得する灯火要求情報に基づいて、各灯火器の作動を制御する。
 外界認識システム90は、前方カメラユニット92及びレーダユニット93,94等の外界センサと、周辺監視ECU91とを備えている。外界認識システム90は、歩行者、人間以外の動物、自転車、オートバイ、及び他の車両のような移動物体、さらに路上の落下物、交通信号、ガードレール、縁石、道路標識、道路標示、区画線、及び樹木のような静止物体を検出する。外界認識システム90は、各ユニット92~94に加えて、ライダ及びソナー等の外界センサを備えることが可能である。
 前方カメラユニット92は、例えば自車両Aのバックミラー近傍に設置された単眼式、又は複眼式のカメラである。前方カメラユニット92は、自車両Aの進行方向を向けられており、例えば約45度程度の水平視野角度で自車両Aから約80メートルの範囲を撮影できる。前方カメラユニット92は、移動物体、静止物体、及び進行方向の道路等が写る撮像画像154(図14A参照)のデータを、周辺監視ECU91へ逐次出力する。
 レーダユニット93は、例えば自車両Aのフロント部に設置されている。レーダユニット93は、77GHz帯のミリ波を送信アンテナから自車両Aの進行方向に向けて放出する。レーダユニット93は、進行方向の移動物体及び静止物体等で反射されたミリ波を、受信アンテナによって受信する。レーダユニット93は、例えば約55度程度の水平走査角度で自車両Aから約60メートルの範囲を走査できる。レーダユニット93は、受信信号に基づく走査結果を周辺監視ECU91へ逐次出力する。
 レーダユニット94は、例えば自車両Aのフロント部及びリア部の各左右に、それぞれ設置されている。レーダユニット94は、24GHz帯の準ミリ波を送信アンテナから自車両Aの前後の側方へ向けて放出する。レーダユニット94は、前側方及び後側方の移動物体及び静止物体等で反射された準ミリ波を、受信アンテナによって受信する。レーダユニット94は、例えば約120度程度の水平走査角度で自車両Aから約30メートルの範囲を走査できる。レーダユニット94は、受信信号に基づく走査結果を周辺監視ECU91へ逐次出力する。
 周辺監視ECU91は、プロセッサ及びメモリを有するマイクロコンピュータを主体として構成されている。周辺監視ECU91は、前方カメラユニット92及び各レーダユニット93,94と通信可能に接続されている。周辺監視ECU91は、各ユニット92,93から取得した情報を統合することにより、進行方向にある移動物体及び静止物体(以下、「検出物」)の相対位置等を検出する。加えて周辺監視ECU91は、レーダユニット94から取得した情報により、前側方及び後側方にある検出物の相対位置等を検出する。
 周辺監視ECU91は、自車両Aの周囲を走行する前走車及び並走車の相対位置情報、及び自車両Aの進行方向における区画線の形状情報等を、監視情報として通信バス99へ出力する。周辺監視ECU91は、隣接する車線を走行する他の車両A1(図6参照)の検出に基づいて、隣接車線への車線変更が可能であるか否かを判定し、判定結果を監視情報として通信バス99へ出力する。周辺監視ECU91は、通信バス99から探索要求情報を取得すると、ADASロケータ96から取得した位置情報及び道路情報と、各ユニット92,93から取得した情報とを用いて、後述する自動退避制御において自車両Aを停車させる退避位置を探索する。周辺監視ECU91は、探索によって設定した退避場所の位置情報を通信バス99へ出力する。さらに周辺監視ECU91は、前方カメラユニット92による撮像画像154(図14A参照)の画像データを、通信バス99へ出力する。
 HMIシステム10は、コンビネーションメータ12、CID13、及びHUD装置14等の複数の表示デバイスを備えている。加えてHMIシステム10は、音声による情報通知を行う音響デバイスとして、オーディオスピーカ112及び超音波スピーカ113等を備えている。さらにHMIシステム10には、複数の操作デバイス15、DSM(Driver Status Monitor)11、及びHCU(HMI(Human Machine Interface)Control Unit)20等が設けられている。HMIシステム10は、運転席17dに着座した自車両Aの運転者、及び自車両Aの他の乗員へ情報を提示する。
 コンビネーションメータ12は、自車両Aの車室内にて運転席17dの前方に配置されている。コンビネーションメータ12は、液晶ディスプレイを有している。液晶ディスプレイには、運転席17dに着座する運転者によって視認可能な表示画面12aが形成されている。コンビネーションメータ12は、HCU20から取得した画像データに基づいて、スピードメータ41等の画像を液晶ディスプレイの表示画面12aに表示する。
 CID(Center Information Display)13は、自車両Aの車室内にてセンタクラスタの上方に配置され、インスツルメントパネル19内に収容されている。CID13は、液晶ディスプレイを有している。液晶ディスプレイには、運転者だけでなく、運転者を除く車両の乗員、例えば助手席17pに着座する乗員にも視認可能な表示画面13aが形成されている。表示画面13aは、運転席17d及び助手席17pが並ぶ自車両Aの幅方向WDを長手とする長手形状とされている。CID13は、HCU20から取得した画像データに基づいて、ナビゲーションの案内画面、空調機器の操作画面、及びオーディオ機器の操作画面等を、液晶ディスプレイに表示する。
 HUD(Head-Up Display)装置14は、HCU20から取得した画像データに基づく画像の光を、ウインドシールド18に規定された投影領域14aへ投影する。ウインドシールド18によって車室内側に反射された画像の光は、運転席17dに着座する運転者によって知覚される。運転者は、HUD装置14によって投影された画像の虚像を、自車両Aの前方の外界風景と重ねて視認可能となる。
 オーディオスピーカ112は、自車両Aのドアの内張り内に配置されることで、運転席17d及び助手席17pの側方に位置している。オーディオスピーカ112は、自車両Aの乗員全てによって聞き取り可能な音声を再生する。オーディオスピーカ112は、再生する音声によって全乗員への情報通知を行うことができる。
 超音波スピーカ113は、自車両Aの車室内にて、運転席17dの前方且つウインドシールド18の上方に、一対設置されている。超音波スピーカ113は、運転席17dのヘッドレスト付近へ向けて、指向性の高い超音波を出力する。超音波スピーカ113は、空気中を伝搬する超音波に生じる歪みにより、可聴音を発生させる。超音波スピーカ113は、自車両Aの乗員のうちで、運転席17dに着座する運転者のみによって聞き取り可能な音声を再生する。超音波スピーカ113は、再生する音声によって運転者のみに情報通知を行うことができる。尚、超音波スピーカ113の設置位置は、ヘッドレスト付近へ向けて超音波を直接的に射出可能であれば、適宜変更可能である。超音波スピーカ113は、例えばウインドシールド18側方のピラーの根本等に設置可能である。
 操作デバイス15には、ステアリングスイッチ15a及びハザードスイッチ15bが含まれている。ステアリングスイッチ15aは、自車両Aのステアリングのスポーク部に配置されている。ステアリングスイッチ15aには、HMIシステム10及び車両制御システム60等の設定を変更する操作が運転者によって入力される。ハザードスイッチ15bは、車室内に設けられたセンタクラスタに配置されている。ハザードスイッチ15bには、自車両Aのハザードランプを点滅させるための操作が運転者又は乗員によって入力される。ステアリングスイッチ15a及びハザードスイッチ15bは、操作の入力に基づく操作信号を、HCU20へ出力する。
 DSM11は、近赤外光源及び近赤外カメラと、これらを制御する制御ユニット等とによって構成されている。DSM11は、近赤外カメラを運転席17d側に向けた姿勢にて、インスツルメントパネル19の上面に配置されている。DSM11は、近赤外光源によって近赤外光を照射された運転者の顔を、近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、例えば運転者の顔の向き及び目の開き具合等を、撮像画像から抽出する。制御ユニットによる解析により、運転者が正面を向いていない状態及び運転者の目が閉じた状態等を検知すると、DSM11は、運転者の異常を示す検知信号をHCU20へ出力する。
 HCU20は、メインプロセッサ21、描画プロセッサ22、書き換え可能な不揮発性のメモリ23、情報の入出力を行う入出力インターフェース24、及びこれらを接続するバス等を有する制御回路20aを備えている。HCU20は、各表示デバイス、各音響デバイス、操作デバイス15、及びDSM11等と接続されている。HCU20は、ステアリングスイッチ15a及びハザードスイッチ15bから出力される操作信号と、DSM11から出力される検知信号とを取得する。HCU20は、各表示デバイスに制御信号及び画像データを出力することにより、これら表示デバイスによる表示を制御する。HCU20は、各音響デバイスに音声データを出力することにより、これら音響デバイスに音声を再生させる。
 車両制御システム60は、アクセルポジションセンサ61、ブレーキ踏力センサ62、及び操舵トルクセンサ63等の操作検出センサと、自車両Aの走行状態を検出する車速センサ64等とを備えている。加えて車両制御システム60は、電子制御スロットル66、ブレーキアクチュエータ67、及びEPSモータ68等の走行制御デバイスと、車両制御ECU70とを備えている。車両制御システム60は、運転者による運転操作、外界認識システム90による監視情報、並びにADASロケータ96による位置情報及び道路情報等に基づいて、自車両Aの走行を制御する。
 アクセルポジションセンサ61は、運転者によるアクセルペダルの踏み込み量を検出し、車両制御ECU70へ出力する。ブレーキ踏力センサ62は、運転者によるプレーキペダルの踏力を検出し、車両制御ECU70へ出力する。操舵トルクセンサ63は、運転者によるステアリングの操舵トルクを検出し、車両制御ECU70へ出力する。車速センサ64は、自車両Aの現在の走行速度を検出し、車両制御ECU70へ出力する。
 電子制御スロットル66は、車両制御ECU70から出力される制御信号に基づき、スロットルの開度を制御する。ブレーキアクチュエータ67は、車両制御ECU70から出力される制御信号に基づいたブレーキ圧の発生により、各車輪に発生させる制動力を制御する。EPSモータ(Electric Power Steering)68は、車両制御ECU70から出力される制御信号に基づき、ステアリング機構に印加される操舵力及び保舵力を制御する。
 車両制御ECU(Electronic Control Unit)70は、パワーユニット制御ECU、ブレーキ制御ECU、及び統合制御ECU等のうち、統合制御ECUを少なくとも含む一種類又は複数種類である。車両制御ECU70は、プロセッサ71、書き換え可能な不揮発性のメモリ73、情報の入出力を行う入出力インターフェース74、及びこれらを接続するバス等を有する制御回路70aを備えている。
 車両制御ECU70は、各センサ61~64及び各走行制御デバイスと接続されている。車両制御ECU70は、各センサ61~64から出力される検出信号を取得し、各走行制御デバイスへ制御信号を出力する。加えて車両制御ECU70は、各センサ61~64の検出信号を、車両情報として通信バス99へ出力する。
 車両制御ECU70は、自車両Aの駆動力、制動力、及び操舵力等を制御することにより、運転者による運転操作の支援又は代行を行う複数の運転支援機能を備えている。運転支援機能には、巡航制御機能及び車線逸脱の防止機能が含まれている。車両制御ECU70は、運転者によるステアリングスイッチ15aへの操作の入力に基づき、これらの運転支援機能を起動させる。以下の説明では、便宜的に、巡航制御機能をACC(Adaptive Cruise Control)と記載し、車線逸脱の防止機能をLKA(Lane Keeping Assist)と記載する。
 ACCが有効にされると、車両制御ECU70は、周辺監視ECU91から取得する前走車の監視情報に基づいて駆動力及び制動力を調整することにより、自車両Aの走行速度を制御する。前走車が検出されていない場合には、ACCは、運転者によって設定された目標速度で、自車両Aを定速走行させる。一方、前走車が検出されている場合には、ACCは、前走車までの車間距離を維持しつつ、自車両Aを前走車に対して追従走行させる。
 LKAが有効にされると、車両制御ECU70は、周辺監視ECU91から取得する進行方向の区画線の形状情報に基づいて、操舵力及び保舵力を制御する。LKAは、区画線への接近を阻む方向への操舵力をステアリングに加えることで、自車両Aを車線に沿って走行させる。尚、ADASロケータ96によって出力される道路情報が、ACC及びLKAによる車両制御に用いられてもよい。
 車両制御ECU70は、上述した運転支援機能による走行制御に加えて、運転者が運転を継続することが困難な状態(以下、「運転困難状態」)に陥った場合に、自車両Aを自動で停車させる自動退避制御を実施できる。自動退避制御が開始されると、車両制御ECU70は、周辺監視ECU91に自車両Aを停車させる退避場所を探索させる。車両制御ECU70は、周辺監視ECU91による探索によって設定された退避場所へ自車両Aを移動させて、この退避場所に自車両Aを停車させる。
 さらに車両制御ECU70は、自動退避制御を開始する前に、上述した運転支援機能を自動で起動させることにより、運転者の運転操作を支援するプレ退避制御を実施できる。こうした制御を実現するため、車両制御ECU70の制御回路70aは、メモリ73に記憶されたプログラムをプロセッサ71によって実行することにより、複数の機能ブロック(80~89)を構築する。以下、自動退避制御及びプレ退避制御に係る機能ブロックの詳細を、図3に基づき、図1及び図2を参照しつつ説明する。
 異常情報取得部81は、HCU20及び通信バス99を介して、DSM11による検知情報を取得する。運転者の異常の検知が継続している場合、異常情報取得部81は、DSM11から検知情報を取得し続ける。反応判定部86は、DSM11にて検知される運転者の状態の変化に基づき、異常報知部84等によって実施される報知に対して、運転者が反応したか否かを判定する。
 操作受付部88は、各センサ61~63から出力される操作信号に基づいて、運転者による運転操作を受け付け可能である。操作受付部88は、プレ退避制御の開始後、且つ、自動退避制御の開始前においては、運転者による運転操作を受け付ける。一方で、自動退避制御の開始後においては、操作受付部88は、運転者による運転操作の受け付けを禁止する。操作受付部88は、乗員によるハザードスイッチ15bへの入力を検知した場合には、運転操作の受け付け禁止を解除する。
 状態判定部80は、運転者が異常状態にあるという仮判定及び正式判定と、運転者が運転困難状態にあるという判定と、を行うことができる。運転者の異常状態の仮判定は、異常状態の正式判定以前に実施される。異常状態の仮判定は、DSM11による異常の検知が第一閾値時間TH1(図4参照)継続した時点にて、実施される。第一閾値時間TH1は、DSM11の異常検知の分解能に依存して設定される。例えば、DSM11が0.1秒毎に検知を繰り返す構成であれば、異常の検知が連続して複数回(例えば3~5回程度)続いた場合に、状態判定部80は、仮判定を行う。この場合、第一閾値時間TH1は、0.3~0.5秒となる。こうした第一閾値時間TH1の設定により、DSM11による異常状態の誤検知が排除され得る。
 運転者の異常状態の正式判定は、異常状態の仮判定後、且つ、運転困難状態にあるとの判定以前に、運転者の異常検知の継続に基づき、行われる。異常状態の正式判定は、DSM11による異常の検知が第二閾値時間TH2(例えば2.0秒,図4参照)継続した時点にて、実施される。第二閾値時間TH2は、運転者による脇見の一般的な上限時間(約1.6秒)よりも長く設定されている。こうした第二閾値時間TH2の設定により、脇見を異常状態と誤判定する事態が回避される。
 運転者が運転困難状態であるとの判定は、異常情報取得部81によって取得される運転者の異常の検知がさらに継続した場合に、実施される。具体的には、異常状態の正式判定から予め設定された応答時間AT(3~8秒,図4参照)が経過するまでの間に、運転者による応答操作が無い場合に、状態判定部80は、運転者が運転困難状態であるいと判定する。
 応答時間ATは、HMIシステム10からの異常検知の報知を認識した運転者が応答操作を入力するのに概ね十分な時間に設定されている。応答操作は、例えばステアリングスイッチ15aを押し込む操作である。また、運転困難状態にあるとの判定は、運転困難状態を確定する確定操作が応答時間ATの間に有った場合にも、実施される。確定操作は、例えば応答操作とは異なるステアリングスイッチ15aを押し込む操作である。
 退避制御部82は、状態判定部80によって運転者が運転困難状態と判定されたことに基づき、自動運転制御を開始する。退避制御部82は、電子制御スロットル66、ブレーキアクチュエータ67、及びEPSモータ68等の走行制御デバイスを統合制御することにより、周辺監視ECU91にて設定された退避場所までの予定走行経路に従って自車両Aを移動させる。そして、退避制御部82は、退避場所に自車両Aを停車させる。
 支援制御部83は、異常が検知されたときから運転困難状態と判定されるまでの間に、LKAを少なくとも含む運転支援機能による制御(運転支援制御)を開始する。支援制御部83は、運転者の異常の検知後、運転支援制御に含まれる複数の支援機能のうちで、LKAを他の支援機能よりも先に作動させる。
 詳記すると、支援制御部83は、異常状態であると正式判定される以前の仮判定に基づき、LKAを作動させる。その後、支援制御部83は、異常状態であると正式判定されたことに基づき、LKAとは異なる他の支援機能としてACCを作動させる。支援制御部83は、運転支援制御の開始後に、操作受付部88によって運転操作が受け付けられた場合には、運転支援制御を停止する。
 異常報知部84及び移行報知部85は、HCU20へ出力する報知要求情報により、HMIシステム10の各表示デバイス及び各音響デバイスを制御する。異常報知部84は、異常状態の仮判定に伴う運転支援制御の開始に基づき、DSM11によって検知された異常の内容(例えば、姿勢崩れ等)を、表示デバイスによって運転者に報知する。移行報知部85は、異常状態の正式判定に基づき、自動退避制御への移行を各表示デバイス及び各音響デバイスによって運転者に予告する。
 探索制御部87は、周辺監視ECU91へ出力する探索要求情報により、自動退避制御において自車両Aを停車させる退避場所を、周辺監視ECU91に探索させる。探索制御部87は、運転者の異常が検知された後、状態判定部80によって運転困難状態と判定される以前に、周辺監視ECU91に退避場所の探索を開始させることができる。具体的に、周辺監視ECU91は、異常状態の正式判定に基づいて退避場所の探索を開始する。
 車外報知部89は、状態判定部80によって運転困難状態であると判定された場合に、自車両Aの周囲を走行する他の車両A1(図6参照)に警戒を促すための処理を開始する。車外報知部89は、車載通信機97へ出力する送信要求情報により、自車両Aの運転者が運転困難状態にある旨の情報を、他の車両A1に送信させる。加えて、車外報知部89は、前照灯制御装置95へ出力する灯火要求情報により、自車両Aのハザードランプを点滅させると共に、走行用前照灯95aの点灯を開始させる。以上の処理により、自車両Aの運転者が運転困難状態にあることが、他の車両A1の運転者及び乗員に報知される。
 以上の構成により、運転者が運転困難状態に陥った自車両Aを車両制御システム60が自動操縦により停車させるまでの複数のプロセスを説明する。まず、図4及び図5に示すタイムチャートに基づき、図2を参照しつつ、自動退避制御が開始されるまでのプレ退避制御(T1~T6)の作動を順に説明する。
 運転者の意識が喪失することにより(T1)、その後、運転者には姿勢崩れが発生する(T2)。姿勢崩れは、DSM11によって即座に検知可能である。姿勢崩れが第一閾値時間TH1継続すると、車両制御ECU70は、異常状態の仮判定する(T3)。この仮判定に基づき、第一のプレ退避制御として、LKAの作動が開始される。加えて、車両制御ECU70からHCU20へ出力される報知要求情報により、仮判定に基づく第一の報知がHMIシステム10によって実施される。
 姿勢崩れが第二閾値時間TH2継続すると、車両制御ECU70は、異常状態を正式判定する(T4)。この正式判定に基づき、第二のプレ退避制御として、LKAと共にACCの作動が開始される。加えて、周辺監視ECU91による退避場所の探索が開始される。さらに、車両制御ECU70からHCU20へ出力される報知要求情報により、第二の報知がHMIシステム10により実施される。
 第二の報知では、自動退避制御の実施の可否が運転者に問い合わせされる。第二の報知に対して、正常状態にある運転者は、「Yes」に相当するステアリングスイッチ15aを操作可能である。こうした応答操作により、自動退避制御への移行は、解除される。一方、軽度の運転困難状態にある運転者は、「No」に相当するステアリングスイッチ15aを操作可能である。こうした確定操作により、応答時間ATの経過を待つことなく、自動退避制御への移行が強制的に実施される。
 正式判定から応答時間ATが経過する以前に、車両制御ECU70は、自車両Aを緩減速させる制動制御を開始する(T5)。そして、応答時間ATの経過に基づき、車両制御ECU70は、運転者が運転困難状態にあると確定判定する(T6)。運転困難状態の確定に基づき、車両制御ECU70は、自車両Aの制御モードをプレ退避制御から自動退避制御へと移行させる。
 次に、自動退避制御が開始された後(T6~T13)、自動運転によって退避場所まで自車両Aを移動させる一連のプロセスを、図6及び図7に示すタイムチャートに基づき、図2を参照しつつ、順に説明する。
 自動退避制御が開始されることにより(T6)、車両制御ECU70は、設定プロセスを開始する。設定プロセスでは、自車両Aを停車させる退避場所と、退避場所までの予定走行経路とが設定される。退避場所及び予定走行経路の設定は、車両制御ECU70が実施してもよく、周辺監視ECU91によって設定された退避場所及び予定走行経路の少なくとも一方を車両制御ECU70が取得してもよい。設定プロセスでは、運転困難状態を確定する判定に基づき、周辺を走行する他の車両A1へ運転困難状態を報知するための処理を行う。こうした処理としては、車載通信機97への送信要求情報に基づく車車間通信による警告配信、ハザードランプの点滅、及び走行用前照灯95aの点灯等が実施される。さらに、車両制御ECU70からHCU20へ出力される報知要求情報に基づき、自動退避制御の実行通知がHMIシステム10により実施される。
 退避場所及び移動経路の設定が完了すると(T7)、車両制御ECU70は、自動退避制御のプロセスを移動プロセスへと移行する。移動プロセスでは、予定走行経路に基づく自車両Aの移動が行われる。加えて移動プロセスでは、必要に応じて隣接車線への車線変更が行われる。移動先の車線を他の車両A1が走行している場合、車線変更の不可判定に基づき、車線変更は、待機状態とされる。その後、車線変更の不可判定が解除されると、隣接車線への車線変更が開始される(T8)。車線変更が完了すると、車両制御ECU70は、停止容易な速度まで自車両Aを緩やかに減速させる。
 自車両Aの走行速度が所定の速度(例えば50km/h)まで低下すると(T10)、車両制御ECU70は、自動退避制御のプロセスを停車プロセスへと移行する。停車プロセスでは、車両制御ECU70は、自車両Aを走行車線から離脱させる。車両制御ECU70は、路肩及び路側帯等へ退避した自車両Aに制動力を作用させて、目的としていた退避場所に自車両Aを停車させる(T11)。
 自車両Aを退避場所に停車させると、車両制御ECU70は、自動退避制御のプロセスをコールプロセスへと移行する(T12)。コールプロセスでは、予め設定されたコールセンターへの連絡が行われる。そして、コールセンターへの連絡が完了すると、車両制御ECU70は、自動退避制御を終了する(T13)。
 以上のプレ退避制御及び自動退避制御では、第一の報知、第二の報知、及び実行通知といったHMIシステム10による情報の提示が運転者及び乗員に対して行われる。特に、実行通知によれば、設定プロセスから移動プロセスへの移行、移動プロセスから停車プロセスへの移行、及び停車プロセスからコールプロセスへの移行は、HMIシステム10によって自車両Aの乗員に報知される。こうした情報提示等のために、図2に示すHCU20の制御回路20aは、メモリ23に記憶されたプログラムを各プロセッサ21,22によって実行することにより、複数の機能ブロック(31~36)を構築する。以下、これらの機能ブロックの詳細を、図8に基づき、図1及び図2を参照しつつ説明する。
 情報取得部31は、通信バス99へ出力された種々の情報を取得する。具体的に、情報取得部31は、車両制御ECU70によって通信バス99へ出力される走行速度等の車両情報、各報知の実施を指示する報知要求情報、運転支援機能及び自動退避制御それぞれの作動情報等を取得する。運転支援機能の作動情報には、ACC及びLKAが起動しているか否かといった情報が含まれている。自動退避制御の作動情報には、自動退避制御において実施されている複数のプロセスのうちで、現在実施中のプロセスを示す情報、退避場所及び予定走行経路を示す情報等が含まれている。
 画像取得部32は、周辺監視ECU91によって通信バス99へ出力される撮像画像154(図14参照)のデータを取得する。撮像画像154は、前方カメラユニット92によって撮影された進行方向のカメラ画像である。撮像画像154には、自動退避制御によって設定される予定走行経路が含まれている。
 照明要求部33は、車外報知部89(図3参照)と同様に、前照灯制御装置95への灯火要求情報を出力することにより、走行用前照灯95aの作動を制御する。照明要求部33は、自動退避制御の作動情報が取得された場合に、前照灯制御装置95によって走行用前照灯95aによる照明を開始させる。これにより、外光が少ない夜間及びトンネル内においても予定走行経路が視認可能になる。加えて撮像画像154(図14参照)には、予定走行経路が明確に撮影されるようになる。
 再生要求部34は、オーディオスピーカ112及び超音波スピーカ113へ音声データを出力することで、各スピーカ112,113に音声を再生させる。再生要求部34は、自動退避制御によって実施されているプロセスが移行されたことに基づき、全乗員に聞こえるように、移行後のプロセスの内容を乗員に報知する音声を再生させる。
 表示生成部35は、コンビネーションメータ12の表示画面12a、CID13の表示画面13a、及びHUD装置14の投影領域14aの各表示を生成する。表示生成部35は、プレ退避制御が作動している場合に、第一の報知及び第二の報知の各表示を生成する(図9~図13参照)。加えて表示生成部35は、自動退避制御が作動している場合に、表示画面13aに表示される乗員報知表示150(図14参照)と、表示画面12a及び投影領域14aにそれぞれ表示される運転者報知表示140,146(図15及び図16参照)とを生成する。
 緊急通報部36は、自動退避制御によって退避場所への移動及び停車が完了した後、予め設定されたコールセンターへ緊急の連絡を行う。緊急通報部36は、自車両Aの現在位置等を取得し、車載通信機97を通じて、コールセンターに取得した情報を送信することができる。
 以上のプレ退避制御及び自動退避制御の実行中における運転者及び乗員への情報提示として、各表示デバイスの表示の詳細と、各音響デバイスによる音声の詳細とを説明する。まず、プレ退避制御における第一の報知及び第二の報知の詳細を、図9~図13に基づいて説明する。
 異常状態の仮判定(図5のT3参照)に基づく第一の報知においては、コンビネーションメータ12は、図9に示すように、LKAの作動を示すインジケータ41aを、他の表示に加えて表示画面13aに表示する。HUD装置14は、図10に示すように、LKAの作動を示すインジケータ46aと、姿勢崩れの検知を示す姿勢崩れアイコン45とを、投影領域14aに投影する。加えて、姿勢崩れの検知を運転者に通知する通知音が超音波スピーカ113によって再生される。
 異常状態の正式判定(図5のT4参照)に基づく第二の報知において、コンビネーションメータ12は、図11に示すように、LKAのインジケータ41aに加え、ACCの作動を示すインジケータ41b及びメッセージ画像42を、表示画面12aに表示する。メッセージ画像42は、検知された異常の内容及び自動退避制御への移行予告を、文字によって運転者に報知する画像である。メッセージ画像42は、自動退避制御への移行を解除するための操作、及び自動退避制御への強制移行を開始するための操作、を文字によって運転者に報知する。メッセージ画像42の背景部42aは、対応できる状態にある又は対応できる状態に回復した運転者に対してアクションを促すために、緊急感を惹起させるアンバー(橙色)又は赤色等、赤色系の色で表示される。
 第二の報知としてHUD装置14(図1参照)は、図12に示すように、LKAのインジケータ46aに加えて、ACCの作動を示すインジケータ46bを、投影領域14aの下縁エリアに投影する。加えてHUD装置14は、姿勢崩れアイコン45に加えて、メッセージ画像47及び操作アイコン48を、投影領域14aの中央エリアに投影する。メッセージ画像47は、コンビネーションメータ12に表示されるメッセージ画像42(図8参照)と同様に、検知された異常の内容と、自動退避制御への移行予告とを、文字によって運転者に報知する。メッセージ画像47の背景部47aは、コンビネーションメータ12の背景部42a(図11参照)と同様に、赤色系の色で表示される。操作アイコン48は、自動退避制御への移行解除及び自動退避制御への強制移行がステアリングスイッチ15a(図1参照)への操作によって可能である旨を、運転者に報知する。
 第二の報知としてCID13は、図13に示すように、姿勢崩れアイコン50及びメッセージ画像51を表示画面13aに表示する。姿勢崩れアイコン50及びメッセージ画像51は、投影領域14aに投影される姿勢崩れアイコン45及びメッセージ画像47(図9参照)と実質同じ形状である。CID13による表示は、運転者以外の自車両A(図1参照)の乗員によっても視認可能である。そのため、メッセージ画像51の背景部51aの色は、運転者へ向けられる各メッセージ画像42,47の各背景部42a,47aの色とは異なっている。具体的に、メッセージ画像51の背景部51aは、乗員に安心感を与えることができるように、緑色系の色で表示される。
 加えて第二の報知では、正式判定に基づく通知音が、オーディオスピーカ112により乗員に向けて再生される。オーディオスピーカ112は、自動運転制御への移行を予告するガイド音声を、通知音の後に、乗員に向けて発話する。オーディオスピーカ112は、例えば「姿勢崩れを検出しました。まもなく退避走行に移行します。解除する場合は、ステアリングのスイッチを押して下さい」といったメッセージを再生する。
 次に、自動退避制御における実行通知の詳細を、図14~図16に基づいて説明する。尚、図14及び図15の各進捗画像151,141において、ドットの記載された範囲が消灯状態を示し、白抜きとされた範囲が点灯状態を示している。
 運転困難状態の確定判定(図7のT6参照)に基づく実行通知においては、CID13は、図14に示すように、乗員報知表示150を表示画面13aに表示する。乗員報知表示150は、自動退避制御の作動情報が情報取得部31(図8参照)によって取得された場合に、自動退避制御に係る情報を主に助手席17p(図1参照)に着座する乗員に報知する表示である。図14A~図14Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける乗員報知表示150の態様を示しいている。乗員報知表示150は、表示画面13aと同様に横長形状とされている。乗員報知表示150には、進捗画像151、説明画像152、メッセージ画像153、撮像画像154、及びマップ画像156が含まれている。
 進捗画像151は、円形状に形成された画像である。進捗画像151は、周方向に複数(四つ)に領域を分割されている。進捗画像151は、現在実行中のプロセスに対応した領域を、明るい状態と暗い状態との周期的な繰り返し(点滅)によって示している。そして、一つのプロセスが完了すると、進捗画像151は、完了したプロセスに対応する特定の領域を通知音に合わせて短く明滅させる。その後、進捗画像151は、終了したプロセスに対応する領域を、点灯状態のまま維持する。
 以上によれば、自動退避制御のプロセスが進むことにより、進捗画像151は、点滅状態とする領域を時計回りに移動させると共に、点灯状態とする領域を一つずつ増加させる。こうした表示により、進捗画像151は、自動退避制御における現在の進捗度合いを、段階的に示すことができる。加えて、プロセスの完了に伴う明滅により、進捗画像151は、プロセスが完了したことを乗員に知らせて、安心感を抱かせることができる。
 さらに、実行中のプロセスに対応する特定の一つの領域は、説明画像152の背景として、点滅表示を行うことができる。点滅状態にある領域においては、明るい状態の維持される時間(例えば0.7秒)が、消灯によって暗い状態の維持される時間(0.3秒)よりも長く設定されている。各領域を点滅させる周期(例えば1.0秒)は、人間の通常時の心拍数と同程度に設定されている。
 説明画像152は、自動退避制御によって実施される複数のプロセスのうちで、現在実行中のプロセスを文字によって説明する画像である。具体的に、説明画像152は、「退避経路設定」、「退避場所移動」、「退避場所停車」及び「緊急コール」といった文字群を表示する。説明画像152は、各文字群を、進捗画像151の各領域に一つずつ重ねて表示させている。説明画像152及び進捗画像151は、表示画面13aのうちで、助手席17p(図1参照)よりも運転席17d(図1参照)に近い範囲に表示されている。
 メッセージ画像153は、自動退避制御によって現在走行していることと、実行中の自動退避制御への対処行動とを、文字によって案内する画像である。具体的に、メッセージ画像153は、例えば「退避走行中」というメッセージと、自動退避制御を中止するための操作方法とを含んでいる。メッセージ画像153は、表示画面13aの上縁エリアに表示される。メッセージ画像153は、コールプロセスへの移行に伴い、自動退避制御による走行を通知するメッセージ(図14A~図14C)から、緊急通報の実施を通知するメッセージ(図14D)へと、内容を変更される。尚、緊急通報が完了した後は、例えば「車外へ出ることは控えて下さい」といった車内に留まることを推奨するメッセージ画像に変更されてもよい。
 撮像画像154は、前方カメラユニット92(図2参照)によって撮影された画像である。撮像画像154には、自動退避制御によって走行予定の予定走行経路が写されている。撮像画像154には、矢印状に形成された経路明示画像部155が重畳されている。経路明示画像部155は、自動退避制御によって設定された予定走行経路の情報に基づいて描画されている。経路明示画像部155は、撮像画像154に写る予定走行経路を明示することができる。撮像画像154は、マップ画像156と水平方向に並べて表示されている。
 マップ画像156は、自動退避制御によって設定された退避場所を、自車両A(図1参照)の周囲の道路形状と共に乗員へ示す画像である。具体的に、マップ画像156には、自車両Aの位置を示す自車アイコン156aと、自車両Aの周囲の道路形状を示す道路画像部156bと、退避場所を示す停車アイコン156cとが表示される。マップ画像156は、表示画面13aのうちで、撮像画像154よりも助手席17p側に表示されている。
 実行通知としてコンビネーションメータ12は、図15に示すように、運転者報知表示140を表示画面12aに表示する。運転者報知表示140は、自動退避制御に係る情報を運転席17d(図1参照)に着座する運転者に報知する表示である。図15A~図15Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける運転者報知表示140の態様を示しいている。運転者報知表示140は、コンビネーションメータ12の通常表示に重畳されるかたちで、表示画面12aに表示される。運転者報知表示140には、進捗画像141、説明画像142、及び案内画像143が含まれている。
 進捗画像141は、乗員報知表示150の進捗画像151(図14参照)と実質同一形態の画像であって、自動退避制御のプロセスの移行に伴って、点滅状態とする領域を時計回りに移動させる。こうした表示により、進捗画像141は、自動退避制御における現在の進捗度合いを示すことができる。説明画像142は、乗員報知表示150の説明画像152(図14参照)と実質同一形態の画像であって、進捗画像141に重ねられている。進捗画像141及び説明画像142は、表示画面12aの中央に配置されている。第一実施形態では、乗員報知表示150の進捗画像151に示されるプロセスの数と、運転者報知表示140の進捗画像141に示されるプロセスの数とは、互いに同一に設定されている。
 案内画像143は、乗員報知表示150のメッセージ画像153(図14参照)と同様に、実行中の自動退避制御への対処行動を、文字によって案内する画像である。案内画像143は、表示画面12aにおいて、例えば進捗画像141及び説明画像142の右側に配置されている。案内画像143は、コールプロセスへの移行に伴い、自動退避制御の中止方法を記載したメッセージ(図15A~図15C)から、緊急コールの実施を示すアイコン(図15D)へと変更される。
 実行通知としてHUD装置14(図1参照)は、図16に示すように、運転者報知表示146を投影領域14aに表示する。運転者報知表示146は、自動退避制御に係る情報を、コンビネーションメータ12の運転者報知表示140(図15参照)と共に運転者に報知する表示である。図16A~図16Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける運転者報知表示146の態様を示しいている。運転者報知表示146には、メッセージ画像148が少なくとも含まれている。
 メッセージ画像148は、乗員報知表示150のメッセージ画像153(図14参照)と同様に、現在自動退避制御によって走行中であることを、文字によって案内する画像である。メッセージ画像148は、投影領域14aの下縁エリアに表示される。メッセージ画像148は、コールプロセスへの移行に伴い、自動退避制御による走行を通知するメッセージ(図16A~図16C)から、緊急通報の実施を通知するメッセージ(図16D)へと、内容を変更される。
 加えて実行通知では、自動退避制御のプロセスの移行に伴って、通知音と音声メッセージが図1に示すオーディオスピーカ112によって再生される。実行通知の開始時には、オーディオスピーカ112は、「退避走行を開始します」という音声を再生する(図7のT6,音声1)。加えて、オーディオスピーカ112は、退避場所及び予定走行経路の設定が完了すると、「退避場所を設定しました」という音声を再生する。
 設定プロセスから移動プロセスへの移行時には、「退避場所へ移動します」という音声が再生される(図7のT7,音声2)。移動プロセスにおいて車線変更が開始されるときには、「車線変更を開始します。中止する場合はハザードスイッチを二回押して下さい。周囲の車に退避走行を通知しています」という音声が再生される(図7のT8,音声3)。そして、車線変更が完了すると、「車線変更を完了しました」という音声が再生される(図7のT9,音声4)。
 移動プロセスから停車プロセスへの移行時には、「間もなく安全な場所に停車します」という音声が再生される(図7のT10,音声5)。そして、退避場所に停車すると、「退避場所に停車しました」という音声が再生される(図7のT11,音声6)。さらに、停車プロセスからコールプロセスへの移行時には、「コールセンターに退避場所を連絡しました」という音声が再生される(図7のT12,音声7)。
 次に、自動退避制御の開始までに制御回路70aによって実施される処理の詳細を、図17及び図18に基づき、図1及び図2を参照しつつ説明する。図17及び図18のフローチャートに示される処理は、セレクターレバー16(図1参照)のDレンジへの切り替えにより自車両Aが走行可能になったことに基づいて、制御回路70aによって開始される。
 S101では、DSM11によって検知された情報に基づいて、運転者に異常の可能性があるか否かを判定する。第一閾値時間TH1を超えて異常検知が継続されていた場合には、S101にて、運転者が異常の可能性があるという仮判定(図4 T3)を行い、S102へ進む。S102では、HMIシステム10を用いて第一の報知を実施し、S103へ進む。一方で、異常検知が第一閾値時間TH1を超えない場合、S101を繰り返し、運転者の監視を継続する。
 S103では、運転支援機能が作動中であるか否かを判定する。LKA及びACCが共に作動している場合、S107へ進む。一方で、LKA及びACCの少なくとも一方が作動していない場合、S104へ進む。S104では、第一プレ退避制御の開始によってLKAを作動させて、S105へ進む。
 S105では、DSM11によって検知された情報に基づいて、運転者が異常状態にあるか否かを判定する。異常検知が第二閾値時間TH2を超えて継続していない場合には、S113へ進む。
 S113では、DSM11の検知情報に基づく運転姿勢、及び操舵トルクセンサ63による操舵力等から、運転者が正しく運転可能な状態か否かを判定する。S113にて、運転者の運転姿勢が十分に改善されていない場合、及び正しくステアリング操舵を行っていない場合には、S114へ進む。S114では、例えば脇見などを注意喚起するような表示を実施し、S113へ戻る。一方で、S113にて、運転姿勢の改善及び操舵トルクの復帰等が確認できた場合には、S115へ進む。S115では、LKAを停止させることでマニュアル運転へ移行させ、S101へ戻る。
 一方で、S105にて、第二閾値時間TH2を超えて異常検知が継続されていた場合には、運転者が異常状態にあるという正式判定(図4 T4)を行い、S106へ進む。S106では、第二プレ退避制御の開始によりACCをさらに作動させて、S108へ進む。
 S107では、S105と同様に、運転者が異常状態にあるか否かを判定する。異常検知が第二閾値時間TH2を超えて継続していない場合には、S101へ戻る。一方で、異常検知が継続されていた場合には、S107にて運転者が異常状態にあるという正式判定(図4 T4)を行い、S108へ進む。
 S108では、HMIシステム10を用いて第二の報知を実施し、S109へ進む。S109では、周辺監視ECU91に退避場所の探索を開始させるよう探索要求情報を出力し、S110へ進む。S110では、自車両Aを緩減速させる制動制御を開始し(図4 T5)、S111へ進む。
 S111では、自動退避制御への移行条件が成立したか否かを判定する。S111にて、ステアリングスイッチ15aの「Yes」ボタンの操作により、自動退避制御への移行が解除された場合、S101へ戻る。一方で、ステアリングスイッチ15aの「No」ボタンの操作によって自動退避制御への移行が同意された場合、及びステアリングスイッチ15aの操作が無いまま応答時間ATが経過した場合には、S112へ進む。S112では、自動退避制御を開始し、一連の処理を終了する。S112により、他の車両A1へ運転困難状態を報知するための処理として、車車間通信による警告配信、ハザードランプの点滅、及び走行用前照灯95aの点灯等が実施される(図7 T6)。
 次に、自動退避制御の開始後に制御回路20aによって実施される処理の詳細を、図19~図21に基づき、図1及び図2を参照しつつ説明する。図19~図21のフローチャートに示される処理は、運転困難状態が確定したことに基づいて、制御回路70aによって開始される。
 S131では、コンビネーションメータ12、CID13、及びHUD装置14による各表示を、実行通知のための各報知表示140,150,146に切り替えて、S132へ進む。S132では、退避走行開始を通知する音声をオーディオスピーカ112に再生させ、S133へ進む(図7 T6,音声1)。
 S133では、自動退避制御による退避場所及び予定走行経路の設定が完了したか否かを判定する。S133では、退避場所等の設定が完了するまで待機し、退避場所等の設定が完了したことに基づき、S134へ進む。S134では、退避場所の設定完了を通知する音声をオーディオスピーカ112に再生させ、S135へ進む。
 S135では、自動退避制御の作動情報を取得し、自動退避制御にて現在実行中のプロセスが設定プロセスから移動プロセスに移行したか否かを判定する。S135では、移動プロセスへの移行が完了するまで待機し、移動プロセスへの移行が完了したことに基づき、S136へ進む。S136では、各進捗画像141,151を移動プロセスの実施中を示す表示へと変更した乗員報知表示150(図14B及び図15B参照)を生成し、S137へ進む。S137では、移動開始を通知する音声をオーディオスピーカ112に再生させ、S138へ進む(図7 T7,音声2)。
 S138では、予定走行経路の情報に基づき、車線変更が必要か否かを判定する。S138にて、車線変更が必要と判定した場合には、S139へ進む。S139では、車線変更が可能となるまで待機し、車線変更が可能となったことに基づき、S140へ進む。S140では、車線変更の開始を通知する音声をオーディオスピーカ112に再生させ、S141へ進む(図7 T8,音声3)。
 S141では、車線変更が完了したか否かを判定する。S141では、車線変更が完了するまで待機し、車線変更が完了したことに基づき、S142へ進む。S142では、車線変更の完了を通知する音声をオーディオスピーカ112に再生させ(図7 T9,音声4)、S138へ戻る。これにより、S138にて、再び車線変更の要否が判定される。
 S138にて、車線変更が不要と判定した場合には、S143へ進む。S143では、自動退避制御の作動情報を取得し、自動退避制御にて現在実行中のプロセスが移動プロセスから停車プロセスに移行したか否かを判定する。S135では、停車プロセスへの移行が完了するまで待機し、停車プロセスへの移行が完了したことに基づき、S144へ進む。S144では、各進捗画像141,151を移動プロセスの実施中を示す表示へと変更した乗員報知表示150(図14C及び図15C参照)を生成し、S145へ進む。S145では、退避場所への停止開始を通知する音声をオーディオスピーカ112に再生させ、S146へ進む(図7 T10,音声5)。
 S146では、自車両Aの走行速度に基づき、退避場所に停車したか否かを判定する。S146では、自車両Aが停車状態となるまで待機し、停車状態となったとことに基づき、S147へ進む。S147では、退避場所に停車した旨を通知する音声をオーディオスピーカ112に再生させ、S148へ進む(図7 T11,音声6)。
 S148では、自動退避制御の作動情報を取得し、自動退避制御にて現在実行中のプロセスが停車プロセスからコールプロセスに移行したか否かを判定する。S148では、コールプロセスへの移行が完了するまで待機し、コールプロセスへの移行が完了したことに基づき、S149へ進む。S149では、各進捗画像141,151を移動プロセスの実施中を示す表示へと変更した乗員報知表示150(図14D及び図15D参照)を生成し、S150へ進む。S150では、コールセンターへの連絡実施を通知する音声をオーディオスピーカ112に再生させ(図7 T12,音声7)、一連の処理を終了する。
 ここまで説明した第一実施形態によれば、乗員報知表示150に含まれる進捗画像151により、複数のプロセスからなる自動退避における現在の進捗度合いが知らされる。故に、乗員は、自動退避制御の全体像と、自動退避制御の終わりをメージできるようになり得る。加えて、現在実行中のプロセスを説明画像152によって乗員に説明することで、乗員は、運転者に依らないで走行する自車両Aの動きを概ね予測し得る。これらにより、乗員報知表示150は、自動退避制御によって走行している自車両A内の乗員の不安を和らげることが可能となる。
 ここで、自動退避制御が開始された後において、運転者の回復する可能性が考慮され得る。故に、自動退避制御に係る情報は、運転者を除く乗員だけでなく、運転者にも提示されることが望ましい。そのため第一実施形態では、運転者に視認可能な表示画面12a及び投影領域14aに表示させた運転者報知表示140,146により、自動退避制御の進捗は、運転者にも通知される。その結果、運転者にとっても分かり易い情報提示が実現される。
 また第一実施形態によれば、自動退避制御の作動時にとるべき対処行動として、退避走行の解除方法が案内される。故に、運転困難な状態から復帰した運転者は、案内画像143を参照することにより、適切な対処行動を行うことができる。また、こうした対処行動が乗員にも案内されることにより、乗員の不安は、いっそう取り除かれ得る。
 さらに第一実施形態によれば、各進捗画像141,151に示されるプロセスの数は、互いに同一とされている。故に、例えば運転困難な状態から復帰した運転者が、コンビネーションメータ12及びCID13を共に視認したとしても、運転者は、混乱することなく現在の状況を把握し得る。
 また第一実施形態では、乗員によって視認されるCID13の背景部51aの色と、運転者にのみ視認されるコンビネーションメータ12及び投影領域14aの各背景部42a,47aの色とが互いに異なっている。故に、CID13の緑色系の背景部51aによって、乗員の不安を和らげる一方で、赤色系の各背景部42a,47aによって運転者の緊張感を高めて、対処を促す効果を得ることが可能になる。
 加えて第一実施形態によれば、点滅を繰り返す各進捗画像141,151は、運転者及び乗員を誘目することができる。故に、各進捗画像141,151よって示される現在実行中のプロセスは、運転者及び乗員に認識され易くなる。また、各進捗画像141,151には各説明画像142,152がそれぞれ重畳されている。故に、各進捗画像141,151の点滅は、各説明画像142,152への誘目も可能にする。さらに、各進捗画像141,151は、点滅表示されているものの、明るい状態を維持する時間を長く確保されている。故に、各説明画像142,152は、点滅する各進捗画像141,151と重ねられても、読み易い表示となり得る。
 また第一実施形態では、自車両Aの進行方向を撮影した撮像画像154に、予定走行経路を明示する経路明示画像部155が重畳されている。故に、乗員報知表示150を視認した乗員は、自動退避制御によって走行予定の経路を予め知ることができる。その結果、乗員の不安の軽減が可能となる。
 さらに第一実施形態によれば、走行用前照灯95aの作動により、自車両Aの周囲の車両に、自車両Aが通常状態にない旨が通知され得る。加えて、走行用前照灯95aによる予定走行経路の照明により、撮像画像154は、予定走行経路を鮮明に表示することができる。
 加えて第一実施形態によれば、マップ画像156に示された自車アイコン156aと停車アイコン156cとの位置関係から、乗員は、自車両Aが停車する退避場所までの距離を、概ね把握可能となる。故に、乗員は、自動退避制御の終了をいっそうイメージし易くなる。こうした表示によれば、乗員の不安は、いっそう軽減され得る。
 また第一実施形態によれば、自動退避制御におけるプロセスの移行は、表示だけでなく、音声によっても乗員に報知される。故に、乗員への情報伝達の確度を高めて、乗員の不安をいっそう軽減させることが可能となる。
 さらに第一実施形態によれば、進捗画像151及び説明画像152は、表示画面13aのうちで運転席17d寄りに表示されている。故に、表示画面13a周囲のインスツルメントパネル19等に妨げられて進捗画像151等が見難くなる事態は、回避され得る。その結果、助手席17pに着座する乗員は、助手席17pのシート位置に係わらず、進捗画像151及び説明画像152を視認容易となる。故に、自動退避制御の進捗度合いを報知することによる進捗画像151及び説明画像152の不安を軽減させる効果は、確実に発揮されるようになる。
 尚、第一実施形態では、表示画面12a及び投影領域14aがそれぞれ「第二表示領域」に相当し、表示画面13aが「表示領域」及び「第一表示領域」に相当する。また、情報取得部31が「作動情報取得部」に相当し、オーディオスピーカ112が「音声再生装置」に相当し、メッセージ画像153が「案内画像」に相当する。さらに、S135,S143,S148が「作動情報取得ステップ」に相当し、S136,S144,S149が「表示生成ステップ」に相当する。そして、HCU20が「情報提示装置」に相当する。
 (第二実施形態)
 図22及び図23に示す本開示の第二実施形態は、第一実施形態の変形例である。第二実施形態では、自動退避制御の実施通知における乗員報知表示250及び運転者報知表示240の表示形態が、第一実施形態とは異なっている。以下、第二実施形態における各報知表示の詳細を説明する。
 図22に示す乗員報知表示250は、CID13の表示画面13aに表示される。図22A~図22Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける乗員報知表示250の態様を示しいている。乗員報知表示250には、第一実施形態と同様に、進捗画像251、説明画像252、メッセージ画像253、撮像画像254、及びマップ画像256が含まれている。
 進捗画像251は、「!」を示すアイコン、円環状の画像部、及び円弧状の画像部の組み合わせによって形成されている。円環状及び円弧状の各画像部は、アイコンの周囲を囲んでいる。円弧状の画像部は、円環状の画像部に重ねられている。円弧状の画像部の線幅は、円環状の画像部の線幅よりも太い。円環状の画像部は、自動退避制御におけるプロセスの進行に従い、円環状の画像部に沿って時計回りに延伸する。こうした表示により、進捗画像251は、自動退避制御における現在の進捗度合いを連続的に示すことができる。進捗画像251は、主に移動プロセス及び停車プロセスにおいて表示画面13aに表示される。
 説明画像252は、表示画面13aにおいて進捗画像251から離れた位置に表示されている。説明画像252は、点滅する背景に重ねられている。こうした点滅により、乗員の視線は、説明画像252へ誘導される。
 メッセージ画像253は、自動退避制御によって現在走行していることを、文字により案内している。メッセージ画像253には、自動退避制御を中止するための操作方法は、含まれていない。メッセージ画像253は、移動プロセス及び停車プロセスにおいて表示を省略される。
 撮像画像254は、第一実施形態の撮像画像154(図14参照)と同様に、前方カメラユニット92(図2参照)によって撮影された画像である。マップ画像256は、第一実施形態のマップ画像156(図14参照)と同様に、自動退避制御によって設定された退避場所を乗員に示す画像であって、自車アイコン256a、道路画像部256b、及び停車アイコン256cを含んでいる。マップ画像256は、撮像画像254に重ねて表示される。撮像画像254は、主に移動プロセス及び停車プロセスにおいて表示画面13aに表示される。マップ画像256は、主に移動プロセスにおいて表示画面13aに表示される。
 図23に示す運転者報知表示240は、コンビネーションメータ12の表示画面12aに表示される。図23A~図23Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける運転者報知表示240の態様を示しいている。運転者報知表示240には、第一実施形態と同様に、進捗画像241、説明画像242、及び案内画像243a,243bが含まれている。
 進捗画像241は、乗員報知表示250の進捗画像251(図22参照)と実質同一形態の画像であって、自動退避制御のプロセスの移行に伴って、円弧状の画像部を時計回りに延伸させる。こうした表示により、進捗画像241は、自動退避制御における現在の進捗度合いを示すことができる。説明画像242は、表示画面12aにおいて進捗画像241から離れた位置に表示されている。説明画像242は、進捗画像241の側方(例えば左側)に配置されている。
 案内画像243aは、自動退避制御によって現在走行していることを、文字によって案内する画像である。案内画像243aは、進捗画像241の左側に配置されている。一方、案内画像243bは、実行中の自動退避制御への対処行動を、文字によって案内する画像である。案内画像243bは、進捗画像241の右側に配置されている。第二実施形態では、対処行動を案内する画像は、運転者報知表示240及び乗員報知表示250(図22参照)のうちで、運転者報知表示240のみに含まれている。
 ここまで説明した第二実施形態でも、第一実施形態と同様の効果を奏することにより、乗員の不安を和らげることが可能となる。加えて第二実施形態では、自動退避制御を中止する対処方法は、運転者のみに伝わるよう、コンビネーションメータ12及びCID13のうちで、コンビネーションメータ12にのみ表示される。こうした表示によれば、自動退避制御への移行後に、焦った乗員によって、誤った判断に基づく対処行動が実施される事態を回避することができる。
 (第三実施形態)
 図24に示す本開示の第三実施形態は、第一実施形態の別の変形例である。第三実施形態では、自動退避制御の実施通知における進捗画像351が、第一実施形態の進捗画像151(図14参照)とは異なっている。図24A~図24Dはそれぞれ、設定プロセス、移動プロセス、停車プロセス、及びコールプロセスにおける進捗画像351の態様を示しいている。
 進捗画像351は、複数に分割させた領域のうちで、現在実行中のプロセスに対応した領域351aを外周側にずらすことにより、他の領域から離れた位置に表示させる。領域351aは、点滅表示されると共に、他の領域よりも径方向に拡大されている。また、領域351aと重ねられる説明画像352は、領域351aと共に外周側に移動し、且つ、拡大して表示される。自動退避制御のプロセスが次へ移行されると、領域351aは、縮小されると共に、他の領域と一体化される。進捗画像351は、自動退避制御のプロセスが進むことにより、領域351aを時計回りに移動させることで、自動退避制御における現在の進捗度合いを分かり易く示すことができる。
 ここまで説明した第三実施形態でも、第一実施形態と同様の効果を奏することにより、乗員の不安を和らげることが可能となる。また第三実施形態では、コンビネーションメータ12に表示される進捗画像141(図15参照)についても、進捗画像351と同様に、特定の領域351aを拡大する表示態様とすることが可能である。
 (第四実施形態)
 図25に示す本開示の第四実施形態は、第一実施形態のさらに別の変形例である。第四実施形態の進捗画像451に示される自動退避制御のプロセスの数(六つ)は、第一実施形態の進捗画像151(図14参照)に示されるプロセスの数(四つ)よりも、多くされている。故に、CID13に表示の進捗画像451に示されるプロセスの数は、コンビネーションメータ12に表示の進捗画像141(図15参照)に示されるプロセスの数よりも、多くなっている。
 ここまで説明した第四実施形態でも、第一実施形態と同様の効果を奏することにより、乗員の不安を和らげることが可能となる。加えて第四実施形態では、運転者へ向けて表示される進捗画像141(図15参照)よりも、助手席17p(図1参照)の乗員へ向けて表示される進捗画像451の方が、退避走行機能によって実施されるプロセスを詳細に提示し得る。こうした詳細な情報提示は、乗員の不安解消に寄与可能である。尚、進捗画像451に示される数は、適宜変更可能である。例えば、車線変更を複数回繰り返す予定であれば、進捗画像451は、車線変更の予定回数だけ、領域の数を増やすことが可能である。
 (第五実施形態)
 図26~図29に示す本開示の第五実施形態は、第一実施形態のさらに別の変形例である。第五実施形態では、自車両Aの車載ネットワーク501に含まれる空調システム180及びシートコントローラ186が、退避走行時において運転者及び乗員への情報提示にさらに用いられる。加えて、第五実施形態によるHMIシステム10は、音声による情報通知を行う音響デバイスとして、二組の超音波スピーカ113,114を備えている。以下、第五実施形態の構成を、図26及び図27に基づき、図1を参照しつつ説明する。
 空調システム180は、運転者及び乗員によって設定された空調関連の設定値等を含む空調要求情報をHCU20から取得し、車室内の温度、清浄、及び気流等を調整する車両用の冷暖房システムである。空調システム180は、エアコンユニット182、アロマユニット183、及び空調制御ECU181を備えている。
 エアコンユニット182は、インスツルメントパネル19等に設けられた各吹出口19d,19pから車室内に供給される温風及び冷風を生成する。エアコンユニット182は、運転席17dの周辺へ向けて吹出口19dから吹き出される空気の温度と、助手席17pの周辺へ向けて吹出口19pから吹き出される空気の温度とを個別に変更することが可能である。
 アロマユニット183は、芳香(アロマ)成分を含むエッセンシャルオイル等のアロマオイルを霧状にする。アロマユニット183によって霧状にされた芳香成分は、エアコンユニット182によって生成された気流と混ぜられて、少なくとも助手席17p側の吹出口19pから車室内へと供給される。車室内に拡散された芳香成分は、乗員のストレスを軽減する効果を発揮し得る。
 空調制御ECU181は、プロセッサ及びメモリを有するマイクロコンピュータを主体として構成されている。空調制御ECU181は、通信バス99と接続されており、HCU20から通信バス99に出力された空調要求情報を受信する。空調制御ECU181は、エアコンユニット182及びアロマユニット183と接続されており、取得した空調要求情報に基づいて、エアコンユニット182及びアロマユニット183の作動を制御する。
 シートコントローラ186は、運転席17d及び助手席17pに関連する機器、例えば各シートアクチュエータ187,188及びシートヒータ189等の動作を統合的に制御する制御装置である。シートコントローラ186は、プロセッサ及びメモリを有するマイクロコンピュータを主体として構成されている。シートコントローラ186は、通信バス99を通じてHCU20から出力されたシート要求情報を受信し、シート要求情報に基づいて各シートアクチュエータ187,188及びシートヒータ189の作動を制御する。
 シートアクチュエータ187は、運転席17dの前後位置、並びにシートクッション及びシートバック等の姿勢を変化させることにより、運転席17dのシートポジションの調整を可能にしている。シートアクチュエータ188は、助手席17pの前後位置、並びにシートクッション及びシートバック等の姿勢を変化させることにより、助手席17pのシートポジションの調整を可能にしている。シートヒータ189は、助手席17pのシートクッション及びシートバックを温めることができる。
 超音波スピーカ114は、自車両Aの車室内にて、助手席17pの前方且つウインドシールド18の上方に、一対設置されている。超音波スピーカ114は、運転席17d側に設けられた超音波スピーカ113と実質同一の構成である。超音波スピーカ114は、助手席17pのヘッドレスト付近へ向けて、指向性の高い超音波を出力する。超音波スピーカ114は、自車両Aの乗員のうちで、助手席17pに着座する運転者のみによって聞き取り可能な音声を再生する。超音波スピーカ114は、再生する音声によって助手席17pの乗員のみに情報通知を行うことができる。
 HCU20の制御回路20aは、メモリ23に記憶されたプログラムを各プロセッサ21,22によって実行することにより、第一実施形態と実質同一の各機能ブロック(31~36)に加えて、空調制御要求部137及びシート制御要求部138を構築する。
 空調制御要求部137は、空調制御ECU181へ向けて空調要求情報を出力することにより、エアコンユニット182及びアロマユニット183の作動を制御する。空調制御要求部137は、プレ退避制御及び自動退避制御の作動情報が取得された場合に、運転者及び乗員へ向けて吹き出される気流の温度を個別に調整すると共に、助手席17p周辺へ向けた芳香成分の散布を開始させる。
 シート制御要求部138は、シートコントローラ186へ向けてシート要求情報を出力することにより、各シートアクチュエータ187,188及びシートヒータ189の作動を制御する。シート制御要求部138は、プレ退避制御及び自動退避制御の作動情報が取得された場合に、運転席17d及び助手席17pの各シートポジションを個別に調整すると共に、助手席17pの昇温を開始させる。
 以上の構成により、プレ退避制御及び自動退避制御の実行中に運転者及び乗員へ対して行われる情報提示の詳細を、以下説明する。まず、プレ退避制御における第一の報知及び第二の報知の詳細を、図28に基づき、図1を参照しつつ説明する。尚、第五実施形態での各表示デバイスによる表示は、第一実施形態と実質同一である。
 異常状態の仮判定(T3)に基づく第一の報知では、二組の超音波スピーカ113,114のうちで、運転席17d側に設けられた超音波スピーカ113のみから通知音が再生される。超音波スピーカ113によって再生される通知音は、運転者に緊張を促すような例えば2キロヘルツ程度の比較的高い音に設定されている。加えて第一の報知では、運転席17dの正面に設けられた吹出口19dから、運転者の緊張感を高めるように、現在の室温よりも低い温度の冷風の吹き出しが行われる。
 異常状態の正式判定(T4)に基づく第二の報知では、正式判定に基づく通知音が二組の超音波スピーカ113,114のそれぞれから再生される。助手席17p側に設けられた超音波スピーカ114によって再生される通知音は、乗員の不安感を高めないように、超音波スピーカ113によって再生される通知音よりも低音であって、異なる高さの音を複数組み合わせた和音とされている。各超音波スピーカ113,114は、それぞれ通知音に続けて、「姿勢崩れを検出しました。まもなく退避走行に移行します。解除する場合は、ステアリングのスイッチを押して下さい」といった自動運転制御への移行を予告するガイド音声を再生する。
 加えて第二の報知では、助手席17pの正面に設けられた吹出口19pから、乗員の安心感を高めるように、現在の室温よりも高い温度の温風の吹き出しが行われる。さらに吹出口19pからは、乗員の緊張を和らげる効果のある芳香成分が、アロマユニット183(図26参照)の作動によって供給される。
 また第二の報知では、運転者の両腕及び背中等の筋を動かして固有知覚を刺激するように、運転席17dのシートポジションを変動させる動作がシートアクチュエータ187(図26参照)によって実行される。一方で、助手席17pのシートポジションは、例えばシートバックをさらに後傾させる等の作動により、乗員をリラックスさせる状態に変更される。加えて、シートヒータ189(図26参照)の作動により、助手席17pの昇温が図られる。
 次に、自動退避制御における実行通知の詳細を、図28及び図26に基づき、図1を参照しつつ説明する。
 運転困難状態の確定判定に基づく実行通知においては、自動退避制御のプロセスの移行に伴って、各超音波スピーカ113,114は、プロセスの完了を通知する通知音と、音声メッセージとを続けて再生する。各超音波スピーカ113,114によって再生される各通知音は、プレ退避制御の実行時と同様に互いに異なっている。一方で、各超音波スピーカ113,114によって再生される音声メッセージは、互いに実質同一の内容であり、第一実施形態にてオーディオスピーカ112(図2参照)により再生される音声メッセージとも実質同一の内容である。
 具体的に、実行通知の開始時には、各超音波スピーカ113,114は、「退避走行を開始します」という音声メッセージを各通知音に続けて再生する(T6,音声1)。そして、退避場所及び予定走行経路の設定の完了により、各超音波スピーカ113,114は、「退避場所を設定しました」という音声メッセージを再生する(T7,音声2)。
 さらに、車線変更の開始時には、「車線変更を開始します。中止する場合はハザードスイッチを二回押して下さい。周囲の車に退避走行を通知しています」という音声メッセージが各超音波スピーカ113,114によって再生される(T8,音声3)。そして、車線変更が完了すると、「車線変更を完了しました」という音声メッセージが再生される(T9,音声4)。
 移動プロセスから停車プロセスへの移行時には、「間もなく安全な場所に停車します」という音声メッセージが再生される(T10,音声5)。その後、退避場所に停車すると、「退避場所に停車しました」という音声メッセージが再生される(T11,音声6)。このとき、運転者の緊張感を高めるために行われていた吹出口19dからの冷風の吹き出しと、運転席17dのシートポジションの変動とが共に終了される。一方で、乗員に安心感を抱かせるための吹出口19pからの温風及び芳香成分の吹き出しと、助手席17pのシートポジション及びシート温度の調整は、共に継続される。そして、停車プロセスからコールプロセスへの移行時には、「コールセンターに退避場所を連絡しました」という音声メッセージが、助手席17p側の超音波スピーカ114のみから再生される(T12,音声7)。
 ここまで説明した第五実施形態でも、第一実施形態と同様の効果を奏することにより、退避走行中における乗員の不安を和らげることが可能となる。加えて第五実施形態では、助手席17pに着座する乗員を落ち着かせるために、乗員周囲の温度及びアロマ環境等が整えられる。以上によれば、退避走行中における乗員の不安は、いっそう緩和可能になる。
 (他の実施形態)
 以上、本開示による複数の実施形態について説明したが、本開示は、上記実施形態に限定して解釈されるものではなく、本開示の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
 上記実施形態において、運転者又は乗員によってハザードスイッチ15b(図1参照)が一回のみ押された場合、CID13及びコンビネーションメータ12の各表示は、それぞれ図30及び図31に示すような態様に変更される。具体的には、「中止はハザード2回押す」とされていたメッセージ画像153及び案内画像143は、(図14A及び図15A参照)は、「あと1回ハザードを押して中止」というメッセージ画像及び案内画像143に変更される。
 以上のように、運転者又は乗員による操作の入力に対して表示態様の変更という反応があれば、運転者及び乗員は、自車両Aのシステムの正常作動を実感できる。その結果、運転者及び乗員は、安心感を得ることができる。加えて、ハザードスイッチ15bへの操作入力が行われた場合には、CID13及びコンビネーションメータ12は、操作の受け付けを強調して伝えるような点滅表示を行うことも可能である。
 図32には、上記実施形態の変形例1による進捗画像651及び説明画像652が示されている。進捗画像651は、横長の矩形状に形成された枠状の画像部と、枠状の画像部内に位置するバー状の画像部とを有している。進捗画像651は、自動退避制御におけるプロセスの進行に従い、枠状の画像部内にて、バー状の画像部を一方の端部から他方の端部へ向けて延伸させる。こうした表示により、進捗画像651は、自動退避制御における現在の進捗度合いを示すことができる。また、説明画像652は、進捗画像651の下側に配置されており、現在実行されているプロセスを示すことができる。
 図33には、上記実施形態の変形例2による乗員報知表示750が示されている。乗員報知表示750は、縦長に形成されたCIDの表示画面713aに表示される。乗員報知表示750は、表示画面713aに形状に合わせて、縦長形状の画像とされている。具体的に乗員報知表示750では、上方から下方へ向けて、メッセージ画像753、撮像画像754、及びマップ画像756が順に並べられている。こうした各画像の配置により、乗員報知表示750は、表示画面713aの広さを有効に活用して、乗員への見易い情報提示を実現できる。また、マップ画像756よりも上方に配置される撮像画像754は、ウインドシールド18(図1参照)に近接して位置し得る。その結果、乗員は、撮像画像754によるAR(Augmented Reality)表示と、ウインドシールド18(図1参照)を通して見える前景とを、関連付け易くなる。
 また、図34には、上記実施形態の変形例3による乗員報知表示850が示されている。乗員報知表示850は、小型に形成されたCIDの表示画面813aに表示される。こうした表示画面813aの形状に合わせて、乗員報知表示850からは、撮像画像が省略されている。以上のように、表示画面のサイズに応じて、撮像画像、マップ画像、及びメッセージ画像は、乗員報知表示からの省略が可能である。また、表示画面が狭い構成でれば、乗員による設定により、表示される画像は選択可能であってもよい。さらに、例えば撮像画像とマップ画像が、数秒毎に切り替わる表示であってもよい。
 上記実施形態のような自動退避制御の作動を体験したことのない乗員は、緊急時の自動退避制御の作動に対して不安を抱き易くなる。故に、HCUは、例えば自車両Aが静止状態にある場合に、プレ退避制御及び自動退避制御の実行時に行われる各プロセスについて、事前に擬似体験するデモモードを実施可能であってもよい。
 上記実施形態では、DSMにより、運転者の姿勢崩れ等の異常状態が検知されていた。しかし、運転者の情報を検知する構成は、DSMに限定されない。例えば、運転者に装着されたウェアラブルデバイスから送信される運転者の生体情報に基づいて、車両制御ECUは、運転者の異常状態を判定可能である。生体情報としては、例えば脈拍数、心拍数、及び体温等の情報である。
 上記実施形態では、ハザードスイッチを二回押すことにより、自動退避制御におけるオーバーライド禁止は、解除可能であった。しかし、オーバーライド禁止を解除する操作は、ハザードスイッチの複数回の押圧操作に限定されず、適宜変更可能である。また、自動退避制御中のオーバーライド禁止は、解除不可能とされていてもよい。さらに、プレ退避中のオーバーライドを禁止することが可能である。
 上記実施形態では、自動退避制御による自動運転への移行後に、表示デバイス及び音響デバイスにより、乗員への報知が実施されていた。しかし、乗員への報知は、表示デバイスのみによって実施されてもよい。さらに、運転者への報知は、コンビネーションメータ及びHUD装置の両方によって実施されていたが、いずれか一方の表示デバイスによって実施されてもよい。又は、運転者への報知は、実施されなくてもよい。或いは、ウインドシールド18(図1参照)の全体を表示領域として使用した運転者及び乗員への報知が実施されてもよい。
 上記実施形態では、運転者を除く自車両の乗員として、助手席に着座する乗員へ情報を提示するために、CIDの表示画面を「表示領域」とした乗員報知表示が表示されていた。しかし、例えば、自車両の後席に着座する乗員へ情報提示するために、リアエンターテイメントシステムのモニタの表示画面を「表示領域」として、乗員報知表示が表示されてもよい。また、電子ミラーシステムのモニタの表示画面を「表示領域」として、乗員報知表示が表示されてもよい。
 上記実施形態において、HCU20の各プロセッサ21,22によって提供されていた機能は、上述のものとは異なるハードウェア及びソフトウェア、或いはこれらの組み合わせによって提供可能である。例えば、HCU20が省略された車載ネットワークにおいては、本開示による情報提示方法を適用された表示を実現するため処理の一部又は全部は、車両制御ECUのプロセッサ、又は表示デバイスに設けられたプロセッサによって実行可能である。
 ここで、この出願に記載されるフローチャート、あるいは、フローチャートの処理は、複数のセクション(あるいはステップと言及される)から構成され、各セクションは、たとえば、S101と表現される。さらに、各セクションは、複数のサブセクションに分割されることができる、一方、複数のセクションが合わさって一つのセクションにすることも可能である。さらに、このように構成される各セクションは、デバイス、モジュール、ミーンズとして言及されることができる。
 本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。

Claims (15)

  1.  運転者による運転の継続が困難であると判定された場合に自動退避制御が作動する車両に搭載され、前記運転者を除く前記車両の乗員によって視認可能な第一表示領域(13a,713a,813a)の表示により当該乗員へ情報を提示する情報提示装置であって、
     前記自動退避制御の作動情報を取得する作動情報取得部(31)と、
     前記自動退避制御が作動している場合に、前記第一表示領域に表示されて前記自動退避制御に係る情報を報知する乗員報知表示(150,250,750,850)を生成する表示生成部(35)と、を備え、
     前記乗員報知表示には、
     前記自動退避制御によって実施される複数のプロセスのうちで、現在実行中のプロセスを説明する説明画像(152,252,352,652)と、
     前記自動退避制御における現在の進捗度合いを示す進捗画像(151,251,351,451,651)と、が含まれる情報提示装置。
  2.  前記第一表示領域とは異なる位置に規定され、前記運転者によって視認可能な第二表示領域(12a,14a)、の表示により前記運転者への報知を行う情報提示装置であって、
     前記表示生成部は、前記作動情報が取得された場合に、前記第二表示領域に表示されて前記自動退避制御に係る情報を前記運転者へ報知する運転者報知表示(140,146,240)、をさらに生成する請求項1に記載の情報提示装置。
  3.  前記自動退避制御が作動した場合の対処行動を案内する案内画像(143,153)が、前記運転者報知表示及び前記乗員報知表示のそれぞれに含まれる請求項2に記載の情報提示装置。
  4.  前記自動退避制御が作動した場合の対処行動を案内する案内画像(243b)が、前記運転者報知表示のみに含まれる請求項2に記載の情報提示装置。
  5.  前記運転者報知表示は、前記自動退避制御における現在の進捗度合いを示す進捗画像(141)、を含み、
     前記乗員報知表示の進捗画像(151,351)に示されるプロセスの数と、前記運転者報知表示の進捗画像に示されるプロセスの数とが同一である請求項2~4のいずれか一項に記載の情報提示装置。
  6.  前記運転者報知表示は、前記自動退避制御における現在の進捗度合いを示す進捗画像(141)、を含み、
     前記乗員報知表示の進捗画像(451)に示されるプロセスの数は、前記運転者報知表示の進捗画像に示されるプロセスの数よりも多い請求項2~4のいずれか一項に記載の情報提示装置。
  7.  前記乗員報知表示は、緑色系の背景部(51a)を含み、
     前記運転者報知表示は、赤色系の背景部(42a,47a)を含む請求項2~6のいずれか一項に記載の情報提示装置。
  8.  前記進捗画像(151,351,451)は、現在実行中のプロセスを、明るい状態と暗い状態との周期的な繰り返しによって示し、
     前記明るい状態の維持される時間は、前記暗い状態の維持される時間よりも長い請求項1~7のいずれか一項に記載の情報提示装置。
  9.  前記説明画像(152,352)は、前記進捗画像に重ねて表示され、
     前記進捗画像(151,351)は、前記説明画像の背景として周期的な明るさの変化を繰り返す請求項8に記載の情報提示装置。
  10.  前記自動退避制御によって設定された予定走行経路を含む進行方向の範囲を撮影した撮像画像(154,254,654)を取得する画像取得部(32)、をさらに備え
     前記表示生成部は、前記撮像画像中の前記予定走行経路を明示する経路明示画像部(155)が重畳された当該撮像画像を、前記乗員報知表示に加える請求項1~9のいずれか一項に記載の情報提示装置。
  11.  前記作動情報が取得された場合に、前記車両に搭載された走行用前照灯(95a)による照明を開始させる照明要求部(33)、をさらに備える請求項1~10のいずれか一項に記載の情報提示装置。
  12.  前記乗員報知表示は、前記車両を停車させる位置として前記自動退避制御によって設定された退避場所を、前記車両の周囲の道路形状と共に示すマップ画像(156,256,656)、をさらに含む請求項1~11のいずれか一項に記載の情報提示装置。
  13.  前記乗員によって聞き取り可能な音声を再生する音声再生装置(112)と共に前記車両に搭載される情報提示装置であって、
     前記自動退避制御によって実施されているプロセスが移行されたことに基づき、移行後のプロセスの内容を前記乗員に報知する音声を、前記音声再生装置によって再生させる再生要求部(34)、をさらに備える請求項1~12のいずれか一項に記載の情報提示装置。
  14.  前記第一表示領域は、運転席及び助手席が並ぶ前記車両の幅方向(WD)を長手とする形状とされ、
     前記説明画像及び前記進捗画像は、前記第一表示領域のうちで前記助手席よりも前記運転席に近い範囲に表示される請求項1~13のいずれか一項に記載の情報提示装置。
  15.  運転者による運転の継続が困難であると判定された場合に自動退避制御が作動する車両において、前記運転者を除く前記車両の乗員によって視認可能な表示領域(13a,713a,813a)の表示により当該乗員へ情報を提示する情報提示方法であって、
     前記自動退避制御の作動情報を取得すること(S135,S143,S148)と、
     前記自動退避制御が作動している場合に、前記表示領域に表示されて前記自動退避制御に係る情報を報知する乗員報知表示(150,250,650,750)を生成すること(S136,S144,S149)とを含み、
     前記乗員報知表示には、
     前記自動退避制御によって実施される複数のプロセスのうちで、現在実行中のプロセスを説明する説明画像(152,252,352,652)と、
     前記自動退避制御における現在の進捗度合いを示す進捗画像(151,251,351,451,651)とが含まれ、
     作動情報の取得と乗員報知表示の生成は、少なくとも一つのプロセッサ(21,22)により実行される情報提示方法。
     
     
PCT/JP2016/001621 2015-04-03 2016-03-21 情報提示装置及び情報提示方法 WO2016157816A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201680020464.6A CN107408349B (zh) 2015-04-03 2016-03-21 信息提示装置以及信息提示方法
US15/562,575 US10723367B2 (en) 2015-04-03 2016-03-21 Information presentation device and information presentation method
US16/599,466 US11492017B2 (en) 2015-04-03 2019-10-11 Information presentation device and information presentation method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2015-077090 2015-04-03
JP2015077090 2015-04-03
JP2015250778A JP6292218B2 (ja) 2015-04-03 2015-12-23 情報提示装置及び情報提示方法
JP2015-250778 2015-12-23

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/562,575 A-371-Of-International US10723367B2 (en) 2015-04-03 2016-03-21 Information presentation device and information presentation method
US16/599,466 Continuation US11492017B2 (en) 2015-04-03 2019-10-11 Information presentation device and information presentation method

Publications (1)

Publication Number Publication Date
WO2016157816A1 true WO2016157816A1 (ja) 2016-10-06

Family

ID=57005910

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/001621 WO2016157816A1 (ja) 2015-04-03 2016-03-21 情報提示装置及び情報提示方法

Country Status (2)

Country Link
CN (1) CN107408349B (ja)
WO (1) WO2016157816A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018062237A (ja) * 2016-10-12 2018-04-19 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
US10583843B2 (en) 2015-04-03 2020-03-10 Denso Corporation Travel control apparatus and travel control method
US11267480B2 (en) 2015-04-03 2022-03-08 Denso Corporation Travel control apparatus and travel control method

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108204822B (zh) * 2017-12-19 2021-09-24 武汉极目智能技术有限公司 一种基于adas的车辆ar导航系统及方法
JP2019127138A (ja) * 2018-01-24 2019-08-01 トヨタ自動車株式会社 車両用表示装置及び車両
JP7095337B2 (ja) * 2018-03-19 2022-07-05 トヨタ自動車株式会社 表示制御装置および表示制御方法
US11334067B2 (en) * 2018-04-11 2022-05-17 Hyundai Motor Company Apparatus and method for providing safety strategy in vehicle
EP3552901A3 (en) * 2018-04-11 2020-04-29 Hyundai Motor Company Apparatus and method for providing safety strategy in vehicle
JP7084848B2 (ja) * 2018-11-06 2022-06-15 本田技研工業株式会社 制御装置、エージェント装置及びプログラム
JP7134895B2 (ja) * 2019-02-13 2022-09-12 本田技研工業株式会社 表示装置
JP7252029B2 (ja) * 2019-03-26 2023-04-04 本田技研工業株式会社 サーバ装置、情報提供方法、およびプログラム
CN110239513B (zh) * 2019-05-07 2021-03-09 浙江吉利控股集团有限公司 一种自适应车道保持系统及方法
JP7323413B2 (ja) * 2019-10-11 2023-08-08 トヨタ自動車株式会社 駐車支援装置
JP7262382B2 (ja) * 2019-12-27 2023-04-21 本田技研工業株式会社 情報提供装置
JP7343441B2 (ja) * 2020-04-17 2023-09-12 トヨタ自動車株式会社 表示制御装置、表示制御方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001199327A (ja) * 2000-01-19 2001-07-24 Nissan Motor Co Ltd 走行状態提示装置
WO2013008299A1 (ja) * 2011-07-11 2013-01-17 トヨタ自動車株式会社 車両の緊急退避装置
JP2014021515A (ja) * 2012-07-12 2014-02-03 Mitsubishi Electric Corp 運転者異常通知装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4084491B2 (ja) * 1999-03-10 2008-04-30 財団法人鉄道総合技術研究所 車両異常衝撃通報装置
US6292236B1 (en) * 1999-03-26 2001-09-18 Rosen Products Llc Automotive-ceiling-mounted monitor
US20070019072A1 (en) * 2003-07-28 2007-01-25 The Boeing Company Apparatus for processing digital images
US20070297064A1 (en) * 2004-10-27 2007-12-27 Fujitsu Ten Limited Display Device
JP4807625B2 (ja) * 2006-07-31 2011-11-02 株式会社エクォス・リサーチ 情報提供装置
JP2009154647A (ja) * 2007-12-26 2009-07-16 Aisin Aw Co Ltd マルチ画面表示装置及びそのプログラム
JP4492702B2 (ja) * 2008-01-11 2010-06-30 トヨタ自動車株式会社 異常検出装置
US8599043B2 (en) * 2009-02-26 2013-12-03 Aisin Seiki Kabushiki Kaisha Parking assist apparatus
JP2010203841A (ja) * 2009-03-02 2010-09-16 Hitachi Mobile Co Ltd 車両のデータ収集装置およびこれを用いた車両の診断方法
DE102009048954A1 (de) * 2009-10-10 2011-04-14 Daimler Ag Verfahren und Vorrichtung zum automatischen Betreiben eines Fahrzeugs in einem keine Nutzeraktion erfordernden autonomen Fahrbetrieb
US8924150B2 (en) * 2010-12-29 2014-12-30 GM Global Technology Operations LLC Vehicle operation and control system for autonomous vehicles on full windshield display
DE102011016430A1 (de) * 2011-04-08 2012-10-11 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Heckscheibe für ein Kraftfahrzeug und Verfahren zur Anzeige von einen Einparkvorgang betreffenden Informationen auf einem Anzeigeelement
CN102303604A (zh) * 2011-06-29 2012-01-04 广东好帮手电子科技股份有限公司 一种自动泊车系统
KR101405679B1 (ko) * 2011-10-11 2014-06-13 현대자동차주식회사 차량 위치 정보 기반 비정상 운전 판정 및 경보 시스템
TWI455073B (zh) * 2011-12-14 2014-10-01 Ind Tech Res Inst 車用特定路況警示裝置、系統與方法
DE102011121948A1 (de) * 2011-12-22 2013-06-27 Gm Global Technology Operations, Llc Vorausschau auf Aktionen eines autonomen Fahrsystems
CN107089227B (zh) * 2013-10-04 2019-11-19 本田技研工业株式会社 停车辅助装置
JP6537780B2 (ja) * 2014-04-09 2019-07-03 日立オートモティブシステムズ株式会社 走行制御装置、車載用表示装置、及び走行制御システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001199327A (ja) * 2000-01-19 2001-07-24 Nissan Motor Co Ltd 走行状態提示装置
WO2013008299A1 (ja) * 2011-07-11 2013-01-17 トヨタ自動車株式会社 車両の緊急退避装置
JP2014021515A (ja) * 2012-07-12 2014-02-03 Mitsubishi Electric Corp 運転者異常通知装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10583843B2 (en) 2015-04-03 2020-03-10 Denso Corporation Travel control apparatus and travel control method
US11267480B2 (en) 2015-04-03 2022-03-08 Denso Corporation Travel control apparatus and travel control method
JP2018062237A (ja) * 2016-10-12 2018-04-19 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム

Also Published As

Publication number Publication date
CN107408349B (zh) 2022-06-03
CN107408349A (zh) 2017-11-28

Similar Documents

Publication Publication Date Title
JP6292218B2 (ja) 情報提示装置及び情報提示方法
JP7024806B2 (ja) 情報提示装置
WO2016157816A1 (ja) 情報提示装置及び情報提示方法
US11267480B2 (en) Travel control apparatus and travel control method
JP6447481B2 (ja) 起動提案装置及び起動提案方法
US10870435B2 (en) Notice management apparatus and notice management method
US20190155279A1 (en) Automatic driving system for vehicles
US20180354517A1 (en) Driving assistance apparatus
WO2018008488A1 (ja) 運転支援方法およびそれを利用した運転支援装置、運転支援システム、自動運転制御装置、車両、プログラム
JP2019043176A (ja) 車載表示装置
WO2016157892A1 (ja) 情報提示装置
JP6587650B2 (ja) 自動運転時情報伝達方法および車載情報提示装置
WO2016157814A1 (ja) 起動提案装置及び起動提案方法
JP6856086B2 (ja) 報知管理装置及び報知管理プログラム
JP2019043175A (ja) ヘッドアップディスプレイ装置
WO2016157891A1 (ja) 情報提示装置
WO2022091194A1 (ja) 表示制御装置、表示システム、表示制御方法及び表示制御プログラム
WO2023058494A1 (ja) 車両用制御装置及び車両用制御方法
JP2021082354A (ja) 自動運転車両の情報提供装置
WO2019017011A1 (ja) 情報提示装置
JP2023055197A (ja) 車両用制御装置及び車両用制御方法
JP2023057483A (ja) 車両制御システム
CN117136157A (zh) 自动驾驶控制装置、自动驾驶控制程序、提示控制装置以及提示控制程序
CN117440902A (zh) 车辆用报告控制装置以及车辆用报告控制方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16771709

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15562575

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16771709

Country of ref document: EP

Kind code of ref document: A1