CN107408349A - 信息提示装置以及信息提示方法 - Google Patents

Abstract

本发明涉及信息提示装置以及信息提示方法。被安装于在驾驶员继续驾驶困难的情况下自动退避控制进行工作的车辆，并通过在能够被除了上述驾驶员之外的上述车辆的乘客视觉确认的显示区域(13a、713a、813a)提示信息的信息提示装置具备：工作信息获取部(31)，其获取上述自动退避控制的工作信息；以及显示生成部(35)，其在上述自动退避控制工作的情况下，生成显示在显示区域来报告上述自动退避控制的信息的乘客报告显示(150、250、750、850)。在上述乘客报告显示包含说明当前执行中的工序的说明图像(152、252、352、652)和表示上述自动退避控制的进展程度的进度图像(151、251、351、451、651)。

Description

信息提示装置以及信息提示方法

本申请主张于2015年4月3日申请的日本专利申请号2015-77090号以及于2015年12月23日申请的日本专利申请号2015-250778号的优先权，并在此引用其全部内容。

技术领域

本公开涉及通过显示来向车辆的乘客提示信息的信息提示装置以及信息提示方法。

背景技术

以往，例如已知有如专利文献1所公开的紧急退避装置那样，在车辆的驾驶员陷入驾驶困难的状态的情况下，代替驾驶员而自动地使车辆停止的技术。在能够执行这样的退避行驶的车辆安装有例如向驾驶员提示紧急退避装置的工作信息等的驾驶辅助HMI(HumanMachine Interface：人机接口)。

另外，专利文献1所公开的驾驶辅助HMI能够进行例如是否使退避行驶工作的确认作为对驾驶员的信息提示。但是，在专利文献1中，未考虑任何对除了驾驶员之外的车辆的乘客的信息提示。因此，在车辆开始退避行驶的情况下，存在除了驾驶员之外的车辆的乘客感到强烈的不安的可能性。

专利文献1：国际公开第2013/008299号

发明内容

本公开的目的在于提供能够缓和通过自动退避控制进行行驶中的车辆内的乘客的不安的信息提示装置以及信息提示方法。

在本公开的第一方式中，安装于在被判定为驾驶员继续驾驶困难的情况下自动退避控制进行工作的车辆，并通过能够被除了上述驾驶员之外的上述车辆的乘客视觉确认的第一显示区域的显示来向该乘客提示信息的信息提示装置具备：工作信息获取部，其获取上述自动退避控制的工作信息；以及显示生成部，其在上述自动退避控制工作的情况下，生成显示在上述第一显示区域来报告上述自动退避控制所涉及的信息的乘客报告显示。在上述乘客报告显示包含说明通过上述自动退避控制实施的多个工序中当前执行中的工序的说明图像和表示上述自动退避控制中的当前进展程度的进度图像。

根据上述的信息提示装置，通过乘客报告显示所包含的进度图像，能够知晓由多个工序构成的自动退避控制中的当前进展程度。因此，乘客能够想像自动退避控制的整体像和自动退避控制的结束。除此之外，通过说明图像向乘客说明当前执行中的工序，从而乘客能够大体预测不依靠驾驶员行驶的车辆的移动。由此，乘客报告显示能够缓和通过自动退避控制进行行驶中的车辆内的乘客的不安。

在本公开的第二方式中，在被判定为驾驶员继续驾驶困难的情况下自动退避控制进行工作的车辆中，通过能够被除了上述驾驶员之外的上述车辆的乘客视觉确认的显示区域的显示来向该乘客提示信息的信息提示方法包括：获取上述自动退避控制的工作信息；以及在上述自动退避控制工作的情况下，生成显示于上述显示区域来报告上述自动退避控制所涉及的信息的乘客报告显示。在上述乘客报告显示包含说明通过上述自动退避控制实施的多个工序中当前执行中的工序的说明图像和表示上述自动退避控制中的当前进展程度的进度图像。工作信息的获取和乘客报告显示的生成由至少一个处理器执行。

根据上述的信息提示方法，通过乘客报告显示所包含的进度图像，能够知晓由多个工序构成的自动退避控制中的当前进展程度。因此，乘客能够想像自动退避控制的整体像和自动退避控制的结束。除此之外，通过说明图像向乘客说明当前执行中的工序，从而乘客能够大体预测不依靠驾驶员行驶的车辆的移动。由此，乘客报告显示能够缓和通过自动退避控制进行行驶的车辆内的乘客的不安。

附图说明

通过参照附图进行的下述的详细的记述，本公开的上述目的以及其它的目的、特征、优点变得更加明确。该附图是，

图1是表示本车辆的驾驶席周边的布局的图，

图2是表示车载网络的整体构成的框图，

图3是表示车辆控制ECU的控制电路所构建的功能块的图，

图4是说明从驾驶员产生异常开始到开始自动退避控制为止的过程的时序图，

图5是说明从驾驶员产生异常开始到开始自动退避控制为止的过程的时序图，

图6是说明从开始自动退避控制到进行紧急通报为止的过程的时序图，

图7是说明从开始自动退避控制到进行紧急通报为止的过程的时序图，

图8是表示在HCU的控制电路构建的功能块的图，

图9是表示在第一预退避控制的第一报告中组合仪表的显示的图，

图10是表示在第一报告中，由HUD装置投影的显示的图，

图11是表示在第二预退避控制的第二报告中，组合仪表的显示的图，

图12是表示在第二报告中，由HUD装置投影的显示的图，

图13是表示第二报告中的CID的显示的图，

图14是表示在自动退避控制的执行通知中，CID的显示的推移的图，

图15是表示在自动退避控制的执行通知中，组合仪表的显示的推移的图，

图16是表示在自动退避控制的执行通知中，由HUD装置投影的显示的推移的图，

图17是表示由车辆控制ECU的控制电路实施的处理的流程图，

图18是表示由车辆控制ECU的控制电路实施的处理的流程图，

图19是表示由HCU的控制电路实施的处理的流程图，

图20是表示由HCU的控制电路实施的处理的流程图，

图21是表示由HCU的控制电路实施的处理的流程图，

图22是表示图14的变形例的图，

图23是表示图15的变形例的图，

图24是表示进度图像以及说明图像的变形例的图，

图25是表示进度图像以及说明图像的另一变形例的图，

图26是表示第五实施方式的车载网络的整体构成的框图，

图27是表示在HCU的控制电路构建的功能块的图，

图28是说明从驾驶员产生异常开始到开始自动退避控制为止的过程的时序图，

图29是说明从开始自动退避控制开始到进行紧急通报为止的过程的时序图，

图30是表示仅操作一次危险开关的状态的CID的显示的图，

图31是表示仅操作一次危险开关的状态的组合仪表的显示的图，

图32是表示进度图像以及说明图像的另一变形例的图，

图33是表示乘客报告显示的变形例的图，

图34是表示乘客报告显示的变形例的图。

具体实施方式

以下，基于附图对本公开的多个实施方式进行说明。另外，有在各实施方式中对对应的构成要素附加相同的附图标记，从而省略重复的说明的情况。在各实施方式中仅对构成的一部分进行说明的情况下，该构成的其它的部分能够应用先行说明的其它的实施方式的构成。另外，不仅是在各实施方式的说明中明示的构成的组合，只要组合并不特别产生障碍，则即使未明示也能够部分地组合多个实施方式的构成彼此。而且，多个实施方式以及变形例所记述的构成彼此的未明示的组合也被以下的说明公开。

(第一实施方式)

如图1以及图2所示，本公开被应用的第一实施方式的HCU20是安装在本车辆A的电子装置。HCU20成为设在安装于本车辆A的车载网络1的多个节点中的一个。车载网络1由ADAS定位器96、车载通信机97、前照灯控制装置95、外界识别系统90、HMI系统10以及车辆控制系统60等构成。这些构成与通信总线99连接，能够通过通信相互交换信息。

ADAS(Advanced Driver Assistance Systems：高级驾驶辅助系统)定位器96具备GNSS(Global Navigation Satellite System：全球卫星导航系统)接收机、陀螺仪传感器等惯性传感器以及储存地图数据的存储器。ADAS定位器96通过组合由GNSS接收机接收的来自多个人工卫星的信号和惯性传感器的测量结果，对本车辆A的位置进行测位。ADAS定位器96从存储器读出本车辆前方的地图数据，提取弯道的曲率半径、旋转角、开始位置等道路信息。ADAS定位器96将本车辆A的位置信息和前方的道路信息向通信总线99输出。

车载通信机97与用于无线通信的天线98连接。车载通信机97能够在与位于本车辆A的周围的其它车辆A1(参照图6)的车载通信机之间，进行基于无线通信的车间通信。除此之外，车载通信机97能够在与本车辆A外部的基站之间进行移动体通信。车载通信机97能够将输出到通信总线99上的本车辆A的信息发送给其它车辆A1以及呼叫中心等。车载通信机97能够将从其它的车辆A1接收的信息以及从呼叫中心等接收的信息向通信总线99输出。

前照灯控制装置95以具有处理器以及存储器的微型计算机为主体构成。前照灯控制装置95与错车用前照灯(低光)、行驶用前照灯(高光)95a、方向指示灯(方向指示器)、危险警告灯等安装于本车辆A的多个照明装置连接。前照灯控制装置95基于从通信总线99获取的灯光请求信息来控制各照明装置的工作。

外界识别系统90具备前方照相机单元92以及雷达单元93、94等外界传感器和周边监视ECU91。外界识别系统90检测行人、人以外的动物、自行车、摩托车及其它车辆那样的移动物体以及路上的落物、交通信号、护栏，路缘石、道路标志、道路标识、车道线以及树木那样的静止物体。外界识别系统90除了各单元92～94之外还能够具备光测距仪器以及声纳等外界传感器。

前方照相机单元92例如是设置在本车辆A的后视镜附近的单眼式或者复眼式照相机。前方照相机单元92朝向本车辆A的行进方向，例如能够以大约45度左右的水平视角拍摄距离本车辆A大约80米的范围。前方照相机单元92将拍摄到移动物体、静止物体以及行进方向的道路等的拍摄图像154(参照图14A)的数据依次向周边监视ECU91输出。

雷达单元93例如设置在本车辆A的前部。雷达单元93从发送天线朝向本车辆A的行进方向放射77GHz频带的毫米波。雷达单元93通过接收天线接收被行进方向的移动物体以及静止物体等反射的毫米波。雷达单元93例如能够以大约55度左右的水平扫描角度来扫描距离本车辆A大约60米的范围。雷达单元93将基于接收信号的扫描结果依次向周边监视ECU91输出。

雷达单元94例如分别设置在本车辆A的前部以及后部的各左右。雷达单元94从发送天线朝向本车辆A的前后的侧方放射24GHz频带的准毫米波。雷达单元94通过接收天线接收被前侧方以及后侧方的移动物体以及静止物体等反射的准毫米波。雷达单元94例如能够以大约120度左右的水平扫描角度来扫描距离本车辆A大约30米的范围。雷达单元94将基于接收信号的扫描结果依次向周边监视ECU91输出。

周边监视ECU91以具有处理器以及存储器的微型计算机为主体构成。周边监视ECU91以能够通信的方式与前方照相机单元92以及各雷达单元93、94连接。周边监视ECU91通过综合从各单元92、93获取的信息，来检测处于行进方向的移动物体以及静止物体(以下，称为“检测物”)的相对位置等。除此之外周边监视ECU91根据从雷达单元94获取的信息，检测处于前侧方以及后侧方的检测物的相对位置等。

周边监视ECU91将在本车辆A的周围行驶的前行车以及并行车的相对位置信息以及本车辆A的行进方向上的车道线的形状信息等作为监视信息输出给通信总线99。周边监视ECU91基于在邻接的车道行驶的其它车辆A1(参照图6)的检测，来判定是否能够进行向邻接车道的车道变更，并将判定结果作为监视信息输出给通信总线99。周边监视ECU91若从通信总线99获取到搜索请求信息，则使用从ADAS定位器96获取的位置信息以及道路信息和从各单元92、93获取的信息，来搜索在后述的自动退避控制中使本车辆A停车的退避位置。周边监视ECU91将通过搜索而设定的退避场所的位置信息输出给通信总线99。并且周边监视ECU91将前方照相机单元92的拍摄图像154(参照图14A)的图像数据输出给通信总线99。

HMI系统10具备组合仪表12、CID13以及HUD装置14等多个显示设备。除此之外，HMI系统10具备音频扬声器112以及超声波扬声器113等作为进行基于声音的信息通知的声学设备。并且在HMI系统10设置有多个操作设备15、DSM(Driver Status Monitor：驾驶员状态监视器)11以及HCU(HMI(Human Machine Interface)Control Unit：人机接口控制单元)20等。HMI系统10向坐在驾驶席17d的本车辆A的驾驶员以及本车辆A的其它乘客提示信息。

组合仪表12在本车辆A的车厢内配置在驾驶席17d的前方。组合仪表12具有液晶显示器。在液晶显示器形成有坐在驾驶席17d的驾驶员能够视觉确认的显示画面12a。组合仪表12基于从HCU20获取的图像数据，将车速表41等的图像显示在液晶显示器的显示画面12a。

CID(Center Information Display：中控显示屏)13在本车辆A的车厢内配置在中央组合仪表的上方，并收纳在仪表板19内。CID13具有液晶显示器。在液晶显示器形成有不仅是驾驶员，除了驾驶员之外的车辆的乘客，例如坐在助手席17p的乘客也能够视觉确认的显示画面13a。显示画面13a为以驾驶席17d以及助手席17p并排的本车辆A的宽度方向WD为长边的长边形状。CID13基于从HCU20获取的图像数据，将导航的引导画面、空调设备的操作画面以及音频设备的操作画面等显示在液晶显示器。

HUD(Head-Up Display：平视显示器)装置14将基于从HCU20获取的图像数据的图像的光投影到风窗玻璃18上规定的投影区域14a。由风窗玻璃18反射到车厢内侧的图像的光被坐在驾驶席17d的驾驶员感知。驾驶员能够将由HUD装置14投影的图像的虚像与本车辆A的前方的外界风景重叠来视觉确认。

音频扬声器112配置在本车辆A的车门的内衬内，从而位于驾驶席17d以及助手席17p的侧方。音频扬声器112播放能够被本车辆A的乘客全部听取的声音。音频扬声器112能够通过播放的声音进行向所有乘客的信息通知。

在本车辆A的车厢内在驾驶席17d的前方且风窗玻璃18的上方设置一对超声波扬声器113。超声波扬声器113朝向驾驶席17d的头靠附近，并输出指向性较高的超声波。超声波扬声器113通过在空气中传播的超声波产生的失真，使可听音产生。超声波扬声器113播放仅本车辆A的乘客中坐在驾驶席17d的驾驶员能够听到的声音。超声波扬声器113能够通过播放的声音仅向驾驶员进行信息通知。另外，超声波扬声器113的设置位置只要能够朝向头靠附近直接地射出超声波即可，其能够适当地变更。超声波扬声器113例如能够设置在风窗玻璃18侧方的支柱的根部等。

在操作设备15包括转向开关15a以及危险开关15b。转向开关15a配置在本车辆A的方向盘的辐条部。在转向开关15a被驾驶员输入变更HMI系统10以及车辆控制系统60等的设定的操作。危险开关15b配置在设置于车厢内的中央组合仪表。在危险开关15b被驾驶员或者乘客输入用于使本车辆A的危险警告灯闪烁的操作。转向开关15a以及危险开关15b将基于操作的输入的操作信号输出给HCU20。

DSM11由近红外光源以及近红外照相机及控制它们的控制单元等构成。DSM11以使近红外照相机朝向驾驶席17d侧的姿势配置在仪表板19的上面。DSM11通过近红外照相机拍摄被近红外光源照射了近红外光的驾驶员的面部。近红外照相机的拍摄图像由控制单元进行图像解析。控制单元从拍摄图像提取例如驾驶员的面部的朝向以及眼睛的张开程度等。若通过控制单元的解析而检测到驾驶员未朝向正面的状态以及驾驶员的眼睛闭合的状态等，则DSM11向HCU20输出表示驾驶员的异常的检测信号。

HCU20具备具有主处理器21、描绘处理器22、能够改写的非易失性的存储器23、进行信息的输入输出的输入输出接口24以及连接它们的总线等的控制电路20a。HCU20与各显示设备、各声学设备、操作设备15以及DSM11等连接。HCU20获取从转向开关15a以及危险开关15b输出的操作信号和从DSM11输出的检测信号。HCU20通过向各显示设备输出控制信号以及图像数据，来控制这些显示设备的显示。HCU20通过向各声学设备输出声音数据，来使这些声学设备播放声音。

车辆控制系统60具备加速器位置传感器61、制动器踏力传感器62、以及转向操纵转矩传感器63等操作检测传感器及检测本车辆A的行驶状态的车速传感器64等。除此之外，车辆控制系统60还具备电子控制节流阀66、制动促动器67以及EPS马达68等行驶控制设备及车辆控制ECU70。车辆控制系统60基于驾驶员的驾驶操作、外界识别系统90的监视信息以及ADAS定位器96的位置信息以及道路信息等，来控制本车辆A的行驶。

加速器位置传感器61检测驾驶员对加速器踏板的踏入量，并输出给车辆控制ECU70。制动器踏力传感器62检测驾驶员对制动踏板的踏力并输出给车辆控制ECU70。转向操纵转矩传感器63检测驾驶员对方向盘的转向操纵转矩并输出给车辆控制ECU70。车速传感器64检测本车辆A的当前行驶速度并输出给车辆控制ECU70。

电子控制节流阀66基于从车辆控制ECU70输出的控制信号，来控制节流阀的开度。制动促动器67通过基于从车辆控制ECU70输出的控制信号的制动压的产生，来控制使各车轮产生的制动力。EPS马达(Electric Power Steering：电动助力转向)68基于从车辆控制ECU70输出的控制信号，来控制施加给转向机构的转向操纵力以及转向保持力。

车辆控制ECU(Electronic Control Unit：单子控制单元)70是至少包括动力单元控制ECU、制动器控制ECU以及统合控制ECU等中的统合控制ECU的一种或者多种。车辆控制ECU70具备具有处理器71、能够改写的非易失性的存储器73、进行信息的输入输出的输入输出接口74以及连接它们的总线等的控制电路70a。

车辆控制ECU70与各传感器61～64以及各行驶控制设备连接。车辆控制ECU70获取从各传感器61～64输出的检测信号并向各行驶控制设备输出控制信号。除此之外，车辆控制ECU70还将各传感器61～64的检测信号作为车辆信息输出给通信总线99。

车辆控制ECU70具备通过控制本车辆A的驱动力、制动力以及转向操纵力等，进行驾驶员的驾驶操作的辅助或者代行的多个驾驶辅助功能。驾驶辅助功能包含巡航控制功能以及车道脱离的防止功能。车辆控制ECU70基于驾驶员对转向开关15a的操作输入，使这些驾驶辅助功能启动。在以下的说明中，为了方便，将巡航控制功能记载为ACC(AdaptiveCruise Control：自适应巡航控制)，并将车道脱离的防止功能记载为LKA(Lane KeepingAssist：车道保持辅助)。

若ACC被设为有效，则车辆控制ECU70通过基于从周边监视ECU91获取的前行车的监视信息来调整驱动力以及制动力，从而控制本车辆A的行驶速度。在未检测到前行车的情况下，ACC使本车辆A以驾驶员所设定的目标速度恒速行驶。另一方面，在检测到前行车的情况下，ACC维持与前行车的车间距离，并且使本车辆A对前行车追随行驶。

若LKA被设为有效，则车辆控制ECU70基于从周边监视ECU91获取的行进方向的车道线的形状信息，来控制转向操纵力以及转向保持力。LKA通过对方向盘施加向阻止向车道线的接近的方向的转向操纵力，来使本车辆A沿着车道行驶。另外，由ADAS定位器96输出的道路信息也可以使用于ACC以及LKA的车辆控制。

车辆控制ECU70除了上述的驾驶辅助功能的行驶控制之外，还能够实施在驾驶员陷入难以继续进行驾驶的状态(以下，称为“驾驶困难状态”)的情况下，使本车辆A自动地停车的自动退避控制。若开始自动退避控制，则车辆控制ECU70使周边监视ECU91搜索使本车辆A停车的退避场所。车辆控制ECU70使本车辆A向通过周边监视ECU91的搜索所设定的退避场所移动，并使本车辆A停车到该退避场所。

并且车辆控制ECU70在开始自动退避控制之前能够通过使上述的驾驶辅助功能自动地启动，来实施辅助驾驶员的驾驶操作的预退避控制。为了实现这样的控制，车辆控制ECU70的控制电路70a通过处理器71执行存储于存储器73的程序，从而构建多个功能块(80～89)。以下，基于图3并参照图1以及图2对自动退避控制以及预退避控制所涉及的功能块的详细进行说明。

异常信息获取部81经由HCU20以及通信总线99来获取基于DSM11的检测信息。在驾驶员的异常的检测持续的情况下，异常信息获取部81从DSM11持续获取检测信息。反应判定部86基于由DSM11检测到的驾驶员的状态的变化，来判定驾驶员是否对由异常报告部84等实施的报告进行了反应。

操作接受部88能够基于从各传感器61～63输出的操作信号而接受驾驶员的驾驶操作。操作接受部88在预退避控制的开始后且在自动退避控制的开始前，接受驾驶员的驾驶操作。另一方面，在自动退避控制的开始后，操作接受部88禁止驾驶员的驾驶操作的接受。操作接受部88在检测到乘客对危险开关15b的输入的情况下，解除驾驶操作的接受禁止。

状态判定部80能够进行驾驶员处于异常状态这样的临时判定、正式判定以及驾驶员处于驾驶困难状态这样的判定。驾驶员的异常状态的临时判定在异常状态的正式判定之前实施。异常状态的临时判定在基于DSM11的异常的检测持续了第一阈值时间TH1(参照图4)的时刻实施。第一阈值时间TH1根据DSM11的异常检测的分辨率而设定。例如，若DSM11是每0.1秒重复检测的构成，则在异常的检测连续地持续了多次(例如3～5次左右)的情况下，状态判定部80进行临时判定。该情况下，第一阈值时间TH1为0.3～0.5秒。通过这样的第一阈值时间TH1的设定，能够排除DSM11的异常状态的误检测。

驾驶员的异常状态的正式判定在异常状态的临时判定后且在处于驾驶困难状态的判定之前，基于驾驶员的异常检测的持续来进行。异常状态的正式判定在基于DSM11的异常的检测持续了第二阈值时间TH2(例如2.0秒，参照图4)的时刻实施。第二阈值时间TH2被设定为比驾驶员的旁视的一般的上限时间(约1.6秒)长。通过这样的第二阈值时间TH2的设定，能够避免将旁视误判定为异常状态的情况。

驾驶员处于驾驶困难状态的判定在由异常信息获取部81获取的驾驶员的异常的检测进一步持续的情况下实施。具体而言，在从异常状态的正式判定开始经过预先设定的响应时间AT(3～8秒，参照图4)为止的期间，没有驾驶员的响应操作的情况下，状态判定部80判定为驾驶员处于驾驶困难状态。

响应时间AT被设定为识别到来自HMI系统10的异常检测的报告的驾驶员大致足以输入响应操作的时间。响应操作例如是按下转向开关15a的操作。另外，处于驾驶困难状态的判定也在响应时间AT的期间有确定驾驶困难状态的确定操作的情况下实施。确定操作例如是与响应操作不同的按下转向开关15a的操作。

退避控制部82基于通过状态判定部80判定为驾驶员处于驾驶困难状态，开始自动驾驶控制。退避控制部82通过统合控制电子控制节流阀66、制动促动器67以及EPS马达68等行驶控制设备，来使本车辆A按照到由周边监视ECU91设定的退避场所为止的预定行驶路径移动。然后，退避控制部82使本车辆A停车到退避场所。

在从检测到异常开始至被判定为驾驶困难状态为止的期间，辅助控制部83开始至少包含LKA的驾驶辅助功能的控制(驾驶辅助控制)。在驾驶员的异常的检测后，辅助控制部83在驾驶辅助控制所包含的多个辅助功能中使LKA先于其它辅助功能进行工作。

若进行详述，则辅助控制部83基于被正式判定为异常状态之前的临时判定，使LKA工作。其后，辅助控制部83基于被正式判定为异常状态，使ACC作为与LKA不同的其它辅助功能进行工作。在驾驶辅助控制的开始后，辅助控制部83通过操作接受部88接受了驾驶操作的情况下，停止驾驶辅助控制。

异常报告部84以及移行报告部85通过向HCU20输出的报告请求信息，来控制HMI系统10的各显示设备以及各声学设备。异常报告部84基于随着异常状态的临时判定的驾驶辅助控制的开始，通过显示设备向驾驶员报告由DSM11检测到的异常的内容(例如，姿势变形等)。移行报告部85基于异常状态的正式判定，通过各显示设备以及各声学设备向驾驶员预告向自动退避控制的移行。

搜索控制部87通过向周边监视ECU91输出的搜索请求信息，使周边监视ECU91搜索在自动退避控制中使本车辆A停车的退避场所。在检测到驾驶员的异常之后并在通过状态判定部80判定为驾驶困难状态之前，搜索控制部87能够使周边监视ECU91开始退避场所的搜索。具体而言，周边监视ECU91基于异常状态的正式判定而开始退避场所的搜索。

在通过状态判定部80判定为驾驶困难状态的情况下，车外报告部89开始用于督促在本车辆A的周围行驶的其它车辆A1(参照图6)警戒的处理。车外报告部89通过向车载通信机97输出的发送请求信息，使表示本车辆A的驾驶员处于驾驶困难状态的意思的信息发送给其它车辆A1。除此之外，车外报告部89通过向前照灯控制装置95输出的灯光请求信息，使本车辆A的危险警告灯闪烁，并且使行驶用前照灯95a的点亮开始。通过以上的处理，向其它的车辆A1的驾驶员以及乘客报告本车辆A的驾驶员处于驾驶困难状态。

根据以上的构成，对到车辆控制系统60通过自动操纵使驾驶员陷入驾驶困难状态的本车辆A停车为止的多个工序进行说明。首先，基于图4以及图5所示的时序图，并参照图2，依次对到开始自动退避控制为止的预退避控制(T1～T6)的工作进行说明。

由于驾驶员的意识丧失(T1)，其后驾驶员产生姿势变形(T2)。姿势变形能够通过DSM11立即检测到。若姿势变形持续第一阈值时间TH1，则车辆控制ECU70进行异常状态的临时判定(T3)。基于该临时判定，开始LKA的工作作为第一预退避控制。除此之外，通过从车辆控制ECU70输出到HCU20的报告请求信息，由HMI系统10实施基于临时判定的第一报告。

若姿势变形持续第二阈值时间TH2，则车辆控制ECU70对异常状态进行正式判定(T4)。基于该正式判定，与LKA一起开始ACC的工作作为第二预退避控制。除此之外，开始基于周边监视ECU91的退避场所的搜索。并且，通过从车辆控制ECU70输出到HCU20的报告请求信息，由HMI系统10实施第二报告。

在第二报告中，询问驾驶员可否实施自动退避控制。对于第二报告，处于正常状态的驾驶员能够操作相当于“是”的转向开关15a。通过这样的响应操作，解除向自动退避控制的移行。另一方面，处于轻度的驾驶困难状态的驾驶员能够操作相当于“否”的转向开关15a。通过这样的确定操作，不用等待响应时间AT的经过就强制地实施向自动退避控制的移行。

在从正式判定开始经过响应时间AT之前，车辆控制ECU70开始使本车辆A缓慢减速的制动控制(T5)。然后，基于响应时间AT的经过，车辆控制ECU70确定判定为驾驶员处于驾驶困难状态(T6)。基于驾驶困难状态的确定，车辆控制ECU70使本车辆A的控制模式从预退避控制移至自动退避控制。

接下来，基于图6以及图7所示的时序图，并参照图2依次对在开始自动退避控制之后(T6～T13)，通过自动驾驶使本车辆A移动到退避场所的一系列的工序进行说明。

通过开始自动退避控制(T6)，车辆控制ECU70开始设定工序。在设定工序中，设定使本车辆A停车的退避场所和到退避场所为止的预定行驶路径。退避场所以及预定行驶路径的设定既可以由车辆控制ECU70实施，也可以由车辆控制ECU70获取通过周边监视ECU91设定的退避场所以及预定行驶路径的至少一方。在设定工序中，基于确定驾驶困难状态的判定，进行用于向在周边行驶的其它车辆A1报告驾驶困难状态的处理。作为这样的处理，实施基于向车载通信机97的发送请求信息的车间通信的警告发布、危险警告灯的闪烁以及行驶用前照灯95a的点亮等。并且，基于从车辆控制ECU70向HCU20输出的报告请求信息，由HMI系统10实施自动退避控制的执行通知。

若退避场所以及移动路径的设定完成(T7)，则车辆控制ECU70使自动退避控制的工序移至移动工序。在移动工序中，进行基于预定行驶路径的本车辆A的移动。除此之外，在移动工序中，根据需要进行向邻接车道的车道变更。在其它的车辆A1在移动目的地的车道行驶的情况下，基于不能够进行车道变更的判定，车道变更成为待机状态。其后，若解除不能够进行车道变更的判定，则开始向邻接车道的车道变更(T8)。若车道变更完成，则车辆控制ECU70使本车辆A缓慢地减速到容易停止的速度。

若本车辆A的行驶速度降低到规定的速度(例如50km/h)(T10)，则车辆控制ECU70使自动退避控制的工序移至停车工序。在停车工序中，车辆控制ECU70使本车辆A从行驶车道脱离。车辆控制ECU70使制动力作用于向路肩以及路侧带等退避的本车辆A，使本车辆A停车到作为目的的退避场所(T11)。

若使本车辆A停车到退避场所，则车辆控制ECU70使自动退避控制的工序移至呼叫工序(T12)。在呼叫工序中，进行预先设定的向呼叫中心的联络。然后，若向呼叫中心的联络完成，则车辆控制ECU70结束自动退避控制(T13)。

在以上的预退避控制以及自动退避控制中，对驾驶员以及乘客进行第一报告、第二报告以及执行通知等基于HMI系统10的信息的提示。特别是，根据执行通知，通过HMI系统10向本车辆A的乘客报告从设定工序向移动工序的移行从移动工序向停车工序的移行以及从停车工序向呼叫工序的移行。为了这样的信息提示等，图2所示的HCU20的控制电路20a通过由各处理器21、22执行存储于存储器23的程序，构建多个功能块(31～36)。以下，基于图8，并参照图1以及图2对这些功能块的详细进行说明。

信息获取部31获取输出到通信总线99的各种信息。具体而言，信息获取部31获取由车辆控制ECU70输出到通信总线99的行驶速度等车辆信息、指示各报告的实施的报告请求信息及驾驶辅助功能以及自动退避控制各自的工作信息等。在驾驶辅助功能的工作信息包含ACC以及LKA是否启动这样的信息。在自动退避控制的工作信息包含表示在自动退避控制中实施的多个工序中当前实施中的工序的信息、表示退避场所以及预定行驶路径的信息等。

图像获取部32获取由周边监视ECU91输出到通信总线99的拍摄图像154(参照图14)的数据。拍摄图像154是由前方照相机单元92拍摄到的行进方向的照相机图像。在拍摄图像154包含通过自动退避控制设定的预定行驶路径。

照明请求部33与车外报告部89(参照图3)同样地通过输出向前照灯控制装置95的灯光请求信息来控制行驶用前照灯95a的工作。照明请求部33在自动退避控制的工作信息被获取的情况下通过前照灯控制装置95使行驶用前照灯95a的照明开始。由此，即使在外光较少的夜间以及隧道内也能够视觉确认预定行驶路径。除此之外，在拍摄图像154(参照图14)明确地拍摄到预定行驶路径。

播放请求部34通过向音频扬声器112以及超声波扬声器113输出声音数据，来使各扬声器112、113播放声音。播放请求部34基于由自动退避控制实施的工序被移行这一情况，使全部乘客能够听到地播放向乘客报告移行后的工序的内容的声音。

显示生成部35生成组合仪表12的显示画面12a、CID13的显示画面13a以及HUD装置14的投影区域14a的各显示。显示生成部35在预退避控制工作的情况下生成第一报告以及第二报告的各显示(参照图9～图13)。除此之外，显示生成部35在自动退避控制工作的情况下生成显示到显示画面13a的乘客报告显示150(参照图14)和分别显示在显示画面12a以及投影区域14a的驾驶员报告显示140、146(参照图15以及图16)。

紧急通报部36在通过自动退避控制完成了向退避场所的移动以及停车之后，向预先设定的呼叫中心进行紧急的联络。紧急通报部36能够获取本车辆A的当前位置等，并通过车载通信机97向呼叫中心发送获取的信息。

作为以上的预退避控制以及自动退避控制的执行中的对驾驶员以及乘客的信息提示，对各显示设备的显示的详细和各声学设备的声音的详细进行说明。首先，基于图9～图13对预退避控制中的第一报告以及第二报告的详细进行说明。

在基于异常状态的临时判定(参照图5的T3)的第一报告中，如图9所示，组合仪表12除了其它的显示之外还在显示画面13a显示表示LKA的工作的指示器41a。如图10所示，HUD装置14将表示LKA的工作的指示器46a和表示姿势变形的检测的姿势变形图标45投影到投影区域14a。除此之外，通过超声波扬声器113播放通知驾驶员姿势变形的检测的通知音。

在基于异常状态的正式判定(参照图5的T4)的第二报告中，如图11所示，组合仪表12除了LKA的指示器41a之外，还在显示画面12a显示表示ACC的工作的指示器41b以及消息图像42。消息图像42是通过文字向驾驶员报告检测到的异常的内容以及向自动退避控制的移行预告的图像。消息图像42通过文字向驾驶员报告用于解除向自动退避控制的移行的操作以及用于开始向自动退避控制的强制移行的操作。消息图像42的背景部42a为了催促处于能够对应的状态或者恢复到能够进行对应的状态的驾驶员行动而以提高紧迫感的琥珀色(橙色)或者红色等红色系的颜色显示。

如图12所示，作为第二报告HUD装置14(参照图1)除了LKA的指示器46a之外还在投影区域14a的下边缘区域投影表示ACC的工作的指示器46b。除此之外，HUD装置14除了姿势变形图标45之外，还在投影区域14a的中央区域投影消息图像47以及操作图标48。消息图像47与显示在组合仪表12的消息图像42(参照图8)同样地通过文字向驾驶员报告检测到的异常的内容和向自动退避控制的移行预告。消息图像47的背景部47a与组合仪表12的背景部42a(参照图11)同样地以红色系的颜色显示。操作图标48向驾驶员报告能够通过对转向开关15a(参照图1)的操作进行向自动退避控制的移行解除以及向自动退避控制的强制移行的意思。

如图13所示，CID13在显示画面13a显示姿势变形图标50以及消息图像51作为第二报告。姿势变形图标50以及消息图像51是与投影到投影区域14a的姿势变形图标45以及消息图像47(参照图9)实质上相同的形状。CID13的显示也能够被驾驶员以外的本车辆A(参照图1)的乘客视觉确认。因此，消息图像51的背景部51a的颜色与朝向驾驶员的各消息图像42、47的各背景部42a、47a的颜色不同。具体而言，消息图像51的背景部51a以绿色系的颜色显示以便能够给予乘客安心感。

除此之外，在第二报告中，通过音频扬声器112朝向乘客播放基于正式判定的通知音。音频扬声器112在通知音之后向乘客发出预告向自动驾驶控制的移行的引导声音。音频扬声器112例如播放“检测到姿势变形。马上移至退避行驶。在进行解除的情况下，请按下转向开关”这样的消息。

接下来，基于图14～图16对自动退避控制中的执行通知的详细进行说明。另外，在图14以及图15的各进度图像151、141中，记载了点的范围表示熄灭状态，空心的范围表示点亮状态。

在基于驾驶困难状态的确定判定(参照图7的T6)的执行通知中，如图14所示，CID13在显示画面13a显示乘客报告显示150。乘客报告显示150是在通过信息获取部31(参照图8)获取了自动退避控制的工作信息的情况下，主要向坐在助手席17p(参照图1)的乘客报告自动退避控制的信息的显示。图14A～图14D分别表示设定工序、移动工序、停车工序以及呼叫工序中的乘客报告显示150的方式。乘客报告显示150与显示画面13a相同为横长形状。在乘客报告显示150包含进度图像151、说明图像152、消息图像153、拍摄图像154以及地图图像156。

进度图像151是形成为圆形形状的图像。进度图像151在圆周方向被分割为多个(四个)区域。进度图像151通过明亮的状态和黑暗的状态的周期性的重复(闪烁)示出与当前执行中的工序对应的区域。而且，若一个工序完成，则进度图像151与通知音配合地使与完成的工序对应的特定的区域较短地闪烁。其后，进度图像151将与结束的工序对应的区域保持为点亮状态。

根据以上，由于自动退避控制的工序进展，从而进度图像151使作为闪烁状态的区域顺时针移动，并且使作为点亮状态的区域一个一个地增加。通过这样的显示，进度图像151能够阶段地示出自动退避控制中的当前进展程度。除此之外，通过随着工序的完成的明灭，能够通知乘客进度图像151工序完成，使其具有安心感。

并且，与执行中的工序对应的特定的一个区域能够进行闪烁显示作为说明图像152的背景。在处于闪烁状态的区域中，设定为维持明亮的状态的时间(例如0.7秒)比由于熄灭而维持黑暗的状态的时间(0.3秒)长。使各区域闪烁的周期(例如1.0秒)设定为与人的通常时的心率同等程度。

说明图像152是通过文字说明通过自动退避控制实施的多个工序中当前执行中的工序的图像。具体而言，说明图像152显示“设定退避路径”、“向退避场所移动”、“停车到退避场所”以及“紧急呼叫”等文字组。说明图像152使各文字组与进度图像151的各区域一个一个地重叠来显示。说明图像152以及进度图像151在显示画面13a中显示在与助手席17p(参照图1)相比接近驾驶席17d(参照图1)的范围。

消息图像153是通过文字引导通过自动退避控制当前进行行驶和对执行中的自动退避控制的应对行动的图像。具体而言，消息图像153例如包含“退避行驶中”这样的消息和用于中止自动退避控制的操作方法。消息图像153显示在显示画面13a的上边缘区域。消息图像153随着向呼叫工序的移行，将内容从通知基于自动退避控制的行驶的消息(图14A～图14C)变更为通知紧急通报的实施的消息(图14D)。另外，在紧急通报完成之后，也可以例如变更为“请不要下车”等推荐留在车内的消息图像。

拍摄图像154是由前方照相机单元92(参照图2)拍摄到的图像。在拍摄图像154拍摄有通过自动退避控制预定行驶的预定行驶路径。在拍摄图像154重叠有形成为箭头状的路径明示图像部155。路径明示图像部155基于通过自动退避控制设定的预定行驶路径的信息描绘。路径明示图像部155能够明示拍摄图像154所摄有的预定行驶路径。拍摄图像154与地图图像156在水平方向并排地显示。

地图图像156是与本车辆A(参照图1)的周围的道路形状一起向乘客示出通过自动退避控制设定的退避场所的图像。具体而言，在地图图像156显示有示出本车辆A的位置的自车图标156a、示出本车辆A的周围的道路形状的道路图像部156b以及示出退避场所的停车图标156c。地图图像156在显示画面13a中，与拍摄图像154相比显示在助手席17p侧。

如图15所示，作为执行通知组合仪表12在显示画面12a显示驾驶员报告显示140。驾驶员报告显示140是向坐在驾驶席17d(参照图1)的驾驶员报告自动退避控制的信息的显示。图15A～图15D分别示出设定工序、移动工序、停车工序以及呼叫工序中的驾驶员报告显示140的方式。驾驶员报告显示140以与组合仪表12的通常显示重叠的形式，显示在显示画面12a。在驾驶员报告显示140包含进度图像141、说明图像142以及引导图像143。

进度图像141是实质上与乘客报告显示150的进度图像151(参照图14)相同形状的图像，随着自动退避控制的工序的移行，使作为闪烁状态的区域顺时针移动。通过这样的显示，进度图像141能够示出自动退避控制中当前进展程度。说明图像142是实质上与乘客报告显示150的说明图像152(参照图14)相同形状的图像，与进度图像141重叠。进度图像141以及说明图像142配置在显示画面12a的中央。在第一实施方式中，乘客报告显示150的进度图像151所示出的工序的数目与驾驶员报告显示140的进度图像141所示出的工序的数目相互相同地设定。

引导图像143与乘客报告显示150的消息图像153(参照图14)相同，是通过文字引导对执行中的自动退避控制的应对行动的图像。引导图像143在显示画面12a中，例如配置在进度图像141以及说明图像142的右侧。引导图像143随着向呼叫工序的移行，从记载了自动退避控制的中止方法的消息(图15A～图15C)变更为表示紧急呼叫的实施的图标(图15D)。

如图16所示，作为执行通知HUD装置14(参照图1)在投影区域14a显示驾驶员报告显示146。驾驶员报告显示146是与组合仪表12的驾驶员报告显示140(参照图15)一起向驾驶员报告自动退避控制的信息的显示。图16A～图16D分别示出设定工序、移动工序、停车工序以及呼叫工序中的驾驶员报告显示146的方式。在驾驶员报告显示146至少包含有消息图像148。

消息图像148与乘客报告显示150的消息图像153(参照图14)同样地是通过文字引导当前为通过自动退避控制进行行驶中的图像。消息图像148显示在投影区域14a的下边缘区域。消息图像148随着向呼叫工序的移行，将内容从通知通过自动退避控制的行驶的消息(图16A～图16C)变更为通知紧急通报的实施的消息(图16D)。

除此之外，在执行通知中，随着自动退避控制的工序的移行，通过图1所示的音频扬声器112播放通知音和声音消息。在执行通知的开始时，音频扬声器112播放“开始退避行驶”这样的声音(图7的T6，声音1)。除此之外，若退避场所以及预定行驶路径的设定完成，则音频扬声器112播放“设定了退避场所”这样的声音。

在从设定工序向移动工序的移行时，播放“向退避场所移动”这样的声音(图7的T7，声音2)。在移动工序中开始车道变更时，播放“开始车道变更。在进行中止的情况下请按两次危险开关。向周围的车通知退避行驶”这样的声音(图7的T8，声音3)。然后，若车道变更完成，则播放“完成车道变更”这样的声音(图7的T9，声音4)。

在从移动工序向停车工序的移行时，播放“不久将停车到安全的场所”这样的声音(图7的T10，声音5)。然后，若停车到退避场所，则播放“已停车到退避场所”这样的声音(图7的T11，声音6)。并且，在从停车工序向呼叫工序的移行时，播放“已向呼叫中心联络退避场所”这样的声音(图7的T12，声音7)。

接下来，基于图17以及图18，并参照图1以及图2对到自动退避控制的开始为止由控制电路70a实施的处理的详细进行说明。图17以及图18的流程图所示的处理基于通过变速杆16(参照图1)的向D档的切换而本车辆A能够行驶，通过控制电路70a开始。

在S101中，基于由DSM11检测到的信息，判定驾驶员是否有异常的可能性。在持续异常检测超过第一阈值时间TH1的情况下，在S101，进行驾驶员有异常的可能性这样的临时判定(图4T3)，并进入S102。在S102中，使用HMI系统10实施第一报告，并进入S103。另一方面，在异常检测不超过第一阈值时间TH1的情况下，重复S101，继续驾驶员的监视。

在S103中，判定驾驶辅助功能是否在工作中。在LKA以及ACC均工作的情况下，进入S107。另一方面，在LKA以及ACC的至少一方未工作的情况下，进入S104。在S104中，通过第一预退避控制的开始使LKA工作，并进入S105。

在S105中，基于由DSM11检测到的信息，判定驾驶员是否处于异常状态。在异常检测未持续超过第二阈值时间TH2的情况下，进入S113。

在S113中，根据基于DSM11的检测信息的驾驶姿势以及转向操纵转矩传感器63的转向操纵力等，判定驾驶员是否是能够正确地进行驾驶的状态。在S113中，在未充分地改善驾驶员的驾驶姿势的情况下以及在未进行正确的转向操纵的情况下，进入S114。在S114中，例如实施提醒旁视等的显示，并返回到S113。另一方面，在S113，确认了驾驶姿势的改善以及转向操纵转矩的复原等的情况下，进入S115。在S115中，通过使LKA停止移至手动驾驶，并返回到S101。

另一方面，在S105中，在异常检测持续超过第二阈值时间TH2的情况下，进行驾驶员处于异常状态这样的正式判定(图4T4)，并进入S106。在S106中，通过第二预退避控制的开始进一步使ACC工作，并进入S108。

在S107中，与S105同样地判定驾驶员是否处于异常状态。在异常检测未持续超过第二阈值时间TH2的情况下，返回到S101。另一方面，在持续异常检测的情况下，在S107进行驾驶员处于异常状态这样的正式判定(图4T4)，并进入S108。

在S108中，使用HMI系统10实施第二报告，并进入S109。在S109中，为了使周边监视ECU91开始退避场所的搜索而输出搜索请求信息，并进入S110。在S110中，开始使本车辆A缓慢减速的制动控制(图4T5)，并进入S111。

在S111中，判定向自动退避控制的移行条件是否成立。在S111，在通过转向开关15a的“是”按钮的操作，解除了向自动退避控制的移行的情况下，返回到S101。另一方面，在通过转向开关15a的“否”按钮的操作同意了向自动退避控制的移行的情况下以及在没有转向开关15a的操作而经过了响应时间AT的情况下，进入S112。在S112，开始自动退避控制，并结束一系列的处理。通过S112，实施通过车间通信的警告发布、危险警告灯的闪烁以及行驶用前照灯95a的点亮等(图7T6)，作为用于向其它的车辆A1报告驾驶困难状态的处理。

接下来，基于图19～图21，并参照图1以及图2对在自动退避控制的开始后由控制电路20a实施的处理的详细进行说明。图19～图21的流程图所示的处理基于确定了驾驶困难状态，由控制电路70a开始。

在S131中，将组合仪表12、CID13以及HUD装置14的各显示切换为用于执行通知的各报告显示140、150、146，并进入S132。在S132，使音频扬声器112播放通知退避行驶开始的声音，并进入S133(图7T6，声音1)。

在S133中，判定自动退避控制的退避场所以及预定行驶路径的设定是否完成。在S133中，到退避场所等的设定完成为止进行待机，并基于退避场所等的设定完成，进入S134。在S134，使音频扬声器112播放通知退避场所的设定完成的声音，并进入S135。

在S135，获取自动退避控制的工作信息，判定在自动退避控制中当前执行中的工序是否从设定工序移至移动工序。在S135中，进行待机直到向移动工序的移行完成为止，并基于向移动工序的移行完成这一情况，进入S136。在S136，生成将各进度图像141、151变更为表示移动工序的实施中的显示的乘客报告显示150(参照图14B以及图15B)，并进入S137。在S137中，使音频扬声器112播放通知移动开始的声音，并进入S138(图7T7，声音2)。

在S138中，基于预定行驶路径的信息，判定是否需要车道变更。在S138，判定为需要车道变更的情况下，进入S139。在S139中，进行待机直至能够进行车道变更，并基于能够进行车道变更，进入S140。在S140，使音频扬声器112播放通知车道变更的开始的声音，并进入S141(图7T8，声音3)。

在S141，判定车道变更是否完成。在S141中，进行待机直到车道变更完成为止，并基于完成车道变更这一情况，进入S142。在S142中，使音频扬声器112播放通知车道变更的完成的声音(图7T9，声音4)，并返回到S138。由此，在S138，再次判定是否需要车道变更。

在S138，判定为不需要车道变更的情况下，进入S143。在S143，获取自动退避控制的工作信息，判定在自动退避控制中当前执行中的工序是否从移动工序移至停车工序。在S135中，进行待机直至向停车工序的移行完成，并基于完成向停车工序的移行这一情况，进入S144。在S144，生成将各进度图像141、151变更为表示移动工序的实施中的显示的乘客报告显示150(参照图14C以及图15C)，并进入S145。在S145中，使音频扬声器112播放通知向退避场所的停止开始的声音，并进入S146(图7T10，声音5)。

在S146，基于本车辆A的行驶速度，判定是否停车到退避场所。在S146中，进行待机直至本车辆A成为停车状态为止，并基于成为停车状态这一情况，进入S147。在S147，使音频扬声器112播放通知已停车到退避场所的主旨的声音，并进入S148(图7T11，声音6)。

在S148，获取自动退避控制的工作信息，判定在自动退避控制中当前执行中的工序是否从停车工序移至呼叫工序。在S148，进行待机直至向呼叫工序的移行完成，并基于完成向呼叫工序的移行这一情况，进入S149。在S149中，生成将各进度图像141、151变更为表示移动工序的实施中的显示的乘客报告显示150(参照图14D以及图15D)，并进入S150。在S150中，使音频扬声器112播放通知向呼叫中心的联络实施的声音(图7T12，声音7)，并结束一系列的处理。

根据到此为止说明的第一实施方式，通过乘客报告显示150所包含的进度图像151，可知由多个工序构成的自动退避中的当前的进展程度。因此，乘客能够想像自动退避控制的整体像和自动退避控制的结束。除此之外，通过说明图像152向乘客说明当前执行中的工序，从而乘客能够大体预测不依靠驾驶员进行行驶的本车辆A的动作。据此，乘客报告显示150能够缓和通过自动退避控制行驶的本车辆A内的乘客的不安。

这里，能够考虑在开始自动退避控制之后，驾驶员恢复的可能性。因此，期望自动退避控制所涉及的信息不仅提示给出了驾驶员之外的乘客，也提示给驾驶员。为此在第一实施方式中，也通过使驾驶员能够视觉确认的显示画面12a以及投影区域14a显示的驾驶员报告显示140、146，向驾驶员通知自动退避控制的进度。其结果为，实现对于驾驶员来说也容易理解的信息提示。

另外根据第一实施方式，作为在自动退避控制的工作时应该采取的应对行动，引导退避行驶的解除方法。因此，从驾驶困难的状态恢复的驾驶员通过参照引导图像143，能够进行适当的应对行动。另外，通过也对乘客引导这样的应对行动，能够进一步除去乘客的不安。

并且根据第一实施方式，各进度图像141、151所示出的工序的数目相互相同。因此，例如即使从驾驶困难的状态恢复的驾驶员一起视觉确认组合仪表12以及CID13，驾驶员也能够没有混乱地把握当前的状况。

另外在第一实施方式中，由乘客视觉确认的CID13的背景部51a的颜色与仅被驾驶员视觉确认的组合仪表12以及投影区域14a的各背景部42a、47a的颜色相互不同。因此，通过CID13的绿色系的背景部51a，能够缓和乘客的不安，另一方面通过红色系的各背景部42a、47a能够提高驾驶员的紧迫感，得到催促应对的效果。

除此之外根据第一实施方式，重复闪烁的各进度图像141、151能够引起驾驶员以及乘客注目。因此，由各进度图像141、151示出的当前执行中的工序容易被驾驶员以及乘客识别。另外，在各进度图像141、151分别重叠有各说明图像142、152。因此，各进度图像141、151的闪烁也能够引起对各说明图像142、152的注目。并且，虽然各进度图像141、151进行闪烁显示，但较长地确保维持明亮的状态的时间。因此，即使各说明图像142、152与闪烁的各进度图像141、151重叠，也能够成为容易读取的显示。

另外在第一实施方式中，在拍摄了本车辆A的行进方向的拍摄图像154重叠明示预定行驶路径的路径明示图像部155。因此，视觉确认乘客报告显示150的乘客能够预先知晓通过自动退避控制预定行驶的路径。其结果，能够减轻乘客的不安。

并且根据第一实施方式，能够通过行驶用前照灯95a的工作，向本车辆A的周围的车辆通知本车辆A不在通常状态的主旨。除此之外，通过行驶用前照灯95a的预定行驶路径的照明，拍摄图像154能够清晰地显示预定行驶路径。

除此之外根据第一实施方式，根据地图图像156所示出的自车图标156a与停车图标156c的位置关系，乘客能够大体把握到本车辆A停车的退避场所的距离。因此，乘客容易进一步想像自动退避控制的结束。根据这样的显示，能够进一步减轻乘客的不安。

另外根据第一实施方式，自动退避控制中的工序的移行，不仅通过显示，也通过声音报告给乘客。因此，能够提高向乘客的信息传递的准确性，进一步使乘客的不安减轻。

并且根据第一实施方式，进度图像151以及说明图像152在显示画面13a中靠近驾驶席17d而显示。因此，能够避免被显示画面13a周围的仪表板19等妨碍而不容易观察进度图像151等的情况。其结果为，坐在助手席17p的乘客不管助手席17p的座位位置如何都容易视觉确认进度图像151以及说明图像152。因此，能够可靠地发挥使报告自动退避控制的进展程度所引起的进度图像151以及说明图像152的不安减轻的效果。

另外，在第一实施方式中，显示画面12a以及投影区域14a分别相当于“第二显示区域”，显示画面13a相当于“显示区域”以及“第一显示区域”。另外，信息获取部31相当于“工作信息获取部”，音频扬声器112相当于“声音播放装置”，消息图像153相当于“引导图像”。并且，S135、S143、S148相当于“工作信息获取步骤”，S136、S144、S149相当于“显示生成步骤”。而且，HCU20相当于“信息提示装置”。

(第二实施方式)

图22以及图23所示的本公开的第二实施方式是第一实施方式的变形例。在第二实施方式中，自动退避控制的实施通知中的乘客报告显示250以及驾驶员报告显示240的显示方式与第一实施方式不同。以下，对第二实施方式中的各报告显示的详细进行说明。

图22所示的乘客报告显示250显示在CID13的显示画面13a。图22A～图22D分别示出设定工序、移动工序、停车工序以及呼叫工序中的乘客报告显示250的方式。与第一实施方式相同，在乘客报告显示250包含有进度图像251、说明图像252、消息图像253、拍摄图像254以及地图图像256。

进度图像251由表示“！”的图标、圆环状的图像部以及圆弧状的图像部的组合形成。圆环状以及圆弧状的各图像部包围图标的周围。圆弧状的图像部与圆环状的图像部重叠。圆弧状的图像部的线宽度比圆环状的图像部的线宽度粗。圆环状的图像部随着自动退避控制的工序的进行，沿着圆环状的图像部顺时针延伸。通过这样的显示，进度图像251能够连续地示出自动退避控制中的当前的进展程度。进度图像251主要在移动工序以及停车工序中显示在显示画面13a。

说明图像252在显示画面13a中显示在远离进度图像251的位置。说明图像252与闪烁的背景重叠。通过这样的闪烁，乘客的视线被导向说明图像252。

消息图像253通过文字引导当前通过自动退避控制进行行驶。在消息图像253不包含用于中止自动退避控制的操作方法。消息图像253在移动工序以及停车工序中省略显示。

拍摄图像254与第一实施方式的拍摄图像154(参照图14)同样地是由前方照相机单元92(参照图2)拍摄到的图像。地图图像256与第一实施方式的地图图像156(参照图14)相同，是向乘客示出通过自动退避控制设定的退避场所的图像，包含自车图标256a、道路图像部256b以及停车图标256c。地图图像256与拍摄图像254重叠地显示。拍摄图像254主要在移动工序以及停车工序中显示在显示画面13a。地图图像256主要在移动工序中显示在显示画面13a。

图23所示的驾驶员报告显示240显示在组合仪表12的显示画面12a。图23A～图23D分别示出设定工序、移动工序、停车工序以及呼叫工序中的驾驶员报告显示240的方式。与第一实施方式相同，在驾驶员报告显示240包含有进度图像241、说明图像242以及引导图像243a、243b。

进度图像241是实质上与乘客报告显示250的进度图像251(参照图22)同一形状的图像，随着自动退避控制的工序的移行，使圆弧状的图像部顺时针延伸。通过这样的显示，进度图像241能够示出自动退避控制中的当前的进展程度。说明图像242在显示画面12a中显示在远离进度图像241的位置。说明图像242配置在进度图像241的侧方(例如左侧)。

引导图像243a是通过文字引导当前通过自动退避控制进行行驶的图像。引导图像243a配置在进度图像241的左侧。另一方面，引导图像243b是通过文字引导对执行中的自动退避控制的应对行动的图像。引导图像243b配置在进度图像241的右侧。在第二实施方式中，引导应对行动的图像在驾驶员报告显示240以及乘客报告显示250(参照图22)中，仅包含于驾驶员报告显示240。

在到此为止说明的第二实施方式中，也起到与第一实施方式相同的效果，所以能够缓和乘客的不安。除此之外在第二实施方式中，为了仅向驾驶员传达中止自动退避控制的应对方法，而在组合仪表12以及CID13中，仅显示于组合仪表12。根据这样的显示，能够避免在移至自动退避控制之后，由焦躁的乘客，实施基于错误的判断的应对行动的情况。

(第三实施方式)

图24所示的本公开的第三实施方式是第一实施方式的其它的变形例。在第三实施方式中，自动退避控制的实施通知的进度图像351与第一实施方式的进度图像151(参照图14)不同。图24A～图24D分别示出设定工序、移动工序、停车工序以及呼叫工序中的进度图像351的方式。

进度图像351通过使分割为多个的区域中，与当前执行中的工序对应的区域351a向外周侧偏移，使其显示在与其它的区域分离的位置。区域351a进行闪烁显示，并且与其它的区域相比向径向放大。另外，与区域351a重叠的说明图像352与区域351a一起向外周侧移动，并且，放大地显示。若自动退避控制的工序移至下一个工序，则区域351a缩小，并且与其它的区域一体化。进度图像351随着自动退避控制的工序进展，使区域351a顺时针移动，从而能够容易理解地示出自动退避控制中的当前进展程度。

在到此为止说明的第三实施方式中，也起到与第一实施方式相同的效果，从而能够缓和乘客的不安。另外在第三实施方式中，对于显示在组合仪表12的进度图像141(参照图15)也与进度图像351相同，能够是放大特定的区域351a的显示方式。

(第四实施方式)

图25所示的本公开的第四实施方式是第一实施方式的其它的变形例。第四实施方式的进度图像451所示的自动退避控制的工序的数目(六个)比第一实施方式的进度图像151(参照图14)所示的工序的数目(四个)多。因此，在CID13显示的进度图像451所示出的工序的数目比在组合仪表12显示的进度图像141(参照图15)所示出的工序的数目多。

在到此为止说明的第四实施方式中，也起到与第一实施方式相同的效果，从而能够缓和乘客的不安。除此之外在第四实施方式中，与朝向驾驶员显示的进度图像141(参照图15)相比，朝向助手席17p(参照图1)的乘客显示的进度图像451更能够详细地提示通过退避行驶功能实施的工序。这样的详细的信息提示能够有助于乘客的不安消除。另外，进度图像451所示出的数目能够适当地变更。例如，若预定重复多次车道变更，则进度图像451能够将区域的数目增加车道变更的预定次数。

(第五实施方式)

图26～图29所示的本公开的第五实施方式是第一实施方式的其它的变形例。在第五实施方式中，本车辆A的车载网络501所包含的空调系统180以及座椅控制器186进一步使用在退避行驶时向驾驶员以及乘客的信息提示。除此之外，第五实施方式的HMI系统10作为进行通过声音的信息通知的声学设备，具备两组超声波扬声器113、114。以下，基于图26以及图27，并参照图1对第五实施方式的构成进行说明。

空调系统180是从HCU20获取由驾驶员以及乘客设定的包含空调相关的设定值等的空调请求信息，来调整车厢内的温度、清洁以及气流等的车辆用的冷暖气系统。空调系统180具备空气调节单元182、芳香单元183以及空调控制ECU181。

空气调节单元182生成从设在仪表板19等的各吹出口19d、19p供给到车厢内的暖风以及冷风。空气调节单元182能够独立地变更朝向驾驶席17d的周边从吹出口19d吹出的空气的温度和朝向助手席17p的周边从吹出口19p吹出的空气的温度。

芳香单元183使包含芳香(aroma)成分的精油等芳香油成为雾状。由于芳香单元183而成为雾状的芳香成分与由空气调节单元182生成的气流混合，并至少从助手席17p侧的吹出口19p供给到车厢内。扩散到车厢内的芳香成分能够发挥减轻乘客的压力的效果。

空调控制ECU181以具有处理器以及存储器的微型计算机为主体构成。空调控制ECU181与通信总线99连接，并接收从HCU20输出到通信总线99的空调请求信息。空调控制ECU181与空气调节单元182以及芳香单元183连接，并基于获取的空调请求信息，控制空气调节单元182以及芳香单元183的工作。

座椅控制器186是统合地控制与驾驶席17d以及助手席17p相关的设备，例如各座椅促动器187、188以及座椅加热器189等的动作的控制装置。座椅控制器186以具有处理器以及存储器的微型计算机为主体构成。座椅控制器186通过通信总线99接收从HCU20输出的座椅请求信息，并基于座椅请求信息控制各座椅促动器187、188以及座椅加热器189的工作。

座椅促动器187能够通过使驾驶席17d的前后位置、及座垫以及座椅靠背等的姿势变化，来进行驾驶席17d的座椅位置的调整。座椅促动器188能够通过使助手席17p的前后位置、及座垫以及座椅靠背等的姿势变化，进行助手席17p的座椅位置的调整。座椅加热器189能够加热助手席17p的座垫以及座椅靠背。

超声波扬声器114在本车辆A的车厢内，在助手席17p的前方并且在风窗玻璃18的上方设置一对。超声波扬声器114是与设在驾驶席17d侧的超声波扬声器113实质上相同的构成。超声波扬声器114朝向助手席17p的头靠附近，输出指向性较高的超声波。超声波扬声器114播放本车辆A的乘客中仅坐在助手席17p的乘客能够听到的声音。超声波扬声器114能够通过播放的声音仅对助手席17p的乘客进行信息通知。

HCU20的控制电路20a通过由各处理器21、22执行存储于存储器23的程序，除了与第一实施方式实质相同的各功能块(31～36)之外，还构建空调控制请求部137以及座椅控制请求部138。

空调控制请求部137通过向空调控制ECU181输出空调请求信息，控制空气调节单元182以及芳香单元183的工作。空调控制请求部137在获取了预退避控制以及自动退避控制的工作信息的情况下，分别独立地调整朝向驾驶员以及乘客吹出的气流的温度，并且使朝向助手席17p周边的香成分的散布开始。

座椅控制请求部138通过朝向座椅控制器186输出座椅请求信息，来控制各座椅促动器187、188以及座椅加热器189的工作。座椅控制请求部138在获取了预退避控制以及自动退避控制的工作信息的情况下，分别独立地调整驾驶席17d以及助手席17p的各座椅位置，并使助手席17p的升温开始。

以下说明通过以上的构成，在预退避控制以及自动退避控制的执行中对驾驶员以及乘客进行的信息提示的详细。首先，基于图28，并参照图1对预退避控制中的第一报告以及第二报告的详细进行说明。另外，第五实施方式的各显示设备的显示与第一实施方式实质相同。

在基于异常状态的临时判定(T3)的第一报告中，在两组超声波扬声器113、114中，仅从设在驾驶席17d侧的超声波扬声器113播放通知音。由超声波扬声器113播放的通知音设定为促进驾驶员紧张感的例如2千赫左右的比较高的声音。除此之外在第一报告中，为了提高驾驶员的紧张感，而从设在驾驶席17d的正面的吹出口19d进行比当前的室温低的温度的冷风的吹出。

在基于异常状态的正式判定(T4)的第二报告中，从两组超声波扬声器113、114的各个播放基于正式判定的通知音。由设在助手席17p侧的超声波扬声器114播放的通知音为了不提高乘客的不安感，而与由超声波扬声器113播放的通知音相比低音，且是组合了多个不同高度的声音的和弦。各超声波扬声器113、114分别接着通知音播放“检测到姿势变形。将马上移至退避行驶。在进行解除的情况下，请按下转向开关”等预告向自动驾驶控制的移行的引导声音。

除此之外在第二报告中，为了提高乘客的安心感，而从设在助手席17p的正面的吹出口19p进行比当前的室温高的温度的暖风的吹出。并且通过芳香单元183(参照图26)的工作从吹出口19p供给具有缓和乘客的紧张的效果的芳香成分。

另外在第二报告中，为了移动驾驶员的两臂以及后背等的筋肉刺激固有知觉，而由座椅促动器187(参照图26)执行使驾驶席17d的座椅位置变动的动作。另一方面，助手席17p的座椅位置例如通过使座椅靠背进一步后倾等工作，而变更为使乘客放松的状态。除此之外，通过座椅加热器189(参照图26)的工作，实现助手席17p的升温。

接下来，基于图28以及图26，并参照图1对自动退避控制中的执行通知的详细进行说明。

在基于驾驶困难状态的确定判定的执行通知中，随着移至自动退避控制的工序，各超声波扬声器113、114连续地播放通知工序的完成的通知音、和声音消息。由各超声波扬声器113、114播放的各通知音与预退避控制的执行时相同相互不同。另一方面，由各超声波扬声器113、114播放的声音消息相互实质上为相同的内容，是与在第一实施方式中由音频扬声器112(参照图2)播放的声音消息实质相同的内容。

具体而言，在执行通知的开始时，各超声波扬声器113、114接着各通知音播放“开始退避行驶”这样的声音消息(T6，声音1)。然后，由于退避场所以及预定行驶路径的设定的完成，各超声波扬声器113、114，播放“已设定退避场所”这样的声音消息(T7，声音2)。

并且，在车道变更的开始时，由各超声波扬声器113、114播放“开始车道变更。在进行中止的情况下请按两次危险开关。向周围的车通知退避行驶”这样的声音消息(T8，声音3)。然后，若车道变更完成，则播放“完成车道变更”这样的声音消息(T9，声音4)。

在从移动工序向停车工序的移行时，播放“不久将停车到安全的场所”这样的声音消息(T10，声音5)。其后，若停车到退避场所，则播放“已停车到退避场所”这样的声音消息(T11，声音6)。此时，为了提高驾驶员的紧张感而进行的从吹出口19d的冷风的吹出和驾驶席17d的座椅位置的变动一起结束。另一方面，用于使乘客具有安心感的从吹出口19p的暖风以及芳香成分的吹出、和助手席17p的座椅位置以及座椅温度的调整均继续。然后，在从停车工序向呼叫工序的移行时，仅从助手席17p侧的超声波扬声器114播放“已向呼叫中心联络退避场所”这样的声音消息(T12，声音7)。

在到此为止说明的第五实施方式中，也起到与第一实施方式相同的效果，能够缓和退避行驶中的乘客的不安。除此之外在第五实施方式中，为了使坐在助手席17p的乘客平静下来，而调整乘客周围的温度以及芳香环境等。根据以上，能够进一步缓和退避行驶中的乘客的不安。

(其它的实施方式)

以上，对本公开的多个实施方式进行了说明，但本公开并不限定于上述实施方式进行解释，在不脱离本公开的主旨的范围内能够应用于各种实施方式以及组合。

在上述实施方式中，在由驾驶员或者乘客仅按一次危险开关15b(参照图1)的情况下，CID13以及组合仪表12的各显示分别变更为图30以及图31所示那样的方式。具体而言，“按两次危险开关进行中止”的消息图像153以及引导图像143(参照图14A以及图15A)变更为“再按一次危险开关进行中止”这样的消息图像以及引导图像143。

如以上那样，若针对驾驶员或者乘客的操作的输入有显示方式的变更这样的反应，则驾驶员以及乘客能够确实感到本车辆A的系统的正常工作。其结果，驾驶员以及乘客能够得到安心感。除此之外，在进行了对危险开关15b的操作输入的情况下，CID13以及组合仪表12也能够进行强调传达操作的接受的闪烁显示。

图32示出上述实施方式的变形例1的进度图像651以及说明图像652。进度图像651具有形成为横长的矩形形状的框状的图像部、和位于框状的图像部内的条状的图像部。进度图像651随着自动退避控制中的工序的进展，在框状的图像部内，使条状的图像部从一个端部朝向另一个端部延伸。通过这样的显示，进度图像651能够示出自动退避控制中的当前的进展程度。另外，说明图像652在进度图像651的下侧，能够示出当前执行的工序。

图33示出上述实施方式的变形例2的乘客报告显示750。乘客报告显示750显示在形成为纵长的CID的显示画面713a。乘客报告显示750与显示画面713a形状配合地为纵长形状的图像。具体而言在乘客报告显示750中，从上方朝向下方依次排列消息图像753、拍摄图像754、以及地图图像756。通过这样的各图像的配置，乘客报告显示750能够有效地活用显示画面713a的宽度，实现对乘客的容易观察的信息提示。另外，与地图图像756相比配置在上方的拍摄图像754能够接近风窗玻璃18(参照图1)。其结果为，乘客容易使拍摄图像754的AR(Augmented Reality：增强现实)显示与通过风窗玻璃18(参照图1)观察到的前景相关联。

另外，图34示出上述实施方式的变形例3的乘客报告显示850。乘客报告显示850显示在以小型的方式形成的CID的显示画面813a。与这样的显示画面813a的形状配合，从乘客报告显示850省略拍摄图像。如以上那样，根据显示画面的尺寸，能够从乘客报告显示省略拍摄图像、地图图像以及消息图像。另外，若显示画面为较窄的构成，则也可以通过乘客的设定，能够选择显示的图像。并且，也可以例如是每几秒切换拍摄图像和地图图像的显示。

没有体验过上述实施方式那样的自动退避控制的工作的乘客容易对紧急时的自动退避控制的工作抱有不安。因此，HCU例如也可以实施在本车辆A处于静止状态的情况下，预先模拟体验在预退避控制以及自动退避控制的执行时进行的各工序的演示模式。

在上述实施方式中，通过DSM，检测驾驶员的姿势变形等异常状态。但是，检测驾驶员的信息的构成并不限定于DSM。例如，车辆控制ECU能够基于从佩戴于驾驶员的穿戴式设备发送的驾驶员的生物体信息，判定驾驶员的异常状态。作为生物体信息，例如是脉搏数、心率、以及体温等信息。

在上述实施方式中，通过按两次危险开关，能够解除自动退避控制中的应急控制禁止。但是，解除应急控制禁止的操作并不限定于危险开关的多次的按压操作，而能够适当地变更。另外，自动退避控制中的应急控制禁止也可以不能够解除。并且，能够禁止预退避中的应急控制。

在上述实施方式中，在移至通过自动退避控制的自动驾驶之后，通过显示设备以及声学设备，实施对乘客的报告。但是，向乘客的报告也可以仅由显示设备实施。并且，虽然对驾驶员的报告由组合仪表以及HUD装置双方实施，但也可以由任意一方的显示设备实施。或者，也可以不实施对驾驶员的报告。或者，也可以实施将风窗玻璃18(参照图1)的整体作为显示区域使用的对驾驶员以及乘客的报告。

在上述实施方式中，为了作为除了驾驶员之外的本车辆的乘客，而向坐在助手席的乘客提示信息，显示了将CID的显示画面作为“显示区域”的乘客报告显示。但是，例如，也可以为了向坐在本车辆的后排座椅的乘客进行信息提示，而将后娱乐系统的监视器的显示画面作为“显示区域”，显示乘客报告显示。另外，也可以将电子镜系统的监视器的显示画面作为“显示区域”，显示乘客报告显示。

在上述实施方式中，由HCU20的各处理器21、22提供的功能能够由与上述不同的硬件以及软件，或者它们的组合提供。例如，在省略了HCU20的车载网络中，能够通过车辆控制ECU的处理器，或者设在显示设备的处理器执行用于实现应用了本公开的信息提示方法的显示的处理的一部分或者全部。

这里，该申请所记载的流程图，或者，流程图的处理由多个部分(或者称为步骤)构成，各部分例如表现为S101。并且，各部分能够分割为多个子部分，另一方面，也能够将多个部分合成一个部分。并且，这样构成的各部分能够作为设备、模块、方法提及。

本公开依照实施例进行了记述，但应该理解本公开并不限定于该实施例、结构。本公开也包含各种变形例、同等范围内的变形。除此之外，各种组合、方式、以及在它们包含一个要素，一个以上，或者一个以下的其它的组合、方式也在本公开的范畴、思想范围内。

Claims (15)

1.一种信息提示装置，是安装于在被判定为驾驶员继续驾驶困难的情况下自动退避控制进行工作的车辆，并通过能够被除了上述驾驶员之外的上述车辆的乘客视觉确认的第一显示区域(13a、713a、813a)的显示来向该乘客提示信息的信息提示装置，其中，具备：

工作信息获取部(31)，其获取上述自动退避控制的工作信息；以及

显示生成部(35)，其在上述自动退避控制进行工作的情况下，生成显示在上述第一显示区域来报告上述自动退避控制所涉及的信息的乘客报告显示(150、250、750、850)，

在上述乘客报告显示包含：

说明通过上述自动退避控制实施的多个工序中当前执行中的工序的说明图像(152、252、352、652)；以及

表示上述自动退避控制下的当前进展程度的进度图像(151、251、351、451、651)。

2.根据权利要求1所述的信息提示装置，其中，是通过规定在与上述第一显示区域不同的位置，且能够被上述驾驶员视觉确认的第二显示区域(12a、14a)的显示来进行向上述驾驶员的报告的信息提示装置，

在上述工作信息被获取的情况下，上述显示生成部还生成显示在上述第二显示区域来向上述驾驶员报告上述自动退避控制所涉及的信息的驾驶员报告显示(140、146、240)。

3.根据权利要求2所述的信息提示装置，其中，

分别在上述驾驶员报告显示以及上述乘客报告显示中包含引导在上述自动退避控制进行了工作的情况下的应对行动的引导图像(143、153)。

4.根据权利要求2所述的信息提示装置，其中，

仅在上述驾驶员报告显示中包含引导在上述自动退避控制进行了工作的情况下的应对行动的引导图像(243b)。

5.根据权利要求2～4中任意一项所述的信息提示装置，其中，

上述驾驶员报告显示中包含表示上述自动退避控制下的当前进展程度的进度图像(141)，

上述乘客报告显示的进度图像(151、351)所示出的工序的数目与上述驾驶员报告显示的进度图像所示出的工序的数目相同。

6.根据权利要求2～4中任意一项所述的信息提示装置，其中，

上述驾驶员报告显示中包含表示上述自动退避控制下的当前进展程度的进度图像(141)，

上述乘客报告显示的进度图像(451)所示出的工序的数目比上述驾驶员报告显示的进度图像所示出的工序的数目多。

7.根据权利要求2～6中任意一项所述的信息提示装置，其中，

上述乘客报告显示包含绿色系的背景部(51a)，

上述驾驶员报告显示包含红色系的背景部(42a、47a)。

8.根据权利要求1～7中任意一项所述的信息提示装置，其中，

上述进度图像(151、351、451)通过明亮的状态和黑暗的状态的周期性的重复而示出当前执行中的工序，

上述明亮的状态被维持的时间比上述黑暗的状态被维持的时间长。

9.根据权利要求8所述的信息提示装置，其中，

上述说明图像(152、352)与上述进度图像重叠显示，

上述进度图像(151、351)重复周期性的亮度的变化作为上述说明图像的背景。

10.根据权利要求1～9中任意一项所述的信息提示装置，其中，

还具备图像获取部(32)，该图像获取部(32)获取拍摄包含通过上述自动退避控制设定的预定行驶路径的行进方向的范围而得的拍摄图像(154、254、654)，

上述显示生成部对上述乘客报告显示添加该拍摄图像，该拍摄图像重叠有明示上述拍摄图像中的上述预定行驶路径的路径明示图像部(155)。

11.根据权利要求1～10中任意一项所述的信息提示装置，其中，

还具备照明请求部(33)，在上述工作信息被获取的情况下，该照明请求部(33)使安装于上述车辆的行驶用前照灯(95a)的照明开始。

12.根据权利要求1～11中任意一项所述的信息提示装置，其中，

上述乘客报告显示还包含地图图像(156、256、656)，该地图图像(156、256、656)将作为使上述车辆停车的位置而通过上述自动退避控制设定的退避场所与上述车辆的周围的道路形状一起示出。

13.根据权利要求1～12中任意一项所述的信息提示装置，是与播放能够被上述乘客听到的声音的声音播放装置(112)一起安装在上述车辆的信息提示装置，其中，

还具备播放请求部(34)，该播放请求部(34)基于通过上述自动退避控制实施的工序被移行这一情况，使上述声音播放装置播放向上述乘客报告移行后的工序的内容的声音。

14.根据权利要求1～13中任意一项所述的信息提示装置，其中，

上述第一显示区域是以驾驶席以及助手席并排的上述车辆的宽度方向(WD)为长边的形状，

上述说明图像以及上述进度图像在上述第一显示区域中被显示在比上述助手席靠近上述驾驶席的范围内。

15.一种信息提示方法，是在被判定为驾驶员继续驾驶困难的情况下自动退避控制进行工作的车辆中，通过能够被除了上述驾驶员之外的上述车辆的乘客视觉确认的显示区域(13a、713a、813a)的显示来向该乘客提示信息的信息提示方法，其中，包括：

获取上述自动退避控制的工作信息(S135、S143、S148)；以及

在上述自动退避控制进行工作的情况下，生成显示在上述显示区域来报告上述自动退避控制所涉及的信息的乘客报告显示(150、250、650、750)(S136、S144、S149)，

在上述乘客报告显示包含：

说明通过上述自动退避控制实施的多个工序中当前执行中的工序的说明图像(152、252、352、652)；以及

表示上述自动退避控制下的当前进展程度的进度图像(151、251、351、451、651)，

工作信息的获取和乘客报告显示的生成由至少一个处理器(21、22)执行。