一种自动驾驶的交互方法、设备、系统及可读存储介质
技术领域
本发明涉及自动驾驶领域,尤其涉及一种自动驾驶的交互方法、设备、系统及可读存储介质。
背景技术
自动驾驶汽车设置人机界面(human machine interface,HMI)以用于车辆信息(仪表盘实现车速、发动机转速、油量等),以及导航、娱乐(小显示屏用于广播音乐、导航)等信息的显示。
然而发明人发现,该人机显示界面虽然包含了车辆运行信息的基本信息,但是用户无法直观获取关键信息,例如车辆的车速、里程,车辆遭遇的紧急情况等,也无法通过控制该界面对车辆进行控制,从而不利于用户根据显示的信息高效、便利地控车。
发明内容
本发明实施例提供了一种自动驾驶的交互方法、设备、系统及可读存储介质,可以实现通过显示界面对自动驾驶车辆进行控制,方便用户操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
第一方面,本发明实施例提供了一种自动驾驶的交互方法,应用于交互设备,所述交互设备设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备上设置有触摸显示界面,所述交互设备用于与所述自动驾驶车辆通信连接,以获取所述自动驾驶车辆的驾驶信息,所述方法包括:
在所述交互设备的触摸显示界面显示所述自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序;
获取用户对于所述控车图标的触控操作,其中,所述用户能够根据所述驾驶信息输入所述触控操作;
根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现所述预设功能。
第二方面,本发明实施例提供了一种交互设备,应用于自动驾驶车辆,所述交互设备设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备上设置有触摸显示界面,所述交互设备用于与所述自动驾驶车辆通信连接,以获取所述自动驾驶车辆的驾驶信息,所述设备包括:一个或多个处理器,共同地或单独地工作,所述处理器用于执行以下操作:
在所述交互设备的触摸显示界面显示所述自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序;
获取用户对于所述控车图标的触控操作,其中,所述用户能够根据所述驾驶信息输入所述触控操作;
根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现所述预设功能。
第三方面,本发明实施例提供了一种交互系统,包括:自动驾驶车辆和交互设备,所述交互设备设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备上设置有触摸显示界面,所述交互设备用于与所述自动驾驶车辆通信连接,以获取所述自动驾驶车辆的驾驶信息;
所述交互设备,用于在所述触摸显示界面显示所述自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序;获取用户对于所述控车图标的触控操作,其中,所述用户能够根据所述驾驶信息输入所述触控操作;根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆;
所述自动驾驶车辆,用于接收所述交互设备发送的所述控制指令,并控制所述自动驾驶车辆执行所述控制程序以实现所述预设功能。
第四方面,本发明实施例提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行时实现如上述第一方面所述的方法。
本发明实施例中,交互设备可以通过在触摸显示界面显示自动驾驶车辆的驾驶信息以及控车图标,获取用户对控车图标的触控操作,根据所述触控操作生成控制所述自动驾驶车辆执行与所述触控操作对应的控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现预设功能。通过这种实施方式可以实现将触摸显示界面设置于便于用户操作的位置,触摸显示界面显示自动驾驶车辆的驾驶信息,用户能够直观地获取关键信息;同时,用户能够通过触摸显示界面对自动驾驶车辆进行控制,方便操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种交互设备的界面示意图;
图2是本发明实施例提供的一种交互设备与控制单元之间的结构示意图;
图3是本发明实施例提供的一种交互系统的结构示意图;
图4是本发明实施例提供的一种自动驾驶的交互方法的流程示意图;
图5是本发明实施例提供的另一种自动驾驶的交互方法的流程示意图;
图6是本发明实施例提供的一种交互设备的结构示意图;
图7是本发明实施例提供的另一种交互设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面结合附图,对本发明的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
本发明实施例中提供的自动驾驶的交互方法可以由一种交互系统执行,所述交互系统可以包括自动驾驶车辆和交互设备。在某些实施例中,所述交互设备可以设置在所述自动驾驶车辆上;在某些实施例中,所述交互设备可以独立于所述自动驾驶车辆。示例的,该交互设备可以设置在与所述自动驾驶车辆建立通信连接的手机、平板电脑、智能手表等终端上。在一种实施方式中,该交互设备还可以设置在云处理器中。在其他实施例中,所述交互设备可以应用于无人车、无人机、机器人、无人船等其他设备上。
本发明实施例提供一个包括面积较小的触摸显示界面的交互设备,并将该交互设备安装在仪表盘上方位置。在某些实施例中,所述仪表盘以传统形式显示车速、发送机转速的信息。
在一个实施例中,所述交互设备设置于自动驾驶车辆中便于用户操作的位置,所述便于用户操作的位置包括但不限于驾驶员前方的仪表盘上方。通过将所述交互设备设置于自动驾驶车辆中便于用户操作的位置,以便驾驶员或乘客可以方便查看所述交互设备上触摸显示界面显示的内容信息以及方便控制所述交互设备。
具体可以图1为例对所述交互设备进行示意性说明,图1是本发明实施例提供的一种交互设备的界面示意图。如图1所示,所述交互设备的触摸显示界面包括包括模式显示区域11、模式切换区域12、关键信息显示区域13、报警显示区域14、自动驾驶操作区域15、手动驾驶操作区域16。
在某些实施例中,所述模式显示区域11用于显示自动驾驶车辆的当前模式,所述自动驾驶车辆的模式包括自动驾驶模式和手动驾驶模式。在某些实施例中,所述模式切换区域12包括模式切换控车图标,所述模式切换控车图标包括但不限于模式切换按键,用于实现自动驾驶模式和手动驾驶模式之间的切换。
在某些实施例中,所述关键信息显示区域13用于显示自动驾驶车辆的速度信息(如期望速度、实际速度)、里程信息(如已驾驶里程、自动驾驶里程)、电量信息(如剩余电量)、油量信息(如剩余油量)、驾驶时间信息(如已驾驶时间、可驾驶时间)中的任意一项或多项驾驶信息。
在某些实施例中,所述报警显示区域14用于显示任何重要的错误信息和/或告警信息。在某些实施例中,所述错误信息和告警信息可以添加不同的标记信息,以区别错误信息和告警信息,所述标记信息包括但不限于颜色信息,如错误信息标记为红色、告警信息标记为黄色,并配合报警器进行报警。如图1所示,所述报警显示区域14显示“感知数据异常,请切回手动模式!!”,则可以将所述“感知数据异常,请切回手动模式!!”用红色标记,并结合报警器提醒驾驶员尽快切出自动驾驶。以提高自动驾驶车辆运行过程中的安全性能。
在某些实施例中,所述自动驾驶操作区域15包括左变道控车图标和右变道控车图标,所述左变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向左变道;所述右变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向右变道。
在某些实施例中,所述手动驾驶操作区域16用于显示虚拟摇杆控车图标,所述虚拟摇杆控车图标用于在手动模式下供用户操作,以控制自动驾驶车辆移动。所述虚拟摇杆控车图标包括加速控车图标、减速控车图标、左转方向控车图标、右转方向控车图标中的任意一种或多种。
在一个实施例中,所述交互设备通过控车接口与汽车总线建立通信连接,所述汽车总线包括如下至少一种:以太网总线、控制器局域网络CAN总线,所述自动驾驶车辆的驾驶信息是通过所述以太网总线或所述CAN总线,从所述自动驾驶车辆的电子控制单元ECU获取到的。
具体可以图2为例进行示意性说明,图2是本发明实施例提供的一种交互设备与控制单元之间的结构示意图。如图2所示,所述交互设备20通过与汽车总线23连接,可以从电子控制单元(Electronic Control Unit,ECU)25和主运算设备24中得到自动驾驶车辆的实时信息并发出控制指令。所述交互设备20包括硬件21和软件22,所述交互设备20的硬件21包括触摸显示屏211、报警器212、接口213,所述交互设备20通过接口213与汽车总线23连接。所述交互设备20的软件22包括液晶屏显示触摸驱动221、操作系统及功能逻辑222、接口及总线驱动223,所述软件22可以采用linux或者其他嵌入式操作系统,通过外设总线驱动、触摸显示屏驱动完成外设驱动,编写业务功能逻辑实现预设功能效果。
在一个实施例中,对于手动模式下的控制方法,除了采用交互设备上的虚拟摇杆之外,还可以通过与遥控器无线连接来实现,以使外界遥控器可以进行自动、手动模式切换,以增多交互设备的使用功能,方便用户的操作。
本发明实施例通过将交互设备设置于便于用户操作的位置,以通过所述交互设备的触摸显示界面对自动驾驶车辆进行控制,方便用户操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
下面结合附图3对由自动驾驶车辆和交互设备组成的交互系统进行示意性说明。
请参见图3,图3是本发明实施例提供的一种交互系统的结构示意图,如图3所示的交互系统包括:自动驾驶车辆31和交互设备32,所述自动驾驶车辆31上设置有交互设备32,所述自动驾驶车辆31可以包括动力系统311,所述动力系统311用于为自动驾驶车辆31提供运行的动力。
本发明实施例中,交互设备32设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备32上设置有触摸显示界面,所述交互设备32与自动驾驶车辆31连接。所述交互设备32可以在所述交互设备32的触摸显示界面显示所述自动驾驶车辆31的驾驶信息以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序。所述交互设备32可以获取用户对于所述控车图标的触控操作,其中,所述用户能够根据所述驾驶信息输入所述触控操作,并根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆31执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆31,以控制所述自动驾驶车辆31执行所述控制程序以实现所述预设功能。
其中,所述预设功能包括与所述控车图标对应的功能,在某些实施例中,所述预设功能包括但不限于模式切换功能、左变道功能、右变道功能、加速功能、减速功能、左转功能、右转功能等。以图1为例,假设所述交互设备获取到用户对模式切换控车按钮的触控操作,如果所述模式显示区域11显示的当前模式为自动驾驶模式,则所述预设功能为将所述自动驾驶模式切换为手动驾驶模式。
下面结合附图对本发明实施例提供的自动驾驶的交互方法进行示意性说明。
具体请参见图4,图4是本发明实施例提供的一种自动驾驶的交互方法的流程示意图,所述方法可以由交互设备执行,所述交互设备设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备上设置有触摸显示界面,所述交互设备用于与所述自动驾驶车辆通信连接,以获取所述自动驾驶车辆的驾驶信息,所述交互设备的解释,具体如前所述。在某些实施例中,所述便于用户操作的位置包括所述自动驾驶车辆的仪表盘的上方。具体地,本发明实施例的所述方法包括如下步骤。
S401:在交互设备的触摸显示界面显示自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序。
本发明实施例中,交互设备可以在交互设备的触摸显示界面显示自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序。在某些实施例中,所述控车图标可以包括但不限于模式切换控车图标、左变道控车图标、右变道控车图标等图标。
在一些实施例中,所述驾驶信息包括但不限于驾驶模式、期望速度、实际速度、驾驶里程、电量、油量中的任意一种或多种。可理解的是,所述驾驶信息包括自动驾驶过程中,控车相关的关键信息。在某些实施例中,所述驾驶模式包括自动驾驶模式或手动驾驶模式。
在一个实施例中,所述交互设备的触摸显示界面可以包括模式显示区域、模式切换区域、关键信息显示区域、报警显示区域、自动驾驶操作区域、手动驾驶操作区域中的任意一种或多种。
以图1为例,所述交互设备的触摸显示界面包括模式显示区域11、模式切换区域12、关键信息显示区域13、报警显示区域14、自动驾驶操作区域15、手动驾驶操作区域16。
在一个实施例中,所述模式显示区域用于显示当前驾驶模式,所述模式切换区域用于显示模式切换控车图标。以图1为例,所述模式显示区域11显示的当前驾驶模式为自动驾驶模式,所述模式切换区域12显示了模式切换控车图标,用于将所述自动驾驶车辆当前的自动驾驶模式切换至手动驾驶模式。
在一些实施例中,所述当前驾驶模式包括自动驾驶模式;所述模式切换控车图标用于将自动驾驶模式切换至手动驾驶模式。在某些实施例中,所述当前驾驶模式包括手动驾驶模式;所述模式切换控车图标用于将手动驾驶模式切换至自动驾驶模式。
在一个实施例中,所述关键信息显示区域用于显示速度信息、里程信息、电量信息、驾驶时间信息中的任意一项或多项。以图1为例,所述关键信息显示区域13显示了期望速度、当前车速、驾驶里程、剩余电量和可驾驶时间。从而方便用户通过查看关键信息显示区域,就能够得知控车相关的关键信息。
在一个实施例中,所述报警显示区域用于显示错误信息和/或告警信息,所述错误信息携带第一标识信息,所述告警信息携带第二标识信息,所述第一标识信息与所述第二标识信息不相同。在某些实施例中,所述第一标识信息和第二标识信息可以包括但不限于不相同的颜色信息。从而对于不同异常状态起到不同的提示效果,有助于用户根据报警显示区域的显示结果迅速判断异常状态。
以图1为例,假设所述第一标识信息为红色,第二标识信息为黄色,如果所述报警显示区域14显示的是红色的“感知数据异常,请切回手动模式”,则可以确定所述报警显示区域14显示的是错误信息。
可见,本发明实施例通过用不同的标识信息标记错误信息和告警信息,以使用户可以通过查看报警显示区域14的显示信息的标记信息,确定该报警显示区域14的显示信息是错误信息还是告警信息,以及根据不同的标记信息确定该显示信息的紧急程度,以便用户可以及时对该显示信息进行处理。
在一个实施例中,所述交互设备上还包括报警器,所述报警器用于在所述报警显示区域出现错误信息和/或告警信息时进行报警。在某些实施例中,所述错误信息是对驾驶存在重大影响的信息或者即将出现危险时候的出现的信息,比如前方有障碍物。在某些实施例中,所述警告信息指的是那些不会立即危及到自动驾驶车辆状态的信息。在某些实施例中,所述报警器可以包括但不限于蜂鸣器、汽笛、号角等报警器。
在一个实施例中,所述报警器在所述报警显示区域出现错误信息和/或告警信息时进行报警时,可以通过发出不同的报警声音对错误信息和告警信息进行报警。从而方便用户根据不同的报警声音判区分常类型。
在一个实施例中,如果所述自动驾驶车辆当前运行状态处于正常自动驾驶或正常手动驾驶时,此刻所述交互设备的报警显示区域没有显示错误信息或告警信息,则报警器不发出报警声音。如果所述交互设备的报警显示区域显示错误信息,则可以控制报警器发出与所述错误信息对应的报警声音。如果所述交互设备的报警显示区域显示告警信息,则可以控制报警器发出与所述告警信息对应的报警声音。
在某些实施例中,不同的报警声音可以包括报警音量的大小不同、报警音调的高低不同、报警旋律不同、报警时间的长短不同。
在一个实施例中,所述报警音调的高低可以是通过电压高低来实现的,一般电压值越高则音调越高,直接通过调节声音报警信号的占空比来实现报警器中报警音调的高低控制,以及根据所述声音报警信号的占空比的持续时间长短就可以生成不同的具有代表性的报警旋律,方便驾驶员能够很轻易地分辨出当前音调代表的信息。
本发明实施例通过调节音调的高低、音量的大小、时间长短的这种实施方式,来确定自动驾驶车辆不同的错误信息或告警信息,以便根据不同的错误信息或告警信息,采取对应的措施,及时解决该错误信息或告警信息,以提高自动驾驶车辆在驾驶过程中的安全性能。
在一个实施例中,所述自动驾驶操作区域包括左变道控车图标和右变道控车图标。在某些实施例中,所述左变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向左变道;所述右变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向右变道。在一个实施例中,所述手动驾驶操作区域用于显示虚拟摇杆控车图标。所述虚拟摇杆控车图标用于在手动模式下供用户操作,以控制自动驾驶车辆移动。在某些实施例中,所述虚拟摇杆控车图标包括加速控车图标、减速控车图标、左转方向控车图标、右转方向控车图标中的任意一种或多种。在某些实施例中,所述加速控车图标用于控制自动驾驶车辆加速;所述减速控车图标用于控制自动驾驶车辆减速;所述左转方向控车图标用于控制自动驾驶车辆左转;所述右转方向控车图标用于控制自动驾驶车辆右转。控车功能丰富,从而提高了的对自动驾驶车辆的控制效率和用户体验。
具体可以图1为例,所述交互设备的触摸显示界面上的手动驾驶操作区域16显示的虚拟摇杆控车图标包括加速控车图标、减速控车图标、左转方向控车图标、右转方向控车图标,如果用户点击所述触摸显示界面上的加速控车图标,则可以控制所述自动驾驶车辆加速。如果用户点击所述触摸显示界面上的减速控车图标,则可以控制所述自动驾驶车辆减速。如果用户点击所述触摸显示界面上的左转控车图标,则可以控制所述自动驾驶车辆左转。如果用户点击所述触摸显示界面上的右转控车图标,则可以控制所述自动驾驶车辆右转。
在一个实施例中,所述虚拟摇杆控车图标中加速控车图标的加速方式可以包括但不限于根据用户点击加速控车图标的时间长短来确定加速的速度。在某些实施例中,所述减速控车图标的减速方式可以包括但不限于根据用户点击减速控车图标的时间长短来确定减速的速度。在某些实施例中,所述左转控车图标的转动角度可以包括但不限于根据用户点击左转控车图标的时间长短来确定左转的角度。在某些实施例中,所述右转控车图标的转动角度可以包括但不限于根据用户点击右转控车图标的时间长短来确定右转的角度。
可见,本发明实施例通过在交互设备的手动驾驶操作区域设置虚拟摇杆控车图标,使得在没有遥控设备或者遥控器没有电时,可以通过该虚拟遥控控车图标控制自动驾驶车辆,同时,用户可以根据环境或自身需求自主选择使用遥控器或虚拟遥控控车图标控制自动驾驶车辆的运行,从而提高了的对自动驾驶车辆的控制效率。
在一个实施例中,所述交互设备的触摸显示界面可以包括信息显示区域、和/或操作区域,所述信息显示区域用于显示如下至少一种信息:模式显示区域、关键信息显示区域、报警显示区域。所述操作区域包括如下至少一种:模式切换区域、自动驾驶操作区域、手动驾驶操作区域。
在一个实施例中,所述交互设备的触摸显示界面包括如下至少一种自定义功能:自定义所述触摸显示界面中各区域的位置、自定义所述触摸显示界面中各区域的尺寸、自定义所述触摸显示界面中各区域的显示内容。
可见,本发明实施例通过自定义所述交互设备的触摸显示界面中各区域的位置、各区域的尺寸、各区域的显示内容,使得用户可以根据需求自动调整该触摸显示界面的布局,以满足不同用户对该触摸显示界面不同的布局需求,从而提升了用户体验。
S402:获取用户对于所述控车图标的触控操作。
本发明实施例中,交互设备可以获取用户对于所述控车图标的触控操作,其中,所述用户能够根据所述驾驶信息输入所述触控操作。
在某些实施例中,所述触控操作包括如下至少一种:点击操作、滑动操作、拖动操作。可理解的是,触控操作不限于此,在此不作限定。从而提高了用户对控车图标进行操作的灵活程度。
S403:根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现所述预设功能。
本发明实施例中,交互设备可以根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现所述预设功能。
在一个实施例中,所述交互设备在根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令时,可以根据所述触控操作确定所述自动驾驶车辆在下一时刻的驾驶信息,并根据确定的所述自动驾驶车辆在下一时刻的驾驶信息,生成控制所述自动驾驶车辆执行所述控制程序的所述控制指令。通过生成控制自动驾驶车辆下一时刻执行的控制程序的控制指令,可以控制自动驾驶车辆下一时刻即将执行的驾驶信息,从而实现预先对自动驾驶车辆的控制。
以图1为例,假设所述交互设备获取到用户对左变道控车图标的触控操作,则可以根据所述对左变道控车图标的触控操作确定所述自动驾驶车辆在下一时刻的驾驶信息为向左变道,并根据确定的所述自动驾驶车辆在下一时刻的向左变道的驾驶信息,生成控制所述自动驾驶车辆执行向左变道的控制指令。
又例如,假设所述交互设备获取到用户对左转控车图标的触控操作,如果检测到用户对左转控车图标的触控操作的时间为3s,且根据预设的时间与左转角度的对应关系,确定出与3s对应的左转角度为30o,则所述交互设备可以根据所述对左转控车图标的触控操作确定所述自动驾驶车辆在下一时刻的驾驶信息为左转30o,并根据确定的所述自动驾驶车辆在下一时刻左转30o的驾驶信息,生成控制所述自动驾驶车辆执行左转30o的控制指令。
在一个实施例中,所述交互设备还包括遥控器,所述遥控器与所述触摸显示界面无线连接,所述遥控器可以用于切换所述自动驾驶车辆的驾驶模式。通过使用遥控器切换自动驾驶车辆的驾驶模式,满足了用户对遥控器的操作需求。
本发明实施例中,交互设备可以通过在触摸显示界面显示自动驾驶车辆的驾驶信息以及控车图标,获取用户对控车图标的触控操作,根据所述触控操作生成控制所述自动驾驶车辆执行与所述触控操作对应的控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现预设功能。通过这种实施方式可以实现将触摸显示界面设置于便于用户操作的位置,显示自动驾驶车辆的驾驶信息,用户能够直观地获取关键信息;同时,用户能够通过触摸显示界面对自动驾驶车辆进行控制,方便操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
具体请参见图5,图5是本发明实施例提供的另一种自动驾驶的交互方法的流程示意图,所述方法可以由交互设备执行,所述交互设备的解释如前所述。具体地,本发明实施例的所述方法与图4所述的方法的区别在于,本发明实施例是对自动驾驶车辆如何发送控制指令的示意性说明,本发明实施例的所述方法包括如下步骤。
S501:获取自动驾驶车辆的驾驶信息。
本发明实施例中,本发明实施例中,交互设备可以获取自动驾驶车辆的驾驶信息。所述驾驶信息的解释如前所述,此处不再赘述。
S502:在交互设备的触摸显示界面显示所述自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序。
本发明实施例中,交互设备可以在交互设备的触摸显示界面显示自动驾驶车辆的驾驶信息,以及控车图标,其中,所述控车图标用于表示控制所述自动驾驶车辆实现预设功能的控制程序。将控制所述自动驾驶车辆实现预设功能的控制程序通过可视化的控车图标表示出来,有利于用户对自动驾驶车辆的驾驶进行控制。
在一个实施例中,在所述交互设备的触摸显示界面显示所述自动驾驶车辆的驾驶信息时,可以实时地显示所述自动驾驶车辆的驾驶信息。具体实施例如前所述,此处不再赘述。
S503:获取用户对于所述控车图标的触控操作。
本发明实施例中,交互设备可以获取用户对于所述控车图标的触控操作,具体实施例如前所述,此处不再赘述。
S504:根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令。
本发明实施例中,所述交互设备可以根据所述触控操作生成与所述触控操作对应的、控制所述自动驾驶车辆执行所述控制程序的控制指令。具体实施例如前所述,此处不再赘述。
S505:通过以太网总线或者CAN总线发送所述控制指令给所述自动驾驶车辆的ECU,以使所述ECU控制所述自动驾驶车辆执行所述控制指令所指示的操作。
本发明实施例中,所述交互设备可以通过以太网总线或者CAN总线发送所述控制指令给所述自动驾驶车辆的ECU,以使所述ECU控制所述自动驾驶车辆执行所述控制指令所指示的操作。
在一个实施例中,所述交互设备通过控车接口与汽车总线建立通信连接。所述汽车总线包括如下至少一种:以太网总线、控制器局域网络CAN总线。所述驾驶信息是通过所述以太网总线或所述CAN总线,从所述自动驾驶车辆的电子控制单元ECU获取到的。例如,人机交互设备通过以太网总线或所述CAN总线从电子控制单元ECU获取到驾驶信息,并显示在人机交互设备的HUD上;HUD通过以太网或者CAN总线将控制指令发送给自动驾驶系统的电子控制单元ECU,电子控制单元ECU将控制指令发给车辆的方向、油门、刹车、档位等相应的ECU实现控制功能,包括如下至少一种功能:加速、减速、变道、进入或退出自动驾驶模式。在一些实施例中,所述交互设备不需要和车辆直接通信,只需要和做电子控制单元ECU进行通信,不存在CAN总线匹配问题,因此适配不同的车辆。
具体可以图2为例,所述交互设备20通过接口213与自动驾驶车辆的汽车总线23(包括以太网总线或者CAN总线)建立通信连接,所述交互设备20如果获取到用户对向左变道控车图标的触控操作,则可以确定所述自动驾驶车辆在下一时刻的驾驶信息为向左变道,并生成控制所述自动驾驶车辆执行向左变道的控制指令,从而通过以太网总线或者CAN总线发送所述向左变道的控制指令给所述自动驾驶车辆的ECU,以使所述ECU控制所述自动驾驶车辆执行所述控制指令所指示的向左变道的操作。
可见,本发明实施例通过控车接口与汽车总线相连接,以及汽车总线与主运算设备和电子控制单元连接,可以实现从ECU及主控设备得到自动驾驶车辆的实时信息并发出控制指令;以及在软件实现上,可以采用linux或者其他嵌入式操作系统,通过外设总线驱动、触摸显示屏驱动完成外设驱动,编写业务功能逻辑,以实现预设功能。
本发明实施例中,交互设备可以通过获取自动驾驶车辆的驾驶信息,在触摸显示界面显示自动驾驶车辆的驾驶信息以及控车图标,获取用户对控车图标的触控操作,根据所述触控操作生成控制所述自动驾驶车辆执行与所述触控操作对应的控制程序的控制指令,并通过以太网总线或者CAN总线发送所述控制指令给所述自动驾驶车辆的ECU,以使所述ECU控制所述自动驾驶车辆执行所述控制指令所指示的操作。通过这种实施方式可以实现将触摸显示界面设置于便于用户操作的位置,显示自动驾驶车辆的驾驶信息,用户能够直观地获取关键信息;同时,用户能够通过触摸显示界面对自动驾驶车辆进行控制,方便操作;通过控车接口与汽车总线相连接,以及汽车总线与主运算设备和电子控制单元连接,可以实现从ECU及主控设备得到自动驾驶车辆的实时信息并发出控制指令,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
请参见图6,图6是本发明实施例提供的一种交互设备的结构示意图,所述设备包括存储器601、一个或多个处理器602和数据接口603;
所述存储器601可以包括易失性存储器(volatile memory);存储器601也可以包括非易失性存储器(non-volatile memory);存储器601还可以包括上述种类的存储器的组合。所述处理器602可以是中央处理器(central processing unit,CPU)。所述处理器602还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specificintegrated circuit,ASIC),可编程逻辑器件(programmable logic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gate array,FPGA)或其任意组合。
所述处理器602,用于调用所述程序指令,当所述程序指令被执行时,可以用于执行前述实施例提供的自动驾驶车辆的交互方法操作。
本发明实施例中,交互设备可以通过在触摸显示界面显示自动驾驶车辆的驾驶信息以及控车图标,获取用户对控车图标的触控操作,根据所述触控操作生成控制所述自动驾驶车辆执行与所述触控操作对应的控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以控制所述自动驾驶车辆执行所述控制程序以实现预设功能。通过这种实施方式可以实现将触摸显示界面设置于便于用户操作的位置,以通过触摸显示界面对自动驾驶车辆进行控制,方便用户操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
本发明实施例还提供了另一种交互设备,请参见图7,图7是本发明实施例提供的一种交互设备的结构示意图。所述交互设备包括上述实施例所述的触摸显示界面71和报警控制设备72。在某些实施例中,所述触摸显示界面71中包括如下至少一种:模式显示区域711、模式切换区域712、关键信息显示区域713、报警显示区域714、自动驾驶操作区域715、手动驾驶操作区域716。在某些实施例中,所述报警控制设备72中设置了报警器,在其他实施例中,所述报警控制设备72还可以与报警器建立连接,所述报警器的解释如前所述,此处不再赘述;所述报警控制设备72用于控制所述报警器进行报警。在某些实施例中,所述触摸显示界面71与所述报警控制设备72建立通信连接。
在一个实施例中,所述交互设备可以通过触摸显示界面71将获取到的各个区域的信息发送给所述报警控制设备72,以使所述报警控制设备72可以根据所述触摸显示界面71发送的信息,确定所述自动驾驶车辆的当前运行状态,并根据所述当前运行状态,确定所述自动驾驶车辆是否处于异常状态,若所述自动驾驶车辆处于异常状态,则可以确定所述异常状态的类型,以及根据所述异常状态的类型,确定与所述异常状态的类型对应的预设报警工作模式,从而控制所述自动驾驶车辆的报警器按照所述预设报警工作模式发出报警声音,以进行报警。
在某些实施例中,所述异常状态的类型包括但不限于如下至少一种:从手动驾驶模式请求切入自动驾驶模式失败、从手动驾驶模式请求切入自动驾驶模式成功、从自动驾驶模式切出至手动驾驶模式成功、从自动驾驶模式切出至手动驾驶模式失败、出现警告信息、出现错误信息。
在一些实施例中,所述模式显示区域711用于显示自动驾驶车辆的当前模式,所述自动驾驶车辆的模式包括自动驾驶模式和手动驾驶模式。在某些实施例中,所述模式切换区域712包括模式切换控车图标,所述模式切换控车图标包括但不限于模式切换按键,用于实现自动驾驶模式和手动驾驶模式之间的切换。
在一个实施例中,如果所述报警控制设备72获取到所述触摸显示界面71中模式显示区域711发送的手动驾驶模式,以及获取到模式切换区域712发送的从手动驾驶模式切入自动驾驶模式的切换信息,则所述报警控制设备72根据所述手动驾驶模式和所述从手动驾驶模式切入自动驾驶模式的切换信息,可以判断从手动驾驶模式请求切入自动驾驶模式失败。
在一个实施例中,如果所述报警控制设备72获取到所述触摸显示界面71中模式显示区域711发送的自动驾驶模式,以及获取到模式切换区域712发送的从手动驾驶模式切入自动驾驶模式的切换信息,则所述报警控制设备72根据所述自动驾驶模式和所述从手动驾驶模式切入自动驾驶模式的切换信息,可以判断从手动驾驶模式请求切入自动驾驶模式成功。
在一个实施例中,如果所述报警控制设备72获取到所述触摸显示界面71中模式显示区域711发送的手动驾驶模式,以及获取到模式切换区域712发送的从自动驾驶模式切入手动驾驶模式的切换信息,则所述报警控制设备72根据所述手动驾驶模式和所述从自动驾驶模式切入手动驾驶模式的切换信息,可以判断从自动驾驶模式切出至手动驾驶模式成功。
在一个实施例中,如果所述报警控制设备72获取到所述触摸显示界面71中模式显示区域711发送的自动驾驶模式,以及获取到模式切换区域712发送的从自动驾驶模式切入手动驾驶模式的切换信息,则所述报警控制设备72根据所述自动驾驶模式和所述从自动驾驶模式切入手动驾驶模式的切换信息,可以判断从自动驾驶模式切出至手动驾驶模式失败。
在一些实施例中,所述关键信息显示区域713用于显示自动驾驶车辆的速度信息(如期望速度、实际速度)、里程信息(如已驾驶里程、自动驾驶里程)、电量信息(如剩余电量)、油量信息(如剩余油量)、驾驶时间信息(如已驾驶时间、可驾驶时间)中的任意一项或多项驾驶信息。所述触摸显示界面71可以将所述关键信息显示区域713显示的信息发送给报警控制设备72,以使报警控制设备72可以根据所述关键信息显示区域713发送的信息,确定所述自动驾驶车辆是否处于异常状态。例如,当剩余电量小于预设电量阈值时,则确定所述自动自动驾驶车辆处于异常状态,并根据所述异常状态的类型控制报警器发出对应的报警声音。
在一些实施例中,所述报警显示区域714用于显示任何重要的错误信息和/或告警信息。在某些实施例中,所述错误信息和告警信息可以添加不同的标记信息,以区别错误信息和告警信息,所述标记信息包括但不限于颜色信息,如错误信息标记为红色、告警信息标记为黄色,并配合报警器进行报警。如图1所示,所述报警显示区域714显示“感知数据异常,请切回手动模式!!”,则可以将所述“感知数据异常,请切回手动模式!!”用红色标记,并结合报警器提醒驾驶员尽快切出自动驾驶。以提高自动驾驶车辆运行过程中的安全性能。
在一个实施例中,所述报警控制设备72如果接收到所述报警显示区域714发送的信息,则所述报警控制设备72可以根据获取到的信息的标记信息和/或信息内容,控制报警器发出与所述标记信息和/或信息内容对应的报警声音。
在一些实施例中,所述自动驾驶操作区域715包括左变道控车图标和右变道控车图标,所述左变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向左变道;所述右变道控车图标用于指示自动驾驶车辆在自动驾驶模式下向右变道。
在一个实施例中,所述自动假设操作区域715如果将当前道路信息和左变道指令发送给报警控制设备72,如果报警控制设备72检测到当前道路信息为最左边道路,且获取到左变道指令,则报警控制设备72可以控制报警器发出对应的报警声音。
在一些实施例中,所述手动驾驶操作区域716用于显示虚拟摇杆控车图标,所述虚拟摇杆控车图标用于在手动模式下供用户操作,以控制自动驾驶车辆移动。所述虚拟摇杆控车图标包括加速控车图标、减速控车图标、左转方向控车图标、右转方向控车图标中的任意一种或多种。
在一个实施例中,如果报警控制设备72获取到的所述手动驾驶操作区域716发送的加速信息超过预设加速阈值、减速信息小于预设减速阈值、左转方向超过预设角度、右转方向超过预设角度中的任意一种或多种,则所述报警控制设备72可以控制报警器发出对应的报警声音。
本发明实施例中,所述交互设备通过将触摸显示界面各区域的信息发送给报警控制设备,以使报警控制设备可以确定自动驾驶车辆的当前运行状态,并根据所述当前运行状态,确定所述自动驾驶车辆是否处于异常状态,若所述自动驾驶车辆处于异常状态,则可以根据所述异常状态的类型,确定与所述异常状态的类型对应的预设报警工作模式,从而控制所述自动驾驶车辆的报警器按照所述预设报警工作模式发出报警声音,以进行报警。通过这种实施方式可以实现通过不同的声音报警来指示自动驾驶车辆不同的运行状态以及报警信息,提高了自动驾驶车辆运行过程中的安全性能。
本发明实施例还提供了一种交互系统,包括:自动驾驶车辆和交互设备,所述交互设备设置于自动驾驶车辆中的便于用户操作的位置,所述交互设备上设置有触摸显示界面,所述交互设备用于与所述自动驾驶车辆通信连接,以获取所述自动驾驶车辆的驾驶信息;
处理器,用于执行前述实施例提供的自动驾驶的交互方法操作。
本发明实施例中,所述交互系统可以通过交互设备在触摸显示界面显示自动驾驶车辆的驾驶信息以及控车图标,获取用户对控车图标的触控操作,根据所述触控操作生成控制所述自动驾驶车辆执行与所述触控操作对应的控制程序的控制指令,并发送所述控制指令给所述自动驾驶车辆,以使所述自动驾驶车辆可以控制所述自动驾驶车辆执行所述控制程序以实现预设功能。通过这种实施方式可以实现将触摸显示界面设置于便于用户操作的位置,以通过触摸显示界面对自动驾驶车辆进行控制,方便用户操作,提高了对自动驾驶车辆的控制效率,以提高自动驾驶车辆运行过程中的安全性。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现本发明实施例中描述的方法,也可实现本发明所对应实施例的设备,在此不再赘述。
所述计算机可读存储介质可以是前述任一实施例所述的设备的内部存储单元,例如设备的硬盘或内存。所述计算机可读存储介质也可以是所述设备的外部存储设备,例如所述设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(SecureDigital,SD)卡,闪存卡(Flash Card)等。进一步地,所述计算机可读存储介质还可以既包括所述设备的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
需要说明的是,在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可以理解,硬件制造商可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名词的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”或“包括”为一开放式用语,故应解释成“包含但不限定于”。说明书后续描述为实施本发明的较佳实施方式,然所述描述乃以说明书的一般原则为目的,并非用以限定本发明的范围。本发明的保护范围当视所附权利要求所界定者为准。
需要说明的是,当组件被称为“固定于”另一个组件,它可以直接在另一个组件上或者也可以存在居中的组件。当一个组件被认为是“连接”另一个组件,它可以是直接连接到另一个组件或者可能同时存在居中组件。当一个元件被认为是“电连接”另一个元件,它可以是接触连接,例如,可以是导线连接的方式,也可以是非接触式连接,例如,可以是非接触式耦合的方式,可以是通过一些接口,装置或单元的间接耦合或通信连接。除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
以上所揭露的仅为本发明部分实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。