CN109693612A - 一种行车辅助方法、装置、车载终端和计算机可读介质 - Google Patents

一种行车辅助方法、装置、车载终端和计算机可读介质 Download PDF

Info

Publication number
CN109693612A
CN109693612A CN201910019973.2A CN201910019973A CN109693612A CN 109693612 A CN109693612 A CN 109693612A CN 201910019973 A CN201910019973 A CN 201910019973A CN 109693612 A CN109693612 A CN 109693612A
Authority
CN
China
Prior art keywords
detected
driving behavior
information
car
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910019973.2A
Other languages
English (en)
Inventor
李�一
夏宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Original Assignee
Beijing Megvii Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Megvii Technology Co Ltd filed Critical Beijing Megvii Technology Co Ltd
Priority to CN201910019973.2A priority Critical patent/CN109693612A/zh
Publication of CN109693612A publication Critical patent/CN109693612A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供了一种行车辅助方法、装置、车载终端和计算机可读介质,涉及控制技术领域,包括获取目标检测图像,其中,所述目标检测图像中包括待检测对象;基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;若是,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息,本发明缓解了由于传统的车载终端智能化程度较低技术问题。

Description

一种行车辅助方法、装置、车载终端和计算机可读介质
技术领域
本发明涉及图像处理技术领域,尤其是涉及一种行车辅助方法、装置、车载终端和计算机可读介质。
背景技术
传统车载终端中包括物理按键和触屏,传统车载终端的人机交互方式通过物理按键和触屏来实现,也就是说,传统的车载终端需要驾驶者通过物理按键和触屏来主动触发其所需要的功能。
目前,传统车载终端交互方式缺陷在于,由于车辆内部按键功能繁多,需要驾驶者先看到各个功能按键的功能,然后再用手去触发。这对于行驶中的车辆来说,存在一定的安全隐患。且传统的车载终端所具有的功能中包括车辆基本功能的控制,例如,打开车灯,打开收音机,播放音乐等。随着社会的发展,上述基本功能已无法满足用户需求,急需一种能够满足用户需求的多元化车载终端。
发明内容
有鉴于此,本发明的目的在于提供一种行车辅助方法、装置、车载终端和计算机可读介质,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,以缓解了由于传统的车载终端智能化程度较低技术问题。
第一方面,本发明实施例提供了一种行车辅助方法,应用于车载终端,所述方法包括:获取目标检测图像,其中,所述目标检测图像中包括待检测对象;基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;若是,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
进一步地,在所述车载终端的显示界面中显示目标窗口包括:根据预设时间段内所述危险驾驶行为的发生次数确定所述待检测对象的疲劳程度;根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口,以通过相对应的目标窗口显示所述提示信息。
进一步地,根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口包括:若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在所述车载终端的显示界面中显示第一目标窗口,以通过所述第一目标窗口显示第一提示信息;其中,所述第一提示信息包括:第一子信息和/或第二子信息,所述第一子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第二子信息用于提示所述待检测对象是否播放目标音乐。
进一步地,所述方法还包括:在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第一目标动作,则在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐;在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第二目标动作,则关闭所述第一目标窗口。
进一步地,根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口还包括:若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于预设次数,则在所述车载终端的显示界面中显示第二目标窗口,以通过所述第二目标窗口显示第二提示信息;其中,所述第二提示信息包括:第三子信息和/或第四子信息,所述第三子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第四子信息用于提示所述待检测对象是否显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
进一步地,所述方法还包括:在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第三目标动作,则在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示所述导航信息;在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第四目标动作,则关闭所述第二目标窗口。
进一步地,所述方法还包括:在所述车载终端的显示界面中确定与所述危险驾驶行为相对应的显示图标,其中,不同危险驾驶行为对应不同的显示图标;控制所述显示图标处于显示状态,以通过所述显示图标显示所述提示信息。
进一步地,所述方法还包括:若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在检测到所述待检测对象执行第五目标动作之后,在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐;若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于所述预设次数,则在检测到所述待检测对象执行第六目标动作之后,在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
进一步地,所述地图导航界面包含多个子界面,所述方法还包括:获取所述待检测对象的选择信息,其中,所述选择信息为在所述多个子界面中选择目标界面处于目标显示状态的指令,所述选择信息包括以下任一种形式的指令:所述待检测对象的视线选择信息、所述待检测对象的手势选择信息、所述待检测对象的点击选择信息。
进一步地,所述危险驾驶行为是疲劳驾驶行为;基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括:利用第一神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;若确定出所述动作信息为疲劳驾驶动作,则确定所述待检测对象的驾驶行为是否为所述疲劳驾驶行为。
进一步地,所述危险驾驶行为是分心驾驶行为;基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括:利用第二神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;若确定出所述动作信息为分心驾驶动作,则确定所述待检测对象的驾驶行为是否为所述分心驾驶行为。
进一步地,所述方法还包括:在接收到来电终端发送的来电呼叫请求的情况下,若检测到所述待检测对象的接听动作,则对所述来电呼叫请求执行接听操作。
进一步地,所述方法还包括:在对所述来电呼叫请求执行接听操作之后,若检测到所述待检测对象的拒接动作,则断开所述车载终端与所述来电终端之间的通信连接。
进一步地,所述方法还包括:获取目标解锁图像;将所述目标解锁图像中的人脸图像与预设人脸图像进行比对;若比对通过,则对所述车载终端执行解锁操作,并执行获取目标检测图像的步骤。
第二方面,本发明实施例提供了一种行车辅助方法,设置于车载终端,所述装置包括:获取单元,用于获取目标检测图像,其中,所述目标检测图像中包括待检测对象;确定单元,用于基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;显示单元,用于若是危险驾驶行为,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
第三方面,本发明实施例提供了一种车载终端,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面中任一项所述的方法的步骤。
第四方面,本发明实施例提供了一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述第一方面中任一项所述的方法的步骤。
在本发明实施例中,首先,获取目标检测图像,然后,基于目标检测图像确定待检测对象的驾驶行为是否为危险驾驶行为;若是,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息;其中,提示信息包括:提示待检测对象处于危险驾驶行为状态的信息,和/或,在确定出待检测对象处于危险驾驶行为之后提示待检测对象所执行的目标动作的信息。通过上述处理方式,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,以缓解了由于传统的车载终端智能化程度较低技术问题。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种车载终端的结构示意图;
图2是根据本发明实施例的一种行车辅助方法的流程图;
图3是根据本发明实施例的一种车载终端的闪屏页面图;
图4是根据本发明实施例的一种处于未解锁状态的车载终端显示主界面的示意图;
图5为是根据本发明实施例的一种车载终端的登录页面图;
图6为是根据本发明实施例的另一种车载终端的登录页面图;
图7为是根据本发明实施例的一种显示第一目标窗口的主界面的示意图;
图8为是根据本发明实施例的一种显示第二目标窗口的主界面的示意图;
图9为是根据本发明实施例的一种音乐界面的示意图;
图10为是根据本发明实施例的一种地图导航界面的示意图;
图11为是根据本发明实施例的一种电话呼入界面的示意图;
图12为是根据本发明实施例的一种通话中的示意图;
图13为是根据本发明实施例的一种行车辅助装置的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一:
首先,参照图1来描述用于实现本发明实施例的车载终端100,该车载终端可以用于运行本发明各实施例的行车辅助过程。
如图1所示,车载终端100包括一个或多个处理器102、一个或多个存储器104、输入装置106、输出装置108以及摄像机110,这些组件通过总线系统112和/或其它形式的连接机构(未示出)互连。应当注意,图1所示的车载终端100的组件和结构只是示例性的,而非限制性的,根据需要,所述车载终端也可以具有其他组件和结构。
所述处理器102可以采用数字信号处理器(DSP,Digital Signal Processing)、现场可编程门阵列(FPGA,Field-Programmable Gate Array)、可编程逻辑阵列(PLA,Programmable Logic Array)和ASIC(Application Specific Integrated Circuit)中的至少一种硬件形式来实现,所述处理器102可以是中央处理单元(CPU,Central ProcessingUnit)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元,并且可以控制所述车载终端100中的其它组件以执行期望的功能。
所述存储器104可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器102可以运行所述程序指令,以实现下文所述的本发明实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据,例如所述应用程序使用和/或产生的各种数据等。
所述输入装置106可以是用户用来输入指令的装置,并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。
所述输出装置108可以向外部(例如,用户)输出各种信息(例如,图像或声音),并且可以包括显示器、扬声器等中的一个或多个。
所述摄像机110用于进行采集图像数据,其中,摄像机所采集的数据经过所述行车辅助方法得到待检测对象是否处于危险驾驶行为的检测结果,若是,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息。
实施例二:
根据本发明实施例,提供了一种行车辅助方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图2是根据本发明实施例的一种行车辅助方法的流程图,如图2所示,该方法应用于车载终端,该方法包括如下步骤:
步骤S202,获取目标检测图像,其中,所述目标检测图像中包括待检测对象。
在本实施例中,预先在车载终端中安装了摄像机,可以通过该摄像机获取目标检测图像。
需要说明的是,该摄像机可以安装在车载终端的外部,还可以内嵌在车载终端内部,本实施例对此不作具体限定。除此之外,该摄像机可以按照固定角度设置,还可以按照360度自动旋转。
步骤S202中的待检测对象为车载终端所安装车辆的驾驶者。且下述实施例中的待检测对象均为车载终端所安装车辆的驾驶者,下述实施例中不再一一介绍。
步骤S204,基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为。
在本实施例中,可以设置摄像机连续拍摄目标检测图像;还可以设置摄像机每隔预设时长拍摄目标检测图像;还可以在检测到车辆内部有人的情况下,连续拍摄目标检测图像;具体拍摄方式可以根据实际需要来进行设定。
在拍摄到至少一张目标检测图像之后,就可以对每张目标检测图像进行图像检测,以检测目标检测图像中所包含的待检测对象的驾驶行为是否处于危险驾驶行为。
需要说明的是,如果目标检测图像中包含多个对象(例如,包含多个人),那么可以选择对位于主驾驶位置的对象(即,待检测对象)进行危险驾驶行为的检测。此时的危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为。
进一步需要说明的是,如果目标检测图像中包含多个对象(例如,包含多个人),那么可以选择对多个对象中位于主驾驶位置的对象(即,待检测对象)进行危险驾驶行为的检测;然后,对其他对象进行危险动作的检测。具体地,危险动作的检测是指检测其他对象是否存在令待检测对象处于危险驾驶行为的危险动作。如果检测到其他对象存在危险动作,那么也将生成报警信息,以对其他对象或者待检测对象进行提醒。
步骤S206,若是,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
需要说明的是,在本实施例中,目标动作是能够缓解疲劳驾驶行为的动作,或者缓解分心驾驶行为的动作。其中,缓解疲劳驾驶行为的动作和缓解分心驾驶行为的动作可以相同,还可以不同,用户可以根据实际需要来进行设定,本实施例对此不作具体限定。
在本发明实施例中,首先,获取目标检测图像,然后,基于目标检测图像确定待检测对象的驾驶行为是否为危险驾驶行为;若是,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息;其中,提示信息包括:提示待检测对象处于危险驾驶行为状态的信息,和/或,在确定出待检测对象处于危险驾驶行为之后提示待检测对象所执行的目标动作的信息。通过上述处理方式,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,以缓解了由于传统的车载终端智能化程度较低技术问题。
下面将结合图3至图12具体实施方式介绍上述行车辅助方法。
在本实施例中,当车辆启动时,该车载终端自动开机;或者,在车辆启动时,若用户按下启动键,该车载终端自动开机。该车载终端开机之后出现的闪屏页面如图3所示。在车载终端开机之后,自动完成系统初始化,并在完成初始化之后进入到主界面,此时,该主界面处于未解锁状态,具体如图4所示。当主界面处于未解锁状态时,车载终端的所有功能处于不可用状态,且车辆的车灯处于关闭的状态。如图4所示,在主界面的中间位置设置有一个解锁图标,该解锁图标用于提示用户解锁车载终端。
本发明提供了多种解锁方案,例如,手动解锁方案和/或人脸解锁方案。
解锁方案一、手动解锁方案
用户可以点击如图4中所示的解锁图标,当车载终端检测到点击该解锁图标的操作之后,就可以解锁该车载终端。
除此之外,手动解锁方案还可以为用户向上(向下、或者向右、或者向左)滑动该解锁图标,当车载终端检测到滑动该解锁图标的操作之后,就可以解锁该车载终端。具体解锁动作可以根据实际需要来进行设定,本实施例不做具体限定。
解锁方案二、人脸解锁方案
该人脸解锁方案的具体过程为:
首先,获取目标解锁图像;其中,可以通过车载终端的摄像机获取目标解锁图像。需要说明的是,在本实施例中,在获取到目标解锁图像之后,可以对该目标解锁图像进行质量判断,以判断该目标解锁图像是否满足解锁标准。如果满足,则执行后续步骤,如果不满足,则继续采集满足解锁标准的目标解锁图像。如果一直未采集到满足解锁标准的目标解锁图像,则可以提示用户调高亮度,或者,更换拍摄姿势等信息。
然后,将所述目标解锁图像中的人脸图像与预设人脸图像进行比对。
在本实施例中,在获取到目标解锁图像之后,就可以将目标解锁图像中的人脸图像和预设人脸图像进行比对。其中,若比对通过,则对所述车载终端执行解锁操作,并执行获取目标检测图像的步骤;若比对未通过,则继续获取目标解锁图像。
需要说明的是,在本实施例中,在比对通过之后,还可以基于该目标解锁图像进行活体检测,以检测目标解锁图像中的对象是否为活体。增加活体检测的功能是为了进一步提高车载终端的安全性。
例如,在本实施例中,可以在车载终端中增加安全防盗功能,在该功能开启的情况下,如果不对该车载终端执行解锁操作,则无法驾驶该车辆。基于此,如果某人盗窃某车主的车辆,并利用该车主的照片进行解锁,在该车载终端启动之后,通过上述所描述的步骤,拍摄目标解锁图像,并将该目标解锁图像中的人脸图像和预设人脸图像进行比对,在比对通过的情况下,还可以对该目标解锁图像进行活体检测。若检测通过,则可以驾驶该车辆,若检测未通过,则可以向车主发送报警信息,以提示车主有人在驾驶该车辆。
通过上述描述可知,在本实施例中,利用人脸解锁的方式,无需用户触发案件或者解除屏幕就可以实现车载终端的解锁,进一步简化了车载终端的操作流程。同时,结合活体检测,能够进一步提高车辆的安全性。
在车载终端处于解锁状态之后,车载终端的所有功能可以使用,并且该车载终端能够控制车辆的车灯处于打开的状态。
在车载终端处于解锁状态之后,就可以获取目标检测图像,然后,基于目标检测图像确定待检测对象的驾驶行为是否为危险驾驶行为。
通过上述描述可知,危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为,针对不同的危险驾驶行为对应不同的检测方式。
如果危险驾驶行为是疲劳驾驶行为;那么步骤S204,基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括如下步骤:
步骤S11,利用第一神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;
步骤S12,若确定出所述动作信息为疲劳驾驶动作,则确定所述待检测对象的驾驶行为是否为所述疲劳驾驶行为。
在本实施例中,疲劳驾驶动作可以设定为“打哈欠”和/或“闭眼”。除此之外,还可以设定其他的动作为疲劳驾驶动作,例如,“点头”等动作。
基于此,在本实施例中,可以利用第一神经网络模型对目标检测图像检测,以检测该图像中待检测对象的动作信息是否为上述所定义的疲劳驾驶动作中的至少之一。
需要说明的是,在本实施例中,可以设置一种或多种疲劳驾驶动作,如果判断出检测对象的动作信息满足一种或多种疲劳驾驶动作的任一种,则确定该待检测对象是疲劳驾驶行为。
在本实施例中,该车载终端能够自动对待检测对象的疲劳驾驶动作进行自动检测,从而识别待检测对象的疲劳驾驶行为,而无需用户去操作车载终端就能够对疲劳和违规驾驶做出警示,从而保证驾驶者的安全运行。
如果危险驾驶行为是分心驾驶行为;那么步骤S204,基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括如下步骤:
步骤S21,利用第二神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;
步骤S22,若确定出所述动作信息为分心驾驶动作,则确定所述待检测对象的驾驶行为是否为所述分心驾驶行为。
在本实施例中,分心驾驶动作可以设定为“抽烟”、“打电话”、“低头”、“左转头”和“右转头”等动作信息。除此之外,还可以设定其他的动作为分心驾驶动作,例如,“吃东西”、“聊天”等行为动作。
基于此,在本实施例中,可以利用第二神经网络模型对目标检测图像检测,以检测该图像中待检测对象的动作信息是否为上述所定义的分心驾驶动作中的至少之一。
需要说明的是,在本实施例中,可以设置一种或多种分心驾驶动作,如果判断出检测对象的动作信息满足一种或多种分心驾驶动作的任一种,则确定该待检测对象是分心驾驶行为。
在本实施例中,该车载终端能够自动对待检测对象的分心驾驶动作进行自动检测,从而识别待检测对象的分心驾驶行为,而无需用户去操作车载终端就能够对疲劳和违规驾驶做出警示,从而保证驾驶者的安全运行。
如图5所示,在驾驶者处于疲劳驾驶状态时,图标1(打哈欠图标)和图标2(驾驶状态)图标处于高亮状态。如图6所示,在驾驶者处于正常驾驶状态时,图标3(睁眼图标)和图标2(驾驶状态)图标处于高亮状态。
在本实施例中,在按照上述所描述的方式确定待检测对象的驾驶行为是危险驾驶行为之后,就可以在车载终端的显示界面中显示目标窗口,以通过该目标窗口显示提示信息。
在一个可选的实施方式中,步骤S206,在所述车载终端的显示界面中显示目标窗口包括如下步骤:
首先,根据预设时间段内所述危险驾驶行为的发生次数确定所述待检测对象的疲劳程度。
在本实施例中,在车载终端的显示界面中显示目标窗口时,可以按照待检测对象的疲劳程度(或者疲劳等级)显示相对应的目标窗口。可以根据预设时间段内,待检测对象被检测到的危险驾驶行为的次数来确定待检测对象的疲劳程度(或者疲劳等级)。
例如,在1分钟内,待检测对象被检测到的危险驾驶行为的次数小于N1次,且大于零,则确定待检测对象的疲劳程度为轻度疲劳,其中,N1为大于0的正整数,用户可以根据实际需要来进行设定。在1分钟内,待检测对象被检测到的危险驾驶行为的次数大于或者等于N1次,则确定待检测对象的疲劳程度为重度疲劳。
然后,根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口,以通过相对应的目标窗口显示所述提示信息。
通过上述描述可知,在本实施例中,能够根据待检测对象的疲劳程度显示相对应的目标窗口,不同疲劳程度所对应的目标窗口中,包含不同的提示信息,以按照不同标准或者等级对待检测对象起到提示作用。
方案一:轻度疲劳
根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口包括如下步骤:
若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在所述车载终端的显示界面中显示第一目标窗口,以通过所述第一目标窗口显示第一提示信息;
其中,所述第一提示信息包括:第一子信息和/或第二子信息,所述第一子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第二子信息用于提示所述待检测对象是否播放目标音乐。
具体地,预设次数可以为上述所描述的N1。也就是说,在本实施例中,如图7所示的窗口11即为第一目标窗口,在该第一目标窗口中,第一子信息为“轻度疲劳”,第二子信息为“是否需要提神的音乐”,其中,提神的音乐即为上述目标音乐。除了提神的音乐之外,还可以选择其他让人感到欢快的动感音乐,本实施例对此不做具体限定。
在本实施例中,在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第一目标动作,则在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐。
该音乐界面如图9所示,该音乐界面的所支持的操作包括:回到主界面,上一首,下一首,暂停,播放,点赞,提高音量,降低音量。如图9所示,上述所有操作均可以通过相对应的手势来进行控制。例如,回到主界面的手势为“手掌向上”,上一首的手势为“手掌向左”,下一首的手势为“手掌向右”,暂停和播放的手势为“rock手势”,点赞的手势为“竖大拇指的手势”,提高音量的手势为“手向上滑动”,降低音量的手势为“手向下滑动”。需要说明的是,除了上述手势之外,还可以选择其他的手势或者动作,本实施例不做具体限定。
在本实施例中,在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象做“点头”动作(即,第一目标动作),则车载终端的显示界面跳转至如图9所示的音乐界面。需要说明的是,第一目标动作并不限定为“点头”动作,用户可以根据实际需要来进行设定。
在本实施例中,在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第二目标动作,则关闭所述第一目标窗口。
在本实施例中,在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象做“摇头”动作(即,第二目标动作),则关闭所述第一目标窗口。需要说明的是,第二目标动作并不限定为“摇头”动作,用户可以根据实际需要来进行设定。
通过上述描述可知,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,还能够在不通过物理按键和触屏的前提下实现车载终端和用户之间的交互,从而简化了用户对车载终端的操作步骤,进一步提高了用户体验。
方案二:重度疲劳
根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口还包括如下步骤:
若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于预设次数,则在所述车载终端的显示界面中显示第二目标窗口,以通过所述第二目标窗口显示第二提示信息;
其中,所述第二提示信息包括:第三子信息和/或第四子信息,所述第三子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第四子信息用于提示所述待检测对象是否显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
具体地,预设次数可以为上述所描述的N1。也就是说,在本实施例中,如图8所示的窗口12即为第二目标窗口,在该第二目标窗口中,第三子信息为“重度疲劳”,第四子信息为“是否需要导航到附近的停车场”,其中,附近的停车场即为上述目标停车位置。
在本实施例中,在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第三目标动作,则在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示所述导航信息。
在本实施例中,在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象做“点头”动作(即,第三目标动作),则车载终端的显示界面跳转至如图10所示的地图导航界面。需要说明的是,第三目标动作并不限定为“点头”动作,用户可以根据实际需要来进行设定。
在本实施例中,在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第四目标动作,则关闭所述第二目标窗口。
在本实施例中,在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象做“摇头”动作(即,第四目标动作),则关闭所述第二目标窗口。需要说明的是,第四目标动作并不限定为“摇头”动作,用户可以根据实际需要来进行设定。
如图10所示,地图导航界面中可以包含多个子界面,基于此,本发明可以通过选择信息来选择要显示的子界面,具体包括如下步骤:
获取所述待检测对象的选择信息,其中,所述选择信息为在所述多个子界面中选择目标界面处于目标显示状态的指令,所述选择信息包括以下任一种形式的指令:所述待检测对象的视线选择信息、所述待检测对象的手势选择信息、所述待检测对象的点击选择信息。
假设选择信息为视线选择信息。若基于该视线选择信息确定出待检测对象的视线位于左侧的子界面,则左侧的子界面处于高亮显示状态。
假设选择信息为手势选择信息。若基于该手势选择信息确定出待检测对象所选择的子界面为位于左侧的子界面,则左侧的子界面处于高亮显示状态。
假设选择信息为点击选择信息。基于该点击选择信息确定出待检测对象所选择的子界面为位于左侧的子界面,则左侧的子界面处于高亮显示状态。
需要说明的是,在本实施例中,还可以通过手势对地图导航界面执行以下操作:收藏地图的操作和回到主界面的操作。
在一个可选的实施方式中,该方法还包括如下步骤:
首先,在所述车载终端的显示界面中确定与所述危险驾驶行为相对应的显示图标,其中,不同危险驾驶行为对应不同的显示图标。
然后,控制所述显示图标处于显示状态,以通过所述显示图标显示所述提示信息。
通过上述描述可知,在本实施例中,若确定出待检测对象的驾驶行为为危险驾驶行为,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息。除此之外,还可以控制车载终端中相对应的显示图标处于高亮状态。例如,如图7所示,当检测到待检测对象打哈欠时,显示图标1处于高亮状态。如图8所示,当检测到待检测对象打哈欠和闭眼时,显示图标1和显示图标4处于高亮状态。
在本实施例中,若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在检测到所述待检测对象执行第五目标动作之后,在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐。
通过上述描述可知,若确定出待检测对象的驾驶行为为危险驾驶行为,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息。若该目标窗口未成功显示在该车载终端的显示界面中,则可以通过上述所描述的方式调用音乐界面。
如果目标窗口未成功显示在该车载终端的显示界面中,则待检测对象可以通过手势控制来调取相应的音乐界面。
例如,若确定出待检测对象的驾驶行为为危险驾驶行为,且该目标窗口未成功显示在该车载终端的显示界面中。在检测到待检测对象执行“rock”动作(即,第五目标动作)的情况下,通过判断可知,待检测对象的疲劳程度为轻度疲劳,此时可以调用该音乐界面,以通过目标窗口显示提示信息。
在本实施例中,若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于所述预设次数,则在检测到所述待检测对象执行第六目标动作之后,在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
通过上述描述可知,若确定出待检测对象的驾驶行为为危险驾驶行为,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息。若该目标窗口未成功显示在该车载终端的显示界面中,则可以通过上述所描述的方式调用地图导航界面。
如果目标窗口未成功显示在该车载终端的显示界面中,则待检测对象可以通过手势控制来调取地图导航界面。
例如,若确定出待检测对象的驾驶行为为危险驾驶行为,且该目标窗口未成功显示在该车载终端的显示界面中。在检测到待检测对象执行“手枪”动作(即,第六目标动作)的情况下,通过判断可知,待检测对象的疲劳程度为重度疲劳,此时可以调用该地图导航界面,以在所述地图导航界面中显示导航信息。
在本实施例中,该方法还包括:在接收到来电终端发送的来电呼叫请求的情况下,若检测到所述待检测对象的接听动作,则对所述来电呼叫请求执行接听操作。
如图11所示的界面即为来电呼叫界面,需要说明的是,当有电话呼入时,除了接听和拒接之外,该车载终端的所有功能不可用。其中,可以通过手势来实现接听和拒接。
例如,如图11所示,接听动作可以为“rock”动作,拒接动作可以为“手掌向右”的动作。
在本实施例中,该方法还包括:在对所述来电呼叫请求执行接听操作之后,若检测到所述待检测对象的拒接动作,则断开所述车载终端与所述来电终端之间的通信连接。
在待检测对象执行接听操作之后,通话中的显示界面如图12所示,此时,车载终端可以使用拒接功能,其他功能不可用。本实施例中,可以通过拒接动作或者点击操作断开车载终端与来电终端之间的通信连接。
通过上述描述可知,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,还能够在不通过物理按键和触屏的前提下实现车载终端和用户之间的交互,从而简化了用户对车载终端的操作步骤,进一步提高了用户体验。
实施例三:
本发明实施例还提供了一种行车辅助装置,该行车辅助装置主要用于执行本发明实施例上述内容所提供的行车辅助方法,以下对本发明实施例提供的行车辅助装置做具体介绍。
图13是根据本发明实施例的一种行车辅助装置的示意图,如图13所示,该行车辅助装置主要包括获取单元10,确定单元20和显示单元30,其中:
获取单元10,用于获取目标检测图像,其中,所述目标检测图像中包括待检测对象;
确定单元20,用于基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;
显示单元30,用于若是危险驾驶行为,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
在本发明实施例中,首先,获取目标检测图像,然后,基于目标检测图像确定待检测对象的驾驶行为是否为危险驾驶行为;若是,则在车载终端的显示界面中显示目标窗口,以通过目标窗口显示提示信息;其中,提示信息包括:提示待检测对象处于危险驾驶行为状态的信息,和/或,在确定出待检测对象处于危险驾驶行为之后提示待检测对象所执行的目标动作的信息。通过上述处理方式,本发明能够自动检测待检测对象的危险驾驶行为,并通过目标窗口的方式为待检测对象显示提示信息,从而实现对待检测对象在行驶车辆过程中进行疲劳检测的目的,降低待检测对象在行驶车辆过程中的安全风险,以缓解了由于传统的车载终端智能化程度较低技术问题。
可选地,显示单元包括:确定模块,用于根据预设时间段内所述危险驾驶行为的发生次数确定所述待检测对象的疲劳程度;显示模块,用于根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口,以通过相对应的目标窗口显示所述提示信息。
可选地,显示模块,用于:若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在所述车载终端的显示界面中显示第一目标窗口,以通过所述第一目标窗口显示第一提示信息;其中,所述第一提示信息包括:第一子信息和/或第二子信息,所述第一子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第二子信息用于提示所述待检测对象是否播放目标音乐。
可选地,该装置还用于:在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第一目标动作,则在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐;在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第二目标动作,则关闭所述第一目标窗口。
可选地,显示模块,还用于:若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于预设次数,则在所述车载终端的显示界面中显示第二目标窗口,以通过所述第二目标窗口显示第二提示信息;其中,所述第二提示信息包括:第三子信息和/或第四子信息,所述第三子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第四子信息用于提示所述待检测对象是否显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
可选地,该装置还用于:在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第三目标动作,则在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示所述导航信息;在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第四目标动作,则关闭所述第二目标窗口。
可选地,该装置还用于:在所述车载终端的显示界面中确定与所述危险驾驶行为相对应的显示图标,其中,不同危险驾驶行为对应不同的显示图标;控制所述显示图标处于显示状态,以通过所述显示图标显示所述提示信息。
可选地,该装置还用于:若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在检测到所述待检测对象执行第五目标动作之后,在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐;若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于所述预设次数,则在检测到所述待检测对象执行第六目标动作之后,在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
可选地,若所述地图导航界面包含多个子界面,该装置还用于:获取所述待检测对象的选择信息,其中,所述选择信息为在所述多个子界面中选择目标界面处于目标显示状态的指令,所述选择信息包括以下任一种形式的指令:所述待检测对象的视线选择信息、所述待检测对象的手势选择信息、所述待检测对象的点击选择信息。
可选地,若危险驾驶行为是疲劳驾驶行为;确定单元用于:利用第一神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;若确定出所述动作信息为疲劳驾驶动作,则确定所述待检测对象的驾驶行为是否为所述疲劳驾驶行为。
可选地,若危险驾驶行为是分心驾驶行为;确定单元还用于:利用第二神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;若确定出所述动作信息为分心驾驶动作,则确定所述待检测对象的驾驶行为是否为所述分心驾驶行为。
可选地,该装置还用于:在接收到来电终端发送的来电呼叫请求的情况下,若检测到所述待检测对象的接听动作,则对所述来电呼叫请求执行接听操作。
可选地,该装置还用于:在对所述来电呼叫请求执行接听操作之后,若检测到所述待检测对象的拒接动作,则断开所述车载终端与所述来电终端之间的通信连接。
可选地,该装置还用于:获取目标解锁图像;将所述目标解锁图像中的人脸图像与预设人脸图像进行比对;若比对通过,则对所述车载终端执行解锁操作,并执行获取目标检测图像的步骤。
本申请还提供了一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述实施例中任一项所述的方法的步骤。
本发明实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
另外,在本发明实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (17)

1.一种行车辅助方法,其特征在于,应用于车载终端,所述方法包括:
获取目标检测图像,其中,所述目标检测图像中包括待检测对象;
基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;
若是,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
2.根据权利要求1所述的方法,其特征在于,在所述车载终端的显示界面中显示目标窗口包括:
根据预设时间段内所述危险驾驶行为的发生次数确定所述待检测对象的疲劳程度;
根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口,以通过相对应的目标窗口显示所述提示信息。
3.根据权利要求2所述的方法,其特征在于,根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口包括:
若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在所述车载终端的显示界面中显示第一目标窗口,以通过所述第一目标窗口显示第一提示信息;
其中,所述第一提示信息包括:第一子信息和/或第二子信息,所述第一子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第二子信息用于提示所述待检测对象是否播放目标音乐。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第一目标动作,则在所述车载终端的显示界面上显示音乐界面,并播放所述目标音乐;
在所述车载终端的显示界面中显示第一目标窗口之后,若检测到所述待检测对象执行第二目标动作,则关闭所述第一目标窗口。
5.根据权利要求2所述的方法,其特征在于,根据所述疲劳程度在所述车载终端的显示界面中显示相对应的目标窗口还包括:
若确定出所述预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于预设次数,则在所述车载终端的显示界面中显示第二目标窗口,以通过所述第二目标窗口显示第二提示信息;
其中,所述第二提示信息包括:第三子信息和/或第四子信息,所述第三子信息用于提示所述待检测对象处于危险驾驶行为和疲劳程度信息,所述第四子信息用于提示所述待检测对象是否显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第三目标动作,则在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示所述导航信息;
在所述车载终端的显示界面中显示第二目标窗口之后,若检测到所述待检测对象执行第四目标动作,则关闭所述第二目标窗口。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述车载终端的显示界面中确定与所述危险驾驶行为相对应的显示图标,其中,不同危险驾驶行为对应不同的显示图标;
控制所述显示图标处于显示状态,以通过所述显示图标显示所述提示信息。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数小于预设次数,则在检测到所述待检测对象执行第五目标动作之后,在所述车载终端的显示界面上显示音乐界面,并播放目标音乐;
若确定出预设时间段内所述待检测对象的危险驾驶行为的发生次数大于或者等于所述预设次数,则在检测到所述待检测对象执行第六目标动作之后,在所述车载终端的显示界面上显示地图导航界面,以在所述地图导航界面中显示导航信息,所述导航信息为所述待检测对象的当前位置到目标停车位置之间的路线信息。
9.根据权利要求6或8所述的方法,其特征在于,所述地图导航界面包含多个子界面,所述方法还包括:
获取所述待检测对象的选择信息,其中,所述选择信息为在所述多个子界面中选择目标界面处于目标显示状态的指令,所述选择信息包括以下任一种形式的指令:所述待检测对象的视线选择信息、所述待检测对象的手势选择信息、所述待检测对象的点击选择信息。
10.根据权利要求1所述的方法,其特征在于,所述危险驾驶行为是疲劳驾驶行为;
基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括:
利用第一神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;
若确定出所述动作信息为疲劳驾驶动作,则确定所述待检测对象的驾驶行为是否为所述疲劳驾驶行为。
11.根据权利要求1所述的方法,其特征在于,所述危险驾驶行为是分心驾驶行为;
基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为包括:
利用第二神经网络模型对所述目标检测图像进行检测,以确定所述待检测对象的动作信息;
若确定出所述动作信息为分心驾驶动作,则确定所述待检测对象的驾驶行为是否为所述分心驾驶行为。
12.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在接收到来电终端发送的来电呼叫请求的情况下,若检测到所述待检测对象的接听动作,则对所述来电呼叫请求执行接听操作。
13.根据权利要求12所述的方法,其特征在于,所述方法还包括:
在对所述来电呼叫请求执行接听操作之后,若检测到所述待检测对象的拒接动作,则断开所述车载终端与所述来电终端之间的通信连接。
14.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取目标解锁图像;
将所述目标解锁图像中的人脸图像与预设人脸图像进行比对;
若比对通过,则对所述车载终端执行解锁操作,并执行获取目标检测图像的步骤。
15.一种行车辅助装置,其特征在于,设置于车载终端,所述装置包括:
获取单元,用于获取目标检测图像,其中,所述目标检测图像中包括待检测对象;
确定单元,用于基于所述目标检测图像确定所述待检测对象的驾驶行为是否为危险驾驶行为,其中,所述危险驾驶行为包括:疲劳驾驶行为和/或分心驾驶行为;
显示单元,用于若是危险驾驶行为,则在所述车载终端的显示界面中显示目标窗口,以通过所述目标窗口显示提示信息;所述提示信息包括:提示所述待检测对象处于危险驾驶行为状态的信息,和/或,在确定出所述待检测对象处于危险驾驶行为之后提示所述待检测对象所执行的目标动作的信息。
16.一种车载终端,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述权利要求1至14中任一项所述的方法的步骤。
17.一种具有处理器可执行的非易失的程序代码的计算机可读介质,其特征在于,所述程序代码使所述处理器执行上述权利要求1至14中任一项所述的方法的步骤。
CN201910019973.2A 2019-01-09 2019-01-09 一种行车辅助方法、装置、车载终端和计算机可读介质 Pending CN109693612A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910019973.2A CN109693612A (zh) 2019-01-09 2019-01-09 一种行车辅助方法、装置、车载终端和计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910019973.2A CN109693612A (zh) 2019-01-09 2019-01-09 一种行车辅助方法、装置、车载终端和计算机可读介质

Publications (1)

Publication Number Publication Date
CN109693612A true CN109693612A (zh) 2019-04-30

Family

ID=66232578

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910019973.2A Pending CN109693612A (zh) 2019-01-09 2019-01-09 一种行车辅助方法、装置、车载终端和计算机可读介质

Country Status (1)

Country Link
CN (1) CN109693612A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110550043A (zh) * 2019-09-05 2019-12-10 上海博泰悦臻网络技术服务有限公司 危险行为的警示方法、系统、计算机存储介质及车载终端
CN112885036A (zh) * 2021-01-26 2021-06-01 昆山小眼探索信息科技有限公司 辅助驾驶员安全驾驶的方法以及设备
CN114360267A (zh) * 2021-11-25 2022-04-15 广东唯普汽车电子商务股份有限公司 基于云端检测系统的车况检测方法、装置及云端检测系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104408879A (zh) * 2014-11-19 2015-03-11 湖南工学院 疲劳驾驶预警处理方法、装置及系统
CN105083291A (zh) * 2014-04-25 2015-11-25 歌乐株式会社 基于视线检测的驾驶员辅助系统
CN107776580A (zh) * 2017-11-16 2018-03-09 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置
CN108423004A (zh) * 2018-05-16 2018-08-21 浙江吉利控股集团有限公司 一种双目识别驾驶员状态检测系统及方法
CN108819900A (zh) * 2018-06-04 2018-11-16 上海商汤智能科技有限公司 车辆控制方法和系统、车载智能系统、电子设备、介质
CN109063686A (zh) * 2018-08-29 2018-12-21 安徽华元智控科技有限公司 一种汽车驾驶员疲劳检测方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105083291A (zh) * 2014-04-25 2015-11-25 歌乐株式会社 基于视线检测的驾驶员辅助系统
CN104408879A (zh) * 2014-11-19 2015-03-11 湖南工学院 疲劳驾驶预警处理方法、装置及系统
CN107776580A (zh) * 2017-11-16 2018-03-09 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置
CN108423004A (zh) * 2018-05-16 2018-08-21 浙江吉利控股集团有限公司 一种双目识别驾驶员状态检测系统及方法
CN108819900A (zh) * 2018-06-04 2018-11-16 上海商汤智能科技有限公司 车辆控制方法和系统、车载智能系统、电子设备、介质
CN109063686A (zh) * 2018-08-29 2018-12-21 安徽华元智控科技有限公司 一种汽车驾驶员疲劳检测方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110550043A (zh) * 2019-09-05 2019-12-10 上海博泰悦臻网络技术服务有限公司 危险行为的警示方法、系统、计算机存储介质及车载终端
CN112885036A (zh) * 2021-01-26 2021-06-01 昆山小眼探索信息科技有限公司 辅助驾驶员安全驾驶的方法以及设备
CN114360267A (zh) * 2021-11-25 2022-04-15 广东唯普汽车电子商务股份有限公司 基于云端检测系统的车况检测方法、装置及云端检测系统
CN114360267B (zh) * 2021-11-25 2023-10-10 广东唯普汽车电子商务股份有限公司 基于云端检测系统的车况检测方法、装置及云端检测系统

Similar Documents

Publication Publication Date Title
KR101329956B1 (ko) 인터페이스 적응 시스템
KR102253313B1 (ko) 지문 식별을 사용하는 조작 방법 및 장치, 및 모바일 단말
CN105187484B (zh) 移动终端和控制移动终端的方法
CN104838335B (zh) 使用凝视检测的设备的交互和管理
JP5521117B2 (ja) ジェスチャーベースの遠隔制御のための方法および装置
CN109693612A (zh) 一种行车辅助方法、装置、车载终端和计算机可读介质
CN106055196A (zh) 一种启动应用程序的方法及移动终端
CN107194235B (zh) 一种应用程序启动方法及移动终端
US20130231800A1 (en) Vehicle occupant health data gathering and monitoring
CN104691449A (zh) 车辆控制设备及其方法
WO2016145100A1 (en) Vehicle supervising of occupant applications
CN109739669A (zh) 一种未读消息提示方法及移动终端
CN112613475B (zh) 扫码界面显示方法、装置、移动终端及存储介质
CN103870802A (zh) 使用指谷操作车辆内的用户界面的系统和方法
CN108647058A (zh) 一种应用程序启动方法及移动终端
KR20150085009A (ko) 차량내 휴대기기 관리 방법 및 장치
CN106610719A (zh) 快捷操作方法、装置和终端设备
CN103019539A (zh) 终端移动触发解锁的方法、客户端及系统
CN110015307B (zh) 一种车辆控制方法、装置、可读存储介质及终端设备
CN109522706A (zh) 一种信息提示方法及终端设备
CN113696849A (zh) 基于手势的车辆控制方法、装置和存储介质
CN110727355B (zh) 基于运动传感器操作虚拟钥匙的用户终端
CN108804894A (zh) 屏幕解锁方法、装置、移动终端及计算机可读介质
CN107465812A (zh) 一种使用模式确定方法及用户终端
CN110300230A (zh) 应用控制方法、装置、存储介质以及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190430

RJ01 Rejection of invention patent application after publication