CN112396805B - 疲劳驾驶提醒的方法、装置、终端及存储介质 - Google Patents

Abstract

本申请实施例公开了一种疲劳驾驶提醒方法、装置、终端及存储介质，属于交通安全技术领域。所述方法用于配置有眼球追踪传感器的移动终端，该方法包括：当车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；通过所述眼球追踪传感器定位驾驶者的目标眼球；车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；若所述目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。通过采用本申请实施例提供的疲劳驾驶提醒方法，可以提高疲劳驾驶检测的准确性，进而达到更好的预防疲劳驾驶的效果。

Description

疲劳驾驶提醒的方法、装置、终端及存储介质

技术领域

本申请实施例涉及交通安全技术领域，特别涉及一种疲劳驾驶提醒方法、装置、终端及存储介质。

背景技术

驾车出行过程中，为了实现更快更准确的导航，普遍使用手机作为导航设备。

目前手机作为导航设备时，是通过统计导航时间来预防疲劳驾驶，当导航时间超过某个时间阈值时，会自动语音提醒驾驶者：驾车时间超长，注意休息。

上述相关技术只根据驾车时长来判断疲劳驾驶，而不同的人在不同情况下，感觉到疲劳的时间是不同的，这种无差别的提示并不能很好的预防疲劳驾驶。

发明内容

本申请实施例提供了一种疲劳驾驶提醒方法、装置、终端及存储介质。所述技术方案如下：

一方面，本申请实施例提供了一种疲劳驾驶提醒方法，所述方法用于配置有眼球追踪传感器的移动终端，所述方法包括：

车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；

通过所述眼球追踪传感器定位驾驶者的目标眼球；

车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；

若所述目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

另一方面，本申请实施例提供了一种疲劳驾驶提醒装置，所述装置用于配置有眼球追踪传感器的移动终端，所述装置包括：

启动模块，用于车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；

定位模块，用于通过所述眼球追踪传感器定位驾驶者的目标眼球；

采集模块，用于车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；

提醒模块，用于若所述目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

另一方面，本申请实施例提供了一种终端，所述终端包括处理器和存储器；所述存储器存储有至少一条指令，所述至少一条指令用于被所述处理器执行以实现如上述方面所述的疲劳驾驶提醒方法。

另一方面，提供了一种计算机可读存储介质，所述存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如上述方面所述的疲劳驾驶提醒方法。

另一方面，还提供了一种计算机程序产品，该计算机程序产品存储有至少一条指令，所述至少一条指令由处理器加载并执行以实现上述方面所述的疲劳驾驶提醒方法。

采用本申请实施例提供的疲劳驾驶提醒方法，在车辆行驶过程中，通过移动终端上的眼球追踪传感器定位驾驶者的目标眼球，并采集驾驶者的眼球变化特征，若驾驶者的眼球变化特征与疲劳驾驶状态下眼球的变化特征相匹配，则进行疲劳驾驶提醒，由于疲劳驾驶状态下驾驶者的眼球变化特征不同于正常驾驶状态下的眼球变化特征，因此通过实时采集驾驶者的眼球变化特征，并与疲劳驾驶状态下眼球的变化特征进行匹配，可以实时检测出驾驶者是否处于疲劳驾驶状态，从而提高了疲劳驾驶检测的准确性，进而达到更好的预防疲劳驾驶的效果。

附图说明

图1示出了本申请一个示例性实施例示出的疲劳驾驶提醒方法的流程图；

图2示出了本申请另一个示例性实施例示出的疲劳驾驶提醒方法的流程图；

图3示出了本申请另一个示例性实施例示出的疲劳驾驶提醒方法的流程图；

图4示出了图3所示实施例中眼球定位过程的界面图；

图5示出了目标眼球与眼球追踪传感器之间的相对位置关系图；

图6示出了本申请另一个示例性实施例示出的疲劳驾驶提醒方法的流程图；

图7示出了本申请另一个示例性实施例示出的疲劳驾驶提醒方法的流程图；

图8示出了通过摄像头采集到的人脸图像；

图9示出了本申请一个实施例提供的疲劳驾驶提醒装置的结构框图；

图10示出了本申请一个示例性实施例提供的终端的结构方框图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

在本文中提及的“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

本申请各个实施例提供的疲劳驾驶提醒方法，可以应用于配置有眼球追踪传感器，且具有导航功能的移动终端，其中，该移动终端可以是智能手机、平板电脑或者可拆卸式导航设备等等。在一种可能的实施方式中，眼球追踪传感器可以设置在移动终端的前表面或者屏下的任意位置，例如眼球追踪传感器设置在前置摄像头的相邻位置。

可选的，眼球追踪传感器可以是基于红外原理的传感器，眼球追踪传感器可以包括发射组件、接收组件以及处理组件，其中，发射组件用来发射红外光，接收组件用来接收从眼部反射回的红外光，处理组件用来将获得的反射信息进行处理。比如：将红外光投射到眼球，红外光通过瞳孔进入眼睛，在瞳孔区域外，红外光不会进入眼睛，而是经过反射后被接收组件接收，因此处理后的眼睛部分就会呈现瞳孔为黑暗区域，而眼睛的其余部分为明亮区域，使瞳孔不同于眼睛其余部分，从而确定瞳孔的位置，进而可以根据瞳孔位置确定出眼球的运动情况。

当然，除了采用基于上述原理的眼球追踪传感器外，基于图像识别等其它原理的眼球追踪传感器也可以被应用于移动终端，本申请实施例对此不作限定。

请参考图1，其示出了本申请一个实施例示出的疲劳驾驶提醒方法的流程图。该方法用于配置有眼球追踪传感器的移动终端，该方法包括：

步骤101，车载导航状态下，启动眼球追踪传感器，车载导航状态指移动终端作为导航设备设置在车辆中的状态。

为了降低终端功耗，眼球追踪传感器默认处于关闭状态，当检测到处于车载导航状态时，移动终端启动眼球追踪传感器。

在一种可能的实施方式中，移动终端中安装有导航应用程序，当移动终端检测到导航应用程序开启，且与车辆相连(有线连接或蓝牙连接)时，确定处于车载导航状态，并启动眼球追踪传感器。

步骤102，通过眼球追踪传感器定位驾驶者的目标眼球。

在一种可能的实施方式中，由于眼球追踪传感器是设置在移动终端的前表面或者屏下的任意位置，且移动终端被放置在车辆中的位置可能会影响到眼球追踪传感器的识别准确率，比如：移动终端当前位置可能无法识别到驾驶者的目标眼球，或者识别的并不只是驾驶者的目标眼球，所以需要通过眼球追踪传感器定位驾驶者的目标眼球，确保眼球追踪传感器识别的是驾驶者的眼球，而不是副驾驶或后排座位上的任一乘客的眼球。

步骤103，车辆行驶过程中，通过眼球追踪传感器采集目标眼球的眼球变化特征。

在一种可能的实施方式中，移动终端通过加速传感器或者陀螺仪等持续检测车辆的运行速度，当确定车辆在行驶过程中，通过眼球追踪传感器采集目标眼球的眼球变化特征。

在其他可能的实施方式中，移动终端通过导航应用程序获取车辆的实时行驶速度，并在确定车辆正处在行驶过程中，通过眼球追踪传感器采集目标眼球的眼球变化特征。

可选的，如果移动终端检测到车辆未在行驶过程中，关闭眼球追踪传感器的采集功能，以减少不必要的功耗。

可选的，该眼球变化特征包括如下至少一种：眼球运动轨迹特征、眼球瞳孔直径变化特征、眼球遮挡时间特征和眼球遮挡范围特征。其中眼球的运动轨迹至少包括眼球上下左右转动中的一种。

步骤104，若目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

其中，疲劳驾驶状态下的眼球变化特征是通过对不同疲劳状态下的眼球变化特征信息进行提取分析后生成的，且目标眼球变化特征存储在移动终端中作为后续的匹配对象。

在一种可能的实施方式中，移动终端计算目标眼球的眼球变化特征与疲劳驾驶状态下眼球的变化特征的匹配度，并在匹配度大于匹配度阈值(比如80％)时，确定目标眼球的眼球变化特征与疲劳驾驶状态下眼球的变化特征匹配，即判定驾驶者处于疲劳状态，并进行疲劳驾驶提醒。

可选的，疲劳驾驶提醒的方式至少包括语音提醒。比如，移动终端通过播放预定提醒语音提示用户停车休息。

在一种可能的实施方式中，移动终端获取连续导航时长，当连续导航时长超过预设时长，且在连续导航时长过程中，移动终端并没有检测到驾驶者处于疲劳状态，此时仍需要进行疲劳驾驶提醒。

其中，预设时长可以由驾驶者手动设置或采用系统默认值。比如预设时长为4小时，当移动终端检测到连续导航时长超过4小时，则进行疲劳驾驶提醒。

综上所述，本申请实施例中，在车辆行驶过程中，通过移动终端上的眼球追踪传感器定位驾驶者的目标眼球，并采集驾驶者的眼球变化特征，若驾驶者的眼球变化特征与疲劳驾驶状态下眼球的变化特征相匹配，则进行疲劳驾驶提醒，由于疲劳驾驶状态下驾驶者的眼球变化特征不同于正常驾驶状态下的眼球变化特征，因此通过实时采集驾驶者的眼球变化特征，并与疲劳驾驶状态下眼球的变化特征进行匹配，可以实时检测出驾驶者是否处于疲劳驾驶状态，从而提高了疲劳驾驶检测的准确性，进而达到更好的预防疲劳驾驶的效果。

在一种可能的实施方式中，眼球追踪传感器具有一定的采集范围，对于眼球追踪传感器采集范围内的眼球，其都可以进行识别，由于只需要采集驾驶者的眼球变化特征，因此移动终端需要对眼球追踪传感器采集到的候选眼球进行定位分析，从中确定驾驶者的目标眼球。

请参考图2，其示出了本申请另一个实施例示出的疲劳驾驶提醒方法的流程图。该方法包括：

步骤201，车载导航状态下，启动眼球追踪传感器，车载导航状态指移动终端作为导航设备设置在车辆中的状态。

本步骤的实施方式可以参考上述步骤101，本实施例在此不再赘述。

步骤202，通过眼球追踪传感器定位采集范围内的候选眼球。

其中，眼球追踪传感器的采集范围可以是预设的扇形区域，比如：眼球追踪传感器的采集范围为：以眼球追踪传感器为顶点，50cm为半径，角度为150度的扇形区域。

可选的，候选眼球指：移动终端被驾驶者摆放在任意位置后，眼球追踪传感器在其相应的采集范围内识别出的至少一个眼球。

可选的，如果眼球追踪传感器没有定位出候选眼球，移动终端通过预定方式提醒驾驶者调整移动终端的位置，以便眼球追踪传感器能够识别到眼球。比如：驾驶者可以调整与移动终端的距离，或者调整移动终端的角度使移动终端正对驾驶者，尽可能保证驾驶者的眼球处在眼球追踪传感器的采集范围内。

在一种可能的实施方式中，移动终端获取候选眼球的数量，若候选眼球的数量为一个(即仅识别到一对眼球)，则将该候选眼球确定为驾驶者的目标眼球；若候选眼球的数量为至少两个(即识别到至少两对眼球)，则进一步执行步骤203，以确定候选眼球中驾驶者的目标眼球。

步骤203，若包含至少两个候选眼球，则根据各个候选眼球的眼球变化特征，从至少一个候选眼球中确定驾驶者的目标眼球。

其中，至少两个候选眼球中包括驾驶者和非驾驶者的眼球。

在一种可能的实施方式中，由于候选眼球中包括驾驶者和非驾驶者的眼球，要从至少一个候选眼球中确定驾驶者的目标眼球，需要驾驶者眼球的眼球变化特征区别于非驾驶者眼球的眼球变化特征，比如，可以提示驾驶者进行特殊的眼部动作，并通过眼球追踪传感器采集候选眼球的眼球变化特征，从而根据各个候选眼球的眼球变化特征确定驾驶者的目标眼球。在一种可能的实施方式中，如图3所示，步骤203还包括：

步骤203A，若包含至少两个候选眼球，则进行定位提示，定位提示用于指示驾驶者按照预定方式控制眼部运动。

在一种可能的实施方式中，若包含至少两个候选眼球，则移动终端通过语音方式进行定位提示，指示驾驶者按照预设方式控制眼部运动，其中，预定方式可以包括眨眼和转动眼球中的至少一种，且该预定方式可以为默认方式，或者由用户选择设置。

可选的，示意性的，如图4所示，移动终端通过眼球追踪传感器检测到至少两个候选眼球时，在导航系统界面401上层显示第一定位提示信息402。

当驾驶者按照预定方式控制眼部运动后，移动终端在导航系统界面401上层显示第二提示信息403。

其中，显示第二提示信息的目的是提醒驾驶者，眼球追踪传感器正在匹配过程中，此时不需要驾驶者持续按照预定方式控制眼部动作。

步骤203B，若存在候选眼球的眼球变化特征与预设眼球变化特征匹配，则将候选眼球确定为目标眼球，预设眼球变化特征为按照预设方式控制眼部运动时眼球的变化特征。

在一种可能的实施方式中，预设眼球变化特征由实验人员预先录入，预设眼球变化特征包括至少一种，不同的预定方式对应不同的预设眼球变化特征。当驾驶者根据预定方式控制眼部运动时，眼球追踪传感器采集各个候选眼球的眼球变化特征，并将候选眼球的眼球变化特征与预设眼球变化特征进行匹配，若存在候选眼球的眼球变化特征与预设眼球变化特征匹配，则将该候选眼球确定为目标眼球。

示意性的，如图4所示，移动终端通过眼球追踪传感器采集到候选眼球的眼球变化特征，与预设眼球变化特征进行匹配，若匹配成功，则在导航系统界面401上层显示第三提示信息404。

其中，显示第三提示信息的目的是提示驾驶者已经确定目标眼球。

可选的，若各个候选眼球的眼球变化特征与预设眼球变化特征均不匹配，移动终端则需要重新进行目标眼球定位。

步骤204，确定目标眼球与眼球追踪传感器之间的相对位置关系。

在一种可能的实施方式中，由于移动终端处于不同方位时，同一眼部动作下眼球追踪传感器采集到的眼球变化特征可能不同，因此为了提高后续眼球变化特征的匹配准确性，移动终端需要采用与眼球追踪传感器当前设置位置对应的目标眼球变化特征进行特征匹配。

示意性的，如图5所示，相对位置关系指：以移动终端正对驾驶者的目标眼球为标准，确定目标眼球与眼球追踪传感器之间的相对位置。比如，移动终端503以正对驾驶者的目标眼球501为标准，确定出眼球追踪传感器502相对于目标眼球的相对位置为右偏30°。

可选的，该相对位置关系可以由移动终端根据目标眼球的定位结果确定得到。

步骤205，将与相对位置关系对应的候选眼球变化特征确定为目标眼球变化特征，其中，不同相对位置关系对应不同候选眼球变化特征。

在一种可能的实施方式中，候选眼球变化特征是提前经过实验测得的，实验过程中，针对每一种相对位置关系，实验人员通过对该相对位置关系下的眼球变化特征进行测试，从而根据测试结果生成该相对位置关系对应的候选眼球变化特征。

示意性的，候选眼球变化特征与相对位置关系之间的对应关系如表一所示。

表一

示意性的，当移动终端获取到当前的相对位置关系为右偏45°，从而从表一所示的对应关系中确定出目标眼球变化特征为：特征一：瞳孔直径3.8mm以及特征二：眼睛注视前方时，眼球向左转动45°。

步骤206，车辆行驶过程中，确定眼球追踪传感器的采集频率。

车辆行驶过程中，移动终端要持续通过眼球追踪传感器采集目标眼球的眼球变化特征，且要持续将目标眼球的眼球变化特征与目标眼球变化特征进行匹配，这一系列的操作会增加移动终端的功耗，为了降低疲劳驾驶提醒功能的功耗，可以调整眼球追踪传感器的采集频率，从而调整匹配的频率，来降低移动终端的功耗。

在一种可能的实施方式中，驾驶者进入驾驶疲劳的时间与很多因素有关，例如连续驾驶时长、当前行驶速度、前一天晚上的睡眠时长等，所以在车辆行驶过程中，眼球追踪传感器的采集频率也需要随着这些因素的变化而进行调整，达到及时预防驾驶疲劳的同时，合理利用移动终端的电量。

在一种可能的实施方式中，如图6所示，步骤206还包括：

步骤206A，根据连续行驶时长，确定眼球追踪传感器的采集频率，采集频率与连续行驶时长呈正相关关系。

其中，移动终端可以通过导航应用程序获取连续行驶时长，或者通过眼球追踪传感器的采集时长来获取连续行驶时长。

由于驾驶者的疲劳程度与连续驾驶时长相关，因此，在一种可能的实施方式中，移动终端通过获取当前的连续行驶时长，确定眼球追踪传感器的采集频率，其中采集频率与连续行驶时长呈正相关关系，即连续行驶时长越长，眼球追踪传感器的采集频率越高。比如：当前的连续驾驶时长为2小时，眼球追踪传感器的采集频率为20Hz；当前的连续驾驶时长为4小时，眼球追踪传感器的采集频率为30Hz。

步骤206B，根据当前行驶速度，确定眼球追踪传感器的采集频率，采集频率与当前行驶速度呈正相关关系。

其中，移动终端可以通过导航应用程序获取当前的行驶速度，或者通过内置加速传感器或陀螺仪来获取当前的行驶速度。

由于长时间高速驾驶会导致驾驶者疲劳，且高速行驶状态下疲劳驾驶的危险性越高，因此，在一种可能的实施方式中，移动终端获取车辆当前的行驶速度，确定眼球追踪传感器的采集频率，其中采集频率与当前行驶速度呈正相关关系，即行驶速度越快，眼球追踪传感器的采集频率越高。比如：当前车辆的行驶速度为每小时40公里，眼球追踪传感器的采集频率为25Hz；当前车辆的行驶速度为每小时60公里，眼球追踪传感器的采集频率为35Hz。

步骤206C，根据睡眠时长，确定眼球追踪传感器的采集频率，采集频率与睡眠时长呈负相关关系。

针对获取睡眠时长的方式，在一种可能的实施方式中，移动终端可以通过第三方应用程序(Application，APP)获取驾驶者的睡眠时长，比如智能手环APP，其可以智能监测用户的睡眠质量，并且将具体的数据显示在用户的手机APP上，该数据中至少包括睡眠时长。

当然，移动终端也可以显示睡眠时长输入界面，并由用户手动输入睡眠时长，本实施例对此不做限定。

由于睡眠不足会导致驾驶者疲劳，因此，在一种可能的实施方式中，移动终端获取驾驶者的睡眠时长，确定眼球追踪传感器的采集频率，其中采集频率与睡眠时长呈负相关关系，即睡眠时长越短，眼球追踪传感器的采集频率越高。比如：驾驶者的睡眠时长为8小时，眼球追踪传感器的采集频率为20Hz；驾驶者的睡眠时长为5小时，眼球追踪传感器的采集频率为35Hz。

步骤206D，根据目标眼球的眼球变化特征与目标眼球变化特征之间的匹配度，确定眼球追踪传感器的采集频率，采集频率与匹配度呈正相关关系。

由于目标眼球的眼球变化特征与目标眼球变化特征之间是不断进行循环匹配的，因此目标眼球的眼球变化特征与目标眼球变化特征之间的匹配度可以是上一次匹配周期内计算得到的匹配度。

由于匹配度越高，疲劳驾驶的可能性就越高，因此，在一种可能的实施方式中，移动终端获取目标眼球的眼球变化特征与目标眼球变化特征之间的匹配度，确定眼球追踪传感器的采集频率，其中采集频率与匹配度呈正相关关系，即匹配度越高，眼球追踪传感器的采集频率越高。比如：上一次目标眼球的眼球变化特征与目标眼球变化特征之间的匹配度为90％，眼球追踪传感器的采集频率为30Hz；前一次目标眼球的眼球变化特征与目标眼球变化特征之间的匹配度为80％，眼球追踪传感器的采集频率为20Hz。

需要说明的是，移动终端在确定眼球追踪传感器的采集频率时，可以采用上述步骤206A至206D中的至少一种或多种的组合，本实施例对此不做限定。

步骤207，根据采集频率，通过眼球追踪传感器采集目标眼球的眼球变化特征。

在一种可能的实施方式中，移动终端根据确定出的采集频率，通过眼球追踪传感器采集目标眼球的眼球变化特征。

步骤208，若目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

其中，目标眼球变化特征包括如下至少一种：眼球运动轨迹特征、眼球瞳孔直径变化特征、眼球遮挡时间特征和眼球遮挡范围特征。

在一种可能的实施方式中，移动终端获取眼球追踪传感器连续识别出的目标眼球的遮挡时间特征，与疲劳状态下的眼球遮挡时间特征进行匹配，当达到预设匹配度时，确定驾驶者处于驾驶疲劳状态，并进行疲劳驾驶提醒，其它的眼球变化特征的匹配过程与上述类似，本实施例在此不做赘述。

可选的，眼球追踪传感器可以同时采集一种或多种眼球变化特征，进行对应匹配，可以提高单一特征匹配的准确性。

本实施例中，当车辆行驶过程中，通过移动终端上的眼球追踪传感器定位驾驶者的目标眼球，使眼球追踪传感器专一识别驾驶者的眼球变化特征，避免其它乘客的眼球对疲劳驾驶识别造成干扰；同时，移动终端根据目标眼球与眼球追踪传感器的相对位置确定用于进行疲劳驾驶检测的目标眼球变化特征，有助于提高了疲劳驾驶检测的准确定；此外，移动终端通过调整眼球传感器的采集频率，在实现疲劳驾驶检测的前提下，可以降低疲劳驾驶提醒功能的功耗。

在一种可能的实施方式中，当眼球跟踪传感器与移动终端的摄像头相邻设置时，移动终端可以通过摄像头来辅助定位驾驶者的目标眼球。

示意性的，在图2的基础上，如图7所示，步骤203可以被替换为步骤209、步骤210以及步骤211。

步骤209，若包含至少两个候选眼球，则通过摄像头采集人脸图像。

在一种可能的实施方式中，若包含至少两个候选眼球，移动终端控制前置摄像头采集人脸图像。示意性的，如图8所示，前置摄像头采集到人脸图像801，其中，人脸图像801中包括驾驶者802和副驾驶员803。

步骤210，确定人脸图像中驾驶者的目标眼球位置。

在一种可能的实施方式中，当前置摄像头采集到人脸图像后，移动终端可以根据图像中安全带的位置确定驾驶者，从而确定人脸图像中驾驶者的目标眼球位置。

在其他可能的实施方式中，移动终端也可以通过人脸识别技术，识别出人脸图像中驾驶者的人脸(驾驶者的人脸可以预先录入)，进而确定人脸图像中驾驶者的目标眼球位置。

步骤211，根据目标眼球位置以及各个候选眼球对应的候选眼球位置，从至少一个候选眼球中确定驾驶者的目标眼球。

由于眼球跟踪传感器与摄像头的位置相邻，因此两者所采集到图像中眼球位置的分布情况相似，在一种可能的实施方式中，移动终端根据人脸图像中的目标眼球位置，将该目标眼球位置周侧预定范围内的候选眼球确定为目标眼球。

可选的，若各个候选眼球的候选眼球位置与目标眼球位置均不匹配，则需要重新进行目标眼球定位。

本实施例中，通过前置摄像头采集人脸图像来辅助定位驾驶者的目标眼球，驾驶者无需按照预定方式进行眼部动作，定位驾驶者的目标眼球这一系列的操作由移动终端直接完成，提高了眼球定位的便捷性。

请参考图9其示出了本申请一个示例性实施例提供的疲劳驾驶提醒装置的结构框图。该装置可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。该装置包括：

启动模块901，用于车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；

定位模块902，用于通过所述眼球追踪传感器定位驾驶者的目标眼球；

采集模块903，用于车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；

提醒模块904，用于若所述目标眼球的眼球变化特征与目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

可选的所述定位模块902还包括：

定位单元，用于通过所述眼球追踪传感器定位采集范围内的候选眼球；

第一确定单元，用于若包含至少两个候选眼球，则根据各个候选眼球的眼球变化特征，从所述至少一个候选眼球中确定驾驶者的所述目标眼球。

可选的，所述确定子模块还用于：

若包含至少两个候选眼球，则进行定位提示，所述定位提示用于指示驾驶者按照预定方式控制眼部运动；

若存在候选眼球的眼球变化特征与预设眼球变化特征匹配，则将所述候选眼球确定为所述目标眼球，所述预设眼球变化特征为按照预设方式控制眼部运动时眼球的变化特征。

可选的，所述定位模块902还包括：

第一采集单元，用于若包含至少两个候选眼球，则通过摄像头采集人脸图像；

第二确定单元，用于确定所述人脸图像中驾驶者的目标眼球位置；

第三确定单元，用于根据所述目标眼球位置以及各个候选眼球对应的候选眼球位置，从所述至少一个候选眼球中确定驾驶者的所述目标眼球。

可选的，所述装置还包括：

第一确定模块，用于确定所述目标眼球的与所述眼球追踪传感器之间的相对位置关系；

第二确定模块，用于将与所述相对位置关系对应的候选眼球变化特征确定为所述目标眼球变化特征，其中，不同相对位置关系对应不同候选眼球变化特征。

可选的，所述目标眼球变化特征包括如下至少一种：眼球运动轨迹特征、眼球瞳孔直径变化特征、眼球遮挡时间特征和眼球遮挡范围特征。

可选的，所述采集模块903包括：

第四确定单元，用于车辆行驶过程中，确定所述眼球追踪传感器的采集频率；

第二采集单元，用于根据所述采集频率，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征。

可选的，所述第四确定单元还用于：

根据所述连续行驶时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述连续行驶时长呈正相关关系；和/或，

根据当前行驶速度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述当前行驶速度呈正相关关系；和/或，

根据睡眠时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述睡眠时长呈负相关关系；和/或，

根据所述目标眼球的眼球变化特征与所述目标眼球变化特征之间的匹配度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述匹配度呈正相关关系。

本实施例中，采用实施例提供的疲劳驾驶提醒装置，当移动终端检测到导航系统开启后，启动眼球追踪传感器识别驾驶者的目标眼球，且在车辆行驶过程中，通过眼球追踪传感器采集驾驶者的眼球变化特征，若驾驶者的眼球变化特征与疲劳驾驶状态下眼球的变化特征相匹配，则进行疲劳驾驶提醒，由于疲劳驾驶状态下驾驶者的眼球变化特征不同于正常驾驶状态下的眼球变化特征，通过实时采集驾驶者的眼球变化特征，可以有差别的提醒驾驶者，从而更好的预防疲劳驾驶。

请参考图10，其示出了本申请一个示例性实施例提供的移动终端900的结构方框图。该移动终端900可以是智能手机、平板电脑、电子书、便携式个人计算机等安装并运行有应用程序的电子设备。本申请中的移动终端900可以包括一个或多个如下部件：处理器910、存储器920、屏幕930和眼球追踪传感器940。

处理器910可以包括一个或者多个处理核心。处理器910利用各种接口和线路连接整个移动终端900内的各个部分，通过运行或执行存储在存储器920内的指令、程序、代码集或指令集，以及调用存储在存储器920内的数据，执行移动终端900的各种功能和处理数据。可选地，处理器910可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(ProgrammableLogic Array，PLA)中的至少一种硬件形式来实现。处理器910可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责屏幕930所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器910中，单独通过一块通信芯片进行实现。

存储器920可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选地，该存储器920包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器920可用于存储指令、程序、代码、代码集或指令集。存储器920可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等，该操作系统可以是安卓(Android)系统(包括基于Android系统深度开发的系统)、苹果公司开发的IOS系统(包括基于IOS系统深度开发的系统)或其它系统。存储数据区还可以存储移动终端900在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

屏幕930可以为电容式触摸显示屏，该电容式触摸显示屏用于接收用户使用手指、触摸笔等任何适合的物体在其上或附近的触摸操作，以及显示各个应用程序的用户界面。触摸显示屏通常设置在移动终端900的前面板。触摸显示屏可被设计成为全面屏、曲面屏或异型屏。触摸显示屏还可被设计成为全面屏与曲面屏的结合，异型屏与曲面屏的结合，本申请实施例对此不加以限定。

眼球追踪传感器940可以是基于红外原理的传感器，眼球追踪传感器可以包括发射组件、接收组件以及处理组件，其中，发射组件用来发射红外光，接收组件用来接收从眼部反射回的红外光，处理组件用来将获得的反射信息进行处理。比如：将红外光投射到眼球，红外光通过瞳孔进入眼睛，在瞳孔区域外，红外光不会进入眼睛，而是经过反射后被接收组件接收，因此处理后的眼睛部分就会呈现瞳孔为黑暗区域，而眼睛的其余部分为明亮区域，使瞳孔不同于眼睛其余部分，从而确定瞳孔的位置，进而可以根据瞳孔位置确定出眼球的运动情况。当然，除了采用基于上述原理的眼球追踪传感器外，基于图像识别等其它原理的眼球追踪传感器也可以被应用于移动终端，本申请实施例对此不作限定。

除此之外，本领域技术人员可以理解，上述附图所示出的移动终端900的结构并不构成对移动终端900的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。比如，移动终端900中还包括射频电路、拍摄组件、传感器、音频电路、无线保真(Wireless Fidelity，WiFi)组件、电源、蓝牙组件等部件，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质，该计算机存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如上述各个实施例所述的疲劳驾驶提醒方法。

本申请实施例还提供了一种计算机程序产品，该计算机程序产品存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的疲劳驾驶提醒方法。

本领域技术人员应该可以意识到，在上述一个或多个示例中，本申请实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时，可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。

以上所述仅为本申请的较佳实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (16)

1.一种疲劳驾驶提醒方法，其特征在于，所述方法用于配置有眼球追踪传感器的移动终端，所述方法包括：

车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；

通过所述眼球追踪传感器定位驾驶者的目标眼球；

确定所述目标眼球与所述眼球追踪传感器之间的相对位置关系；

将与所述相对位置关系对应的候选眼球变化特征确定为目标眼球变化特征，其中，不同相对位置关系对应不同候选眼球变化特征；

车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；

若所述目标眼球的眼球变化特征与所述目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

2.根据权利要求1所述的方法，其特征在于，所述通过所述眼球追踪传感器定位驾驶者的目标眼球，包括：

通过所述眼球追踪传感器定位采集范围内的候选眼球；

若包含至少两个所述候选眼球，则根据各个所述候选眼球的眼球变化特征，从至少一个所述候选眼球中确定驾驶者的所述目标眼球。

3.根据权利要求2所述的方法，其特征在于，所述根据各个所述候选眼球的眼球变化特征，从至少一个所述候选眼球中确定所述驾驶者的所述目标眼球，包括：

若包含至少两个所述候选眼球，则进行定位提示，所述定位提示用于指示驾驶者按照预定方式控制眼部运动；

若存在所述候选眼球的眼球变化特征与预设眼球变化特征匹配，则将所述候选眼球确定为所述目标眼球，所述预设眼球变化特征为按照预设方式控制眼部运动时眼球的变化特征。

4.根据权利要求2所述的方法，其特征在于，所述通过所述眼球追踪传感器定位采集范围内的候选眼球之后，所述方法还包括：

若包含至少两个所述候选眼球，则通过摄像头采集人脸图像；

确定所述人脸图像中驾驶者的目标眼球位置；

根据所述目标眼球位置以及各个所述候选眼球对应的候选眼球位置，从至少一个所述候选眼球中确定驾驶者的所述目标眼球。

5.根据权利要求1至4任一所述方法，其特征在于，所述目标眼球变化特征包括如下至少一种：眼球运动轨迹特征、眼球瞳孔直径变化特征、眼球遮挡时间特征和眼球遮挡范围特征。

6.根据权利要求1至4任一所述的方法，其特征在于，所述车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征，包括：

车辆行驶过程中，确定所述眼球追踪传感器的采集频率；

根据所述采集频率，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征。

7.根据权利要求6所述的方法，其特征在于，所述确定所述眼球追踪传感器的采集频率，包括：

根据连续行驶时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述连续行驶时长呈正相关关系；和/或，

根据当前行驶速度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述当前行驶速度呈正相关关系；和/或，

根据睡眠时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述睡眠时长呈负相关关系；和/或，

根据所述目标眼球的眼球变化特征与所述目标眼球变化特征之间的匹配度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述匹配度呈正相关关系。

8.一种疲劳驾驶提醒装置，其特征在于，所述装置用于配置有眼球追踪传感器的移动终端，所述装置包括：

启动模块，用于车载导航状态下，启动所述眼球追踪传感器，所述车载导航状态指所述移动终端作为导航设备设置在车辆中的状态；

定位模块，用于通过所述眼球追踪传感器定位驾驶者的目标眼球；

第一确定模块，用于确定所述目标眼球与所述眼球追踪传感器之间的相对位置关系；

第二确定模块，用于将与所述相对位置关系对应的候选眼球变化特征确定为目标眼球变化特征，其中，不同相对位置关系对应不同候选眼球变化特征；

采集模块，用于车辆行驶过程中，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征；

提醒模块，用于若所述目标眼球的眼球变化特征与所述目标眼球变化特征匹配，则进行疲劳驾驶提醒，所述目标眼球变化特征是疲劳驾驶状态下眼球的变化特征。

9.根据权利要求8所述的装置，其特征在于，所述定位模块包括：

定位单元，用于通过所述眼球追踪传感器定位采集范围内的候选眼球；

第一确定单元，用于若包含至少两个所述候选眼球，则根据各个所述候选眼球的眼球变化特征，从至少一个所述候选眼球中确定驾驶者的所述目标眼球。

10.根据权利要求9所述的装置，其特征在于，所述第一确定单元还用于：

若包含至少两个所述候选眼球，则进行定位提示，所述定位提示用于指示驾驶者按照预定方式控制眼部运动；

若存在所述候选眼球的眼球变化特征与预设眼球变化特征匹配，则将所述候选眼球确定为所述目标眼球，所述预设眼球变化特征为按照预设方式控制眼部运动时眼球的变化特征。

11.根据权利要求8所述的装置，其特征在于，所述定位模块还包括：

第一采集单元，用于若包含至少两个所述候选眼球，则通过摄像头采集人脸图像；

第二确定单元，用于确定所述人脸图像中驾驶者的目标眼球位置；

第三确定单元，用于根据所述目标眼球位置以及各个所述候选眼球对应的候选眼球位置，从至少一个所述候选眼球中确定驾驶者的所述目标眼球。

12.根据权利要求8至11任一所述的装置，其特征在于，所述目标眼球变化特征包括如下至少一种：眼球运动轨迹特征、眼球瞳孔直径变化特征、眼球遮挡时间特征和眼球遮挡范围特征。

13.根据权利要求8至11任一所述的装置，其特征在于，所述采集模块包括：

第四确定单元，用于车辆行驶过程中，确定所述眼球追踪传感器的采集频率；

第二采集单元，用于根据所述采集频率，通过所述眼球追踪传感器采集所述目标眼球的眼球变化特征。

14.根据权利要求13所述的装置，其特征在于，所述第四确定单元还用于：

根据连续行驶时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述连续行驶时长呈正相关关系；和/或，

根据当前行驶速度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述当前行驶速度呈正相关关系；和/或，

根据睡眠时长，确定所述眼球追踪传感器的采集频率，所述采集频率与所述睡眠时长呈负相关关系；和/或，

根据所述目标眼球的眼球变化特征与所述目标眼球变化特征之间的匹配度，确定所述眼球追踪传感器的采集频率，所述采集频率与所述匹配度呈正相关关系。

15.一种终端，其特征在于，所述终端包括处理器和存储器；所述存储器存储有至少一条指令，所述至少一条指令用于被所述处理器执行以实现如权利要求1至7任一所述的疲劳驾驶提醒的方法。

16.一种计算机可读存储介质，其特征在于，所述存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如权利要求1至7任一所述的疲劳驾驶提醒的方法。

Images