CN114821548A - 驾驶时使用手机行为的检测方法、报警方法、装置、车辆 - Google Patents

Abstract

本申请公开了一种驾驶时使用手机行为的检测方法、报警方法、装置、车辆，属于数据处理领域。该方法包括在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，并对间距时序队列中使用间距进行加权计算得到间距时序队列的间距平均值，且根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值；对间距平均值与距离阈值进行对比判断，若间距平均值大于距离阈值，并且人脸朝向结果为人脸朝向手机，则将驾驶员的使用手机行为判定为玩手机，若间距平均值不大于距离阈值，则将驾驶员的使用手机行为判定为打电话，并进行报警。本申请提高了图像中手机位置的准确度，提高了判断的准确率和实时性。

Description

驾驶时使用手机行为的检测方法、报警方法、装置、车辆

技术领域

本申请涉及数据处理领域，特别涉及一种驾驶时使用手机行为的检测方法、报警方法、装置、车辆、介质及设备。

背景技术

DMS(Driver Monitor System)为驾驶员监测系统的简称，是指驾驶员行驶过程中，全天候监测驾驶员的危险驾驶行为的信息技术系统。在发现驾驶员出现打电话或玩手机等驾驶状态后，DMS系统将会对此类行为进行及时的分析，并进行语音提示，起到警示驾驶员，纠正错误驾驶行为的作用。

如何将DMS技术检测驾驶员在驾驶时使用手机行为的种类是打电话还是玩手机应用到车辆上，是此行业亟待解决的问题。

发明内容

为了解决上述问题，本申请主要提供一种驾驶时使用手机行为的检测方法、装置、车辆、介质及设备。

第一方面，本申请实施例提供一种驾驶时使用手机行为的检测方法，其包括：

对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧图像中关于驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果；

根据手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当手机框位置变化量小于位置变化阈值时，确定当前帧图像的当前手机框位置；

根据人脸框检测结果和当前手机框位置，对当前帧图像中的人脸框和手机框之间的距离进行计算，得到使用间距；

在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，并对间距时序队列中使用间距进行加权计算得到间距时序队列的间距平均值，且根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值；

对间距平均值与距离阈值进行对比判断，若间距平均值大于距离阈值，并且人脸朝向结果为人脸朝向手机，则将驾驶员的使用手机行为判定为玩手机，若间距平均值不大于距离阈值，则将驾驶员的使用手机行为判定为打电话。

第二方面，本申请实施例提供一种驾驶时使用手机行为的报警方法，其包括：在通过方案一中的方法检测到驾驶员存在驾驶时使用手机行为的条件下，向驾驶员发出警告。

第三方面，本申请实施例提供一种驾驶时使用手机行为的检测装置，其包括：

感知信息获取模块，其用于对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧所述图像中关于所述驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果；

位置确定模块，其用于根据手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当手机框位置变化量小于位置变化阈值时，确定当前帧图像的当前手机框位置；

间距计算模块，其用于根据人脸框检测结果和当前手机框位置，对当前帧图像中的人脸框和手机框之间的距离进行计算，得到使用间距；

数据处理模块，其用于在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，并对间距时序队列中使用间距进行加权计算得到间距时序队列的间距平均值，且根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值；

报警判断模块，其用于对间距平均值与距离阈值进行对比判断，若间距平均值大于距离阈值，并且人脸朝向结果为人脸朝向手机，则将驾驶员的使用手机行为判定为玩手机，并进行报警，若间距平均值不大于距离阈值，则将驾驶员的使用手机行为判定为打电话，并进行报警。

第四方面，本申请实施例提供了一种车辆，其中，车辆包括方案三中的驾驶时使用手机行为的检测装置。

第五方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令被执行时，使得计算机执行方案一中的驾驶时使用手机行为的检测方法。

第六方面，本申请实施例提供了一种计算机设备，其包括处理器和存储器，存储器存储有计算机指令，计算机指令被处理器执行时实现方案一中的驾驶时使用手机行为的检测方法。

本申请实施例的技术方案通过根据直接获取的感知检测结果将本方案可用信息筛选出来，并利用可用信息确定每帧可用图像中的手机框的位置，将每帧图像中的人脸框和手机框之间的距离计算出，并在预设时间段内进行排序，根据预设时间段内的整个间距时序队列的间距平均值和距离阈值的比较，判断出使用手机行为是打电话还是玩手机。为图像中手机位置的确定提高准确度，提高使用手机行为种类判断的准确率和实时性。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图示例性的示出了本申请的一些实施例。

图1是本申请一种驾驶时使用手机行为的检测方法的具体实施方式的示意图；

图2是本申请一种驾驶时使用手机行为的检测装置的具体实施方式的示意图。

通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。

具体实施方式

下面结合附图对本申请的较佳实施例进行详细阐述，以使本申请的优点和特征能更易于被本领域技术人员理解，从而对本申请的保护范围做出更为清楚明确的界定。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

下面，以具体的实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面述及的具体的实施例可以相互结合形成新的实施例。对于在一个实施例中描述过的相同或相似的思想或过程，可能在其他某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。

图1示出了本申请一种驾驶时使用手机行为的检测方法的一个具体实施方式。

在图1所示的具体实施方式中，一种驾驶时使用手机行为的检测方法主要包括：

步骤S101，对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧图像中关于驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果。

本实施方式中，感知模型将每帧图像中关于驾驶员的感知结果输出，其人脸框检测结果可能是含有人脸框或者不含人脸框，人脸朝向结果与人脸框检测结果有关，当人脸框检测结果为含有人脸框时，则人脸朝向结果可能是人脸朝向手机或者人脸朝向其他方向，手机框检测结果可能是含有手机框或者不含手机框。直接从感知模型获取感知信息使得识别效率更高。

在图1所示的具体实施方式中，一种驾驶时使用手机行为的检测方法，还包括：

步骤S102，根据手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当手机框位置变化量小于位置变化阈值时，确定当前帧图像的当前手机框位置。

本实施方式中，在预设数量帧图像中，将每两帧图像中的手机框位置的变化进行计算，得出手机框位置变化量，当手机框位置变化量小于位置变化阈值时，才能认为当前帧图像的手机框的位置没有变动，便以确认手机框的位置，为后续计算奠定基础。

在本申请的一个具体实施例中，根据人脸框检测结果和手机框检测结果，将缺失人脸框、缺失手机框以及手机框的尺寸大于尺寸阈值的图像过滤掉，得到包含标准人脸框和标准手机框的当前帧图像。

本实施例中，每帧图像都会有其对应的人脸框检测结果和手机框检测结果，由于不是每帧图像都适合去做使用手机行为的判断，所以需要筛选出可用的图像。当手机处在摄像头前面时，手机就会显得超级大，人脸显得超级小，该帧图像就会被过滤掉，说明该帧图像中手机框的检测结果是不可信的。对于缺失手机框或者缺失人脸框的图像来说，该帧图像也是不可用的，需要滤除掉。

需要说明的是，尽管本申请方案以手机作为示例进行说明，但是应当理解的是，本申请方案同样适用于其他可能分散驾驶员注意力导致危险驾驶行为的物品，包括但不限于具有通信功能的其他移动终端设备，如平板、计算机、游戏机、手表、电子书阅读器等；具有信息提供功能或娱乐消遣功能的车内常见物品，如杂志、书籍、报刊、地图等。

另外，需要说明的是，本申请中提及的“玩手机”行为，包括除“打电话”以外的所有其他使用手机的行为，例如使用手机玩游戏、发送信息、浏览网页、操作界面等，均包括在本申请的保护范围以内。

在本申请的一个具体实施例中，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当手机框位置变化量小于位置变化阈值时，确定当前帧图像的当前手机框位置，包括：根据预设数量帧图像的手机框检测结果中的手机框位置，对每相邻两帧图像的手机框位置进行位置变化计算，得到手机框位置变化量；当手机框位置变化量均小于位置变化阈值时，将当前帧图像的手机框检测结果中的手机框位置作为当前手机框位置。

本实施例中，在预设数量帧图像中，通过协方差公式对每帧图像中的手机框位置的变化进行计算，若得到的手机位置变化量小于位置变化阈值，则说明当前帧图像中的手机框的位置的变化在允许的误差范围内，其可以被认为手机位置是确定的，即手机位置的准确度可信。

在图1所示的具体实施方式中，一种驾驶时使用手机行为的检测方法，还包括：

步骤S103，根据人脸框检测结果和当前手机框位置，对当前帧图像中的人脸框和手机框之间的距离进行计算，得到使用间距。

本实施方式中，当前帧图像的人脸检测结果为包含人脸框，一并获得人脸框的位置，并且确定当前帧图像中的当前手机框位置，根据当前帧图像中的人脸框的位置和当前手机框位置，可以得到人脸框和手机框之间的距离，即使用间距。

在图1所示的具体实施方式中，一种驾驶时使用手机行为的检测方法，还包括：

步骤S104，在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，并对间距时序队列中使用间距进行加权计算得到间距时序队列的间距平均值，且根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值。

本实施方式中，将不可用图像滤除后，对可用图像中的每帧图像的使用间距根据图像中的时间戳按照先后顺序进行排序，得到对应的间距时序队列；在预设时间段内的间距时序队列使得对使用手机行为的判断更加精准。为确保对使用手机行为种类判断的准确率，需要计算间距时序队列的使用间距的平均值，即间距平均值，为后续判断奠定基础。

在本申请的一个具体实施例中，根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值，包括：根据间距时序队列中每帧图像对应的人脸框的尺寸信息和对应的手机框的尺寸信息，确定距离阈值。

本实施例中，每帧图像都有属性记录图像中人脸框的尺寸信息和对应的手机框的尺寸信息，方便确定距离阈值，为后续计算奠定基础。

在本申请的一个具体实施例中，根据间距时序队列中每帧图像对应的人脸框的尺寸信息和对应的手机框的尺寸信息，确定距离阈值，包括：根据间距时序队列中每帧图像对应的人脸框的的尺寸信息与手机框的的尺寸信息，分别对人脸框的宽度和手机框的对角线取相同权重之和，作为每帧图像对应的宽度距离；对间距时序队列的宽度距离进行加权计算得到距离阈值。

本实施例中，间距时序队列中的每帧图像都记录有对应的人脸框的长度和宽度，手机框的长度和宽度，由此可以求出手机框的对角线的长度，将人脸框的宽度和手机框对角线之和乘以0.5，得到每一帧图像对应的宽度距离，由于每帧图像中的人脸框和手机框的大小不一定完全相同，故每帧图像得到的宽度距离不一定相等，故而需要将间距时序队列中的每个宽度距离进行加权平均，得到能够用来衡量驾驶员使用手机行为种类的距离阈值，即，可参考距离阈值来判断驾驶员是在打电话还是在玩手机。

在本申请的一个具体实施例中，在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，包括：将获取到的每帧图像的使用间距对应的最新一帧图像的时间戳，减去在图像排序中最初获取到的使用间距对应的末尾一帧图像的时间戳，得到时间段结果；对时间段结果与预设时间段进行对比判断，若时间段结果不等于预设时间段，则继续统计下一帧图像，或者丢弃末尾一帧图像，直至时间段结果等于预设时间段，从而得到预设时间段内的间距时序队列。

本实施例中，在当前排序过程中，将正在排序的最新一帧图像中的时间戳减去已经排好序的最末尾一帧图像的时间戳，根据得到的时间段结果，查看该间距时序队列的时长是否在预设时间段内，若该间距时序队列的时长不满或超过预设时间段，则对下一帧图像进行排序或将末尾一帧图像进行滤除，只有当该时序队列的时长等于预设时间段时，则确定好该预设时间段内的间距时序队列，便于提高准确性。

在图1所示的具体实施方式中，一种驾驶时使用手机行为的检测方法，还包括：

步骤S105，对间距平均值与距离阈值进行对比判断，若间距平均值大于距离阈值，并且人脸朝向结果为人脸朝向手机，则将驾驶员的使用手机行为判定为玩手机，并进行报警，若间距平均值不大于距离阈值，则将驾驶员的使用手机行为判定为打电话，并进行报警。

本实施方式中，以距离阈值作为分界值，判断驾驶员的使用手机行为究竟是玩手机还是打电话。将距离阈值作为标准去单独判断使用手机行为的种类，能够保证判断的精准度。

在本申请的一个具体实施例中，当间距平均值大于距离阈值时，若人脸朝向结果不为人脸朝向手机，则对驾驶员的其他驾驶行为进行判断，其中其他驾驶行为不包括玩手机和打电话。

本实施例中，当人脸不朝向手机时，即使间距平均值大于距离阈值，也不会对使用手机行为种类进行判断，转而对驾驶员的其他驾驶行为进行报警判断，节省了对驾驶员危险行为的判断时间。

在本申请的一个具体实施例中，当驾驶员的驾驶车辆的速度大于速度阈值时，每隔预设时间间隔，重新对驾驶员的使用手机行为进行报警判断。

本实施例中，本方案是针对在驾驶过程中对驾驶员的使用手机行为的种类进行区分，并报警提示，故驾驶车辆的速度只要大于0即可。报警的预设时间间隔设置的不同使得关于使用手机行为种类的区分以及报警更加及时准确。

本申请通过感知模型直接获取对每帧图像的感知检测结果，其包括每帧图像中关于驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果，这些感知检测结果与做使用手机行为种类的判断直接相关，直接获取可以提高效率，为后续的计算奠定基础；将直接获取的感知检测结果进行筛选，将可用于判断使用手机行为种类的图像筛选出，即得到的每帧图像包含人脸框、手机框、人脸框和手机框的比例标准，为后续的计算奠定基础；通过预设数量帧图像确定出当前帧图像的手机框的位置，保证了手机位置的准确度，以及确认当前帧图像包含手机框；根据当前帧图像中的人脸框位置和当前手机框位置，可以得到人脸框和手机框之间的距离，为后续判断使用手机行为的种类是打电话还是玩手机打下坚实的基础；对可用图像中的每帧图像的使用间距根据图像中的时间戳按照先后顺序进行排序，得到对应的间距时序队列；在预设时间段内的间距时序队列使得对使用手机行为的判断更加精准，为确保对使用手机行为种类判断的准确率，需要计算间距时序队列的使用间距的平均值，即间距平均值，为后续判断奠定基础；将距离阈值作为标准去单独判断使用手机行为的种类，能够保证使用手机行为种类判断的精准度。

在本申请的另一个具体实施方式中，一种驾驶时使用手机行为的报警方法，其包括：在通过任一实施例中驾驶时使用手机行为的检测方法检测到驾驶员存在驾驶时使用手机行为的条件下，向驾驶员发出警告。

本实施方式中，无论驾驶员的使用手机行为的种类是玩手机还是打电话，都会向驾驶员发出警告提醒，及时告知驾驶员危险，并且会对驾驶员的使用手机行为是何种行为进行语音报警提示，使得本方案更加准确及时。

图2示出了本申请一种驾驶时使用手机行为的检测装置的具体实施方式。

在图2所示的具体实施方式中，一种驾驶时使用手机行为的检测装置主要包括：

感知信息获取模块201，其用于对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧图像中关于驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果；

位置确定模块202，其用于根据手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当手机框位置变化量小于位置变化阈值时，确定当前帧图像的当前手机框位置；

间距计算模块203，其用于根据人脸框检测结果和当前手机框位置，对当前帧图像中的人脸框和手机框之间的距离进行计算，得到使用间距；

数据处理模块204，其用于在预设时间段内，对获取到的每帧图像的使用间距进行排序，得到间距时序队列，并对间距时序队列中使用间距进行加权计算得到间距时序队列的间距平均值，且根据间距时序队列中每帧图像对应的人脸框检测结果和手机框检测结果确定距离阈值；

报警判断模块205，其用于对间距平均值与距离阈值进行对比判断，若间距平均值大于距离阈值，并且人脸朝向结果为人脸朝向手机，则将驾驶员的使用手机行为判定为玩手机，并进行报警，若间距平均值不大于距离阈值，则将驾驶员的使用手机行为判定为打电话，并进行报警。

本实施方式中，感知信息获取模块201直接获取感知模型对图像的感知检测结果，提高效率，为后续的计算奠定基础；位置确定模块202通过预设数量帧图像确定出当前帧图像的手机框的位置，保证了手机位置的准确度，以及确认当前帧图像包含手机框；间距计算模块203根据当前帧图像中的人脸框的位置和当前手机框位置，可以得到人脸框和手机框之间的距离，为后续判断使用手机行为的种类是打电话还是玩手机打下坚实的基础；数据处理模块204对可用图像中的每帧图像的使用间距根据图像中的时间戳按照先后顺序进行排序，得到对应的间距时序队列；在预设时间段内的间距时序队列使得对使用手机行为的判断更加精准。为确保对使用手机行为种类判断的准确率，需要计算间距时序队列的使用间距的平均值，即间距平均值，为后续判断奠定基础；报警判断模块205将距离阈值作为标准去单独判断使用手机行为的种类，能够保证使用手机行为种类判断的精准度。

本申请提供的一种驾驶时使用手机行为的检测装置，可用于执行上述任一实施例描述的驾驶时使用手机行为的检测方法，其实现原理和技术效果类似，在此不再赘述。

在本申请的一个具体实施例中，本申请所提出的一种驾驶时使用手机行为的检测装置中的各功能模块可直接在硬件中、在由处理器执行的软件模块中或在两者的组合中。

软件模块可驻留在RAM存储器、快闪存储器、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可装卸盘、CD-ROM或此项技术中已知的任何其它形式的存储介质中。示范性存储介质耦合到处理器，使得处理器可从存储介质读取信息和向存储介质写入信息。

处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：Application Specific Integrated Circuit，简称：ASIC)、现场可编程门阵列(英文：Field Programmable Gate Array，简称：FPGA)或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件或其任何组合等。通用处理器可以是微处理器，但在替代方案中，处理器可以是任何常规处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合，例如DSP与微处理器的组合、多个微处理器、结合DSP核心的一个或一个以上微处理器或任何其它此类配置。在替代方案中，存储介质可与处理器成一体式。处理器和存储介质可驻留在ASIC中。ASIC可驻留在用户终端中。在替代方案中，处理器和存储介质可作为离散组件驻留在用户终端中。

在本申请的另一个具体实施方式中，一种车辆，其中，车辆包括任一实施例中的驾驶时使用手机行为的检测装置。可选的，该车辆包括处理器和存储器，处理器和存储器耦合，该车辆用于实现本申请说明书附图1所示的任一实施例中的驾驶时使用手机行为的检测方法。

在本申请的另一个具体实施方式中，一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令被执行时，使得计算机执行任一实施例中的驾驶时使用手机行为的检测方法。

在本申请的另一个具体实施方式中，一种计算机设备，其包括处理器和存储器，存储器存储有计算机指令，计算机指令被处理器执行时实现任一实施例中的驾驶时使用手机行为的检测方法。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

以上所述仅为本申请的实施例，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利保护范围内。

Claims (13)

1.一种驾驶时使用手机行为的检测方法，其特征在于，包括：

对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧所述图像中关于所述驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果；

根据所述手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当所述手机框位置变化量小于位置变化阈值时，确定所述当前帧图像的当前手机框位置；

根据所述人脸框检测结果和所述当前手机框位置，对所述当前帧图像中的人脸框和手机框之间的距离进行计算，得到使用间距；

在预设时间段内，对获取到的每帧图像的所述使用间距进行排序，得到间距时序队列，并对所述间距时序队列中所述使用间距进行加权计算得到所述间距时序队列的间距平均值，且根据所述间距时序队列中每帧图像对应的所述人脸框检测结果和所述手机框检测结果确定距离阈值；

对所述间距平均值与所述距离阈值进行对比判断，若所述间距平均值大于所述距离阈值，并且所述人脸朝向结果为人脸朝向手机，则将所述驾驶员的使用手机行为判定为玩手机，若所述间距平均值不大于所述距离阈值，则将所述驾驶员的使用手机行为判定为打电话。

2.如权利要求1所述的驾驶时使用手机行为的检测方法，其特征在于，根据所述人脸框检测结果和所述手机框检测结果，将缺失所述人脸框、缺失所述手机框以及所述手机框的尺寸大于尺寸阈值的图像过滤掉，得到包含标准人脸框和标准手机框的所述当前帧图像。

3.如权利要求2所述的驾驶时使用手机行为的检测方法，其特征在于，所述根据所述间距时序队列中每帧图像对应的所述人脸框检测结果和所述手机框检测结果确定距离阈值，包括：

根据所述间距时序队列中每帧图像对应的人脸框的尺寸信息和对应的手机框的尺寸信息，确定所述距离阈值。

4.如权利要求3所述的驾驶时使用手机行为的检测方法，其特征在于，所述根据所述间距时序队列中每帧图像对应的人脸框的尺寸信息和对应的手机框的尺寸信息，确定所述距离阈值，包括：

根据所述间距时序队列中每帧图像对应的人脸框的尺寸信息与对应的手机框的尺寸信息，分别对所述人脸框的宽度和所述手机框的对角线取相同权重之和，作为每帧图像对应的宽度距离；

对所述间距时序队列的所述宽度距离进行加权计算得到所述距离阈值。

5.如权利要求1所述的驾驶时使用手机行为的检测方法，其特征在于，所述根据所述手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当所述手机框位置变化量小于位置变化阈值时，确定所述当前帧图像的当前手机框位置，包括：

根据所述预设数量帧图像的所述手机框检测结果中的手机框位置，对每相邻两帧图像的所述手机框位置进行位置变化计算，得到所述手机框位置变化量；

当所述手机框位置变化量小于所述位置变化阈值时，将所述当前帧图像的所述手机框检测结果中的手机框位置作为所述当前手机框位置。

6.如权利要求1所述的驾驶时使用手机行为的检测方法，其特征在于，还包括：

当所述间距平均值大于所述距离阈值时，若所述人脸朝向结果不为所述人脸朝向手机，则对所述驾驶员的其他驾驶行为进行判断，其中所述其他驾驶行为不包括所述玩手机和所述打电话。

7.如权利要求1所述的驾驶时使用手机行为的检测方法，其特征在于，还包括：

当所述驾驶员的驾驶车辆的速度大于速度阈值时，每隔预设时间间隔，重新对所述驾驶员的使用手机行为进行报警判断。

8.如权利要求1所述的驾驶时使用手机行为的检测方法，其特征在于，所述在预设时间段内，对获取到的每帧图像的所述使用间距进行排序，得到间距时序队列，包括：

将获取到的每帧图像的所述使用间距对应的最新一帧图像的时间戳，减去在图像排序中最初获取到的所述使用间距对应的末尾一帧图像的时间戳，得到时间段结果；

对所述时间段结果与所述预设时间段进行对比判断，若所述时间段结果不等于所述预设时间段，则继续统计下一帧图像，或者丢弃所述末尾一帧图像，直至所述时间段结果等于所述预设时间段，得到所述预设时间段内的所述间距时序队列。

9.一种驾驶时使用手机行为的报警方法，其特征在于，包括：在通过权利要求1-8中任一项所述的方法检测到驾驶员存在驾驶时使用手机行为的条件下，向所述驾驶员发出警告。

10.一种驾驶时使用手机行为的检测装置，其特征在于，包括：

感知信息获取模块，其用于对连续帧图像的每帧图像中的驾驶员进行感知检测，得到每帧所述图像中关于所述驾驶员的人脸朝向结果、人脸框检测结果和手机框检测结果；

位置确定模块，其用于根据所述手机框检测结果，对包含当前帧图像在内的预设数量帧图像的手机框位置变化量进行计算，当所述手机框位置变化量小于位置变化阈值时，确定所述当前帧图像的当前手机框位置；

间距计算模块，其用于根据所述人脸框检测结果和所述当前手机框位置，对所述当前帧图像中的所述人脸框和所述手机框之间的距离进行计算，得到使用间距；

数据处理模块，其用于在预设时间段内，对获取到的每帧图像的所述使用间距进行排序，得到间距时序队列，并对所述间距时序队列中所述使用间距进行加权计算得到所述间距时序队列的间距平均值，且根据所述间距时序队列中每帧图像对应的所述人脸框检测结果和所述手机框检测结果确定距离阈值；

报警判断模块，其用于对所述间距平均值与所述距离阈值进行对比判断，若所述间距平均值大于所述距离阈值，并且所述人脸朝向结果为人脸朝向手机，则将所述驾驶员的使用手机行为判定为玩手机，若所述间距平均值不大于所述距离阈值时，则将所述驾驶员的使用手机行为判定为打电话。

11.一种车辆，其特征在于，所述车辆包括如权利要求10所述的驾驶时使用手机行为的检测装置。

12.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，其特征在于，所述计算机指令被执行时，使得计算机执行如权利要求1-8中任一项所述的驾驶时使用手机行为的检测方法。

13.一种计算机设备，其包括处理器和存储器，所述存储器存储有计算机指令，其特征在于，所述计算机指令被所述处理器执行时实现如权利要求1-8中任一项所述的驾驶时使用手机行为的检测方法。

Images