CN111310542B - 吸烟行为检测方法及系统、终端、存储介质 - Google Patents

Abstract

本发明公开了一种吸烟行为检测方法及系统、终端、存储介质，其中方法包括如下步骤：获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，基于吸烟图像数据初步判断行为对象是否存在吸烟行为，当初步判断结果为是时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。采用本发明，通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，可以保证检测信息的准确性、提高行为分析的多样性、有利于吸烟行为检测的广泛普及。

Description

吸烟行为检测方法及系统、终端、存储介质

技术领域

本发明涉及吸烟行为研究技术领域，尤其涉及一种吸烟行为检测方法及系统、终端、存储介质。

背景技术

吸烟行为的检测与分析是吸烟行为研究中最基础最重要的环节，现有技术中，通过借助吸烟行为记录仪(即一种手持式的吸烟检测装置)可以检测吸烟者在吸烟过程中的相关数据(如，吸烟开始时间、结束时间、气体流速等信息)。然而，由于所借助的记录仪为手持式设备，因此会在很大程度上改变使用者的吸烟习惯，包括但不限于吸烟深度、抽吸量、吸烟动作，导致检测的数据不能准确表达吸烟者的吸烟行为；同时，通过吸烟行为记录仪记录使用者的吸烟情况，记录数据的人力、物力成本较高，不能大量记录数据，普及性较差；并且，吸烟行为记录仪只能记录吸烟者吸烟相关信息，不能记录吸烟者本身的性别、年龄等其它综合信息，影响吸烟行为的多样化分析。

发明内容

本发明提供一种吸烟行为检测方法及系统、终端、存储介质，通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，可以保证检测信息的准确性、提高行为分析的多样性、有利于吸烟行为检测的广泛普及。

本发明第一方面提供了一种吸烟行为检测方法，可包括：

获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

基于吸烟图像数据初步判断行为对象是否存在吸烟行为；

当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

进一步的，上述基于吸烟图像数据初步判断行为对象是否存在吸烟行为，包括：

当检测到吸烟图像数据中存在香烟图像时，基于行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定行为对象是否存在吸烟行为。如当在吸烟图像数据中检测到有香烟的图像，且行为对象全身关键点位置中的手部关键点靠近嘴部关键点，即图像中出现香烟且用户的手部靠近嘴部区域时，可以初步确认行为对象存在吸烟行为。

进一步的，上述吸烟行为信息包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，上述基于吸烟信息数据深入分析行为对象的吸烟行为信息，包括：

对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，上述方法还包括：

在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，分析人脸角度的人脸3D角度信息，根据人脸3D角度信息对烟头光斑进行旋转处理，以消除烟头红外光斑中的无关信息对行为分析的影响。

例如，可以利用人脸角度的信息以及香烟角度的信息，模拟三维空间情况，对烟头的光斑大小进行旋转。计算出旋转至正面时，烟头光斑对应的大小。此处光斑的面积可以用光斑所在区域的外接矩形的面积来代替。具体计算时，可以计算光斑的外接框，通过计算外接框的长height_old、宽width_old旋转之后所对应的长height_new、宽width_new，来计算得到旋转之后的外接矩形的面积area_new。具体的计算公式如下：

width_new＝width_old÷cosα

height_new＝height_old÷cosβ

area_new＝width_new×height_new

其中，α为偏横角，β为俯仰角。

进一步的，上述方法还包括：

在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，采用彩色场景捕捉装置与行为对象之间的距离对烟头大小进行缩放处理，以消除烟头大小对行为分析的不良影响。

例如，可以利用行为对象到彩色摄像头的距离，将烟头及烟雾的尺度信息data，缩放到在同一距离下对应的尺度。具体的计算公式如下：

data_new＝data_old÷d×norm

其中，d是行为对象到彩色摄像头的距离，norm是需要归一化到的尺度，由人为给定。

进一步的，在去除无关信息或尺度归一化之后，可以根据对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值之间的关系，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

例如，通过红外图像得到的每一帧烟头光斑的面积，求一阶导数，再累加一阶导数，可以求得抽吸量，具体公式如下：

其中，area_i是第i帧图像的光斑面积，area_i+1是第i+1帧的光斑面积。

再如，通过计算烟头温度升高的平均速率v，乘以烟头在较高温度时的持续时间t，也可以计算得到抽吸量。

本发明实施例第二方面提供了一种吸烟行为检测系统，可包括：

彩色场景捕捉装置，用于采集行为对象周围的吸烟图像数据，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个；

吸烟信息检测装置，用于采集行为对象的吸烟信息数据，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

服务器，用于获取吸烟图像数据和吸烟信息数据；

所述服务器，还用于基于吸烟图像数据初步判断行为对象是否存在吸烟行为；

所述服务器，还用于当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

进一步的，在基于吸烟图像数据初步判断行为对象是否存在吸烟行为时，

所述服务器，具体用于基于行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定行为对象是否存在吸烟行为。

进一步的，吸烟行为信息包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，服务器还用于对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，服务器还用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，分析人脸角度的人脸3D角度信息，根据人脸3D角度信息对烟头光斑进行旋转处理。

进一步的，服务器还用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，采用彩色场景捕捉装置与行为对象之间的距离对烟头大小进行缩放处理。

本发明实施例第三方面提供了一种吸烟行为检测终端，可包括：

吸烟数据获取模块，用于获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

行为初判断模块，用于基于吸烟图像数据初步判断行为对象是否存在吸烟行为；

行为深入分析模块，用于当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

进一步的，上述行为初判断模块具体用于当检测到吸烟图像数据中存在香烟图像时，基于行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定行为对象是否存在吸烟行为。

进一步的，上述吸烟行为信息包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，上述行为深入分析模块，具体用于对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

进一步的，上述终端还包括：

角度影响消除模块，用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，分析人脸角度的人脸3D角度信息，根据人脸3D角度信息对烟头光斑进行旋转处理。

进一步的，上述终端还包括：

距离影响消除模块，用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，采用彩色场景捕捉装置与行为对象之间的距离对烟头大小进行缩放处理。

本发明实施例第四方面提供了一种计算机存储介质，计算机存储介质存储有多条指令，指令适于由处理器加载并执行以下步骤：

获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

基于吸烟图像数据初步判断行为对象是否存在吸烟行为；

当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

有益效果

在本发明中，首先获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据。基于吸烟图像数据初步判断行为对象是否存在吸烟行为，如当在吸烟图像数据中检测到有香烟的图像，且行为对象全身关键点位置中的手部关键点靠近嘴部关键点，即图像中出现香烟且用户的手部靠近嘴部区域时，可以初步确认行为对象存在吸烟行为；也可以同时结合吸烟图像数据和吸烟信息数据初步判断用户是否存在吸烟行为，如当图像中有香烟，且红外摄像头检测到光照区域发生明显变化时，或者烟头温度发生明显变化时或者行为对象周围烟雾发生明显变化时，可以认为可能有吸烟行为发生。当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息，可通过对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、所述结束时间、所述抽吸量以及所述抽吸深度中的一个或多个吸烟行为信息。本发明可以实现一种无感的吸烟行为检测，不会改变吸烟者的吸烟习惯，检测的数据能准确表达吸烟者的吸烟行为。通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，保证了检测信息的准确性、提高了行为分析的多样性、有利于吸烟行为检测的广泛普及。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的吸烟行为检测系统的结构示意图；

图2是本发明实施例提供的一种吸烟行为检测方法的流程示意图；

图3是本发明实施例提供的一种吸烟行为检测终端的结构示意图；

图4是本发明实施例提供的另一种吸烟行为检测终端的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含，术语“第一”和“第二”仅是为了区别命名，并不代表数字的大小或者排序。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

本申请中吸烟行为检测系统如图1所示，包括服务器1和彩色场景捕捉装置2和吸烟信息检测装置3。其中，

彩色场景捕捉装置2，用于采集行为对象周围的吸烟图像数据，其中，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、彩色场景捕捉装置与行为对象之间的距离以及行为对象的全身关键点位置中的一个或多个。

吸烟信息检测装置3，用于采集行为对象的吸烟信息数据，其中，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个。

服务器1，用于获取吸烟图像数据和吸烟信息数据。

所述服务器1内置的处理器用于基于吸烟图像数据初步判断行为对象是否存在吸烟行为。

所述服务器1内置的处理器还用于当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

可以理解的是，在基于吸烟图像数据初步判断行为对象是否存在吸烟行为时，所述服务器1内置的处理器具体用于基于行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定行为对象是否存在吸烟行为。

可选的，吸烟行为信息可以包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

所述服务器1，还用于对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

所述服务器1，还用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，分析人脸角度的人脸3D角度信息，根据人脸3D角度信息对烟头光斑进行旋转处理。

所述服务器1，还用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，采用彩色场景捕捉装置与行为对象之间的距离对烟头大小进行缩放处理。

需要说明的是，在上述吸烟行为检测系统可以实现一种无感的吸烟行为检测，具体的检测过程可以参见图2描述的检测流程。

需要说明的是，本发明实施例中的，吸烟行为检测系统可以是具备图像采集功能、吸烟信息采集功能以及数据分析处理能力的计算机。系统可以内置数据处理器、彩色场景捕捉装置和吸烟信息检测装置。

如图2所示，本发明实施例还提供了一种吸烟行为检测方法，至少可以包括以下几个步骤：

S101，获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据。

具体实现中，处理器可以获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据。可以理解的是，上述吸烟图像数据至少可以包括香烟图像、待检测行为对象的人脸角度、人脸位置、彩色场景捕捉装置与行为对象之间的距离以及行为对象的全身关键点位置中的一个或多个，其中，行为对象可以是当前环境中被检测是否存在吸烟行为的人。上述吸烟信息数据至少可以包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个。

需要说明的是，上述彩色场景捕捉装置可以是彩色摄像头，吸烟信息检测装置可以是红外摄像头、温度传感器或者烟雾检测器中的一种或多种。其中，红外摄像头能够检测烟头散发的红外光，当场景中有较强的红外光变化时，能够记录光照区域。温度传感器能够检测场景中烟头的温度及其变化，烟头表面温度通常在200-300摄氏度之间，当有吸烟行为发生时，烟头温度能够达到700-800摄氏度。

需要说明的是，处理器可以根据彩色场景捕捉装置拍摄的行为对象的图像，分析出该行为对象的年龄范围、性别，识别行为人的手部动作、烟雾的变化情况，计算出人脸的角度以及行为对象与终端之间的距离。

S102，基于吸烟图像数据初步判断行为对象是否存在吸烟行为。

具体实现中，处理器可以基于吸烟图像数据初步判断行为对象是否存在吸烟行为，例如，当在吸烟图像数据中检测到有香烟的图像，且行为对象全身关键点位置中的手部关键点靠近嘴部关键点，即图像中出现香烟且用户的手部靠近嘴部区域时，可以初步确认行为对象存在吸烟行为。

在可选实施例中，也可以同时结合吸烟图像数据和吸烟信息数据初步判断用户是否存在吸烟行为，例如，当图像中有香烟，且红外摄像头检测到光照区域发生明显变化时，或者烟头温度发生明显变化时或者行为对象周围烟雾发生明显变化时，可以认为可能有吸烟行为发生。

S103，当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

需要说明的是，为进一步确定行为对象是否在吸烟，或检测其吸烟时的吸烟行为信息，可以在初步判断结果的基础上，再采用吸烟信息数据做进一步判断。

可以理解的是，在进行深入分析之前，需要基于人脸角度的人脸3D角度信息消除烟头红外光斑中的无关信息对行为分析的影响，或者基于行为对象到彩色摄像头的距离消除烟头大小对行为分析的不良影响。例如，可以利用人脸角度的信息以及香烟角度的信息，模拟三维空间情况，对烟头的光斑大小进行旋转。计算出旋转至正面时，烟头光斑对应的大小。此处光斑的面积可以用光斑所在区域的外接矩形的面积来代替。具体计算时，可以计算光斑的外接框，通过计算外接框的长height_old、宽width_old旋转之后所对应的长height_new、宽width_new，来计算得到旋转之后的外接矩形的面积area_new。具体的计算公式如下：

width_new＝width_old÷cosα

height_new＝height_old÷cosβ

area_new＝width_new×height_new

其中，α为偏横角，β为俯仰角。

再如，可以利用行为对象到彩色摄像头的距离，将烟头及烟雾的尺度信息data，缩放到在同一距离下对应的尺度。具体的计算公式如下：

data_new＝data_old÷d×norm

其中，d是用户到摄像头的距离，norm是需要归一化到的尺度，由人为给定。

进一步的，在去除无关信息或尺度归一化之后，可以根据对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值之间的关系，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。例如，通过红外图像得到的每一帧烟头光斑的面积，求一阶导数，再累加一阶导数，可以求得抽吸量，具体公式如下：

其中，area_i是第i帧图像的光斑面积，area_i+1是第i+1帧的光斑面积。

再如，通过计算烟头温度升高的平均速率v，乘以烟头在较高温度时的持续时间t，也可以计算得到抽吸量。

在本发明实施例中，首先获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，基于吸烟图像数据初步判断行为对象是否存在吸烟行为，当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，保证了检测信息的准确性、提高了行为分析的多样性、有利于吸烟行为检测的广泛普及。

本发明实施例还提供了一种计算机存储介质，计算机存储介质可以存储有多条指令，指令适于由处理器加载并执行如上述图2所示实施例的方法步骤，具体执行过程可以参见图2所示实施例的具体说明，在此不进行赘述。

下面将结合附图3，对本发明实施例提供的吸烟行为检测终端进行详细介绍。需要说明的是，附图3所示的吸烟行为检测终端，用于执行本发明图2所示实施例的方法，为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明图2所示的实施例。

请参见图3，为本发明实施例提供了一种吸烟行为检测终端的结构示意图。如图3所示，本发明实施例的吸烟行为检测终端10可以包括：吸烟数据获取模块101、行为初判断模块102、行为深入分析模块103、角度影响消除模块104和距离影响消除模块105。

吸烟数据获取模块101，用于获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、彩色场景捕捉装置与行为对象之间的距离以及行为对象的全身关键点位置中的一个或多个，吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个。

行为初判断模块102，用于基于吸烟图像数据初步判断行为对象是否存在吸烟行为。

在可选实施例中，行为初判断模块102，具体用于当检测到吸烟图像数据中存在香烟图像时，基于行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定行为对象是否存在吸烟行为。

行为深入分析模块103，用于当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。

其中，吸烟行为信息可以包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

在可选实施例中，行为深入分析模块103，具体用于对比烟头红外光斑的大小变化、烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

需要说明的是，为消除行为分析中的一些无关信息的影响，角度影响消除模块104，用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，分析人脸角度的人脸3D角度信息，根据人脸3D角度信息对烟头光斑进行旋转处理。

距离影响消除模块105，用于在基于吸烟信息数据深入分析行为对象的吸烟行为信息之前，采用彩色场景捕捉装置与行为对象之间的距离对烟头大小进行缩放处理。

需要说明的是，在本发明实施例中，吸烟行为分析终端中各个模块的执行过程可以参见上述方法实施例中的描述，此处不再赘述。

在本发明实施例中，首先获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，基于吸烟图像数据初步判断行为对象是否存在吸烟行为，当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，保证了检测信息的准确性、提高了行为分析的多样性、有利于吸烟行为检测的广泛普及。

本申请实施例还提供了另外一种吸烟行为检测终端。如图4所示，吸烟行为检测终端20可以包括：至少一个处理器201，例如CPU，至少一个网络接口204，用户接口203，存储器205，至少一个通信总线202，可选地，还可以包括吸烟数据获取单元206。其中，通信总线202用于实现这些组件之间的连接通信。其中，用户接口203可以包括触摸屏、键盘或鼠标等等。网络接口204可选的可以包括标准的有线接口、无线接口(如WI-FI接口)，通过网络接口204可以与服务器建立通信连接。存储器205可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器，存储器205包括本发明实施例中的flash。存储器205可选的还可以是至少一个位于远离前述处理器201的存储系统。吸烟数据获取单元206可选的可以包括彩色摄像头和红外摄像头、温度传感器和烟雾检测器。如图4所示，作为一种计算机存储介质的存储器205中可以包括操作系统、网络通信模块、用户接口模块以及程序指令。

需要说明的是，网络接口204可以连接接收器、发射器或其他通信模块，其他通信模块可以包括但不限于WiFi模块、蓝牙模块等，可以理解，本发明实施例中吸烟行为检测终端也可以包括接收器、发射器和其他通信模块等。

处理器201可以用于调用存储器205中存储的程序指令，并使吸烟行为检测终端20执行以下操作：

获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，所述吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述彩色场景捕捉装置与所述行为对象之间的距离以及所述行为对象的全身关键点位置中的一个或多个，所述吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为；

当初步判断所述行为对象存在吸烟行为时，基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息。

在一些实施例中，终端20在基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为时，具体用于：

当检测到所述吸烟图像数据中存在香烟图像时，基于所述行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定所述行为对象是否存在吸烟行为。

在一些实施例中，吸烟行为信息包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

在一些实施例中，终端20在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息时，具体用于：

对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、所述结束时间、所述抽吸量以及所述抽吸深度中的一个或多个。

在一些实施例中，终端20还用于在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，分析所述人脸角度的人脸3D角度信息，根据所述人脸3D角度信息对烟头光斑进行旋转处理。

在一些实施例中，终端20还用于在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，采用所述彩色场景捕捉装置与所述行为对象之间的距离对烟头大小进行缩放处理。

在本发明实施例中，首先获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，基于吸烟图像数据初步判断行为对象是否存在吸烟行为，当初步判断行为对象存在吸烟行为时，基于吸烟信息数据深入分析行为对象的吸烟行为信息。通过综合分析彩色摄像头和吸烟信息检测装置采集的相关信息，保证了检测信息的准确性、提高了行为分析的多样性、有利于吸烟行为检测的广泛普及。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (7)

1.一种吸烟行为检测方法，其特征在于，包括：

获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，所述吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，所述吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为；

当初步判断所述行为对象存在吸烟行为时，基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息；

在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，分析所述人脸角度的人脸3D角度信息，根据所述人脸3D角度信息对烟头红外光斑进行旋转处理，计算出烟头红外光斑旋转至正面时对应的大小；采用所述彩色场景捕捉装置与所述行为对象之间的距离对烟头红外光斑大小进行缩放处理；

所述基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息，包括：

对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

2.根据权利要求1所述的吸烟行为检测方法，其特征在于，所述基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为，包括：

当检测到所述吸烟图像数据中存在香烟图像时，基于所述行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定所述行为对象是否存在吸烟行为。

3.根据权利要求1所述的吸烟行为检测方法，其特征在于，

所述吸烟行为信息包括吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

4.一种吸烟行为检测系统，其特征在于，包括：

彩色场景捕捉装置，用于采集行为对象周围的吸烟图像数据，所述吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个；

吸烟信息检测装置，用于采集所述行为对象的吸烟信息数据，所述吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

服务器，用于获取所述吸烟图像数据和所述吸烟信息数据；

所述服务器，还用于基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为；

所述服务器，还用于当初步判断所述行为对象存在吸烟行为时，基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息；

在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，分析所述人脸角度的人脸3D角度信息，根据所述人脸3D角度信息对烟头红外光斑进行旋转处理，计算出烟头红外光斑旋转至正面时对应的大小；采用所述彩色场景捕捉装置与所述行为对象之间的距离对烟头红外光斑大小进行缩放处理；

所述基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息，包括：

对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

5.根据权利要求4所述的吸烟行为检测系统，其特征在于，在基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为时，

所述服务器，具体用于基于所述行为对象全身关键点位置中的手部关键点与嘴部关键点之间的关系确定所述行为对象是否存在吸烟行为。

6.一种吸烟行为检测终端，其特征在于，包括：

吸烟数据获取模块，用于获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，所述吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，所述吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

行为初判断模块，用于基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为；

行为深入分析模块，用于当初步判断所述行为对象存在吸烟行为时，基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息；

在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，分析所述人脸角度的人脸3D角度信息，根据所述人脸3D角度信息对烟头红外光斑进行旋转处理，计算出烟头红外光斑旋转至正面时对应的大小；采用所述彩色场景捕捉装置与所述行为对象之间的距离对烟头红外光斑大小进行缩放处理；

所述基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息，包括：

对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

7.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行以下步骤：

获取彩色场景捕捉装置采集的吸烟图像数据，并获取吸烟信息检测装置采集的吸烟信息数据，所述吸烟图像数据包括香烟图像、待检测行为对象的人脸角度、人脸位置、所述行为对象的全身关键点位置以及所述彩色场景捕捉装置与所述行为对象之间的距离中的一个或多个，所述吸烟信息数据包括烟头红外光斑、烟头温度以及香烟区域烟雾中的一个或多个；

基于所述吸烟图像数据初步判断行为对象是否存在吸烟行为；

当初步判断所述行为对象存在吸烟行为时，基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息；

在基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息之前，分析所述人脸角度的人脸3D角度信息，根据所述人脸3D角度信息对烟头红外光斑进行旋转处理，计算出烟头红外光斑旋转至正面时对应的大小；采用所述彩色场景捕捉装置与所述行为对象之间的距离对烟头红外光斑大小进行缩放处理；

所述基于所述吸烟信息数据深入分析所述行为对象的吸烟行为信息，包括：

对比所述烟头红外光斑的大小变化、所述烟头温度的高低变化以及香烟区域烟雾的浓度变化与对应的经验阈值，确定所述行为对象的吸烟开始时间、结束时间、抽吸量以及抽吸深度中的一个或多个。

Images