CN110705383A - 吸烟行为检测方法、装置、终端和可读存储介质 - Google Patents

吸烟行为检测方法、装置、终端和可读存储介质 Download PDF

Info

Publication number
CN110705383A
CN110705383A CN201910865031.6A CN201910865031A CN110705383A CN 110705383 A CN110705383 A CN 110705383A CN 201910865031 A CN201910865031 A CN 201910865031A CN 110705383 A CN110705383 A CN 110705383A
Authority
CN
China
Prior art keywords
palm
image
target
smoking
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910865031.6A
Other languages
English (en)
Inventor
李晓刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Clp Smart Security Polytron Technologies Inc
Original Assignee
Shenzhen Clp Smart Security Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Clp Smart Security Polytron Technologies Inc filed Critical Shenzhen Clp Smart Security Polytron Technologies Inc
Priority to CN201910865031.6A priority Critical patent/CN110705383A/zh
Publication of CN110705383A publication Critical patent/CN110705383A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G06V40/11—Hand-related biometrics; Hand pose recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G06V40/117—Biometrics derived from hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例提出一种吸烟行为检测方法、装置、终端和可读存储介质。其中该方法包括：获取包含目标人物的目标图像；根据所述目标图像识别出人脸的位置和手掌的位置；根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。基于获得的图像信息，可同时对多个目标图像进行处理，并且在确定存在有吸烟行为时，则获取目标人物的吸烟图像作为记录图像进行保存以作为证据，从而达到及时地检测出目标人标是否存在吸烟行为，以及还能够将目标人物的吸烟行为进行记录以作为吸烟证据的技术效果。

Description

吸烟行为检测方法、装置、终端和可读存储介质
技术领域
本发明实施例涉及安全监控技术领域，具体地，涉及一种吸烟行为检测方法、装置、终端和可读存储介质。
背景技术
吸烟不仅危害吸烟者本人，而且还影响周围他人的身体健康。另外地，吸烟的明火会容易导致火灾，增加了火灾隐患。因此，对于一些特殊的大型商场，或是大型的公共场合需要进行控烟管理。
为了切实加强安全管理，探索科学技术以协助控烟管理非常关键。目前，一些特殊的大型商场，或大型的公共场合的人流量非常多，监控难度非常大。由于人流量多，会导致控烟管理困难增加，难以检测出是否存在吸烟行为。
发明内容
本发明实施例旨在提供一种吸烟行为检测方法、装置、终端和可读存储介质，可解决现有技术中难以检测出是否存在吸烟行为的技术问题。
为解决上述技术问题，本发明实施例提出一种吸烟行为检测方法，包括：
获取包含目标人物的目标图像；
根据所述目标图像识别出人脸的位置和手掌的位置；
根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
可选地，所述根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为的步骤，包括：
判断所述人脸的位置和所述手掌的位置是否存在重叠关系；
若所述人脸的位置和所述手掌的位置存在重叠关系，则根据所述人脸识别出嘴巴特征；
根据所述嘴巴特征的位置，判断所述手掌是否位于相对所述嘴巴特征的第一预设范围内；
若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为。
可选地，所述若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为的步骤，包括：
根据所述目标图像识别出烟支的位置；
根据所述烟支、所述嘴巴特征和所述手掌的位置关系，判断是否存在烟支均与所述嘴巴特征和所述手掌存在重叠关系；
若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为。
可选地，所述若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为的步骤，包括：
当根据所述烟支均与所述嘴巴特征和所述手掌存在重叠关系时，判断所述烟支均与所述嘴巴特征和所述手掌存在重叠关系的保持时间是否大于或等于预设时间；
若所述保持时间大于或等于预设时间，则确定所述目标人物是存在吸烟行为。
可选地，所述获取包含目标人物的目标图像的步骤，包括：
获取环境图像，并将所述环境图像进行预处理；
根据经预处理之后的所述环境图像，判断是否存在人形特征；
若存在所述人形特征，则获取包括所述人形特征的部分图像作为包含目标人物的目标图像。
可选地，所述若存在吸烟行为，则记录包含所述人脸和所述手掌的图像的步骤，包括：
从所述目标图像中，以第二预设范围截取包括有所述人脸和所述手掌的图像。
可选地，所述方法还包括：
将记录包含所述人脸和所述手掌的图像作为记录图像；
将记录图像发送至监控中心，并由所述监控中心根据记录图像作出语音播报和/或文本提示。
另外，本发明实施例还提出一种吸烟行为检测装置，包括：
获取模块，用于获取包含目标人物的目标图像；
识别模块，用于根据所述目标图像识别出人脸的位置和手掌的位置；
判断模块，用于根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
记录模块，用于若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
另外，本发明实施例还提出一种终端，所述终端包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，所述程序被所述处理器执行时实现如上所述的吸烟行为检测方法的步骤。
另外，本发明实施例还提出一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的吸烟行为检测方法的步骤。
与现有技术相比较，在本发明实施例的所述吸烟行为检测方法中：对目标图像中的人脸的位置和手掌的位置进行识别、判断处理，从而判断出目标人物是否存在吸烟行为。基于获得的图像信息，可同时对多个目标图像进行处理，并且在确定存在有吸烟行为时，则获取目标人物的吸烟图像作为记录图像进行保存以作为证据，从而达到及时地检测出目标人标是否存在吸烟行为，以及还能够将目标人物的吸烟行为进行记录保存以作为吸烟证据的技术效果。
附图说明
图1是本发明实施例提供的应用环境的示意图；
图2是本发明其中一实施例提供的一种吸烟行为检测方法的流程图；
图3是图2所示的步骤S10的具体流程图；
图4是图2所示的步骤S30的具体流程图；
图5是图4所示的步骤S34的具体流程图；
图6是图5所示的步骤S343的具体流程图；
图7是本发明其中一实施例提供的一种吸烟行为检测装置的模块图；
图8是图1所示的终端结构的示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
请参阅图1，图1是本发明实施例提供的应用环境的示意图。该应用环境的硬件包括有终端100和摄像头200，所述摄像头200和所述终端100之间通信连接，所述摄像头200用于采集视频流，并发送至所述终端100，所述终端100可用于根据所述摄像头200所采集的视频流，识别出位于所述摄像头200的取景范围内的目标人物是否存在吸烟行为，从而实现吸烟行为的智能识别。可选地，所述摄像头200与所述终端100之间是通过有线通信连接或无线通信连接，其中所述摄像头200可设置于禁止吸烟的场合，而所述终端100可设置于监控中心；或者所述摄像头200可集成于所述终端100，以使得整体硬件结构一体化设置。
本发明基于上述硬件结构，提出本发明方法各个实施例。
请参阅图2，本发明其中一实施例提出一种吸烟行为检测方法，该吸烟行为检测方法应用于上述应用环境，具体的，所述方法包括以下步骤：
步骤S10，获取包含目标人物的目标图像；
终端100获取包含目标人物的目标图像。在本实施例中，以包含目标人物的目标图像作为处理对象，目标人物的目标图像是指包含一个人形特征的图像。若环境图像中包括有多个人形特征时，则表示摄像头200监测到多个人物，因此，在该环境图像中可获取到多个关于人形特征的目标图像，每一个目标图像则对应着一个目标人物。可选地，若在环境图像中获取到多个目标图像时，则将该多个目标图像预先存储于列表，并依次遍历访问该列表内的目标图像，从则对环境图像中的多个目标图像进行逐一处理。
一般而言，人形特征与环境背景具有明显的差别，例如基于人的四肢特征和头部特征就能够将人与环境背景进行区分，从而在环境图像中获取到人形特征。在本实施例中，摄像头200监测人群，实时地采集人群环境的视频流，并将采集到的视频流发送至终端100。终端100将视频流进行解码以获得图像帧，并根据获得的图像帧进一步地判断是否存在人形特征，若存在有人形特征时，则获取包含该人形特征的图像作为目标人物的目标图像，例如，根据图像帧获取包括有人形特征的部分图像，并将该部分图像作为目标图像。
步骤S20，根据所述目标图像识别出人脸的位置和手掌的位置；
终端100根据所述目标图像识别出人脸的位置和手掌的位置。在图像帧中，通过人的四肢特征和头部特征，可以识别出人形特征。通过一个人形特征可以获取一个所述目标图像，在本实施例中，所述目标图像可以是图像帧的部分图像，例如，该部分图像中的人形特征在图像中占的比例大于或等于预设值，例如大于或等于90％。在目标图像的基础上，可进一步地提取所述人脸和所述手掌，例如，通过所述目标图像获取人的头部特征，基于该头部特征可进一步地获取所述人脸。在一些实施例中，若从所述目标图像获取到头部特征时，则进一步地获取所述人脸，若从所述目标图像中未获取到头部特征时，则不进入获取所述人脸的步骤，结束步骤S20，并重新执行步骤S10。通过从所述目标图像中是否获取到头部特征的判断步骤，进而是否需要进入提取人脸的步骤，从而达到快速准确识别的技术目的。
可选地，在上述步骤S10中，获取多个图像帧，并选用人形特征最明显的图像帧作为处理对象，基于该图像帧，从而能够识别提取出清晰的所述人脸的位置和所述手掌的位置。
步骤S30，根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
根据所述人脸的位置和所述手掌的位置，终端100判断所述目标人物是否存在吸烟行为。在所述目标图像的基础上，识别、提取出所述人脸和所述手掌，并判断所述人脸的位置和所述手掌的位置是否满足存在吸烟行为的条件。
人在吸烟的过程中，会需要用手将烟支伸入嘴巴，此时手掌的位置和人脸的位置、以及手掌的位置和嘴巴的位置都存在着一种关联关系。例如，人在吸烟的过程中，手掌是位于人脸底部或人脸下方的位置，当手掌的位置是处于人脸底部或人脸下方的位置时，则可判断目标人物是存在吸烟行为；当手掌的位置是处于人脸顶部的位置或高出于人脸顶部的位置时，则可判断目标人物是不存在吸烟行为的。
步骤S40，若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
若存在吸烟行为，终端100则记录包含所述人脸和所述手掌的图像。在所述目标图像的基础上，若存在吸烟行为时，则根据目标图像获取包括有所述人脸和所述手掌的图像作为记录图像进行保存。
在吸烟的过程中，会用手将烟支伸入嘴巴，此时手掌的位置和人脸的位置、以及手掌的位置和嘴巴的位置都存在着一种关联关系。在本实施例中，对目标图像中的人脸的位置和手掌的位置进行识别、判断处理，从而判断出目标人物是否存在吸烟行为。基于获得的图像信息，可同时对多个目标图像进行处理，并且在确定存在有吸烟行为时，则获取目标人物的吸烟图像作为记录图像进行保存以作为证据，从而达到及时地检测出目标人标是否存在吸烟行为，以及还能够将目标人物的吸烟行为进行记录保存以作为吸烟证据的技术效果。
请参阅图3，在上述实施例的基础上，本发明提出另一实施例，该实施例与上述实施例的不同之处于，其中步骤S10,所述获取包含目标人物的目标图像的步骤，包括：
步骤S11，获取环境图像，并将所述环境图像进行预处理；
步骤S12，根据经预处理之后的所述环境图像，判断是否存在人形特征；
步骤S13，若存在所述人形特征，则获取包括所述人形特征的部分图像作为包含目标人物的目标图像。
在本实施例中，摄像头200监测人群，实时地获取关于人群环境的视频流，并将视频流发送至终端100，终端100将视频流解码以获得环境图像的图像帧。
终端100将环境图像进行预处理，例如，将视频流进行解码处理，从而还原成彩色的RGB图像。利用双线性插值的方法将获得的RGB图像的分辨率缩放至300×300，然后从缩放后的图像中移除均值，再将图像进行标准化处理。
根据经预处理之后的环境图像，判断是否存在人形特征，以确定并获取目标图像。可选地，可利用现有技术中的卷积神经网络对环境图像进行识别处理，从而判断是否存在人形特征。若存在人形特征时，则获取包括所述人形特征的部分图像作为所述目标人物的目标图像。例如，通过卷积神经网络对环境图像进行识别处理，若存在人形特征时，则计算环境图像中的每个人物的外接矩形框范围的左上角和右下角的坐标，从而确定包括所述人形特征的目标图像的大小，并截取该部分图像作为目标人物的目标图像；若不存在人形特征时，则重新执行步骤S11。
请参阅图4，基于上述实施例，本发明提出又一实施例，该实施例与上述实施例的不同之处在于，其中步骤S30，根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为的步骤，包括：
步骤S31，判断所述人脸的位置和所述手掌的位置是否存在重叠关系；
在所述目标图像的基础上，可识别、提取出人脸和手掌。根据人脸和手掌分别在图像上的坐标位置，即可判断出人脸与手掌之间的位置关系。
例如，将所述目标图像进行复制，以得到处理图像，根据处理图像识别出人脸和手掌位置，并用人脸和手掌的位置关系判断是否存在重叠关系，其中的重叠关系包括部分重叠或全部重叠。
步骤S32，若所述人脸的位置和所述手掌的位置存在重叠关系，则根据所述人脸识别出嘴巴特征；
基于上述步骤S31，若人脸的位置和手掌的位置存在重叠关系时，则将处理图像作进一步地识别、提取出嘴巴特征。
若人脸的位置和手掌的位置不存在重叠关系时，则不作任何操作。
步骤S33，根据所述嘴巴特征的位置，判断所述手掌是否位于相对所述嘴巴特征的第一预设范围内；
在本实施例中，以嘴巴特征作为参考特征，判断手掌是否位于相对于嘴巴特征的第一预设范围。例如，以嘴巴特征作为中心参考点，以预设长度和预设宽度作为矩形框范围，进而判断手掌是否落入该矩形框的范围，即相当于判断手掌与该矩形框的范围是否存在全部重叠关系，若存在全部重叠关系时，则表示手掌是位于相对所述嘴巴特征的第一预设范围内。
在另一些实施例中，相对于所述嘴巴特征的第一预设范围还可以是指以嘴巴特征作为中心参考点，以预设半径长度的圆形范围。
步骤S34，若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为。
基于上述步骤S33，若手掌与相对所述嘴巴特征的第一预设范围存在全部重叠关系时，则确定目标人物是存在吸烟行为。例如，相对所述嘴巴特征的预设范围是矩形框范围，而目标人物的手掌落入到该矩形框范围内，即目标人物的手掌与该矩形框范围存在全部重叠关系时，则确定为目标人物是存在吸烟行为。
请参阅图5，进一步地，为了更准确地确定目标人物是否存在吸烟行为，在另一些实施例中，步骤S34，若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为的步骤，包括：
步骤S341，根据所述目标图像识别出烟支的位置；
步骤S342，根据所述烟支、所述嘴巴特征和所述手掌的位置关系，判断是否存在烟支均与所述嘴巴特征和所述手掌存在重叠关系；
步骤S343，若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为。
在吸烟的过程中，烟支、手掌和嘴巴均存在着位置关系，例如，手掌将烟支夹持并将烟支伸入嘴巴，且保持一段时间，从而完成一次吸烟过程。若嘴巴特征的位置和手掌的位置是存在重叠关系时，复制所述目标图像以作为处理图像，并以该处理图像进一步地识别提出烟支。烟支是条状结构，可根据嘴巴特征或手掌作为参考特征，以参考特征为中心的预设范围内，对该部分的图像进行特征识别、提取，进而判断是否存在烟支。
若存在有烟支均与嘴巴特征和手掌存在重叠关系时，则确定目标人物是存在着吸烟行为。
请参阅图6，进一步地，为了更准确地确定目标人物是否存在吸烟行为，在另一些实施例中，步骤S343，若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为的步骤，包括：
步骤S3431，当根据所述烟支均与所述嘴巴特征和所述手掌存在重叠关系时，判断所述烟支均与所述嘴巴特征和所述手掌存在重叠关系的保持时间是否大于或等于预设时间；
步骤S3432，若所述保持时间大于或等于预设时间，则确定所述目标人物是存在吸烟行为。
由于人在吸烟的过程中，烟支会在嘴巴停留一段时间，过了一段时间会离开嘴巴，从而完成一次吸烟过程。在本实施例中，若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，通过判断烟支均与嘴巴特征和手掌存在重叠关系的保持时间，若该保持时间大于或等于预设时间时，则确定目标人物是存在吸烟行为。可选地，所述预设时间是0.5s、1s或1.5s，等等。
基于上述实施例，本发明提出又一实施例，该实施例与上述实施例的不同之处在于，步骤S40，若存在吸烟行为，则记录包含所述人脸和所述手掌的图像，包括：
步骤S41，从所述目标图像中，以第二预设范围截取包括有所述人脸和所述手掌的图像。
将记录包含所述人脸和所述手掌的图像作为记录图像。若存在吸烟行为时，为了方便地记录下目标人物的吸烟证据，在本实施例中，基于所述目标图像，以第二预设范围获取包含有所述人脸和所述手掌的图像。例如，以所述人脸作为参考特征，以所述人脸作为中心点，以预设长度和预设宽度的矩形框范围，截取所述目标图像的部分图像以作为记录图像，并保存。
在另一些实施例中，所述目标图像可作为记录图像进行保存。
基于上述实施例，本发明提出又一实施例，该实施例与上述实施例的不同之处在于，所述检测方法还包括：
步骤A，将记录包含所述人脸和所述手掌的图像作为记录图像；
步骤B，将记录图像发送至监控中心，并由所述监控中心根据记录图像作出语音播报和/或文本提示。
其中，终端100将记录图像发送至监控中心，可选地，终端100发送至监控中心的数据包中包括有记录图像以及针对该记录图像作出相应操作的指令，监控中心接收该数据包并响应该指令，从而使得针对该记录图像作为相应的语音播报和/或文本提示，从而达到检测并监控提示的作用。
在另一些实施例中，记录结果包括一个或多个记录图像。终端100获取记录图像并存储于记录结果中，并将记录结果中的记录图像发送至监控中心，监控中心根据所述记录图像作出语音播报和/或文本提示。例如，终端100根据环境图像获取到多个关于人形特征的目标图像，并根据多个目标图像中获取到多个记录图像，多个记录图像存储于记录结果中。其中终端100将记录图像中的记录图像发送至监控中心，可选地，终端100发送至监控中心的数据包中包括有记录图像以及针对该记录图像作出相应操作的指令，监控中心接收该数据包并响应该指令，从而可使针对该记录图像作为相应的语音播报和/或文本提示，从而达到检测并监控提示的作用。
此外，请参阅图7，本发明实施例还提出一种吸烟行为检测装置300，所述系统包括获取模块301、识别模块302、判断模块303和记录模块304。
获取模块301，用于获取包含目标人物的目标图像；
识别模块302，用于根据所述目标图像识别出人脸的位置和手掌的位置；
判断模块303，用于根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
记录模块304，用于若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
在吸烟的过程中，会用手将烟支伸入嘴巴，此时手掌的位置和人脸的位置、以及手掌的位置和嘴巴的位置都存在着一种关联关系。在本实施例中，对目标图像中的人脸的位置和手掌的位置进行识别、判断处理，从而判断出目标人物是否存在吸烟行为。基于获得的图像信息，可同时对多个目标图像进行处理，并且在确定存在有吸烟行为时，则获取目标人物的吸烟图像作为记录图像进行保存以作为证据，从而达到及时地检测出目标人标是否存在吸烟行为，以及还能够将目标人物的吸烟行为进行记录保存以作为吸烟证据的技术效果。
进一步地，所述获取模块301还用于获取环境图像，并将所述环境图像进行预处理；根据经预处理之后的所述环境图像，判断是否存在人形特征；若存在所述人形特征，则获取包括所述人形特征的部分图像作为包含目标人物的目标图像。
进一步地，所述判断模块303还用于判断所述人脸的位置和所述手掌的位置是否存在重叠关系；若所述人脸的位置和所述手掌的位置存在重叠关系，则根据所述人脸识别出嘴巴特征；根据所述嘴巴特征的位置，判断所述手掌是否位于相对所述嘴巴特征的第一预设范围内；若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为。
进一步地，所述判断模块303还用于根据所述目标图像识别出烟支的位置；根据所述烟支、所述嘴巴特征和所述手掌的位置关系，判断是否存在烟支均与所述嘴巴特征和所述手掌存在重叠关系；若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为。
进一步地，所述判断模块303还用于当根据所述烟支均与所述嘴巴特征和所述手掌存在重叠关系时，判断所述烟支均与所述嘴巴特征和所述手掌存在重叠关系的保持时间；若所述保持时间大于或等于预设时间，则确定所述目标人物是存在吸烟行为。
进一步地，所述记录模块304还用于从所述目标图像中，以第二预设范围截取包括有所述人脸和所述手掌的图像。
进一步地，所述吸烟行为检测装置300还包括发送模块，所述发送模块用于将记录包含所述人脸和所述手掌的图像作为记录图像；将记录图像发送至监控中心，并由所述监控中心根据记录图像作出语音播报和/或文本提示。
关于所述吸烟行为检测装置300的具体限定可以参见上文中对于吸烟行为检测方法的限定，在此不再赘述。上述吸烟行为检测装置300中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
请参阅图8，图8是本发明实施例提供的一种终端100的硬件结构示意图，如图8所示，该终端100包括：
一个或多个处理器1001以及存储器1002，图8中以一个处理器1001为例。处理器1001和存储器1002可以通过总线或者其他方式连接，图8中以通过总线连接为例。
存储器1002作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本发明实施例中的吸烟行为检测方法对应的程序指令/模块(例如，附图7所示的获取模块301、识别模块302、判断模块303和记录模块304)。处理器1001通过运行存储在存储器1002中的非易失性软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例的吸烟行为检测方法。
存储器1002可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据吸烟行为检测装置的使用所创建的数据等。此外，存储器1002可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器1002可选包括相对于处理器1001远程设置的存储器，这些远程存储器可以通过网络连接至吸烟行为检测装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器1002中，当被所述一个或者多个处理器1001执行时，执行上述任意方法实施例中的方法，例如，执行以上描述的图2中的方法步骤S10至步骤S40，图3中的方法步骤S11至步骤S13，图4中的方法步骤S31至步骤S34，图5中的方法步骤S341至步骤S343，图6中的方法步骤S3431至步骤S3432，实现图7中的模块301-304的功能。
上述产品可执行本发明实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明实施例所提供的方法。
本发明实施例的终端以多种形式存在，包括但不限于：
(1)移动通信设备:这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。
(2)超移动个人计算机设备:这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等，例如iPad。
(3)服务器:提供计算服务的设备，服务器的构成包括处理器、硬盘、内存、系统总线等，服务器和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(4)其他具有数据交互功能的电子装置。
本发明实施例提供了一种非易失性计算机可读存储介质，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被电子设备执行上述任意方法实施例中的方法，例如，执行以上描述的图2中的方法步骤S10至步骤S40，图3中的方法步骤S11至步骤S13，图4中的方法步骤S31至步骤S34，图5中的方法步骤S341至步骤S343，图6中的方法步骤S3431至步骤S3432，实现图7中的模块301-304的功能。
本发明实施例提供了一种计算机程序产品，包括存储在非易失性计算机可读存储介质上的计算程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时时，使所述计算机执行上述任意方法实施例中的方法，例如，执行以上描述的图2中的方法步骤S10至步骤S40，图3中的方法步骤S11至步骤S13，图4中的方法步骤S31至步骤S34，图5中的方法步骤S341至步骤S343，图6中的方法步骤S3431至步骤S3432，实现图7中的模块301-304的功能。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施方式的描述，本领域普通技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件来实现。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；在本发明的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本发明的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种吸烟行为检测方法，其特征在于，包括：
获取包含目标人物的目标图像；
根据所述目标图像识别出人脸的位置和手掌的位置；
根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
2.根据权利要求1所述的方法，其特征在于，所述根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为的步骤，包括：
判断所述人脸的位置和所述手掌的位置是否存在重叠关系；
若所述人脸的位置和所述手掌的位置存在重叠关系，则根据所述人脸识别出嘴巴特征；
根据所述嘴巴特征的位置，判断所述手掌是否位于相对所述嘴巴特征的第一预设范围内；
若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为。
3.根据权利要求2所述的方法，其特征在于，所述若所述手掌是位于相对所述嘴巴特征的第一预设范围内，则确定所述目标人物是存在吸烟行为的步骤，包括：
根据所述目标图像识别出烟支的位置；
根据所述烟支、所述嘴巴特征和所述手掌的位置关系，判断是否存在烟支均与所述嘴巴特征和所述手掌存在重叠关系；
若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为。
4.根据权利要求3所述的方法，其特征在于，所述若存在烟支均与所述嘴巴特征和所述手掌存在重叠关系，则确定所述目标人物是存在吸烟行为的步骤，包括：
当根据所述烟支均与所述嘴巴特征和所述手掌存在重叠关系时，判断所述烟支均与所述嘴巴特征和所述手掌存在重叠关系的保持时间是否大于或等于预设时间；
若所述保持时间大于或等于预设时间，则确定所述目标人物是存在吸烟行为。
5.根据权利要求1所述的方法，其特征在于，所述获取包含目标人物的目标图像的步骤，包括：
获取环境图像，并将所述环境图像进行预处理；
根据经预处理之后的所述环境图像，判断是否存在人形特征；
若存在所述人形特征，则获取包括所述人形特征的部分图像作为包含目标人物的目标图像。
6.根据权利要求1所述的方法，其特征在于，所述若存在吸烟行为，则记录包含所述人脸和所述手掌的图像的步骤，包括：
从所述目标图像中，以第二预设范围截取包括有所述人脸和所述手掌的图像。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
将记录包含所述人脸和所述手掌的图像作为记录图像；
将记录图像发送至监控中心，并由所述监控中心根据记录图像作出语音播报和/或文本提示。
8.一种吸烟行为检测装置，其特征在于，包括：
获取模块，用于获取包含目标人物的目标图像；
识别模块，用于根据所述目标图像识别出人脸的位置和手掌的位置；
判断模块，用于根据所述人脸的位置和所述手掌的位置，判断所述目标人物是否存在吸烟行为；
记录模块，用于若存在吸烟行为，则记录包含所述人脸和所述手掌的图像。
9.一种终端，其特征在于，所述终端包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，所述程序被所述处理器执行时实现如权利要求1至7中任一项所述的吸烟行为检测方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的吸烟行为检测方法的步骤。
CN201910865031.6A 2019-09-09 2019-09-09 吸烟行为检测方法、装置、终端和可读存储介质 Pending CN110705383A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910865031.6A CN110705383A (zh) 2019-09-09 2019-09-09 吸烟行为检测方法、装置、终端和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910865031.6A CN110705383A (zh) 2019-09-09 2019-09-09 吸烟行为检测方法、装置、终端和可读存储介质

Publications (1)

Publication Number Publication Date
CN110705383A true CN110705383A (zh) 2020-01-17

Family

ID=69194977

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910865031.6A Pending CN110705383A (zh) 2019-09-09 2019-09-09 吸烟行为检测方法、装置、终端和可读存储介质

Country Status (1)

Country Link
CN (1) CN110705383A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111339970A (zh) * 2020-03-02 2020-06-26 上海化学工业区公共管廊有限公司 一种适用于公共环境下的吸烟行为检测方法
CN111457493A (zh) * 2020-03-31 2020-07-28 广东美的制冷设备有限公司 空气净化控制方法、装置及相关设备
CN111476160A (zh) * 2020-04-07 2020-07-31 杭州视在科技有限公司 损失函数优化方法、模型训练方法、目标检测方法及介质
CN111553275A (zh) * 2020-04-28 2020-08-18 厦门博海中天信息科技有限公司 基于ai及热成像的吸烟监测方法、模块、设备及介质
CN111611971A (zh) * 2020-06-01 2020-09-01 城云科技（中国）有限公司 一种基于卷积神经网络的行为检测方法及系统
CN111797757A (zh) * 2020-06-30 2020-10-20 图为信息科技(深圳)有限公司 一种吸烟行为的监测方法与系统
CN112036363A (zh) * 2020-09-11 2020-12-04 新石器慧成(北京)科技有限公司 一种吸烟行为检测方法及装置
CN113191244A (zh) * 2021-04-25 2021-07-30 上海夏数网络科技有限公司 一种驾驶员不规范行为检测方法
CN113392800A (zh) * 2021-06-30 2021-09-14 浙江商汤科技开发有限公司 一种行为检测方法、装置、计算机设备和存储介质
CN113392706A (zh) * 2021-05-13 2021-09-14 上海湃道智能科技有限公司 抽烟及使用手机行为检测装置及方法
CN114332929A (zh) * 2021-12-27 2022-04-12 新疆爱华盈通信息技术有限公司 一种图像检测方法、装置及电子设备
CN115035502A (zh) * 2022-07-08 2022-09-09 北京百度网讯科技有限公司 驾驶员的行为监测方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104598934A (zh) * 2014-12-17 2015-05-06 安徽清新互联信息科技有限公司 一种驾驶员吸烟行为监控方法
CN106157331A (zh) * 2016-07-05 2016-11-23 乐视控股（北京）有限公司 一种吸烟检测方法和装置
CN106530730A (zh) * 2016-11-02 2017-03-22 重庆中科云丛科技有限公司 交通违规检测方法及系统
US20170213014A1 (en) * 2016-01-22 2017-07-27 Covidien Lp System and method for detecting smoking behavior
CN108734125A (zh) * 2018-05-21 2018-11-02 杭州杰视科技有限公司 一种开放空间的吸烟行为识别方法
CN109598214A (zh) * 2018-11-22 2019-04-09 深圳爱莫科技有限公司 吸烟行为识别方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104598934A (zh) * 2014-12-17 2015-05-06 安徽清新互联信息科技有限公司 一种驾驶员吸烟行为监控方法
US20170213014A1 (en) * 2016-01-22 2017-07-27 Covidien Lp System and method for detecting smoking behavior
CN106157331A (zh) * 2016-07-05 2016-11-23 乐视控股（北京）有限公司 一种吸烟检测方法和装置
CN106530730A (zh) * 2016-11-02 2017-03-22 重庆中科云丛科技有限公司 交通违规检测方法及系统
CN108734125A (zh) * 2018-05-21 2018-11-02 杭州杰视科技有限公司 一种开放空间的吸烟行为识别方法
CN109598214A (zh) * 2018-11-22 2019-04-09 深圳爱莫科技有限公司 吸烟行为识别方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
王超: "针对吸烟行为的手势识别算法研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *
苏翔宇: "基于烟雾多特征的吸烟行为识别算法研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111339970B (zh) * 2020-03-02 2023-04-07 上海化学工业区公共管廊有限公司 一种适用于公共环境下的吸烟行为检测方法
CN111339970A (zh) * 2020-03-02 2020-06-26 上海化学工业区公共管廊有限公司 一种适用于公共环境下的吸烟行为检测方法
CN111457493A (zh) * 2020-03-31 2020-07-28 广东美的制冷设备有限公司 空气净化控制方法、装置及相关设备
CN111457493B (zh) * 2020-03-31 2022-02-25 广东美的制冷设备有限公司 空气净化控制方法、装置及相关设备
CN111476160A (zh) * 2020-04-07 2020-07-31 杭州视在科技有限公司 损失函数优化方法、模型训练方法、目标检测方法及介质
CN111553275A (zh) * 2020-04-28 2020-08-18 厦门博海中天信息科技有限公司 基于ai及热成像的吸烟监测方法、模块、设备及介质
CN111611971A (zh) * 2020-06-01 2020-09-01 城云科技（中国）有限公司 一种基于卷积神经网络的行为检测方法及系统
CN111611971B (zh) * 2020-06-01 2023-06-30 城云科技（中国）有限公司 一种基于卷积神经网络的行为检测方法及系统
CN111797757A (zh) * 2020-06-30 2020-10-20 图为信息科技(深圳)有限公司 一种吸烟行为的监测方法与系统
CN112036363A (zh) * 2020-09-11 2020-12-04 新石器慧成(北京)科技有限公司 一种吸烟行为检测方法及装置
CN113191244A (zh) * 2021-04-25 2021-07-30 上海夏数网络科技有限公司 一种驾驶员不规范行为检测方法
CN113392706A (zh) * 2021-05-13 2021-09-14 上海湃道智能科技有限公司 抽烟及使用手机行为检测装置及方法
CN113392800A (zh) * 2021-06-30 2021-09-14 浙江商汤科技开发有限公司 一种行为检测方法、装置、计算机设备和存储介质
WO2023273132A1 (zh) * 2021-06-30 2023-01-05 浙江商汤科技开发有限公司 行为检测方法、装置、计算机设备、存储介质和程序
CN114332929A (zh) * 2021-12-27 2022-04-12 新疆爱华盈通信息技术有限公司 一种图像检测方法、装置及电子设备
CN115035502A (zh) * 2022-07-08 2022-09-09 北京百度网讯科技有限公司 驾驶员的行为监测方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN110705383A (zh) 吸烟行为检测方法、装置、终端和可读存储介质
CN107786549B (zh) 音频文件的添加方法、装置、系统及计算机可读介质
CN109858371B (zh) 人脸识别的方法及装置
CN108197589B (zh) 动态人体姿态的语义理解方法、装置、设备和存储介质
CN108269333A (zh) 人脸识别方法、应用服务器及计算机可读存储介质
CN108875667B (zh) 目标识别方法、装置、终端设备和存储介质
CN108229262B (zh) 一种色情视频检测方法及装置
CN105574467A (zh) 用于具有人物辨识的相机的隐私
CN111488841A (zh) 抽烟行为检测方法、装置、计算机设备及存储介质
CN107948199B (zh) 一种对终端共享接入进行快速检测的方法及装置
CN113128368A (zh) 一种人物交互关系的检测方法、装置及系统
CN112052815A (zh) 一种行为检测方法、装置及电子设备
CN106529255A (zh) 基于笔迹指纹的用户身份识别方法和装置
CN111666915A (zh) 监控方法、装置、设备以及存储介质
CN111783714A (zh) 一种胁迫人脸识别方法、装置、设备和存储介质
CN110111436A (zh) 一种人脸签到方法、装置及系统
CN115471916A (zh) 吸烟检测方法、装置、设备及存储介质
CN114513694A (zh) 评分确定方法、装置、电子设备和存储介质
CN108540817B (zh) 视频数据处理方法、装置、服务器及计算机可读存储介质
CN110490079A (zh) 巡检数据处理方法、装置、计算机设备和存储介质
CN114051116A (zh) 一种驾考车辆的视频监控方法、装置以及系统
CN114463776A (zh) 跌倒识别方法、装置、设备及存储介质
CN110414322B (zh) 提取图片的方法、装置、设备及存储介质
CN112668430A (zh) 一种吸烟行为检测方法、系统、计算机设备、存储介质
US12046075B2 (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200117

RJ01 Rejection of invention patent application after publication