CN115065812A - 一种基于用户行为的实时监控方法及相关设备 - Google Patents

一种基于用户行为的实时监控方法及相关设备 Download PDF

Info

Publication number
CN115065812A
CN115065812A CN202210934568.5A CN202210934568A CN115065812A CN 115065812 A CN115065812 A CN 115065812A CN 202210934568 A CN202210934568 A CN 202210934568A CN 115065812 A CN115065812 A CN 115065812A
Authority
CN
China
Prior art keywords
behavior
user
real
determining
attribute
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210934568.5A
Other languages
English (en)
Other versions
CN115065812B (zh
Inventor
刘向华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zhenyou Zhilian Technology Co ltd
Shenzhen Genew Technologies Co Ltd
Original Assignee
Shenzhen Zhenyou Zhilian Technology Co ltd
Shenzhen Genew Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Zhenyou Zhilian Technology Co ltd, Shenzhen Genew Technologies Co Ltd filed Critical Shenzhen Zhenyou Zhilian Technology Co ltd
Priority to CN202210934568.5A priority Critical patent/CN115065812B/zh
Publication of CN115065812A publication Critical patent/CN115065812A/zh
Application granted granted Critical
Publication of CN115065812B publication Critical patent/CN115065812B/zh
Priority to PCT/CN2023/098459 priority patent/WO2024027330A1/zh
Priority to ZA2023/11634A priority patent/ZA202311634B/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D5/00—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable
    • G01D5/12—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable using electric or magnetic means
    • G01D5/14—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable using electric or magnetic means influencing the magnitude of a current or voltage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695—Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Emergency Management (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)

Abstract

本发明公开了一种基于用户行为的实时监控方法及相关设备，所述基于用户行为的实时监控方法应用于隔离监控系统，所述隔离监控系统包括门磁模块和摄像头模块，所述摄像头模块与所述门磁模块通信连接，所述方法包括：当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。本发明提高了隔离的监控强度并减少了隔离成本。

Description

一种基于用户行为的实时监控方法及相关设备
技术领域
本发明涉及智能监控技术领域，尤其涉及一种基于用户行为的实时监控方法、隔离监控系统、隔离平台及计算机可读存储介质。
背景技术
肺炎的传播途径主要为直接传播、气溶胶传播和接触传播。其中直接传播是指患者喷嚏、咳嗽、说话的飞沫，呼出的气体近距离直接吸入导致的感染；气溶胶传播是指飞沫混合在空气中，行程气溶胶，吸入后导致感染；接触传播是指飞沫沉积在物品表面，接触污染手后，再接触口腔、鼻腔、眼睛等黏膜，导致感染。
针对具有发热症状或者从国外、国内风险地区归来的人员，往往需要采用集中隔离或者居家隔离的方式，便于对疑似人员进行监测和排查，确保上述人员没有感染相关具有传播性的肺炎。例如随着具有传播性的肺炎的爆发，待隔离人员的数量随之增大，居家隔离的人也随之增多，而居家隔离的隔离人员相对集中隔离的隔离人员在管控上更有难度，因此如何能实时监控居家隔离的隔离人员的外出行为，是当前大环境下亟需解决的问题。
因此，现有技术还有待于改进和发展。
发明内容
本发明的主要目的在于提供一种基于用户行为的实时监控方法、隔离监控系统、隔离平台及计算机可读存储介质，旨在解决现有技术中无法实时有效监测居家隔离的隔离人员的外出行为的问题。
为实现上述目的，本发明提供一种基于用户行为的实时监控方法，所述基于用户行为的实时监控方法应用于隔离监控系统，所述隔离监控系统包括门磁模块和摄像头模块，所述摄像头模块与所述门磁模块通信连接，所述基于用户行为的实时监控方法包括如下步骤：
当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；
根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；
根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；
若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
可选地，所述的基于用户行为的实时监控方法，其中，所述根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，具体包括：
根据所述拍摄内容确定所述用户在各活动区域的用户行为和对应的持续时间；
根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性。
可选地，所述的基于用户行为的实时监控方法，其中，所述根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性，具体包括：
若所述用户在所述目标区域内且所述目标区域内存在第三人，则判断所述第三人是否为工作人员；
若所述第三人不是所述工作人员，则确定所述用户的行为属性为社交行为；
若所述第三人是所述工作人员，则确定所述用户的行为属性为检测相关行为；
若所述用户在第一活动区域且在所述第一活动区域的持续时间超过第一预设值，则确定所述用户的行为属性为离家行为；
其中，所述第一活动区域为非合规区域。
可选地，所述的基于用户行为的实时监控方法，其中，所述判断所述第三人是否为工作人员，具体包括：
基于图像分析判断所述第三人的服装是否满足所述工作人员的着装要求；
若满足，则确定所述第三人为所述工作人员。
可选地，所述的基于用户行为的实时监控方法，其中，所述隔离监控系统还包括信标传感器；
所述判断所述第三人是否为工作人员，具体包括：
基于所述信标传感器扫描预设范围内是否存在信标；
若存在所述信标，则确定所述第三人为所述工作人员，并将所述信标的标识信息上传至隔离平台。
可选地，所述的基于用户行为的实时监控方法，其中，所述基于用户行为的实时监控方法还包括：
接收所述工作人员对所述用户的采样时间，以根据所述用户的采样时间和预设采样周期确定下一次采样时间节点；
若当前时刻达到所述下一次采样时间节点，且所述信标传感器未扫描到所述信标，生成采样异常信息并下发以进行告警，所述采样异常信息包括所述用户的具体地址信息。
可选地，所述的基于用户行为的实时监控方法，其中，所述根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为，具体包括：
确定所述用户的行为属性对应的行为等级；
当所述用户的行为属性对应的行为等级高于预设等级时，则确定所述用户的所述行为属性属于违规行为。
此外，为实现上述目的，本发明还提供一种隔离监控系统，其中，所述隔离监控系统包括：
门磁模块、摄像头模块、信标传感器和隔离平台；
所述门磁模块用于检测开门状态；
所述摄像头模块当所述门磁模块检测到开门状态时，对目标区域进行拍摄并上传拍摄内容；
所述信标传感器用于扫描预设范围内是否存在信标；
所述隔离平台用于根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性；还用于根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；还用于若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
此外，为实现上述目的，本发明还提供一种隔离平台，其中，所述隔离平台包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于用户行为的实时监控程序，所述基于用户行为的实时监控程序被所述处理器执行时实现如上所述的基于用户行为的实时监控方法的步骤。
此外，为实现上述目的，本发明还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储有基于用户行为的实时监控程序，所述基于用户行为的实时监控程序被处理器执行时实现如上所述的基于用户行为的实时监控方法的步骤。
本发明中，当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。本发明实时监控隔离人员的行为，当被隔离人员存在不符合规定的行为时，可以实时上报，以及时阻止被隔离人员的违规行为可能导致的传播后果，提高隔离的监控强度并减少隔离成本。
附图说明
图1是本发明基于用户行为的实时监控方法的较佳实施例的流程图；
图2是本发明基于用户行为的实时监控方法的较佳实施例中隔离人员违规离家场景的示意图；
图3是本发明基于用户行为的实时监控方法的较佳实施例中隔离人员正常扔垃圾或者取餐场景的示意图；
图4是本发明基于用户行为的实时监控方法的较佳实施例中隔离人员开门与非工作人员交谈场景的示意图；
图5是本发明基于用户行为的实时监控方法的较佳实施例中过道人员正常路过场景的示意图；
图6是本发明基于用户行为的实时监控方法的较佳实施例中工作人员上门给隔离人员采样场景的示意图；
图7是本发明隔离监控系统的较佳实施例的原理示意图；
图8为本发明隔离平台的较佳实施例的运行环境示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，本发明较佳实施例所述的基于用户行为的实时监控方法应用于隔离监控系统，所述隔离监控系统包括门磁模块和摄像头模块（如图7所示，所述隔离监控系统还包括隔离平台和信标传感器），所述摄像头模块与所述门磁模块通信连接，例如所述门磁模块通过433无线通信协议与所述摄像头模块进行通信。
如图1所示，所述基于用户行为的实时监控方法包括以下步骤：
步骤S10、当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容。
具体地，本发明中，所述隔离监控系统包括门磁模块和摄像头模块，可以应用于某些特定场景下对居家隔离人员的监控或者其他对人员需临时监控的场景。在隔离过程中，用户可能会打开房门出去，进而会有以下几种情况：1、用户违规离家；2、用户正常扔垃圾/取餐；3、用户开门与非工作人员交流；4、工作人员上门进行核酸采样。因此对其中不符合规定的情况，如何及时发现进而制止，是隔离过程中需要考虑的问题。
本发明中，基于人工智能深度学习技术，并结合门磁和信标传感器数据的融合，能够准确判断出住户的行为并减少误报率。具体地，所述摄像头模块与所述门磁模块相互协作，所述摄像头模块实时监控目标区域中用户的行为，所述门磁模块用于感知房门是否打开，实际应用中，为节省存储空间或者节约摄像头用电，可采用所述门磁模块触发所述摄像头模块启动的方式，即当所述门磁模块检测到处于开门状态时，则触发所述摄像头模块开启拍摄，当所述门磁模块检测到处于关门状态超过预设时长后，则触发所述摄像头模块停止拍摄。
需要说明的是，为了解决续航的问题，因为隔离可能达3周，而客户出于安装、拆卸、接电便捷的考虑，希望摄像头不要长期有线供电，最好电池供电，所述摄像头模块的主控CPU处于关机状态。所述门磁模块和所述摄像头模块的MCU模块通过本地433无线协议连接，相对现有技术中，门磁模块将开关门状态发送给隔离平台，再由隔离平台处理后对摄像头模块进行指示的方式，可以降低系统的时延，因为如果门磁打开后，先通过公网无线协议比如NB-IoT或者4G等通知隔离平台，再由隔离平台下发命令给摄像头拍摄视频画面的周期会很长，可能高达5-10秒，无法对居家隔离实现有效的管控，因此本发明采用本地无线协议，可以理解的是，除了433协议，其他的本地无线协议也可以应用到本发明，比如蓝牙等。当所述门磁模块触发开门时，所述门磁模块的MCU会将所述摄像头模块的主控CPU唤醒，从而对现场进行视频拍摄并通过4G无线网络上传到隔离平台，直连的方式响应度更高。
门磁除了通过本地433协议和摄像头通信以外，可以根据客户需求在433协议基础上，增加NB-IoT模块，这样门磁本身也可以通过NB-IoT直接和平台进行通信。增加NB-IoT，是因为433只是单向的协议，就是门磁只能把数据推给摄像头，那么当门磁没电的时候，摄像头无法反向判断门磁是否连接，或者是否开闭。同时，隔离平台也无法主动调看摄像头的监控画面，只能被动的等门磁触发的时候，才能看到摄像头画面，因为当摄像头在休眠时，摄像头的4G模块也是休眠的，隔离平台无法通过4G和休眠的摄像头进行通信。那么在门磁上增加NB-IoT模块之后，就可以解决这两个问题，一方面可以通过隔离平台直接获取门磁的电量状态/与摄像头连接状态/开闭状态，另一方面也可以通过隔离平台给门磁下发命令，调用433协议启动摄像头拍摄视频上传，隔离平台可以主动查看现场视频画面。
即，当所述门磁模块检测到开门状态时，可通过所述摄像头模块对目标区域进行拍摄并上传拍摄内容。
步骤S20、根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域。
具体地，接收到所述摄像头模块上传的拍摄内容后，所述隔离平台会对上传的视频数据进行视频解码和AI分析，AI分析主要是基于深度学习的计算机视觉算法，可以识别出现场是否有人出现在视频画面内，或者说视频画面的警戒范围内，术语也称ROI（regionof interest，感兴趣区域），ROI的区域可以在管理平台进行绘制和调整。隔离平台中支持对各个隔离点位已部署好的摄像头画面，在线上绘制ROI警戒区域，这个ROI警戒区域在隔离平台上可以通过拖拉视频窗口中的一个不规则多边形来进行定义，ROI警戒区域通常绘制在住户门外离家的必经区域（但离住户门框有10-30cm距离），当隔离员出现在所绘制的ROI警戒区域内，才触发离家告警，如果隔离人员没有进入到ROI警戒区域，那么住户可能只是探出身子拿外卖或者丢垃圾，无须触发离家告警。
因此基于ROI警戒区域，可以根据所述拍摄内容确定在活动区域内所述用户的行为属性，其中，所述目标区域包含于所述活动区域（即所述活动区域包括所述目标区域），具体地，根据所述拍摄内容确定在所述活动区域内所述用户的行为属性包括：根据所述拍摄内容确定所述用户在各活动区域的用户行为和对应的持续时间；根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性。
例如，若所述用户在所述目标区域内且所述目标区域内存在第三人；判断所述第三人是否为工作人员；若所述第三人不是所述工作人员，则确定所述用户的行为属性为社交行为；若所述第三人是所述工作人员，则确定所述用户的行为属性为检测相关行为；若所述用户在第一活动区域且在所述第一活动区域的持续时间超过第一预设值，则确定所述用户的行为属性为离家行为，所述第一活动区域为非合规区域。
其中，判断所述第三人是否为工作人员包括：基于图像分析方法判断所述第三人的服装是否满足所述工作人员的着装要求；若满足，则确定所述第三人为所述工作人员。
实际应用中，所述隔离监控系统还包括信标传感器，则所述判断所述第三人是否为工作人员还可以包括：通过所述信标传感器扫描预设范围内是否存在信标；若存在所述信标，则确定所述第三人为所述工作人员，并将所述信标的标识信息上传至隔离平台。
本发明中，当所述门磁模块检测到门被打开时，而AI算法在视频画面或者ROI警戒区域中没有识别到人，那么人可能并没有出门，或者只是出门取餐/丢垃圾，并没有进入ROI警戒区域，那么隔离平台只会产生一个私自开门的异常记录。因为隔离平台支持分类分级告警和自定义联动策略，比如将私自开门异常定义为三级告警，并且只在隔离平台上告警和做视频和截图存证记录，不需要联动短信/电话/邮件通知相关人员，也就不会触发误报，只是有记录。而当门磁没被打开时，外面经过的路人也不会触发误报。当门磁被打开了，而且识别到有人在ROI警戒区域，那么这个时候有3种可能，第一，隔离人员开门和其他非工作人员交谈，应当马上告警；第二，隔离人员擅自离家，应当马上告警；第三，工作人员上门核酸采样，只需要视频记录，不需要联动短信/电话/邮件告警。因此，这种情况下，只要不是检测到工作人员上门核酸，都会产生违规离家告警。对判断是否为工作人员的方式，本发明中可以结合信标和信标传感器的数据来做判断，在实际应用中，信标传感器可以为工牌。
其中，所谓信标和工牌，信标中有一个蓝牙模块，会不断的通过蓝牙广播自己的id等信息，工牌上也有一个蓝牙模块，可以扫描附近的蓝牙。由于一个工牌可以扫描多个信标，这样虽然每个隔离点位要安装一个信标，但工牌只需要社区工作人员、防疫人员或者物业人员有一个工牌就可以，因为往往一个工作人员管理一个区域内的多个隔离点位。当工牌扫描到信标，而且判断信号强度在1-2m以内（可以自定义调整距离），那么工牌就会通过4G把该信标的信息上传到隔离平台，隔离平台就可以判断信标所在的隔离点位有工作人员上门，这种情况往往工作人员是给住户做核酸采样。隔离平台支持录入隔离周期（如7天、14天、21天）以及隔离采样周期（如一天一测、三天两测、1/3/7测、2/4/6测等等，也可以自定义选择），当某一天过了零点，工牌都没有上报过该隔离点位信标的信息，然而这一天根据核酸策略又需要给住户做核酸时，隔离平台就会触发一个未及时核酸采样的告警。
本发明中，信标是一个广播蓝牙信号的设备，安装于住户门口。工作人员上门或者测核酸，会佩戴一个4G（cat 1）+蓝牙工牌，该工牌会扫描4G信号，当扫描到特定标识的信标时，会通过4G（cat 1）上报数据给到隔离平台，这样可以从后台判断该住户有工作人员上门/测核酸，即便开门也不会产生一级“违规离家”告警。当然隔离平台也会生成一条开门的视频记录，方便后续查看。同时隔离平台也会记录一条“核酸上门采样”的记录，因为工作人员在部署居家隔离摄像头时，会通过小程序记录需要的居家隔离采样日期，如果住户没有被按时采样，那么隔离平台也会根据检测到的核酸采样记录，生成“未按时核酸采样”告警，并进行告警提示。
步骤S30、根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为。
具体地，在确定了用户的行为属性后，根据所述用户的行为属性判断是否为违规行为，具体地，根据所述用户的行为属性确定对应的行为等级；当所述用户的行为属性对应的行为等级高于预设等级时，则确定属于违规行为。
步骤S40、若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
例如，若用户的行为属性确定对应的行为等级为三级，而预设等级为一级，则高于该预设等级时被认为是违规行为，则触发上报告警操作并提示所述用户；以便工作人员及时采取措施，从而降低疾病传播风险，实现隔离人员智能监测。
如图2-图6所示，针对图2-图6中的五个场景，通过本发明提供的监控方法可以实时监控到所述用户的各种行为，针对其中的违规行为，进行上传告警。
如图2所示，表示住户（隔离人员）违规离家的场景，当检测到住户（隔离人员）违规离家时，进行视频/截图告警，或者联动短信/电话告警。
如图3所示，表示住户（隔离人员）正常扔垃圾/取餐的场景，当检测到住户（隔离人员）正常扔垃圾/取餐时，只会产生一个私自开门的异常记录，不联动告警。
如图4所示，表示住户（隔离人员）开门与非工作人员交谈的场景，当检测到住户（隔离人员）开门与非工作人员交谈时，进行视频/截图告警，或者联动短信/电话告警。
如图5所示，表示过道人员正常路过的场景，这属于正常现象，隔离平台不会生成任何记录和告警，即避免触发误报。
如图6所示，表示核酸上门采样的场景，当检测到工作人员（医护人员）核酸上门采样时，隔离平台不作异常和告警，只记录核酸采样信息。
进一步地，如图7所示，本发明还相应提供了一种隔离监控系统，其中，所述隔离监控系统包括：
门磁模块51、摄像头模块52、信标传感器53和隔离平台54；
所述门磁模块51用于检测开门状态；
所述摄像头模块52当所述门磁模块51检测到开门状态时，对目标区域进行拍摄并上传拍摄内容；
所述信标传感器53用于扫描预设范围内是否存在信标；
所述隔离平台54用于根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性；还用于根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；还用于若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
进一步地，如图8所示，基于上述基于用户行为的实时监控方法和系统，本发明还相应提供了一种隔离平台，所述隔离平台包括处理器10、存储器20及显示器30。图8仅示出了隔离平台的部分组件，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。
所述存储器20在一些实施例中可以是所述隔离平台的内部存储单元，例如隔离平台的硬盘或内存。所述存储器20在另一些实施例中也可以是所述隔离平台的外部存储设备，例如所述隔离平台上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（Secure Digital, SD）卡，闪存卡（Flash Card）等。进一步地，所述存储器20还可以既包括所述隔离平台的内部存储单元也包括外部存储设备。所述存储器20用于存储安装于所述隔离平台的应用软件及各类数据，例如所述安装隔离平台的程序代码等。所述存储器20还可以用于暂时地存储已经输出或者将要输出的数据。在一实施例中，存储器20上存储有基于用户行为的实时监控程序40，该基于用户行为的实时监控程序40可被处理器10所执行，从而实现本申请中基于用户行为的实时监控方法。
所述处理器10在一些实施例中可以是一中央处理器（Central Processing Unit,CPU），微处理器或其他数据处理芯片，用于运行所述存储器20中存储的程序代码或处理数据，例如执行所述基于用户行为的实时监控方法等。
所述显示器30在一些实施例中可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED（Organic Light-Emitting Diode，有机发光二极管）触摸器等。所述显示器30用于显示在所述隔离平台的信息以及用于显示可视化的用户界面。所述隔离平台的部件10-30通过系统总线相互通信。
在一实施例中，当处理器10执行所述存储器20中基于用户行为的实时监控程序40时实现以下步骤：
当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；
根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；
根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；
若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
其中，所述根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，具体包括：
根据所述拍摄内容确定所述用户在各活动区域的用户行为和对应的持续时间；
根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性。
其中，所述根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性，具体包括：
若所述用户在所述目标区域内且所述目标区域内存在第三人，则判断所述第三人是否为工作人员；
若所述第三人不是所述工作人员，则确定所述用户的行为属性为社交行为；
若所述第三人是所述工作人员，则确定所述用户的行为属性为检测相关行为；
若所述用户在第一活动区域且在所述第一活动区域的持续时间超过第一预设值，则确定所述用户的行为属性为离家行为；
其中，所述第一活动区域为非合规区域。
其中，所述判断所述第三人是否为工作人员，具体包括：
基于图像分析判断所述第三人的服装是否满足所述工作人员的着装要求；
若满足，则确定所述第三人为所述工作人员。
其中，所述隔离监控系统还包括信标传感器；
所述判断所述第三人是否为工作人员，具体包括：
基于所述信标传感器扫描预设范围内是否存在信标；
若存在所述信标，则确定所述第三人为所述工作人员，并将所述信标的标识信息上传至隔离平台。
其中，所述基于用户行为的实时监控方法还包括：
接收所述工作人员对所述用户的采样时间，以根据所述用户的采样时间和预设采样周期确定下一次采样时间节点；
若当前时刻达到所述下一次采样时间节点，且所述信标传感器未扫描到所述信标，生成采样异常信息并下发以进行告警，所述采样异常信息包括所述用户的具体地址信息。
其中，所述根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为，具体包括：
确定所述用户的行为属性对应的行为等级；
当所述用户的行为属性对应的行为等级高于预设等级时，则确定所述用户的所述行为属性属于违规行为。
本发明还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储有基于用户行为的实时监控程序，所述基于用户行为的实时监控程序被处理器执行时实现如上所述的基于用户行为的实时监控方法的步骤。
综上所述，本发明提供一种基于用户行为的实时监控方法及相关设备，所述基于用户行为的实时监控方法应用于隔离监控系统，所述隔离监控系统包括门磁模块和摄像头模块，所述摄像头模块与所述门磁模块通信连接，所述方法包括：当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。本发明实时监控隔离人员的行为，当被隔离人员存在不符合规定的行为时，可以实时上报，以及时阻止被隔离人员的违规行为可能导致的传播后果，提高隔离的监控强度并减少隔离成本。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者隔离平台不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者隔离平台所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者隔离平台中还存在另外的相同要素。
当然，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关硬件（如处理器，控制器等）来完成，所述的程序可存储于一计算机可读取的计算机可读存储介质中，所述程序在执行时可包括如上述各方法实施例的流程。其中所述的计算机可读存储介质可为存储器、磁碟、光盘等。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种基于用户行为的实时监控方法，其特征在于，所述基于用户行为的实时监控方法应用于隔离监控系统，所述隔离监控系统包括门磁模块和摄像头模块，所述摄像头模块与所述门磁模块通信连接，所述基于用户行为的实时监控方法包括：
当所述门磁模块检测到开门状态时，接收所述摄像头模块拍摄目标区域并上传的拍摄内容；
根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，所述活动区域包括所述目标区域；
根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；
若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
2.根据权利要求1所述的基于用户行为的实时监控方法，其特征在于，所述根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性，具体包括：
根据所述拍摄内容确定所述用户在各活动区域的用户行为和对应的持续时间；
根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性。
3.根据权利要求2所述的基于用户行为的实时监控方法，其特征在于，所述根据所述用户在各活动区域的用户行为和对应的持续时间，确定所述用户的行为属性，具体包括：
若所述用户在所述目标区域内且所述目标区域内存在第三人，则判断所述第三人是否为工作人员；
若所述第三人不是所述工作人员，则确定所述用户的行为属性为社交行为；
若所述第三人是所述工作人员，则确定所述用户的行为属性为检测相关行为；
若所述用户在第一活动区域且在所述第一活动区域的持续时间超过第一预设值，则确定所述用户的行为属性为离家行为；
其中，所述第一活动区域为非合规区域。
4.根据权利要求3所述的基于用户行为的实时监控方法，其特征在于，所述判断所述第三人是否为工作人员，具体包括：
基于图像分析判断所述第三人的服装是否满足所述工作人员的着装要求；
若满足，则确定所述第三人为所述工作人员。
5.根据权利要求3所述的基于用户行为的实时监控方法，其特征在于，所述隔离监控系统还包括信标传感器；
所述判断所述第三人是否为工作人员，具体包括：
基于所述信标传感器扫描预设范围内是否存在信标；
若存在所述信标，则确定所述第三人为所述工作人员，并将所述信标的标识信息上传至隔离平台。
6.根据权利要求5所述的基于用户行为的实时监控方法，其特征在于，所述基于用户行为的实时监控方法还包括：
接收所述工作人员对所述用户的采样时间，以根据所述用户的采样时间和预设采样周期确定下一次采样时间节点；
若当前时刻达到所述下一次采样时间节点，且所述信标传感器未扫描到所述信标，生成采样异常信息并下发以进行告警，所述采样异常信息包括所述用户的具体地址信息。
7.根据权利要求1所述的基于用户行为的实时监控方法，其特征在于，所述根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为，具体包括：
确定所述用户的行为属性对应的行为等级；
当所述用户的行为属性对应的行为等级高于预设等级时，则确定所述用户的所述行为属性属于违规行为。
8.一种隔离监控系统，其特征在于，所述隔离监控系统包括：
门磁模块、摄像头模块、信标传感器和隔离平台；
所述门磁模块用于检测开门状态；
所述摄像头模块当所述门磁模块检测到开门状态时，对目标区域进行拍摄并上传拍摄内容；
所述信标传感器用于扫描预设范围内是否存在信标；
所述隔离平台用于根据所述拍摄内容中的用户行为和持续时间确定在活动区域内用户的行为属性；还用于根据所述行为属性的行为等级，判断所述用户的所述行为属性是否属于违规行为；还用于若所述用户的行为属于违规行为，则实时触发上报告警操作并提示所述用户。
9.一种隔离平台，其特征在于，所述隔离平台包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于用户行为的实时监控程序，所述基于用户行为的实时监控程序被所述处理器执行时实现如权利要求1-7任一项所述的基于用户行为的实时监控方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有基于用户行为的实时监控程序，所述基于用户行为的实时监控程序被处理器执行时实现如权利要求1-7任一项所述的基于用户行为的实时监控方法的步骤。
CN202210934568.5A 2022-08-04 2022-08-04 一种基于用户行为的实时监控方法及相关设备 Active CN115065812B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202210934568.5A CN115065812B (zh) 2022-08-04 2022-08-04 一种基于用户行为的实时监控方法及相关设备
PCT/CN2023/098459 WO2024027330A1 (zh) 2022-08-04 2023-06-06 一种基于用户行为的实时监控方法及相关设备
ZA2023/11634A ZA202311634B (en) 2022-08-04 2023-12-19 A real-time monitoring method based on user behavior and related device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210934568.5A CN115065812B (zh) 2022-08-04 2022-08-04 一种基于用户行为的实时监控方法及相关设备

Publications (2)

Publication Number Publication Date
CN115065812A true CN115065812A (zh) 2022-09-16
CN115065812B CN115065812B (zh) 2022-12-16

Family

ID=83207317

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210934568.5A Active CN115065812B (zh) 2022-08-04 2022-08-04 一种基于用户行为的实时监控方法及相关设备

Country Status (3)

Country Link
CN (1) CN115065812B (zh)
WO (1) WO2024027330A1 (zh)
ZA (1) ZA202311634B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024027330A1 (zh) * 2022-08-04 2024-02-08 深圳市震有智联科技有限公司 一种基于用户行为的实时监控方法及相关设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105354900A (zh) * 2015-10-23 2016-02-24 移康智能科技(上海)有限公司 一种智能门锁的抓拍方法及系统
CN107742387A (zh) * 2017-10-31 2018-02-27 梁志远 一种智能灯控与防盗警报结合的方法
CN109918989A (zh) * 2019-01-08 2019-06-21 平安科技（深圳）有限公司 监控画面中人物行为类型识别方法、装置、介质和设备
CN113537009A (zh) * 2021-06-30 2021-10-22 上海晶赞融宣科技有限公司 一种居家隔离监管系统
CN113794819A (zh) * 2021-09-03 2021-12-14 云从科技集团股份有限公司 防疫场所智能管理方法、系统、装置和介质
CN216668062U (zh) * 2022-01-24 2022-06-03 北京云量互动科技有限公司 基于目标识别技术的智能立式冷柜
US20220188718A1 (en) * 2020-12-15 2022-06-16 Caterpillar Inc. Advanced behavior-based safety notification systems and methods

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205810038U (zh) * 2016-07-01 2016-12-14 合肥智贤智能化科技有限公司 一种双向门磁报警系统
CN110718067A (zh) * 2019-09-23 2020-01-21 浙江大华技术股份有限公司 违规行为告警方法及相关装置
KR20210091005A (ko) * 2020-01-13 2021-07-21 한국전자통신연구원 가축 전염병 전파 예방을 위한 출입자 관리 시스템 및 방법
CN114466169A (zh) * 2022-02-21 2022-05-10 东莞市派能佛电子科技有限公司 一种消防门磁和摄像头的监控系统
CN114567863A (zh) * 2022-03-03 2022-05-31 国网江苏省电力有限公司建设分公司 一种基于物联网的面向电力超高跨江铁塔工程管理系统
CN115065812B (zh) * 2022-08-04 2022-12-16 深圳震有科技股份有限公司 一种基于用户行为的实时监控方法及相关设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105354900A (zh) * 2015-10-23 2016-02-24 移康智能科技(上海)有限公司 一种智能门锁的抓拍方法及系统
CN107742387A (zh) * 2017-10-31 2018-02-27 梁志远 一种智能灯控与防盗警报结合的方法
CN109918989A (zh) * 2019-01-08 2019-06-21 平安科技（深圳）有限公司 监控画面中人物行为类型识别方法、装置、介质和设备
US20220188718A1 (en) * 2020-12-15 2022-06-16 Caterpillar Inc. Advanced behavior-based safety notification systems and methods
CN113537009A (zh) * 2021-06-30 2021-10-22 上海晶赞融宣科技有限公司 一种居家隔离监管系统
CN113794819A (zh) * 2021-09-03 2021-12-14 云从科技集团股份有限公司 防疫场所智能管理方法、系统、装置和介质
CN216668062U (zh) * 2022-01-24 2022-06-03 北京云量互动科技有限公司 基于目标识别技术的智能立式冷柜

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024027330A1 (zh) * 2022-08-04 2024-02-08 深圳市震有智联科技有限公司 一种基于用户行为的实时监控方法及相关设备

Also Published As

Publication number Publication date
WO2024027330A1 (zh) 2024-02-08
CN115065812B (zh) 2022-12-16
ZA202311634B (en) 2024-03-27

Similar Documents

Publication Publication Date Title
AU2020203351B2 (en) Drone-augmented emergency response services
US10665089B1 (en) Alarm probability
US11394933B2 (en) System and method for gate monitoring during departure or arrival of an autonomous vehicle
US11854357B2 (en) Object tracking using disparate monitoring systems
CN106157505A (zh) 一种非法入室告警方法及装置
CN102147940A (zh) 一种基于居住证、身份证门禁管理的平安社区技控系统
CN102063750A (zh) 一种防跟随ab门出入管理系统
CN107130889A (zh) 一种智能门及其工作方法
CN104967825A (zh) 一种看门电子狗系统
CN115065812B (zh) 一种基于用户行为的实时监控方法及相关设备
CN103354006A (zh) 联网报警服务系统及其硬件设备的布置方法
CN113537009A (zh) 一种居家隔离监管系统
CN209460841U (zh) 一种基于人脸识别的报警联动门禁系统
CN208207842U (zh) 配电房安全管理系统
CN109740577A (zh) 一种基于树莓派的实时人脸重识别摄像系统及其调试方法
CN109019213A (zh) 一种人身安全预警电梯实现方法及其系统
WO2019000657A1 (zh) 一种安全监控系统及监控方法
CN107403534A (zh) 一种室内安全系统
JP6017163B2 (ja) 警備装置、及び警備方法
WO2023280273A1 (zh) 一种控制方法和系统
CN115718445A (zh) 适用于博物馆的智能物联网管理系统
CN205883458U (zh) 基于计算机互联网技术的智能远程视频监控系统
CN114119297A (zh) 一种基于物联网的智慧社区管理系统
CN113538827A (zh) 一种智能家庭监控系统及方法
CN117575514A (zh) 基于大数据分析的物业管理信息系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant