CN113963502B - 一种全天候违法行为自动化巡检方法及系统 - Google Patents

一种全天候违法行为自动化巡检方法及系统 Download PDF

Info

Publication number
CN113963502B
CN113963502B CN202111580967.8A CN202111580967A CN113963502B CN 113963502 B CN113963502 B CN 113963502B CN 202111580967 A CN202111580967 A CN 202111580967A CN 113963502 B CN113963502 B CN 113963502B
Authority
CN
China
Prior art keywords
target
intrusion
detected
illegal
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111580967.8A
Other languages
English (en)
Other versions
CN113963502A (zh
Inventor
黄立
杨丹婷
余志勇
蔡雅琪
薛源
刘华斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Puzhou Technology Shenzhen Co ltd
Original Assignee
Puzhou Technology Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Puzhou Technology Shenzhen Co ltd filed Critical Puzhou Technology Shenzhen Co ltd
Priority to CN202111580967.8A priority Critical patent/CN113963502B/zh
Publication of CN113963502A publication Critical patent/CN113963502A/zh
Application granted granted Critical
Publication of CN113963502B publication Critical patent/CN113963502B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C1/00—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people
    • G07C1/20—Checking timed patrols, e.g. of watchman
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617—Surveillance camera constructional details
    • G08B13/1963—Arrangements allowing camera rotation to change view, e.g. pivoting camera, pan-tilt and zoom [PTZ]

Abstract

本发明提供一种全天候违法行为自动化巡检方法及系统，其包括如下步骤：S1、确定警戒区域；S2、获取待检区域的图像，并进行待检目标识别；S3、若判断得出待检目标在警戒区域内，则认定该首次识别出的待检目标为首次入侵目标；同时记录成像设备的姿态信息，并存储在非法入侵数据库中；S4、判断该首次入侵目标是否存在除入侵行为以外的其他违法行为；以及S5、依次对剩余帧待检区域图像逐帧进行待检目标识别，且判断入侵目标是否为首次出现在警戒区域内的目标。本发明可以在远距离场景下获取小目标的清晰图像信息，以此实现对小目标的准确检测，提高检测的准确度，同时减轻检测任务量，提高检测效率。

Description

一种全天候违法行为自动化巡检方法及系统
技术领域
本发明涉及无人机技术领域，特别涉及一种全天候违法行为自动化巡检方法及系统。
背景技术
特定场景下的违法行为实时检测以及取证一直以来是相关部门的痛点。目前常规的检测方式包括：
1、人工巡检，其需要耗费大量的人力成本，而且随着工作时间的增加，人工判断的标准存在一定的不稳定性；
2、采用高点固定摄像头对指定警戒区域进行监测，然后通过目标检测算法检测行人、船只等目标，并发送到指挥平台，根据目标是否处于警戒区域判断其是否为非法目标，但该方法中常规摄像头无法检测到夜间的违法行为，不能实现全天候监测，同时在远距离场景下，可能会存在摄像头初步识别出来的目标过小，导致检测的目标不清晰，无法取证等情况，其仍然需要进行人工确认，导致其检测效率低下，不能及时快速捕捉到非法行为并进行判断和取证。
发明内容
本发明的目的在于提供一种全天候违法行为自动化巡检方法及系统，其可以在远距离场景下获取小目标的清晰图像信息，以此实现对小目标的准确检测，提高检测的准确度，同时减轻检测任务量，提高检测效率。
为解决上述技术问题，本申请提供以下技术方案：
一方面，提供了一种全天候违法行为自动化巡检方法，其包括如下步骤：
S1、确定警戒区域；
S2、通过成像设备在不同姿态下实时获取N帧待检区域的图像，并对待检区域图像逐帧进行待检目标识别；
S3、若从某一帧待检区域图像中首次识别出待检目标，则进一步判断该首次识别出的待检目标是否在所述警戒区域内，且若判断得出该待检目标在所述警戒区域内，则认定该首次识别出的待检目标进入警戒区域的行为为非法入侵行为，该首次识别出的待检目标为首次入侵目标；
同时记录成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息，并将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中；
S4、判断该首次入侵目标是否存在除入侵行为以外的其他违法行为；若存在，则将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中；
以及S5、依次对剩余帧待检区域图像逐帧进行待检目标识别，且在每次识别出待检目标后，判断该次识别出的待检目标是否在所述警戒区域内，且若判断得出该待检目标在所述警戒区域内，则将该待检目标认定为入侵目标，且判断该入侵目标是否为首次出现在警戒区域内的目标；
若判断得出该入侵目标为首次出现在警戒区域内的目标，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中。
优选的，步骤S2中，所述成像设备分时段实时获取待检区域的图像。
优选的，步骤S3中，根据待测目标的GPS坐标和/或像素坐标判断待检目标是否在所述警戒区域内。
优选的，步骤S5中还包括：
根据该入侵目标像素大小控制成像设备调整变焦倍数，以获取该入侵目标的图像信息，并将该入侵目标的图像信息发送至指挥中心等终端，以对其再次进行判断，以确定该入侵目标是否存在除入侵行为以外的其他违法行为。
优选的，步骤S5中还包括：
若确定该入侵目标存在除入侵行为以外的其他违法行为，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中。
优选的，步骤S5中，“判断该入侵目标是否为首次出现在警戒区域S内的目标”包括如下步骤：
在违法行为数据库中确定若干参照目标；
获取该入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi；其中，所述入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi均包括灰度特征、颜色特征等；
分别对应计算入侵目标的特征信息f与每一参照目标的特征信息f1,f2…,fi之间的汉明距离d 1 ,d 2 …,d i ；
根据公式
Figure 660133DEST_PATH_IMAGE002
计算入侵目标的特征信息f与每一参照目标的相似度
Figure 810491DEST_PATH_IMAGE004
、
Figure 280787DEST_PATH_IMAGE006
、...
Figure 309048DEST_PATH_IMAGE008
，并将相似度最大值与预设的相似度阈值进行比较，若满足条件，则认定该入侵目标为首次出现在警戒区域内的目标。
优选的，“在违法行为数据库中确定若干参照目标”包括如下步骤：
将某一帧待检区域图像中的待检目标认定为入侵目标的同时记录成像设备获取包含有该入侵目标的待检区域图像时的姿态信息；
根据该成像设备获取包含有该入侵目标的待检区域图像时的姿态信息确定搜索范围；
将所述违法行为数据库中的、且在所述搜索范围内的目标确定为参照目标。
优选的，步骤S4-S5中，若确定入侵目标存在除非法入侵以外的其他违法行为时，将入侵目标的图像信息进行保存，同时产生报警信息。
还提供一种用于实现上述自动化巡检方法的全天候违法行为自动化巡检系统，其包括：
成像设备，其用于在不同姿态下实时获取N帧待检区域的图像；
识别单元，其连接所述成像设备，用于按照获取时间先后顺序对待检区域图像逐帧进行待检目标识别，从中识别出待检目标；
入侵目标判断单元，其用于判断待检目标是否在所述警戒区域内，且若判断得出待检目标在所述警戒区域内，则将该待检目标认定为入侵目标；
首次入侵判断单元，其连接所述入侵目标判断单元，用于判断该入侵目标是否为首次出现在警戒区域内的目标；
调焦控制单元，其分别连接所述首次入侵判断单元和成像设备，用于在认定首次入侵目标后，并在依次对剩余帧待检区域图像逐帧进行待检目标识别，且将待检目标认定为入侵目标后，在判断得出该入侵目标为首次出现在警戒区域内的目标时产生调焦控制信号，并发送至成像设备，使得成像设备根据该入侵目标像素大小调整变焦倍数，以获取该入侵目标的图像信息；
二次判断单元，其用于对通过调焦控制单元获取的入侵目标的图像信息进行再次判断，以确定该入侵目标是否存在除非法入侵以外的其他违法行为。
优选的，所述首次入侵判断单元还连接所述二次判断单元以及违法行为数据库，用于在依次对剩余帧待检区域图像逐帧进行待检目标识别，将待检目标认定为入侵目标后，且确定该入侵目标存在除非法入侵以外的其他违法行为时，将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的违法行为数据库中。
本发明的技术效果：本发明可在当待检目标被判断为首次出现在警戒区域的目标后，再根据可变焦成像设备获取待检目标的图像信息，以在远距离场景下获取小目标的清晰图像信息，并进一步进行二级检测，以此实现对小目标的准确检测，提高检测的准确度；同时，在判断该入侵目标是否为首次出现在警戒区域内的目标时，通过成像设备的姿态信息快速去重，由此可极大减少对于冗余重复目标的检测，减轻检测任务量，提高检测效率。
附图说明
图1是本发明全天候违法行为自动化巡检方法的总体流程图；
图2是本发明警戒区域的示意图；
图3是本发明全天候违法行为自动化巡检系统的结构示意图；
图4是本发明首次入侵判断单元的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地描述。
需要说明的是，本申请中的违法行为包括但不限于非法入侵、非法垂钓、非法滞留等，违法行为数据库包括非法入侵数据库，除非法入侵数据库以外的其他违法行为数据库，如非法垂钓数据库、非法滞留数据库等。
实施例1：
请参照图1-2，本实施例提供一种全天候违法行为自动化巡检方法，其包括如下步骤：
S1、确定警戒区域S，且所述警戒区域S为闭环形式；具体的，本实施例中可根据GPS坐标，在电子地图上划定警戒区域，或者，如图2所示，在图像上确定顶点，再连接顶点，以确定警戒区域；
S2、通过成像设备在不同姿态下实时获取N帧待检区域的图像，并按照获取时间先后顺序对待检区域图像逐帧进行待检目标识别；
其中，所述成像设备包括可见光摄像头和/或红外摄像头等可变焦成像设备，所述图像包括可见光图像和/或红外图像；所述待检目标包括人、动物、船只、机动车、非机动车等可移动目标；进一步的，“进行待检目标识别”的过程包括基于深度学习目标检测算法，通过大量采集数据集进行模型训练，以从待检区域图像中识别出对应的待检目标；
S3、若从某一帧待检区域图像中首次识别出待检目标，则进一步判断该首次识别出的待检目标是否在所述警戒区域S内，且若判断得出该待检目标在所述警戒区域S内，则认定该首次识别出的待检目标进入警戒区域S的行为为非法入侵行为（违法行为的一种），该首次识别出的待检目标为首次入侵目标；
同时记录成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息，并将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中；其中，所述姿态信息包括俯仰角和/或航向角；
S4、通过算法检测等方式判断该首次入侵目标是否存在除入侵行为以外的其他违法行为，如非法垂钓、非法滞留等；若存在，则将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中；
例如，若判断得出该首次入侵目标还存在非法垂钓，则将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在非法垂钓数据库中；由此，对于首次入侵目标而言，其同时存在非法入侵以及非法垂钓两种违法行为，因此，该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息对应存储在入侵行为数据库以及非法垂钓数据库中；
S5、按照获取时间先后顺序依次对剩余帧待检区域图像逐帧进行待检目标识别，且在每次识别出待检目标后，判断该次识别出的待检目标是否在所述警戒区域S内，且若判断得出该待检目标在所述警戒区域S内，则将该待检目标认定为入侵目标，且判断该入侵目标是否为首次出现在警戒区域S内的目标；
若判断得出该入侵目标为首次出现在警戒区域S内的目标，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中；
以及根据该入侵目标像素大小控制成像设备调整变焦倍数（如放大变焦倍数），以获取该入侵目标的图像信息，并将该入侵目标的图像信息发送至指挥中心等终端，以对其再次进行判断，以确定该入侵目标是否存在除入侵行为以外的其他违法行为，如非法垂钓、非法滞留等；
若确定该入侵目标存在除入侵行为以外的其他违法行为，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中；
其中，入侵目标的图像信息包括图片和/或视频，依次在剩余帧待检区域图像中进行待检目标识别以及判断该首次识别出的待检目标是否在所述警戒区域S内的方法参见步骤S2、S3、不再赘诉。
由此，本实施例中可通过成像设备获取待检目标的图像，且当待检目标被判断为首次出现在警戒区域的目标后，再根据可变焦成像设备获取待检目标的图像信息，以在远距离场景下获取小目标的清晰图像信息，并进一步进行二级检测，以此实现对小目标的准确检测，提高检测的准确度；同时入侵目标进行筛选，仅在确定入侵目标为首次进入警戒区域时才加入对应的数据库进行监控，以实现目标的快速去重，极大减轻工作运算量。
实施例2：
本实施例与实施例1的不同之处仅在于，步骤S2中，所述成像设备搭载在无人机上，且分时段实时获取待检区域的图像，如白天开启可见光摄像头，晚上开启红外摄像头，由此实现对警戒区域S的全天候自动巡检监测，确保及时发现违法行为。
实施例3：
本实施例与实施例1或2的不同之处仅在于，步骤S3中，根据待测目标的GPS坐标和/或像素坐标判断待检目标是否在所述警戒区域S内，其中，GPS坐标通过对地目标定位算法获得，像素坐标根据目标检测算法获得。
实施例4：
本实施例与实施例1或2或3的不同之处仅在于，步骤S5中，“判断该入侵目标是否为首次出现在警戒区域S内的目标”包括如下步骤：
在违法行为数据库（即非法入侵数据库和/或除非法入侵数据库以外的其他违法行为数据库）中确定若干参照目标；
获取该入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi；其中，所述入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi均包括灰度特征和/或颜色特征；
分别对应计算入侵目标的特征信息f与每一参照目标的特征信息f1,f2…,fi之间的汉明距离d 1 ,d 2 …,d i ；
根据公式
Figure 774665DEST_PATH_IMAGE010
计算入侵目标的特征信息f与每一参照目标的相似度
Figure 95924DEST_PATH_IMAGE012
、
Figure 178150DEST_PATH_IMAGE014
、...
Figure 476014DEST_PATH_IMAGE016
，并将相似度最大值与预设的相似度阈值进行比较，若满足条件（如相似度最大值小于预设的相似度阈值），则认定该入侵目标为首次出现在警戒区域S内的目标，由此可仅对相似度满足条件的入侵目标进行后续的变焦、成像以及存入对应数据库的步骤，对相似度不满足条件的入侵目标则认定为重复目标，不进行后续步骤，由此可极大减少对于冗余重复目标的检测，减轻检测任务量，提高检测效率。
进一步的，“在违法行为数据库（即非法入侵数据库和/或除非法入侵数据库以外的其他违法行为数据库）中确定若干参照目标”包括如下步骤：
将某一帧待检区域图像中的待检目标认定为入侵目标的同时记录成像设备获取包含有该入侵目标的待检区域图像时的姿态信息；
根据该成像设备获取包含有该入侵目标的待检区域图像时的姿态信息确定搜索范围（如俯仰角±5°范围）；
将所述违法行为数据库中的、且在所述搜索范围内的目标确定为参照目标。
例如，首先进行步骤S3-S4，且认定某一帧待检区域图像中的A目标为首次入侵目标，且还有非法垂钓行为，则将A目标的图像信息以及成像设备获取包含有A目标的待检区域图像的姿态信息（如俯仰角12°）存储在非法入侵数据库以及存储在非法垂钓数据库中；
对剩余帧待检区域图像依次逐帧进行待检目标识别，若识别出B目标，且将其认定为入侵目标，则同时记录成像设备获取包含有B目标的待检区域图像时的姿态信息，如此时成像设备的俯仰角为10°，即可将入侵目标与此时的成像设备姿态信息进行对应；
根据所述与入侵目标（即B目标）对应的成像设备姿态信息（即俯仰角10°）确定搜索范围（如俯仰角10°±5°范围）；
在所述数据库中的进行搜索，俯仰角5-15°范围内的目标图像信息所对应的目标（如A目标）即确定为参照目标。
同时，非法入侵数据库、除非法入侵数据库以外的其他违法行为数据库定期删除选中的目标，以控制对比时的运算量。
由此可有针对性的将预定范围内的目标作为参照目标，其他范围内的目标不作考虑，以实现目标的快速去重，极大减轻后续相似度计算的运算量，提高运算速率。
实施例5：
本实施例与实施例1-4任一项的不同之处仅在于，步骤S4-S5中，若确定入侵目标存在除非法入侵以外的其他违法行为时，将入侵目标的图像信息进行保存，以作为证据，同时产生报警信息，提醒相关人员/部门及时进行处理。
实施例6：
本实施例提供了一种用于实现实施例1-5任一项所述自动化巡检方法的全天候违法行为自动化巡检系统，如图3所示，其包括：
无人机1；
成像设备2，其搭载在所述无人机1上，用于在不同姿态下实时获取N帧待检区域的图像；
识别单元3，其连接所述成像设备2，用于按照获取时间先后顺序对待检区域图像逐帧进行待检目标识别，从中识别出待检目标；
入侵目标判断单元4，其用于判断待检目标是否在所述警戒区域S内，且若判断得出待检目标在所述警戒区域S内，则将该待检目标认定为入侵目标；
首次入侵判断单元5，其连接所述入侵目标判断单元4，用于判断该入侵目标是否为首次出现在警戒区域S内的目标。
进一步的，如图4所示，所述首次入侵判断单元5包括：
违法行为数据库51，其用于存储入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息，且每一个入侵目标的图像信息均有唯一的编号；所述违法行为数据库51包括：非法入侵数据库和/或除非法入侵数据库以外的其他违法行为数据库；
参照目标确定单元52，其连接所述违法行为数据库51，用于在将待检目标认定为入侵目标的同时记录成像设备获取包含有该入侵目标的待检区域图像时的姿态信息，且根据该成像设备获取包含有该入侵目标的待检区域图像时的姿态信息确定搜索范围，并将所述数据库中的、且在所述搜索范围内的目标确定为参照目标；
特征信息获取单元53，其用于获取入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi；
相似度计算单元54，其用于根据公式
Figure 468241DEST_PATH_IMAGE018
计算入侵目标的特征信息f与每一参照目标的相似度
Figure 225981DEST_PATH_IMAGE020
、
Figure 61082DEST_PATH_IMAGE022
、...
Figure 539468DEST_PATH_IMAGE024
；其中，
Figure DEST_PATH_IMAGE026
为入侵目标的特征信息f与每一参照目标的特征信息f1,f2…,fi之间的汉明距离d 1 ,d 2 …,d i ；
以及确定单元55，其连接所述相似度计算单元54，用于将相似度最大值与预设的相似度阈值进行比较，若满足条件（如相似度最大值小于预设的相似度阈值），则认定入侵目标为首次出现在警戒区域S内的目标。
实施例7：
本实施例与实施例6的不同之处仅在于，所述自动化巡检系统还包括：
调焦控制单元6，其分别连接所述首次入侵判断单元5和成像设备2，用于在认定首次入侵目标后（“确定首次入侵目标”方法与步骤S3相同），并在依次对剩余帧待检区域图像逐帧进行待检目标识别，且将待检目标认定为入侵目标后，在判断得出该入侵目标为首次出现在警戒区域S内的目标时产生调焦控制信号，并发送至成像设备2，使得成像设备2根据该入侵目标像素大小调整变焦倍数，以获取该入侵目标的图像信息，并将该入侵目标的图像信息发送至指挥中心等终端。
二次判断单元7，其用于对通过调焦控制单元6获取的入侵目标的图像信息进行再次判断，以确定该入侵目标是否存在除非法入侵以外的其他违法行为。
实施例8：
本实施例与实施例7的不同之处仅在于，所述确定单元55还连接所述二次判断单元7以及违法行为数据库51，用于在依次对剩余帧待检区域图像逐帧进行待检目标识别，将待检目标认定为入侵目标后，且确定该入侵目标存在除非法入侵以外的其他违法行为时，将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的违法行为数据库中。
综上所述，本发明可通过成像设备获取待检目标的图像，且当待检目标被判断为首次出现在警戒区域的目标后，再根据可变焦成像设备获取待检目标的图像信息，以在远距离场景下获取小目标的清晰图像信息，并进一步进行二级检测，以此实现对小目标的准确检测，提高检测的准确度；同时，在判断该入侵目标是否为首次出现在警戒区域内的目标时，通过成像设备的姿态信息快速去重，由此可极大减少对于冗余重复目标的检测，减轻检测任务量，提高检测效率。
在不冲突的情况下，本文中上述实施例及实施例中的特征可以相互结合。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种全天候违法行为自动化巡检方法，其特征在于，包括如下步骤：
S1、确定警戒区域；
S2、通过成像设备在不同姿态下实时获取N帧待检区域的图像，并对待检区域图像逐帧进行待检目标识别；
S3、若从某一帧待检区域图像中首次识别出待检目标，则进一步判断该首次识别出的待检目标是否在所述警戒区域内，且若判断得出该待检目标在所述警戒区域内，则认定该首次识别出的待检目标进入警戒区域的行为为非法入侵行为，该首次识别出的待检目标为首次入侵目标；
同时记录成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息，并将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中；
S4、判断该首次入侵目标是否存在除入侵行为以外的其他违法行为；若存在，则将该首次入侵目标的图像信息以及成像设备获取包含有该首次入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中；
以及S5、依次对剩余帧待检区域图像逐帧进行待检目标识别，且在每次识别出待检目标后，判断该次识别出的待检目标是否在所述警戒区域内，且若判断得出该待检目标在所述警戒区域内，则将该待检目标认定为入侵目标，且判断该入侵目标是否为首次出现在警戒区域内的目标；
若判断得出该入侵目标为首次出现在警戒区域内的目标，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在非法入侵数据库中；
其中，“判断该入侵目标是否为首次出现在警戒区域内的目标”包括如下步骤：
在违法行为数据库中确定若干参照目标；
获取该入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi；其中，所述入侵目标的特征信息f以及每一参照目标的特征信息f1,f2…,fi均包括灰度特征和/或颜色特征；
分别对应计算入侵目标的特征信息f与每一参照目标的特征信息f1,f2…,fi之间的汉明距离d 1 ,d 2 …,d i ；
根据公式
Figure DEST_PATH_IMAGE001
计算入侵目标的特征信息f与每一参照目标的相似度
Figure DEST_PATH_IMAGE002
、
Figure DEST_PATH_IMAGE003
、...
Figure DEST_PATH_IMAGE004
，并将相似度最大值与预设的相似度阈值进行比较，若满足条件， 则认定该入侵目标为首次出现在警戒区域内的目标；
“在违法行为数据库中确定若干参照目标”包括如下步骤：
将某一帧待检区域图像中的待检目标认定为入侵目标的同时记录成像设备获取包含有该入侵目标的待检区域图像时的姿态信息；
根据该成像设备获取包含有该入侵目标的待检区域图像时的姿态信息确定搜索范围；
将所述违法行为数据库中的、且在所述搜索范围内的目标确定为参照目标。
2.如权利要求1所述的全天候违法行为自动化巡检方法，其特征在于，步骤S2中，所述成像设备分时段实时获取待检区域的图像。
3.如权利要求1所述的全天候违法行为自动化巡检方法，其特征在于，步骤S3中，根据待测目标的GPS坐标和/或像素坐标判断待检目标是否在所述警戒区域内。
4.如权利要求1所述的全天候违法行为自动化巡检方法，其特征在于，步骤S5中还包括：
根据该入侵目标像素大小控制成像设备调整变焦倍数，以获取该入侵目标的图像信息，并将该入侵目标的图像信息发送至指挥中心，以对其再次进行判断，以确定该入侵目标是否存在除入侵行为以外的其他违法行为。
5.如权利要求4所述的全天候违法行为自动化巡检方法，其特征在于，步骤S5中还包括：
若确定该入侵目标存在除入侵行为以外的其他违法行为，则将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的、除非法入侵数据库以外的其他违法行为数据库中。
6.如权利要求1所述的全天候违法行为自动化巡检方法，其特征在于，步骤S4-S5中，若确定入侵目标存在除非法入侵以外的其他违法行为时，将入侵目标的图像信息进行保存，同时产生报警信息。
7.一种用于实现权利要求1-6任一项所述自动化巡检方法的全天候违法行为自动化巡检系统，其特征在于，包括：
成像设备，其用于在不同姿态下实时获取N帧待检区域的图像；
识别单元，其连接所述成像设备，用于按照获取时间先后顺序对待检区域图像逐帧进行待检目标识别，从中识别出待检目标；
入侵目标判断单元，其用于判断待检目标是否在所述警戒区域内，且若判断得出待检目标在所述警戒区域内，则将该待检目标认定为入侵目标；
首次入侵判断单元，其连接所述入侵目标判断单元，用于判断该入侵目标是否为首次出现在警戒区域内的目标；
调焦控制单元，其分别连接所述首次入侵判断单元和成像设备，用于在认定首次入侵目标后，并在依次对剩余帧待检区域图像逐帧进行待检目标识别，且将待检目标认定为入侵目标后，在判断得出该入侵目标为首次出现在警戒区域内的目标时产生调焦控制信号，并发送至成像设备，使得成像设备根据该入侵目标像素大小调整变焦倍数，以获取该入侵目标的图像信息；
二次判断单元，其用于对通过调焦控制单元获取的入侵目标的图像信息进行再次判断，以确定该入侵目标是否存在除非法入侵以外的其他违法行为。
8.如权利要求7所述的全天候违法行为自动化巡检系统，其特征在于，所述首次入侵判断单元还连接所述二次判断单元以及违法行为数据库，用于在依次对剩余帧待检区域图像逐帧进行待检目标识别，将待检目标认定为入侵目标后，且确定该入侵目标存在除非法入侵以外的其他违法行为时，将该入侵目标的图像信息以及成像设备获取包含有该入侵目标的待检区域图像时的姿态信息存储在对应的违法行为数据库中。
CN202111580967.8A 2021-12-22 2021-12-22 一种全天候违法行为自动化巡检方法及系统 Active CN113963502B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111580967.8A CN113963502B (zh) 2021-12-22 2021-12-22 一种全天候违法行为自动化巡检方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111580967.8A CN113963502B (zh) 2021-12-22 2021-12-22 一种全天候违法行为自动化巡检方法及系统

Publications (2)

Publication Number Publication Date
CN113963502A CN113963502A (zh) 2022-01-21
CN113963502B true CN113963502B (zh) 2022-03-15

Family

ID=79473540

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111580967.8A Active CN113963502B (zh) 2021-12-22 2021-12-22 一种全天候违法行为自动化巡检方法及系统

Country Status (1)

Country Link
CN (1) CN113963502B (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000032433A (ja) * 1998-07-08 2000-01-28 Victor Co Of Japan Ltd 撮像装置
CN103686086B (zh) * 2013-12-13 2017-07-14 广州中国科学院先进技术研究所 一种针对特定区域进行视频监控的方法
CN106408833A (zh) * 2016-11-02 2017-02-15 北京弘恒科技有限公司 周界入侵检测方法及系统
CN109584492A (zh) * 2019-01-11 2019-04-05 江苏三棱智慧物联发展股份有限公司 一种用于边界入侵的智能预警系统及方法
CN112466075A (zh) * 2020-11-25 2021-03-09 国网宁夏电力有限公司中卫供电公司 基于物联网的电子安全围栏
CN113658394B (zh) * 2021-08-12 2023-10-31 中冶京诚工程技术有限公司 河道监控方法及装置

Also Published As

Publication number Publication date
CN113963502A (zh) 2022-01-21

Similar Documents

Publication Publication Date Title
KR102129893B1 (ko) 딥러닝 네트워크 및 평균 이동을 기반으로 하는 선박 자동추적 방법 및 시스템
US20240062518A1 (en) Method, apparatus, computer device and storage medium for detecting objects thrown from height
US8744125B2 (en) Clustering-based object classification
US20140369566A1 (en) Perimeter Image Capture and Recognition System
CN106341661A (zh) 巡逻机器人
CN111161312B (zh) 一种基于计算机视觉的物体轨迹追踪识别装置及系统
CN111753609A (zh) 一种目标识别的方法、装置及摄像机
CN106919895B (zh) 用于运动目标的跟踪方法和系统
CN110619276B (zh) 基于无人机移动监控的异常及暴力检测系统和方法
CN112528817A (zh) 一种基于神经网络的巡检机器人视觉检测及跟踪方法
CN111967396A (zh) 障碍物检测的处理方法、装置、设备及存储介质
CN110703760A (zh) 一种用于安防巡检机器人的新增可疑物体检测方法
CN113256731A (zh) 基于单目视觉的目标检测方法及装置
CN114140745A (zh) 施工现场人员属性检测方法、系统、装置及介质
CN113011371A (zh) 目标检测方法、装置、设备及存储介质
CN111881322B (zh) 一种目标搜索方法、装置、电子设备及存储介质
CN116228756B (zh) 一种自动驾驶中相机坏点的检测方法及检测系统
CN113033521A (zh) 基于目标分析的周界动态预警方法与系统
CN113963502B (zh) 一种全天候违法行为自动化巡检方法及系统
KR101520293B1 (ko) 시각 집중에 의한 관심객체 검지와 포렌식 영상 획득 스케쥴링 방법 및 시스템
CN107704836B (zh) 基于物体检测的疲劳驾驶检测方法
CN113076821A (zh) 一种事件的检测方法及装置
Chandrakar et al. Vehicle detection on sanctuaries using spatially distributed convolutional neural network
CN117152689B (zh) 一种基于视觉的河道目标检测方法及系统
EP4307245A1 (en) Methods and systems for object classification and location

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant