CN109672862B - 图像处理方法、装置、介质及电子设备 - Google Patents

图像处理方法、装置、介质及电子设备 Download PDF

Info

Publication number
CN109672862B
CN109672862B CN201811573555.XA CN201811573555A CN109672862B CN 109672862 B CN109672862 B CN 109672862B CN 201811573555 A CN201811573555 A CN 201811573555A CN 109672862 B CN109672862 B CN 109672862B
Authority
CN
China
Prior art keywords
electronic fence
virtual electronic
virtual
image processing
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811573555.XA
Other languages
English (en)
Other versions
CN109672862A (zh
Inventor
秦碧波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Skyvis Technologies Co ltd
Original Assignee
Beijing Skyvis Technologies Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Skyvis Technologies Co ltd filed Critical Beijing Skyvis Technologies Co ltd
Priority to CN201811573555.XA priority Critical patent/CN109672862B/zh
Publication of CN109672862A publication Critical patent/CN109672862A/zh
Application granted granted Critical
Publication of CN109672862B publication Critical patent/CN109672862B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Alarm Systems (AREA)

Abstract

本发明实施例提供了一种图像处理方法、装置、介质及电子设备,该图像处理方法包括:获取目标区域的视频流;处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。本发明实施例的技术方案能够基于目标区域的视频流,通过图像处理的方式建立虚拟电子围栏,由此可以实现对与所述虚拟电子围栏发生虚拟触碰的事件进行自动预警。

Description

图像处理方法、装置、介质及电子设备
技术领域
本发明涉及电数据处理技术领域,具体而言,涉及一种图像处理方法、装置、介质及电子设备。
背景技术
很多活动场所对场所内人员的活动区域有限制,为实现以上需求,传统手段主要分为物理隔离和专人现场维持秩序。
其中,物理隔离方式可以包括设置隔离栏、隔离网等,在需要限制的区域四周部署。但是,隔离栏、隔离网等传统物理隔离方式在很多场合是不合适的,比如人民法院法庭,将法官席、原告席、被告席等区域使用物理隔离的方式,将严重破坏法庭的和谐气氛,为预警和防范极少数情况下的违反法庭纪律的行为而严重影响审判活动参与者的心理感受,甚至带来人民群众对国家司法机关的不信任,这是不能接受的。另外,这种隔离方式无法实现自动报警的功能,当真正出现有人采取暴力破坏或翻越等方式越过物理隔离设施时,秩序维护人员无法第一时间获得报警信息并及时采取措施进行阻止。
专人现场维持秩序虽然是可实施的,刑事审判过程中也的确有法警专门负责秩序维护,但人力成本巨大,难以在所有法庭普及。
电子围栏是近些年兴起的周界报警系统,实施上需要在指定活动区域的四周部署前端探测围栏,由杆及金属导线等构件组成有形的周界;后端需要部署电子围栏主机,电子围栏主机可以用于产生和接收高压脉冲信号,在前端探测围栏处于触网、短路、断路状态时能产生报警信号来,并把入侵信号发送到安全报警中心,从而实现防御和报警,这种方式与上述的物理隔离措施相似,同样无法适用于法庭、教室等活动场所。
红外探测技术是目前比较常见的对指定活动区域闯入、闯出行为进行报警的一种无物理隔离形式的解决方案。该方案在指定活动区域的四周部署多对红外发射接收装置,后端部署主机,当有人员闯入或闯出指定活动区域时,通过检测红外射线被阻断来产生报警信号。
虽然红外探测技术可以避免在指定活动区域部署物理隔离设施,但需要在指定活动区域各边界的延长线上部署红外发射接收装置,且为保证检测效果,每个边界需要从高到低部署多对,同时还需要配置主机等设备,建设成本高。
另外,红外探测技术通过红外射线被阻断来判断并报警,无法识别是从指定活动区域内闯出还是从指定活动区域外围闯入等。
因此,需要一种新的图像处理方法、装置、计算机可读介质及电子设备。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本发明实施例的目的在于提供一种图像处理方法、装置、介质及电子设备,进而至少在一定程度上克服相关技术中存在部分或者全部技术问题。
本发明的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本发明的实践而习得。
根据本公开的一个方面,提供一种图像处理方法,包括:获取目标区域的视频流;处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。
在本公开的一种示例性实施例中,所述虚拟触碰预警信息包括闯入预警信息;其中,生成虚拟触碰预警信息,包括:从所述视频流中获得所述参考图像的前帧图像;若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域外,则生成所述闯入预警信息。
在本公开的一种示例性实施例中,所述方法还包括:确定所述目标对象的特征点;从所述视频流中获得所述参考图像的后帧图像;确定所述特征点在所述后帧图像上的实时位置。
在本公开的一种示例性实施例中,所述方法还包括:若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
在本公开的一种示例性实施例中,所述方法还包括:获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;获得采集所述后帧图像的实时时间;若判定所述目标对象向所述虚拟电子围栏区域内移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯入速率。
在本公开的一种示例性实施例中,所述方法还包括:若所述闯入速率大于闯入速率阈值,则发送第一闯入报警信息。
在本公开的一种示例性实施例中,所述方法还包括:根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域内移动的闯入深度。
在本公开的一种示例性实施例中,所述方法还包括:若所述闯入深度大于闯入深度阈值,则发送第二闯入报警信息。
在本公开的一种示例性实施例中,所述虚拟触碰预警信息包括闯出预警信息;其中,生成虚拟触碰预警信息,包括:从所述视频流中获得所述参考图像的前帧图像;若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域内,则生成闯出预警信息。
在本公开的一种示例性实施例中,所述方法还包括:确定所述目标对象的特征点;从所述视频流中获得所述参考图像的后帧图像;确定所述特征点在所述后帧图像上的实时位置。
在本公开的一种示例性实施例中,所述方法还包括:若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域内,则生成忽略闯出预警信息。
在本公开的一种示例性实施例中,所述方法还包括:获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;
获得采集所述后帧图像的实时时间;若判定所述目标对象向所述虚拟电子围栏区域外移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯出速率。
在本公开的一种示例性实施例中,所述方法还包括:若所述闯出速率大于闯出速率阈值,则发送第一闯出报警信息。
在本公开的一种示例性实施例中,所述方法还包括:根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域外移动的闯出深度。
在本公开的一种示例性实施例中,所述方法还包括:若所述闯出深度大于闯出深度阈值,则发送第二闯出报警信息。
在本公开的一种示例性实施例中,确定所述目标区域中的虚拟电子围栏,包括:若为自动设定所述虚拟电子围栏,则根据设置的定位参考点,自动划定所述虚拟电子围栏。
在本公开的一种示例性实施例中,根据设置的定位参考点,自动划定所述虚拟电子围栏,包括:根据所述定位参考点确定待侦测区域;将所述待侦测区域外延设定比例,确定所述虚拟电子围栏。
在本公开的一种示例性实施例中,确定所述目标区域中的虚拟电子围栏,包括:若为手动设定所述虚拟电子围栏,则响应于用户输入信息划定所述虚拟电子围栏。
在本公开的一种示例性实施例中,所述用户输入信息包括:所述虚拟电子围栏一个角的像素点位置以及所述虚拟电子围栏的长和宽;或者,所述虚拟电子围栏四个角的像素点位置。
根据本公开的一个方面,提供一种图像处理装置,包括:视频流获取模块,配置为获取目标区域的视频流;虚拟电子围栏确定模块,配置为处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;虚拟触碰预警信息生成模块,配置为若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。
根据本公开的一个方面,提供一种计算机设备,包括存储器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述任一实施例所述的方法。
根据本公开的一个方面,提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述任一实施例所述的方法。
本发明实施例提供的技术方案可以包括以下有益效果:
在本发明的一些实施例所提供的技术方案中,一方面,由于目前很多需要监控的目标区域通常均已经部署有视频监控设备,因此,本方案可以直接利用所述目标区域已经部署的视频监控设备采集所述目标区域的视频流,与上述现有技术相比,不需要在被侦测的目标区域部署任何附加的物理侦测装置,就没有物理物资的部署资金成本和时间成本,因此,本技术方案具有成本更低的优势;同时,还可以通过处理所述目标区域的视频流来确定所述目标区域中的虚拟电子围栏,虚拟电子围栏可以依据视频检测技术实时动态在视频画面中划定,因此,具有部署速度更快、可随时灵活调整的优势,可以在短期内快速实现对一个或者多个活动场所确定虚拟电子围栏;另一方面,还可以继续侦测所述视频流,当发现存在目标对象与上述确定的虚拟电子围栏的边界发生首次相交,即发生虚拟触碰时,可以自动生成虚拟触碰预警信息,即通过本方案可以实现主动入侵防御,对入侵企图做出反应,并可以把虚拟触碰预警信息发送到安全部门监控设备上,以保证管理人员能够及时了解报警区域的情况,快速的做出处理。此外,本发明实施例提供的技术方案与上述红外侦测技术相比,不存在侦测漏洞。红外侦测技术不论在限制活动的目标区域四周部署多少对红外发射接收装置,也无法做到无缝覆盖,而本发明实施例提供的技术方案是基于视频直播画面的检测技术进行入侵侦测则不存在以上问题。本发明某些实施例提供的技术方案可以广泛用于科技法庭、教室、会议室、小型广场等具有活动区域限制的场所,可以此技术开展秩序维护、异常处理、考核评价等一系列应用,具有非常广阔的应用价值。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1示意性示出了根据本发明的一个实施例的图像处理方法的流程图;
图2示意性示出了图1中的步骤S130的一个实施例的流程图;
图3示意性示出了根据本发明的另一个实施例的图像处理方法的流程图;
图4示意性示出了根据本发明的又一个实施例的图像处理方法的流程图;
图5示意性示出了根据本发明的再一个实施例的图像处理方法的流程图;
图6示意性示出了图1中的步骤S130的另一个实施例的流程图;
图7示意性示出了根据本发明的再一个实施例的图像处理方法的流程图;
图8示意性示出了根据本发明的再一个实施例的图像处理方法的流程图;
图9示意性示出了根据本发明的再一个实施例的图像处理方法的流程图;
图10示意性示出了图1中的步骤S120的一个实施例的流程图;
图11示意性示出了根据本发明的再一个实施例的图像处理方法的流程图;
图12示意性示出了根据本发明的一个实施例的虚拟电子围栏的示意图;
图13示意性示出了根据本发明的一个实施例的闯入触碰的示意图;
图14示意性示出了根据本发明的一个实施例的闯出触碰的示意图;
图15示意性示出了根据本发明的一个实施例的闯入虚拟电子围栏的示意图;
图16示意性示出了根据本发明的一个实施例的闯出虚拟电子围栏的示意图;
图17示意性示出了根据本发明的一个实施例的图像处理装置的框图;
图18示出了适于用来实现本发明实施例的计算机设备的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本发明将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。
此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本发明的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本发明的技术方案而没有特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知方法、装置、实现或者操作以避免模糊本发明的各方面。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。
图1示意性示出了根据本发明的一个实施例的图像处理方法的流程图。该图像处理方法的执行主体可以是具有计算处理功能的设备,如服务器和/或移动终端等。
如图1所示,本发明实施方式提供的图像处理方法可以包括以下步骤。
在步骤S110中,获取目标区域的视频流。
本发明实施例中,所述目标区域可以根据具体应用场景来确定,例如可以是法庭、教室、广场、剧院、电影院、演出场所等活动场所中的任意一种或者多种,本发明对此不作限定。
通常,上述目标区域一般都会已经安装有视频监控设备,例如高清摄像机(分辨率高于720P),通过高清摄像机采集所述目标区域的视频流,然后可以传送至视频监控主机、数字庭审主机或其他类似设备,从而可以获取到所述目标区域的视频流。在系统开始运行后,可以根据用户输入的所述目标区域的视频直播流URL(Uniform Resource Locator,统一资源定位符)地址抓取所述视频流。
在步骤S120中,处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域。
需要说明的是,本发明实施例中所谓的“初始帧图像”并不限定为是所述视频流的第一帧图像,只要是可以用于确定所述虚拟电子围栏的任一一帧或者多帧图像均可以认为是所述初始帧图像。
本发明实施例中,可以由系统来自动设定所述虚拟电子围栏或者调用人为手动设置的虚拟电子围栏,之后的操作是基于已确定的虚拟电子围栏来进行的。
本发明实施例中,所述虚拟电子围栏可以是指在获取的目标区域的视频流当中,在一个完整的视频图像中,通过自动侦测或者事先设定的方式划定的一个区域,该区域内限制一个或者多个对象例如人员进行自由活动,在现实场景中并无物理的电子围栏存在。
在步骤S130中,若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。
本发明实施例中,所述虚拟触碰是指所述目标区域的视频流中有人员或者物品与虚拟电子围栏的边界相交。其中,在所述视频流中与所述虚拟电子围栏的边界相交的人员或者物品,可以称之为触碰者即所述目标对象。
在本发明的一些实施例所提供的技术方案中,一方面,由于目前很多需要监控的目标区域通常均已经部署有视频监控设备,因此,本方案可以直接利用所述目标区域已经部署的视频监控设备采集所述目标区域的视频流,与上述现有技术相比,不需要在被侦测的目标区域部署任何附加的物理侦测装置,就没有物理物资的部署资金成本和时间成本,因此,本技术方案具有成本更低的优势;同时,还可以通过处理所述目标区域的视频流来确定所述目标区域中的虚拟电子围栏,虚拟电子围栏可以依据视频检测技术实时动态在视频画面中划定,因此,具有部署速度更快、可随时灵活调整的优势,可以在短期内快速实现对一个或者多个活动场所确定虚拟电子围栏;另一方面,还可以继续侦测所述视频流,当发现存在目标对象与上述确定的虚拟电子围栏的边界发生首次相交,即发生虚拟触碰时,可以自动生成虚拟触碰预警信息,即通过本方案可以实现主动入侵防御,对入侵企图做出反应,并可以把虚拟触碰预警信息发送到安全部门监控设备上,以保证管理人员能够及时了解报警区域的情况,快速的做出处理。此外,本发明实施例提供的技术方案与上述红外侦测技术相比,不存在侦测漏洞。红外侦测技术不论在限制活动的目标区域四周部署多少对红外发射接收装置,也无法做到无缝覆盖,而本发明实施例提供的技术方案是基于视频直播画面的检测技术进行入侵侦测则不存在以上问题。本发明某些实施例提供的技术方案可以广泛用于科技法庭、教室、会议室、小型广场等具有活动区域限制的场所,可以此技术开展秩序维护、异常处理、考核评价等一系列应用,具有非常广阔的应用价值。
在示例性实施例中,在确定虚拟电子围栏后,系统开始对视频流进行持续抓取每一帧完整图像(以下称之为抓帧)或者间隔抽取关键帧图像并进行分析。当系统分析发现有人或者其他物体(以下称之为触碰者)与虚拟电子围栏的边界相交时,确定为发生了虚拟触碰,如果触碰者在虚拟触碰之前位于所述虚拟电子围栏外,可以称之为闯入触碰,如图13所示;如果触碰者在虚拟触碰之前位于所述虚拟电子围栏内,可以称之为闯出触碰,如图14所示。下面分别对其进行说明。
图2示意性示出了图1中的步骤S130的一个实施例的流程图。本发明实施例中,所述虚拟触碰预警信息可以包括闯入预警信息。
如图2所示,上述步骤S130可以进一步包括以下步骤。
在步骤S131中,从所述视频流中获得所述参考图像的前帧图像。
需要说明的是,这里的前帧图像并不限定是所述参考图像的前一帧图像,其可以是所述参考图像的前一帧或者前多帧图像,只要其可以用于辅助判断在与所述虚拟电子围栏的边界发生首次触碰前,该触碰者是位于所述虚拟电子围栏以内还是以外的均可以。
在步骤S132中,若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域外,则生成所述闯入预警信息。
本发明实施例中,当系统判定发生了虚拟触碰,则发出虚拟触碰预警信息并进入预警分析状态。若发生了闯入触碰,则可以发出闯入预警信息。在下面的实施例中,若发生了闯出触碰,则可以发出闯出预警信息。
在下面的实施例中,系统可以保存发生虚拟触碰时的参考时间和相应的一帧完整视频图像(以下称之为参考图像),系统将根据预警类型(闯入预警或者闯出预警)分别进行不同的处理。
图3示意性示出了根据本发明的另一个实施例的图像处理方法的流程图。
如图3所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S310中,确定所述目标对象的特征点。
这里为了精准判断本次虚拟触碰发生后触碰者的后继行为,确定触碰者的特征点并跟踪特征点位置。
本发明实施例中,为精准判断本次虚拟触碰发生后触碰者的后继行为,系统需要根据触碰者的特征确定一个能反映该触碰者位置的参考点,称之为特征点。特征点的选择符合以下特征:第一,特征点在触碰者影像区域内;二,触碰者移动则特征点相应移动,且触碰者整体移动的位移与特征点移动的位移一致或基本一致。
例如,若触碰者为人,则可以其头部影像的物理中心点为特征点。单本发明并不限定于此,特征点的确定可以根据所述目标对象的不同而不同。
在步骤S320中,从所述视频流中获得所述参考图像的后帧图像。
需要说明的是,这里的后帧图像并不限定是所述参考图像的后一帧图像,其可以是所述参考图像的后一帧或者后多帧图像。
在步骤S330中,确定所述特征点在所述后帧图像上的实时位置。
本发明实施例中,当确定触碰者的特征点后,系统持续对视频流进行抓帧,每次抓帧均保存一帧完整视频图像(以下称之为实时图像),在实时图像上寻找到触碰者的特征点,并确定其实时位置。
继续参考图3,所述方法还可以包括步骤S340:若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
本发明实施例中,当触碰者与虚拟电子围栏不再相交时,称之为脱离触碰。系统可以通过检测所述实时图像,当判定所述触碰者与所述虚拟电子围栏的边界不再相交(称之为脱离触碰)时,且脱离触碰时,触碰者的特征点在所述虚拟电子围栏之外,则可以判定所述触碰者已经远离虚拟电子围栏,此时可以忽略上述闯入预警。
图4示意性示出了根据本发明的又一个实施例的图像处理方法的流程图。
如图4所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S410中,获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间。
在步骤S420中,获得采集所述后帧图像的实时时间。
在步骤S430中,若判定所述目标对象向所述虚拟电子围栏区域内移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯入速率。
本发明实施例中,若判定所述触碰者向虚拟电子围栏内移动(如下图15所示),系统可以根据实时图像和参考图像的抓取时间,以及特征点位移(即实时图像中特征点位置坐标与参考图像中特征点位置坐标之间的相对位移),计算特征点的位移速率,称之为所述目标对象的闯入速率。
继续参考图4,所述方法还可以包括步骤S440:若所述闯入速率大于闯入速率阈值,则发送第一闯入报警信息。其中,所述第一闯入报警信息可以称之为快速闯入报警信息。所述闯入速率阈值的具体取值可以根据实际应用场景的要求进行设定,本发明对此不作限定。
图5示意性示出了根据本发明的再一个实施例的图像处理方法的流程图。
如图5所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S510中,根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域内移动的闯入深度。
本发明实施例中,可以根据实时图像上特征点的实时位置以及确定的虚拟电子围栏的边界,实时计算特征点与虚拟电子围栏边界之间的垂直距离(具体是与边界哪一条边的垂直距离,可以根据闯入方向来确定),作为所述闯入深度。
继续参考图5,所述方法还可以包括步骤S520,若所述闯入深度大于闯入深度阈值,则发送第二闯入报警信息。其中,所述第二闯入报警信息可以称之为深度闯入报警信息。所述闯入深度阈值的具体取值可以根据实际应用场景的要求进行设定,本发明对此不作限定。
下面通过图6-9对闯出预警处理进行举例说明。闯出预警处理过程与闯入预警处理过程有类似之处,未详述之处可以参照上述实施例。
图6示意性示出了图1中的步骤S130的另一个实施例的流程图。本发明实施例中,所述虚拟触碰预警信息可以包括闯出预警信息。
在步骤S133中,从所述视频流中获得所述参考图像的前帧图像。
在步骤S134中,若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域内,则生成闯出预警信息。
图7示意性示出了根据本发明的再一个实施例的图像处理方法的流程图。
如图7所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S710中,确定所述目标对象的特征点。
在步骤S720中,从所述视频流中获得所述参考图像的后帧图像。
在步骤S730中,确定所述特征点在所述后帧图像上的实时位置。
如图7所示,所述方法还可以包括步骤S740:若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域内,则生成忽略闯出预警信息。
本发明实施例中,系统检测实时图像中,触碰者是否脱离触碰。当脱离触碰时,触碰者的特征点在虚拟电子围栏之内,则可以判定触碰者已退回虚拟电子围栏内,此时可以忽略上述闯出预警信息。
图8示意性示出了根据本发明的再一个实施例的图像处理方法的流程图。
如图8所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S810中,获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间。
在步骤S820中,获得采集所述后帧图像的实时时间。
在步骤S830中,若判定所述目标对象向所述虚拟电子围栏区域外移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯出速率。
本发明实施例中,如果触碰者向虚拟电子围栏外移动,如下图16所示,系统根据实时图像和参考图像的抓取时间,以及特征点位移(实时图像中特征点位置坐标与参考图像中特征点位置坐标之间的相对位移)计算特征点的位移速率,可以称之为闯出速率。
如图8所示,所述方法还可以包括步骤S840:若所述闯出速率大于闯出速率阈值,则发送第一闯出报警信息。所述第一闯出报警信息有可以称之为快速闯出预警信息。
图9示意性示出了根据本发明的再一个实施例的图像处理方法的流程图。
如图9所示,与上述实施例的不同之处在于,本发明实施例提供的图像处理方法还可以包括以下步骤。
在步骤S910中,根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域外移动的闯出深度。
在步骤S920中,若所述闯出深度大于闯出深度阈值,则发送第二闯出报警信息。
图10示意性示出了图1中的步骤S120的一个实施例的流程图。
在步骤S121中,判断是否设置为自动设定虚拟电子围栏;若为自动设定,则进入步骤S123;若为手动设定,则进入步骤S122。
本发明实施例中,可以判断是否自动设定虚拟电子围栏。具体的,系统可以通过配置文件来设置是否自动设定虚拟电子围栏,该配置文件例如可以是普通文本格式(txt文件)或者XML(Extensible Markup Language,可扩展标记语言)格式(XML文件)。系统运行后读取该配置文件,从而获知是否自动设定虚拟电子围栏。
在步骤S122中,若为手动设定所述虚拟电子围栏,则响应于用户输入信息划定所述虚拟电子围栏。
在示例性实施例中,所述用户输入信息可以包括:所述虚拟电子围栏一个角的像素点位置以及所述虚拟电子围栏的长和宽;或者,所述虚拟电子围栏四个角的像素点位置。
具体的,调取虚拟电子围栏设置,如果设置“自动设定虚拟电子围栏”为“否”,则采取手动设定虚拟电子围栏方式。为此,可以在配置文件中设置虚拟电子围栏,并在系统运行后调取虚拟电子围栏设置。虚拟电子围栏设置可以采取多种方式。
例如,一种方式可以为确定虚拟电子围栏左上角像素点位置(如(100,10)),再设定虚拟电子围栏的长和宽,可以以像素数为计量单位,如长200个像素,宽100个像素。再例如,另一种方式可以为设定虚拟电子围栏的四角像素点,如:左上角(100,10),右上角(300,10),左下角(100,110),右下角(300,110)。
需要说明的是,手动设定虚拟电子围栏的方式并不限于上述举例,本发明对此不作限定。手动设定虚拟电子围栏精确又简单,对于监控摄像机取景范围不变的小型固定场所可以设置为优先采用手动设定虚拟电子围栏,但本发明并不限定于此。
在步骤S123中,若为自动设定所述虚拟电子围栏,则根据设置的定位参考点,自动划定所述虚拟电子围栏。
在示例性实施例中,根据设置的定位参考点,自动划定所述虚拟电子围栏,可以包括:根据所述定位参考点确定待侦测区域;将所述待侦测区域外延设定比例,确定所述虚拟电子围栏。
本发明实施例中,如果系统设置为自动设定虚拟电子围栏,则系统运行后,根据配置文件设置的视频图像类型及由视频图像类型所确定的虚拟电子围栏的定位参考点自动划定虚拟电子围栏。虚拟电子围栏以包含待侦测区域(例如法庭的法官席)并外延例如0-20%(这里仅是举例说明,本发明并不限定于此)为准,根据可以具体活动场所类型和大小灵活设置,以不包含人员或物品可自由活动的区域为原则。
例如,一个标准数字法庭(面积50-100平米),对法官席设置虚拟电子围栏,则以法官席上方国徽为参考点1,法台前端左右角分别为参考点2和3,以参考点1确定虚拟电子围栏的上边线,参考点2和3确定虚拟电子围栏的左右边线和下边线,外延10%作为最终设定的虚拟电子围栏区域,如图12所示。
图11示意性示出了根据本发明的再一个实施例的图像处理方法的流程图。
如图11所示,本发明实施例提供的图像处理方法可以包括以下步骤。
在步骤S1101中,抓取视频流。
在步骤S1102中,确定虚拟电子围栏。
在步骤S1103中,进行视频侦测,若发生虚拟触碰,则进行虚拟触碰预警。
在步骤S1104中,确定目标对象的特征点。
在步骤S1105中,判断预警类型;若为闯入预警,则进入步骤S1106;若为闯出预警,则进入步骤S1114。
在步骤S1106中,根据特征点位置。
在步骤S1107中,判断所述目标对象是否脱离虚拟电子围栏;若是,则进入步骤S1113;若否,则进入步骤S1108。
在步骤S1108中,判断闯入速率是否超过报警阈值;若是,则进入步骤S1111;若否,则进入步骤S1109。
在步骤S1109中,判断闯入深度是否超过报警阈值;若是,则进入步骤S1110;若否,则跳回到上述步骤S1106。
在步骤S1110中,深度闯入预警。
本发明实施例中,若所述闯入深度大于闯入深度阈值,则发送第二闯入报警信息。
在步骤S1111中,快速闯入预警。
本发明实施例中,若所述闯入速率大于闯入速率阈值,则发送第一闯入报警信息。
在步骤S1112中,忽略预警。
在一些实施例中,若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
在另一些实施例中,若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域内,则生成忽略闯出预警信息。
在步骤S1113中,根据特征点位置。
在步骤S1114中,判断所述目标对象是否退回虚拟电子围栏;若是,则进入步骤S1112;若否,则进入步骤S1115。
在步骤S1115中,判断闯出速率是否超过报警阈值;若是,则进入步骤S1118;若否,则进入步骤S1116。
在步骤S1116中,判断闯出深度是否超过报警阈值;若是,则进入步骤S1117;若否,则跳回到上述步骤S1113。
在步骤S1117中,深度闯出预警。
本发明实施例中,若所述闯出深度大于闯出深度阈值,则发送第二闯出报警信息。
在步骤S1118中,快速闯出预警。
本发明实施例中,若所述闯出速率大于闯出速率阈值,则发送第一闯出报警信息。
本发明实施例中,当系统计算闯出速率小于等于报警阈值时,计算特征点向虚拟电子围栏外位移的深度,称之为闯出深度,当闯出深度高于报警阈值时进行深度闯出报警。
下面结合法庭这种具体应用场景进行举例说明,人民法院法庭作为人民法院执行案件审理和判决的办公场所,为维护法律的尊严,对审判活动参与各方都有一定的纪律要求,尤其是对于庭审过程中各参与方不能随意离开自己的活动区域有严格的要求,如最高人民法院于2016年04月13日发布的《中华人民共和国人民法院法庭规则》(2016修正)“旁听人员不得进入审判活动区”、“媒体记者经许可实施第一款第四项规定的行为,应当在指定的时间及区域进行”等,最高人民法院于2005.11.04颁布的《法官行为规范》(试行)规定法官“不与诉讼中的任何一方有亲近的表示”等,以及各地法院制订的法庭纪律要求中都对法庭各参与方活动区域有明确要求。
具体的,这里的法庭可以是科技法庭,科技法庭是指根据国家和最高法院发布的有关标准和规范建设的,部署有科技法庭系统的人民法院法庭。科技法庭系统为一套软硬件结合的司法应用系统,其利用目前成熟的计算机网络技术、音视频编解码技术、图形图像处理技术以及通信与自动化技术,借助现代科学技术装备,对法庭审判过程的所有电子笔录、音频、视频、电子证物等信息进行数字化编码处理,并通过网络以多种视频应用形式(视频直播、点播、下载、光盘刻录等等)展现庭审过程。即本技术方案可以直接利用科技法庭原本已有的视频监控设备和/或后端主机,降低了成本,提高了部署速度。
图12示意性示出了根据本发明的一个实施例的虚拟电子围栏的示意图。图13示意性示出了根据本发明的一个实施例的闯入触碰的示意图。图14示意性示出了根据本发明的一个实施例的闯出触碰的示意图。图15示意性示出了根据本发明的一个实施例的闯入虚拟电子围栏的示意图。图16示意性示出了根据本发明的一个实施例的闯出虚拟电子围栏的示意图。
需要说明的是,虽然图12-16中均以法庭为例进行说明,但该技术方案的具体应用场景并不限定于此,例如还可以是数字教室(具有摄像机等设备)、舞台等任意的应用场景。
本发明实施方式提供的图像处理方法,与上述红外侦测技术只能侦测入侵相比,本发明实施例提供的技术方案进一步还可以通过视频侦测技术来判断本次虚拟触碰是闯入入侵还是闯出入侵,并可以根据目标对象的不同行为进行不同类型的预警,从而可以实现基于虚拟电子围栏对目标对象进入或者离开所述虚拟电子围栏时进行预警。
本发明实施方式提供的图像处理方法,在上述发现虚拟触碰后,还可以继续根据后续的持续视频侦测,判断本次虚拟触碰是否无害通过行为,从而可以忽略本次预警。更进一步的,还可以判断目标对象的闯出深度和/或闯出速率,和/或闯入深度和/或闯入速率,并可以进行相应类型的预警。
以下介绍本发明的装置实施例,可以用于执行本发明上述的图像处理方法。
图17示意性示出了根据本发明的一个实施例的图像处理装置的框图。
如图17所示,本发明实施方式提供的图像处理装置1700可以包括视频流获取模块1710、虚拟电子围栏确定模块1720以及虚拟触碰预警信息生成模块1730。
其中,视频流获取模块1710可以配置为获取目标区域的视频流。虚拟电子围栏确定模块1720可以配置为处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域。虚拟触碰预警信息生成模块1730可以配置为若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。
在示例性实施例中,所述虚拟触碰预警信息可以包括闯入预警信息。其中,虚拟触碰预警信息生成模块1730可以包括:前帧图像获得模块,可以配置为从所述视频流中获得所述参考图像的前帧图像;闯入预警模块,可以配置为若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域外,则生成所述闯入预警信息。
在示例性实施例中,图像处理装置1700还可以包括:特征点确定模块,可以配置为确定所述目标对象的特征点;后帧图像获得模块,可以配置为从所述视频流中获得所述参考图像的后帧图像;实时位置确定模块,可以配置为确定所述特征点在所述后帧图像上的实时位置。
在示例性实施例中,图像处理装置1700还可以包括:忽略闯入预警模块,可以配置为若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
在示例性实施例中,图像处理装置1700还可以包括:参考时间获得模块,可以配置为获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;实时时间获得模块,可以配置为获得采集所述后帧图像的实时时间;闯入速率获得模块,可以配置为若判定所述目标对象向所述虚拟电子围栏区域内移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯入速率。
在示例性实施例中,图像处理装置1700还可以包括:第一闯入报警模块,可以配置为若所述闯入速率大于闯入速率阈值,则发送第一闯入报警信息。
在示例性实施例中,图像处理装置1700还可以包括:闯入深度获得模块,可以配置为根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域内移动的闯入深度。
在示例性实施例中,图像处理装置1700还可以包括:第二闯入报警模块,可以配置为若所述闯入深度大于闯入深度阈值,则发送第二闯入报警信息。
在示例性实施例中,所述虚拟触碰预警信息可以包括闯出预警信息。其中,虚拟触碰预警信息生成模块1730可以包括:前帧图像获得模块,可以配置为从所述视频流中获得所述参考图像的前帧图像;闯出预警模块,可以配置为若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域内,则生成闯出预警信息。
在示例性实施例中,图像处理装置1700还可以包括:特征点确定模块,可以配置为确定所述目标对象的特征点;后帧图像获得模块,可以配置为从所述视频流中获得所述参考图像的后帧图像;实时位置确定模块,可以配置为确定所述特征点在所述后帧图像上的实时位置。
在示例性实施例中,图像处理装置1700还可以包括:忽略闯出预警模块,可以配置为若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域内,则生成忽略闯出预警信息。
在示例性实施例中,图像处理装置1700还可以包括:参考时间获得模块,可以配置为获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;实时时间获得模块,可以配置为获得采集所述后帧图像的实时时间;闯出速率获得模块,可以配置为若判定所述目标对象向所述虚拟电子围栏区域外移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯出速率。
在示例性实施例中,图像处理装置1700还可以包括:第一闯出报警模块,可以配置为若所述闯出速率大于闯出速率阈值,则发送第一闯出报警信息。
在示例性实施例中,图像处理装置1700还可以包括:闯出深度获得模块,可以配置为根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域外移动的闯出深度。
在示例性实施例中,图像处理装置1700还可以包括:第二闯出报警模块,可以配置为若所述闯出深度大于闯出深度阈值,则发送第二闯出报警信息。
在示例性实施例中,虚拟电子围栏确定模块1720可以包括:自动设定模块,可以配置为若为自动设定所述虚拟电子围栏,则根据设置的定位参考点,自动划定所述虚拟电子围栏。
在示例性实施例中,所述自动设备模块可以包括:待侦测区域确定单元,可以配置为根据所述定位参考点确定待侦测区域;虚拟电子围栏确定单元,可以配置为将所述待侦测区域外延设定比例,确定所述虚拟电子围栏。
在示例性实施例中,虚拟电子围栏确定模块1720可以包括:手动设定模块,可以配置为若为手动设定所述虚拟电子围栏,则响应于用户输入信息划定所述虚拟电子围栏。
在示例性实施例中,所述用户输入信息可以包括:所述虚拟电子围栏一个角的像素点位置以及所述虚拟电子围栏的长和宽;或者,所述虚拟电子围栏四个角的像素点位置。
由于本发明的示例实施例的图像处理装置的各个功能模块与上述图像处理方法的示例实施例的步骤对应,因此对于本发明装置实施例中未披露的细节,请参照本发明上述的图像处理方法的实施例。
下面参考图18,其示出了适于用来实现本发明实施例的电子设备的计算机系统800的结构示意图。图18示出的电子设备的计算机系统800仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图18所示,计算机系统800包括中央处理单元(CPU)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储部分807加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有系统操作所需的各种程序和数据。CPU801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
以下部件连接至I/O接口805:包括键盘、鼠标等的输入部分806;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分807;包括硬盘等的存储部分808;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至I/O接口805。可拆卸介质811,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器810上,以便于从其上读出的计算机程序根据需要被安装入存储部分807。
特别地,根据本发明的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分809从网络上被下载和安装,和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(CPU)801执行时,执行本申请的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块和/或单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的模块和/或单元也可以设置在处理器中。其中,这些模块和/或单元的名称在某种情况下并不构成对该模块和/或单元本身的限定。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如上述实施例中所述的图像处理方法。
例如,所述的电子设备可以实现如图1中所示的:步骤S110,获取目标区域的视频流;步骤S120,处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;步骤S130,若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息。
又如,所述的电子设备可以实现如图2至图11所示的各个步骤。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块和/或单元,但是这种划分并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多模块和/或单元的特征和功能可以在一个模块和/或单元中具体化。反之,上文描述的一个模块和/或单元的特征和功能可以进一步划分为由多个模块和/或单元来具体化。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本发明实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本发明实施方式的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (19)

1.一种图像处理方法,其特征在于,包括:
获取目标区域的视频流;
处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;
若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息,所述虚拟触碰预警信息包括闯入预警信息;
其中,生成虚拟触碰预警信息,包括:
从所述视频流中获得所述参考图像的前帧图像;
若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域外,则生成闯入预警信息;
所述方法还包括:
确定所述目标对象的特征点,所述特征点在所述目标对象影像区域内,且当所述目标对象移动时所述特征点相应移动,所述目标对象整体移动的位移与所述特征点移动的位移一致;
从所述视频流中获得所述参考图像的后帧图像;
确定所述特征点在所述后帧图像上的实时位置;
若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
2.根据权利要求1所述的图像处理方法,其特征在于,还包括:
获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;
获得采集所述后帧图像的实时时间;
若判定所述目标对象向所述虚拟电子围栏区域内移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯入速率。
3.根据权利要求2所述的图像处理方法,其特征在于,还包括:
若所述闯入速率大于闯入速率阈值,则发送第一闯入报警信息。
4.根据权利要求2或3所述的图像处理方法,其特征在于,还包括:
根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域内移动的闯入深度。
5.根据权利要求4所述的图像处理方法,其特征在于,还包括:
若所述闯入深度大于闯入深度阈值,则发送第二闯入报警信息。
6.根据权利要求1所述的图像处理方法,其特征在于,所述虚拟触碰预警信息包括闯出预警信息;其中,生成虚拟触碰预警信息,包括:
从所述视频流中获得所述参考图像的前帧图像;
若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域内,则生成闯出预警信息。
7.根据权利要求6所述的图像处理方法,其特征在于,还包括:
确定所述目标对象的特征点;
从所述视频流中获得所述参考图像的后帧图像;
确定所述特征点在所述后帧图像上的实时位置。
8.根据权利要求7所述的图像处理方法,其特征在于,还包括:
若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域内,则生成忽略闯出预警信息。
9.根据权利要求7所述的图像处理方法,其特征在于,还包括:
获得所述特征点在所述参考图像上的参考位置,以及采集所述参考图像的参考时间;
获得采集所述后帧图像的实时时间;
若判定所述目标对象向所述虚拟电子围栏区域外移动,则根据所述参考时间、所述实时时间、所述参考位置和所述实时位置,获得所述目标对象的闯出速率。
10.根据权利要求9所述的图像处理方法,其特征在于,还包括:
若所述闯出速率大于闯出速率阈值,则发送第一闯出报警信息。
11.根据权利要求9或10所述的图像处理方法,其特征在于,还包括:
根据所述实时位置和所述边界获得所述特征点向所述虚拟电子围栏区域外移动的闯出深度。
12.根据权利要求11所述的图像处理方法,其特征在于,还包括:
若所述闯出深度大于闯出深度阈值,则发送第二闯出报警信息。
13.根据权利要求1所述的图像处理方法,其特征在于,确定所述目标区域中的虚拟电子围栏,包括:
若为自动设定所述虚拟电子围栏,则根据设置的定位参考点,自动划定所述虚拟电子围栏。
14.根据权利要求13所述的图像处理方法,其特征在于,根据设置的定位参考点,自动划定所述虚拟电子围栏,包括:
根据所述定位参考点确定待侦测区域;
将所述待侦测区域外延设定比例,确定所述虚拟电子围栏。
15.根据权利要求1所述的图像处理方法,其特征在于,确定所述目标区域中的虚拟电子围栏,包括:
若为手动设定所述虚拟电子围栏,则响应于用户输入信息划定所述虚拟电子围栏。
16.根据权利要求15所述的图像处理方法,其特征在于,所述用户输入信息包括:所述虚拟电子围栏一个角的像素点位置以及所述虚拟电子围栏的长和宽;或者,所述虚拟电子围栏四个角的像素点位置。
17.一种图像处理装置,其特征在于,包括:
视频流获取模块,配置为获取目标区域的视频流;
虚拟电子围栏确定模块,配置为处理所述视频流的初始帧图像,确定所述目标区域中的虚拟电子围栏,所述虚拟电子围栏包括边界及所述边界内的虚拟电子围栏区域;
虚拟触碰预警信息生成模块,配置为若检测到所述视频流中存在目标对象与所述边界首次相交的参考图像,则生成虚拟触碰预警信息,所述虚拟触碰预警信息包括闯入预警信息;
其中,所述虚拟触碰预警信息生成模块包括:
前帧图像获得模块,配置为从所述视频流中获得所述参考图像的前帧图像;
闯入预警模块,配置为若在所述前帧图像中,所述目标对象位于所述虚拟电子围栏区域外,则生成闯入预警信息;
所述装置还包括:
特征点确定模块,配置为确定所述目标对象的特征点,所述特征点在所述目标对象影像区域内,且当所述目标对象移动时所述特征点相应移动,所述目标对象整体移动的位移与所述特征点移动的位移一致;
后帧图像获得模块,配置为从所述视频流中获得所述参考图像的后帧图像;
实时位置确定模块,配置为确定所述特征点在所述后帧图像上的实时位置;
忽略闯入预警模块,配置为若检测到在所述后帧图像中,所述目标对象与所述边界不相交,且根据所述实时位置判定所述特征点位于所述虚拟电子围栏区域外,则生成忽略闯入预警信息。
18.一种计算机设备,包括存储器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-16中任一所述的图像处理方法。
19.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-16中任一所述的图像处理方法。
CN201811573555.XA 2018-12-21 2018-12-21 图像处理方法、装置、介质及电子设备 Active CN109672862B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811573555.XA CN109672862B (zh) 2018-12-21 2018-12-21 图像处理方法、装置、介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811573555.XA CN109672862B (zh) 2018-12-21 2018-12-21 图像处理方法、装置、介质及电子设备

Publications (2)

Publication Number Publication Date
CN109672862A CN109672862A (zh) 2019-04-23
CN109672862B true CN109672862B (zh) 2020-10-27

Family

ID=66146007

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811573555.XA Active CN109672862B (zh) 2018-12-21 2018-12-21 图像处理方法、装置、介质及电子设备

Country Status (1)

Country Link
CN (1) CN109672862B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110276577A (zh) * 2019-06-06 2019-09-24 深圳前海微众银行股份有限公司 一种虚拟仓库的管理方法及装置
CN112837471A (zh) * 2019-11-22 2021-05-25 上海弘视通信技术有限公司 网约房安全监控方法和装置
CN111063145A (zh) * 2019-12-13 2020-04-24 北京都是科技有限公司 电子围栏智能处理器
CN111432172A (zh) * 2020-03-20 2020-07-17 浙江大华技术股份有限公司 基于图像融合的围栏报警方法及系统
CN111582060B (zh) * 2020-04-20 2023-04-18 浙江大华技术股份有限公司 自动划线周界报警方法、计算机设备及存储装置
CN111862129B (zh) * 2020-07-20 2024-06-14 国网江苏省电力有限公司南京供电分公司 一种用于封样存储的虚拟围栏系统
CN116052223B (zh) * 2023-04-03 2023-06-30 浪潮通用软件有限公司 基于机器视觉识别作业区域人的方法、系统、设备及介质
CN118609035A (zh) * 2024-08-08 2024-09-06 宁波星巡智能科技有限公司 基于场景自适应的电子围栏生成方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7369680B2 (en) * 2001-09-27 2008-05-06 Koninklijke Phhilips Electronics N.V. Method and apparatus for detecting an event based on patterns of behavior
CN103456024A (zh) * 2012-06-02 2013-12-18 浙江西谷数字技术有限公司 一种运动目标越线判断方法
CN106385559A (zh) * 2016-09-19 2017-02-08 合肥视尔信息科技有限公司 一种三维监控系统
CN107818651A (zh) * 2017-10-27 2018-03-20 华润电力技术研究院有限公司 一种基于视频监控的非法越界报警方法及装置
CN109040669A (zh) * 2018-06-28 2018-12-18 国网山东省电力公司菏泽供电公司 变电站智能视频围栏方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10670185B2 (en) * 2014-09-19 2020-06-02 Illinois Tool Works Inc. Configurable user detection system
CN107277443B (zh) * 2017-06-23 2019-12-10 深圳市盛路物联通讯技术有限公司 一种大范围周边安全监控方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7369680B2 (en) * 2001-09-27 2008-05-06 Koninklijke Phhilips Electronics N.V. Method and apparatus for detecting an event based on patterns of behavior
CN103456024A (zh) * 2012-06-02 2013-12-18 浙江西谷数字技术有限公司 一种运动目标越线判断方法
CN106385559A (zh) * 2016-09-19 2017-02-08 合肥视尔信息科技有限公司 一种三维监控系统
CN107818651A (zh) * 2017-10-27 2018-03-20 华润电力技术研究院有限公司 一种基于视频监控的非法越界报警方法及装置
CN109040669A (zh) * 2018-06-28 2018-12-18 国网山东省电力公司菏泽供电公司 变电站智能视频围栏方法及系统

Also Published As

Publication number Publication date
CN109672862A (zh) 2019-04-23

Similar Documents

Publication Publication Date Title
CN109672862B (zh) 图像处理方法、装置、介质及电子设备
WO2021164644A1 (zh) 违规事件检测方法及装置、电子设备和存储介质
US10937290B2 (en) Protection of privacy in video monitoring systems
CA2931713C (en) Video camera scene translation
AU2009243916B2 (en) A system and method for electronic surveillance
US8890936B2 (en) Utilizing depth information to create 3D tripwires in video
KR102139582B1 (ko) 다중 roi 및 객체 검출 dcnn 기반의 cctv 영상분석장치 및 그 장치의 구동방법
US20130128050A1 (en) Geographic map based control
KR101743386B1 (ko) 비디오 모니터링 방법, 장치 및 시스템
CN108073577A (zh) 一种基于人脸识别的报警方法和系统
KR101937272B1 (ko) 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법
CN109040693B (zh) 智能告警系统及方法
US20150085114A1 (en) Method for Displaying Video Data on a Personal Device
CN110718067A (zh) 违规行为告警方法及相关装置
JP2001034250A (ja) 映像表示装置、映像表示方法および映像を表示するためのプログラムを記録した記録媒体
WO2019089441A1 (en) Exclusion zone in video analytics
CN110543803A (zh) 监控方法、装置、服务器和存储介质
CN104185078A (zh) 视频监控处理方法、装置及系统
CN110348343A (zh) 一种暴力行为监测方法、装置、存储介质及终端设备
CN112367496A (zh) 一种配电室智能安全作业方法及装置
JP2018151834A (ja) 迷子検出装置および迷子検出方法
KR101990789B1 (ko) 관심객체의 선택에 의한 영상 탐색장치 및 방법
CN115174872A (zh) 一种监控方法及装置
CN113658394B (zh) 河道监控方法及装置
CN106385559A (zh) 一种三维监控系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant