发明内容
本申请提供了一种家庭视频跟踪监控方法、装置、设备和存储介质,用于改善现有技术无法达到根据目标人物的移动进行家庭内摄像头的调控、跟踪人物轨迹,存在灵活性较差的技术问题。
有鉴于此,本申请第一方面提供了一种家庭视频跟踪监控方法,包括:
根据输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,对各摄像头的监控画面中的出入口区域进行矩形标记;
开启各区域的全部摄像头进行目标人物识别,并关闭没有识别到所述目标人物的摄像头;
控制识别到所述目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到所述目标人物时,判断所述目标人物是否位于对应的出入口区域;
若所述目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制所述目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别;
若其他区域内的摄像头没有识别到所述目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到所述目标人物,则返回所述控制识别到所述目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到所述目标人物时,判断所述目标人物是否位于对应的出入口区域的步骤。
可选的,所述在识别到所述目标人物时,判断所述目标人物是否位于对应的出入口区域,包括:
在识别到所述目标人物时,根据识别结果提取所述目标人物的边界框的四个角点像素坐标;
根据各区域与摄像头、出入口的对应关系以及预先保存的各出入口区域的矩形标记的四个角点像素坐标,提取识别到所述目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标;
比对所述目标人物对应的四个角点像素坐标和识别到所述目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标,确定所述目标人物与对应的出入口区域是否存在重合部分,若是,则判定所述目标人物位于对应的出入口区域,若否,则判定所述目标人物未位于对应的出入口区域。
可选的,所述方法还包括:
存储各摄像头拍摄的监控视频,对各所述监控视频进行视频拼接,得到关于所述目标人物的行动轨迹的监控视频。
可选的,所述方法还包括:
当全部摄像头关闭时,每隔第二预置时间开启全部摄像头进行目标人物识别。
本申请第二方面提供了一种家庭视频跟踪监控装置,包括:
信息管理模块,用于根据输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,对各摄像头的监控画面中的出入口区域进行矩形标记;
摄像头控制模块,用于:
开启各区域的全部摄像头进行目标人物识别,并关闭没有识别到所述目标人物的摄像头;
控制识别到所述目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到所述目标人物时,判断所述目标人物是否位于对应的出入口区域;
若所述目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制所述目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别;
若其他区域内的摄像头没有识别到所述目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到所述目标人物,则返回所述控制识别到所述目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到所述目标人物时,判断所述目标人物是否位于对应的出入口区域的步骤。
可选的,所述目标人物是否位于对应的出入口区域的判断过程为:
在识别到所述目标人物时,根据识别结果提取所述目标人物的边界框的四个角点像素坐标;
根据各区域与摄像头、出入口的对应关系以及预先保存的各出入口区域的矩形标记的四个角点像素坐标,提取识别到所述目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标;
比对所述目标人物对应的四个角点像素坐标和识别到所述目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标,确定所述目标人物与对应的出入口区域是否存在重合部分,若是,则判定所述目标人物位于对应的出入口区域,若否,则判定所述目标人物未位于对应的出入口区域。
可选的,还包括:
监控视频拼接存储模块,用于存储各摄像头拍摄的监控视频,对各所述监控视频进行视频拼接,得到关于所述目标人物的行动轨迹的监控视频。
可选的,所述摄像头控制模块,还用于:
当全部摄像头关闭时,每隔第二预置时间开启全部摄像头进行目标人物识别。
本申请第三方面提供了一种家庭视频跟踪监控设备,所述设备包括处理器以及存储器;
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行第一方面任一种所述的家庭视频跟踪监控方法。
本申请第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码被处理器执行时实现第一方面任一种所述的家庭视频跟踪监控方法。
从以上技术方案可以看出,本申请具有以下优点:
本申请提供了一种家庭视频跟踪监控方法,包括:根据输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,对各摄像头的监控画面中的出入口区域进行矩形标记;开启各区域的全部摄像头进行目标人物识别,并关闭没有识别到目标人物的摄像头;控制识别到目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到目标人物时,判断目标人物是否位于对应的出入口区域;若目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别;若其他区域内的摄像头没有识别到目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到目标人物,则返回控制识别到目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到目标人物时,判断目标人物是否位于对应的出入口区域的步骤。
本申请中,根据用户输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,以方便后续调控各区域的摄像头;对监控画面进行目标人物识别,只开启拍摄到目标人物的摄像头,降低监控能耗;通过在监控画面中标定全部出入口,判断目标人物是否位于出入口区域内,选择控制出入口相连另一区域内摄像头开启,以判断目标人物是否可能进入另一区域,从而实现根据目标人物的移动调控摄像头,实现人物轨迹跟踪,灵活性高,改善了现有技术无法达到根据目标人物的移动进行家庭内摄像头的调控、跟踪人物轨迹,存在灵活性较差的技术问题。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了便于理解,请参阅图1,本申请实施例提供了一种家庭视频跟踪监控方法,包括:
步骤101、根据输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,对各摄像头的监控画面中的出入口区域进行矩形标记。
在控制摄像头进行跟踪监控之前,需要先输入房屋信息和摄像头位置信息,以便确定房屋各区域与摄像头、出入口的对应关系,例如,区域A对应摄像头a1、a2,对应出入口Z1,区域B对应摄像头b1,对应出入口Z1。还需要录入目标人物信息,包括目标人物图片,还可以包括目标人物的身份标签(如老人、小孩)等。在录入信息后,在所有摄像头的监控画面中对出入口区域进行矩阵标记,并保存各出入口区域的矩形标记的四个角点像素坐标。
步骤102、开启各区域的全部摄像头进行目标人物识别,并关闭没有识别到目标人物的摄像头。
开启房屋各区域的所有摄像头进行目标人物识别,关闭未识别到目标人物的摄像头。若房屋的全部摄像头关闭,则隔第二预置时间开启全部摄像头进行目标人物识别。
步骤103、控制识别到目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到目标人物时,判断目标人物是否位于对应的出入口区域。
对于识别到目标人物的摄像头,则控制这些摄像头每隔第一预置时间进行目标人物识别,识别目标人物是否仍在该摄像头所在区域的监控画面中,若目标人物不在该区域的监控画面中,则关闭该区域的摄像头;若目标人物还在该区域的监控画面中,则判断目标人物是否在该区域的出入口区域。目标人物是否位于对应的出入口区域的判断过程可以为:
在识别到目标人物时,根据识别结果提取目标人物的边界框的四个角点像素坐标;可以通过现有的目标检测方法实现根据输入的目标人物图像信息,对监控画面中的人物进行识别,在此不再进行赘述。在识别到目标人物后,提取识别结果中目标人物的边界框的四个角点像素坐标。
根据各区域与摄像头、出入口的对应关系以及预先保存的各出入口区域的矩形标记的四个角点像素坐标,提取识别到目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标;根据各区域与摄像头的对应关系确定识别到目标人物的摄像头所在的区域,进而根据各区域与出入口的对应关系确定识别到目标人物的摄像头所在的区域对应的出入口区域,也即确定了识别到目标人物的摄像头对应的出入口区域,然后根据预先保存的各出入口区域的四个角点像素坐标提取识别到目标人物的摄像头对应的出入口区域的四个角点像素坐标。
比对目标人物对应的四个角点像素坐标和识别到目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标,确定目标人物与对应的出入口区域是否存在重合部分,若是,则判定目标人物位于对应的出入口区域,若否,则判定目标人物未位于对应的出入口区域。假设目标人物的边界框的四个角点像素点分别为左下角点像素坐标(x3,y3)、左上角点像素坐标(x3,y4)、右下角点像素坐标(x4,y3)和右上角点像素坐标(x4,y4),识别到目标人物的摄像头对应的出入口区域的四个角点像素坐标为左下角点像素坐标(xl,y1)、左上角点像素坐标(x1,y2)、右下角点像素坐标(x2,y1)和右上角点像素坐标(x2,y2),当y1<y4<y2,且x1<x4<x2,x3<x2,或,y1<y4<y2,且x1<x3<x2,x4>x2,则判定目标人物位于对应的出入口区域((xl,y1),(x1,y2),(x2,y1),(x2,y2))。
步骤104、若目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别。
若目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别。假设区域A中的摄像头a1识别到目标人物位于出入口Z1的范围内,根据房屋各区域与出入口的对应关系确定到与出入口Z1相连的其他区域为区域B,然后根据各区域与摄像头的对应关系确定区域B对应的摄像头为b1,则控制摄像头b1开启进行目标人物识别。
步骤105、若其他区域内的摄像头没有识别到目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到目标人物,则返回步骤103。
若其他区域内的摄像头没有识别到目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到目标人物,则返回步骤103,控制识别到目标人物的摄像头每隔第一预置时间进行一次目标人物识别,若目标人物仍在该区域监控画面中,则摄像头继续开启,并重复进行目标人物是否在出入口区域的识别;若目标人物已不在该区域监控画面中,则关闭该区域摄像头。本申请实施例可以根据目标人物的位置,将没有目标人物的区域内的摄像头关闭,降低监控能耗,减少冗余数据。具体监控过程进一步可以参考图2。
通过本申请实施例中的监控方法,可以根据目标人物所在区域实现智能家居的控制,例如,晚上,当通过摄像头的监控画面识别到目标人物(如老人)时,根据目标人物所在区域控制该区域的灯光开启,当识别到老人位于所在区域的出入口区域时,控制该出入口区域相连的其他区域的灯光开启,当老人离开该区域时,控制该区域的灯光关闭,从而避免老人在黑夜中摸索开灯、黑夜中行走容易发生碰撞的问题。
进一步,本申请实施例还可以存储各摄像头拍摄的监控视频,对各监控视频进行视频拼接,得到关于目标人物的行动轨迹的监控视频。拼接规则可以为:有多个区域摄像头开启时,任选一区域内的一个摄像头的监控画面,直至其关闭,然后继续在开启摄像头中任选一摄像头的监控画面拼接。本申请实施例可以清晰的显示出目标人物实时位置与运动动线,在查看回放视频时,无需在所有监控画面内查找,且可直接生成按照人物轨迹的监控视频,提高监控效率。
本申请实施例中,根据用户输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,以方便后续调控各区域的摄像头;对监控画面进行目标人物识别,只开启拍摄到目标人物的摄像头,降低监控能耗;通过在监控画面中标定全部出入口,判断目标人物是否位于出入口区域内,选择控制出入口相连另一区域内摄像头开启,以判断目标人物是否可能进入另一区域,从而实现根据目标人物的移动调控摄像头,实现人物轨迹跟踪,灵活性高,改善了现有技术无法达到根据目标人物的移动进行家庭内摄像头的调控、跟踪人物轨迹,存在灵活性较差的技术问题。
以上为本申请提供的一种家庭视频跟踪监控方法的一个实施例,以下为本申请提供的一种家庭视频跟踪监控装置的一个实施例。
请参考图3,本申请实施例提供的一种家庭视频跟踪监控装置,包括:
信息管理模块,用于根据输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,对各摄像头的监控画面中的出入口区域进行矩形标记;
摄像头控制模块,用于:
开启各区域的全部摄像头进行目标人物识别,并关闭没有识别到目标人物的摄像头;
控制识别到目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到目标人物时,判断目标人物是否位于对应的出入口区域;
若目标人物位于对应的出入口区域,则根据各区域与摄像头、出入口的对应关系控制目标人物所在出入口区域相连的其他区域内的摄像头开启并进行目标人物识别;
若其他区域内的摄像头没有识别到目标人物,则关闭其他区域内的摄像头,若其他区域内的摄像头识别到目标人物,则返回控制识别到目标人物的摄像头每隔第一预置时间进行目标人物识别,并在识别到目标人物时,判断目标人物是否位于对应的出入口区域的步骤。
作为进一步地改进,目标人物是否位于对应的出入口区域的判断过程为:
在识别到目标人物时,根据识别结果提取目标人物的边界框的四个角点像素坐标;
根据各区域与摄像头、出入口的对应关系以及预先保存的各出入口区域的矩形标记的四个角点像素坐标,提取识别到目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标;
比对目标人物对应的四个角点像素坐标和识别到目标人物的摄像头所在区域对应的出入口区域的四个角点像素坐标,确定目标人物与对应的出入口区域是否存在重合部分,若是,则判定目标人物位于对应的出入口区域,若否,则判定目标人物未位于对应的出入口区域。
作为进一步地改进,装置还包括:
监控视频拼接存储模块,用于存储各摄像头拍摄的监控视频,对各监控视频进行视频拼接,得到关于目标人物的行动轨迹的监控视频。
作为进一步地改进,摄像头控制模块,还用于:
当全部摄像头关闭时,每隔第二预置时间开启全部摄像头进行目标人物识别。
本申请实施例中,根据用户输入的房屋信息和摄像头位置信息确定该房屋各区域与摄像头、出入口的对应关系,以方便后续调控各区域的摄像头;对监控画面进行目标人物识别,只开启拍摄到目标人物的摄像头,降低监控能耗;通过在监控画面中标定全部出入口,判断目标人物是否位于出入口区域内,选择控制出入口相连另一区域内摄像头开启,以判断目标人物是否可能进入另一区域,从而实现根据目标人物的移动调控摄像头,实现人物轨迹跟踪,灵活性高,改善了现有技术无法达到根据目标人物的移动进行家庭内摄像头的调控、跟踪人物轨迹,存在灵活性较差的技术问题。
本申请实施例还提供了一种家庭视频跟踪监控设备,设备包括处理器以及存储器;
存储器用于存储程序代码,并将程序代码传输给处理器;
处理器用于根据程序代码中的指令执行前述方法实施例中的家庭视频跟踪监控方法。
本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质用于存储程序代码,程序代码被处理器执行时实现前述方法实施例中的家庭视频跟踪监控方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以通过一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(英文全称:Read-OnlyMemory,英文缩写:ROM)、随机存取存储器(英文全称:Random Access Memory,英文缩写:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。