CN117058615A - 图像监控方法、装置、计算机设备及存储介质 - Google Patents

Abstract

本发明涉及金融科技技术领域，公开了一种图像监控方法、装置、计算机设备及存储介质，方法包括：对目标设备对应的监控区域的帧级监控图像进行人头检测，得到帧级监控图像中的人头数量；如果人头数量为0，对目标设备的显示内容进行锁屏保护；如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员；在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护；在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域；如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。

Description

图像监控方法、装置、计算机设备及存储介质

技术领域

本发明涉及金融科技技术领域，尤其涉及一种图像监控方法、装置、计算机设备及存储介质。

背景技术

随着数字信息化时代的到来，已经基本通过计算机实现全方位的数字化办公，然而，数字化办公虽然给工作带来了极大的便利，但是也使得信息安全管理方面难度加大，导致计算机中存储的商业机密信息存在泄露的风险。

例如，在金融领域中，银行的服务器中存储有大量的客户信息，(如电话、住址、家属关系、财产情况等等)这些客户信息一旦被商业间谍盗取，极有可能给银行带来财产和声誉上的损失，因此，如何避免隐私数据泄露，一直是各个行业关注的重点。

目标，银行等大型企业引入的办公电脑监控系统来提高电脑的安全性，这些安全系统普遍采用网页访问过滤、然而，现有的办公电脑监控系统，都是针对电脑内部进行监控，从而限制电脑操控的角度来限制人员的行为，如网络应用控制(封堵与业务无关的网络应用)、带宽流量管理、信息内容审计(控制关键信息的传播范围)、上网行为分析、邮件收发管控等，但这样忽略了办公电脑外部的安全隐患，比如被别人偷窥，手机拍屏等信息偷取方式，这些行为目前市场上的监控软件无法做到。

因此，亟须一种对办公电脑外部的安全隐患进行监测的方法，以此实现办公电脑的全面安全监测。

发明内容

本发明实施例提供一种图像监控方法、装置、计算机设备及存储介质，以解决现有的电脑监控方法针对电脑内部进行监控，而无法对办公电脑外部的安全隐患进行监测问题。

一种图像监控方法，所述方法包括：

实时获取目标设备对应的监控区域的帧级监控图像；

通过目标检测算法对所述帧级监控图像进行人头检测，得到所述帧级监控图像中的人头数量；

如果所述人头数量为0，对所述目标设备的显示内容进行锁屏保护；

如果所述人头数量大于0，对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员；

在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护；

在所述帧级监控图像中存在所述目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域；

如果所述授权人员离开所述监控区域，对所述目标设备的显示内容进行锁屏保护。

上述方法，可选的，所述通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域，包括：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧所述帧级监控图像中的人脸目标进行人脸跟踪检测；

当检测不到所述帧级监控图像中属于所述授权人员的所述跟踪检测框时，对所述目标设备的显示内容进行锁屏保护。

上述方法，可选的，在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护之后，还包括：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪；

当检测到所述帧级监控图像中出现新的人脸目标并被分配到一个新的跟踪检测框时，对所述新的人脸目标进行人脸识别，以判断所述新的人脸目标是否为所述目标设备的授权人员；

如果所述新的人脸目标为所述目标设备的授权人员，解除所述目标设备的锁屏保护。

上述方法，可选的，在所述实时获取目标设备对应的监控区域的帧级监控图像之后，还包括：

对所述帧级监控图像进行影像设备识别；

如果在所述帧级监控图像中识别到所述影像设备，对持有所述影像设备的人员进行人脸识别，以判断持有所述影像设备的人员是否为所述目标设备的授权人员；

当识别到持有所述影像设备的人员不是所述目标设备的授权人员时，对所述目标设备的显示内容进行锁屏保护，并进行信息泄露报警。

上述方法，可选的，所述对所述目标设备的显示内容进行锁屏保护，并进行信息泄露报警，包括：

对所述目标设备的显示内容进行锁屏保护，并截取所述目标设备的当前信息页面；

识别所述当前信息页面中是否存在敏感信息；

在所述目标设备的当前页面中存在敏感信息的情况下，进行信息泄露报警。

上述方法，可选的，在所述对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员之后，还包括：

在所述监控区域中存在所述目标设备的授权人员，且存在未被所述目标设备授权的人员的情况下，触发窥屏提醒；

在所述监控区域中仅存在所述目标设备的授权人员的情况下，对所述帧级监控图像进行人体部位识别；

如果识别到除所述授权人员之外的其他人员的人体部位，触发窥屏提醒。

一种图像监控装置，包括：

图像获取单元，用于实时获取目标设备对应的监控区域的帧级监控图像；

人头检测单元，用于通过目标检测算法对所述帧级监控图像进行人头检测，得到所述帧级监控图像中的人头数量；

第一锁屏单元，用于在所述人头数量为0时，对所述目标设备的显示内容进行锁屏保护；

第一人脸识别单元，用于在所述人头数量大于0时，对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员；

第二锁屏单元，用于在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护；

目标跟踪单元，用于在所述帧级监控图像中存在所述目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域；

第三锁屏单元，用于在所述授权人员离开所述监控区域时，对所述目标设备的显示内容进行锁屏保护。

上述装置，可选的，所述目标跟踪单元用于：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪；

当检测不到所述帧级监控图像中属于所述授权人员的所述跟踪检测框时，对所述目标设备的显示内容进行锁屏保护。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述任一所述的图像监控方法。

一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上述任一所述的图像监控方法。

上述图像监控方法、装置、计算机设备及存储介质，通过目标检测算法对目标设备对应的监控区域的帧级监控图像进行人头检测，得到帧级监控图像中的人头数量，如果人头数量为0，对目标设备的显示内容进行锁屏保护，如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员，在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护，在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开所述监控区域，如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。可见，本发明通过对实时获取到的目标设备对应的监控区域的帧级监控图像中进行监控处理，以判断监控区域是否存在目标设备的监控人员，进而在监控区域不存在目标设备的监控人员的情况下对目标设备的显示内容进行锁屏保护，由此，实现了从目标设备外部对目标设备进行安全监测，大大降低了金融领域中的办公设备中隐私数据的泄露风险。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例一公开的一种图像监控方法的流程示意图；

图2是本发明实施例一公开的一种目标设备的结构示意图；

图3是本发明实施例一公开的一种图像监控方法的部分流程示意图；

图4是本发明实施例一公开的一种图像监控方法的另一种流程示意图；

图5是本发明实施例一公开的一种图像监控方法的再一种流程示意图；

图6是本发明实施例一公开的一种图像监控方法的部分流程示意图；

图7是本发明实施例一公开的一种图像监控方法的再一种流程示意图；

图8是本发明实施例二公开的一种图像监控装置的结构示意图；

图9是本发明实施例三公开的一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本发明说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其他特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本发明说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

另外，在本发明说明书和所附权利要求书的描述中，术语“第一”“第二”“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

在本发明说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本发明的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”“在一些实施例中”“在其他一些实施例中”“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”“包含”“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。

本发明公开了一种图像监控方法、装置、计算机设备及存储介质，通过目标检测算法对目标设备对应的监控区域的帧级监控图像进行人头检测，得到帧级监控图像中的人头数量，如果人头数量为0，对目标设备的显示内容进行锁屏保护，如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员，在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护，在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域，如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。可见，本实施例中通过对实时获取到的目标设备对应的监控区域的帧级监控图像中进行监控处理，以判断监控区域是否存在目标设备的监控人员，进而在监控区域不存在目标设备的监控人员的情况下对目标设备的显示内容进行锁屏保护，由此，实现了从目标设备外部对目标设备进行安全监测，大大降低了金融领域中的办公设备中隐私数据的泄露风险。下面通过具体的实施例进行说明。

实施例一

如图1所示，为本发明实施例一公开的一种图像监控方法的流程示意图，该方法适用于具备显示屏和摄像头的电子设备，如手机、平板电脑、笔记本电脑以及配备有摄像头的台式计算机等电子设备。具体如下所示：

在具体实现中，本实施例中图像监控方法具体可以包括如下步骤：

S101：实时获取目标设备对应的监控区域的帧级监控图像。

在具体实现中，本实施例中可以通过目标设备配备的摄像头，来对监控区域进行监控视频录制，该监控视频的每个视频帧即为帧级监控图像。在目标设备开机之后，目标设备通过摄像头开始对监控区域进行监控视频录制，根据监控视频的第一帧级监控图像，执行视频监控方法的后续步骤，或者，在目标设备开启图像监控功能之后，目标设备通过摄像头开始对监控区域进行监控视频录制，根据监控视频的第一帧级监控图像，执行视频监控方法的后续步骤。本实施例中的目标设备配备的摄像头可以是目标设备的内置摄像头，也可以是与目标设备连接的外置摄像头。

其中，目标设备配备的摄像头的监控区域可以如图2所示，可见图中摄像头为目标设备的一体摄像头，摄像头的监控区域覆盖用目标设备的办公区域，当有人坐在工位上时，即可对坐在工位上的人员进行监控，并可见对路过监控区域或者站在监控区域中的人员进行监控。

S102：通过目标检测算法对帧级监控图像进行人头检测，得到帧级监控图像中的人头数量。

在具体实现中，本实施例中的目标检测算法可以为YOLO v3模型算法，通过YOLOv3模型算法对帧级监控图像进行网格划分，再根据anchor机制在进行网格划分后的帧级监控图像中生成检测框，从而得到帧级监控图像中的人头数量。

S103：如果人头数量为0，对目标设备的显示内容进行锁屏保护。

在得到的帧级监控图像中的人头数量为0时，表示目标设备的监控区域中没有人，无需将目标设备的显示内容对外展示，启动屏幕保护程序，将预先设定的图片展示在显示屏上，以此遮挡目标设备的显示内容，或者，直接熄灭目标设备的显示屏等，由此，实现对目标设备的显示内容进行锁屏保护。

应当理解，将预先设定的图片展示在显示屏上锁屏保护方式，以及直接熄灭目标设备的显示屏的锁屏保护方式仅是本实施例中部分锁屏保护方式，本实施例中对锁屏保护的具体方式不作限定。

S104：如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员。

应当理解，通过目标检测算法从帧级监控图像中检测到的人头数量可以为1人，也可以为2人、3人等，本实施例中不作具体限定。

当监控区域中存在目标设备的授权人员时，执行步骤S105，即对目标设备的显示内容进行锁屏保护；当监控区域中不存在目标设备的授权人员时，执行步骤S106，即通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域。

在具体实现中，本实施例中可以通过基于One Flow的insight face算法模型对帧级监控图像进行人脸识别。首先对帧级监控图像中的人脸特征进行提取，得到帧级监控图像中每个人脸的人脸特征，进而将得到的人脸特征输入到insight face算法模型，进而将提取到的人脸特征与预先设定的目标设备的授权人员的人脸特征进行对比，当提取到的人脸特征与预先设定的目标设备的授权人员的人脸特征相同，或者相似度达到一定程度时，确定监控区域中存在目标设备的授权人员，当提取到的人脸特征与预先设定的目标设备的授权人员的人脸特征不相同，或者相似度低于一定程度时，确定监控区域中不存在目标设备的授权人员。

S105：对目标设备的显示内容进行锁屏保护。

在具体实现中，本实施例中可以将预先设定的图片展示在显示屏上，以此遮挡目标设备的显示内容，或者，直接熄灭目标设备的显示屏等，由此，实现对目标设备的显示内容进行锁屏保护。

应当理解，将预先设定的图片展示在显示屏上锁屏保护方式，以及直接熄灭目标设备的显示屏的锁屏保护方式仅是本实施例中部分锁屏保护方式，本实施例中对锁屏保护的具体方式不作限定。

S106：通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域。

在具体实现中，本实施例中的多目标跟踪算法可以为SORT(Simple Online andRealtime Tracking多目标跟踪算法，根据每连续获取到的两帧帧级监控图像进行多目标跟踪，

例如，对获取到监控区域的第一帧帧级监控图像和第二帧帧级监控图像进行多目标跟踪，然后再对获取到第二帧帧级监控图像和第三帧帧级监控图像，以此类推，根据连续获取到的帧级监控图像实现对帧级监控图像中的人脸进行多目标跟踪。

S107：对目标设备的显示内容进行锁屏保护。

在具体实现中，本实施例中可以将预先设定的图片展示在显示屏上，以此遮挡目标设备的显示内容，或者，直接熄灭目标设备的显示屏等，由此，实现对目标设备的显示内容进行锁屏保护。

应当理解，将预先设定的图片展示在显示屏上锁屏保护方式，以及直接熄灭目标设备的显示屏的锁屏保护方式仅是本实施例中部分锁屏保护方式，本实施例中对锁屏保护的具体方式不作限定。

综上所述，本发明实施例一公开的一种图像监控方法，通过目标检测算法对目标设备对应的监控区域的帧级监控图像进行人头检测，得到帧级监控图像中的人头数量，如果人头数量为0，对目标设备的显示内容进行锁屏保护，如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员，在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护，在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域，如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。可见，本实施例中通过对实时获取到的目标设备对应的监控区域的帧级监控图像中进行监控处理，以判断监控区域是否存在目标设备的监控人员，进而在监控区域不存在目标设备的监控人员的情况下对目标设备的显示内容进行锁屏保护，由此，实现了从目标设备外部对目标设备进行安全监测，大大降低了金融领域中的办公设备中隐私数据的泄露风险。

基于图1的具体实现中，本实施例中的步骤S106可以通过以下步骤实现，具体如图3所示：

S301：通过多目标跟踪算法，给帧级监控图像中的每个人脸目标分配一个跟踪检测框。

在具体实现中，通过SORT多目标跟踪算法对帧级监控图像进行多目标跟踪时，会对帧级监控图像中的每个人脸目标赋予一个跟踪检测框，每个跟踪检测框对应有一个唯一的跟踪标识，以此来去区分不同的检测框，每个跟踪标识对应的不同的人脸目标。

例如，当帧级监控图像中存在两个人脸目标时，可以通过SORT多目标跟踪算法分别给这两个人脸目标赋予跟踪检测框，其中一个跟踪检测框的跟踪标识可以为“RL-001”，另一个跟踪检测框的跟踪标识可以为“RL-002”，由此，实现不同跟踪检测框的区分。

应当理解，上述通过跟踪标识区分不同跟踪检测框的方法仅是本实施例中一种实现方式，并不是唯一的实现方式，例如，本实施例中也可以对不同的跟踪检测框赋予不同的颜色来对跟踪检测框进行区分，本实施例中对区分跟踪检测框的方式不做限定。

S302：基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪。

在具体实现中，本实施例中对于连续获取到的两帧帧级监控图像进行关联检测，例如，对第一帧帧级监控图像和第二帧帧级监控图像中的检测框的位置和大小进行目标的运动估计和数据关联，由此实现基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪。

S303：当检测不到帧级监控图像中属于授权人员的跟踪检测框时，对目标设备的显示内容进行锁屏保护。

在具体视线中，本实施例中通过SORT多目标跟踪算法对连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪时，第一帧帧级监控图像中属于授权人员的跟踪检测框存在，而对第二帧帧级监控图像进行关键联测时，第二帧帧级监控图像中属于授权人员的跟踪检测框不存在了，也就是说，在获取第二帧帧级监控图像时，目标设备的授权人员离开了监控区域，因此，第二帧帧级监控图像中检测不到授权人员的人脸目标，也就不存在授权人员的跟踪检测框，基于此，对目标设备的显示内容进行锁屏保护。

综上所述，本实施例中通过多目标跟踪算法可以对处于监控区域中的授权人员进行实时跟踪检测，在授权人员离开监控区域的第一时间，对目标设备的显示内容进行锁屏保护，避免授权人员离开目标设备时，出现隐私数据泄露的情况，以达到提高金融企业办公电脑的数据安全性。

基于图1的具体实现中，在步骤105之后还包括如下步骤，具体如图4所示：

S108：通过多目标跟踪算法，给帧级监控图像中的每个人脸目标分配一个跟踪检测框。

在具体实现中，通过SORT多目标跟踪算法对帧级监控图像进行多目标跟踪时，会对帧级监控图像中的每个人脸目标赋予一个跟踪检测框，每个跟踪检测框对应有一个唯一的跟踪标识，以此来去区分不同的检测框，每个跟踪标识对应的不同的人脸目标。

S109：基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪检测。

在具体实现中，本实施例中对于连续获取到的两帧帧级监控图像进行关联检测，例如，对第一帧帧级监控图像和第二帧帧级监控图像中的检测框的位置和大小进行目标的运动估计和数据关联，由此实现基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪。

S110：当检测到帧级监控图像中出现新的人脸目标并被分配到一个新的跟踪检测框时，对新的人脸目标进行人脸识别，以判断新的人脸目标是否为目标设备的授权人员。

当通过SORT多目标跟踪算法对连续两帧帧级监控图像进行关联监测时，检测到第二帧帧级监控图像相较于第一帧帧级监控图像多了一个新的人脸目标，该人脸目标会被赋予新的跟踪检测框，并且第一帧帧级监控图像中的人脸目标并不是目标设备的授权人员，因此，在检测到新的人脸目标时，需要对新的人脸目标进行人脸识别，以判断新的人脸目标是否为目标设备的授权人员。当新的人脸目标为目标设备的授权人员时，执行步骤S111，即解除目标设备的锁屏保护，当新的人脸目标不为目标设备的授权人员时，继续对目标设备的显示内容进行锁屏保护。

S111：解除目标设备的锁屏保护。

在具体实现中，当新的人脸目标为目标设备的授权人员时，可以直接解除目标设备上用于遮挡内容的图片，或者，直接点亮目标设备，以呈现显示内容给授权人员。

综上所述，本实施例中通过多目标跟踪算法和人脸识别算法，可以实现自动化解除目标设备的锁屏保护，既不影响授权人员对目标设备的使用，还可以在授权人员不在目标设备的监控区域时，防止其他人员解除目标设备的锁屏保护，可以达到提高目标设备的安全性的目的。

基于图1的具体实现中，在步骤S101之后还可以包括以下步骤，如图5所示：

S112：对帧级监控图像进行影像设备识别。

在具体实现中，本实施例中可以通过基于人工神经网络的分类算法对帧级监控图像进行识别。其中，影响设备包括但不限于手机、照相机以及摄影机等等。对帧级监控图像进行去噪以及包络提取等预处理，对经过预处理的帧级监控图像进行特征提取，进而将提取到的特征输入到基于人工神经网络的分类算法模型中，识别出帧级监控图像中是否存在影像设备。

S113：如果在帧级监控图像中识别到影像设备，对持有影像设备的人员进行人脸识别，以判断持有影像设备的人员是否为目标设备的授权人员。

如果在帧级监控图像中识别到影像设备时，表示有人对目标设备的显示内容进行拍摄或录像，此时，对持有影响涉笔的人员进行人脸识别，以判断持有影像设备的人员是否为目标设备的授权人员，如果识别到持有影像设备的人员不是目标设备的授权人员，执行步骤S114，即对目标设备的显示内容进行锁屏保护，并进行信息泄露提醒。

应当理解，当在帧级监控图像中识别到影像设备时，表示有人对目标设备的显示内容进行拍摄或录像，紧接着对持有影像设备的人员进行人脸识别，可以进一步确认持有影响设备的人员的身份，以便于在发生数据泄漏时，及时查明偷拍者的身份。

S114：对目标设备的显示内容进行锁屏保护，并进行信息泄露报警。

应当理解，当持有影像设备的人员不是目标设备的授权人员时，发生数据泄漏的概率将会大大增加，因此，需要马上对目标设备的显示内容进行锁屏保护，并进行信息泄露报警，以使相关人员及时对持有影像设备的人员进行调查，提高金融领域中隐私数据的安全性。

综上所述，本实施例中通过对监控区域内的人员是否持有影响设备进行监控，以及时发现可能对目标设备的显示内容进行拍照或者录像的人员，并进行信息泄露报警，从而及时对持有影响设备的人员进行调查，可以极大地提高金融领域中隐私数据的安全性。

基于图5的具体实现中，在步骤S114可以通过以下步骤实现，具体如图6所示：

S601：对目标设备的显示内容进行锁屏保护，并截取目标设备的当前信息页面。

在具体实现中，本实施例中可以将预先设定的图片展示在显示屏上，以此遮挡目标设备的显示内容，或者，直接熄灭目标设备的显示屏等，由此，实现对目标设备的显示内容进行锁屏保护。另外，本实施例中可以通过具备截图功能的应用程序对目标设备的当前信息页面进行截图，并根据截图到的当前信息页面执行后续步骤。

S602：识别当前信息页面中是否存在敏感信息。

在具体实现中，本实施例中可以通过dbnet文本检测对当前信息页面中的文本进行提取，获取到当前信息页面中的信息文本，然后采用crnn文本识别，对得到的信息文本进行识别，进而判断当前信息页面中是否存在敏感信息。

S603：在目标设备的当前页面中存在敏感信息的情况下，进行信息泄露报警。

应当理解，如果目标设备的当前页面中存在敏感信息，发生数据泄漏的概率将会大大增加，因此，需要马上进行信息泄露报警，以使相关人员及时对持有影像设备的人员进行调查，提高金融领域中隐私数据的安全性。

综上所述，本实施例中通过对监控区域内的人员是否持有影响设备进行监控，以及时发现可能对目标设备的显示内容进行拍照或者录像的人员，并识别目标设备的显示内容中是否存在敏感信息，在目标设备的显示内容中存在敏感信息时，及时进行报警，进而提高金融领域中隐私数据的安全性。

基于图1的具体实现中，在步骤104之后还可以包括以下步骤，如图7所示：

S115：在监控区域中存在目标设备的授权人员的情况下，还存在未被目标设备授权的人员，触发窥屏提醒。

通过人脸识别，可以对帧级监控图像中的人脸目标分别进行人脸识别，以判断监控区中是否存在目标设备的授权人员，如果识别到监控区域中存在目标设备的授权人员，且存在未被目标设备授权的人员触发窥屏提醒。也就是说，当同时有两个在使用目标设备时，目标设备会对目标设备的授权人员发出窥屏提醒，防止其他人在授权人员不知情的情况下，发生目标设备的信息泄露。

S116：在监控区域中仅存在目标设备的授权人员的情况下，对帧级监控图像进行人体部位识别。

在具体实现中，本实施例中可以基于人工神经网络的分类算法模型对帧级监控图像进行人体部位识别。当识别到帧级监控图像中存在手、手臂、肩膀、脖子或者肚子等人体部位，表示有人站在目标设备的授权人身边，因此，需要触发窥屏提醒。

S117：如果识别到除授权人员之外的其他人员的人体部位时，触发窥屏提醒。

综上所述，本发明实施例中不仅可以人脸进行识别，来确实帧级监控图像中是否存在目标设备的授权人员，还可以对人体部位进行设备，以避免授权人员在工作时，被其他人员对目标设备进行窥屏，由此，降低了目标设备在被授权人员使用时，发生信息泄露的风险。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

实施例二

如图8所示，为本发明实施例二公开的一种图像监控装置的结构示意图，具体如下所示：

在具体实现中，本实施例中的装置具体可以包括以下单元：

图像获取单元801，用于实时获取目标设备对应的监控区域的帧级监控图像；

人头检测单元802，用于通过目标检测算法对帧级监控图像进行人头检测，得到帧级监控图像中的人头数量；

第一锁屏单元803，用于在人头数量为0时，对目标设备的显示内容进行锁屏保护；

第一人脸识别单元804，用于在人头数量大于0时，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员；

第二锁屏单元805，用于在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护；

目标跟踪单元806，用于在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域；

第三锁屏单元807，用于在授权人员离开监控区域时，对目标设备的显示内容进行锁屏保护。

在一种实现方式中，目标跟踪单元806用于：

通过多目标跟踪算法，给帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪；

当检测不到帧级监控图像中属于授权人员的跟踪检测框时，对目标设备的显示内容进行锁屏保护。

在一种实现方式中，本实施例中的装置还包括以下单元：

检测框分配单元，用于通过多目标跟踪算法，给帧级监控图像中的每个人脸目标分配一个跟踪检测框；

人脸跟踪单元，用于基于跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪检测；

第二人脸识别单元，用于当检测到帧级监控图像中出现新的人脸目标并被分配到一个新的跟踪检测框时，对新的人脸目标进行人脸识别，以判断新的人脸目标是否为目标设备的授权人员；

锁屏解除单元，用于在新的人脸目标为目标设备的授权人员时，解除目标设备的锁屏保护。

在一种实现方式中，本实施例中的装置还包括以下单元：

影像设备识别单元，用于对帧级监控图像进行影像设备识别；

第三人脸识别单元，用于在帧级监控图像中识别到影像设备时，对持有影像设备的人员进行人脸识别，以判断持有影像设备的人员是否为目标设备的授权人员；

第一报警单元，用于当识别到持有影像设备的人员不是目标设备的授权人员时，对目标设备的显示内容进行锁屏保护，并进行信息泄露报警。

在一种实现方式中，所述第一报警单元用于：

对目标设备的显示内容进行锁屏保护，并截取目标设备的当前信息页面；

识别当前信息页面中是否存在敏感信息；

在目标设备的当前页面中存在敏感信息的情况下，进行信息泄露报警。

在一种实现方式中，本实施例中的装置还包括以下单元：

窥屏提醒单元，用于在监控区域中存在目标设备的授权人员，且存在未被目标设备授权的人员的情况下，触发窥屏提醒；

人体部位识别单元，用于在监控区域中仅存在目标设备的授权人员的情况下，对帧级监控图像进行人体部位识别；

第二窥屏提醒单元，用于在识别到除授权人员之外的其他人员的人体部位时，触发窥屏提醒。

关于图像监控装置的具体限定，可以参见上文中对于图像监控方法的有关限定，在此不再赘述。上述图像监控装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

实施例三

本申请实施例三公开了一种计算机设备，该计算机设备可以是服务端，其内部结构图可以如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种图像监控方法。

在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：

实时获取目标设备对应的监控区域的帧级监控图像；

通过目标检测算法对帧级监控图像进行人头检测，得到帧级监控图像中的人头数量；

如果人头数量为0，对目标设备的显示内容进行锁屏保护；

如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员；

在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护；

在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域；

如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。

实施例四

本申请实施例四公开了一种计算机可读存储介质，当计算机可读存储介质中的指令由计算机设备中的处理器执行时，使得计算机设备能够执行如本发明公开的一种图像监控方法的任一实施例的各个步骤。计算机可读存储介质可以是非易失性，也可以是易失性。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

实时获取目标设备对应的监控区域的帧级监控图像；

通过目标检测算法对帧级监控图像进行人头检测，得到帧级监控图像中的人头数量；

如果人头数量为0，对目标设备的显示内容进行锁屏保护；

如果人头数量大于0，对帧级监控图像进行人脸识别，以判断监控区域中是否存在目标设备的授权人员；

在帧级监控图像中不存在目标设备的授权人员的情况下，对目标设备的显示内容进行锁屏保护；

在帧级监控图像中存在目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的帧级监控图像判断授权人员是否离开监控区域；

如果授权人员离开监控区域，对目标设备的显示内容进行锁屏保护。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其他介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)，以及存储器总线动态RAM(RDRAM)等。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。

以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (10)

1.一种图像监控方法，其特征在于，所述方法包括：

实时获取目标设备对应的监控区域的帧级监控图像；

通过目标检测算法对所述帧级监控图像进行人头检测，得到所述帧级监控图像中的人头数量；

如果所述人头数量为0，对所述目标设备的显示内容进行锁屏保护；

如果所述人头数量大于0，对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员；

在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护；

在所述帧级监控图像中存在所述目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域；

如果所述授权人员离开所述监控区域，对所述目标设备的显示内容进行锁屏保护。

2.如权利要求1所述的方法，其特征在于，所述通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域，包括：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧所述帧级监控图像中的人脸目标进行人脸跟踪；

当检测不到所述帧级监控图像中属于所述授权人员的所述跟踪检测框时，对所述目标设备的显示内容进行锁屏保护。

3.如权利要求1所述的图像监控方法，其特征在于，在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护之后，还包括：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪检测；

当检测到所述帧级监控图像中出现新的人脸目标并被分配到一个新的跟踪检测框时，对所述新的人脸目标进行人脸识别，以判断所述新的人脸目标是否为所述目标设备的授权人员；

如果所述新的人脸目标为所述目标设备的授权人员，解除所述目标设备的锁屏保护。

4.如权利要求1所述的图像监控方法，其特征在于，在所述实时获取目标设备对应的监控区域的帧级监控图像之后，还包括：

对所述帧级监控图像进行影像设备识别；

如果在所述帧级监控图像中识别到所述影像设备，对持有所述影像设备的人员进行人脸识别，以判断持有所述影像设备的人员是否为所述目标设备的授权人员；

当识别到持有所述影像设备的人员不是所述目标设备的授权人员时，对所述目标设备的显示内容进行锁屏保护，并进行信息泄露报警。

5.如权利要求4所述的图像监控方法，其特征在于，所述对所述目标设备的显示内容进行锁屏保护，并进行信息泄露报警，包括：

对所述目标设备的显示内容进行锁屏保护，并截取所述目标设备的当前信息页面；

识别所述当前信息页面中是否存在敏感信息；

在所述目标设备的当前页面中存在敏感信息的情况下，进行信息泄露报警。

6.如权利要求1所述的图像监控方法，其特征在于，在所述对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员之后，还包括：

在所述监控区域中存在所述目标设备的授权人员，且存在未被所述目标设备授权的人员的情况下，触发窥屏提醒；

在所述监控区域中仅存在所述目标设备的授权人员的情况下，对所述帧级监控图像进行人体部位识别；

如果识别到除所述授权人员之外的其他人员的人体部位，触发窥屏提醒。

7.一种图像监控装置，其特征在于，包括：

图像获取单元，用于实时获取目标设备对应的监控区域的帧级监控图像；

人头检测单元，用于通过目标检测算法对所述帧级监控图像进行人头检测，得到所述帧级监控图像中的人头数量；

第一锁屏单元，用于在所述人头数量为0时，对所述目标设备的显示内容进行锁屏保护；

第一人脸识别单元，用于在所述人头数量大于0时，对所述帧级监控图像进行人脸识别，以判断所述监控区域中是否存在所述目标设备的授权人员；

第二锁屏单元，用于在所述帧级监控图像中不存在所述目标设备的授权人员的情况下，对所述目标设备的显示内容进行锁屏保护；

目标跟踪单元，用于在所述帧级监控图像中存在所述目标设备的授权人员的情况下，通过多目标跟踪算法，根据之后连续获取到的所述帧级监控图像判断所述授权人员是否离开所述监控区域；

第三锁屏单元，用于在所述授权人员离开所述监控区域时，对所述目标设备的显示内容进行锁屏保护。

8.如权利要求7所述的图像监控装置，其特征在于，所述目标跟踪单元用于：

通过多目标跟踪算法，给所述帧级监控图像中的每个人脸目标分配一个跟踪检测框；

基于所述跟踪检测框对每连续获取到的两帧帧级监控图像中的人脸目标进行人脸跟踪；

当检测不到所述帧级监控图像中属于所述授权人员的所述跟踪检测框时，对所述目标设备的显示内容进行锁屏保护。

9.一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述图像监控方法。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述图像监控方法。