CN111711794A - 防偷拍图像处理方法、装置、终端及存储介质 - Google Patents

Abstract

本发明公开了防偷拍图像处理方法、装置、终端及存储介质。其中方法包括：获取与显示屏相对的预设区域内的拍摄画面；对拍摄画面进行图像识别得到图像识别结果；在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息；在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息所在的区域进行屏蔽处理，得到处理后的帧图像。本发明只对敏感信息的显示区域进行屏蔽处理，对非敏感信息的显示区域正常显示。既能有效防止重要信息被他人非法获取，也能避免突然替换显示画面或直接锁屏给用户带来的不良使用感受，提高用户体验。

Description

防偷拍图像处理方法、装置、终端及存储介质

技术领域

本发明涉及信息安全技术领域，尤其涉及防偷拍图像处理方法、装置、终端及存储介质。

背景技术

随着电脑功能的增强以及电脑应用的普及，现在很多事务都需要利用电脑进行处理。而电脑显示屏上显示的信息，可能通过拍照等方式被窃取，从而导致信息泄密。为此，现有技术中提出了解决方案：当发现有人对电脑显示屏的信息进行窥拍时，对电脑显示屏显示的内容进行替换或者直接锁屏。公开号为CN110443136A，发明名称为“一种全智能电脑显示屏防手机偷拍系统”的中国专利申请，其中公开了一种全智能电脑显示屏防手机偷拍系统，包括：视频监控采样模块、主服务器和报警锁屏模块。视频监控采样模块实现实时视频图像采集和实时视频图像存储。主服务器判断实时视频图像中是否有手机存在，并输出监控识别状态至报警锁屏模块。报警锁屏模块判断实时视频图像中是否包含手机，若包含手机，则进行报警，并对电脑显示器进行锁屏处理，并发送报警信号。

现有技术中发现有偷拍时对电脑显示器锁屏的处理方式会比较生硬，突然的画面中断会给用户带来不好的体验。而且突然出现锁屏或者画面替换时，用户难以分辨是因为有人窥拍而采取的措施，还是系统发生故障。

发明内容

本发明的目的是提供一种防偷拍图像处理方法、装置、终端及存储介质，解决了现有技术中当存在窥拍行为时对电脑显示屏显示的图像进行替换或者锁屏导致用户体验较差的问题。

本发明的目的是通过以下技术方案实现的：

第一方面，本发明提供一种防偷拍图像处理方法，包括以下步骤：

步骤S1、获取与显示屏相对的预设区域内的拍摄画面；

步骤S2、对拍摄画面进行图像识别得到图像识别结果；

步骤S3、在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息；

步骤S4、在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息所在的区域进行屏蔽处理，得到处理后的帧图像。

进一步的，所述的敏感信息包括敏感应用和/或敏感元素，检测显示屏的当前帧图像是否包含敏感信息包括：检测显示屏的当前帧图像是否包含敏感应用和/或检测显示屏的当前帧图像是否包含敏感元素。

进一步的，检测显示屏的当前帧图像是否包含敏感应用包括：

获取预设侦听列表中每个敏感应用的状态信息；

检测已打开的目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中；

在目标敏感应用对应的目标窗口部分或全部显示在当前帧图像时，则确定当前帧图像中包含敏感应用。

进一步的，检测显示屏的当前帧图像是否包含敏感元素包括：

检测当前帧图像中是否包含预设敏感元素；

在当前帧图像中包含预设敏感元素时，则确定当前帧图像中包含敏感元素。

进一步的，所述的预设敏感元素包括文字、图像、视频中的至少一个。

进一步的，检测已打开的目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中包括：获取当前帧图像中每个已显示应用的窗口位置信息以及每个已显示应用的层排布关系；如果已显示应用中包括目标敏感应用，则判断目标敏感应用对应的目标窗口部分或全部显示在当前帧图像中。

进一步的，所述的对当前帧图像中的敏感信息所在的区域进行屏蔽处理包括：

获取敏感信息的位置信息；

根据敏感信息的位置信息，从当前帧图像中确定包含敏感信息的第一图像和未包含敏感信息的第二图像；

对第一图像进行模糊处理得到第一模糊图像；

将所述第一模糊图像和所述第二图像进行编码，得到处理后的帧图像。

进一步的，所述的获取敏感信息的位置信息包括获取敏感应用的位置信息和/或获取敏感元素的位置信息。

进一步的，获取敏感应用的位置信息包括：根据当前帧图像中每个已显示的应用的窗口位置信息以及每个已显示应用的层排布关系，计算目标敏感应用对应的目标窗口的位置信息。

进一步的，获取敏感元素的位置信息包括：

对当前帧图像进行宏块划分，得到至少一个宏块；

识别至少一个宏块中每个宏块的宏块类型；

去掉敏感应用显示区域所在的宏块，确定包含预设敏感元素的目标宏块的位置信息。

第二方面，本发明公开一种防偷拍图像处理装置，包括：

第一获取模块，用于获取与显示屏相对的预设区域内的拍摄画面；

识别模块：用于对所述拍摄画面进行图像识别得到图像识别结果；

检测模块：用于检测所述显示屏的当前帧图像是否包含敏感信息；

处理模块：对所述当前帧图像中的敏感信息进行屏蔽处理，得到处理后的帧图像。

第二方面，本发明公开一种图像处理终端，所述图像处理终端被配置为可以执行上述防偷拍图像处理方法。

第三方面，本发明公开一种云服务系统，包括云服务器和零终端，零终端用于获取显示屏前方的画面并发送给云服务器，并且用于将云服务器处理后的帧图像进行解码和显示；云服务器被配置为可以执行上述防偷拍图像处理方法。

第四方面，本发明公开一种存储介质，所述存储介质上存储有计算机程序，所述计算机程序被加载后，可以执行上述防偷拍图像处理方法。

本发明的防偷拍图像处理方法，当识别到显示屏前方存在偷拍行为时，判断电脑显示屏显示的内容是否包含敏感信息，只对敏感信息的显示区域进行屏蔽处理，对非敏感信息的显示区域正常显示。既能有效防止重要信息被他人非法获取，也能避免突然替换显示画面或直接锁屏给用户带来的不良使用感受，提高用户体验。

附图说明

图1为本发明的防偷拍图像处理方法的流程示意图；

图2是本发明的云桌面办公系统的结构示意图；

图3是本发明的敏感信息显示区域的示意图；

图4至图6是本发明的图像处理装置的结构示意图。

具体实施例

下面结合附图对本公开实施例进行详细描述。

以下通过特定的具体实例说明本公开的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本公开的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。

本发明的防偷拍图像处理方法，包括以下步骤：

步骤S1、获取与显示屏相对的预设区域内的拍摄画面。

在本公开实施例中，在显示屏正面面板的上方或四周设置至少一个图像采集设备，图像采集设备可以是摄像头、照相机等。通过调整图像采集设备的位置使得图像采集设备能够对显示屏前方一定范围内的画面进行拍摄。图像采集设备可以是零终端的一部分，也可以是单独设置的能够与零终端进行通讯的部件。以图像采集设备可以是零终端的一部分为例，零终端获取到图像采集设备采集的与显示屏相对的预设区域内的拍摄画面，并将拍摄画面发送给云服务器或本地的处理设备，云服务器或本地的处理设备接收零终端发送的与显示屏相对的预设区域内的拍摄画面。

步骤S2、对拍摄画面进行图像识别得到图像识别结果。

对拍摄画面进行图像识别的目的是检测是否存在窥拍事件。从拍摄画面中识别窥拍事件的方式有多种方式，如AI识别算法、神经网络算法等。不论采用何种识别算法，其基本原理是相同的。具体的：识别拍摄画面中除了当前零终端的合法使用者之外，是否还存在其他人，如果有，则依据其他人的动作、眼神、所处的位置等进行分析，判断其他人是否对屏幕进行偷窥，或者，根据动作判断是否有人使用拍摄工具进行偷拍，从而确定是否出现窥拍事件。对于对拍摄画面进行图像识别的算法，本公开实施例对此不加任何限定。

步骤S3、在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息。

在本公开实施例中，在图像识别结果中包含拍摄工具和/或拍照姿势时，确定存在窥拍事件，此时，需要检测显示屏当前显示的帧图像中是否包含敏感信息。敏感信息包括敏感应用和/或敏感元素。敏感应用可以是用户指定的应用，如和财务相关的应用。敏感元素包括文字、图片、视频中的至少一个。

检测显示屏的当前帧图像是否包含敏感信息，包括检测显示屏的当前帧图像是否包含敏感应用和/或检测显示屏的当前帧图像是否包含敏感元素。可以同时检测，也可以先判断当前帧图像是否有敏感应用，在当前帧图像中没有敏感应用的显示区域，或者，敏感应用的显示区域未占满整帧图像时，再判断当前帧图像中是否包含敏感元素。

具体地，在本发明提供的一种优选实施方式中，检测显示屏的当前帧图像是否包含敏感应用包括：

在图像识别结果指示存在窥拍事件时，获取预设侦听列表中每个敏感应用的状态信息；状态信息是指敏感应用是打开状态或者关闭状态。

在目标敏感应用的状态信息为打开时，检测目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中；

在目标敏感应用对应的目标窗口部分或全部显示在当前帧图像时，则确定当前帧图像中包含敏感应用。

在本公开实施例中，预设侦听列表中包含至少一个敏感应用，敏感应用可以是用户指定的应用，也可以是云服务器根据预设判定规则对至少一个应用判断得到的，将符合预设判定规则的应用确定为敏感应用。目标敏感应用指代预设侦听列表中的任意一个处于打开并显示的敏感应用。本公开只是以目标敏感应用为例表示如何判定当前帧图像中是否包含敏感信息进行说明，目标并不代表任何局限。

其中，在目标敏感应用的状态信息为打开时，检测目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中包括：获取当前帧图像中每个已显示应用的窗口位置信息以及每个已显示应用的层排布关系。如果已显示应用中包括目标敏感应用，则判断目标敏感应用对应的目标窗口部分或全部显示在当前帧图像。

具体的，当有多个应用窗口同时打开时，若目标敏感应用未处于顶层时，由于各个应用窗口之间互相的遮挡，目标敏感应用对应的目标窗口可能被完全或部分遮挡。若目标敏感应用的目标窗口位于顶层，则目标敏感应用的目标窗口完全显示在当前帧图像中。因此，在目标敏感应用的目标窗口部分或全部显示在当前帧图像时，意味着当前帧图像中包含敏感信息。需要说明的是，目标敏感应用的目标窗口全部显示在当前帧图像，可以是目标敏感应用的目标窗口占满整个当前帧图像，也可以是目标敏感应用的目标窗口占据当前帧图像的一部分。

具体地，在本发明提供的一种优选实施方式中，检测显示屏的当前帧图像是否包含敏感元素包括：

在图像识别结果指示存在窥拍事件时，检测当前帧图像中是否包含预设敏感元素，预设敏感元素包括文字、图像、视频中的至少一个；

在当前帧图像中包含预设敏感元素时，确定当前帧图像中包含敏感元素。

对于预设敏感元素，可以由用户自主选择哪些元素作为敏感元素。云服务器在对拍摄画面识别后，确定存在窥拍事件时，则检测当前帧图像中是否包含预设的敏感元素，以确定当前帧图像中是否包含敏感信息。

步骤S4、在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息所在的区域进行屏蔽处理，得到处理后的帧图像。

具体的，在本发明提供的一种优选实施方式中，对当前帧图像中的敏感信息所在的区域进行屏蔽处理，得到处理后的帧图像包括：

步骤S401、在当前帧图像包含敏感信息时，获取敏感信息的位置信息；

步骤S402、根据敏感信息的位置信息，从当前帧图像中确定包含敏感信息的第一图像和未包含敏感信息的第二图像；

步骤S403、对第一图像进行模糊处理得到第一模糊图像；

步骤S404、将所述第一模糊图像和所述第二图像进行编码，得到处理后的帧图像。

获取敏感信息的位置信息包括获取敏感应用的位置信息和/或获取敏感元素的位置信息。针对不同的情况获取敏感信息的位置信息的方式不同，下面进行示例性说明。

具体的，在本发明提供的一种优选实施方式中，获取敏感应用的位置信息包括：根据当前帧图像中每个已显示的应用的窗口位置信息以及每个已显示应用的层排布关系，计算目标敏感应用对应的目标窗口的位置信息。

具体的，在本发明提供的一种优选实施方式中，获取敏感元素的位置信息包括：

对当前帧图像进行宏块划分，得到至少一个宏块；

识别至少一个宏块中每个宏块的宏块类型；

根据每个宏块的宏块类型以及预设敏感元素，确定目标宏块的位置信息，目标宏块为包含预设敏感元素的宏块。

宏块类型包括文字宏块、视频宏块、图像宏块。若预设敏感元素包括文字，则需要识别出所有文字宏块所在的位置；若预设敏感元素包括文字和视频，则需要识别出所有文字宏块所在的位置以及所有视频宏块所在的位置。

在本公开实施例中，当前帧图像中包含目标敏感应用对应的目标窗口的显示区域且目标敏感应用并未占满整帧图像时，在对当前帧图像进行宏块划分后，需要将至少一个宏块中目标敏感应用显示区域所在的宏块过滤，得到至少一个待处理宏块，识别至少一个待处理宏块中每个待处理宏块的宏块类型。根据所述每个待处理宏块的宏块类型以及预设敏感元素，确定目标宏块的位置信息。这样，将包含目标敏感应用显示区域的宏块滤除，可以降低计算量。

本公开实施例的执行主体可以本地处理设备，也可以是云服务器。在执行主体为云服务器时，云服务器接收图像采集设备发送的拍摄画面，或者，电脑终端设备获取到图像采集设备采集的拍摄画面，并将拍摄画面发送给云服务器。云服务器对拍摄画面进行识别，在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息；在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息进行屏蔽处理，并将处理后的帧图像发送给显示屏，显示屏对处理后的帧图像进行解码后显示。当然，终端设备或者图像采集设备也可以对拍摄画面进行识别，将图像识别结果发送给云服务器。

本公开实施例提供的防偷拍图像处理方法，获取与显示屏相对的预设区域内的拍摄画面。对拍摄画面进行图像识别得到图像识别结果。在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息。在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息进行屏蔽处理，得到处理后的帧图像。将处理后的帧图像发送给零终端，以便零终端对处理后的帧图像解码后显示在显示屏。本公开所提供的技术方案，当存在窥拍事件且显示屏显示的当前帧画面存在敏感信息时，对敏感信息进行模糊处理后显示，将显示屏中显示的重要信息进行隐藏，其他非重要信息正常显示，这样，既能有效防止重要信息被他人非法获取，也能避免突然替换显示画面或直接锁屏给用户带来的不良使用感受，提高用户体验。

本发明的防偷拍图像处理方法可以应用于图2所示的云桌面办公系统，下面结合云桌面办公系统对本发明的方法进行详细说明。该云桌面办公系统主要包括：零终端和虚拟桌面服务器(Virtual Desktop server)。其中，零终端中包括R端，虚拟桌面服务器中包括S端。R端用于接收来自云端的虚拟桌面图像，同时将本地鼠标和键盘信息反向传输到云端注入虚拟桌面(Virtual Desktop)中。S端是运行在云端虚拟操作系统(OS，OperatingSystem)中的图像采集和编码模块，同时负责进行用户输入数据的注入功能。虚拟桌面服务器，一般是基于IAAS架构，具有很强虚拟主机的服务器，其可以通过hypervisor(虚拟机监视器)提供多个虚拟主机的管理功能，为虚拟主机提供运行的硬件环境。

图2所示的云桌面办公系统，用户本地无数据存储，所有数据源和视频图像来源于云端的图像，并且可在云端给图像加上使用者的水印，从而保证了数据不能轻易泄漏。但是，这种数据集中在云端的安全方案却仍无法解决他人对屏幕进行偷窥或者非法偷拍的问题，因此应用了本发明的防偷拍图像处理方法。

首先对本发明方案的基本原理阐述如下：

本公开中图像是从远程(S端)传输到本地(R端)，然后由R端进行解码后发送至显示器进行显示。基于这种特征，当发生窥拍事件时，本公开可以在S端通过控制编码来对图像中的敏感信息进行屏蔽，从而保护敏感信息不流失。

本公开所提供的系统中包含两大部分：S端和R端，S端(云端)的主要功能是：图像采集、敏感信息的识别处理、图像编码；R端主要用于图像解码、显示。

工作过程如下：由R端或者S端进行疑似窥拍事件的识别，具体的方式是：R端通过摄像头拍摄当前显示屏前方一定范围内的画面，并在本地进行疑似窥拍事件的分析处理或者发送给S端后由S端进行疑似窥拍事件的分析处理。如果是由R端进行分析，则将分析结果提交给S端，由S端进行敏感信息的屏蔽处理。

S端将发现窥拍行为的信息作为信息屏蔽的开关，用于控制是否启用敏感信息屏蔽。S端设置侦听应用列表，此列表是提供给用户的接口，用户可以将指定的应用(也称为敏感应用)添加至该列表，图像采集模块会在采集图像的同时，对侦听应用列表中的应用进行侦听。当列表中的应用打开时，可以实时的获取窗口位置信息，并将这些窗口位置信息连同采集到的画面数据一起送入图像编码器。当信息屏蔽开关打开时，编码器在对图像数据进行编码的过程中将敏感区域的图像进行模糊处理，经过解码后，最终呈现给用户的图像中，就不再包含敏感信息。

本公开中，将需要进行防窥拍处理的区域称为敏感区域，这些区域由两部分组成，一部分是上述的用户自定义的敏感应用显示区域；另一部分是编码器通过对敏感元素进行识别后所确定的敏感元素显示区域，如图3所示。因为编码器本身具有图像识别功能，可以识别出文字、图片、视频等区域，这些区域可以分别控制其编码工作流程，将这些区域，可以做成可配置项，由用户自定义选择哪些元素(文字和/或图片和/视频)作为敏感元素。这样，自动识别敏感应用显示区域及用户自定义的敏感元素的显示区域，最终会形成如图3所示的总的敏感区域。

下面，以疑似窥拍事件在S端进行分析为例，对本公开所提供的技术方案进行详细介绍：

云桌面办公人员通过零终端登录虚拟云桌面。云桌面办公系统的S端对图像源设备采集到的虚拟桌面源图像进行编码，并将编码数据发送到R端。其中，R端内置在零终端中。

用户使用过程中，零终端摄像头实时拍摄用户使用图像，并将拍摄到的用户使用图像上传至服务器端。

零终端摄像头通常布设于零终端显示屏正面面板上，或者，可以使用单独的摄像头，通过调整摄像头位置使得摄像头能够对当前显示器前方一定范围内的画面进行拍摄。在本公开中，摄像头在工作过程中，所拍摄到的图像被称为用户使用图像。

零终端将摄像头拍摄得到的用户使用图像不断上传给服务器端，由服务器端根据用户使用图像确定当前是否出现疑似窥拍事件。

具体的，从用户使用图像中识别疑似窥拍事件的方式很多，比如，可以通过AI算法识别。基本原理是：识别当前用户使用图像中除了当前零终端的合法使用者之外，是否还存在其他人，如果有，则依据其他人的动作、眼神、所处的位置等进行分析，判断其他人是否对屏幕进行偷窥，或者，根据动作判断，是否有人使用拍摄工具进行偷拍；从而确定是否出现窥拍事件。

当出现疑似窥拍事件时，服务器端判断当前帧图像中是否存在敏感信息，如果存在，则对当前帧图像中的敏感信息进行屏蔽处理。

其中，所述对敏感信息进行屏蔽处理，是指将敏感信息所在的区域进行模糊处理后编码发送。该步骤中，首先需要确定当前帧图像中敏感信息所在区域的位置信息，然后将相应位置信息发送给编码模块进行屏蔽处理。

具体的，本公开中所定义的敏感信息，可以包含两部分：一部分是添加至侦听应用列表中的敏感应用；另一部分是，设置的敏感元素。针对第一部分，用户可以将重要的、可能包含敏感信息的应用程序添加至侦听应用列表。这样，图像在采集到桌面图像的同时，会对侦听列表中的应用的状态进行检测，如果相应应用被打开且处于显示状态，则通过计算得到所述应用的显示位置信息，将该显示信息发送至编码模块进行处理。针对第二部分，用户可以事先将文字和/或图像和/或视频设置为敏感元素。这样，采集模块会从采集到的图像中识别出相应敏感元素所在区域，并将位置信息发送给编码模块。

因此，确定当前帧图像中敏感信息所在区域的位置信息包括：

一、确定当前帧图像中是否包含敏感应用显示区域和/或敏感元素显示区域。

具体的，确定当前帧图像中是否包含敏感应用显示区域可以通过以下方式来实现：

判断当前是否有侦听应用列表中的敏感应用被打开；

根据当前显示画面中各个应用的显示位置信息和各个应用的层排布关系来判断敏感应用的图像是否有全部或部分被显示(当多个应用窗口同时打开时，如果敏感应用的窗口不是在顶层，则由于各个窗口之间互相的遮挡，敏感应用的窗口图像可能被完全或部分遮挡；如果敏感应用窗口位于顶层，则敏感应用窗口中的画面会完全显示)，如果有，则确定当前帧图像中包含敏感应用显示区域。

另外，确定当前帧图像中敏感元素的显示区域可以通过以下方式实现：判断当前帧图像中是否包含敏感元素；在当前帧图像中包含敏感元素时，确定当前帧图像中包含敏感元素的显示区域。

对于敏感应用和敏感元素的识别，可以是同时进行，也可以依次进行识别。以先判断是否存在敏感应用，再判断是否存在敏感元素为例，如果当前帧图像中没有敏感应用的显示区域，或者，敏感应用的显示区域没有占满整帧图像，则判断当前帧图像中是否包含敏感元素，若当前帧图像中包含敏感元素，则确定当前帧图像中包含敏感元素的显示区域。

二、确定敏感应用显示区域的位置信息和/或敏感元素显示区域的位置信息。

具体的，根据当前桌面图像中各个应用的位置和排布关系可以计算出敏感应用显示区域的位置信息。

针对敏感元素显示区域的位置信息，可以通过下述方式来确定：

对当前帧图像进行宏块划分；

去掉敏感应用显示区域所在的宏块；

对其它宏块进行宏块类型识别，从所有宏块中识别出文字宏块、图像宏块和视频宏块；

根据用户设置的敏感元素类型，识别出相应类型的宏块，并确定这些宏块的位置信息。比如，用户设置文字为敏感元素，则识别出所有文字宏块的位置；又比如，用户设置文字和视频为敏感元素，则识别出所有视频宏块的位置。

当确定敏感应用显示区域的位置信息和/或敏感元素显示区域的位置信息之后，将相应位置信息发送给编码模块，由编码模块进行屏蔽处理。

具体的，编码模块通过以下方式对敏感信息进行屏蔽处理：

编码模块在对当前帧图像进行编码时，确定出敏感信息所在位置的图像，对这些图像进行模糊处理后进行编码，同时，对其它图像按照正常方式进行编码后，将得到的码流合成后，发送给R端。

本公开可以基于原有的防偷窥屏，与显示系统拉远相结合，当发现有人员对屏幕进行窥拍时，可以将屏幕中显示的重要信息隐藏，其他非重要信息正常显示。这对于用户来说，既能有效防止重要信息被他人非法获取，也能避免突然替换显示画面或直接锁屏给用户带来的不良使用感受。

本公开实施例提供一种防偷拍图像处理装置，用于执行上述防偷拍图像处理方法。如图4所示，该防偷拍图像处理装置40包括：第一获取模块401、识别模块402、检测模块403和处理模块404。

第一获取模块401，用于获取与显示屏相对的预设区域内的拍摄画面。

识别模块402，用于对所述拍摄画面进行图像识别得到图像识别结果。

检测模块403，用于在所述图像识别结果指示存在窥拍事件时，检测所述显示屏的当前帧图像是否包含敏感信息。

处理模块404，用于在所述当前帧图像包含敏感信息时，对所述当前帧图像中的敏感信息进行屏蔽处理，得到处理后的帧图像。

在一个实施例中，如图5所示，检测模块403包括第二获取模块405和确定模块406。

第二获取模块405，用于在所述图像识别结果指示存在窥拍事件时，获取所述预设侦听列表中每个敏感应用的状态信息，并获取当前帧图像中每个已显示应用的窗口位置信息以及每个已显示应用的层排布关系。

确定模块406，在当前帧图像中已显示的应用中包含预设侦听列表中的敏感应用时，确定所述当前帧图像包含敏感信息。或者在所述当前帧图像中包含预设敏感元素时，确定所述当前帧图像包含敏感信息。

在一个实施例中，如图6所示，处理模块404包括第三获取模块407和编码模块408。

第三获取模块407，用于在所述当前帧图像包含敏感信息时，获取所述敏感信息的位置信息。

处理模块404，用于根据所述敏感信息的位置信息，从所述当前帧图像中确定包含所述敏感信息的第一图像和未包含所述敏感信息的第二图像。并对所述第一图像进行模糊处理得到第一模糊图像。

编码模块408，用于对所述第一模糊图像和所述第二图像进行编码，得到处理后的帧图像。

在一个实施例中，第三获取模块407，用于在所述敏感信息包括敏感应用时，根据所述当前帧图像中每个已显示应用的窗口位置信息以及每个已显示应用的层排布关系，获取所述目标敏感应用对应的目标窗口的位置信息。

在一个实施例中，第三获取模块407，用于用于在所述敏感信息包含预设敏感元素时，对所述当前帧图像进行宏块划分，得到至少一个宏块。

识别模块402，用于识别所述至少一个宏块中每个宏块的宏块类型。

确定模块406，用于根据所述每个宏块的宏块类型以及所述预设敏感元素，确定目标宏块的位置信息，所述目标宏块为包含所述预设敏感元素的宏块。

在一个实施例中，第三获取模块407，用于将所述至少一个宏块中目标敏感应用显示区域所在的宏块过滤，得到至少一个待处理宏块。

识别模块402，用于识别所述至少一个待处理宏块中每个待处理宏块的宏块类型。

本公开实施例提供的防偷拍图像处理装置，获取与显示屏相对的预设区域内的拍摄画面；对拍摄画面进行图像识别得到图像识别结果；在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息；在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息进行屏蔽处理，得到处理后的帧图像；将处理后的帧图像发送给零终端，以便零终端对处理后的帧图像解码后显示在显示屏。本公开所提供的技术方案，在存在窥拍事件且显示屏显示的当前帧画面存在敏感信息时，对敏感信息进行模糊处理后显示，将显示屏中显示的重要信息进行隐藏，其他非重要信息正常显示，这样，既能有效防止重要信息被他人非法获取，也能避免突然替换显示画面或直接锁屏给用户带来的不良使用感受，提高用户体验。

本公开实施例还提供了一种图像处理终端，该图像处理终端被配置为可以执行上述防偷拍图像处理方法。该图像处理终端包括接收器、发射器、存储器和处理器，该发射器和存储器分别与处理器连接，存储器中存储有至少一条计算机指令，处理器用于加载并执行至少一条计算机指令，以实现上述防偷拍图像处理方法。

本公开实施例还提供了一种云服务系统，包括云服务器和零终端，零终端用于获取显示屏前方的画面并发送给云服务器，用于将云服务器处理的当前帧图像解码和显示。云服务器被配置为可以执行上述防偷拍图像处理方法。

本公开实施例还提供一种计算机可读存储介质，例如，非临时性计算机可读存储介质可以是只读存储器(英文：Read Only Memory，ROM)、随机存取存储器(英文：RandomAccess Memory，RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机程序，所述计算机程序被加载后，可以执行上述防偷拍图像处理方法。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上仅为说明本发明的实施方式，并不用于限制本发明，对于本领域的技术人员来说，凡在本发明的精神和原则之内，不经过创造性劳动所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.防偷拍图像处理方法，其特征在于，包括以下步骤：

步骤S1、获取与显示屏相对的预设区域内的拍摄画面；

步骤S2、对拍摄画面进行图像识别得到图像识别结果；

步骤S3、在图像识别结果指示存在窥拍事件时，检测显示屏的当前帧图像是否包含敏感信息；

步骤S4、在当前帧图像包含敏感信息时，对当前帧图像中的敏感信息所在的区域进行屏蔽处理，得到处理后的帧图像。

2.根据权利要求1所述的防偷拍图像处理方法，其特征在于，所述的敏感信息包括敏感应用和/或敏感元素，检测显示屏的当前帧图像是否包含敏感信息包括：检测显示屏的当前帧图像是否包含敏感应用和/或检测显示屏的当前帧图像是否包含敏感元素。

3.根据权利要求2所述的防偷拍图像处理方法，其特征在于，检测显示屏的当前帧图像是否包含敏感应用包括：

获取预设侦听列表中每个敏感应用的状态信息；

检测已打开的目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中；

在目标敏感应用对应的目标窗口部分或全部显示在当前帧图像时，则确定当前帧图像中包含敏感应用。

4.根据权利要求2所述的防偷拍图像处理方法，其特征在于，检测显示屏的当前帧图像是否包含敏感元素包括：

检测当前帧图像中是否包含预设敏感元素；

在当前帧图像中包含预设敏感元素时，则确定当前帧图像中包含敏感元素。

5.根据权利要求4所述的防偷拍图像处理方法，其特征在于，所述的预设敏感元素包括文字、图像、视频中的至少一个。

6.根据权利要求3所述的防偷拍图像处理方法，其特征在于，检测已打开的目标敏感应用对应的目标窗口是否部分或全部显示在当前帧图像中包括：获取当前帧图像中每个已显示应用的窗口位置信息以及每个已显示应用的层排布关系；如果已显示应用中包括目标敏感应用，则判断目标敏感应用对应的目标窗口部分或全部显示在当前帧图像中。

7.根据权利要求1所述的防偷拍图像处理方法，其特征在于，所述的对当前帧图像中的敏感信息所在的区域进行屏蔽处理包括：

获取敏感信息的位置信息；

根据敏感信息的位置信息，从当前帧图像中确定包含敏感信息的第一图像和未包含敏感信息的第二图像；

对第一图像进行模糊处理得到第一模糊图像；

将所述第一模糊图像和所述第二图像进行编码，得到处理后的帧图像。

8.根据权利要求7所述的防偷拍图像处理方法，其特征在于，所述的获取敏感信息的位置信息包括获取敏感应用的位置信息和/或获取敏感元素的位置信息。

9.根据权利要求8所述的防偷拍图像处理方法，其特征在于，获取敏感应用的位置信息包括：根据当前帧图像中每个已显示的应用的窗口位置信息以及每个已显示应用的层排布关系，计算目标敏感应用对应的目标窗口的位置信息。

10.根据权利要求8所述的防偷拍图像处理方法，其特征在于，获取敏感元素的位置信息包括：

对当前帧图像进行宏块划分，得到至少一个宏块；

识别至少一个宏块中每个宏块的宏块类型；

去掉敏感应用显示区域所在的宏块，确定包含预设敏感元素的目标宏块的位置信息。

11.防偷拍图像处理装置，其特征在于，包括：

第一获取模块，用于获取与显示屏相对的预设区域内的拍摄画面；

识别模块：用于对所述拍摄画面进行图像识别得到图像识别结果；

检测模块：用于检测所述显示屏的当前帧图像是否包含敏感信息；

处理模块：对所述当前帧图像中的敏感信息进行屏蔽处理，得到处理后的帧图像。

12.一种图像处理终端，其特征在于，所述图像处理终端被配置为可以执行权利要求1至10中任一项所述的防偷拍图像处理方法。

13.一种云服务系统，其特征在于，包括云服务器和零终端，零终端用于获取显示屏前方的画面并发送给云服务器，并且用于将云服务器处理后的帧图像进行解码和显示；云服务器被配置为可以执行权利要求1至10中任一项所述的防偷拍图像处理方法。

14.一种存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被加载后，可以执行权利要求1至10中任一项所述的防偷拍图像处理方法。

Images