CN114286178A - 一种基于远程控制的隐私数据保护方法、设备及介质 - Google Patents

Abstract

本申请公开了一种基于远程控制的隐私数据保护方法、设备及介质，方法包括：确定控制端与用户端建立远程控制连接，根据所述远程控制连接，在控制端与用户端之间建立第一指定时长的通信延迟；在将屏幕画面传输至控制端之前，提取第二指定时长的视频文件，确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；将具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到对应的替换帧；根据控制端的设备帧率、用户端的设备帧率以及替换帧，对第二指定时长的视频文件进行处理，得到处理后的视频文件，并将处理后的视频文件发送至控制端。

Description

一种基于远程控制的隐私数据保护方法、设备及介质

技术领域

本申请涉及计算机信息技术领域，具体涉及一种基于远程控制的隐私数据保护方法、设备及介质。

背景技术

随着互联网技术的发展，纳锐人如今可以足不出户即实现网上办税，同时，由于纳税人对网上纳税的流程可能存在不熟练的情况，因此需要税务工作人员通过远程控制技术对纳税人的终端进行控制及操作。

然而，由于远程控制技术具有高优先级控制特性，因此，税务工作人员在其终端对纳税人的终端进行远程控制的过程中，极易因操作失误采集到纳税人的终端的隐私数据，进而导致了纳税人的隐私泄露。

发明内容

为了解决上述问题，即为了解决税务工作人员在对纳税人的终端进行远程控制的过程中，容易导致纳税人隐私泄露的问题，本申请提出了一种基于远程控制的隐私数据保护方法、设备及介质，包括：

一方面，本申请提供了一种基于远程控制的隐私数据保护方法，包括：确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

在一个示例中，根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，具体包括：实时采集所述控制端的设备帧率以及所述用户端的设备帧率，得到所述控制端与所述用户端在所述第二指定时长内的帧率差值，并判断所述控制端的设备帧率是否低于所述用户端的设备帧率；若是，则判断所述具有隐私内容的画面帧数量是否超过所述帧率差值；若是，则将超过部分的所述具有隐私内容的画面帧删除，并将剩余部分的所述具有隐私内容的画面帧用对应的所述替换帧进行替换；若否，则在所述第二指定时长的视频文件中随机抽出所述帧率差值数量的画面帧，得到抽帧后的视频文件，并将所述抽帧后的视频文件中的所述具有隐私内容的画面帧，用对应的所述替换帧进行替换若否，则将所述具有隐私内容的画面帧用对应的所述替换帧进行替换，并在替换区间内，插入所述帧率差值数量的所述替换帧；得到处理后的视频文件。

在一个示例中，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与所述具有隐私内容的画面帧对应的替换帧之前，所述方法还包括：确定所述用户端开始构建数据库；确定不包含隐私内容的屏幕界面，并将所述不包含隐私内容的屏幕界面作为替换帧；确定与所述替换帧对应的包含隐私内容的屏幕界面，并通过反显处理对所述包含隐私内容的屏幕界面中的隐私内容进行标注，作为比对图像，所述反显处理用于确定所述隐私内容的位置；将所述替换帧与所述比对图像进行统一标记处理，并添加至所述数据库，所述统一标记处理用于将所述替换帧以及所述比对图像进行同时调取。

在一个示例中，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与所述具有隐私内容的画面帧对应的替换帧之前，所述方法还包括：确定所述用户端开始构建数据库；确定不包含隐私内容的屏幕界面，并通过摄像头对所述不包含隐私内容的屏幕界面进行图像采集，作为替换帧；确定与所述替换帧对应的包含隐私内容的屏幕界面，并在所述包含隐私内容的屏幕界面对应的所述隐私内容的位置处添加偏振光膜，并通过所述摄像头对添加所述偏振光膜后的所述包含隐私内容的屏幕界面进行图像采集，作为比对图像；将所述替换帧与所述比对图像进行统一标记处理，并添加至所述数据库，所述统一标记处理用于将所述替换帧以及所述比对图像进行同时调取。

在一个示例中，确定控制端与用户端建立远程控制连接之前，所述方法还包括：通过控制端的采集设备，采集使用所述控制端的操作人员的上半身图像；对所述上半身图像进行识别，以获取所述操作人员的人员信息，所述人员信息至少包括以下一种：面部信息、工号信息；根据所述工号信息，在数据库中查询对应的面部图像，并将所述面部图像与所述面部信息进行比对，以确定所述操作人员的合法性。

在一个示例中，所述第二指定时长小于所述第一指定时长。

在一个示例中，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧，具体包括：确定所述具有隐私内容的画面帧的特征信息，所述特征信息至少包括以下一种：关键词信息、颜色分布信息、指定区域的文本密度信息；根据所述特征信息，在数据库中查询与所述特征信息相匹配的多个比对图像，并通过图像差异比对算法，将所述具有隐私内容的画面帧与所述多个比对图像进行逐一比对，并得到对应的多个相似值；根据所述多个相似值，选取相似值最高的比对图像对应的替换帧，作为所述具有隐私内容的画面帧对应的替换帧。

在一个示例中，所述方法还包括：对所述用户端的屏幕界面进行实时关键词检测，并根据得到的检测结果确定所述用户端的屏幕界面中存在指定关键词，所述指定关键词至少包括：用户名、密码、确定、登录；若确定所述指定关键词的预设区域内存在光标闪烁，则向所述控制端发出第一提示指令，并停止通过所述远程控制连接向所述控制端传输数据；若确定所述指定关键词的预设区域内存在光标闪烁，且所述预设区域内出现字符键入，则中止所述远程控制连接；若确定所述预设区域内存在字符键入，且确定所述用户端的屏幕界面出现界面跳转，则向所述控制端发出第二提示指令，并恢复所述远程控制连接。

另一方面，本申请提供了一种基于远程控制的隐私数据保护设备，包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如下指令：确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

在一个示例中，一种非易失性计算机存储介质，存储有计算机可执行指令，所述计算机可执行指令设置为：确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

通过本申请提出的一种基于远程控制的隐私数据保护方法、设备及介质，能够产生以下有益效果：通过替换帧对隐私内容进行替换，避免了用户端的隐私内容被传输至控制端，同时，通过对采集到的第二指定时长的视频文件进行抽帧、补帧等处理，保障了视频画面不产生内容型差别的基础上，也保证了视频画面没有隐私内容，同时还保证了控制端的屏幕在播放该第二指定时长的视频文件时不产生卡顿感。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本申请实施例中一种的流程示意图；

图2为本申请实施例中的示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于设备和介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。本申请实施例提供的设备和介质与方法是一一对应的，因此，设备和介质也具有与其对应的方法类似的有益技术效果。

首先需要说明的是，本申请中一种基于远程控制的隐私数据保护方法存储于相应的系统或服务器中，用户可以通过相应终端来登录该系统或服务器，终端的类型包括但不限于：手机、平板电脑、个人计算机或其他具有相应处理及通讯功能的硬件设备，用户可以通过终端中的APP、WEB网页或其他方式来登录该系统或服务器，以实现基于远程控制对隐私数据进行保护。

以下结合附图，详细说明本申请各实施例提供的技术方案。

如图1所示，本申请实施例提供的一种基于远程控制的隐私数据保护的方法，包括：

S101：确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作。

具体地，系统可以控制确定控制端与用户端之间建立远程控制连接，远程控制连接用于实现控制端对控制端进行控制，即，控制端可以通过控制端处的鼠标和键盘对用户端执行点击和/或键入操作。

S102：根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟。

具体地，在本申请实施例中，系统为进一步保护用户端的隐私信息，需要有一个信息识别以及信息处理的过程，同时，还需要根据控制端与用户端之间的屏幕帧率差异，对共享画面进行相应的处理。

因此，在本申请实施例中，需要构建第一指定时长的通信延迟，例如0.2s。

S103：实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧。

具体地，系统为实现对用户端的屏幕画面进行相应的识别以及处理，需要实时采集用户端的屏幕画面。

需要说明的是，此处的第二指定时长应该小于第一指定时长，基于本申请记载的技术方案，控制端看到的是由一段段第二指定时长的视频文件构成，而针对第二指定时长的视频文件进行相应处理还需要一定的时间，又由于用户端与控制端之间建立有第一指定时长的通信延迟。

因此，在控制端刚刚与用户端建立连接时，为保证在第一指定时长的通信延迟内，已经有处理完毕的第二指定时长的视频文件可以由用户端传输至控制端，因此在本申请实施例汇总，第二指定时长小于第一指定时长。

S104：将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧。

具体地，系统中预存有预先训练的识别模型，该识别模型可以对第二指定时长的视频文件进行逐帧拆解，得到多帧图像，并分别对多帧图像进行识别，以确定具有隐私内容的画面帧。

需要说明的是，此处的识别模型可以基于普通的图像识别神经网络图像进行相应训练得到。

S105：通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧。

具体地，系统确定具有隐私内容的画面帧的特征信息，特征信息至少包括以下一种：关键词信息、颜色分布信息、指定区域的文本密度信息。

根据特征信息，在数据库中查询与特征信息相匹配的多个比对图像，并通过图像差异比对算法，将具有隐私内容的画面帧与多个比对图像进行逐一比对，并得到对应的多个相似值。

进而，系统根据多个相似值，选取相似值最高的比对图像对应的替换帧，作为具有隐私内容的画面帧对应的替换帧。

S106：根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

具体地，系统实时采集控制端的设备帧率以及用户端的设备帧率，得到控制端与用户端在第二指定时长内的帧率差值，并判断控制端的设备帧率是否低于用户端的设备帧率。例如，在第二指定时长内，控制端可以显示20帧的画面，而用户端可以展示10帧的画面，因此帧率差值即为10。

若是，系统则判断具有隐私内容的画面帧数量是否超过帧率差值；若是，则将超过部分的具有隐私内容的画面帧删除，并将剩余部分的具有隐私内容的画面帧用对应的替换帧进行替换；若否，则在第二指定时长的视频文件中随机抽出帧率差值数量的画面帧，得到抽帧后的视频文件，并将抽帧后的视频文件中的具有隐私内容的画面帧，用对应的替换帧进行替换。

若否，则将具有隐私内容的画面帧用对应的替换帧进行替换，并在替换区间内，插入帧率差值数量的替换帧，此处的替换区间即，视频文件左右端最大距离的替换帧之间的区间。

进而，得到处理后的视频文件。

需要说明的是，由于第二指定时长很短，例如0.1s，因此在此区间内，存在的多帧画面往往是变化不大的，甚至存在全部相同的情况，因此可以通过上述技术方案对第二指定时长的视频文件进行抽帧、补帧等处理，在不会对第二指定时长的视频文件的展示内容产生内容型差别的基础上，对具有隐私内容的画面帧进行替换处理，同时保证第二指定时长的视频文件可以在控制端产生与控制端帧率相同的播放能力，不会产生卡顿的感觉。

在一个实施例中，通过图像差异比对算法，将具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与具有隐私内容的画面帧对应的替换帧之前，还包括：

系统确定确定用户端开始构建数据库。

进而，系统确定不包含隐私内容的屏幕界面，并将不包含隐私内容的屏幕界面作为替换帧。需要说明的是，此处的不包含隐私内容的屏幕画面需要通过用户端的用户自行设定，即，系统进行一定的提示，包括但不限于文字提示、语音提示等，用户即可根据提示关闭相应的隐私内容，即将当前的画面作为不包含隐私内容的屏幕界面。

进而，系统确定与替换帧对应的包含隐私内容的屏幕界面，并通过反显处理对包含隐私内容的屏幕界面中的隐私内容进行标注，作为比对图像，反显处理用于确定所述隐私内容的位置。需要说明的是，此处包含隐私内容的屏幕画面的确定方式与上述一致，在此不再赘述。

此外，反显处理即，通过用户的鼠标或触摸板，进行某一区域的圈定，即可根据圈定确定隐私内容的位置。

进而，系统将替换帧与比对图像进行统一标记处理，并添加至数据库，统一标记处理用于将替换帧以及比对图像进行同时调取。

在一个实施例中，通过图像差异比对算法，将具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与具有隐私内容的画面帧对应的替换帧之前，还包括：

系统确定用户端开始构建数据库。

进而，系统确定不包含隐私内容的屏幕界面，并通过摄像头对不包含隐私内容的屏幕界面进行图像采集，作为替换帧。需要说明的是，此处的不包含隐私内容的屏幕画面需要通过用户端的用户自行设定，即，系统进行一定的提示，包括但不限于文字提示、语音提示等，用户即可根据提示关闭相应的隐私内容，即将当前的画面作为不包含隐私内容的屏幕界面。

进而，系统确定与替换帧对应的包含隐私内容的屏幕界面，并在包含隐私内容的屏幕界面对应的隐私内容的位置处添加偏振光膜，并通过摄像头对添加偏振光膜后的包含隐私内容的屏幕界面进行图像采集，作为比对图像。偏振光膜可以对隐私内容进行遮挡，使得摄像头无法采集隐私内容处的画面。

进而，系统将替换帧与比对图像进行统一标记处理，并添加至数据库，统一标记处理用于将替换帧以及比对图像进行同时调取。

在一个实施例中，系统在确定控制端与用户端建立远程控制连接之前，还包括：

系统通过控制端的采集设备，采集使用控制端的操作人员的上半身图像。

进而，系统对上半身图像进行识别，以获取操作人员的人员信息，人员信息包括：面部信息、工号信息。

进而，系统根据工号信息，在数据库中查询对应的面部图像，并将面部图像与面部信息进行比对，以确定操作人员的合法性。

在一个实施例中，系统还可以对用户端的屏幕界面进行实时关键词检测，并根据得到的检测结果确定用户端的屏幕界面中存在指定关键词，指定关键词至少包括：用户名、密码、确定、登录。

进而，系统若通过识别模型识别到上述指定关键词的预设区域内存在光标闪烁，即可确定用户端当前正在进行用户名、密码输入或登录等操作，为避免该信息的泄露，系统可以向控制端发出第一提示指令，并停止通过远程控制连接向控制端传输数据。第一提示指令即，系统提示控制端，即将暂时中止远程控制连接。预设区域即，围绕关键词一定距离的区域，该一定距离可以设置为3cm。

进而，若系统确定预设区域内存在字符键入，且确定用户端的屏幕界面出现界面跳转，则说明当前用户端已经登录成功，或已输入完毕。此时，系统及向控制端发出第二提示指令，并恢复远程控制连接。第二提示指令即，系统提示控制端，即将恢复远程控制连接。

在一个实施例中，如图2所示，本申请还提供了一种基于远程控制的隐私数据保护设备，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；

其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如下指令：

确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；

根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；

实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；

将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；

通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；

根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

在一个实施例中，本申请还提供了一种非易失性计算机存储介质，存储有计算机可执行指令，所述计算机可执行指令设置为：

确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；

根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；

实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；

将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；

通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；

根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

本申请中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于设备和介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本申请实施例提供的设备和介质与方法是一一对应的，因此，设备和介质也具有与其对应的方法类似的有益技术效果，由于上面已经对方法的有益技术效果进行了详细说明，因此，这里不再赘述设备和介质的有益技术效果。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种基于远程控制的隐私数据保护方法，其特征在于，包括：

确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；

根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；

实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；

将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；

通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；

根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

2.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，具体包括：

实时采集所述控制端的设备帧率以及所述用户端的设备帧率，得到所述控制端与所述用户端在所述第二指定时长内的帧率差值，并判断所述控制端的设备帧率是否低于所述用户端的设备帧率；

若是，则判断所述具有隐私内容的画面帧数量是否超过所述帧率差值；若是，则将超过部分的所述具有隐私内容的画面帧删除，并将剩余部分的所述具有隐私内容的画面帧用对应的所述替换帧进行替换；若否，则在所述第二指定时长的视频文件中随机抽出所述帧率差值数量的画面帧，得到抽帧后的视频文件，并将所述抽帧后的视频文件中的所述具有隐私内容的画面帧，用对应的所述替换帧进行替换；

若否，则将所述具有隐私内容的画面帧用对应的所述替换帧进行替换，并在替换区间内，插入所述帧率差值数量的所述替换帧；

得到处理后的视频文件。

3.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与所述具有隐私内容的画面帧对应的替换帧之前，所述方法还包括：

确定所述用户端开始构建数据库；

确定不包含隐私内容的屏幕界面，并将所述不包含隐私内容的屏幕界面作为替换帧；

确定与所述替换帧对应的包含隐私内容的屏幕界面，并通过反显处理对所述包含隐私内容的屏幕界面中的隐私内容进行标注，作为比对图像，所述反显处理用于确定所述隐私内容的位置；

将所述替换帧与所述比对图像进行统一标记处理，并添加至所述数据库，所述统一标记处理用于将所述替换帧以及所述比对图像进行同时调取。

4.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行对处理，得到与所述具有隐私内容的画面帧对应的替换帧之前，所述方法还包括：

确定所述用户端开始构建数据库；

确定不包含隐私内容的屏幕界面，并通过摄像头对所述不包含隐私内容的屏幕界面进行图像采集，作为替换帧；

确定与所述替换帧对应的包含隐私内容的屏幕界面，并在所述包含隐私内容的屏幕界面对应的所述隐私内容的位置处添加偏振光膜，并通过所述摄像头对添加所述偏振光膜后的所述包含隐私内容的屏幕界面进行图像采集，作为比对图像；

将所述替换帧与所述比对图像进行统一标记处理，并添加至所述数据库，所述统一标记处理用于将所述替换帧以及所述比对图像进行同时调取。

5.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，确定控制端与用户端建立远程控制连接之前，所述方法还包括：

通过控制端的采集设备，采集使用所述控制端的操作人员的上半身图像；

对所述上半身图像进行识别，以获取所述操作人员的人员信息，所述人员信息包括：面部信息、工号信息；

根据所述工号信息，在数据库中查询对应的面部图像，并将所述面部图像与所述面部信息进行比对，以确定所述操作人员的合法性。

6.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，所述第二指定时长小于所述第一指定时长。

7.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧，具体包括：

确定所述具有隐私内容的画面帧的特征信息，所述特征信息至少包括以下一种：关键词信息、颜色分布信息、指定区域的文本密度信息；

根据所述特征信息，在数据库中查询与所述特征信息相匹配的多个比对图像，并通过图像差异比对算法，将所述具有隐私内容的画面帧与所述多个比对图像进行逐一比对，并得到对应的多个相似值；

根据所述多个相似值，选取相似值最高的比对图像对应的替换帧，作为所述具有隐私内容的画面帧对应的替换帧。

8.根据权利要求1所述的一种基于远程控制的隐私数据保护方法，其特征在于，所述方法还包括：

对所述用户端的屏幕界面进行实时关键词检测，并根据得到的检测结果确定所述用户端的屏幕界面中存在指定关键词，所述指定关键词至少包括：用户名、密码、确定、登录；

若确定所述指定关键词的预设区域内存在光标闪烁，则向所述控制端发出第一提示指令，并停止通过所述远程控制连接向所述控制端传输数据；

若确定所述预设区域内存在字符键入，且确定所述用户端的屏幕界面出现界面跳转，则向所述控制端发出第二提示指令，并恢复所述远程控制连接。

9.一种基于远程控制的隐私数据保护设备，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；

其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如下指令：

确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；

根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；

实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；

将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；

通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；

根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

10.一种非易失性计算机存储介质，存储有计算机可执行指令，其特征在于，所述计算机可执行指令设置为：

确定控制端与用户端建立远程控制连接，所述远程控制连接用于实现所述控制端对所述用户端发送远程控制指令，并使所述用户端基于所述远程控制指令执行对应的动作；

根据所述远程控制连接，在所述控制端与所述用户端之间建立第一指定时长的通信延迟；

实时采集所述用户端的屏幕画面，并在将所述屏幕画面通过所述远程控制连接传输至所述控制端之前，提取第二指定时长的视频文件，其中，所述第二指定时长的视频文件的结尾为所述屏幕画面的当前帧；

将所述第二指定时长的视频文件输入至预先训练的识别模型，得到识别结果，并根据所述识别结果确定所述第二指定时长的视频文件中存在具有隐私内容的画面帧；

通过图像差异比对算法，将所述具有隐私内容的画面帧与数据库中预存的比对图像进行比对处理，得到与所述具有隐私内容的画面帧对应的替换帧；

根据所述控制端的设备帧率、所述用户端的设备帧率以及所述替换帧，对所述第二指定时长的视频文件进行处理，得到处理后的视频文件，并将所述处理后的视频文件通过所述远程控制连接发送至所述控制端，以实现将所述处理后的视频文件在所述控制端进行展示。

Images