CN114827519A - 分享内容的处理方法、装置、分享终端及存储介质 - Google Patents
分享内容的处理方法、装置、分享终端及存储介质 Download PDFInfo
- Publication number
- CN114827519A CN114827519A CN202210368206.4A CN202210368206A CN114827519A CN 114827519 A CN114827519 A CN 114827519A CN 202210368206 A CN202210368206 A CN 202210368206A CN 114827519 A CN114827519 A CN 114827519A
- Authority
- CN
- China
- Prior art keywords
- control
- sharing
- marking
- target control
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 19
- 238000003672 processing method Methods 0.000 title claims description 12
- 238000000034 method Methods 0.000 claims abstract description 55
- 238000012545 processing Methods 0.000 claims abstract description 29
- 230000008569 process Effects 0.000 claims abstract description 25
- 238000012544 monitoring process Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 14
- 238000004590 computer program Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种分享内容的处理方法、装置、分享终端及存储介质，采用获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；标记所述目标控件的显示区域；在屏幕分享的过程中，遮盖所述显示区域的技术方案，提高了分享内容的安全性。
Description
技术领域
本申请涉及安全显示技术领域，尤其涉及一种分享内容的处理方法、装置、分享终端及存储介质。
背景技术
随着智能终端技术的不断发展，越来越多的用户通过智能终端向其他用户进行屏幕内容的分享。目前，在视频会议过程中，电子设备A的用户通过镜像屏幕分享方式实现向电子设备B分享屏幕上的内容，这种镜像屏幕分享方式会将电子设备A上的所有显示内容都显示在电子设备B上。但是，在分享画面中无意露出涉及隐私的一些信息，造成电子设备A的用户敏感数据泄露，导致分享内容的安全性降低。
发明内容
本申请的主要目的在于提供一种分享内容的处理方法、装置、分享终端及存储介质，旨在解决分享过程中，分享画面中无意露出涉及隐私的信息导致分享内容的安全性降低的技术问题。
为实现上述目的，本申请提供一种应用于第一分享终端的分享内容的处理方法，所述方法包括：
获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
标记所述目标控件的显示区域；
在屏幕分享的过程中，遮盖所述显示区域。
在一实施例中，获取当前分享屏幕内的控件信息包括：
获取屏幕分享平台；确定所述屏幕分享平台对应的控件信息获取方式；基于所述控件信息获取方式获取当前分享屏幕内的控件信息；
或者，获取所述当前分享屏幕所有窗口中所有控件的控件信息；
或者，获取标记区域内的所有控件的控件信息。
在一实施例中，依据所述控件信息确定目标控件包括：
根据所述控件信息确定控件的属性；
将属性为第一预设属性的控件，以及，属性为第二预设属性但在预设敏感数据库中存在匹配数据的控件均确定为目标控件。
在一实施例中，所述标记所述目标控件的显示区域的步骤，包括：
确定位于所述标记区域内的目标控件的坐标信息；
基于所述坐标信息标记位于所述标记区域内的目标控件的显示区域。
在一实施例中，所述标记所述目标控件的显示区域的步骤之后，包括：
监听目标控件的控件位置或控件尺寸，或者，监听所有窗口的窗口位置或窗口尺寸；
在所述控件位置或所述控件尺寸发生变化，或者，在所述窗口位置或所述窗口尺寸发生变化时，返回执行所述标记所述目标控件的显示区域的步骤及后续步骤。
在一实施例中，所述标记所述目标控件的显示区域的步骤之后，包括：
当监听到窗口关闭指令时，删除关闭窗口关联的目标控件；
当监听到窗口新增指令时，返回执行所述获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件的步骤及后续步骤。
在一实施例中，所述目标控件包括包含敏感信息的目标控件和/或疑似包含敏感信息的目标控件；所述标记所述目标控件的显示区域的步骤，包括：
标记所述包含敏感信息的目标控件的显示区域；
和/或，对所述疑似包含敏感信息的目标控件进行提示，并在接收到标记请求时，从提示的目标控件中确定待标记的目标控件，标记所述待标记的目标控件的显示区域。
此外，为实现上述目的，本申请还提供一种分享内容的处理装置，所述分享内容的处理装置包括：
获取模块，用于获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
标记模块，用于标记所述目标控件的显示区域；
遮盖模块，用于在屏幕分享的过程中，遮盖所述显示区域。
此外，为实现上述目的，本申请还提供一种分享终端，所述分享终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的分享内容的处理程序，所述分享内容的处理程序被处理器执行时实现如上所述的分享内容的处理方法的步骤。
此外，为实现上述目的，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质存储有分享内容的处理程序，所述分享内容的处理程序被处理器执行时实现如上所述的分享内容的处理方法的步骤。
本申请实施例中提供的一种分享内容的处理方法、装置、分享终端及存储介质，通过采用获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；标记所述目标控件的显示区域；在屏幕分享的过程中，遮盖所述显示区域的技术方案，本申请通过将发现的敏感控件提前屏蔽，并且结合用户行为选择需要屏蔽的控件，因为屏蔽了敏感内容，分享后的用户看不见敏感信息，只能看到公开信息，所以提高了分享内容的安全性。
附图说明
图1为本申请实施例方案涉及的分享终端的结构示意图；
图2为本申请分享内容的处理方法第一实施例的流程示意图；
图3为本申请分享内容的处理方法第二实施例的流程示意图；
图4为本申请分享内容的处理方法第三实施例的流程示意图；
图5为本申请分享内容的处理装置的架构示意图；
图6为本申请第一分享终端与第二分享终端的连接示意图；
图7为本申请分享屏幕内窗口与控件的位置示意图；
图8为本申请分享内容的处理方法一实施例的流程示意图；
图9为本申请屏幕内容分享之前的流程示意图；
图10为本申请屏幕内容分享过程中的流程示意图。
本申请目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明，上述附图只是一个实施例图，而不是发明的全部。
具体实施方式
为了更好的理解上述技术方案，下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
如图1所示，图1为本发明实施例方案涉及的硬件运行环境的结构示意图。
需要说明的是，图1即可为分享终端的硬件运行环境的结构示意图。
如图1所示，该分享终端可以包括：处理器1001，例如CPU，存储器1005，用户接口1003，网络接口1004，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的分享终端的结构并不构成对分享终端限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及分享内容的处理程序。其中，操作系统是管理和控制分享终端硬件和软件资源的程序，分享内容的处理程序以及其它软件或程序的运行。
在图1所示的分享终端中，用户接口1003主要用于连接终端，与终端进行数据通信；网络接口1004主要用于后台服务器，与后台服务器进行数据通信；处理器1001可以用于调用存储器1005中存储的分享内容的处理程序。
在本实施例中，分享终端包括：存储器1005、处理器1001及存储在所述存储器上并可在所述处理器上运行的分享内容的处理程序，其中：
处理器1001调用存储器1005中存储的分享内容的处理程序时，执行以下操作：
获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
标记所述目标控件的显示区域；
在屏幕分享的过程中，遮盖所述显示区域。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
获取屏幕分享平台；确定所述屏幕分享平台对应的控件信息获取方式；基于所述控件信息获取方式获取当前分享屏幕内的控件信息；
或者，获取所述当前分享屏幕所有窗口中所有控件的控件信息；
或者，获取标记区域内的所有控件的控件信息。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
根据所述控件信息确定控件的属性；
将属性为第一预设属性的控件，以及，属性为第二预设属性但在预设敏感数据库中存在匹配数据的控件均确定为目标控件。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
确定位于所述标记区域内的目标控件的坐标信息；
基于所述坐标信息标记位于所述标记区域内的目标控件的显示区域。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
监听目标控件的控件位置或控件尺寸，或者，监听所有窗口的窗口位置或窗口尺寸；
在所述控件位置或所述控件尺寸发生变化，或者，在所述窗口位置或所述窗口尺寸发生变化时，返回执行所述标记所述目标控件的显示区域的步骤及后续步骤。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
当监听到窗口关闭指令时，删除关闭窗口关联的目标控件；
当监听到窗口新增指令时，返回执行所述获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件的步骤及后续步骤。
处理器1001调用存储器1005中存储的分享内容的处理程序时，还执行以下操作：
标记所述包含敏感信息的目标控件的显示区域；
和/或，对所述疑似包含敏感信息的目标控件进行提示，并在接收到标记请求时，从提示的目标控件中确定待标记的目标控件，标记所述待标记的目标控件的显示区域。
以下将以实施例的方式具体介绍本申请的技术方案。
在本申请中，参照图8，本申请屏幕分享的过程主要包括以下三部分：第一、屏幕分享前准备。第二、屏幕分享中处理。第三、屏幕分享后清理。其中，参照图9，在屏幕分享前准备的过程中，包括：获取所有敏感信息控件、标记敏感信息控件区域、高亮疑似敏感控件等用户确认是否标记、设置控件与窗口变化回调监听。参照图10，在屏幕分享中处理的过程中，包括对敏感空间进行模糊处理、手动拖选屏蔽区域映射对应控件、窗口空间变化回调响应、重新计算敏感控件区域并模糊。在屏幕分享后清理的过程中，包括取消相关监听与标记区域。
如图2所示，在本申请的第一实施例中，本申请的分享内容的处理方法，包括以下步骤：
步骤S110，获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件。
在本实施例中，所述当前分享屏幕可以为第一分享终端的屏幕；所述第一分享终端可以是手机、笔记本电脑、台式电脑等。本申请的屏幕分享可用于视频会议、教学等领域。当该第一分享终端为电脑时，使用第一分享终端的第一用户可将第一分享终端电脑桌面上所有画面实时传输到第二分享终端上进行显示，以供使用第二分享终端的用户观看。
其中，参照图6，第一用户为屏幕分享的发起者，人数为一人；第二用户为屏幕分享的接收者，人数可以为一人或者多人。
参照图7，在电脑屏幕上存在应用程序对应的矩形显示区域，即窗口。该显示区域代表一个应用程序的输入和输出界面，一般可进行移动，缩放，重叠等操作。窗口一般分为原生窗口，如Windows窗口、Mac窗口和Web窗口(一般指浏览器的一个网页显示区域)。本申请的当前分享屏幕可包含一个或者多个窗口，将显示于当前分享屏幕表面的窗口称为当前分享屏幕的顶层窗口，将被其他窗口覆盖或者最小化的窗口称为底层窗口。每个窗口内部包含多个控件，控件是指桌面显示的基本图形元素，包含标题、内容、显示区域或者其他属性等信息。控件都被外部窗口所包含。
在本实施例中，本申请的控件主要包括以下三种类型：确信包含敏感信息的控件、疑似包含敏感信息的控件、可直接显示的控件。为了提高分享内容的安全性，需要识别出确信包含敏感信息的控件、疑似包含敏感信息的控件，并将该控件的显示区域进行遮挡，从而使得一些隐私信息在分享过程中不易被泄露。具体的，本申请在屏幕分享之前，获取第一分享终端当前分享屏幕内的控件信息，并依据当前分享屏幕内的控件信息筛选出目标控件。其中，控件信息包括控件类型、控件显示区域、控件内容、控件尺寸、控件属性字段等信息。目标控件包括包含敏感信息的目标控件和/或疑似包含敏感信息的目标控件。
可选地，在一实施例中，获取当前分享屏幕内的控件信息包括以下步骤：
步骤S211，获取屏幕分享平台；确定所述屏幕分享平台对应的控件信息获取方式；基于所述控件信息获取方式获取当前分享屏幕内的控件信息；
或者，步骤S212，获取所述当前分享屏幕所有窗口中所有控件的控件信息；
或者，步骤S213，获取标记区域内的所有控件的控件信息。
在本实施例中，本申请从电脑的系统API出发，获取第一分享终端所使用的屏幕分享平台，每个屏幕分享平台对应一种控件信息获取方式，通过控件信息获取方式获取第一分享终端当前分享屏幕内的控件信息。本申请所采用的屏幕分享平台，也即桌面系统可以是Windows、Mac系统等。每个上述桌面系统上可运行Web页面，该桌面系统可以是第一分享终端所采用的系统，也可以是第二分享终端所采用的系统。本申请通过针对不同的屏幕分享平台，设置对应的控件信息获取方式，能够精确获取窗口和控件的相关信息，提高敏感控件的识别效率和识别精度。
在本实施例中，还可以获取当前分享屏幕所有窗口中所有控件的控件信息。或者是获取标记区域内所有控件的控件信息。
可选地，在一实施例中，依据所述控件信息确定目标控件具体包括以下步骤：
步骤S111，根据所述控件信息确定控件的属性；
步骤S112，将属性为第一预设属性的控件，以及，将属性为第二预设属性但在预设敏感数据库中存在匹配数据的控件均确定为目标控件。
在本实施例中，控件的控件属性包括第一预设属性和第二预设属性两种。
本申请获取当前分享屏幕所有窗口信息，遍历并获取所有控件信息。所述窗口信息包括位于所述当前分享屏幕的顶层窗口信息和位于所述当前分享屏幕的底层窗口信息，各个窗口包括至少一个控件。需要说明的是：针对当前分享屏幕上所有窗口，包括被覆盖的窗口也能遍历。即本申请对位于所述当前分享屏幕的顶层窗口信息和位于所述当前分享屏幕的底层窗口信息进行遍历，使得在后续第一分享终端的第一用户移动窗口位置或者唤起其他窗口的时候，可以立刻进行遮挡。
具体的，对于Web平台：获取HTML结构，遍历element获取所有控件信息。通过element的id，value，class，alt，area-*等控件属性，获取控件信息，通过getBoundingClientRect函数获取控件的显示区域。对于出现input_type为tel，password，email等第一预设属性的控件时，将该控件归类为目标控件。对于出现creditcard，住址，身份证号等第二预设属性的控件时，且预设敏感数据库中存在与所述第二预设属性对应的控件匹配的预设敏感控件时，将所述控件属性为第二预设属性对应的控件确定为目标控件。其中，预设敏感数据库为疑似敏感词库，结合AI样本库判断，归类为疑似包含敏感信息的控件。
对于Windows平台：通过AccessibleObjectFromWindow函数向所有窗口发送WM_GETOBJECT消息，获取窗口IAccessible句柄。遍历UI树，通过accName和accValue函数获取到控件信息。通过accLocation和accHitTest函数获取控件的显示区域。对get_accState函数返回为
TATE_SYSTEM_PROTECTED的控件归类为目标控件。对于出现credit_card，住址，身份证号等第二预设属性的控件时，且预设敏感数据库中存在与所述第二预设属性对应的控件匹配的预设敏感控件时，将所述控件属性为第二预设属性对应的控件确定为目标控件。其中，预设敏感数据库为疑似敏感词库，结合AI样本库判断，归类为疑似包含敏感信息的目标控件。
对于Mac平台:通过调用窗口属性获取函数CGWindowListCreate和CGWindowListCreateDescriptionFromArray获取所有窗口的NSAccessibility对象。遍历UI树，通过accessibilityTitle和accessibilityValue函数获取控件信息。通过accessibilityFrame获取控件的显示区域。对isAccessibilityProtectedContent函数返回为true的控件，归类为目标控件。对于出现credit_card，住址，身份证号等第二预设属性的控件时，且预设敏感数据库中存在与所述第二预设属性对应的控件匹配的预设敏感控件时，将所述控件属性为第二预设属性对应的控件确定为目标控件。其中，预设敏感数据库为疑似敏感词库，结合AI样本库判断，归类为疑似包含敏感信息的目标控件。
对于控件属性进行检查，检测的过程主要包括：AI样本判断、模板分析、正则表达式检查等方法，如果匹配上，则归类为疑似包含敏感信息的控件。针对所有控件，有value字段的控件，一般显示文字都有value，读出其value值，然后通过AI判断是否为敏感控件。
其中，AI样本判断，比如一段文字，疑似家庭住址，则AI判断为隐私信息，将该控件确定为敏感控件。模板分析可以和正则表达式合并，例如判断是否是身份证号，使用如下正则表达式可以匹配：
^[1-9]\d{5}(18|19|([23]\d))\d{2}((0[1-9])|(10|11|12))(([0-2][1-9])|10|20|30|31)\d{3}[0-9Xx]$)|(^[1-9]\d{5}\d{2}((0[1-9])|(10|11|12))(([0-2][1-9])|10|20|30|31)\d{3}$。
在本实施例的技术方案中，采用基于屏幕分享平台确定控件属性信息等方式，获取相关文字进行判断，相比起来速度快，准确性高，实时性好，覆盖全面。另外，不仅对比文字部分，也判断控件属性是否属于敏感信息，如tel，password字段，及结合AI模型进行判断，能更多发现敏感字段，提前屏蔽。
步骤S120，标记所述目标控件的显示区域。
在本实施例中，所述显示区域的尺寸和形状可根据实际情况进行确定，所述显示区域用于遮挡控件的显示内容。在识别出目标控件之后，标记目标控件的显示区域。
可选地，在一实施例中，标记所述目标控件的显示区域包括：
目标控件包括包含敏感信息的目标控件和/或疑似包含敏感信息的目标控件。在识别出确信包含敏感信息的目标控件以及疑似包含敏感信息的目标控件之后，对确信包含敏感信息的目标控件自动标记显示区域。对疑似包含敏感信息的目标控件进行提示，由用户点击确认是否需要标记为显示区域，即可以是在接收到标记请求时，根据标记请求确定待标记的疑似包含敏感信息的目标控件，对该待标记的疑似包含敏感信息的目标控件标记显示区域。可选地，还可以对疑似包含敏感信息的目标控件进行提示，以区别于其他可显示的控件，例如，可以进行高亮显示、加粗显示、下划线显示、倾斜显示等。本实施例结合了自动标记与手动确认标记方法，提升效果。
在一实施例中，标记所述目标控件的显示区域具体包括以下步骤：
步骤S121，确定位于所述标记区域内的目标控件的坐标信息；
步骤S123，基于所述坐标信息标记位于所述标记区域内的目标控件的显示区域。
在本实施例中，第一用户手动选择一个标记区域，即第一分享终端在接收到标记请求时，然后程序把该标记区域覆盖的所有控件进行标记，并纳入监听。第一用户可以在分享过程中，手动标记屏蔽区域。手动标记的屏蔽区域不是对画面进行屏蔽，而是根据用户选择的标记区域，去对应寻找覆盖的相关窗口，以及该窗口内的疑似包含敏感信息的目标控件的坐标信息。然后根据该坐标信息标记该目标控件的显示区域，以屏蔽目标控件。后续可根据屏幕控件坐标移动进行追踪。
在本实施例的技术方案中，通过采用控件方式追踪，不依赖屏幕分享画面信息，当分享页面发生变动时，可以实时获取控件变更区域信息，实时跟踪重新模糊匹配，解决了相关技术当屏幕上内容发生变化时，原有标记区域无法跟踪变化，导致敏感信息重新暴露的问题，通过本申请的技术方案使得敏感信息不易暴露。
步骤S130，在屏幕分享的过程中，遮盖所述显示区域。
在本实施例中，在将目标控件标记显示区域之后，将已标记显示区域的所述目标控件存储于待屏蔽列表中。具体的，对确信包含敏感信息的控件自动标记显示区域，读取其控件的显示区域，包括位置和尺寸。放入待屏蔽列表L1。对疑似包含敏感信息的控件高亮显示，由用户点击确认是否需要标记为显示区域，确认屏蔽后放入待屏蔽列表L1。在后续分享过程中，读取待屏蔽列表L1，自动对标记包含隐私信息的控件，按照其在屏幕中的位置和大小，找到所在显示区域，进行模糊处理，处理后向网络发送出去，便于第二用户接收观看。
本实施例根据上述技术方案，为了解决分享过程中，分享画面中无意露出涉及隐私的信息导致分享内容的安全性降低的技术问题，本申请提出了一种分享内容的处理方法，该方法可结合控件信息，对控件进行预先判断和保护，对于确信是敏感信息的控件直接遮挡，对疑似包含敏感信息的控件自动筛选，并结合用户的操作选择屏蔽的区域，将敏感空间存储于待屏蔽列表中，提高分享内容的安全性。
如图3所示，在本申请的第二实施例中，本申请的分享内容的处理方法，包括以下步骤：
步骤S110，获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
步骤S120，标记所述目标控件的显示区域；
步骤S210，监听目标控件的控件位置或控件尺寸，或者，监听所有窗口的窗口位置或窗口尺寸；
步骤S220，在所述控件位置或所述控件尺寸发生变化，或者，在所述窗口位置或所述窗口尺寸发生变化时，返回执行步骤S120，标记所述目标控件的显示区域及后续步骤。
在本实施例中，在屏幕分享之前，对已标记模糊的控件的显示参数进行监听，设置回调函数F1。在屏幕分享过程中，如果控件位置或控件尺寸发生变换，则反向通知F1。如果窗口的位置和尺寸发生变换，则反向通知F2。在回调F1/F2函数后，实时重新计算新的需要屏蔽的控件区域，重新进行模糊遮挡，即重新获取第一分享终端当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件。
在本实施例的技术方案中，基于控件信息进行模糊处理，由于控件位置和尺寸精确可获得，能够精确追踪位置变化和尺寸缩放，因此能解决屏幕窗口拖动及缩放等带来的屏蔽区域失效问题。
如图4所示，在本申请的第三实施例中，本申请的分享内容的处理方法，包括以下步骤：
步骤S110，获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
步骤S120，标记所述目标控件的显示区域；
步骤S310，当监听到窗口关闭指令时，删除关闭窗口关联的目标控件；
步骤S320，当监听到窗口新增指令时，返回执行步骤S110，获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件的步骤及后续步骤。
在本实施例中，对于不再画面中显示的控件，取消模糊处理。对于新出现的控件，重新计算后判断是否需要模糊处理。对所有窗口的位置和尺寸变化，包括新增与关闭的窗口进行监听，设置回调函数F2。如果有被标记模糊的窗口被关闭，则删除待屏蔽列表中关闭的窗口关联的所有控件。如果有新增窗口，也反向通知F2，进行重新检测，即重新获取第一分享终端当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件。
在本实施例的技术方案中，在屏幕分享的过程中实时检测新增窗口和关闭窗口，及时对新增窗口中的控件进行检测，以避免敏感信息的暴露，以及在窗口关闭时，将窗口关联的控件删除以避免资源的占用。
在一实施例中，在接收到屏幕分享的结束指令时，取消对应用窗口的控件信息获取，取消画面模糊标记处理。取消回调函数F1、F2处理，即停止对当前分享屏幕内的控件的监听。
可选地，根据用户对疑似敏感信息控件的标记结果，反馈给AI模型，让AI模型进行自学习，以便下次能更精准进行判断推荐。
在本实施例的技术方案中，在接收到屏幕分享的结束指令时，及时停止监听所述当前分享屏幕内的控件，避免系统资源的浪费。
本发明实施例提供了分享内容的处理方法的实施例，需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
基于同一发明构思，如图5所示，本申请提供了一种分享内容的处理装置，该分享内容的处理装置包括：
获取模块，用于获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件。在一实施例中，所述获取模块还用于获取屏幕分享平台；确定所述屏幕分享平台对应的控件信息获取方式；基于所述控件信息获取方式获取当前分享屏幕内的控件信息；或者，获取所述当前分享屏幕所有窗口中所有控件的控件信息；或者，获取标记区域内的所有控件的控件信息。在一实施例中，所述获取模块还用于根据所述控件信息确定控件的属性；将属性为第一预设属性的控件，以及，属性为第二预设属性但在预设敏感数据库中存在匹配数据的控件均确定为目标控件。
标记模块，用于标记所述目标控件的显示区域。在一实施例中，所述标记模块还用于确定位于所述标记区域内的目标控件的坐标信息；基于所述坐标信息标记位于所述标记区域内的目标控件的显示区域。在一实施例中，所述标记模块还用于标记所述包含敏感信息的目标控件的显示区域；和/或，对所述疑似包含敏感信息的目标控件进行提示，并在接收到标记请求时，从提示的目标控件中确定待标记的目标控件，标记所述待标记的目标控件的显示区域。
遮盖模块，用于在屏幕分享的过程中，遮盖所述显示区域。
在一实施例中，在所述遮盖模块之后，还连接有第一监听模块，所述第一监听模块用于监听目标控件的控件位置或控件尺寸，或者，监听所有窗口的窗口位置或窗口尺寸；在所述控件位置或所述控件尺寸发生变化，或者，在所述窗口位置或所述窗口尺寸发生变化时，返回执行所述标记所述目标控件的显示区域的步骤及后续步骤。
在一实施例中，在所述遮盖模块之后，还连接有第二监听模块，所述第二监听模块用于当监听到窗口关闭指令时，删除关闭窗口关联的目标控件；当监听到窗口新增指令时，返回执行所述获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件的步骤及后续步骤。
本发明分享内容的处理装置具体实施方式与上述分享内容的处理方法各实施例基本相同，在此不再赘述。
基于同一发明构思，本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有分享内容的处理程序，所述分享内容的处理程序被处理器执行时实现如上所述的分享内容的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。
由于本申请实施例提供的计算机可读存储介质，为实施本申请实施例的方法所采用的计算机可读存储介质，故而基于本申请实施例所介绍的方法，本领域所属人员能够了解该计算机可读存储介质的具体结构及变形，故而在此不再赘述。凡是本申请实施例的方法所采用的计算机可读存储介质都属于本申请所欲保护的范围。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用计算机可读存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本申请可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。
Claims (10)
1.一种分享内容的处理方法，其特征在于，所述分享内容的处理方法包括：
获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
标记所述目标控件的显示区域；
在屏幕分享的过程中，遮盖所述显示区域。
2.如权利要求1所述的分享内容的处理方法，其特征在于，获取当前分享屏幕内的控件信息包括：
获取屏幕分享平台；确定所述屏幕分享平台对应的控件信息获取方式；基于所述控件信息获取方式获取当前分享屏幕内的控件信息；
或者，获取所述当前分享屏幕所有窗口中所有控件的控件信息；
或者，获取标记区域内的所有控件的控件信息。
3.如权利要求2所述的分享内容的处理方法，其特征在于，依据所述控件信息确定目标控件包括：
根据所述控件信息确定控件的属性；
将属性为第一预设属性的控件，以及，属性为第二预设属性但在预设敏感数据库中存在匹配数据的控件均确定为目标控件。
4.如权利要求3所述的分享内容的处理方法，其特征在于，所述标记所述目标控件的显示区域的步骤，包括：
确定位于所述标记区域内的目标控件的坐标信息；
基于所述坐标信息标记位于所述标记区域内的目标控件的显示区域。
5.如权利要求1所述的分享内容的处理方法，其特征在于，所述标记所述目标控件的显示区域的步骤之后，包括：
监听目标控件的控件位置或控件尺寸，或者，监听所有窗口的窗口位置或窗口尺寸；
在所述控件位置或所述控件尺寸发生变化，或者，在所述窗口位置或所述窗口尺寸发生变化时，返回执行所述标记所述目标控件的显示区域的步骤及后续步骤。
6.如权利要求1所述的分享内容的处理方法，其特征在于，所述标记所述目标控件的显示区域的步骤之后，包括：
当监听到窗口关闭指令时，删除关闭窗口关联的目标控件；
当监听到窗口新增指令时，返回执行所述获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件的步骤及后续步骤。
7.如权利要求1所述的分享内容的处理方法，其特征在于，所述目标控件包括包含敏感信息的目标控件和/或疑似包含敏感信息的目标控件；所述标记所述目标控件的显示区域的步骤，包括：
标记所述包含敏感信息的目标控件的显示区域；
和/或，对所述疑似包含敏感信息的目标控件进行提示，并在接收到标记请求时，从提示的目标控件中确定待标记的目标控件，标记所述待标记的目标控件的显示区域。
8.一种分享内容的处理装置，其特征在于，所述分享内容的处理装置包括：
获取模块，用于获取当前分享屏幕内的控件信息，并依据所述控件信息确定目标控件；
标记模块，用于标记所述目标控件的显示区域；
遮盖模块，用于在屏幕分享的过程中，遮盖所述显示区域。
9.一种分享终端，其特征在于，所述分享终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的分享内容的处理程序，所述分享内容的处理程序被所述处理器执行时实现如权利要求1-7中任一项所述的分享内容的处理方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有分享内容的处理程序，所述分享内容的处理程序被处理器执行时实现权利要求1-7中任一项所述的分享内容的处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210368206.4A CN114827519A (zh) | 2022-04-08 | 2022-04-08 | 分享内容的处理方法、装置、分享终端及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210368206.4A CN114827519A (zh) | 2022-04-08 | 2022-04-08 | 分享内容的处理方法、装置、分享终端及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114827519A true CN114827519A (zh) | 2022-07-29 |
Family
ID=82534684
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210368206.4A Pending CN114827519A (zh) | 2022-04-08 | 2022-04-08 | 分享内容的处理方法、装置、分享终端及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114827519A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115935433A (zh) * | 2023-01-09 | 2023-04-07 | 北京匠数科技有限公司 | 屏幕实时隐私保护方法和装置 |
-
2022
- 2022-04-08 CN CN202210368206.4A patent/CN114827519A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115935433A (zh) * | 2023-01-09 | 2023-04-07 | 北京匠数科技有限公司 | 屏幕实时隐私保护方法和装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3848843A1 (en) | Data processing systems for identifying whether cookies contain personally identifying information | |
| EP3407189B1 (en) | Application distribution method and device | |
| WO2022089330A1 (zh) | 截图方法和装置、电子设备和可读存储介质 | |
| US11838255B2 (en) | Mail processing method and apparatus, electronic device and storage medium | |
| US20180107686A1 (en) | Search method and apparatus | |
| CN107943369B (zh) | 一种权限申请控制管理的方法、装置、介质和电子设备 | |
| CN111026392A (zh) | 一种引导页面生成方法、装置及电子设备 | |
| WO2022242376A1 (zh) | 消息处理方法、装置、设备、存储介质及程序产品 | |
| CN114827519A (zh) | 分享内容的处理方法、装置、分享终端及存储介质 | |
| CN111125433A (zh) | 一种弹窗管理方法、装置、电子设备及可读存储介质 | |
| CN110889057B (zh) | 业务数据可视化方法和业务对象可视化装置 | |
| CN110634173A (zh) | 图片标记信息的添加方法、装置、电子设备及可读介质 | |
| US20140337698A1 (en) | Method, apparatus and mobile terminal for selecting hyperlinks | |
| CN113467867B (zh) | 信息处理方法、装置、电子设备及存储介质 | |
| CN104978414A (zh) | 一种内容搜索方法及终端 | |
| CN113395234B (zh) | 推广信息的流量劫持检测方法及装置 | |
| CN114896625A (zh) | 一种文件防泄漏方法、装置、电子设备及存储介质 | |
| CN110096601B (zh) | 图表关键区域确定方法、装置、介质、服务器及用户终端 | |
| CN109343852B (zh) | 一种操作界面帧图片的显示方法及装置 | |
| CN108804181B (zh) | 控件内容获取方法、装置及存储介质 | |
| CN109190097B (zh) | 用于输出信息的方法和装置 | |
| CN113378036A (zh) | 页面操作分析、埋点方法、装置、设备及存储介质 | |
| CN111786934A (zh) | 检测客户端正常用户的方法以及装置 | |
| CN112256654A (zh) | 一种文档共享方法及装置 | |
| CN111382061A (zh) | 一种测试方法、装置、介质和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |