CN113608984A - 显示内容分析方法、装置、服务器和存储介质 - Google Patents
显示内容分析方法、装置、服务器和存储介质 Download PDFInfo
- Publication number
- CN113608984A CN113608984A CN202110875239.3A CN202110875239A CN113608984A CN 113608984 A CN113608984 A CN 113608984A CN 202110875239 A CN202110875239 A CN 202110875239A CN 113608984 A CN113608984 A CN 113608984A
- Authority
- CN
- China
- Prior art keywords
- screenshot
- analysis
- display content
- analyzed
- electronic equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 190
- 238000000034 method Methods 0.000 claims abstract description 42
- 238000012549 training Methods 0.000 claims abstract description 15
- 238000004590 computer program Methods 0.000 claims description 9
- 230000006399 behavior Effects 0.000 abstract description 17
- 238000004891 communication Methods 0.000 description 6
- 238000013527 convolutional neural network Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 238000011176 pooling Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种显示内容分析方法、装置、服务器和存储介质。其中,显示内容分析方法包括:接收电子设备发送的电子设备的屏幕的显示内容的待分析截图;将待分析截图输入至分析模型中,得到分析模型输出的分析结果;分析结果用于表示待分析截图中是否包括目标窗口;分析模型是基于样本截图、及样本截图对应的样本分析结果训练得到的。本发明可以准确区分目标窗口和非目标窗口,分析过程无需管理员手动操作,提高分析效率,从而实现准确高效地分析用户的办公行为。
Description
技术领域
本发明涉及通信技术领域,尤其涉及一种显示内容分析方法、装置、服务器和存储介质。
背景技术
目前,很多企业员工使用计算机进行办公。然而,在上班时间内个别用户会浏览诸如游戏软件、聊天软件、购物平台、证券交易等与工作无关的软件/网站,这种行为会影响员工的工作效率,对企业造成经济损失。鉴于此,为了提高工作效率,管理员希望通过监控分析技术,获知计算机使用者是否处于正常办公状态。
现有的监控分析技术主要包括如下两类技术:
现有技术1,通过进程名称判断当前操作是否是非办公软件/网站。但是,用户通过修改进程名称可以规避现有技术1的监控,例如通过将游戏软件的进程名称修改为办公软件的进程命名,以达到绕过监控的目的,另外,也不能准确的判断浏览器操作行为,比如在线办公系统和在线网购进程名称相同,导致无法准确分析用户是否正常办公。
现有技术2,通过计算机实时发送计算机屏幕给管理员,管理员实时观看并进行人工分析。但是,现有技术2的监控分析方案比较耗费人力资源及计算机资源,分析效率较低,如果同时使用的计算机较多,那么管理者将无法同时观看,导致监控分析不到位。
发明内容
本发明提供一种显示内容分析方法、装置、服务器和存储介质,用以解决现有技术中无法准确高效地分析用户是否正常办公的缺陷,实现准确高效地分析用户的办公行为。
第一方面,本发明提供一种显示内容分析方法,包括:
接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;
将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
根据本发明提供的一种显示内容分析方法,在所述将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果之后,所述方法还包括:
在所述待分析截图中包括所述目标窗口的情况下,获取所述电子设备的用户信息和所述待分析截图的生成时间;
将所述用户信息、所述待分析截图及所述生成时间存储为一组分析数据。
根据本发明提供的一种显示内容分析方法,在所述获取所述电子设备的用户信息和所述待分析截图的生成时间之后,所述方法还包括:
执行与所述目标窗口的类型对应的第一操作;其中,所述第一操作至少包括以下任一种:
向所述电子设备发送第一消息;其中,所述第一消息用于指示所述电子设备锁定所述电子设备的屏幕;
向所述电子设备发送第二消息;其中,所述第二消息用于指示所述电子设备重启所述电子设备的操作系统;
向目标设备发送第三消息;其中,所述第三消息中携带所述用户信息和所述生成时间。
根据本发明提供的一种显示内容分析方法,在所述将所述用户信息、所述待分析截图及所述生成时间存储为一组分析数据之后,所述方法还包括:
获取所存储的至少一组分析数据;
基于目标维度对各所述分析数据进行分类统计,获得统计结果。
第二方面,本发明还提供一种显示内容分析方法,包括:
对屏幕的显示内容进行截图,获取所述显示内容的待分析截图;
向服务器发送所述显示内容的待分析截图。
根据本发明提供的一种显示内容分析方法,在所述向服务器发送所述显示内容的待分析截图之后,所述方法还包括:
接收所述服务器发送的第一消息,基于所述第一消息锁定所述电子设备的屏幕;或者,
接收所述服务器发送的第二消息,基于所述第二消息重启所述电子设备的操作系统。
第三方面,本发明还提供一种显示内容分析装置,包括:
第一接收模块,用于接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;
分析模块,用于将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
第四方面,本发明还提供一种显示内容分析装置,包括:
截图模块,用于对屏幕的显示内容进行截图,获取所述显示内容的待分析截图;
发送模块,用于向服务器发送所述显示内容的待分析截图。
第五方面,本发明还提供一种服务器,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述第一方面所述的显示内容分析方法的步骤。
第六方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述第一方面所述的显示内容分析方法的步骤。
本发明提供的显示内容分析方法、装置、服务器和存储介质,通过在获取电子设备的屏幕显示内容的待分析截图的基础上,将待分析截图输入至预先训练好的分析模型中进行分析,得到用于表示待分析截图中是否包括目标窗口的分析结果;由于分析模型是预先基于大量的样本截图、及样本截图对应的样本分析结果进行深度训练学习得到的卷积神经网络,可以准确区分目标窗口和非目标窗口,分析过程无需管理员手动操作,提高分析效率,从而实现准确高效地分析用户的办公行为。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的显示内容分析方法的流程示意图之一;
图2是本发明提供的显示内容分析方法的流程示意图之二;
图3是本发明提供的显示内容分析方法的流程示意图之三;
图4是本发明提供的显示内容分析方法的流程示意图之四;
图5是本发明提供的显示内容分析装置的结构示意图之一;
图6是本发明提供的显示内容分析装置的结构示意图之二;
图7是本发明提供的服务器的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供的一种显示内容分析方法。下面结合图1-图4描述本发明提供的显示内容分析方法。
图1是本发明提供的显示内容分析方法的流程示意图之一;如图1所示,本发明提供的显示内容分析方法,包括:
步骤101、接收电子设备发送的电子设备的屏幕的显示内容的待分析截图。
可选地,本发明提供的显示内容分析方法,其执行主体可以为显示内容分析装置,或者该显示内容分析装置中的用于执行显示内容分析方法的控制模块。该显示内容分析装置例如可以是服务器,本发明对此不作具体限定。所述待分析截图可为彩色图像或灰度图像。
可选地,电子设备通过对电子设备的屏幕的显示内容进行截图,获取显示内容的待分析截图之后,向服务器发送待分析截图。
步骤102、将待分析截图输入至分析模型中,得到分析模型输出的分析结果;分析结果用于表示待分析截图中是否包括目标窗口;分析模型是基于样本截图、及样本截图对应的样本分析结果训练得到的。
可选地,分析模型例如为卷积神经网络,该分析模型是基于大量的样本截图、及样本截图对应的样本分析结果进行深度训练学习得到的,可以准确区分目标窗口和非目标窗口,非目标窗口例如办公软件窗口等办公窗口,而目标窗口例如为游戏应用窗口、购物网站、聊天软件窗口、证券交易软件窗口、视频播放软件窗口等非办公窗口。
可选地,目标窗口可以为全屏窗口、或非全屏窗口。
本发明提供的方法,通过在获取电子设备的屏幕显示内容的待分析截图的基础上,将待分析截图输入至预先训练好的分析模型中进行分析,得到用于表示待分析截图中是否包括目标窗口的分析结果;由于分析模型是预先基于大量的样本截图、及样本截图对应的样本分析结果进行深度训练学习得到的卷积神经网络,可以准确区分目标窗口和非目标窗口,分析过程无需管理员手动操作,提高分析效率,从而实现准确高效地分析用户的办公行为。
可选地,图2是本发明提供的显示内容分析方法的流程示意图之二;该显示内容分析方法的执行主体可以为服务器,如图2所示,本发明提供的显示内容分析方法,包括:
步骤201、接收电子设备发送的电子设备的屏幕的显示内容的待分析截图。
可选地,电子设备在向服务器发送待分析截图的同时,还可以向服务器发送待分析截图的生成时间。
步骤202、将待分析截图输入至分析模型中,得到分析模型输出的分析结果;分析结果用于表示待分析截图中是否包括目标窗口;分析模型是基于样本截图、及样本截图对应的样本分析结果训练得到的。
可选地,分析模型是一个卷积神经网络模型,该模型包括输入层、隐含层、卷积层、池化层、全连接层、输出层;构建分析模型时,采用反向传播监督学习,获取样本窗口图片及样本窗口图片对应的样本分析结果,将样本窗口图片(即样本截图)进行灰度处理,然后通过傅里叶变换提取特征值,将特征数据输入到输入层,输入层为二维像素点输入,输入层连接卷积层,卷积层包括多个卷积核对输入的数据进行特征提取,在卷积层进行特征提取后,输出的数据传递到池化层,池化层对数据进行特征选择与信息过滤,在数据过滤后,全连接层对提取的特征进行非线性组合以得到样本窗口图片的标签,输出层对样本窗口图片的标签与样本窗口图片对应的样本分析结果进行比较,获取准确率;当准确率低于预设值时,调整卷积神经网络模型的参数,并再次迭代。直到准确率大于或等于预设值时记录此时卷积神经网络模型的参数及特征值。可选的所有的算法程序使用图形处理单元(GPU)异构并行运算,用于提高算力。
步骤203、在待分析截图中包括目标窗口的情况下,获取电子设备的用户信息和待分析截图的生成时间。
可选地,服务器得到分析模型输出的分析结果之后,在基于分析结果获知在所述待分析截图中包括所述目标窗口的情况下,获取所述电子设备的用户信息和所述待分析截图的生成时间。
可选地,用户预先在电子设备上输入用户姓名等信息,由电子设备向服务器发送用户信息;其中,用户信息例如可以包括用户姓名、电子设备的互联网协议(InternetProtocol,IP)地址、媒体接入控制(Media Access Control,MAC)地址等信息。
可选地,在所述获取所述电子设备的用户信息和所述待分析截图的生成时间之后,所述方法还包括:执行与所述目标窗口的类型对应的第一操作;其中,所述第一操作至少包括以下任一种操作方式:
操作1:服务器向所述电子设备发送第一消息;其中,所述第一消息用于指示所述电子设备锁定所述电子设备的屏幕,以此提醒用户终止非办公行为,提高工作效率。
操作2:服务器向所述电子设备发送第二消息;其中,所述第二消息用于指示所述电子设备重启所述电子设备的操作系统,以此提醒用户终止非办公行为,提高工作效率。
操作3:服务器向目标设备发送第三消息;其中,所述第三消息中携带所述用户信息和所述生成时间。可选地,目标设备例如为管理员的用户设备。服务器通过向目标设备发送携带有所述用户信息和所述生成时间的第三消息,将用户的非办公行为通知管理员,以便管理员进行管理和记录。
可选地,不同的目标窗口的类型对应的第一操作的操作方式不同,例如,当目标窗口的类型为游戏应用窗口时,第一操作的操作方式为操作2;由服务器通过第二消息指示电子设备重启所述电子设备的操作系统,以此提醒用户终止打游戏的非办公行为。再例如,当目标窗口的类型为购物网站时,第一操作的操作方式为操作1;由服务器通过第一消息指示电子设备锁定所述电子设备的屏幕,以此提醒用户终止浏览购物网站的非办公行为。
步骤204、将用户信息、待分析截图及生成时间存储为一组分析数据。
可选地,在待分析截图中包括目标窗口的情况下,说明用户正在进行非办公行为,如使用非办公软件或非办公网站,此时,将用户信息、待分析截图及生成时间存储为一组分析数据,便于对分析结果进行管理和查询。
可选地,服务器可以对存储的多组分析数据进行统计分析,具体方式包括:获取所存储的至少一组分析数据;基于目标维度对各分析数据进行分类统计,获得统计结果。目标维度可以至少包括以下任意一个:个人、部门、非办公行为、行为时长,饼状图、柱状图展示。通过对存储的分析数据进行统计分析,统计出用户或部门的非办公行为的时长等信息,例如可以统计出某员工在上班期间打开游戏应用窗口的时长。
本发明提供的方法,通过分析模型可以获知待分析截图中是否包括目标窗口,在待分析截图中包括目标窗口的情况下,将用户信息、待分析截图及生成时间存储为一组分析数据,便于对分析结果进行管理和查询,提高分析效率。
图3是本发明提供的显示内容分析方法的流程示意图之三;该显示内容分析方法的执行主体可以为电子设备,如图3所示,本发明提供的显示内容分析方法,包括:
步骤301、对屏幕的显示内容进行截图,获取显示内容的待分析截图。
可选地,对屏幕的显示内容进行截图,也即抓取屏幕的显示内容。电子设备可以周期性地对屏幕的显示内容进行截图操作。电子设备可以根据处理器利用率、无线网络吞吐量等信息,自动调节截图操作的频率。
可选地,电子设备在获取显示内容的待分析截图时,对显示内容的待分析截图进行色彩转换,获得显示内容的待分析截图的灰度图片,由于灰度图片比待分析截图在网络传输时占用的带宽要小,因而电子设备通过向服务器发送灰度图片,能够节约带宽占用。
步骤302、向服务器发送显示内容的待分析截图。
可选地,电子设备向服务器发送待分析截图对应的灰度图片。
可选地,步骤301-步骤302的实现不依赖于用户手动操作,用户也无法进行干预。
示例地,电子设备在所述向服务器发送所述显示内容的待分析截图之后,当接收到所述服务器发送的第一消息时,基于所述第一消息锁定所述电子设备的屏幕,以此提醒用户终止非办公行为,提高工作效率;其中,第一消息用于指示电子设备锁定所述电子设备的屏幕。
电子设备在所述向服务器发送所述显示内容的待分析截图之后,当接收到所述服务器发送的第二消息时,基于所述第二消息重启所述电子设备的操作系统,以此提醒用户终止非办公行为,提高工作效率;其中,第二消息用于指示电子设备重启所述电子设备的操作系统。
本发明提供的方法,通过对屏幕的显示内容进行截图,获取显示内容的待分析截图并发送至服务器,以使服务器基于卷积网络模型分析待分析截图中是否包括目标窗口的分析结果,分析过程无需管理员手动操作,提高分析效率。
图4是本发明提供的显示内容分析方法的流程示意图之四;该显示内容分析方法由电子设备和服务器配合执行,如图4所示,本发明提供的显示内容分析方法,包括:
步骤401、电子设备对屏幕的显示内容进行截图,获取显示内容的待分析截图。
步骤402、电子设备向服务器发送显示内容的待分析截图;服务器接收电子设备发送的电子设备的屏幕的显示内容的待分析截图。
步骤403、服务器将待分析截图输入至分析模型中,得到分析模型输出的分析结果;分析结果用于表示待分析截图中是否包括目标窗口;分析模型是基于样本截图、及样本截图对应的样本分析结果训练得到的。
步骤404、服务器在待分析截图中包括目标窗口的情况下,获取电子设备的用户信息和待分析截图的生成时间。
步骤405、服务器将用户信息、待分析截图及生成时间存储为一组分析数据。
步骤406、服务器向电子设备发送第一消息;其中,第一消息用于指示电子设备锁定电子设备的屏幕。
步骤407、电子设备当接收到服务器发送的第一消息时,基于第一消息锁定电子设备的屏幕。
本发明提供的方法,通过电子设备和服务器配合,电子设备对屏幕的显示内容进行截图,服务器将待分析截图输入至分析模型中,分析待分析截图中是否包括目标窗口,及在待分析截图中包括目标窗口的情况下,服务器向电子设备发送第一消息,电子设备基于所述第一消息锁定所述电子设备的屏幕,以此提醒用户终止非办公行为,提高工作效率。
下面对本发明提供的显示内容分析装置进行描述,下文描述的显示内容分析装置与上文描述的显示内容分析方法可相互对应参照。
本申请实施例提供一种显示内容分析装置,图5是本申请实施例提供的显示内容分析装置的结构示意图之一,如图5所示,该显示内容分析装置,包括:第一接收模块501及分析模块502;其中:
第一接收模块501,用于接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;
分析模块502,用于将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
可选地,显示内容分析装置还包括:
第一获取模块,用于在所述待分析截图中包括所述目标窗口的情况下,获取所述电子设备的用户信息和所述待分析截图的生成时间;
存储模块,用于将所述用户信息、所述待分析截图及所述生成时间存储为一组分析数据。
可选地,显示内容分析装置还包括:
执行模块,用于执行与所述目标窗口的类型对应的第一操作;其中,所述第一操作至少包括以下任一种:
向所述电子设备发送第一消息;其中,所述第一消息用于指示所述电子设备锁定所述电子设备的屏幕;
向所述电子设备发送第二消息;其中,所述第二消息用于指示所述电子设备重启所述电子设备的操作系统;
向目标设备发送第三消息;其中,所述第三消息中携带所述用户信息和所述生成时间。
可选地,显示内容分析装置还包括:
第二获取模块,用于获取所存储的至少一组分析数据;
统计模块,用于基于目标维度对各所述分析数据进行分类统计,获得统计结果。
本申请实施例提供一种显示内容分析装置,图6是本申请实施例提供的显示内容分析装置的结构示意图之二,如图6所示,该显示内容分析装置,包括:截图模块601及发送模块602;其中:
截图模块601,用于对屏幕的显示内容进行截图,获取所述显示内容的待分析截图;
发送模块602,用于向服务器发送所述显示内容的待分析截图。
可选地,显示内容分析装置还包括:第二接收模块、或第三接收模块,其中:
第二接收模块,用于接收所述服务器发送的第一消息,基于所述第一消息锁定所述电子设备的屏幕;
第三接收模块,用于接收所述服务器发送的第二消息,基于所述第二消息重启所述电子设备的操作系统。
图7示例了一种服务器的实体结构示意图,如图7所示,该服务器可以包括:处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730和通信总线740,其中,处理器710,通信接口720,存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令,以执行显示内容分析方法,该方法包括:接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
此外,上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法所提供的显示内容分析方法,该方法包括:接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各提供的显示内容分析方法,该方法包括:接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种显示内容分析方法,其特征在于,包括:
接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;
将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
2.根据权利要求1所述的显示内容分析方法,其特征在于,在所述将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果之后,所述方法还包括:
在所述待分析截图中包括所述目标窗口的情况下,获取所述电子设备的用户信息和所述待分析截图的生成时间;
将所述用户信息、所述待分析截图及所述生成时间存储为一组分析数据。
3.根据权利要求2所述的显示内容分析方法,其特征在于,在所述获取所述电子设备的用户信息和所述待分析截图的生成时间之后,所述方法还包括:
执行与所述目标窗口的类型对应的第一操作;其中,所述第一操作至少包括以下任一种:
向所述电子设备发送第一消息;其中,所述第一消息用于指示所述电子设备锁定所述电子设备的屏幕;
向所述电子设备发送第二消息;其中,所述第二消息用于指示所述电子设备重启所述电子设备的操作系统;
向目标设备发送第三消息;其中,所述第三消息中携带所述用户信息和所述生成时间。
4.根据权利要求2所述的显示内容分析方法,其特征在于,在所述将所述用户信息、所述待分析截图及所述生成时间存储为一组分析数据之后,所述方法还包括:
获取所存储的至少一组分析数据;
基于目标维度对各所述分析数据进行分类统计,获得统计结果。
5.一种显示内容分析方法,其特征在于,包括:
对屏幕的显示内容进行截图,获取所述显示内容的待分析截图;
向服务器发送所述显示内容的待分析截图。
6.根据权利要求5所述的显示内容分析方法,其特征在于,在所述向服务器发送所述显示内容的待分析截图之后,所述方法还包括:
接收所述服务器发送的第一消息,基于所述第一消息锁定所述电子设备的屏幕;或者,
接收所述服务器发送的第二消息,基于所述第二消息重启所述电子设备的操作系统。
7.一种显示内容分析装置,其特征在于,包括:
第一接收模块,用于接收电子设备发送的所述电子设备的屏幕的显示内容的待分析截图;
分析模块,用于将所述待分析截图输入至分析模型中,得到所述分析模型输出的分析结果;所述分析结果用于表示所述待分析截图中是否包括目标窗口;所述分析模型是基于样本截图、及所述样本截图对应的样本分析结果训练得到的。
8.一种显示内容分析装置,其特征在于,包括:
截图模块,用于对屏幕的显示内容进行截图,获取所述显示内容的待分析截图;
发送模块,用于向服务器发送所述显示内容的待分析截图。
9.一种服务器,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至4任一项所述显示内容分析方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述显示内容分析方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110875239.3A CN113608984A (zh) | 2021-07-30 | 2021-07-30 | 显示内容分析方法、装置、服务器和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110875239.3A CN113608984A (zh) | 2021-07-30 | 2021-07-30 | 显示内容分析方法、装置、服务器和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113608984A true CN113608984A (zh) | 2021-11-05 |
Family
ID=78306327
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110875239.3A Pending CN113608984A (zh) | 2021-07-30 | 2021-07-30 | 显示内容分析方法、装置、服务器和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113608984A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160349928A1 (en) * | 2015-05-27 | 2016-12-01 | International Business Machines Corporation | Generating summary of activity on computer gui |
CN112348089A (zh) * | 2020-11-10 | 2021-02-09 | 中南民族大学 | 工作状态识别方法、服务器、存储介质及装置 |
CN112633313A (zh) * | 2020-10-13 | 2021-04-09 | 北京匠数科技有限公司 | 一种网络终端的不良信息识别方法及局域网终端设备 |
CN112860651A (zh) * | 2021-02-23 | 2021-05-28 | 北京明略昭辉科技有限公司 | 任务日志分析方法、系统、计算机设备及存储介质 |
-
2021
- 2021-07-30 CN CN202110875239.3A patent/CN113608984A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160349928A1 (en) * | 2015-05-27 | 2016-12-01 | International Business Machines Corporation | Generating summary of activity on computer gui |
CN112633313A (zh) * | 2020-10-13 | 2021-04-09 | 北京匠数科技有限公司 | 一种网络终端的不良信息识别方法及局域网终端设备 |
CN112348089A (zh) * | 2020-11-10 | 2021-02-09 | 中南民族大学 | 工作状态识别方法、服务器、存储介质及装置 |
CN112860651A (zh) * | 2021-02-23 | 2021-05-28 | 北京明略昭辉科技有限公司 | 任务日志分析方法、系统、计算机设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111898023A (zh) | 一种消息推送方法、装置、可读存储介质及计算设备 | |
CN110428127B (zh) | 自动化分析方法、用户设备、存储介质及装置 | |
CN113743607B (zh) | 异常检测模型的训练方法、异常检测方法及装置 | |
CN105740707A (zh) | 恶意文件的识别方法和装置 | |
CN109600336A (zh) | 存储设备、验证码应用方法和装置 | |
CN110798440B (zh) | 异常用户检测方法、装置、系统及计算机存储介质 | |
CN111949702B (zh) | 异常交易数据的识别方法、装置及设备 | |
CN110442712A (zh) | 风险的确定方法、装置、服务器和文本审理系统 | |
CN112114986A (zh) | 数据异常识别方法、装置、服务器和存储介质 | |
CN111754241A (zh) | 一种用户行为感知方法、装置、设备及介质 | |
CN116687394B (zh) | 基于毫米波雷达的摔倒检测方法、装置、设备及存储介质 | |
CN115185760A (zh) | 异常检测方法以及装置 | |
CN113506137A (zh) | 一种电子邮件营销分析方法、系统和设备 | |
CN110716774B (zh) | 金融业务数据大脑的数据驱动方法、系统及存储介质 | |
CN106970942B (zh) | 一种涉黄内容主动防御的方法及终端 | |
CN113608984A (zh) | 显示内容分析方法、装置、服务器和存储介质 | |
CA2976780C (en) | Remote supervision of client device activity | |
CN111563726A (zh) | 企业整改监管方法、装置、设备及计算机可读存储介质 | |
EP4006760B1 (en) | Anomaly determination system, anomaly determination method, and program | |
CN116248346A (zh) | 面向智慧城市的cps网络安全态势感知建立方法和系统 | |
CN112579833B (zh) | 基于用户操作数据的业务关联关系获取方法及装置 | |
CN114969333A (zh) | 基于数据挖掘的网络信息安全管理方法及装置 | |
CN110557324B (zh) | 未读im消息处理方法及装置 | |
CN112199131B (zh) | 一种页面检测方法、装置及设备 | |
CN111291259A (zh) | 一种数据筛选方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |