CN116483655A - 一种基于智能化的同屏多窗口操作界面监控处理系统 - Google Patents
一种基于智能化的同屏多窗口操作界面监控处理系统 Download PDFInfo
- Publication number
- CN116483655A CN116483655A CN202310456357.XA CN202310456357A CN116483655A CN 116483655 A CN116483655 A CN 116483655A CN 202310456357 A CN202310456357 A CN 202310456357A CN 116483655 A CN116483655 A CN 116483655A
- Authority
- CN
- China
- Prior art keywords
- operation interface
- input
- response
- computer
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 62
- 238000012545 processing Methods 0.000 title claims abstract description 26
- 230000004044 response Effects 0.000 claims abstract description 115
- 230000007547 defect Effects 0.000 claims abstract description 25
- 238000013441 quality evaluation Methods 0.000 claims abstract description 9
- 238000000034 method Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 16
- 238000005094 computer simulation Methods 0.000 claims description 7
- 238000012423 maintenance Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000011156 evaluation Methods 0.000 claims description 4
- 230000009286 beneficial effect Effects 0.000 description 6
- 238000005457 optimization Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Testing And Monitoring For Control Systems (AREA)
Abstract
本发明涉及同屏操作监控技术领域,具体公开一种基于智能化的同屏多窗口操作界面监控处理系统,包括子窗口划分模块、目标操作界面锁定模块、目标操作界面响应质量分析模块、操作处理库、闲置操作界面协同质量评价模块、同屏操作质量评判模块和同屏操作缺陷识别终端,本发明在进行计算机同屏多窗口操作质量监控时充分考虑到用户同屏操作体验感的展现方面,以此融合了当前正在使用的操作界面的响应质量监控和其他操作界面对当前正在使用的操作界面的干扰监控,实现了同屏多窗口操作质量的全方面监控,大大提高了监控指标捕捉的精确度,使得监控结果与监控需求的适配度得到大大提升,有利于提高了监控结果的可用价值。
Description
技术领域
本发明涉及同屏操作监控技术领域,具体公开一种基于智能化的同屏多窗口操作界面监控处理系统。
背景技术
现如今计算机已经成为人们工作学习、生活中不可缺少的工具。随着计算机使用场景越来越复杂,用户可能需要通过在计算机的显示屏上进行同屏多窗口显示,以在多个操作界面上同时查看多个信息。
鉴于计算机同屏多窗口需要在一个显示屏上同时显示多个操作界面,正常情况下单个操作界面由于控制目标只有一个相对来说控制针对性更强,而当对多个操作界面进行控制时就会存在控制针对性地削弱,从而容易造成操作失灵的现象,极大地降低了用户的操作体验感,在这种情况下对计算机的同屏多窗口操作质量进行监控显得很有必要。
现有技术在进行计算机同屏多窗口操作质量监控时其关注点一般聚焦在操作界面响应质量方面,忽略了其他操作界面对当前正在使用的操作界面造成的干扰,这种干扰在同屏多窗口显示状态下会持续性地分散用户在当前操作界面的操作注意力,进而影响用户的操作效果,导致用户同屏操作体验感差。
由此可见现有技术对计算机同屏多窗口操作质量监控由于对用户同屏操作体验感的展现方面考虑不全面,使得监控指标捕捉不到位,导致实际监控结果与基于保障同屏操作体验感产生的监控需求适配性不高,进一步降低了监控结果的可用价值。
另外现有技术对计算机同屏多窗口操作质量的监控停留在监控本身上,缺乏对同屏操作缺陷分析,导致监控深度不足,不利于计算机同屏操作控制的优化。
因此,现有技术还有待改进和发展。
发明内容
本发明的主要目的在于提供一种基于智能化的同屏多窗口操作界面监控处理系统,旨在解决现有技术中同屏多窗口操作界面监控存在的缺陷。
为实现上述目的,本发明提供一种基于智能化的同屏多窗口操作界面监控处理系统,包括以下模块:子窗口划分模块,用于由计算机控制中心将计算机显示屏按照当前需求操作界面数量进行子窗口划分,其中各窗口对应一个操作界面。
目标操作界面锁定模块,用于定位鼠标在计算机显示屏上的指向位置,进而获取鼠标的指向位置落入的子窗口,并将该子窗口对应的操作界面锁定为目标操作界面。
目标操作界面响应质量分析模块,用于由计算机后台监控目标操作界面的操作过程,从中获取操作响应参数,由此分析目标操作界面对应的响应质量系数。
操作处理库,用于存储各种操作界面在各种操作指令输入后的正常响应画面,存储计算机执行操作指令的基准响应时长,并存储各种计算机型号对应的计算机限制缓存量和计算机磁盘容量。
闲置操作界面协同质量评价模块,用于将除目标操作界面之外的其他操作界面记为闲置操作界面,进而在目标操作界面的操作过程中分析各闲置操作界面的操作干扰度和显示干扰度,由此评价闲置操作界面对应的协同质量系数。
同屏操作质量评判模块,用于依据目标操作界面对应的响应质量系数和闲置操作界面对应的协同质量系数评判计算机同屏操作质量是否满足需求。
同屏操作缺陷识别终端,用于在评判计算机同屏操作质量无法满足需求时识别同屏操作缺陷,并上传到计算机控制中心。
作为优选技术方案,所述操作响应参数包括有效操作指令占比率及各条有效操作指令对应的响应时长和响应精准度,其中操作响应参数的具体获取过程如下:记录鼠标指向目标操作界面时的时间点,记为起始操作时间点。
由计算机后台从起始操作时间点开始监控,实时感应目标操作界面是否存在操作指令输入,当感应到存在操作指令输入时记录操作指令输入时间点,与此同时采集各条操作指令输入后的目标操作界面呈现画面,并将其与相应操作指令输入前的目标操作界面呈现画面进行对比,识别是否相同,若某条操作指令输入后的目标操作界面呈现画面与该条操作指令输入前的目标操作界面呈现画面相同,则表明该条操作指令输入无响应,反之则表明该条操作指令输入有响应。
根据各条操作指令的输入响应结果从若干操作指令中筛选出输入有响应的操作指令,记为有效操作指令,进而统计有效操作指令数量,进而利用公式计算得到有效操作指令占比率。
记录各条有效操作指令输入后目标操作界面产生响应的时间点,记为响应时间点,进而将各条有效操作指令的响应时间点与操作指令输入时间点相减,得到各条有效操作指令对应的响应时长。
将各条有效操作指令输入后的目标操作界面呈现画面与相应操作指令输入前的目标操作界面呈现画面进行对比,进而在输入后的目标操作界面呈现画面中标记出响应区域,形成响应画面。
将各条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行对比,若某条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行重合对比,得到各条有效操作指令对应的目标操作界面响应画面重合度,将其作为各条有效操作指令对应的响应精准度。
作为优选技术方案,所述目标操作界面对应的响应质量系数的分析公式为其中ti表示为第i条有效操作指令对应的响应时长,i表示为有效操作指令的编号,i=1,2,…,n,n表示为有效操作指令的数量,Qi表示为第i条有效操作指令对应的响应精准度,T0表示为计算机执行操作指令的基准响应时长,η表示为有效操作指令占比率,λi表示为第i条有效操作指令输入时的计算机运行效率。
作为优选技术方案,所述λi对应的具体获取过程如下;在各条有效操作指令输入时获取计算机内存使用率、计算机缓存容量和计算机磁盘占用空间。
将各条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量和计算机磁盘占用空间导入公式其中AFi、ACi、ASi分别表示为第i条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量、计算机磁盘占用空间,AC0、AS0分别表示为计算机限制缓存量、计算机磁盘容量,e表示为自然常数。
作为优选技术方案,所述分析各闲置操作界面的操作干扰度包括以下分析步骤:按照设定的时间间隔从目标操作界面对应的起始操作时间点开始分别采集各闲置操作界面显示图像。
在由计算机后台感应目标操作界面存在操作指令输入时采集各闲置操作界面的显示图像,得到各条操作指令输入时对应的各闲置操作界面显示图像。
将各条操作指令输入时间点向前倒推得到最近采集时刻,进而提取最近采集时刻对应的各闲置操作界面显示图像,作为各条操作指令输入前对应的各闲置操作界面显示图像。
将各条操作指令输入时对应的各闲置操作界面显示图像与相应操作指令输入前对应的各闲置操作界面显示图像进行重合对比,得到各闲置操作界面在各条操作指令输入时的原始维持度,记为δkj,其中k表示为闲置操作界面的编号,k=1,2,…,x,j表示为操作指令编号,j=1,2,…,m。
将δkj代入操作干扰度分析公式OLk=max{1-δkj},j∈{1,2,…,m},得到各闲置操作界面的操作干扰度OLk。
作为优选技术方案,所述显示干扰度的具体分析过程如下:在由计算机后台感应目标操作界面存在操作指令输入时获取目标操作界面的显示指征和各闲置操作界面的显示指征,其中显示指征包括分辨率、对比度和刷新速度。
将各条操作指令输入时的目标操作界面显示指征与各闲置操作界面的显示指征进行对比,计算各闲置操作界面对应的显示干扰度DLk,其计算表达式为其中REkj、CRkj、RFkj分别表示为第j条操作指令输入时第k闲置操作界面的分辨率、对比度、刷新速度,REj′、CRj′、RFj′分别表示为第j条操作指令输入时目标操作界面的分辨率、对比度、刷新速度。
作为优选技术方案,所述闲置操作界面对应的协同质量系数的评价公式为其中lk表示为第k闲置操作界面相对于目标操作界面的相隔距离,l0表示为参考相隔距离。
作为优选技术方案,所述lk的获取方式如下:分别提取各闲置操作界面轮廓和目标操作界面轮廓,并进行中心点标记。
将各闲置操作界面轮廓的中心点和目标操作界面轮廓中心点相连,连线距离即为lk。
作为优选技术方案,所述计算机同屏操作质量是否满足需求对应的评判方式为:将目标操作界面对应的响应质量系数和闲置操作界面对应的协同质量系数通过评判模型其中/>ψ0分别表示为预置的满足同屏操作需求的最低响应质量系数、协同质量系数。
作为优选技术方案,所述识别同屏操作缺陷对应的识别方式为将和ψ分别与/>和ψ0进行对比,若/>则识别同屏操作缺陷为目标操作界面操作响应不佳,若ψ<ψ0则识别同屏操作缺陷为闲置操作界面干扰。
相对于现有技术,本发明的实施例至少具有如下优点或有益效果:
1、本发明在进行计算机同屏多窗口操作质量监控时充分考虑到用户同屏操作体验感的展现方面,以此融合了当前正在使用的操作界面的响应质量监控和其他操作界面对当前正在使用的操作界面的干扰监控,实现了同屏多窗口操作质量的全方面监控,大大提高了监控指标捕捉的精确度,使得监控结果与监控需求的适配度得到大大提升,有利于提高了监控结果的可用价值。
2.本发明在进行其他操作界面对当前正在使用的操作界面干扰监控时不仅考虑到其他操作界面对当前正在使用的操作界面产生的操作干扰,还考虑到其他操作界面对当前正在使用的操作界面产生的显示干扰,使得干扰监控覆盖范围更广,通过干扰监控一方面能够及时识别到其他操作界面的操作干扰对用户操作注意力的影响,另一方面能够及时识别到其他操作界面的显示干扰对用户视力造成的影响,在一定程度上扩展了用户同屏操作体验的展示方面,使得干扰监控效果更佳。
3、本发明在完成了计算机同屏多窗口操作质量监控后继续进行同屏操作缺陷分析,实现了计算机同屏多窗口操作质量监控的深度化处理,能够为计算机同屏操作控制的优化提供可靠方向,有利于提高计算机同屏操作控制优化效率。
附图说明
利用附图对本发明作进一步说明,但附图中的实施例不构成对本发明的任何限制,对于本领域的普通技术人员,在不付出创造性劳动的前提下,还可以根据以下附图获得其它的附图。
图1为本发明的系统模块连接示意图。
图2为本发明的计算机同屏多窗口操作界面示意图。
图3为本发明的闲置操作界面相对于目标操作界面相隔距离的实现示意图。
附图标记:A——目标操作界面中心点,B——闲置操作界面中心点。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1所示,本发明提供一种基于智能化的同屏多窗口操作界面监控处理系统,包括子窗口划分模块、目标操作界面锁定模块、目标操作界面响应质量分析模块、操作处理库、闲置操作界面协同质量评价模块、同屏操作质量评判模块和同屏操作缺陷识别终端。
上述中子窗口划分模块与目标操作界面锁定模块连接,目标操作界面锁定模块分别与目标操作界面响应质量分析模块和闲置操作界面协同质量评价模块连接,目标操作界面响应质量分析模块和闲置操作界面协同质量评价模块均与同屏操作质量评判模块连接,同屏操作质量评判模块与同屏操作缺陷识别终端连接,操作处理库与目标操作界面响应质量分析模块连接。
所述子窗口划分模块用于由计算机控制中心将计算机显示屏按照当前需求操作界面数量进行子窗口划分,其中各窗口对应一个操作界面,具体参见图2所示。
目标操作界面锁定模块,用于定位鼠标在计算机显示屏上的指向位置,进而获取鼠标的指向位置落入的子窗口,此时表明该子窗口对应的操作界面为用户当前正在使用的操作界面,进而将该子窗口对应的操作界面锁定为目标操作界面。
所述目标操作界面响应质量分析模块用于由计算机后台监控目标操作界面的操作过程,从中获取操作响应参数,其中操作响应参数包括有效操作指令占比率及各条有效操作指令对应的响应时长和响应精准度,由此分析目标操作界面对应的操作质量系数。
在本发明的具体实施例中,操作响应参数的具体获取过程如下:
记录鼠标指向目标操作界面时的时间点,记为起始操作时间点。
由计算机后台从起始操作时间点开始监控,实时感应目标操作界面是否存在操作指令输入,当感应到存在操作指令输入时记录操作指令输入时间点,与此同时采集各条操作指令输入后的目标操作界面呈现画面,并将其与相应操作指令输入前的目标操作界面呈现画面进行对比,识别是否相同,若某条操作指令输入后的目标操作界面呈现画面与该条操作指令输入前的目标操作界面呈现画面相同,则表明该条操作指令输入无响应,反之则表明该条操作指令输入有响应。
根据各条操作指令的输入响应结果从若干操作指令中筛选出输入有响应的操作指令,记为有效操作指令,进而统计有效操作指令数量,进而利用公式计算得到有效操作指令占比率。
记录各条有效操作指令输入后目标操作界面产生响应的时间点,记为响应时间点,进而将各条有效操作指令的响应时间点与操作指令输入时间点相减,得到各条有效操作指令对应的响应时长。
将各条有效操作指令输入后的目标操作界面呈现画面与相应操作指令输入前的目标操作界面呈现画面进行对比,进而在输入后的目标操作界面呈现画面中标记出响应区域,形成响应画面。
将各条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行对比,若某条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行重合对比,得到各条有效操作指令对应的目标操作界面响应画面重合度,将其作为各条有效操作指令对应的响应精准度。
在上述优选方案基础上,各条有效操作指令对应的目标操作界面响应画面重合度的计算过程为根据重合对比结果获取重合画面面积,进而将各条有效操作指令对应的目标操作界面重合画面面积与相应目标操作界面的面积相除,得到各条有效操作指令对应的目标操作界面响应画面重合度。
上述中目标操作界面对应的响应质量系数的分析公式为其中ti表示为第i条有效操作指令对应的响应时长,i表示为有效操作指令的编号,i=1,2,…,n,n表示为有效操作指令的数量,Qi表示为第i条有效操作指令对应的响应精准度,T0表示为计算机执行操作指令的基准响应时长,η表示为有效操作指令占比率,λi表示为第i条有效操作指令输入时的计算机运行效率。
在上述响应质量系数分析公式中,各条有效操作指令的响应精准度越大、响应时长越短、有效操作指令占比率越大,目标操作界面对应的响应质量系数越大。且在基于响应时长分析时不是直接将有效操作指令的响应时长与计算机执行操作指令的基准响应时长进行比较,而是基于计算机实际运行状态考虑到计算机运行效率对基准响应时长的影响,基准响应时长是基于计算机正常使用状态下产生的,此时计算机的运行效率最高,当计算机运行效率缓慢时这种状态下的基准响应时长相对要长一些,通过将计算机运行效率纳入到响应质量系数分析中更加贴合实际,使得分析结果更加准确。
在上述方案的具体实施例中,λi对应的具体获取过程如下;在各条有效操作指令输入时从计算机后台获取计算机内存使用率、计算机缓存容量和计算机磁盘占用空间。
将各条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量和计算机磁盘占用空间导入公式其中AFi、ACi、ASi分别表示为第i条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量、计算机磁盘占用空间,AC0、AS0分别表示为计算机限制缓存量、计算机磁盘容量,e表示为自然常数,其中某条有效操作指令输入时对应的计算机内存使用率越大、计算机缓存容量越大、计算机磁盘占用空间越大,该条有效操作指令输入时的计算机运行效率越小。
上述中计算机限制缓存量、计算机磁盘容量的获取方式为获取计算机型号,进而将计算机型号与操作处理库中存储的各种计算机型号对应的计算机限制缓存量和计算机磁盘容量进行匹配,从中匹配出该计算机型号对应的计算机限制缓存量和计算机磁盘容量。
所述操作处理库用于存储各种操作界面在各种操作指令输入后的正常响应画面,存储计算机执行操作指令的基准响应时长,并存储各种计算机型号对应的计算机限制缓存量和计算机磁盘容量。
所述闲置操作界面协同质量评价模块用于将除目标操作界面之外的其他操作界面记为闲置操作界面,进而在目标操作界面的操作过程中分析各闲置操作界面的操作干扰度和显示干扰度,由此评价闲置操作界面对应的协同质量系数。
作为本发明的一个优选实施方案,分析各闲置操作界面的操作干扰度包括以下分析步骤:按照设定的时间间隔从目标操作界面对应的起始操作时间点开始分别采集各闲置操作界面显示图像。
在由计算机后台感应目标操作界面存在操作指令输入时采集各闲置操作界面的显示图像,得到各条操作指令输入时对应的各闲置操作界面显示图像。
将各条操作指令输入时间点向前倒推得到最近采集时刻,进而提取最近采集时刻对应的各闲置操作界面显示图像,作为各条操作指令输入前对应的各闲置操作界面显示图像。
将各条操作指令输入时对应的各闲置操作界面显示图像与相应操作指令输入前对应的各闲置操作界面显示图像进行重合对比,得到重合图像面积,进而将各条操作指令输入时对应的重合图像面积除以该条操作指令输入前对应的各闲置操作界面显示图像面积,得到各闲置操作界面在各条操作指令输入时的原始维持度,记为δkj,其中k表示为闲置操作界面的编号,k=1,2,…,x,j表示为操作指令编号,j=1,2,…,m。
将δkj代入操作干扰度分析公式OLk=max{1-δkj},j∈{1,2,…,m},得到各闲置操作界面的操作干扰度OLk,其中各闲置操作界面在各条操作指令输入时的原始维持度越大,操作干扰度越小。
作为本发明的又一个优选实施方案,分析各闲置操作界面的显示干扰度的具体分析过程如下:在由计算机后台感应目标操作界面存在操作指令输入时获取目标操作界面的显示指征和各闲置操作界面的显示指征,其中显示指征包括分辨率、对比度和刷新速度。
将各条操作指令输入时的目标操作界面显示指征与各闲置操作界面的显示指征进行对比,计算各闲置操作界面对应的显示干扰度DLk,其计算表达式为
其中REkj、CRkj、RFkj分别表示为第j条操作指令输入时第k闲置操作界面的分辨率、对比度、刷新速度,REj′、CRj′、RFj′分别表示为第j条操作指令输入时目标操作界面的分辨率、对比度、刷新速度,其中各条操作指令输入时各闲置操作界面的显示指征与相应操作指令输入时的目标操作界面显示指征相差越大,显示干扰度越大。
上述中闲置操作界面对应的协同质量系数的评价公式为其中lk表示为第k闲置操作界面相对于目标操作界面的相隔距离,l0表示为参考相隔距离。
需要说明的是,上述协同质量系数评价公式中反映的是各闲置操作界面的协同质量系数,其中操作干扰度越大、显示干扰度越大,闲置操作界面的协同质量系数越小,相隔距离越大,表明闲置操作界面产生的干扰离目标操作界面越远,此时闲置操作界面的协同质量系数越大。
在上述方案基础上lk的获取方式如下:分别提取各闲置操作界面轮廓和目标操作界面轮廓,并进行中心点标记。
参见图3所示,将各闲置操作界面轮廓的中心点和目标操作界面轮廓中心点相连,连线距离即为lk。
本发明在进行其他操作界面对当前正在使用的操作界面干扰监控时不仅考虑到其他操作界面对当前正在使用的操作界面产生的操作干扰,还考虑到其他操作界面对当前正在使用的操作界面产生的显示干扰,使得干扰监控覆盖范围更广,通过干扰监控一方面能够及时识别到其他操作界面的操作干扰对用户操作注意力的影响,另一方面能够及时识别到其他操作界面的显示干扰对用户视力造成的影响,在一定程度上扩展了用户同屏操作体验的展示方面,使得干扰监控效果更佳。
所述同屏操作质量评判模块用于依据目标操作界面对应的操作质量质量和闲置操作界面对应的协同质量系数评判计算机同屏操作质量是否满足需求,具体评判方式为:将目标操作界面对应的响应质量系数和闲置操作界面对应的协同质量系数通过评判模型其中/>ψ0分别表示为预置的满足同屏操作需求的最低响应质量系数、协同质量系数。
本发明在进行计算机同屏多窗口操作质量监控时充分考虑到用户同屏操作体验感的展现方面,以此融合了当前正在使用的操作界面的响应质量监控和其他操作界面对当前正在使用的操作界面的干扰监控,实现了同屏多窗口操作质量的全方面监控,大大提高了监控指标捕捉的精确度,使得监控结果与监控需求的适配度得到大大提升,有利于提高了监控结果的可用价值。
所述同屏操作缺陷识别终端用于在评判计算机同屏操作质量无法满足需求时识别同屏操作缺陷,并上传到计算机控制中心。
上述中识别同屏操作缺陷对应的识别方式为将和ψ分别与/>和ψ0进行对比,若则识别同屏操作缺陷为目标操作界面操作响应不佳,若ψ<ψ0则识别同屏操作缺陷为闲置操作界面干扰。
本发明在完成了计算机同屏多窗口操作质量监控后继续进行同屏操作缺陷分析,实现了计算机同屏多窗口操作质量监控的深度化处理,能够为计算机同屏操作控制的优化提供可靠方向,有利于提高计算机同屏操作控制优化效率。
以上内容仅仅是对本发明结构所作的举例和说明,所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离发明的结构或者超越本发明所定义的范围,均应属于本发明的保护范围。
Claims (10)
1.一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于,包括以下模块:
子窗口划分模块,用于由计算机控制中心将计算机显示屏按照当前需求操作界面数量进行子窗口划分,其中各窗口对应一个操作界面;
目标操作界面锁定模块,用于定位鼠标在计算机显示屏上的指向位置,进而获取鼠标的指向位置落入的子窗口,并将该子窗口对应的操作界面锁定为目标操作界面;
目标操作界面响应质量分析模块,用于由计算机后台监控目标操作界面的操作过程,从中获取操作响应参数,由此分析目标操作界面对应的响应质量系数;
操作处理库,用于存储各种操作界面在各种操作指令输入后的正常响应画面,存储计算机执行操作指令的基准响应时长,并存储各种计算机型号对应的计算机限制缓存量和计算机磁盘容量;
闲置操作界面协同质量评价模块,用于将除目标操作界面之外的其他操作界面记为闲置操作界面,进而在目标操作界面的操作过程中分析各闲置操作界面的操作干扰度和显示干扰度,由此评价闲置操作界面对应的协同质量系数;
同屏操作质量评判模块,用于依据目标操作界面对应的响应质量系数和闲置操作界面对应的协同质量系数评判计算机同屏操作质量是否满足需求;
同屏操作缺陷识别终端,用于在评判计算机同屏操作质量无法满足需求时识别同屏操作缺陷,并上传到计算机控制中心。
2.如权利要求1所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述操作响应参数包括有效操作指令占比率及各条有效操作指令对应的响应时长和响应精准度,其中操作响应参数的具体获取过程如下:
记录鼠标指向目标操作界面时的时间点,记为起始操作时间点;
由计算机后台从起始操作时间点开始监控,实时感应目标操作界面是否存在操作指令输入,当感应到存在操作指令输入时记录操作指令输入时间点,与此同时采集各条操作指令输入后的目标操作界面呈现画面,并将其与相应操作指令输入前的目标操作界面呈现画面进行对比,识别是否相同,若某条操作指令输入后的目标操作界面呈现画面与该条操作指令输入前的目标操作界面呈现画面相同,则表明该条操作指令输入无响应,反之则表明该条操作指令输入有响应;
根据各条操作指令的输入响应结果从若干操作指令中筛选出输入有响应的操作指令,记为有效操作指令,进而统计有效操作指令数量,进而利用公式计算得到有效操作指令占比率;
记录各条有效操作指令输入后目标操作界面产生响应的时间点,记为响应时间点,进而将各条有效操作指令的响应时间点与操作指令输入时间点相减,得到各条有效操作指令对应的响应时长;
将各条有效操作指令输入后的目标操作界面呈现画面与相应操作指令输入前的目标操作界面呈现画面进行对比,进而在输入后的目标操作界面呈现画面中标记出响应区域,形成响应画面;
将各条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行对比,若某条有效操作指令输入后的目标操作界面响应画面与相应操作指令输入后的正常响应画面进行重合对比,得到各条有效操作指令对应的目标操作界面响应画面重合度,将其作为各条有效操作指令对应的响应精准度。
3.如权利要求2所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述目标操作界面对应的响应质量系数的分析公式为其中ti表示为第i条有效操作指令对应的响应时长,i表示为有效操作指令的编号,i=1,2,…,n,n表示为有效操作指令的数量,T0表示为计算机执行操作指令的基准响应时长,Qi表示为第i条有效操作指令对应的响应精准度,η表示为有效操作指令占比率,λi表示为第i条有效操作指令输入时的计算机运行效率。
4.如权利要求3所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述λi对应的具体获取过程如下;
在各条有效操作指令输入时获取计算机内存使用率、计算机缓存容量和计算机磁盘占用空间;
将各条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量和计算机磁盘占用空间导入公式其中AFi、ACi、ASi分别表示为第i条有效操作指令输入时对应的计算机内存使用率、计算机缓存容量、计算机磁盘占用空间,AC0、AS0分别表示为计算机限制缓存量、计算机磁盘容量,e表示为自然常数。
5.如权利要求3所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述分析各闲置操作界面的操作干扰度包括以下分析步骤:
按照设定的时间间隔从目标操作界面对应的起始操作时间点开始分别采集各闲置操作界面显示图像;
在由计算机后台感应目标操作界面存在操作指令输入时采集各闲置操作界面的显示图像,得到各条操作指令输入时对应的各闲置操作界面显示图像;
将各条操作指令输入时间点向前倒推得到最近采集时刻,进而提取最近采集时刻对应的各闲置操作界面显示图像,作为各条操作指令输入前对应的各闲置操作界面显示图像;
将各条操作指令输入时对应的各闲置操作界面显示图像与相应操作指令输入前对应的各闲置操作界面显示图像进行重合对比,得到各闲置操作界面在各条操作指令输入时的原始维持度,记为δkj,其中k表示为闲置操作界面的编号,k=1,2,...,x,j表示为操作指令编号,j=1,2,...,m;
将δkj代入操作干扰度分析公式OLk=max{1-δkj},j∈{1,2,...,m},得到各闲置操作界面的操作干扰度OLk。
6.如权利要求5所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述显示干扰度的具体分析过程如下:
在由计算机后台感应目标操作界面存在操作指令输入时获取目标操作界面的显示指征和各闲置操作界面的显示指征,其中显示指征包括分辨率、对比度和刷新速度;
将各条操作指令输入时的目标操作界面显示指征与各闲置操作界面的显示指征进行对比,计算各闲置操作界面对应的显示干扰度DLk,其计算表达式为其中REkj、CRkj、RFkj分别表示为第j条操作指令输入时第k闲置操作界面的分辨率、对比度、刷新速度,RE′j、CR′j、RF′j分别表示为第j条操作指令输入时目标操作界面的分辨率、对比度、刷新速度。
7.如权利要求6所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述闲置操作界面对应的协同质量系数的评价公式为其中lk表示为第k闲置操作界面相对于目标操作界面的相隔距离,l0表示为参考相隔距离。
8.如权利要求7所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述lk的获取方式如下:
分别提取各闲置操作界面轮廓和目标操作界面轮廓,并进行中心点标记;
将各闲置操作界面轮廓的中心点和目标操作界面轮廓中心点相连,连线距离即为lk。
9.如权利要求7所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述计算机同屏操作质量是否满足需求对应的评判方式为:将目标操作界面对应的响应质量系数和闲置操作界面对应的协同质量系数通过评判模型其中/>ψ0分别表示为预置的满足同屏操作需求的最低响应质量系数、协同质量系数。
10.如权利要求9所述的一种基于智能化的同屏多窗口操作界面监控处理系统,其特征在于:所述识别同屏操作缺陷对应的识别方式为将和ψ分别与/>和ψ0进行对比,若/>则识别同屏操作缺陷为目标操作界面操作响应不佳,若ψ<ψ0则识别同屏操作缺陷为闲置操作界面干扰。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310456357.XA CN116483655A (zh) | 2023-04-18 | 2023-04-18 | 一种基于智能化的同屏多窗口操作界面监控处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310456357.XA CN116483655A (zh) | 2023-04-18 | 2023-04-18 | 一种基于智能化的同屏多窗口操作界面监控处理系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116483655A true CN116483655A (zh) | 2023-07-25 |
Family
ID=87224732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310456357.XA Withdrawn CN116483655A (zh) | 2023-04-18 | 2023-04-18 | 一种基于智能化的同屏多窗口操作界面监控处理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116483655A (zh) |
-
2023
- 2023-04-18 CN CN202310456357.XA patent/CN116483655A/zh not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10657036B2 (en) | Determining visual testing coverages | |
CN110221979A (zh) | 应用程序的性能测试方法、装置、设备及存储介质 | |
WO2021219080A1 (zh) | 基于联邦学习模型的视图显示方法、装置、设备及介质 | |
CN111259772A (zh) | 图像标注方法、装置、设备和介质 | |
JP7389787B2 (ja) | マルチ-レベル転移領域に基づくドメイン適応型オブジェクト検出装置及び方法 | |
CN111044149A (zh) | 电压互感器的温度异常点检测方法、装置及可读存储介质 | |
CN110796039B (zh) | 一种面部瑕疵检测方法、装置、电子设备及存储介质 | |
CN111400428A (zh) | 一种知识图谱体系搭建方法 | |
CN112861809B (zh) | 基于多目标视频分析的课堂抬头检测系统及其工作方法 | |
CN113254608A (zh) | 通过问答生成训练数据的系统及其方法 | |
CN116483655A (zh) | 一种基于智能化的同屏多窗口操作界面监控处理系统 | |
CN110675361B (zh) | 建立视频检测模型以及视频检测的方法、装置 | |
CN112084103B (zh) | 界面测试方法、装置、设备和介质 | |
CN102436535B (zh) | 计算机辅助设计过程中创意拐点的识别方法及系统 | |
CN116628381A (zh) | 一种基于ai预测的网页数据设计模块故障无损恢复方法 | |
CN109828984A (zh) | 一种分析处理的方法、装置、计算机存储介质及终端 | |
CN112936342B (zh) | 基于人体姿态识别算法的实体机器人动作评测系统及方法 | |
CN114245232B (zh) | 一种视频摘要生成方法、装置、存储介质及电子设备 | |
CN110516024B (zh) | 地图搜索结果展现方法、装置、设备和存储介质 | |
CN111124862B (zh) | 智能设备性能测试方法、装置及智能设备 | |
CN110471586B (zh) | 项目推荐方法、装置、计算机设备和存储介质 | |
CN114564354A (zh) | 数据库性能监控方法、装置、电子设备及存储介质 | |
CN112434877A (zh) | 一种基于云计算的智慧城市数据处理方法及装置 | |
CN111047433A (zh) | 用户数异常原因的分析方法、装置、服务器和存储介质 | |
CN111338860A (zh) | 一种内存监控方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20230725 |
|
WW01 | Invention patent application withdrawn after publication |