CN111240948A - 一种体验数据处理方法、装置、计算机设备及存储介质 - Google Patents
一种体验数据处理方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN111240948A CN111240948A CN201911127314.7A CN201911127314A CN111240948A CN 111240948 A CN111240948 A CN 111240948A CN 201911127314 A CN201911127314 A CN 201911127314A CN 111240948 A CN111240948 A CN 111240948A
- Authority
- CN
- China
- Prior art keywords
- request
- key element
- matching
- url
- rule
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000012545 processing Methods 0.000 claims abstract description 44
- 238000000034 method Methods 0.000 claims abstract description 25
- 238000004590 computer program Methods 0.000 claims description 6
- 238000012544 monitoring process Methods 0.000 abstract description 9
- 230000007246 mechanism Effects 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000005457 optimization Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000013307 optical fiber Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000013024 troubleshooting Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例公开了一种体验数据处理方法、装置、计算机设备及存储介质,方法包括:获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求URL;所述请求URL包括请求元素;将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。本发明实施例的技术方案能够优化应用性能体验的监控机制。
Description
技术领域
本发明实施例涉及数据处理技术领域,尤其涉及一种体验数据处理方法、装置、计算机设备及存储介质。
背景技术
应用性能管理(Application Performance Management,APM)主要指对企业的关键业务应用进行监测和优化,从而提高企业应用的可靠性和质量,保证用户得到良好的服务,降低IT(Internet Technology,互联网技术)总拥有成本。
在应用性能体验监控领域,现有的监控方案是在被监测应用(包括PC(PersonalComputer,个人计算机)应用、网站应用及移动App(Application,应用程序)应用等)或服务端组件上安装对应的探针,通过探针收集应用或服务的全部访问体验数据,并按照一定的维度对数据进行分类聚合,展示不同维度下的特征规则,以便快速缩小问题排查的范围,缩短问题排查时间。
发明人在实现本发明的过程中,发现现有技术存在如下缺陷:利用现有的按照维度对体验数据进行分组统计展示的方法查看关键业务请求的体验数据时,需要按照既定的维度分组逐级点击展开,最终才能定位到指定的某个关键业务场景请求,难以满足关键业务场景的数据查找需求。同时,由于关键场景业务请求被归类在某个维度分组下,系统展示数据时是按照维度下所有请求数据进行平均后展示,如果维度平均值超过健康度阈值,再点击该维度展开到详细的请求地址查看,则会导致关键业务场景问题被整体平均值掩盖。
发明内容
本发明实施例提供一种体验数据处理方法、装置、计算机设备及存储介质,以优化应用性能体验的监控机制。
第一方面,本发明实施例提供了一种体验数据处理方法,包括:
获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求URL(UniformResource Locator,统一资源定位符);所述请求URL包括请求元素;
将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;
如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
第二方面,本发明实施例还提供了一种体验数据处理装置,包括:
请求原始数据获取模块,用于获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求统一资源定位符URL;所述请求URL包括请求元素;
目标关键元素确定模块,用于将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;
体验数据统计处理模块,用于如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
第三方面,本发明实施例还提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明任意实施例所提供的体验数据处理方法。
第四方面,本发明实施例还提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明任意实施例所提供的体验数据处理方法。
本发明实施例通过获取客户端上报的包括请求URL的请求原始数据,将请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定请求URL的请求元素为目标关键元素时,对目标关键元素对应的体验数据按照预设统计规则进行统计处理,解决现有体验数据处理方法存在的难以满足关键业务场景的数据查找需求及关键业务场景问题易被覆盖等问题,以实现对应用性能体验监控机制的优化。
附图说明
图1a是本发明实施例一提供的一种体验数据处理方法的流程图;
图1b是本发明实施例一提供的一种对关键元素设置匹配模式的页面效果示意图;
图1c是本发明实施例一提供的一种对目标关键元素对应的体验数据进行统计的效果示意图;
图1d是本发明实施例一提供第一种对关键元素设备报警规则的页面效果示意图;
图2是本发明实施例二提供的一种体验数据处理装置的示意图;
图3为本发明实施例三提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。
另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1a是本发明实施例一提供的一种体验数据处理方法的流程图,本实施例可适用于对关键业务场景体验数据进行统计处理的情况,该方法可以由体验数据处理装置来执行,该装置可以由软件和/或硬件的方式来实现,并一般可集成在计算机设备中。相应的,如图1a所示,该方法包括如下操作:
S110、获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求URL;所述请求URL包括请求元素。
其中,请求原始数据可以是客户端向服务器发送的请求数据,可以包括但不限于请求URL(访问请求的URL)、客户端的IP数据、客户端的浏览器类型数据、访问页面的加载时间数据、访问页面的大小数据、访问成功与否的数据、访问页面的时间数据和访问量数据等。其中,请求URL,也即请求地址。请求元素可以是请求URL中的关键词,例如,可以将请求URL中的链接说明文字部分“转账”作为一种请求元素。
在本发明实施例中,对关键业务场景的体验数据进行处理时,首先需要获取客户端上报的包括请求URL的请求原始数据,以判断请求URL包括的请求元素是否为关键业务对应的一种关键元素。其中,关键业务场景以及对应的关键业务可以根据具体的应用类型确定。示例性的,假设应用类型为在线商城,则关键业务场景可以是在线购物,关键业务可以包括商品检索、下单或付款等类型。
需要说明的是,在获取到客户端上报的请求原始数据之后,也还可以首先根据现有的维度对请求原始数据对应的体验数据(也即用户体验数据)进行数据分类和汇总统计,从而得到各种维度类型的体验数据。其中,维度可以包括但不限于域名、地域、运营商、服务器、用户组及客户端等。由此可见,现有的用于对体验数据进行数据分类的维度属于技术指标类型。
在本发明的一个可选实施例中,在获取客户端上报的请求原始数据之前,还可以包括:通过预设匹配模式对关键元素创建所述关键元素匹配规则列表;其中,所述预设匹配模式包括完全匹配模式、通用符匹配模式、关键词包含匹配模式或正则表达式匹配模式中的至少一种。
其中,预设匹配模式可以是多种类型的匹配模式。图1b是本发明实施例一提供的一种对关键元素设置匹配模式的页面效果示意图,如图1b所示,匹配模式可以包括但不限于完全匹配模式、通用符匹配模式、关键词包含匹配模式(即图1b所示的包含模式)或正则表达式匹配模式等类型。关键元素匹配规则列表可以是针对多种关键元素制定的匹配规则所形成的列表,其中,每个关键元素可以对应一条或多条匹配规则。关键元素可以是根据业务指标预先定义的关键业务元素。示例性的,“转账”、“登录”、“下单”或“查询”等均可以作为关键元素。
相应的,为了完成对关键业务对应的体验数据的统计处理,在获取客户端上报的请求原始数据之前,可以首先通过预设匹配模式对关键元素创建关键元素匹配规则列表,以对请求URL中的请求元素进行匹配。
S120、将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素。
其中,目标关键元素可以是一种或多种关键元素。当请求元素与关键元素匹配规则列表中一条或多条关键元素匹配规则相匹配时,则可以确定请求原始为目标关键元素。
在本发明实施例中,当获取到客户端上报的请求原始数据后,可以对请求原始数据中的请求URL与关键元素匹配规则列表进行匹配,以判断请求URL中的请求元素是否为目标关键元素。
在本发明的一个可选实施例中,所述关键元素匹配规则列表包括至少一条关键元素匹配规则;相应的,将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素,可以包括:获取所述关键元素匹配规则列表中的第一条关键元素匹配规则作为当前关键元素匹配规则;将所述请求URL与所述当前关键元素匹配规则进行匹配;如果确定匹配成功,则确定所述请求URL的请求元素为所述目标关键元素;否则,按照所述关键元素匹配规则列表的匹配顺序获取下一条关键元素匹配规则作为所述当前关键元素匹配规则,并返回执行将所述请求URL与所述当前关键元素匹配规则进行匹配的操作,直至对所述关键元素匹配规则列表中的所有关键元素匹配规则匹配完毕。
在本发明实施例中,如果关键元素匹配规则列表包括多条关键元素匹配规则,则在对请求URL与关键元素匹配规则列表进行匹配时,可以按照顺序逐一对请求URL与关键元素匹配规则列表中的各项关键元素匹配规则逐一进行字符匹配。一旦匹配成功,则可以确定请求URL的请求元素为目标关键元素。此时,可以继续按照顺序对请求URL与尚未匹配的关键元素匹配规则进行匹配,直至所有关键元素匹配规则匹配完毕,以获取全部的匹配结果。或者,也还可以在匹配成功后停止后续的匹配操作,本发明实施例对此并不进行限制。
在本发明的一个可选实施例中,将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素,可以包括:如果所述请求URL与各所述关键元素匹配规则均匹配失败,则确定所述请求URL的请求元素不是所述目标关键元素。
相应的,如果请求URL与各关键元素匹配规则均匹配失败,则可以确定请求URL的请求元素不是目标关键元素。
S130、如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
其中,预设统计规则可以根据实际需求设定,例如,按照一定的统计标准、统计指标以及统计方法等进行统计,本发明实施例并不对预设统计规则的具体内容进行限定。
相应的,如果确定请求URL的请求元素为目标关键元素,则可以对目标关键元素对应的体验数据按照预设统计规则进行统计处理。图1c是本发明实施例一提供的一种对目标关键元素对应的体验数据进行统计的效果示意图。在一个具体的例子中,如图1c所示,可以根据各种性能指标,如请求次数、平均响应时间、HTTP错误率及慢速比等性能指标对体验数据进行统计处理。
由此可见,本发明实施例中的体验数据处理方式能够将某些关键业务体验数据按照业务指标单独进行统计处理,从而实现对应用性能体验监控机制的优化。
在本发明的一个可选实施例中,所述目标关键元素可以为单一请求URL的请求元素或同一类型的多个请求URL的多个请求元素。
在本发明实施例中,可选的,关键元素匹配规则列表所涉及到的关键元素可以是单一请求URL的请求元素,此时对目标关键元素对应的体验数据按照预设统计规则进行统计处理时,精度更高,且统计结果更细化。关键元素匹配规则列表所涉及到的关键元素还可以是同一类型的多个请求URL的多个请求元素,由于请求URL属于同一类型,则各请求URL对应的请求元素的特征也是相似的。此时对目标关键元素对应的体验数据按照预设统计规则进行统计处理时,可以实现对某一类型体验数据的统计分析和处理,统计结果覆盖的业务范围更宽泛。如果关键元素为同一类型的多个请求URL的多个请求元素,在进行匹配时,可能出现多条匹配规则匹配成功的情况,此时,目标关键元素可以根据匹配顺序或匹配模式确定。例如,可以将第一个匹配成功的关键元素匹配规则对应的关键元素作为目标关键元素,也可以将匹配模式为完全匹配模式的关键元素匹配规则对应的关键元素作为目标关键元素。
在本发明的一个可选实施例中,在通过预设匹配模式对关键元素创建所述关键元素匹配规则列表之后,还可以包括:对所述关键元素匹配规则列表中设定数量的关键元素匹配规则对应的关键元素设置报警规则。
其中,设定数量可是根据实际需求设定,本发明实施例并不对设定数量的具体数值进行限定。
为了进一步对关键业务的体验数据进行严格监控,在本发明实施例中,还可以对键元素匹配规则列表中设定数量的关键元素匹配规则对应的关键元素设置报警规则。图1d是本发明实施例一提供第一种对关键元素设备报警规则的页面效果示意图,如图1d所示,可以选择对全部关键元素设置报警规则,也可以自定义选择关键元素设置报警规则。示例性的,报警规则可以是:请求次数超过20次,或平均响应时间超过1秒等,具体可以根据关键业务的应用需求设定,本发明实施例并不对报警规则的具体规则内容进行限定。
在本发明的一个可选实施例中,所述方法还可以包括:如果确定所述目标关键元素对应设置所述报警规则,且所述目标关键元素对应的体验数据满足所述报警规则的触发条件,则对所述目标关键元素进行报警处理。
相应的,在对目标关键元素对应的体验数据进行统计处理时,如果确定目标关键元素对应设置了报警规则,例如,报警规则设置为请求次数超过20次,且目标关键元素的体验数据满足报警规则的触发条件,例如,客户端的请求次数为25次,则可以对目标关键元素进行报警处理。其中,报警处理方式可以为短信、邮箱及推送信息等提醒方式,具体可以根据实际需求设定,本发明实施例并不对报警处理的具体方法进行限定。
本发明实施例通过获取客户端上报的包括请求URL的请求原始数据,将请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定请求URL的请求元素为目标关键元素时,对目标关键元素对应的体验数据按照预设统计规则进行统计处理,解决现有体验数据处理方法存在的难以满足关键业务场景的数据查找需求及关键业务场景问题易被覆盖等问题,以实现对应用性能体验监控机制的优化。
实施例二
图2是本发明实施例二提供的一种体验数据处理装置的示意图,如图2所示,所述装置包括:请求原始数据获取模块210、目标关键元素确定模块220以及体验数据统计处理模块230,其中:
请求原始数据获取模块210,用于获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求统一资源定位符URL;所述请求URL包括请求元素;
目标关键元素确定模块220,用于将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;
体验数据统计处理模块230,用于如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
本发明实施例通过获取客户端上报的包括请求URL的请求原始数据,将请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定请求URL的请求元素为目标关键元素时,对目标关键元素对应的体验数据按照预设统计规则进行统计处理,解决现有体验数据处理方法存在的难以满足关键业务场景的数据查找需求及关键业务场景问题易被覆盖等问题,以实现对应用性能体验监控机制的优化。
可选的,所述装置还包括:关键元素匹配规则列表创建模块,用于通过预设匹配模式对关键元素创建所述关键元素匹配规则列表;其中,所述预设匹配模式包括完全匹配模式、通用符匹配模式、关键词包含匹配模式或正则表达式匹配模式中的至少一种。
可选的,所述关键元素匹配规则列表包括至少一条关键元素匹配规则;目标关键元素确定模块220,具体用于:获取所述关键元素匹配规则列表中的第一条关键元素匹配规则作为当前关键元素匹配规则;将所述请求URL与所述当前关键元素匹配规则进行匹配;如果确定匹配成功,则确定所述请求URL的请求元素为所述目标关键元素;否则,按照所述关键元素匹配规则列表的匹配顺序获取下一条关键元素匹配规则作为所述当前关键元素匹配规则,并返回执行将所述请求URL与所述当前关键元素匹配规则进行匹配的操作,直至对所述关键元素匹配规则列表中的所有关键元素匹配规则匹配完毕。
可选的,目标关键元素确定模块220,具体用于:如果所述请求URL与各所述关键元素匹配规则均匹配失败,则确定所述请求URL的请求元素不是所述目标关键元素。
可选的,所述装置还包括:报警规则设置模块,用于对所述关键元素匹配规则列表中设定数量的关键元素匹配规则对应的关键元素设置报警规则。
可选的,所述装置还包括:报警处理模块,用于如果确定所述目标关键元素对应设置所述报警规则,且所述目标关键元素对应的体验数据满足所述设定报警规则的触发条件,则对所述目标关键元素进行报警处理。
可选的,所述目标关键元素为单一请求URL的请求元素或同一类型的多个请求URL的多个请求元素。
上述体验数据处理装置可执行本发明任意实施例所提供的体验数据处理方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的体验数据处理方法。
实施例三
图3为本发明实施例三提供的一种计算机设备的结构示意图。图3示出了适于用来实现本发明实施方式的计算机设备312的框图。图3显示的计算机设备312仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图3所示,计算机设备312以通用计算设备的形式表现。计算机设备312的组件可以包括但不限于:一个或者多个处理器316,存储装置328,连接不同系统组件(包括存储装置328和处理器316)的总线318。
总线318表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(Industry StandardArchitecture,ISA)总线,微通道体系结构(Micro Channel Architecture,MCA)总线,增强型ISA总线、视频电子标准协会(Video Electronics Standards Association,VESA)局域总线以及外围组件互连(Peripheral Component Interconnect,PCI)总线。
计算机设备312典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备312访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
存储装置328可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(Random Access Memory,RAM)330和/或高速缓存存储器332。计算机设备312可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统334可以用于读写不可移动的、非易失性磁介质(图3未显示,通常称为“硬盘驱动器”)。尽管图3中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如只读光盘(Compact Disc-Read Only Memory,CD-ROM)、数字视盘(Digital Video Disc-Read Only Memory,DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线318相连。存储装置328可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块326的程序336,可以存储在例如存储装置328中,这样的程序模块326包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块326通常执行本发明所描述的实施例中的功能和/或方法。
计算机设备312也可以与一个或多个外部设备314(例如键盘、指向设备、摄像头、显示器324等)通信,还可与一个或者多个使得用户能与该计算机设备312交互的设备通信,和/或与使得该计算机设备312能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(Input/Output,I/O)接口322进行。并且,计算机设备312还可以通过网络适配器320与一个或者多个网络(例如局域网(Local Area Network,LAN),广域网Wide Area Network,WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器320通过总线318与计算机设备312的其它模块通信。应当明白,尽管图中未示出,可以结合计算机设备312使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、磁盘阵列(Redundant Arraysof Independent Disks,RAID)系统、磁带驱动器以及数据备份存储系统等。
处理器316通过运行存储在存储装置328中的程序,从而执行各种功能应用以及数据处理,例如实现本发明上述实施例所提供的体验数据处理方法。
也即,所述处理单元执行所述程序时实现:获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求URL;所述请求URL包括请求元素;将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
实施例四
本发明实施例四还提供一种存储计算机程序的计算机存储介质,所述计算机程序在由计算机处理器执行时用于执行本发明上述实施例任一所述的体验数据处理方法:获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求URL;所述请求URL包括请求元素;将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(Read Only Memory,ROM)、可擦式可编程只读存储器((Erasable Programmable ReadOnly Memory,EPROM)或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、射频(Radio Frequency,RF)等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种体验数据处理方法,其特征在于,包括:
获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求统一资源定位符URL;所述请求URL包括请求元素;
将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;
如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
2.根据权利要求1所述的方法,其特征在于,在获取客户端上报的请求原始数据之前,还包括:
通过预设匹配模式对关键元素创建所述关键元素匹配规则列表;
其中,所述预设匹配模式包括完全匹配模式、通用符匹配模式、关键词包含匹配模式或正则表达式匹配模式中的至少一种。
3.根据权利要求1所述的方法,其特征在于,所述关键元素匹配规则列表包括至少一条关键元素匹配规则;
将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素,包括:
获取所述关键元素匹配规则列表中的第一条关键元素匹配规则作为当前关键元素匹配规则;
将所述请求URL与所述当前关键元素匹配规则进行匹配;
如果确定匹配成功,则确定所述请求URL的请求元素为所述目标关键元素;否则,按照所述关键元素匹配规则列表的匹配顺序获取下一条关键元素匹配规则作为所述当前关键元素匹配规则,并返回执行将所述请求URL与所述当前关键元素匹配规则进行匹配的操作,直至对所述关键元素匹配规则列表中的所有关键元素匹配规则匹配完毕。
4.根据权利要求3所述的方法,其特征在于,将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素,包括:
如果所述请求URL与各所述关键元素匹配规则均匹配失败,则确定所述请求URL的请求元素不是所述目标关键元素。
5.根据权利要求2所述的方法,其特征在于,在通过预设匹配模式对关键元素创建所述关键元素匹配规则列表之后,还包括:
对所述关键元素匹配规则列表中设定数量的关键元素匹配规则对应的关键元素设置报警规则。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
如果确定所述目标关键元素对应设置所述报警规则,且所述目标关键元素对应的体验数据满足所述报警规则的触发条件,则对所述目标关键元素进行报警处理。
7.根据权利要求1-6任一所述的方法,其特征在于,所述目标关键元素为单一请求URL的请求元素或同一类型的多个请求URL的多个请求元素。
8.一种体验数据处理装置,其特征在于,包括:
请求原始数据获取模块,用于获取客户端上报的请求原始数据;其中,所述请求原始数据包括请求统一资源定位符URL;所述请求URL包括请求元素;
目标关键元素确定模块,用于将所述请求URL与关键元素匹配规则列表进行匹配,并根据匹配结果确定所述请求URL的请求元素是否为目标关键元素;
体验数据统计处理模块,用于如果确定所述请求URL的请求元素为所述目标关键元素,则对所述目标关键元素对应的体验数据按照预设统计规则进行统计处理。
9.一种计算机设备,其特征在于,所述计算机设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的体验数据处理方法。
10.一种计算机存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的体验数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911127314.7A CN111240948A (zh) | 2019-11-18 | 2019-11-18 | 一种体验数据处理方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911127314.7A CN111240948A (zh) | 2019-11-18 | 2019-11-18 | 一种体验数据处理方法、装置、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111240948A true CN111240948A (zh) | 2020-06-05 |
Family
ID=70879351
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911127314.7A Pending CN111240948A (zh) | 2019-11-18 | 2019-11-18 | 一种体验数据处理方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111240948A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191891A (zh) * | 2021-05-27 | 2021-07-30 | 中国工商银行股份有限公司 | 数据处理方法、装置及系统 |
CN114048116A (zh) * | 2021-11-11 | 2022-02-15 | 杭州东方通信软件技术有限公司 | 一种业务系统的体验度评估方法及装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1791022A (zh) * | 2005-12-26 | 2006-06-21 | 阿里巴巴公司 | 一种日志分析方法和系统 |
CN101651574A (zh) * | 2008-08-12 | 2010-02-17 | 中国移动通信集团甘肃有限公司 | 确定业务信息并利用该业务信息进行报警的方法和设备 |
CN107766224A (zh) * | 2017-11-07 | 2018-03-06 | 百度在线网络技术(北京)有限公司 | 测试方法和测试装置 |
CN109302383A (zh) * | 2018-08-31 | 2019-02-01 | 平安科技(深圳)有限公司 | 一种url监控方法及装置 |
CN109756393A (zh) * | 2018-12-27 | 2019-05-14 | 网易无尾熊(杭州)科技有限公司 | 信息处理方法、系统、介质和计算设备 |
CN109784503A (zh) * | 2018-12-13 | 2019-05-21 | 平安普惠企业管理有限公司 | 业务运维方法、装置、设备及可读存储介质 |
CN110019077A (zh) * | 2018-08-21 | 2019-07-16 | 平安科技(深圳)有限公司 | 日志查询方法、装置、设备及计算机可读存储介质 |
-
2019
- 2019-11-18 CN CN201911127314.7A patent/CN111240948A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1791022A (zh) * | 2005-12-26 | 2006-06-21 | 阿里巴巴公司 | 一种日志分析方法和系统 |
CN101651574A (zh) * | 2008-08-12 | 2010-02-17 | 中国移动通信集团甘肃有限公司 | 确定业务信息并利用该业务信息进行报警的方法和设备 |
CN107766224A (zh) * | 2017-11-07 | 2018-03-06 | 百度在线网络技术(北京)有限公司 | 测试方法和测试装置 |
CN110019077A (zh) * | 2018-08-21 | 2019-07-16 | 平安科技(深圳)有限公司 | 日志查询方法、装置、设备及计算机可读存储介质 |
CN109302383A (zh) * | 2018-08-31 | 2019-02-01 | 平安科技(深圳)有限公司 | 一种url监控方法及装置 |
CN109784503A (zh) * | 2018-12-13 | 2019-05-21 | 平安普惠企业管理有限公司 | 业务运维方法、装置、设备及可读存储介质 |
CN109756393A (zh) * | 2018-12-27 | 2019-05-14 | 网易无尾熊(杭州)科技有限公司 | 信息处理方法、系统、介质和计算设备 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191891A (zh) * | 2021-05-27 | 2021-07-30 | 中国工商银行股份有限公司 | 数据处理方法、装置及系统 |
CN114048116A (zh) * | 2021-11-11 | 2022-02-15 | 杭州东方通信软件技术有限公司 | 一种业务系统的体验度评估方法及装置 |
CN114048116B (zh) * | 2021-11-11 | 2024-05-10 | 杭州东方通信软件技术有限公司 | 一种业务系统的体验度评估方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6517263B2 (ja) | 検索結果へのアクセスを改良するシステム、方法及び記憶媒体 | |
CN107679211B (zh) | 用于推送信息的方法和装置 | |
US10733079B2 (en) | Systems and methods for end-to-end testing of applications using dynamically simulated data | |
US10362086B2 (en) | Method and system for automating submission of issue reports | |
US20180048673A1 (en) | Techniques for determining threat intelligence for network infrastructure analysis | |
US11012339B2 (en) | Web site reachability management for content browsing | |
CN110262807B (zh) | 集群创建进度日志采集系统、方法和装置 | |
US11960354B2 (en) | Proactive learning of network software problems | |
CN110928853A (zh) | 一种标识日志的方法和装置 | |
CN110929128A (zh) | 一种数据爬取方法、装置、设备和介质 | |
CN107766224B (zh) | 测试方法和测试装置 | |
CN110866031B (zh) | 数据库访问路径的优化方法、装置、计算设备以及介质 | |
CN111240948A (zh) | 一种体验数据处理方法、装置、计算机设备及存储介质 | |
CN112800410A (zh) | 一种多产品登录管理方法、装置、设备及存储介质 | |
CN110569424A (zh) | 一种信息推介的方法和装置 | |
WO2013143407A1 (en) | Data processing, data collection | |
CN114629929A (zh) | 一种日志记录方法、装置及系统 | |
CN108011936B (zh) | 用于推送信息的方法和装置 | |
CN111581098A (zh) | 接口数据转移存储的方法、装置、服务器及存储介质 | |
US11747966B2 (en) | Detecting paste and other types of user activities in computer environment | |
CN110875856B (zh) | 激活数据异常检测与分析的方法和装置 | |
CN113076254A (zh) | 一种测试用例集的生成方法和装置 | |
CN111651356A (zh) | 一种应用程序测试方法、装置及系统 | |
CN112783754A (zh) | 一种对页面进行测试的方法和装置 | |
CN111460273A (zh) | 信息推送方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200605 |
|
RJ01 | Rejection of invention patent application after publication |