CN111459811A - 埋点数据校验方法和装置 - Google Patents

埋点数据校验方法和装置 Download PDF

Info

Publication number
CN111459811A
CN111459811A CN202010225466.7A CN202010225466A CN111459811A CN 111459811 A CN111459811 A CN 111459811A CN 202010225466 A CN202010225466 A CN 202010225466A CN 111459811 A CN111459811 A CN 111459811A
Authority
CN
China
Prior art keywords
point data
buried point
verified
scene
actual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010225466.7A
Other languages
English (en)
Other versions
CN111459811B (zh
Inventor
曾亮
梁冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Technology Co Ltd
Original Assignee
Guangzhou Huya Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Technology Co Ltd filed Critical Guangzhou Huya Technology Co Ltd
Priority to CN202010225466.7A priority Critical patent/CN111459811B/zh
Publication of CN111459811A publication Critical patent/CN111459811A/zh
Application granted granted Critical
Publication of CN111459811B publication Critical patent/CN111459811B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/368Test management for test version control, e.g. updating test cases to a new software version
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Stored Programmes (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请涉及埋点数据验证技术领域,其涉及一种埋点数据校验方法和装置。其中一种埋点数据校验方法包括以下步骤:在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;接收客户端上报的在回放过程中所产生的实际埋点数据;利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。本申请所提供的方案能够确保该实际埋点数据的准确性。

Description

埋点数据校验方法和装置
技术领域
本申请涉及埋点数据验证技术领域,具体而言,本申请涉及一种埋点数据校验方法和装置。
背景技术
为了研究用户行为,使得应用软件能够更好的服务于用户,通常会在软件中设置一系列的埋点,用户使用应用软件处于不同场景下会上报不同的埋点数据,如登录成功、登录失败、不同方式进入直播间等场景都会上报不同的埋点数据,客户端会将埋点数据回传服务器。由于应用版本的快速迭代、代码更改、需求更新,使得上报的埋点数据可能出现不准确,因此需要对应用上报的埋点数据进行校验。
目前已知埋点数据验证方式:
(1)采用传统的人工验证——由于埋点数据众多、场景复杂,存在人工校验效率低、容易出错的问题。
(2)服务器校验,即在埋点数据存储服务器中校验已上报埋点数据的规范性。由于服务器只能校验客户端上报数据的规范性,但无法验证不同场景上报的埋点数据是否准确。
现有的埋点数据验证方法存在效率低、可适用的范围小的问题。
发明内容
基于目前的埋点数据验证方法存在效率低、可使用的范围小的问题,特提供本申请的埋点数据校验方法,特提供以下技术方案。
第一方面,本申请提供一种埋点数据校验方法,其包括以下步骤:
在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;
向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;
接收客户端上报的在回放过程中所产生的实际埋点数据;
利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
在其中一个实施例中,所述埋点数据校验方法还包括:
接收客户端上传的轨迹文件;其中,所述轨迹文件为录制触发待验证场景所需要途径的操作轨迹所生成;
利用客户端上传的触发所述待验证场景所产生的埋点数据,标记定义所述埋点数据的校验规则;
将所述轨迹文件与所述标记定义的校验规则组合成所述用例。
在其中一个实施例中,所述利用客户端上传的触发所述待验证场景所产生的埋点数据,标记定义所述埋点数据的校验规则的步骤,包括:
提取所述待验证场景的上报埋点数据中的键值,形成键值对;
对所述键值对进行标记,将所述键值对与待验证场景进行匹配,得到对应的校验规则。
在其中一个实施例中,所述提取所述待验证场景的上报埋点数据中的键值,形成键值对的步骤,包括:
根据所述待验证场景与所述键值的相关性,从所述上报埋点数据中提取对应的键值,形成至少一个键值对。
在其中一个实施例中,所述利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性的步骤,包括:
利用所述校验规则的标记的埋点数据与实际埋点数据进行匹配;
若匹配成功,则应用软件的埋点数据准确性。
第二方面,本申请还提供一种埋点数据校验方法,其包括以下步骤:
在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;
运行所述应用软件,并在所述应用软件上回放所述用例;
获取回放过程中产生的实际埋点数据;
将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
在其中一个实施例中,所述埋点数据校验方法,还包括:
启动已验证版本的应用软件,在待验证场景进行触发操作,记录触发待验证场景所需要途径的操作轨迹,生成轨迹文件,将所述轨迹文件发送至服务器,以生成基于已验证版本生成的用例。
在其中一个实施例中,所述轨迹文件是按照在待验证场景中操作轨迹,将若干个轨迹节点信息所组合而成;
其中,所述节点信息,是在待验证场景中获取用户点击的对应控件的信息,并将所述控件与其特定的属性信息所形成的。
在其中一个实施例中,在待验证场景进行触发操作时,获取埋点数据;
对所述埋点数据转换为结构化数据,得到上报埋点数据;
将所述上报埋点数据发送至服务器,以标记定义的待验证场景埋点数据的校验规则。
在其中一个实施例中,所述对所述埋点数据转换为结构化数据的步骤,包括:
按照预设格式,对所述埋点数据按照预设格式进行转换。
在其中一个实施例中,所述对所述埋点数据转换为结构化数据的步骤,包括:
根据所述校验规则所需求数据,对所述埋点数据进行清洗。
第三方面,本申请还提供一种埋点数据校验装置,其包括:
第一获取模块,用于在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;
下发模块,用于向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;
第一接收模块,用于接收客户端上报的在回放过程中所产生的实际埋点数据;
第一校验模块,用于利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
第四方面,本申请还提供一种埋点数据校验装置,其包括:
第二接收模块,用于在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;
回放模块,用于运行所述应用软件,并在所述应用软件上回放所述用例;
第二获取模块,用于获取回放过程中产生的实际埋点数据;
第二校验模块,用于将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
第五方面,本申请还提供一种计算机设备,其包括:
一个或多个处理器;
存储器;
一个或多个计算机程序,其中所述一个或多个计算机程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个计算机程序配置用于执行根据权利要求第一方面或第二方面任一项实施例所提供的埋点数据校验方法。
第六方面,本申请还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现第一方面或第二方面任一项实施例所述的埋点数据校验方法。
上述的埋点数据校验方案具备如下优点:
第一方面所提供的埋点数据校验方法,服务器通过在已验证版本运行环境中获取例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到的用例,在待测版本中进行回放所产生的实际埋点数据并与该校验规则进行校验,从而能够灵活地对在不同版本的复杂的实际埋点数据进行明确的校验,确保该实际埋点数据的准确性,快速并准确地得到校验结果,有效对该应用软件进行校验。该方案也能够使得服务器可以应对降低了对埋点数据众多、待验证场景复杂的回放校验的难度,从而扩大该方案的适用范围。
第二方面所提供的埋点数据校验方法,客户端在应用软件的待测版本的环境中,利用其在已验证版本所获取的埋点数据所形成的操作轨迹与校验规则所形成的用例,进行回放校验,产生实际埋点数据,并向服务器上报,以使得所述服务端利用所述校验规则对所述实际上报埋点数据进行校验。本实施例所提供的埋点数据校验方法,能够灵活根据在不同版本的复杂的实际埋点数据进行明确的校验,确保该实际埋点数据的准确性,快速并准确地得到校验结果,有效对该应用软件进行校验。该方案也能够使得服务器可以应对降低了对埋点数据众多、待验证场景复杂的回放校验的难度,从而扩大该方案的适用范围。
本申请附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本申请一实施例所提供的埋点数据校验方法的应用场景图;
图2为本申请一个实施例所提供的埋点数据校验方法的流程示意图;
图3为本申请另一个实施例所提供的埋点数据校验方法的流程示意图;
图4为本申请又一个实施例所提供的埋点数据校验方法的流程示意图;
图5为本申请一个实施例的埋点数据校验装置的结构示意图;
图6为本申请另一个实施例的埋点数据校验装置的结构示意图;
图7为本申请一个实施例的服务器的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本申请,而不能解释为对本申请的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
图1为本申请一实施例所提供的埋点数据校验方法的应用场景图,该埋点数据校验方法是在检测环境下实现的。本申请的技术方案是通过客户端110和服务器120之间对待验证验证场景的埋点数据的交互、处理和校验实现的。所述用户为测试人员。具体地,本申请的技术方案通过用户使用已验证版本的应用软件,待验证场景下获取埋点数据,在服务器120与校验规则组合后生成用例。当用户在客户端110使用该应用软件的待测版本时,利用该用例获得实际埋点数据并上传至服务器120,服务器120利用校验规则进行校验。
参照图2,图2为本申请一个实施例所提供的埋点数据校验方法的流程示意图。本申请所提供的埋点数据校验方法,包括以下步骤:
S210、在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到。
在本申请的该实施例中,服务器利用已验证版本的应用软件在待验证版本生成的用例。而该用例是客户端在已验证版本的运行环境中,根据在待验证场景中获取的埋点数据录制触发待验证场景所需要途径的操作轨迹,并将该操作轨迹与根据所述埋点数据预定义的校验规则进行组合所得到的。
S220、向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例。
通过步骤S210获取所生成的用例后,在对待测版本进行回放校验时,服务器将在运行已验证版本所形成的用例向客户端下发。当客户端接收到服务器所下发的用例时,可触发所述应用软件在待测版本的环境下运行,对所述用例进行回放。
S230、接收客户端上报的在回放过程中所产生的实际埋点数据。
在服务器对回放的实际埋点数据进行校验之前,接收客户端在在待测版本的环境下运行所述用例时所产生的实际埋点数据。
S240、利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
服务器接收到所述实际埋点数据后,利用标记定义待验证场景埋点数据的校验规则对该应用软件的埋点数据的准确性进行校验。
以应用软件登录作为待验证场景为例进行说明。获取用户在客户端对应用软件的启动操作,然后通过客户端界面的控件输入相关登录信息并向应用软件发出登录指令,根据客户端对登录指令的登录信息的验证,接收登录成功或失败的结果。上述的过程是用户在登录的待验证场景的操作轨迹。所述校验规则是根据待验证场景,获取所关注的值,并建立该待验证场景与所关注的值的对应关系。而该用例为上述的校验规则与操作轨迹组合得到的,即在对该待验证场景中,利用该校验规则在操作轨迹中获取所关注的值,建立对应该待验证场景与所关注的值的对应关系,如在应用软件的登录失败的待验证场景中,所关注的值是登录失败的原因的值,若登录失败的原因为:密码错误。该用例包括根据登录失败的待验证场景,建立与登录失败原因为密码错误的对应关系。
当使用应用软件的待测版本所产生的实际埋点数据进行校验时,获取所述预存的基于已验证版本生成的用例则是能够确保待测版本对待验证场景所关注的埋点数据进行上报。
当服务器向客户端下发所述用例并回放时,服务器接收客户端利用该用例进行回放后所上报的实际埋点数据进行校验。该校验的方式是在实际埋点数据中,是否包含在待校验场景所关注的值。如果包含,则实际埋点数据是正确的;否则,不正确。
在上述待测版本对实际埋点数据进行校验之前,还包括:
S1、接收客户端上传的轨迹文件;其中,所述轨迹文件为录制触发待验证场景所需要途径的操作轨迹所生成;
S2、利用客户端上传的触发所述待验证场景所产生的埋点数据,标记定义所述埋点数据的校验规则;
S3、将所述轨迹文件与所述标记定义的校验规则组合成所述用例。
在客户端完成已验证版本的运行时,根据用户触发待验证场景所需要途径的操作轨迹录制成轨迹文件。服务器接收客户端所上报的轨迹文件。同时,也接收客户端根据所述操作轨迹所触发的待验证场景所获得的埋点数据。所述埋点数据包括触发待验证场景的用户的操作轨迹和对应产生的数据。还是以应用软件登录失败作为待验证场景,对应的埋点数据包括用户登录成功与否登录方式、登录时间、登录设备序列号,以及在操作规则执行的过程中所产生的机器数据,如人机交互的指令数据、登录时从客户端和系统所获取的数据。
根据待验证场景中,在埋点数据中提取需要关注的值,并标记。根据对所关注的值的标记,对该待验证场景的埋点数据定义校验规则。也就是,在该待验证场景中,会存在已标记的埋点数据。否则,则不符合该待验证场景对埋点数据的要求。将该以进行标记的校验规则与轨迹文件进行组合后,可以得到根据校验规则对埋点数据进行标记的轨迹文件。
对于步骤S2,可以进一步包括:
S21、提取所述待验证场景的上报埋点数据中的键值,形成键值对;
S22、对所述键值对进行标记,将所述键值对与待验证场景进行匹配,得到对应的校验规则。
服务器从客户端接收运行已验证版本时所上传的触发所述待验证场景所产生的埋点数据,根据待验证场景得到所需要关注的值,从该埋点数据中提取对应的键值,形成对应的键值对。
如在登录失败的待验证场景,服务器从客户端得到的埋点数据得到的键值为“密码错误”,即登录失败的原因是“密码错误”,根据生成对应的键值对为:登录失败的原因-密码错误。如果在登录失败的待验证场景,出现了几个键值,如“密码错误”、“网络连接失败”或者是可能导致登录失败的其他原因对应的键值,则可对应生成多个有关登录失败的键值对。
在获取所述键值,形成键值对的过程中,根据待验证场景与键值的相关性,从上报的埋点数据提取对应的键值,形成至少一个键值对。
沿用上述的登录失败的待验证场景为例,如在埋点数据出现“密码错误”的键值时,则该相关度较高,该键值与待验证场景为强相关。根据该相关度,可以直接形成对应的键值对。
若在埋点数据出现“字符串识别错误”的键值,可能会造成登录失败的待验证场景的出现,那么可就该键值与待验证场景建立模糊匹配,得到对应的键值对。
无论是强相关还是模糊匹配所得到的键值对的数量,可以根据对应待验证场景的操作轨迹的复杂度参考设定,所设定的该键值对的数量一个,或多个均可。
在上述基础上,步骤S240还可进一步包括:
利用所述校验规则的标记的埋点数据与实际埋点数据进行匹配。若匹配成功,则应用软件的实际埋点数据准确性。
利用针对待验证场景设定的校验规则所标记定义的埋点数据,与在待测版本的环境下运行该应用软件所产生的实际埋点数据进行匹配。具体可以是根据上述根据同一待验证场景的键值对与实际埋点数据进行匹配。如果匹配成功,也就是在实际埋点数据包含对应的键值对,则意味着匹配成功,从而可以确保应用软件的实际埋点数据的准确性,由此也能对该应用软件进行有效校验。
在本申请的上述实施例中,服务器通过在已验证版本运行环境中获取例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到的用例,在待测版本中进行回放所产生的实际埋点数据并与该校验规则进行校验,从而能够灵活地对在不同版本的复杂的实际埋点数据进行明确的校验,确保该实际埋点数据的准确性,快速并准确地得到校验结果,有效对该应用软件进行校验。该方案也能够使得服务器可以应对降低了对埋点数据众多、待验证场景复杂的回放校验的难度,从而扩大该方案的适用范围。
本申请还提供另一埋点数据校验方法。参照图3,图3为本申请另一个实施例所提供的埋点数据校验方法的流程示意图。该方法与图2所示的方法的区别为执行主体不同。图2的实施例的执行主体为服务器,而图3的实施例的执行主体为客户端。
图3所示的埋点数据校验方法,包括以下步骤:
S310、在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到。
在本实施例中,所述操作轨迹是应用软件在已验证版本的环境中,触发待验证场景的操作轨迹。在已验证版本运作过程中,客户端记录了该操作轨迹,并将该操作轨迹生成了对应的轨迹文件。客户端将该轨迹文件发送至服务器,以备后续生成对应于待验证场景的用例。
上述在已验证版本的环境下所生成的轨迹文件,是由若干个轨迹节点信息所组合而成的。在用户通过客户端使用该应用软件时,需要在客户端点击每个功能键或控件向客户端发送指令,客户端根据该指令获取与该而控件对应的特定的属性信息,从而进行对应操作,并将该操作的结果反映至客户端的界面上。所述节点信息,是客户端根据用户在待验证场景中获取用户所点击的控件的信息,并将该控件的信息与其对应的属性信息所形成得到的。例如,在登录应用软件的这一待验证场景中,用户在客户端点击该应用软件的图标实现启动,在客户端的界面转换成该应用软件的首页。在该首页中显示了输入登录账户和登录密码等信息的控件,用户在客户端界面上输入对应的数据后,点击“登录”的控件,向客户端发出登录的指令。
在这个过程中,客户端获取了用户点击“登录”的控件的这一操作信息,根据该操作信息在客户端获取该“登录”的控件对应的属性是向客户端发出登录该应用软件的指令,而该操作信息与该“登录”的控件对应的属性形成了用户在客户端上点击“登录”的控件的这一操作的节点信息。而所述轨迹文件则是记录了触发该待验证场景的一系列操作步骤所所有的节点信息。
在该实施例中,客户端在运行应用软件的待测版本时,接收从服务器下方的用例以便后续进行校验。
而该用例是客户端在已验证版本的运行环境中,根据在待验证场景中获取的埋点数据录制触发待验证场景所需要途径的操作轨迹,并将该操作轨迹与根据所述埋点数据预定义的校验规则进行组合所得到的。
在客户端触发待验证场景生成埋点数据,生成轨迹文件的同时,对该埋点数据转换成结构化数据,使埋点数据根据服务器可识别的预设的数据组合形式,形成对应的上报埋点数据,并上报至服务器的埋点数据。服务器在获取该上报埋点数据后,根据待验证场景所需要关注的值,对该上报埋点数据进行标记,建立对应该待验证场景与所关注的值的对应关系。得到对应的校验规则。
对于对对所述埋点数据转换为结构化数据的步骤,可以按照服务器对数据的识别要求,将埋点数据转换成预设的格式,得到对应的上报埋点数据。利用在客户端所接收的埋点数据可能字符串所组成的。服务器当前可识别的数据为json格式的数据,则将上报之前,需要将字符串转换成json格式,使得服务器可对该埋点数据进行识别。
而客户端通过在触发待验证场景所获取的埋点数据包括操作轨迹和在该操作轨迹中所产生的数据,如获取的客户端的设备序列号、每个操作步骤的执行时间等。为了能减少上报埋点数据的数据量,可根据与待验证场景的相关度对埋点数据进行筛选,去除相关度低的埋点数据。例如,对应登录的待验证场景中,与客户端的设备序列号的相关度低,则在埋点数据转换为结构化数据时,需进行对该数据进行清洗,以减少上报的数据量,从而有助于加快对埋点数据的校验的进程。
S320、运行所述应用软件,并在所述应用软件上回放所述用例。
当客户端接收到服务器所下发的用例时,可触发所述应用软件在待测版本的环境下运行,对所述用例进行回放。
S330、获取回放过程中产生的实际埋点数据。
客户端在利用所述用例在待测版本的运行环境进行回放中,产生在该待验证场景下的实际埋点数据。
S340、将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
客户端根据步骤S330得到实际埋点数据后,将其上报至服务器,使得服务器利用所述校验规则,对在待测版本所获取的实际埋点数据进行校验,从而能够灵活地对在不同版本的复杂的实际埋点数据进行明确的校验,以确保应用软件的实际埋点数据准确性。
在本申请提供的该实施例的埋点数据校验方法,客户端在应用软件的待测版本的环境中,利用其在已验证版本所获取的埋点数据所形成的操作轨迹与校验规则所形成的用例,进行回放校验,产生实际埋点数据,并向服务器上报,以使得所述服务端利用所述校验规则对所述实际上报埋点数据进行校验。本实施例所提供的埋点数据校验方法,能够灵活根据在不同版本的复杂的实际埋点数据进行明确的校验,确保该实际埋点数据的准确性,快速并准确地得到校验结果,有效对该应用软件进行校验。该方案也能够使得服务器可以应对降低了对埋点数据众多、待验证场景复杂的回放校验的难度,从而扩大该方案的适用范围。
参照图4,图4为本申请又一个实施例所提供的埋点数据校验方法的流程示意图。
根据上述本申请的所提供的埋点数据校验方法,在客户端与服务器的交互实现的过程,可参照如下步骤执行:
S410、客户端在已验证版本的环境下,触发待验证场景,获取埋点数据;
S420、根据埋点数据获取操作轨迹,根据该操作轨迹生成对应的轨迹文件;
S430、对埋点数据进行结构化转换,并发送服务器进行标记定义,生成与所述待验证场景对应的校验规则;
S440、服务器获取所述轨迹文件,与所述校验规则进行组合形成用例;
S450、客户端获取服务器下发的用例;
S460、在待测版本的环境下,利用该用例进行回放,得到产生的实际埋点数据;
S470、客户端将所述实际埋点数据上报至服务器;
S480、服务器将上报的实际埋点数据与校验规则进行校验,以确定应用软件的实际埋点数据准确性。
基于与第一方面所提供的埋点数据校验方法相同的申请构思,本申请实施例还提供了一种埋点数据校验装置,参考图5,图5是本申请一个实施例的埋点数据校验装置的结构示意图,所述埋点数据校验装置包括:
第一获取模块510,用于在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;
下发模块520,用于向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;
第一接收模块530,用于接收客户端上报的在回放过程中所产生的实际埋点数据;
第一校验模块540,用于利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
同时,基于与第二方面所提供的埋点数据校验方法相同的申请构思,本申请实施例还提供了一种埋点数据校验装置,参考图6,图6是本申请一个实施例的埋点数据校验装置的结构示意图,所述埋点数据校验装置包括:
第二接收模块610,用于在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;
回放模块620,用于运行所述应用软件,并在所述应用软件上回放所述用例;
第二获取模块630,用于获取回放过程中产生的实际埋点数据;
第二校验模块640,用于将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
请参考图7,图7为本申请一个实施例的服务器的结构示意图。如图7所示,该服务器包括通过系统总线连接的处理器710、存储介质720、存储器730和网络接口740。其中,该服务器的存储介质720存储有操作系统、数据库和计算机可读指令,数据库中可存储有控件信息序列,该计算机可读指令被处理器710执行时,可使得处理器710实现多项目负载均衡方法,处理器710能实现图5所示实施例中的一种埋点数据校验装置中的第一获取模块510、下发模块520、第一接收模块530和第一校验模块540的功能。或者,处理器710能实现图6所示实施例中的一种埋点数据校验装置中的第二接收模块610、回放模块620、第二获取模块630和第二校验模块640的功能。该服务器的处理器710用于提供计算和控制能力,支撑整个服务器的运行。该服务器的存储器730中可存储有计算机可读指令,该计算机可读指令被处理器710执行时,可使得处理器710执行任何一种埋点数据校验方法。该服务器的网络接口740用于与终端连接通信。本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的服务器的限定,具体的服务器可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,本申请提出了一种存储有计算机可读指令的存储介质,该计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行一种埋点数据校验方法的步骤:在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;接收客户端上报的在回放过程中所产生的实际埋点数据;利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。或者,执行的另一种埋点数据校验方法的步骤:在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;运行所述应用软件,并在所述应用软件上回放所述用例;获取回放过程中产生的实际埋点数据;将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
综合上述实施例可知,本申请的有益效果在于:
在本申请所提供的埋点数据校验方案,客户端利用其在已验证版本所获取的埋点数据所形成的操作轨迹,服务器在根据在在已验证版本运行环境中获取例基于预定义的待验证场景埋点数据的校验规则,与该操作轨迹形成对待验证场景对应的用例。客户端在应用软件的待测版本的环境中,接收服务器所下发的用例进行回放,得到实际埋点数据并上报至服务器,由服务器利用校验规则对所述实际埋点数据进行校验。本申请的所提供的埋点数据校验方案,能够灵活地对在不同版本的复杂的实际埋点数据进行明确的校验,确保该实际埋点数据的准确性,快速并准确地得到校验结果,有效对该应用软件进行校验。该方案也能够使得服务器可以应对降低了对埋点数据众多、待验证场景复杂的回放校验的难度,从而扩大该方案的适用范围。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本申请的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (15)

1.一种埋点数据校验方法,其特征在于,包括以下步骤:
在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;
向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;
接收客户端上报的在回放过程中所产生的实际埋点数据;
利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
2.根据权利要求1所述埋点数据校验方法,其特征在于,还包括:
接收客户端上传的轨迹文件;其中,所述轨迹文件为录制触发待验证场景所需要途径的操作轨迹所生成;
利用客户端上传的触发所述待验证场景所产生的埋点数据,标记定义所述埋点数据的校验规则;
将所述轨迹文件与所述标记定义的校验规则组合成所述用例。
3.根据权利要求2所述埋点数据校验方法,其特征在于,
所述利用客户端上传的触发所述待验证场景所产生的埋点数据,标记定义所述埋点数据的校验规则的步骤,包括:
提取所述待验证场景的上报埋点数据中的键值,形成键值对;
对所述键值对进行标记,将所述键值对与待验证场景进行匹配,得到对应的校验规则。
4.根据权利要求3所述埋点数据校验方法,其特征在于,
所述提取所述待验证场景的上报埋点数据中的键值,形成键值对的步骤,包括:
根据所述待验证场景与所述键值的相关性,从所述上报埋点数据中提取对应的键值,形成至少一个键值对。
5.根据权利要求4所述埋点数据校验方法,其特征在于,
所述利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性的步骤,包括:
利用所述校验规则的标记的埋点数据与实际埋点数据进行匹配;
若匹配成功,则应用软件的埋点数据准确性。
6.一种埋点数据校验方法,其特征在于,包括以下步骤:
在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;
运行所述应用软件,并在所述应用软件上回放所述用例;
获取回放过程中产生的实际埋点数据;
将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
7.根据权利要求6所述埋点数据校验方法,其特征在于,还包括:
启动已验证版本的应用软件,在待验证场景进行触发操作,记录触发待验证场景所需要途径的操作轨迹,生成轨迹文件,将所述轨迹文件发送至服务器,以生成基于已验证版本生成的用例。
8.根据权利要求7所述埋点数据校验方法,其特征在于,
所述轨迹文件是按照在待验证场景中操作轨迹,将若干个轨迹节点信息所组合而成;
其中,所述节点信息,是在待验证场景中获取用户点击的对应控件的信息,并将所述控件与其特定的属性信息所形成的。
9.根据权利要求6所述埋点数据校验方法,其特征在于,
在待验证场景进行触发操作时,获取埋点数据;
对所述埋点数据转换为结构化数据,得到上报埋点数据;
将所述上报埋点数据发送至服务器,以标记定义的待验证场景埋点数据的校验规则。
10.根据权利要求9所述埋点数据校验方法,其特征在于,
所述对所述埋点数据转换为结构化数据的步骤,包括:
按照预设格式,对所述埋点数据按照预设格式进行转换。
11.根据权利要求9所述埋点数据校验方法,其特征在于,
所述对所述埋点数据转换为结构化数据的步骤,包括:
根据所述校验规则所需求数据,对所述埋点数据进行清洗。
12.一种埋点数据校验装置,其特征在于,包括:
第一获取模块,用于在对待测版本的应用软件的实际埋点数据进行校验时,获取预存的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与客户端录制的触发待验证场景所需要途径的操作轨迹组合得到;
下发模块,用于向所述客户端下发所述用例,以使所述客户端启动应用软件并回放所述用例;
第一接收模块,用于接收客户端上报的在回放过程中所产生的实际埋点数据;
第一校验模块,用于利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
13.一种埋点数据校验装置,其特征在于,包括:
第二接收模块,用于在对待测版本的应用软件的实际埋点数据进行校验时,接收服务端下发的基于已验证版本生成的用例;其中,所述用例基于预定义的待验证场景埋点数据的校验规则与录制的触发待验证场景所需要途径的操作轨迹组合得到;
回放模块,用于运行所述应用软件,并在所述应用软件上回放所述用例;
第二获取模块,用于获取回放过程中产生的实际埋点数据;
第二校验模块,用于将所述实际埋点数据上报至所述服务端,以使得所述服务端利用所述校验规则对所述实际埋点数据进行校验,以确定应用软件的实际埋点数据准确性。
14.一种计算机设备,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个计算机程序,其中所述一个或多个计算机程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个计算机程序配置用于执行根据权利要求1至11任一项所述的埋点数据校验方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现权利要求1至11任一项所述的埋点数据校验方法。
CN202010225466.7A 2020-03-26 2020-03-26 埋点数据校验方法和装置 Active CN111459811B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010225466.7A CN111459811B (zh) 2020-03-26 2020-03-26 埋点数据校验方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010225466.7A CN111459811B (zh) 2020-03-26 2020-03-26 埋点数据校验方法和装置

Publications (2)

Publication Number Publication Date
CN111459811A true CN111459811A (zh) 2020-07-28
CN111459811B CN111459811B (zh) 2023-07-18

Family

ID=71683478

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010225466.7A Active CN111459811B (zh) 2020-03-26 2020-03-26 埋点数据校验方法和装置

Country Status (1)

Country Link
CN (1) CN111459811B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113485889A (zh) * 2021-06-29 2021-10-08 平安银行股份有限公司 埋点数据校验方法、装置、电子设备及存储介质
CN115576849A (zh) * 2022-11-21 2023-01-06 智者四海(北京)技术有限公司 基于场景比对的客户端埋点正确性自动化验证方法和装置
CN116628865A (zh) * 2023-07-24 2023-08-22 中国西安卫星测控中心 一种航天三维仿真场景快速构建方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106571949A (zh) * 2016-09-23 2017-04-19 北京五八信息技术有限公司 埋点处理方法及装置
CN106598868A (zh) * 2016-12-24 2017-04-26 上海亿账通互联网科技有限公司 对客户端的应用程序动态埋点的方法及系统
CN107870860A (zh) * 2017-05-05 2018-04-03 平安科技(深圳)有限公司 埋点验证系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106571949A (zh) * 2016-09-23 2017-04-19 北京五八信息技术有限公司 埋点处理方法及装置
CN106598868A (zh) * 2016-12-24 2017-04-26 上海亿账通互联网科技有限公司 对客户端的应用程序动态埋点的方法及系统
CN107870860A (zh) * 2017-05-05 2018-04-03 平安科技(深圳)有限公司 埋点验证系统及方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
姚庚梅;李红霞;魏琴;陈再新;: "基于XML描述校验规则的数据输入测试用例自动生成方法" *
姚庚梅;李红霞;魏琴;陈再新;: "基于XML描述校验规则的数据输入测试用例自动生成方法", 科技信息, no. 21 *
肖然: "基于行为声明Linux应用软件可信性测试方法研究", pages 3 - 5 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113485889A (zh) * 2021-06-29 2021-10-08 平安银行股份有限公司 埋点数据校验方法、装置、电子设备及存储介质
CN113485889B (zh) * 2021-06-29 2023-08-15 平安银行股份有限公司 埋点数据校验方法、装置、电子设备及存储介质
CN115576849A (zh) * 2022-11-21 2023-01-06 智者四海(北京)技术有限公司 基于场景比对的客户端埋点正确性自动化验证方法和装置
CN116628865A (zh) * 2023-07-24 2023-08-22 中国西安卫星测控中心 一种航天三维仿真场景快速构建方法
CN116628865B (zh) * 2023-07-24 2023-10-13 中国西安卫星测控中心 一种航天三维仿真场景快速构建方法

Also Published As

Publication number Publication date
CN111459811B (zh) 2023-07-18

Similar Documents

Publication Publication Date Title
CN111459811B (zh) 埋点数据校验方法和装置
CN111522922B (zh) 日志信息查询方法、装置、存储介质及计算机设备
WO2018059402A1 (zh) 确定故障类型的方法和装置
US8079017B2 (en) Automated QS interface testing framework
CN106294094B (zh) 游戏服务器的测试方法、客户端、服务器及系统
CN107992409A (zh) 测试用例生成方法、装置、计算机设备和存储介质
CN110908909B (zh) 自动化测试方法、装置、存储介质及设备
CN107046526A (zh) 基于Fuzzing算法的分布式异构网络漏洞挖掘方法
CN111475324B (zh) 日志信息的分析方法、装置、计算机设备和存储介质
CN110764980A (zh) 日志处理方法和装置
CN111597122B (zh) 一种基于历史缺陷数据挖掘的软件故障注入方法
US20180357143A1 (en) Testing computing devices
CN111190827A (zh) 接口自动化测试方法、装置、存储介质及电子设备
CN110557299A (zh) 一种网络传输功能批量测试方法、系统、终端及存储介质
CN107957871B (zh) 一种基于jsr303的前后端同步正则校验方法
WO2021047184A1 (zh) 系统故障分析处理方法、装置、存储介质及电子设备
CN113391741B (zh) 操作校验方法和装置、存储介质及电子设备
CN117252149A (zh) 芯片验证方法及装置、芯片验证系统和可读存储介质
CN111813648A (zh) 一种应用于App的自动化测试方法、装置、存储介质及电子设备
CN107276852B (zh) 一种数据安全检测方法及终端
CN108228448B (zh) 一种代码跟踪方法及装置
CN113868116A (zh) 测试依赖数据的生成方法、装置、服务器及存储介质
CN114116522A (zh) 一种基于swagger进行接口自动测试的方法
CN111581019B (zh) 一种存储故障恢复的测试方法和装置
CN112015652A (zh) 埋点测试方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant