CN110909284A - 一种数据处理系统以及方法 - Google Patents

一种数据处理系统以及方法 Download PDF

Info

Publication number
CN110909284A
CN110909284A CN201910961774.3A CN201910961774A CN110909284A CN 110909284 A CN110909284 A CN 110909284A CN 201910961774 A CN201910961774 A CN 201910961774A CN 110909284 A CN110909284 A CN 110909284A
Authority
CN
China
Prior art keywords
target
page
data
point
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910961774.3A
Other languages
English (en)
Inventor
阳诚海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koubei Shanghai Information Technology Co Ltd
Original Assignee
Koubei Shanghai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koubei Shanghai Information Technology Co Ltd filed Critical Koubei Shanghai Information Technology Co Ltd
Priority to CN201910961774.3A priority Critical patent/CN110909284A/zh
Publication of CN110909284A publication Critical patent/CN110909284A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种数据处理系统以及方法,该系统包括:应用运行端、应用管理端以及数据处理端,应用管理端获得需进行埋点操作的数据页面的标识信息,建立数据页面的标识信息与网络地址信息之间的对应关系;应用运行端采用与应用管理端相同的标识信息生成方式获得目标埋点页面的目标标识信息,将目标标识信息和目标埋点数据提供给数据处理端;数据处理端根据上述信息获得目标埋点页面的网络地址信息,并基于此获得目标分析数据。该系统无需在预定埋点位置植入埋点代码,对目标应用无侵入;数据处理端根据应用管理端创建的对应关系和应用运行端提供的目标埋点页面的标识信息,获得目标埋点页面的网络地址信息,降低了埋点的资源消耗,提高埋点效率。

Description

一种数据处理系统以及方法
技术领域
本申请涉及计算机技术领域,具体涉及一种数据处理系统。本申请同时涉及数据处理方法、装置以及电子设备。
背景技术
用户行为统计,俗称埋点,指的是预先在应用中所有需要埋点的地方插入埋点代码,在后续应用运行时,执行该埋点代码,以此统计应用页面被浏览时长、用户针对应用页面的操作信息、进入页面时间、离开页面时间等埋点事项,并将圈选的埋点事项进行上报,供后续数据分析时使用。在应用的测试阶段或应用线上运行阶段,埋点都是必不可少的环节。
例如,对于在用户终端上作为宿主应用运行的平台化APP(Application,智能手机第三方应用),其包含多种类型的入驻应用,不同类型的入驻应用解决不同类别的问题,这些入驻应用大多由第三方公司开发完成,并通过预定规则入驻到宿主应用中,宿主应用提供满足入驻应用正常运行的核心功能。在实际运行过程中,需衡量入驻应用在宿主应用的运行价值,因此,需通过埋点的方式获取入驻应用在宿主应用的运行数据,比如应用页面的点击次数、应用页面的停留时长、应用页面的跳转情况等信息,针对这些运行数据进行分析,可获得针对入驻应用的运营策略。
现有的主要埋点方法为:预先统一指定应用的埋点位置,并将埋点代码植入指定的埋点位置,在应用运行时,通过埋点位置与应用页面的对应关系,遍历获得需要进行埋点的应用页面,并据此执行相应的埋点操作。
然而,上述方法存在以下不足:
预先指定应用的埋点位置,并在指定的埋点位置植入埋点代码,随着业务发展,需要埋点的位置越来越多,埋点代码分散在应用代码中,对应用的侵入性较大,对后续应用管理和应用维护造成影响;
应用运行阶段,需根据下发的埋点位置与应用页面的对应关系,遍历获得需进行埋点的应用页面,在埋点数量较大的情况下,需进行多次遍历,增加了埋点过程中的资源消耗,降低埋点效率。
发明内容
本申请提供一种数据处理系统,以解决现有的埋点过程中出现的对应用代码的侵入性较大,对后续应用管理和应用维护造成影响,以及增加了埋点过程中的资源消耗,降低埋点效率的问题。本申请另外提供一种数据处理方法、装置以及电子设备。本申请另外提供一种数据处理方法、装置以及电子设备。本申请还提供一种数据处理方法、装置以及电子设备。
本申请提供一种数据处理系统,包括:
应用管理端、应用运行端以及数据处理端;
所述应用管理端用于,获得针对目标应用的埋点配置信息;根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;将所述针对目标应用的埋点配置信息提供给所述应用运行端;建立所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
所述应用运行端用于,根据所述应用管理端提供的所述针对目标应用的埋点配置信息,判断当前打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用所述预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给所述数据处理端;
所述数据处理端用于,接收所述目标埋点数据和所述目标标识信息;根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
可选的,所述根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,包括:根据所述埋点配置信息,获得所述目标应用中需进行埋点操作的数据页面;采用预定标识生成方式获得所述目标应用中需进行埋点操作的数据页面的标识信息。
可选的,所述采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,包括:获得与所述目标应用相对应的应用标识信息;获得与所述需进行埋点操作的数据页面相对应的页面标识信息;将所述应用标识信息和所述页面标识信息进行合并,将合并后的标识信息确定为所述目标应用中需进行埋点操作的数据页面的标识信息。
可选的,所述获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息。
可选的,所述根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:
根据所述需进行埋点操作的数据页面的如下信息中的至少一种,获得与所述需进行埋点操作的数据页面相对应的页面标识信息:
所述需进行埋点操作的数据页面的网络地址信息;
所述需进行埋点操作的数据页面的调用接口名称信息;
所述需进行埋点操作的数据页面的标题信息;
所述需进行埋点操作的数据页面所包含的控件的数量信息。
可选的,所述根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:
针对所述需进行埋点操作的数据页面的页面特征数据进行哈希计算,获得与所述需进行埋点操作的数据页面相对应的页面标识信息。
可选的,所述采用所述预定标识生成方式获得所述目标埋点页面的目标标识信息,包括:获得与所述目标应用相对应的应用标识信息;获得与所述目标埋点页面相对应的页面标识信息;将所述应用标识信息和所述页面标识信息进行合并,将合并后的标识信息确定为所述目标埋点页面的目标标识信息。
可选的,所述获得与所述目标埋点页面相对应的页面标识信息,包括:
根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息。
可选的,所述根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息,包括:根据所述目标埋点页面的如下信息中的至少一种,获得与所述目标埋点页面相对应的页面标识信息:
所述目标埋点页面的网络地址信息;
所述目标埋点页面的调用接口名称信息;
所述目标埋点页面的标题信息;
所述目标埋点页面所包含的控件的数量信息。
可选的,所述根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息,包括:针对所述目标埋点页面的页面特征数据进行哈希计算,获得与所述目标埋点页面相对应的页面标识信息。
可选的,所述目标埋点数据包括如下信息中的至少一种:
所述目标埋点页面被打开时所对应的起始时间信息;
所述目标埋点页面被关闭时所对应的终止时间信息;
针对所述目标埋点页面中的控件的操作信息;
所述目标埋点页面被打开时之前的上一个埋点页面的标识信息。
可选的,所述应用运行端包含所述目标应用的运行容器;所述根据所述应用管理端提供的所述针对目标应用的埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用所述预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给所述数据管理端,包括:
通过所述目标应用的运行容器执行如下操作:
根据所述应用管理端提供的所述针对目标应用的埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用所述预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给所述数据管理端。
可选的,所述数据处理端根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息,包括:所述数据处理端将所述目标标识信息发送给所述应用管理端;接收所述应用管理端提供的所述目标埋点页面的网络地址信息;
对应的,所述应用管理端还用于:接收所述数据处理端发送的目标标识信息;根据所述目标标识信息和所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;将所述目标埋点页面的网络地址信息提供给所述数据处理端。
可选的,所述应用管理端还用于,获得所述目标应用;将所述目标应用提供给所述应用运行端;
对应的,所述应用运行端还用于接收所述目标应用。
可选的,所述应用运行端包括宿主应用,所述应用运行端接收所述目标应用之后,还包括:将所述目标应用入驻至所述宿主应用。
本申请还提供一种数据处理方法,包括:
获得针对目标应用的埋点配置信息;根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;将所述目标埋点页面的网络地址信息提供给所述数据处理端。
可选的,所述根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,包括:
根据所述埋点配置信息,获得所述目标应用中需进行埋点操作的数据页面;
采用预定标识生成方式获得所述目标应用中需进行埋点操作的数据页面的标识信息。
可选的,所述采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,包括:获得与所述目标应用相对应的应用标识信息;获得与所述需进行埋点操作的数据页面相对应的页面标识信息;将所述应用标识信息和所述页面标识信息进行合并,将合并后的标识信息确定为所述目标应用中需进行埋点操作的数据页面的标识信息。
可选的,所述获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息。
可选的,所述根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:
根据所述需进行埋点操作的数据页面的如下信息中的至少一种,获得与所述需进行埋点操作的数据页面相对应的页面标识信息:
所述需进行埋点操作的数据页面的网络地址信息;
所述需进行埋点操作的数据页面的调用接口名称信息;
所述需进行埋点操作的数据页面的标题信息;
所述需进行埋点操作的数据页面所包含的控件的数量信息。
可选的,所述根据所述需进行埋点操作的数据页面的页面特征数据获得与所述需进行埋点操作的数据页面相对应的页面标识信息,包括:
针对所述需进行埋点操作的数据页面的页面特征数据进行哈希计算,获得与所述需进行埋点操作的数据页面相对应的页面标识信息。
可选的,还包括:将所述针对目标应用的埋点配置信息提供给用于运行所述目标应用的应用运行端。
本申请还提供一种数据处理方法,包括:获得针对目标应用的埋点配置信息;根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给数据处理端。
可选的,所述采用预定标识生成方式获得所述目标埋点页面的目标标识信息,包括:获得与所述目标应用相对应的应用标识信息;获得与所述目标埋点页面相对应的页面标识信息;将所述应用标识信息和所述页面标识信息进行合并,将合并后的标识信息确定为所述目标埋点页面的目标标识信息。
可选的,所述获得与所述目标埋点页面相对应的页面标识信息,包括:
根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息。
可选的,所述根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息,包括:
根据所述目标埋点页面的如下信息中的至少一种,获得与所述目标埋点页面相对应的页面标识信息:
所述目标埋点页面的网络地址信息;
所述目标埋点页面的调用接口名称信息;
所述目标埋点页面的标题信息;
所述目标埋点页面所包含控件的数量信息。
可选的,所述根据所述目标埋点页面的页面特征数据获得与所述目标埋点页面相对应的页面标识信息,包括:
针对所述目标埋点页面的页面特征数据进行哈希计算,获得与所述目标埋点页面相对应的页面标识信息。
可选的,所述目标埋点数据包括如下信息中的至少一种:
所述目标埋点页面被打开时所对应的起始时间信息;
所述目标埋点页面被关闭时所对应的终止时间信息;
针对所述目标埋点页面中的控件的操作信息;
所述目标埋点页面被打开时之前的上一个埋点页面的标识信息。
本申请还提供一种数据处理方法,包括:
获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;获得针对所述目标埋点页面的目标埋点数据;根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
可选的,所述根据所述目标标识信息,获得所述目标埋点页面的网络地址信息,包括:将所述目标标识信息发送至应用管理端,所述应用管理端包含数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;接收所述应用管理端返回的目标埋点页面的网络地址信息。
可选的,所述获得针对所述目标埋点页面的目标埋点数据,包括获得如下信息中的至少一种:
所述目标埋点页面被打开时所对应的起始时间信息;
所述目标埋点页面被关闭时所对应的终止时间信息;
针对所述目标埋点页面中的控件的操作信息;
所述目标埋点页面被打开时之前的上一个埋点页面的标识信息。
本申请还提供一种数据处理装置,包括:
埋点配置信息获得单元,用于获得针对目标应用的埋点配置信息;
标识信息获得单元,用于根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
对应关系信息建立单元,用于建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
目标标识信息获得单元,用于获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
网络地址信息获得单元,用于根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
网络地址信息提供单元,用于将所述目标埋点页面的网络地址信息提供给所述数据处理端。
本申请还提供一种电子设备,包括:
处理器;存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;将所述目标埋点页面的网络地址信息提供给所述数据处理端。
本申请还提供一种数据处理装置,包括:
埋点配置信息获得单元,用于获得针对目标应用的埋点配置信息;
目标埋点页面判断单元,用于根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;
目标埋点数据获得单元,用于在确定当前被打开的数据页面为需要进行埋点操作的目标埋点页面之后,针对所述目标埋点页面执行埋点操作,获得目标埋点数据;
目标标识信息获得单元,用于采用预定标识生成方式获得所述目标埋点页面的目标标识信息;
信息提供单元,用于将所述目标埋点数据和所述目标标识信息提供给数据处理端。
本申请还提供一种电子设备,包括:
处理器;存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给数据处理端。
本申请还提供一种数据处理装置,包括:
目标标识信息获得单元,用于获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;
目标埋点数据获得单元,用于获得针对所述目标埋点页面的目标埋点数据;
网络地址信息获得单元,用于根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;
目标分析数据获得单元,用于根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
本申请还提供一种电子设备,包括:
处理器;存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;获得针对所述目标埋点页面的目标埋点数据;根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
与现有技术相比,本申请具有以下优点:
本申请提供的数据处理系统,应用管理端获得针对目标应用的埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,并且建立数据页面的标识信息与数据页面的网络地址信息之间的对应关系,在应用运行端运行目标应用时,采用与应用管理端相同的标识信息生成方式获得当前需执行埋点操作的目标埋点页面的目标标识信息,并将该目标标识信息以及执行埋点操作后获得的目标埋点数据共同发送至数据处理端;数据处理端可根据应用管理端的对应关系信息和应用运行端提供的目标标识信息,获得目标埋点页面的网络地址信息,并根据该网络地址信息和目标埋点数据获得针对目标埋点页面的目标分析数据。该过程无需预先指定应用的埋点位置,无需预先在指定的埋点位置植入埋点代码,对目标应用无侵入;并且,应用运行端和应用管理端采用相同的方式生成数据页面的标识信息,在后续数据处理的过程中,根据应用管理端预先创建的对应关系和应用运行端提供的标识信息,即可获得已经过埋点操作的目标埋点页面的网络地址信息,应用运行端无需在执行埋点操作时通过遍历的方式查找目标埋点页面的网络地址信息,降低了埋点过程中的资源消耗,提高埋点效率。
附图说明
图1是本申请第一实施例提供的数据处理系统的示意图;
图2是本申请第二实施例提供的数据处理方法流程图;
图3是本申请第三实施例提供的数据处理方法流程图;
图4是本申请第四实施例提供的数据处理方法流程图;
图5是本申请第五实施例提供的数据处理装置的单元框图;
图6是本申请第六实施例提供的电子设备的逻辑结构示意图;
图7是本申请第七实施例提供的数据处理装置的单元框图;
图8是本申请第八实施例提供的电子设备的逻辑结构示意图;
图9是本申请第九实施例提供的数据处理装置的单元框图;
图10是本申请第十实施例提供的电子设备的逻辑结构示意图;
图11是本申请第十一实施例提供的数据处理方法流程图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似推广,因此本申请不受下面公开的具体实施的限制。
针对应用的埋点场景,为了减少埋点过程中对应用的侵入,提高埋点效率,本申请提供了一种数据处理系统。本申请还提供一种数据处理方法、与该方法相对应的数据处理装置以及电子设备,本申请还提供一种数据处理方法、与该方法相对应的数据处理装置以及电子设备。本申请另外提供一种数据处理方法、与该方法相对应的数据处理装置以及电子设备。以下提供实施例对所述系统、方法、装置以及电子设备进行详细说明。
本申请第一实施例提供一种数据处理系统,图1为本申请第一实施例提供的数据处理系统的示意图,以下结合图1对本实施例提供的方法进行详细描述。以下描述所涉及的实施例是用来解释说明方法原理,不是实际使用的限定。
如图1所示,本实施例提供的数据处理系统包括:应用管理端101、应用运行端102以及数据处理端103;
应用管理端101用于,获得针对目标应用的埋点配置信息;根据埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;将针对目标应用的埋点配置信息提供给应用运行端;建立数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息;
应用运行端102用于,根据应用管理端提供的针对目标应用的埋点配置信息,判断当前打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对目标埋点页面执行埋点操作,获得目标埋点数据;采用预定标识生成方式获得目标埋点页面的目标标识信息;将目标埋点数据和目标标识信息提供给数据处理端;
数据处理端103用于,接收应用运行端102提供的目标埋点数据和目标埋点页面的目标标识信息;根据应用管理端101的数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息以及上述目标埋点页面的目标标识信息,获得目标埋点页面的网络地址信息;根据目标埋点页面的网络地址信息和目标埋点数据,获得针对目标埋点页面的目标分析数据。
埋点是数据分析的准备工作,是指在应用代码中的对应位置植入埋点代码,以对应用的运行性能和用户行为数据(例如页面访问路径、点击元素等)进行统计。在应用测试阶段或应用线上运行阶段,都需针对应用进行埋点。埋点代码是指用于收集用户针对应用页面的操作信息的执行代码,其可用于监控用户行为事件(例如应用页面的打开、关闭等),在用户后续触发该事件时,可记录并上传埋点代码中定义的有关该事件的信息。
应用管理端101可针对多个应用预先设置对应的埋点配置信息,例如,根据各应用的功能属性、应用所包含的数据页面的内容以及应用的运营价值等信息对多个应用分别设置其对应的埋点对象和埋点代码。该过程具体指的是在应用被访问前(例如,应用管理端将应用发送至应用运行端之前)对应用设置埋点配置信息,以使后续该应用在应用运行端被访问时能够自动搜集用户行为数据。设置埋点配置信息的过程可以为:预先针对不同的埋点对象配置对应的埋点代码,例如,针对应用的数据页面进行埋点,主要是对其创建、打开和展示的时间进行统计;针对数据页面中的控件进行埋点,主要是对控件的点击事件进行统计。
在本实施例中,应用管理端101获得针对目标应用的埋点配置信息的过程可以为:应用管理端根据目标应用的功能属性、目标应用所包含的数据页面的内容以及目标应用在应用运行端的重要性程度(例如目标应用的运营价值),预先确定针对该目标应用的埋点对象所对应的埋点位置和对应的埋点代码,其中,埋点位置用于确定目标应用中具体哪些数据页面需进行埋点操作。例如,预先将目标应用中用户的点击次数较多、浏览时长较长等可反映目标应用的核心价值的数据页面作为需进行埋点操作的数据页面。
应用管理端101根据埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,具体指的是:首先,根据上述埋点配置信息中预先确定的埋点对象所对应的埋点位置,获得目标应用中需进行埋点操作的数据页面,例如,根据上述预先确定的埋点位置信息查找获得目标应用中需进行埋点操作的数据页面;然后,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息。
在本实施例中,目标应用中需进行埋点操作的数据页面的标识信息由两部分组成,分别为与目标应用相对应的应用标识信息和与需进行埋点操作的数据页面相对应的页面标识信息。上述采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,具体包括如下内容:分别获得与目标应用相对应的应用标识信息以及与需进行埋点操作的数据页面相对应的页面标识信息,并将应用标识信息和页面标识信息进行合并,将合并后的标识信息确定为目标应用中需进行埋点操作的数据页面的标识信息。
上述获得与需进行埋点操作的数据页面相对应的页面标识信息的过程具体可以为:根据需进行埋点操作的数据页面的页面特征数据获得与需进行埋点操作的数据页面相对应的页面标识信息,例如,根据需进行埋点操作的数据页面的网络地址信息、调用接口名称信息、标题信息以及数据页面所包含的控件的数量等信息中的一种或多种获得与需进行埋点操作的数据页面相对应的页面标识信息。
在本实施例中,可针对需进行埋点操作的数据页面的网络地址信息、调用接口名称信息、标题信息以及数据页面所包含的控件的数量等页面特征数据进行哈希计算,将哈希计算所得的哈希值作为页面标识信息。
如图1中所示,需进行埋点操作的数据页面的标识信息为页面埋点ID,其由A、B两组数据组成,A组数据用于标识具体应用,可将应用入驻到宿主应用之前、应用管理端101为应用所分配的应用识别号作为A组数据的数值;B组数据由针对数据页面的URL地址、调用接口名称、数据页面标题,数据页面中可点击控件的数量等页面特征数据进行哈希计算后获得。例如,目标应用为专用于进行收款的应用,应用管理端分配的应用识别号(APPID)为2000035,需进行埋点操作的数据页面为收款咨询页面,其对应页面特征信息为:URL地址(http://2000035.h5.xx.com/www/index.htm)、调用接口名称(com.xx.mappprod.querysign)、页面标题(收款咨询页面)、可点击控件的数量(10个),该收款咨询页面的页面埋点ID的A组数据为A2000035、B组数据为Bxxxxxxx(针对上述http://2000035.h5.xx.com/www/index.htm、com.xx.mappprod.querysign、收款咨询页面等信息共同进行哈希计算后所得的哈希值),最终获得的收款咨询页面的页面埋点ID为:A2000035.Bxxxxxxx。
上述方式结合目标应用的应用标识信息和页面特征数据的标识信息,可针对需进行埋点操作的数据页面进行唯一性标识,标识结果更加准确。在后续基于该标识信息进行用户行为数据采集的过程中,各数据页面所对应的用户行为事件(例如,用户打开商品详情页—选择商品型号—加入购物车—下订单-购买完成)之间相互独立,可确保数据不被重复采集。
在本实施例中,目标应用为可以在应用运行端102的宿主应用上运行的入驻应用,宿主应用提供可满足入驻应用正常运行的核心功能,例如,对于提供餐饮服务的生活服务类场景,应用运行端可以为供用户使用的智能终端设备,宿主应用可以是为用户提供用餐服务的APP,该APP上运行有可解决不同类别问题的多种入驻应用,入驻应用可对宿主应用的功能进行补充,例如点餐功能APP、下单功能APP、结算功能APP等,目标应用可以为上述入驻应用中的一种。
在本实施例中,应用管理端101还用于获得目标应用,并将目标应用提供给应用运行端;对应的,应用运行端102还用于接收上述目标应用。例如,应用管理端101获得第三方应用开发商开发的目标应用,并按照宿主应用的实际运行需求针对该目标应用进行配置,将配置完成的入驻应用信息同步至应用运行端,该入驻应用信息包含上述埋点配置信息。应用运行端在接收目标应用之后,将目标应用入驻至宿主应用。应用管理端101将针对目标应用的埋点配置信息提供给应用运行端,可以是指:应用管理端101可在同步目标应用的同时,将针对目标应用的埋点配置信息提供给应用运行端。
应用管理端101建立数据页面的标识信息(页面埋点ID)与数据页面的网络地址信息(页面URL地址)之间的对应关系信息,并将页面URL地址与页面埋点ID的对应关系写入目标数据库,该过程具体为:应用管理端建立所有需进行埋点操作的数据页面的标识信息与该数据页面的网络地址信息之间的映射关系,并将建立的映射关系写入关系型数据库中,供后续数据处理环节进行数据查找。
应用运行端102运行目标应用时,根据用户针对目标应用的操作情况,实时判断当前被操打开的页面是否为需要进行埋点操作的目标埋点页面,即,判断当前被用户打开的页面是否为埋点配置信息中预先设置的埋点对象,如果是,则针对目标埋点页面执行埋点操作,获得目标埋点数据,例如,在该目标埋点页面所对应的埋点位置处植入相应的埋点代码,具体可利用脚本程序在埋点位置处植入埋点代码。在该目标埋点页面被关闭后,统计所获得的目标埋点数据,该目标埋点数据可用于后续针对目标应用进行数据清洗,最终获得用于对目标应用进行数据分析的目标分析数据。在本实施例中,目标埋点数据包括打开目标埋点页面所对应的起始时间信息、关闭目标埋点页面所对应的终止时间信息、针对目标埋点页面中的控件的操作信息以及打开目标埋点页面之前的上一个埋点页面的标识信息等信息中的一种或多种。
在本实施例中,应用运行端102采用与上述应用管理端101相同的预定标识生成方式获得目标埋点页面的目标标识信息,该过程具体包括:获得与目标应用相对应的应用标识信息;获得与目标埋点页面相对应的页面标识信息;将应用标识信息和页面标识信息进行合并,将合并后的标识信息确定为目标埋点页面的目标标识信息。例如,目标埋点页面的标识信息包括用于标识目标应用的应用标识信息和用于标识页面特征信息的页面标识信息,将应用管理端101为目标应用分配的应用识别号作为用于标识目标应用的应用标识信息,将目标埋点页面的页面特征数据进行哈希计算后获得的哈希值作为用于标识页面特征信息的页面标识信息,页面特征数据可以包括:目标埋点页面的URL地址、目标埋点页面的调用接口名称、目标埋点页面的标题信息以及目标埋点页面中包含的可点击控件的数量等信息中的一种或多种。
根据目标埋点页面的页面特征数据获得与目标埋点页面相对应的页面标识信息,具体可针对上述目标埋点页面的页面特征数据进行哈希计算,将哈希计算所得结果确定为与目标埋点页面相对应的页面标识信息。
在本实施例中,应用运行端102包含目标应用的运行容器,该运行容器为目标应用提供封闭的运行环境,上述根据埋点配置信息判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面、针对目标埋点页面执行埋点操作、采用与应用管理端相同的预定标识生成方式获得目标埋点页面的目标标识信息以及将目标埋点数据和目标标识信息提供给数据管理端等操作均由目标应用的运行容器实现。
数据处理端103在接收应用运行端102提供的针对目标埋点页面执行埋点操作后所获得的目标埋点数据和目标埋点页面的目标标识信息(页面埋点ID)之后,根据上述目标标识信息以及数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息(页面URL地址与页面埋点ID的对应关系),获得目标埋点页面的网络地址信息(页面URL地址)。本实施例中,上述获得目标埋点页面的网络地址信息的过程可以为:数据处理端将目标标识信息发送给应用管理端,应用管理端接收数据处理端发送的目标标识信息之后,根据目标标识信息和数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息,查找获得目标埋点页面的网络地址信息,并将目标埋点页面的网络地址信息提供给数据处理端,数据处理端接收应用管理端提供的目标埋点页面的网络地址信息。
数据处理端103根据目标埋点页面的网络地址信息和所述目标埋点数据,获得针对目标埋点页面的目标分析数据,指的是:根据目标埋点页面的网络地址信息查找获得目标埋点页面的页面特性信息,即,获得执行过埋点操作的页面详情信息,并结合上述目标埋点数据以及目标应用对应的业务需求进行数据清洗,获得针对目标埋点页面的目标分析数据。最终获得的目标分析数据可以包括如下内容:用户操作时间信息、用户操作地点信息、用户身份信息、用户的交互方式信息、交互内容等用户行为数据;浏览器加载信息、错误异常信息等质量数据;浏览器相关的元数据、以及运营商信息等环境数据;PV(页面浏览量或点击量)、UV(相同用户多次访问的次数)、转化率、留存率等运营数据,后续可基于该目标分析数据制定运营计划。
需要说明的是,上述应用管理端和数据处理端可共同作为目标应用的后端服务平台进行统一部署,也可进行分布式部署。
本实施例提供的数据处理系统,在应用管理端设置针对目标应用的埋点配置信息,并采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,该标识信息包含与目标应用相对应的应用标识信息和与需进行埋点操作的数据页面相对应的页面标识信息,该页面标识信息通过对需进行埋点操作的数据页面的网络地址信息、调用接口名称信息、标题信息以及数据页面所包含的控件的数量等信息中的一种或多种进行哈希计算获得;并且应用管理端建立数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息,在应用运行端运行目标应用时,采用与应用管理端相同的标识信息生成方式获得当前执行埋点操作的目标埋点页面的目标标识信息,并将该目标标识信息以及执行埋点操作后所获得的目标埋点数据共同发送至数据处理端;数据处理端可根据应用管理端的对应关系信息和应用运行端的目标标识信息,获得目标埋点页面的网络地址信息,并根据该网络地址信息和目标埋点数据获得针对目标埋点页面的目标分析数据。该过程无需预先指定应用的埋点位置,无需预先在指定的埋点位置植入埋点代码,对目标应用无侵入;并且,应用运行端和应用管理端采用相同的方式生成数据页面的标识信息,在后续数据处理的过程中,根据应用管理端预先创建的对应关系和应用运行端提供的标识信息,即可获得已经过埋点操作的目标埋点页面的网络地址信息,应用运行端无需在执行埋点操作时通过遍历的方式查找目标埋点页面的网络地址信息,降低了埋点过程中的资源消耗,提高埋点效率。
本申请第二实施例提供一种数据处理方法,该方法的应用主体可以为用于对前端应用进行管理和配置的后台服务器,图2为本申请第二实施例提供的数据处理方法流程图,以下结合图2对本实施例提供的方法进行详细描述。以下描述所涉及的实施例是用来解释说明方法原理,不是实际使用的限定。
如图2所示,本实施例提供的数据处理方法包括如下步骤:
S201,获得针对目标应用的埋点配置信息。
该过程可以是指:根据目标应用的功能属性、目标应用所包含的数据页面的内容以及目标应用在应用运行端的重要性程度(例如目标应用的运营价值),预先确定针对该目标应用的埋点对象所对应的埋点位置和对应的埋点代码,其中,埋点位置用于确定目标应用中具体哪些数据页面需进行埋点操作。例如,预先将目标应用中用户的点击次数较多、浏览时长较长等可反映目标应用的核心价值的数据页面作为需进行埋点操作的数据页面。
在本实施例中,在获得针对目标应用的埋点配置信息之后,还需将该埋点配置信息提供给用于运行上述目标应用的应用运行端,以使应用运行端可根据该埋点配置信息执行相应的埋点操作。
S202,根据埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息。
本步骤具体包括如下内容:
首先,根据埋点配置信息,获得目标应用中需进行埋点操作的数据页面。
其次,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息,具体包括如下内容:获得与目标应用相对应的应用标识信息;
获得与需进行埋点操作的数据页面相对应的页面标识信息,例如,根据需进行埋点操作的数据页面的页面特征数据获得与需进行埋点操作的数据页面相对应的页面标识信息,具体的,可针对需进行埋点操作的数据页面的网络地址信息;调用接口名称信息;标题信息;页面所包含的控件的数量信息等页面特征信息中的至少一种进行哈希计算,将哈希计算的结果作为与需进行埋点操作的数据页面相对应的页面标识信息;
将应用标识信息和页面标识信息进行合并,将合并后的标识信息确定为目标应用中需进行埋点操作的数据页面的标识信息。
S203,建立需进行埋点操作的数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息。例如,建立所有需进行埋点操作的数据页面的标识信息与该数据页面的网络地址信息之间的映射关系,并将建立的映射关系写入关系型数据库中,供后续数据处理环节进行数据查找。
S204,获得数据处理端发送的目标埋点页面的目标标识信息,该目标埋点页面为目标应用中已执行埋点操作的数据页面。数据处理端用于根据目标埋点页面的网络地址信息和经埋点操作后所获得的目标埋点信息对目标埋点页面进行数据分析。
S205,根据上述目标标识信息以及数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息,获得目标埋点页面的网络地址信息。
S206,将目标埋点页面的网络地址信息提供给所述数据处理端。
通过使用本方法,可预先建立需进行埋点操作的数据页面的标识信息与数据页面的网络地址信息之间的对应关系信息,并基于该对应关系信息,为数据处理端提供需要的目标埋点页面的网络地址信息。
本申请第三实施例提供一种数据处理方法,该方法的应用主体可以为用于针对应用进行埋点操作的计算设备应用,图3为本申请第一实施例提供的数据处理方法流程图,以下结合图3对本实施例提供的方法进行详细描述。以下描述所涉及的实施例是用来解释说明方法原理,不是实际使用的限定。
如图3所示,本实施例提供的数据处理方法包括如下步骤:
S301,获得针对目标应用的埋点配置信息。
S302,根据埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面。
S303,如果是,则针对目标埋点页面执行埋点操作,获得目标埋点数据。
本实施例中,目标埋点数据包括:打开目标埋点页面所对应的起始时间信息、关闭目标埋点页面所对应的终止时间信息、针对目标埋点页面中的控件的操作信息、打开目标埋点页面之前的上一个埋点页面的标识信息等信息中的至少一种。
S304,采用预定标识生成方式获得目标埋点页面的目标标识信息。
优选的,采用预定标识生成方式获得目标埋点页面的目标标识信息,包括如下过程:
获得与目标应用相对应的应用标识信息;
获得与目标埋点页面相对应的页面标识信息,例如,根据目标埋点页面的页面特征数据获得与目标埋点页面相对应的页面标识信息,具体的,可针对目标埋点页面的目标埋点页面的网络地址信息、目标埋点页面的调用接口名称信息、目标埋点页面的标题信息、目标埋点页面所包含控件的数量信息中的至少一种进行哈希计算,将哈希计算结果作为与目标埋点页面相对应的页面标识信息;
将应用标识信息和页面标识信息进行合并,将合并后的标识信息确定为目标埋点页面的目标标识信息。
S305,将目标埋点数据和目标标识信息提供给数据处理端。
通过使用本方法,可根据下发的埋点配置信息执行埋点操作,在执行埋点操作的过程中生成目标埋点页面的标识信息,并将获得的目标埋点信息和目标埋点页面的标识信息提供给数据处理端,在执行埋点操作时无需进行遍历查找,降低埋点过程的复杂性,提高埋点效率。
本申请第四实施例提供一种数据处理方法,该方法的应用主体可以为基于埋点数据的数据处理平台,图4为本申请第四实施例提供的数据处理方法流程图,以下结合图4对本实施例提供的方法进行详细描述。以下描述所涉及的实施例是用来解释说明方法原理,不是实际使用的限定。
如图4所示,本实施例提供的数据处理方法包括如下步骤:
S401,获得目标埋点页面的目标标识信息,该目标埋点页面为已执行埋点操作的数据页面。
S402,获得针对目标埋点页面的目标埋点数据。例如,接收应用运行端在执行埋点操作后所提供的目标埋点数据,该应用运行端可以是指智能移动终端。
目标埋点数据可以是指:目标埋点页面被打开时所对应的起始时间信息、目标埋点页面被关闭时所对应的终止时间信息、针对目标埋点页面中的控件的操作信息、目标埋点页面被打开之前的上一个埋点页面的标识信息中的至少一种。
S403,根据目标标识信息,获得目标埋点页面的网络地址信息。
例如,将目标标识信息发送至应用管理端,该应用管理端包含数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;接收所述应用管理端返回的目标埋点页面的网络地址信息。
S404,根据目标埋点页面的网络地址信息和目标埋点数据,获得针对目标埋点页面的目标分析数据。
根据目标埋点页面的网络地址信息查找获得目标埋点页面的页面特性信息,结合上述目标埋点数据以及目标应用对应的业务需求进行数据分析,获得针对目标埋点页面的目标分析数据。最终获得的目标分析数据可以包括如下内容:用户操作时间信息、用户操作地点信息、用户身份信息、用户的交互方式信息、交互内容等用户行为数据;浏览器加载信息、错误异常信息等质量数据;浏览器相关的元数据、以及运营商信息等环境数据;PV(页面浏览量或点击量)、UV(相同用户多次访问的次数)、转化率、留存率等运营数据,后续可基于该目标分析数据制定运营计划。
通过使用本方法,可根据目标埋点页面的目标标识信息获得目标埋点页面的网络地址信息。
上述第二实施例提供了一种数据处理方法,与之相对应的,本申请第五实施例还提供了一种数据处理装置,由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对装置实施例的描述仅仅是示意性的。
请参考图5理解该实施例,图5为本实施例提供的装置的单元框图,如图5所示,本实施例提供的装置包括:
埋点配置信息获得单元501,用于获得针对目标应用的埋点配置信息;
标识信息获得单元502,用于根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
对应关系信息建立单元503,用于建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
目标标识信息获得单元504,用于获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
网络地址信息获得单元505,用于根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
网络地址信息提供单元506,用于将所述目标埋点页面的网络地址信息提供给所述数据处理端。
在上述的实施例中,提供了一种数据处理方法以及一种数据处理装置,此外,本申请第六实施例还提供一种电子设备,由于电子设备实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对电子设备实施例的描述仅仅是示意性的。该电子设备实施例如下:
请参考图6理解本实施例,图6为本实施例提供的电子设备的示意图。
如图6所示,电子设备包括:处理器601;存储器602;
存储器602,用于存储数据处理的程序,程序在被处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;
根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
将所述目标埋点页面的网络地址信息提供给所述数据处理端。
上述第三实施例提供了一种数据处理方法,与之相对应的,本申请第七实施例还提供了一种数据处理装置,由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对装置实施例的描述仅仅是示意性的。
请参考图7理解该实施例,图7为本实施例提供的装置的单元框图,如图7所示,本实施例提供的装置包括:
埋点配置信息获得单元701,用于获得针对目标应用的埋点配置信息;
目标埋点页面判断单元702,用于根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;
目标埋点数据获得单元703,用于在确定当前被打开的数据页面为需要进行埋点操作的目标埋点页面之后,针对所述目标埋点页面执行埋点操作,获得目标埋点数据;
目标标识信息获得单元704,用于采用预定标识生成方式获得所述目标埋点页面的目标标识信息;
信息提供单元705,用于将所述目标埋点数据和所述目标标识信息提供给数据处理端。
在上述的实施例中,提供了一种数据处理方法以及一种数据处理装置,此外,本申请第八实施例还提供一种电子设备,由于电子设备实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对电子设备实施例的描述仅仅是示意性的。该电子设备实施例如下:
请参考图8理解本实施例,图8为本实施例提供的电子设备的示意图。
如图8所示,电子设备包括:处理器801;存储器802;
存储器802,用于存储数据处理的程序,程序在被处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给数据处理端。
上述第四实施例提供了一种数据处理方法,与之相对应的,本申请第九实施例还提供了一种数据处理装置,由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对装置实施例的描述仅仅是示意性的。
请参考图9理解该实施例,图9为本实施例提供的装置的单元框图,如图9所示,本实施例提供的装置包括:
目标标识信息获得单元901,用于获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;
目标埋点数据获得单元902,用于获得针对所述目标埋点页面的目标埋点数据;
网络地址信息获得单元903,用于根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;
目标分析数据获得单元904,用于根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
在上述的实施例中,提供了一种数据处理方法以及一种数据处理装置,此外,本申请第十实施例还提供一种电子设备,由于电子设备实施例基本相似于方法实施例,所以描述得比较简单,相关的技术特征的细节部分请参见上述提供的方法实施例的对应说明即可,下述对电子设备实施例的描述仅仅是示意性的。该电子设备实施例如下:
请参考图10理解本实施例,图10为本实施例提供的电子设备的示意图。
如图10所示,电子设备包括:处理器1001;存储器1002;
存储器1002,用于存储数据处理的程序,程序在被处理器读取执行时,执行如下操作:
获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;获得针对所述目标埋点页面的目标埋点数据;根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
本申请第十一实施例提供了一种数据处理方法,该方法的相关主体包括:应用管理平台、宿主应用、埋点ID生成库以及数据处理平台。如图11所示,本实施例提供的数据处理方法包括如下步骤:
Step1:通过应用管理品平台配置当前入驻应用是否需要自动埋点,如果需要自动埋点,则获得埋点配置信息;
Step2:生成页面埋点ID;
Step2-1:调用埋点ID生成库生成页面埋点ID;
Step3:将页面URL地址与页面埋点ID的对应关系写入目标数据库;
Step4:将入驻应用信息同步到客户端,该入驻应用信息包括入驻应用的埋点配置信息;
Step5:打开入驻应用,即,响应于用户的应用打开操作,在宿主应用中打开入驻应用;
Step6:打开页面,即响应于用户的页面打开操作,打开入驻应用的页面;
Step6-1:根据Step1获得的埋点配置信息,检查是否需要自动埋点;
Step7:执行埋点操作,并调用埋点ID生成库生成页面埋点ID;
Step8:计算页面停留时长(在页面关闭时);
Step9:获得目标埋点数据,并将目标埋点数据和页面埋点ID发送给数据处理平台;
Step10:数据处理平台从目标数据库中获得页面URL地址与页面埋点ID的对应关系;
Step11:根据页面埋点ID、页面URL地址与页面埋点ID的对应关系,获得执行过埋点操作的页面详情信息,并根据页面详情信息和目标埋点数据进行数据清洗。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
1、计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
2、本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请虽然以较佳实施例公开如上,但其并不是用来限定本申请,任何本领域技术人员在不脱离本申请的精神和范围内,都可以做出可能的变动和修改,因此本申请的保护范围应当以本申请权利要求所界定的范围为准。

Claims (10)

1.一种数据处理系统,其特征在于,包括:
应用管理端、应用运行端以及数据处理端;
所述应用管理端用于,获得针对目标应用的埋点配置信息;根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;将所述针对目标应用的埋点配置信息提供给所述应用运行端;建立所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
所述应用运行端用于,根据所述应用管理端提供的所述针对目标应用的埋点配置信息,判断当前打开的数据页面是否为需要进行埋点操作的目标埋点页面;如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;采用所述预定标识生成方式获得所述目标埋点页面的目标标识信息;将所述目标埋点数据和所述目标标识信息提供给所述数据处理端;
所述数据处理端用于,根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
2.一种数据处理方法,其特征在于,包括:
获得针对目标应用的埋点配置信息;
根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
将所述目标埋点页面的网络地址信息提供给所述数据处理端。
3.一种数据处理方法,其特征在于,包括:
获得针对目标应用的埋点配置信息;
根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;
如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;
采用预定标识生成方式获得所述目标埋点页面的目标标识信息;
将所述目标埋点数据和所述目标标识信息提供给数据处理端。
4.一种数据处理方法,其特征在于,包括:
获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;
获得针对所述目标埋点页面的目标埋点数据;
根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;
根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
5.一种数据处理装置,其特征在于,包括:
埋点配置信息获得单元,用于获得针对目标应用的埋点配置信息;
标识信息获得单元,用于根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
对应关系信息建立单元,用于建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
目标标识信息获得单元,用于获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
网络地址信息获得单元,用于根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
网络地址信息提供单元,用于将所述目标埋点页面的网络地址信息提供给所述数据处理端。
6.一种电子设备,其特征在于,包括:
处理器;
存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;
根据所述埋点配置信息,采用预定标识生成方式获得目标应用中需进行埋点操作的数据页面的标识信息;
建立所述需进行埋点操作的数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息;
获得数据处理端发送的目标埋点页面的目标标识信息,所述目标埋点页面为目标应用中已执行埋点操作的数据页面;
根据所述目标标识信息以及所述数据页面的标识信息与所述数据页面的网络地址信息之间的对应关系信息,获得所述目标埋点页面的网络地址信息;
将所述目标埋点页面的网络地址信息提供给所述数据处理端。
7.一种数据处理装置,其特征在于,包括:
埋点配置信息获得单元,用于获得针对目标应用的埋点配置信息;
目标埋点页面判断单元,用于根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;
目标埋点数据获得单元,用于在确定当前被打开的数据页面为需要进行埋点操作的目标埋点页面之后,针对所述目标埋点页面执行埋点操作,获得目标埋点数据;
目标标识信息获得单元,用于采用预定标识生成方式获得所述目标埋点页面的目标标识信息;
信息提供单元,用于将所述目标埋点数据和所述目标标识信息提供给数据处理端。
8.一种电子设备,其特征在于,包括:
处理器;
存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得针对目标应用的埋点配置信息;
根据所述埋点配置信息,判断当前被打开的数据页面是否为需要进行埋点操作的目标埋点页面;
如果是,则针对所述目标埋点页面执行埋点操作,获得目标埋点数据;
采用预定标识生成方式获得所述目标埋点页面的目标标识信息;
将所述目标埋点数据和所述目标标识信息提供给数据处理端。
9.一种数据处理装置,其特征在于,包括:
目标标识信息获得单元,用于获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;
目标埋点数据获得单元,用于获得针对所述目标埋点页面的目标埋点数据;
网络地址信息获得单元,用于根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;
目标分析数据获得单元,用于根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
10.一种电子设备,其特征在于,包括:
处理器;
存储器,用于存储数据处理程序,所述程序在被所述处理器读取执行时,执行如下操作:
获得目标埋点页面的目标标识信息,所述目标埋点页面为已执行埋点操作的数据页面;
获得针对所述目标埋点页面的目标埋点数据;
根据所述目标标识信息,获得所述目标埋点页面的网络地址信息;
根据所述目标埋点页面的网络地址信息和所述目标埋点数据,获得针对所述目标埋点页面的目标分析数据。
CN201910961774.3A 2019-10-11 2019-10-11 一种数据处理系统以及方法 Pending CN110909284A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910961774.3A CN110909284A (zh) 2019-10-11 2019-10-11 一种数据处理系统以及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910961774.3A CN110909284A (zh) 2019-10-11 2019-10-11 一种数据处理系统以及方法

Publications (1)

Publication Number Publication Date
CN110909284A true CN110909284A (zh) 2020-03-24

Family

ID=69815547

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910961774.3A Pending CN110909284A (zh) 2019-10-11 2019-10-11 一种数据处理系统以及方法

Country Status (1)

Country Link
CN (1) CN110909284A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070120986A1 (en) * 2005-11-08 2007-05-31 Takashi Nunomaki Imaging device, information processing method, and computer program
CN104915398A (zh) * 2015-05-29 2015-09-16 北京京东尚科信息技术有限公司 一种网页埋点的方法及装置
CN105550184A (zh) * 2014-10-31 2016-05-04 阿里巴巴集团控股有限公司 一种信息获取方法及装置
CN106156212A (zh) * 2015-04-22 2016-11-23 阿里巴巴集团控股有限公司 一种数据采集方法和系统、及其终端和服务器
CN106598868A (zh) * 2016-12-24 2017-04-26 上海亿账通互联网科技有限公司 对客户端的应用程序动态埋点的方法及系统
CN106933722A (zh) * 2017-03-06 2017-07-07 腾云天宇科技(北京)有限公司 一种网页应用监控方法、服务器和系统
CN107832218A (zh) * 2017-11-10 2018-03-23 平安科技(深圳)有限公司 动态页面中的埋点处理方法、装置和计算机设备
CN108182060A (zh) * 2018-01-31 2018-06-19 北京腾云天下科技有限公司 一种混合应用的埋点方法、移动终端及系统
CN108920354A (zh) * 2018-05-07 2018-11-30 上海陆家嘴国际金融资产交易市场股份有限公司 埋点管理方法、装置、计算机设备和存储介质
CN108920342A (zh) * 2018-05-03 2018-11-30 北京奇虎科技有限公司 一种实现应用的数据采集的方法和装置
CN109408750A (zh) * 2018-09-26 2019-03-01 中国平安财产保险股份有限公司 页面显示方法、装置、计算机设备和存储介质
CN109739725A (zh) * 2018-12-29 2019-05-10 云智慧(北京)科技有限公司 基于浏览器的监控方法、装置、系统及存储介质
CN110109700A (zh) * 2019-05-08 2019-08-09 吉旗(成都)科技有限公司 一种针对iOS App无埋点的数据统计方法及装置
CN110297763A (zh) * 2019-05-29 2019-10-01 联动优势电子商务有限公司 数据采集装置以及方法

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070120986A1 (en) * 2005-11-08 2007-05-31 Takashi Nunomaki Imaging device, information processing method, and computer program
CN105550184A (zh) * 2014-10-31 2016-05-04 阿里巴巴集团控股有限公司 一种信息获取方法及装置
CN106156212A (zh) * 2015-04-22 2016-11-23 阿里巴巴集团控股有限公司 一种数据采集方法和系统、及其终端和服务器
CN104915398A (zh) * 2015-05-29 2015-09-16 北京京东尚科信息技术有限公司 一种网页埋点的方法及装置
CN106598868A (zh) * 2016-12-24 2017-04-26 上海亿账通互联网科技有限公司 对客户端的应用程序动态埋点的方法及系统
CN106933722A (zh) * 2017-03-06 2017-07-07 腾云天宇科技(北京)有限公司 一种网页应用监控方法、服务器和系统
CN107832218A (zh) * 2017-11-10 2018-03-23 平安科技(深圳)有限公司 动态页面中的埋点处理方法、装置和计算机设备
CN108182060A (zh) * 2018-01-31 2018-06-19 北京腾云天下科技有限公司 一种混合应用的埋点方法、移动终端及系统
CN108920342A (zh) * 2018-05-03 2018-11-30 北京奇虎科技有限公司 一种实现应用的数据采集的方法和装置
CN108920354A (zh) * 2018-05-07 2018-11-30 上海陆家嘴国际金融资产交易市场股份有限公司 埋点管理方法、装置、计算机设备和存储介质
CN109408750A (zh) * 2018-09-26 2019-03-01 中国平安财产保险股份有限公司 页面显示方法、装置、计算机设备和存储介质
CN109739725A (zh) * 2018-12-29 2019-05-10 云智慧(北京)科技有限公司 基于浏览器的监控方法、装置、系统及存储介质
CN110109700A (zh) * 2019-05-08 2019-08-09 吉旗(成都)科技有限公司 一种针对iOS App无埋点的数据统计方法及装置
CN110297763A (zh) * 2019-05-29 2019-10-01 联动优势电子商务有限公司 数据采集装置以及方法

Similar Documents

Publication Publication Date Title
CN109062780B (zh) 自动化测试用例的开发方法及终端设备
US20150310209A1 (en) Executing third-party application
CN106484610A (zh) 一种Beta测试方法和装置
CN106295382B (zh) 一种信息风险防控方法及装置
US8639560B2 (en) Brand analysis using interactions with search result items
CN110507986B (zh) 动画信息的处理方法和装置
CN103152391A (zh) 一种日志输出方法和装置
CN106021566A (zh) 一种提高单台数据库并发处理能力的方法、装置及系统
CN112700083A (zh) 构建资源综合利用和服务指数指标体系场景的方法及装置
CN111083008A (zh) 一种基于nginx的流量采集分析方法
CN110334012B (zh) 一种风险评估方法及装置
CN116069577A (zh) 一种rpc服务的接口测试方法、设备及介质
CN106201859A (zh) 一种回归测试方法及系统
CN109992614B (zh) 数据获取方法、装置和服务器
CN112631920A (zh) 一种测试方法、装置、电子设备及可读存储介质
CN107704362A (zh) 一种基于Ambari监控大数据组件的方法及装置
CN116955148A (zh) 业务系统测试方法、装置、设备、存储介质及产品
CN111144987A (zh) 异常购物行为的限制方法、限制组件及购物系统
CN110909284A (zh) 一种数据处理系统以及方法
CN107193721B (zh) 一种生成日志的方法和装置
US20190182343A1 (en) Method and system for tracking application activity data from remote devices and generating a corrective action data structure for the remote devices
CN114895851A (zh) 数据处理方法、装置、存储介质以及电子设备
CN111966892B (zh) 一种数据处理方法和装置,计算机存储介质和电子设备
CN110020166A (zh) 一种数据分析方法及相关设备
CN107766216A (zh) 一种用于获取应用执行信息的方法与设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200324

RJ01 Rejection of invention patent application after publication