CN116860541A - 业务数据采集方法、装置、计算机设备和存储介质 - Google Patents
业务数据采集方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN116860541A CN116860541A CN202210275969.4A CN202210275969A CN116860541A CN 116860541 A CN116860541 A CN 116860541A CN 202210275969 A CN202210275969 A CN 202210275969A CN 116860541 A CN116860541 A CN 116860541A
- Authority
- CN
- China
- Prior art keywords
- node
- link
- target
- current
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 113
- 238000003860 storage Methods 0.000 title claims abstract description 24
- 230000002457 bidirectional effect Effects 0.000 claims description 71
- 230000008859 change Effects 0.000 claims description 58
- 238000004590 computer program Methods 0.000 claims description 27
- 238000004458 analytical method Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 25
- 238000005457 optimization Methods 0.000 description 18
- 230000006399 behavior Effects 0.000 description 15
- 238000005516 engineering process Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 13
- 238000013480 data collection Methods 0.000 description 12
- 238000009933 burial Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 6
- 230000001186 cumulative effect Effects 0.000 description 5
- 238000007405 data analysis Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000002474 experimental method Methods 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000009960 carding Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000013079 data visualisation Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000001364 causal effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000013144 data compression Methods 0.000 description 2
- 230000012010 growth Effects 0.000 description 2
- 238000009776 industrial production Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000036316 preload Effects 0.000 description 2
- 238000004445 quantitative analysis Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241001281643 Solus Species 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011217 control strategy Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004992 fission Effects 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013433 optimization analysis Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000007711 solidification Methods 0.000 description 1
- 230000008023 solidification Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
- G06F11/324—Display of status information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- General Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Computing Systems (AREA)
- Game Theory and Decision Science (AREA)
- Mathematical Physics (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种业务数据采集方法、装置、计算机设备和存储介质。包括:在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识;从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识;确定当前节点的来源节点标识;来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点;将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。该方法拓宽了数据埋点的适用性,提高了网络媒体领域数据埋点的灵活度。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种业务数据采集方法、装置、计算机设备和存储介质。
背景技术
随着计算机技术的发展,系统链路的复杂度越来越高,为了更好的了解掌握系统链路,通常需要对系统链路中主要环节产生的数据进行采集。采集链路中的数据的方法有多种,例如可以利用数据埋点方式采集链路中的数据。
然而,传统技术的数据埋点方法,适用于固定不同的系统链路,并不适用于复杂的系统链路,从而使得利用数据埋点进行数据采集的方式具有较大的局限性。
发明内容
基于此,有必要针对上述技术问题,提供一种能够拓宽数据采集方式的适用性的业务数据采集方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
一方面,本申请提供了一种业务数据采集方法。所述方法包括:在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识;所述当前节点的后向邻接节点为至少一个;从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;确定所述当前节点的来源节点标识;所述来源节点标识唯一对应来源节点,所述来源节点是所述当前节点的各个前向邻接节点中流转至所述当前节点的节点;将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
另一方面,本申请还提供了一种业务数据采集装置。所述装置包括:节点确定模块,用于在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;标识获取模块,用于获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识;所述当前节点的后向邻接节点为至少一个;去向节点标识得到模块,用于从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;来源节点标识确定模块,用于确定所述当前节点的来源节点标识;所述来源节点标识唯一对应来源节点,所述来源节点是所述当前节点的各个前向邻接节点中流转至所述当前节点的节点;业务采集数据得到模块,用于将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,所述目标多路径业务流转链路匹配有邻接节点标识集合;所述邻接节点标识集合,包括所述目标多路径业务流转链路中各个节点的邻接节点的标识,所述当前节点的邻接节点包括后向邻接节点;所述标识获取模块,还用于:从所述目标多路径业务流转链路匹配的邻接节点标识集合中,获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识。
在一些实施例中,所述装置还用于:获取节点变更信息;基于所述节点变更信息,对所述目标多路径业务流转链路的邻接节点标识集合进行变更,得到更新后的邻接节点标识集合,所述更新后的邻接节点标识集合匹配的链路为新的目标多路径业务流转链路,返回在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点的步骤。
在一些实施例中,所述当前节点的来源节点标识和去向节点标识皆为至少一个;所述业务采集数据得到模块,还用于:确定所述当前节点的双向标识组合;每个所述双向标识组合包括一个来源节点标识以及一个去向节点标识,不同的所述双向标识组合中的来源节点标识和去向节点标识中的至少一个不同;对于每个所述双向标识组合,将所述双向标识组合中的来源节点标识和去向节点标识添加至所述当前节点的埋点结构体中,得到所述双向标识组合对应的埋点数据块;基于各个所述双向标识组合对应的埋点数据块,得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,所述业务采集数据得到模块,还用于:对于每个所述双向标识组合,确定与所述双向标识组合中的来源节点标识对应的、且指向所述当前节点的目标埋点数据块;从所述目标埋点数据块中获取存储的累积路径,所述累积路径为从所述目标多路径业务流转链路的起始节点到所述来源节点的一条路径;在获取的所述累积路径的基础上添加所述当前节点的标识,得到更新后的累积路径;将所述双向标识组合中的来源节点标识、去向节点标识以及所述更新后的累积路径,添加至所述当前节点的埋点结构体中,得到所述双向标识组合对应的埋点数据块。
在一些实施例中,所述目标多路径业务流转链路为用于选择与所述目标对象匹配的内容的链路,所述当前节点对应有候选内容;所述装置还用于:从所述当前节点对应的候选内容中选取与所述目标对象匹配的内容,当选取失败时,获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;将所述当前节点的去向节点标识确定为新的当前节点,返回从所述当前节点对应的候选内容中选取与所述目标对象匹配的内容的步骤,直到所述当前节点的去向节点标识为终止节点为止。
在一些实施例中,所述装置还用于:当选取成功时,将所述目标多路径业务流转链路中的终止节点的标识,确定为所述当前节点的去向节点标识。
在一些实施例中,所述装置还用于:当选取成功时,确定内容指示信息;所述内容指示信息用于指示所选中的内容;将所述内容指示信息添加到所述终止节点的埋点结构体中,得到所述终止节点的埋点数据块;基于所述终止节点的埋点数据块中存储的内容指示信息,确定与所述目标对象匹配的目标内容;将所述目标内容推送至所述目标对象。
在一些实施例中,所述目标多路径业务流转链路中的至少一个节点设置有节点进入条件,所述当前节点的去向节点标识是基于所述当前节点的后向邻接节点的节点进入条件选出的;所述装置还包括链路得到模块,所述链路得到模块,用于:获取初始多路径业务流转链路,将所述初始多路径业务流转链路确定为当前多路径业务流转链路;确定通过所述当前多路径业务流转链路为所述目标对象选取的内容,得到当前选取内容;当所述当前选取内容不满足预设内容条件时,调整所述当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过所述当前多路径业务流转链路为所述目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足所述预设内容条件为止;将当前选取内容满足所述预设内容条件时的当前多路径业务流转链路,确定为所述目标多路径业务流转链路。
在一些实施例中,所述目标多路径业务流转链路为目标系统流转链路中的支干链路,所述目标系统流转链路还包括主干链路,所述主干链路以及所述支干链路是基于变更可能度划分得到的,所述支干链路包括多条路径、且所述支干链路的变更可能度小于可能度阈值,所述主干链路的变更可能度大于所述可能度阈值。
在一些实施例中,所述业务采集数据得到模块,还用于:获取执行所述当前节点对应的任务所得到的任务执行相关信息;将所述来源节点标识、所述去向节点标识以及所述任务执行相关信息,添加至所述当前节点的埋点结构体中,得到所述当前节点的埋点数据块;基于所述当前节点的埋点数据块,得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,所述装置还用于:针对所述目标对象在所述目标多路径业务流转链路中产生的各个埋点数据块,从各个所述埋点数据块中获取任务执行相关信息;基于获取的各个所述任务执行相关信息进行数据统计,得到数据统计结果;将所述数据统计结果进行可视化展示。
另一方面,本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述业务数据采集方法中的步骤。
另一方面,本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述业务数据采集方法中的步骤。
另一方面,本申请还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述业务数据采集方法中的步骤。
上述业务数据采集方法、装置、计算机设备、存储介质和计算机程序产品,在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,当前节点的后向邻接节点为至少一个,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识,确定当前节点的来源节点标识,来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点,将来源节点标识和去向节点标识添加至所述当前节点的埋点结构体中,以得到当前节点的业务采集数据。由于目标多路径业务流转链路是多路径的链路,故从目标多路径业务流转链路中经过的路径是不固定的,而将当前节点的来源节点标识以及去向节点标识添加至当前节点的埋点结构体中,使得采集到的业务采集数据(即埋点数据)中包括了与路径相关的信息,实现了在链路不固定的情况下的数据埋点,拓宽了利用数据埋点的方式采集数据的适用性。
附图说明
图1为一些实施例中业务数据采集方法的应用环境图;
图2为一些实施例中业务数据采集方法的流程示意图;
图3为一些实施例中广告的示意图;
图4为一些实施例中闪屏广告流转链路的示意图;
图5为一些实施例中埋点结构体的示意图;
图6为一些实施例中埋点数据块的示意图;
图7为一些实施例中目标多路径业务流转链路的示意图;
图8为一些实施例中数据埋点设计的原理图;
图9为一些实施例中埋点结构体的示意图;
图10为一些实施例中上报数据的流程图;
图11为一些实施例中自动化埋点的原理图;
图12为一些是实施例中的多数据层级的数据流向图;
图13为一些实施例中业务数据采集方法的流程示意图;
图14为一些实施例中业务数据采集装置的结构框图;
图15为一些实施例中计算机设备的内部结构图;
图16为一些实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的业务数据采集方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他服务器上。
具体地,服务器104可以在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点,终端102为目标对象的终端,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,当前节点的后向邻接节点为至少一个,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识,确定当前节点的来源节点标识,来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到当前节点的业务采集数据。服务器104可以基于当前节点的业务采集数据,确定与目标对象匹配的内容,例如可以确定与目标对象匹配的广告,将与目标对象匹配的内容推送至目标对象的终端102。
其中,终端102可以但不限于是各种台式计算机、笔记本电脑、智能手机、平板电脑、智能语音交互设备、车载终端、飞行器、物联网设备、便携式可穿戴设备,物联网设备可为智能音箱、智能电视、智能空调等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一些实施例中,如图2所示,提供了一种业务数据采集方法,该方法可以由终端或服务器执行,还可以由终端和服务器共同执行,以该方法应用于图1中的服务器104为例进行说明,包括以下步骤:
步骤202,在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点。
其中,业务流转链路是用于实现业务的链路,不同的业务可以对应有不同的业务流转链路,业务可以是任何领域中的业务,包括但不限于是网络媒体领域中的业务、视频领域中的业务或数据处理领域中的业务,例如业务可以为网络媒体中进行内容推送的业务。内容包括但不限于是图片、文本、视频或音频中的任意一种,例如可以是广告。广告包括但不限于是闪屏广告、焦点图广告、信息流feeds广告或框内贴片广告中的至少一种。如图3所示,(a)中展示了闪屏广告的示意图,(b)中展示了焦点图广告的示意图,(c)中展示了信息流(feeds)广告的示意图,(d)中展示了框内贴片广告的示意图。闪屏广告也可以称为开屏广告,闪屏广告为开启应用程序时在应用程序的界面上展示的广告。其中,应用程序包括但不限于是购物类的应用程序、支付类的应用程序或即时通讯应用程序中的至少一种。与闪屏广告相关的业务流转链路可以称为闪屏广告流转链路,闪屏广告流转链路可以包括从开启应用程序到展示闪屏广告,再到转化(例如对象购买了闪屏广告中的产品)的整个过程。闪屏广告流转链路属于一种前后端系统链路,既包括前端系统中的流转过程也包括后端系统的流转过程。业务流转链路包括多个节点,每个节点与业务流转链路中的至少一个节点具有流转关系,流转关系具有流转方向,例如节点A与节点B之间具有流转关系,并且流转方向为从节点A流转至节点B。节点可以对应业务中的一个任务,当流转至节点时,则执行该节点对应的任务。
目标多路径业务流转链路是一种路径不固定的链路,也就是说,对于不同的目标对象,从目标多路径业务流转链路中选择出的路径可以是不同的,当然也可能是相同的,例如,目标多路径业务流转链路中包括:路径1:“A→B→C→F”、路径2:“A→B→C→D→F”、路径3:“A→B→C→E→F”以及路径4:“A→B→D→E→F”这4条路径,其中,A、B、C、D、E以及F分别代表节点。目标对象A选择出的路径为路径1和路径2,目标对象选择出的路径为路径4。并且目标多路径业务流转链路中的各个节点之间的关系并非固定的,例如从上述4个路径中可以看出节点D前面的节点可以是C也可以是D。路径是由目标多路径业务流转链路中的多个节点按照流转方向排列形成的,路径中的起始节点对应有一个后向邻接节点,终止节点对应有一个前向邻接节点,路径中间的各个节点对应有一个后向邻接节点以及一个前向邻接节点。目标多路径业务流转链路中的各个节点沿着流转方向排列得到流转链路图。目标多路径业务流转链路中的至少一个的节点的后向邻接节点为多个。节点的后向邻接节点是指流转链路图中与该节点具有连接关系、且排列在该节点之后的节点。
可以是基于目标对象的对象信息或者操作行为中的至少一种,从目标多路径业务流转链路中为目标对象选择路径的。对象信息可以包括对象属性信息或对象设备信息中的至少一个,对象属性包括但不限于是年龄、性别、学历、地域或爱好等中的至少一种。对象设备信息是指目标对象对应的设备的信息。例如,目标多路径业务流转链路中的至少一个设置有节点进入条件,节点进入条件是根据对象信息设置的条件,节点进入条件中限定了所需要满足的条件,节点进入条件包括但不限于是:年龄在预设年龄范围内或性别为预设性别等中的至少一种。节点进入条件还可以包括发生了特定操作行为,特定操作行为用于限定进入节点时目标对象已产生的操作行为,特定操作行为例如是对指定按钮的点击操作。在满足节点的节点进入条件的情况下,才可以流转至该节点。针对不同的目标对象,当该目标对象满足节点进入条件时,则可以流转至该节点,当不满足节点流转条件时,则不可以流转至该节点。目标多路径业务流转链路对应的业务可以是应用程序中的业务,例如可以是应用程序中的闪屏广告业务。其中,目标对象为触发执行目标多路径业务流转链路的对象。例如,对于闪屏广告流转链路,目标对象是触发执行该闪屏广告流转链路的对象,对象可以通过在应用程序(目标多路径业务流转链路对应的业务所属的应用程序)中注册的账号唯一标识。
目标多路径业务流转链路可以是一个独立的业务流转链路,例如可以是一个前后端系统链路,也可以是独立的业务流转链路中的一部分,例如可以为前后端系统链路中的一部分,例如可以为闪屏广告流转链路中的支干链路。闪屏广告流转链路包括从开启应用程序到在应用程序中展示广告的过程,还可以包括对象点击广告到转换(例如对象购买广告中的商品)的过程。其中,闪屏广告流转链路可以划分为主干链路以及支干链路,主干链路相比支干链路具有简单以及不易变更的特点,支干链路相比主干链路具有复杂以及易变更的特点。主干链路中包括了与支干链路对应的虚拟节点,虚拟节点是对支干链路进行封装后形成的节点。支干链路包括多条路径,且对于不同的目标对象,从支干链路中选取的路径可以是不同的,例如可以是根据对象的属性信息选取路径的。主干链路还可以称为一级链路,支干链路还可以称为二级链路。如图4所示,展示了闪屏广告流转链路中的一级链路以及二级链路,其中,一级链路包括预加载阶段以及闪屏启动选单阶段,二级链路为一级链路中的虚拟节点(2-5)以及虚拟节点(2-6)所封装的链路。从图中可以看出,二级链路中存在多条路径,例如,“节点(2-5-1)→节点(2-5-1-1)→节点(2-5-3)”也为一条路径,“节点(2-5-1)→节点(2-5-1-1)→节点(2-5-1-2)→节点(2-5-3)”,在在某些节点裂变成为多条路径同时执行(一拆多),例如,在节点(2-5-2)裂变成为多条路径,节点前后顺序不固定。
具体地,服务器可以从目标多路径业务流转链路中,按照节点之间的流转关系,从目标多路径业务流转链路中确定待进入节点,待进入节点为待进入的节点,例如,首先将目标多路径业务流转链路中的起始节点确定为待进入节点,待进入节点可以有一个或多个,针对每一个待进入节点,若待进入节点设置有节点进入条件,则判断目标对象是否满足节点进入条件,若满足,则将该待进入节点中确定为目标对象的当前节点,若待进入节点未设置节点进入条件,则将待进入节点确定为目标对象的当前节点。其中,起始节点可以为一个或多个,目标多路径业务流转链路中的各个节点沿着流转方向排列得到流转链路图,起始节点为流转链路图中,排列在首位的节点。例如图4中的二级链路中,起始节点包括节点(2-5-1)和节点(2-5-2)。
在一些实施例中,服务器可以从待进入节点中确定目标对象的当前节点,当待进入节点设置有节点进入条件时,服务器可以基于目标对象的对象信息或操作行为,判断对象信息是否符合待进入节点的节点进入条件,当符合时,将该节点确定为目标对象的当前节点。
步骤204,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识;当前节点的后向邻接节点为至少一个。
其中,目标多路径业务流转链路中的至少一个节点的后向邻接节点为多个,节点的后向邻接节点是指位于该节点之后、且与该节点相邻的节点。如图4中,若当前节点为节点(2-5-1-1),则当前节点的后向邻接节点包括节点(2-5-1-2)、节点(2-5-1-3)以及节点(2-5-3)。当前节点的后向邻接节点可以属于目标多路径业务流转链路,也可以不属于目标多路径业务流转链路,例如,例如,当目标多路径业务流转链路为图4中的二级链路时,若当前节点为节点(2-5-3),则后向邻接节点为节点(2-6)。
当前节点还可以具有前向邻接节点,当前节点的前向邻接节点是指与当前节点相邻且位于当前节点之前的节点。当前节点的前向邻接节点可以属于目标多路径业务流转链路,也可以不属于目标多路径业务流转链路,例如,当目标多路径业务流转链路为图4中的二级链路时,当前节点的前向邻接节点可以属于一级链路,例如,若当前节点为节点(2-5-1),则前向邻接节点为节点(2-5)。
具体地,目标多路径业务流转链路可以对应有邻接节点标识集合,邻接节点标识集合中可以包括目标多路径业务流转链路中的各个节点的邻接节点的标识,邻接节点包括后向邻接节点或前向邻接节点中的至少一个。终端可以从邻接节点标识集合中获取当前节点的后向邻接节点的标识。
在一些实施例中,当链路中的节点发生变更时时,可以通过对邻接节点标识集合进行更新,实现对更新链路的目的。具体地,服务器可以获取节点变更信息,节点更新信息是对节点进行更新所需要的信息。服务器可以基于节点更新信息,对邻接节点标识集合进行更新,得到更新后的邻接节点标识集合,更新后的邻接节点标识集合所匹配的链路则为变更后的链路。
步骤206,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识。
其中,当前节点的去向节点标识是从当前节点的后向邻接节点的标识中选取的。当前节点的去向节点标识为至少一个。
具体地,服务器可以将获取的后向邻接节点的标识中的至少一个确定为当前节点的去向节点标识,例如可以从获取的后向邻接节点的标识中,随机选取一个标识确定为当前节点的去向节点标识,或者,将获取的后向邻接节点的标识中每个标识均确定为当前节点的去向节点标识。
在一些实施例中,后向邻接节点具有节点进入条件,服务器可以基于目标对象的对象信息或,判断目标对象是否满足后向邻接节点的节点进入条件,当满足时,将后向邻接节点的标识确定为当前节点的去向节点标识。
步骤208,确定当前节点的来源节点标识;来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点。
其中,来源节点是当前节点的各个前向邻接节点中,向当前节点发生了流转的节点。当前节点的来源节点可以为一个或多个,多个是指至少两个。例如,当目标多路径业务流转链路为图4中的二级链路时,若当前节点为节点(2-5-1-3),则来源节点可以包括节点(2-5-1-1)或节点(2-5-1-2)中的至少一个。来源节点标识为来源节点的标识。当前节点的各个前向邻接节点虽然与当前节点之间具有流转关系,但是并不一定都会发生流转。例如,若当前节点为图4中的节点(2-5-1-3),当流转到节点(2-5-1-2)时,并未向节点(2-5-1-3)发生流转,而是向节点(2-5-3)发生流转,则节点(2-5-1-2)不是节点(2-5-1-3)的来源节点。
步骤210,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
其中,目标多路径业务流转链路中的每个节点可以具有埋点结构体,不同的节点所对应的埋点结构体可以相同也可以不同。埋点结构体中可以包括来源标识填充位置以及去向标识填充位置,来源标识填充位置用于填充来源节点标识,去向标识填充位置用于填充去向节点标识。埋点结构体是数据埋点过程中设置的用于存储采集到的数据的结构,从而得到结构化的数据。数据埋点定义可以包括两个部分,一个是事件,另一个是维度参数,目标多路径业务流转链路中的每个节点对应独立的数据事件,即一个对应一个事件。如图5所示,展示了数据埋点定义出的埋点结构体的示意图。
具体地,服务器可以将当前节点的来源节点标识填充到当前节点的埋点结构体中的来源标识填充位置,并将当前节点的去向节点表示填充到当前节点的埋点结构体中的去向标识填充位置,将填充了来源节点标识以及去向节点标识的埋点结构体确定为当前节点的埋点数据块,一个埋点数据块中仅包括一个来源节点标识以及一个去向节点标识。
在一些实施例中,填充位置可以利用指针实现,可以通过指针存储来源节点的标识以及去向节点的标识,例如,埋点结构体中可以设置有来源指针以及去向指针,来源指针用于存储来源节点标识,去向指针用于存储去向节点标识。举例说明,以目标多路径业务流转链路为图4中的二级链路为例进行说明,如图6所示,展示了图4中的二级链路中的多个节点产生的埋点数据块,每个事件对应一个节点,例如事件(2-5-1)对应节点(2-5-1)。若当前节点为节点(2-5-1),并且节点(2-5-1)的来源节点包括节点2-5,去向节点包括节点2-5-1-1,则可以将节点2-5的标识(例如为节点2-5)设置到来源指针中,将节点2-5-1-1的标识(例如为节点2-5-1-1)设置到去向指针中,生成节点(2-5-1)处的埋点数据块。
在一些实施例中,由于当前节点的来源节点可以为至少一个,去向节点也可以为至少一个,因此,当前节点的埋点数据块可以为至少一个。服务器可以基于当前节点的各个埋点数据块确定为当前节点的业务采集数据,服务器可以将当前节点的后向邻接节点作为新的当前节点,返回获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识的步骤,从而可以采集得到目标多路径业务流转链路中的多个节点的埋点数据块,服务器可以基于在多个节点生成的埋点数据块,得到针对目标对象在该目标多路径业务流转链路中采集到的业务采集数据。
上述业务数据采集方法中,在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,当前节点的后向邻接节点为至少一个,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识,确定当前节点的来源节点标识,来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到当前节点的业务采集数据。由于目标多路径业务流转链路是多路径的链路,故从目标多路径业务流转链路中经过的路径是不固定的,而将当前节点的来源节点标识以及去向节点标识添加至当前节点的埋点结构体中,使得采集到的业务采集数据(即埋点数据)中包括了与路径相关的信息,实现了在链路不固定的情况下的数据埋点,拓宽了利用数据埋点的方式采集数据的适用性。另外,由于本申请中将来源节点标识以及去向节点标识添加到了埋点结构体中,从而即便链路发生变化,由于存储了来源节点标识以及去向节点标识,故也可以正确的进行数据采集,故本申请提供的业务数据采集方式适用于链路容易发生变更的场景中,可以提高的数据埋点(数据采集)的效率。
由于本申请提供的业务数据采集方法,拓宽了利用数据埋点的方式采集数据的适用性,即可以应用于对路径不固定的链路进行数据采集,利用本申请提供的业务采集方法可以实现对网络媒体领域进行数据埋点,提高网络媒体领域中的数据埋点的灵活度。
本申请提出的业务数据采集方法中,将来源节点标识和去向节点标识添加至埋点结构体中,由于来源节点标识指向来源节点,去向节点标识指向去向节点,故来源节点标识以及去向节点标识实际上起到了双向指针的作用,且由于去向节点标识是通过选取的方式确定的,并不是固定的,故呈现出了一种动态,因此本申请提出的业务数据采集方法还可以称为双向指针动态埋点方法。其中,双向指针;来源于计算机C语言中的一种参数传递的遍历查找方法,是链表的一种,她的每个数据结点中有两个指针,分别指向直接后继和直接前驱。从双向链表中的任意一个结点开始,可以很方便地访问它的前驱结点和后继结点。双向链表例如可以是双向循环链表。
实际工业生产和业务环境中,系统链路经常性的发生优化变更,例如技术更迭、新策略实验或临时节点增加等,使得链路中的节点前后次序变化、新增或删除已有环节等,而通常系统链路变更时,需要对链路已有埋点进行重新调序或对上下游接驳部分进行修改变更,甚至需要执行全部埋点重构,变更代建与实现成本较大。而本申请提供的业务数据采集方法,实现了一种双向指针动态埋点方法,不受到固化节点数量或顺序限制,可根据实际工业生产环境的更新要求或技术更迭,快速对链路的节点进行变更(增/删/改)操作,灵活“可插拔式”的调整数据埋点,可随机调整节点的个数、先后顺序、节点裂变形成“一拆多条”路径、节点增加任意数据维度。无需变更原有环节的埋点结构、采集、数仓解析、数仓表设计和计算查询方法,更无需执行数据链路全盘重构,节约了实现技术、时间及实现成本,数据采集实现技术简单,数据解析与处理过程简易,对数仓设计与存储要求第,数据查询与计算遍历快,在链路数据波动或出现问题时,排查方法简单快捷,无需定制化的解析与取数逻辑,提高了定位排查问题根源节点及原因的效率。
本申请提供的业务数据采集方法,可以应用于不同行业、业务和场景中进行数据埋点,进行数据结构的设计并实施数据采集,可快速复制,例如可以应用于订单系统和业务系统等。不受系统流程、系统结构和行业平台的限制。可以面向用户或业务提升,还可以面向数据运维监测,提升问题定位的效率。
在一些实施例中,目标多路径业务流转链路匹配有邻接节点标识集合;邻接节点标识集合,包括目标多路径业务流转链路中各个节点的邻接节点的标识,当前节点的邻接节点包括后向邻接节点;获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识包括:从邻接节点标识集合中,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识。
其中,当前节点的邻接节点包括后向邻接节点,当前节点的邻接节点还可以包括前向邻接节点。
具体地,邻接节点标识集合中包括目标多路径业务流转链路中各个节点的邻接节点的标识,例如包括当前节点的邻接节点的标识,服务器可以从邻接节点标识集合中查询得到当前节点的后向邻接节点的标识。例如,邻接节点标识集合中,可以将当前节点的标识与其邻接节点的标识对应存储,从而可以基于当前节点的标识查询得到其邻接节点的标识。
本实施例中,通过在邻接节点标识集合中存储目标多路径业务流转链路中各个节点的邻接节点标识,使得可以从邻接节点标识集合中确定各个节点的邻接节点标识,从而对各个节点的邻接节点标识进行了统一的管理,提高了获取邻接节点标识的效率。
在一些实施例中,该方法还包括:获取节点变更信息;基于节点变更信息,对目标多路径业务流转链路的邻接节点标识集合进行变更,得到更新后的邻接节点标识集合,更新后的邻接节点标识集合匹配的链路为新的目标多路径业务流转链路,返回在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点的步骤。
其中,节点变更信息包括但不限于是节点新增信息、节点删除信息或者节点位置变更信息中的至少一种。节点新增信息中包括新增节点的标识以及新增节点的位置,新增节点是指向待变更的多路径业务流转链路中增加的节点。新增节点的位置可以包括新增节点的前向邻近节点的标识或后向邻接节点的标识,例如,节点新增信息可以为“C:A→C,C→B”,其中,C为新增节点的标识,A→C表示C的前向邻接节点的标识为A,C→B表示C的后向邻接节点的标识为B。节点删除信息中包括待删除的节点的标识。节点位置变更信息中可以包括待变更位置的节点的标识以及变更后的位置信息。
具体地,基于节点变更信息,对目标多路径业务流转链路的邻接节点标识集合进行变更,将变更后的邻接节点标识集合确定为更新后的邻接节点标识集合,更新后的邻接节点标识集合所匹配的链路为新的目标多路径业务流转链路,利用更新的邻接节点标识集合,从新的目标多路径业务流转链路中采集针对目标对象的业务采集数据。从而当链路中的节点发生变更时,无需执行链路从头整理与重构,实现了灵活“可插拔式”调整数据埋点,节约了埋点成本与资源。
在一些实施例中,节点变更信息包括新增节点的标识以及新增节点的邻接节点标识,服务器可以基于新增节点的邻接节点标识确定待更新节点,在待变更的多路径流转链路的邻接节点标识集合中存储的待更新节点的邻接节点标识中,加入新增节点的标识,并将新增节点与新增节点的邻接节点标识对应存储到待变更的多路径流转链路的邻接节点标识集合中,得到目标多路径业务流转链路的邻接节点标识集合。其中,新增节点的邻接节点标识可以包括新增节点的前向邻接节点的标识或后向邻接节点的标识中的至少一个。新增节点的邻接节点属于待变更的多路径流转链路,服务器可以将新增节点的前向邻接节点或后向邻接节点中的至少一个确定为待更新节点,例如,服务器可以将新增节点的前向邻接节点确定为待更新节点,将新增节点的标识作为该待更新节点的后向邻近节点标识加入到邻接节点标识集合中,服务器可以将新增节点的后向邻接节点确定为待更新节点,将新增节点的标识作为该待更新节点的前向邻接节点标识加入到邻接节点标识集合中,形成更新后的邻接节点标识集合,将更新后的邻接节点标识集合确定为目标多路径业务流转链路的邻接节点标识集合。
本实施例中,获取节点变更信息,基于节点变更信息,对目标多路径业务流转链路的邻接节点标识集合进行变更,得到更新后的邻接节点标识集合,更新后的邻接节点标识集合匹配的链路为新的目标多路径业务流转链路,返回在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点的步骤,从而通过变更邻接节点标识集合而快速的适应了节点的变更,从而当链路中的节点发生变更的情况下,通过变更邻接节点标识集合,并且从变更后的邻接节点标识集合中确定当期节点的后向邻接节点,可以采集到与变更后的链路所适用的业务采集数据。而无需执行链路从头整理与重构,实现了灵活“可插拔式”调整数据埋点,节约了埋点成本与资源。
目前,当链路发生变化时,需要重新的进行数据埋点,而本申请实施例中,当链路发生变化时,通过更新邻近节点标识集合并在埋点结构体中添加来源节点标识以及去向节点标识,可以自适应链路的变更,采集到与变更后的链路所符合的数据,提高了基于数据埋点的数据采集方式的采集效率。
在一些实施例中,当前节点的来源节点标识和去向节点标识皆为至少一个;将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据包括:确定当前节点的双向标识组合;每个双向标识组合包括一个来源节点标识以及一个去向节点标识,不同的双向标识组合中的来源节点标识和去向节点标识中的至少一个不同;对于每个双向标识组合,将双向标识组合中的来源节点标识和去向节点标识添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块;基于各个双向标识组合对应的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
具体地,当前节点的来源节点可以有一个或多个,当前节点的去向节点可以有一个或多个,当前节点的双向标识组合中包括一个来源节点标识以及一个去向节点标识,对于每个双向标识组合,服务器可以将该双向标识组合中的来源节点以及去向节点标识填充到当前节点的埋点结构体中,得到该双向标识组合对应的埋点数据块,基于当前节点的各个双向标识组合的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
本实施例中,对于每个双向标识组合,将双向标识组合中的来源节点标识和去向节点标识添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块,基于各个双向标识组合对应的埋点数据块,得到当前节点的业务采集数据,从而可以基于当前节点的来源节点标识以及去向节点标识生成多个埋点数据块,细化了采集的数据的信息,有利于基于采集到的数据进行分析。
在一些实施例中,对于每个双向标识组合,将双向标识组合中的来源节点标识和去向节点标识添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块包括:对于每个双向标识组合,确定与双向标识组合中的来源节点标识对应的、且指向当前节点的目标埋点数据块;从目标埋点数据块中获取存储的累积路径,累积路径为从目标多路径业务流转链路的起始节点到来源节点的一条路径;在获取的累积路径的基础上添加当前节点的标识,得到更新后的累积路径;将双向标识组合中的来源节点标识、去向节点标识以及更新后的累积路径,添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块。
其中,来源节点标识对应的、且指向当前节点的目标埋点数据块,是指属于来源节点标识所标识的节点、且去向节点标识为当前节点的标识的埋点数据块,即目标埋点数据块属于该来源节点标识所标识的节点的埋点数据块,并且目标埋点数据块中存储的去向节点标识为当前节点的标识。
具体地,服务器可以从目标埋点数据块中获取存储的累积路径,在获取的累积路径的基础上添加当前节点的标识,得到更新后的累积路径,例如,累积路径为“A→B→C”,当前节点的标识为D,则更新后的累积路径为“A→B→C→D”。
在一些实施例中,当前节点的埋点结构体包括来源标识填充位置、去向标识填充位置以及累积路径填充位置,服务器可以将双向标识组合中的来源节点标识添加到来源标识填充位置,将双向标识组合中的去向节点标识填充到去向标识填充位置处,将更新后的累积路径填充到累积路径填充位置,得到该双向标识组合对应的埋点数据块。
在一些实施例中,埋点结构体中可以设置有指针数组,可以通过指针数组来存储累积路径,具体地,可以将累积路径中的各个节点的标识存储到指针数组中,节点在累积路径的位置越靠前,则节点的标识在指针数据中的位置越靠前。
举例说明,以目标多路径业务流转链路为图4中的二级链路为例进行说明,如图6所示,展示了图4中的二级链路中的多个节点产生的埋点数据块,以当前节点为节点(2-5-1-1)为例,当期节点的埋点结构体中的“路径(指针数据)”表示用于存储累积路径的指针数组,节点(2-5-1-1)的前向邻接节点包括节点(2-5-1),而节点(2-5-1)的埋点数据块中存储的累积路径为“事件2-5-》事件2-5-1”,则可以在“事件2-5-》事件2-5-1”的基础上添加当前节点的标识(例如事件(2-5-1-1)),得到“事件2-5-》事件2-5-1-》事件(2-5-1-1)”,并将“事件2-5-》事件2-5-1-》事件(2-5-1-1)”设置到“路径(指针数据)”中。
本实施例中,将双向标识组合中的来源节点标识、去向节点标识以及更新后的累积路径,添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块,从而生成的埋点数据块中包括了累积路径,从而使得采集到的数据中包括了更多的与路径相关的信息,提高了采集到的数据的丰富程度。
在一些实施例中,目标多路径业务流转链路为用于选择与目标对象匹配的内容的链路,当前节点对应有候选内容;获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识包括:从当前节点对应的候选内容中选取与目标对象匹配的内容,当选取失败时,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识;该方法还包括:将当前节点的去向节点标识确定为新的当前节点,返回从当前节点对应的候选内容中选取与目标对象匹配的内容的步骤,直到当前节点的去向节点标识为终止节点为止。
其中,目标多路径业务流转链路为用于选择与目标对象匹配的内容的链路。内容可以是任意形式的,包括但不限于是文本、图片、视频或音频中的至少一种,例如可以是广告。目标多路径业务流转链路中的一个或者多个节点可以对应有候选内容。多个是指至少两个。当前节点对应的候选内容可以有一个或多个,例如,当前节点可以对应有一类广告,该类广告可以包括多个广告。终止节点是指目标多路径业务流转链路中排列在最后的节点,即为流转链路图中排列在最后的节点。
具体地,当目标对象处于当前节点时,服务器可以从当前节点的候选内容中选取与目标对象匹配的内容,可以是根据目标对象的对象属性选取的。当选取到与目标对象匹配的内容时,则将目标多路径业务流转链路的终止节点的标识,确定为当前节点的去向节点标识,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,生成当前节点的埋点数据块。
在一些实施例中,服务器在为目标对象选取所匹配的内容的过程中,当确定超时时,则将目标多路径业务流转链路的终止节点的标识,确定为当前节点的去向节点标识。具体地,服务器可以统计进入目标多路径业务流转链路的时长,将统计出的时长与时长阈值进行比对,当确定统计出的时长达到时长阈值时,确定超时。其中,时长阈值可以预设或根据需要设置。
举例说明,以目标多路径业务流转链路为图7中的二级链路、且内容为广告为例进行说明,若当前节点为节点(2-5-1-1),节点(2-5-1-1)对应第一类广告,在从第一类广告中未选择出与目标对象匹配的广告的情况下,由于节点(2-5-1-1)的后向邻接节点包括节点(2-5-1-2)以及节点(2-5-1-3),则可以从节点(2-5-1-2)以及节点(2-5-1-3)中确定去向节点标识,例如,节点(2-5-1-2)以及节点(2-5-1-3)均设置有节点进入条件,若目标对象满足节点(2-5-1-2)的节点进入条件,则将节点(2-5-1-2)的标识确定为去向节点标识,若目标对象满足节点(2-5-1-3)的节点进入条件,则将(2-5-1-3)的标识确定为去向节点标识,当目标对象即满足节点(2-5-1-2)的节点进入条件,也满足节点(2-5-1-3)的节点进入条件时,则将节点(2-5-1-2)的标识以及节点(2-5-1-3)的标识均确定为去向节点标识。以去向节点标识为节点(2-5-1-2)的标识为例,则将节点(2-5-1-2)确定为新的当前节点,从节点(2-5-1-2)对应的第二类广告中选取与目标对象匹配的广告。其中,广告包括但不限于是SPA(Solus Par Agula,水疗)类广告以及CPD(Cost per day)类广告中的至少一种。
本实施例中,当选取失败时,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识,从而根据去向节点标识灵活的确定下一个流转至的节点,提高了流转的灵活性。
在一些实施例中,该方法还包括:当选取成功时,将目标多路径业务流转链路中的终止节点的标识,确定为当前节点的去向节点标识。
具体地,当选取到与目标对象匹配的内容时,服务器可以将目标多路径业务流转链路的终止节点的标识,确定为当前节点的去向节点标识,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,生成当前节点的埋点数据块。
举例说明,以目标多路径业务流转链路为图7中的二级链路、且内容为广告为例进行说明,若当前节点为节点(2-5-1-1),节点(2-5-1-1)对应第一类广告,在从第一类广告中选取出与目标对象匹配的广告的情况下,则将终止节点(2-5-3)的标识确定为去向节点标识,即从节点(2-5-1-1)向节点(2-5-3)发生了流转。
本实施例中,当选取成功时,将目标多路径业务流转链路中的终止节点的标识,确定为当前节点的去向节点标识,提高了选取对象的效率。
在一些实施例中,该方法还包括:当选取成功时,确定内容指示信息;内容指示信息用于指示所选中的内容;将内容指示信息添加到终止节点的埋点结构体中,得到终止节点的埋点数据块;基于终止节点的埋点数据块中存储的内容指示信息,确定与目标对象匹配的目标内容;将目标内容推送至目标对象。
其中,内容指示信息用于指示所选中的内容,内容指示信息可以包括所选中的内容的标识、所选中的内容的下载地址中的至少一个。
具体地,终止节点的埋点结构体中还可以包括内容指示信息的填充位置,服务器可以将内容指示信息填充到该填充位置,得到终止节点的埋点数据块。
在一些实施例中,当选取成功时,服务器可以将当前节点的标识确定为终止节点的来源节点标识,将当前节点的标识以及该内容指示信息填充到终止节点的埋点节点体中,得到终止节点的埋点数据块。终止节点的埋点数据块中还可以填充指示选取结果的标识,选取结果为选取成功和选取失败中的任意一种,如图6中节点(事件)(2-5-3)的埋点数据块中,若选取成功,则在“当前状态表示”处填充的“1”,若选取失败,则在“当前状态表示”处填充“0”。
在一些实施例中,在超时的情况下还未选中内容时,服务器可以获取预设指示信息,将预设指示信息添加到终止节点的埋点结构体中,得到终止节点的埋点数据块,预设指示信息用于指向预设内容,预设内容为预先设置的内容,例如可以是预先指定的广告。预设指示信息可以包括预设内容的标识、预设内容的下载地址中的指示一个。当然,预设内容也可以是空的内容。
在一些实施例中,终止节点的埋点数据块可以有多个,包括在选取成功的情况下生成的埋点数据块以及在超时的情况下生成的埋点数据块。服务器可以从终止节点的各个埋点数据块中确定有效埋点数据块,例如,服务器可以根据耗时或路径长度中的至少一个选取有效埋点数据块,路径长度是指终止节点的埋点数据块中存储的累积路径中包括的节点标识的数量,例如累积路径包括5个节点标识,则路径长度为5。例如可以将耗时最短的路径,确定为有效埋点数据块,或者将路径最短的埋点数据块确定为有效埋点数据块。当选取的有效埋点数据块为在选取成功的情况下生成的埋点数据块时,服务器可以将有效埋点数据块中存储的内容指示信息所指示的内容确定为目标内容。当选取的有效埋点数据块为在超时的情况下生成的埋点数据块时,则将有效数据块中存储的预设指示信息所指示的内容确定为目标内容。
在一些实施例中,服务器还可以在终止节点的埋点数据块中,填充用于标识该埋点数据块是否为有效埋点数据块的信息,如图6中节点(事件)(2-5-3)的埋点数据块中,若埋点数据块为有效埋点数据块,则在“是否命中路径”处填充“1”,若埋点数据块不为有效埋点数据块,则在“是否命中路径”处填充“0”。
在一些实施例中,当目标多路径业务流转链路为独立链路中的一部分时,则可以将内容指示信息传递到独立链路中的其他节点中,通过执行其他节点对应的任务将目标内容推送至目标对象。举例说明,以目标多路径业务流转链路为图7中的二级链路、且内容为广告为例进行说明,若当前节点为节点(2-5-1-1),节点(2-5-1-1)对应第一类广告,当从第一类广告中选取出与目标对象匹配的广告的情况下,确定所选取的广告对应的指示信息,将选取的广告对应的指示信息添加到终止节点(2-5-3)的埋点结构体中,得到终止节点(2-5-3)对应的埋点数据块。服务器可以将广告的指示信息传递至节点(2-7),通过执行节点(2-7)的用于曝光广告的任务,将广告发送至目标对象的终端。本实施例中,当当前节点的去向节点标识为终止节点的标识时,确定内容指示信息,将内容指示信息添加到终止节点的埋点结构体中,得到终止节点的埋点数据块,基于终止节点的埋点数据块中存储的内容指示信息,确定与目标对象匹配的目标内容,将目标内容推送至目标对象,提高了内容推送的效率。
在一些实施例中,目标多路径业务流转链路中的至少一个节点设置有节点进入条件,当前节点的去向节点标识是基于当前节点的后向邻接节点的节点进入条件选出的;得到目标多路径业务流转链路的步骤如下:获取初始多路径业务流转链路,将初始多路径业务流转链路确定为当前多路径业务流转链路;确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容;当当前选取内容不满足预设内容条件时,调整当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足预设内容条件为止;将当前选取内容满足预设内容条件时的当前多路径业务流转链路,确定为目标多路径业务流转链路。
其中,初始多路径业务流转链路中的至少一个节点设置有节点进入条件,初始多路径业务流转链路中的节点的节点进入条件可以是根据需要预先设置的。通过更新节点的节点进入条件,可以使得通过链路为目标对象选择出的目标对象发生变化,例如,节点进入条件变更之前,链路选择出的内容为S1,节点进入条件变更后,链路选出的内容为S2,从而通过变更节点的节点进入条件,可以使得选出的内容符合预设的要求。从而可以灵活的控制链路进行内容的选取。
预设内容条件为预设的条件,包括但不限于是内容的类型属于预设类型范围或价值属于预设价值范围等中的至少一种,例如,当内容为广告时,预设内容条件可以包括广告的类型或广告中产品的价值等中的至少一种。
具体地,针对当前多路径业务流转链路,服务器可以从当前多路径业务流转链路中,确定目标对象对应的当前节点,若当前节点对应有候选内容,则从当前节点的候选内容中选取内容,当选取成功时,获取选取的内容的内容指示信息,将当前节点的标识作为终止节点的来源节点标识,添加到终止节点的埋点结构体中,并将内容指示信息加入到该埋点节点体中,生成终止节点的埋点数据块,当选取失败时,则获取当前节点在当前多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识,将当前节点的去向节点标识确定为新的当前节点,返回获取当前节点在当前多路径业务流转链路中的后向邻接节点的标识,直到当前节点为终止节点为止。其中,当当前节点的后向邻接节点的标识为终止节点时,则将终止节点的标识确定为当前节点的去向节点标识,生成当前节点的埋点数据块,并将当前节点的标识确定为终止节点的来源节点标识,生成终止节点的埋点数据块。从而得到终止节点的各个埋点数据块,从终止节点的各个埋点数据块中选取有效埋点数据块,将有效埋点数据块中的内容指示信息所指示的内容确定为当前选取内容。
在一些实施例中,当当前选取内容不满足预设内容条件时,服务器可以调整当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足预设内容条件为止,当当前选取内容满足预设内容条件时,将当前多路径业务流转链路确定为目标多路径业务流转链路。本实施例中,获取初始多路径业务流转链路,将初始多路径业务流转链路确定为当前多路径业务流转链路,确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容,当当前选取内容不满足预设内容条件时,调整当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足预设内容条件为止,将当前选取内容满足预设内容条件时的当前多路径业务流转链路,确定为目标多路径业务流转链路,从而可以灵活的控制链路进行内容的选取,提高了选取内容的灵活性。
在一些实施例中,目标多路径业务流转链路为目标系统流转链路中的支干链路,目标系统流转链路还包括主干链路,主干链路以及支干链路是基于变更可能度划分得到的,支干链路包括多条路径、且支干链路的变更可能度小于可能度阈值,主干链路的变更可能度大于可能度阈值。
其中,变更可能度可以是预设或根据需要设置的,变更可能度用于反映链路发生变更的频率,变更可能度越大则链路发生变更的频率越大,变更可能度越小则链路发生变更的频率越小。
目标系统流转链路可以是对目标系统的系统流程图进行抽象、归纳合并所得到的链路。例如,可以将复杂系统流程的各程序模块、流转路径进行通盘梳理,构画出系统流程图。系统流程图中,可以将一个独立的选择模块或判断条件(以唯一确定的走向作为切分依据)抽象形成一个全链路环节。系统流程中包括多个全链路环节。全链路环节也可以称为节点。得到系统流程图后,可以将系统流程图中的同类型的节点或相邻的节点进行合并,得到目标系统流转链路,以减少节点的数量,将环节数量控制在合理分析范围内。
得到目标系统流转链路后,可以结合链路特性将目标系统流转链路进行分而治之,拆分形成一级链路以及二级链路,分批进行埋点规划。链路特性包括但不限于是顺序、依赖关系、变更频繁程度、漏损预期或节点重要程度等中的至少一个。一级链路为主干链路,二级链路为支干链路。
支干链路具有复杂或易变的特征,例如支干链路中包括多条路径,例如,可以包括判断节点从而使得路径为多条,支干链路中的节点容易受到技术迭代优化的影响,更新速度快,易于产生增、删或减的操作,并且支干链路中的节点的顺序灵活多变,没有长期固定的路径,且有时路径不可穷举,例如,当支干链路中的节点数量为n时,则各节点排列组合情况下产生的路径条数为n的n次方。
主干链路具有稳定和简单的特点,例如主干链路中的节点具有以下特征中的至少一个:前后顺序固定、不易产生变更,或主要变更起、止节点,不影响重点环节顺序,节点数量可控且在合理范围内。
主干链路中包括支干链路的入口汇聚节点以及出口汇聚节点,入口汇聚节点以及出口汇聚节点是虚拟的节点,通过入口汇聚节点以及出口汇聚节点,将支干链路封装在了主干链路中,从而使得主干链路简单化。目标系统流转链路例如为闪屏广告流转链路。
对于主干链路可以采用本申请提供的业务数据采集方法进行数据采集(即数据埋点),也可以利用其他的方式进行数据采集。例如,可以采用普通型埋点法实现对主干链路的数据采集。其中,普通型埋点法:即通用的埋点设计方法,核心做法是将抽象后的每一个链路、环节或行为,无歧义排他的分别设计为一个独立事件,互不干扰。如图8所示,对于图4中的主干链路中的预加载阶段,为预加载阶段中的每个节点分别设计了一个独立的事件。
普通型埋点法适用于通用类的数据场景,例如适用于结构或主干流程固化不易变更、事件之间无依赖相互独立的场景中。普通型埋点法的数据结构主包括但不限于有事件定义、行为上报时机和维度中的至少一种,其中,维度包括公共参数、页面参数或私有业务参数中的至少一种。
如图9所示,展示了普通型埋点法中的数据事件的数据结构,即定义的埋点结构体。其中,事件定义:即需要为每个链路独立环节设置独立的事件,唯一并排他的代表一个数据行为集合(多个同类行为可归纳并复用形成同一数据事件,将行为作为数据维度区分即可,但增加了数据结构的复杂度和解析难度),数据事件为数据采集物理隔离的基本单位,数据事件之间互不干扰,无混合污染。行为上报时机:行为发生的时机定义,准确描述数据埋点的触发条件、场景和时机。维度:具体行为描述的统称,用于描述事件的某种特征。若从数据存储类型上分类,维度可以分为定性维度和定量维度,数据类型为字符型即文本型的数据属于定性维度,例如区域、性别和手机机型属于定性维度。数据类型为数值型的数据为定量维度,例如年龄和订单号属于定量维度。若从APP(application,应用程序)工业场景的数据应用集结余便宜性上分类,可以将维度划分为公共参数、页面参数以及私有业务参数。其中,公共参数为APP埋点上报中基本具备的用户及设备参数,APP上报事件中包括公共参数,公共参数包括但不限于是时间戳、设备标识,用户标识、操作系统型号、终端版本或启动方式等中的至少一种。页面参数描述了链路环节或对象行为发生时,具体所在APP页面的业务场景信息,包括但不限于所在的页面的页面标识、频道、栏目专辑标识、品类分级、来源页面标识或来源频道标识等中的至少一种。私有业务参数为业务或子业务线(部门)所需要的特征参数,例如广告业务涉及广告订单标识、广告品类、广告行业等,直播业务涉及直播场次标识、主播姓名以及主播类型等。
本实施例中,由于主干链路以及支干链路是基于变更可能度划分得到的,支干链路的变更可能度小于可能度阈值,主干链路的变更可能度大于可能度阈值,而将支干链路作为目标多路径业务流转链路,实现了将目标系统流转链路中容易发生变更的链路采用本申请提供的业务数据采集方式进行数据采集,提高了对复杂链路的数据采集的效率。
在一些实施例中,将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据包括:获取执行当前节点对应的任务所得到的任务执行相关信息;将来源节点标识、去向节点标识以及任务执行相关信息,添加至当前节点的埋点结构体中,得到当前节点的埋点数据块;基于当前节点的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
其中,目标多路径业务流转链路中的节点可以对应有任务,例如,节点的任务为从候选内容中选取出与目标对象所匹配的内容的任务。任务执行相关信息是与执行节点对应的任务相关的信息。当前任务执行相关信息是与执行当前节点的任务相关的信息。任务执行相关信息包括但不限于是任务执行结果、任务执行耗时中的至少一种,任务执行结果可以为成功或失败中的任意一种,当任务执行成功时,任务执行结果为成功,当任务执行失败时,任务执行结果为失败。任务执行耗时是指执行任务所消耗的时长,当任务执行失败时,任务执行相关信息中还可以包括失败的原因。以任务为选取广告为例,当成功的选取出与目标对象匹配的广告时,则任务执行成功,当未选取出与目标对象匹配的广告时,则任务执行失败。如图6中的事件(2-5-1)对应的埋点数据块中,当前状态表示、节点失败原因以及当前节点耗时均属于任务执行相关信息。
具体地,服务器可以将来源节点标识、去向节点标识以及当前任务执行相关信息,添加至当前节点的埋点结构体中,得到当前节点的埋点数据块,基于当前节点的埋点数据块,从而生成了目标对象在当前节点处的埋点数据块,根据目标对象在目标多路径业务流转链路中的多个节点生成的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,埋点结构体中用于存储的参数类型可以包括业务私有参数、内置参数、公共参数或页面参数中的至少一种,私有业务参数可以包括来源指针、去向指针、路径、当前状态表示、节点失败原因、节点耗时等参数中的至少一种。
内置参数可以是服务器自动收集的,例如服务器上可以运行有埋点上报SDK,内容参数可以是该埋点上报SDK自动收集的。业务参数(即私有业务参数)可以是通过业务方自行设置的。可通过自动埋点方式触发,也可手动触发事件。当事件个数达到缓存池阈值时,自动将数据上报给后台。如图10所示,展示了上报数据的流程图。其中,手动触发则是用户在对应的业务逻辑点做上报,只需调用上层的API,SDK会自动做参数收集、去重、校验等逻辑。自动埋点方式例如可以为AOP埋点方式。如图11所示,展示AOP触发的原理图。
本实施例中,获取执行当前节点对应的任务所得到的任务执行相关信息;将来源节点标识、去向节点标识以及任务执行相关信息,添加至当前节点的埋点结构体中,得到当前节点的埋点数据块,基于当前节点的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据,从而使得采集到的埋点数据块中包括了与任务相关的信息,提高了数据的丰富程度,为进行数据分析提供了条件。
在一些实施例中,该方法还包括:针对目标对象在目标多路径业务流转链路中产生的各个埋点数据块,从各个埋点数据块中获取任务执行相关信息;基于获取的各个任务执行相关信息进行数据统计,得到数据统计结果;将数据统计结果进行可视化展示。
其中,数据统计结果是基于任务执行相关信息进行统计所得到的结果。任务执行相关信息可以包括任务执行耗时,数据统计结果中可以包括对任务执行耗时进行统计所得到的结果。
具体地,服务器可以针对目标对象在目标多路径业务流转链路中产生的各个埋点数据块,从埋点数据块中获取任务执行耗时,基于各个任务执行耗时进行统计运算,得到耗时统计结果,将耗时统计结果进行可视化展示。
在一些实施例中,服务器可以对采集到的数据进行上报给数据分析系统,或者直接对采集到的数据进行分析。由于采集到的数据量通常较大,例如,对于闪屏广告流转链路,用户启动次数达每日10多亿次,全部链路环节所产生的数据达到几百或上千亿条/天,存储达几千GB(Gigabyte,兆字节),无法长时间存储和并且快速分析能力需要耗费大量计算资源。但基于工业业务应用与优化分析结果出发,实际不需要长久保留原始数据,日常分析基本无需查看大量原始流水日志数据,而是需要将数据进行轻量级、或应用级汇总,计算得出对当前业务有参考价值的统计数据结果(即指标),因此可以进行数据压缩。数据压缩可以使得以较小的计算资源代价快速满足业务分析诉求,同时数据指标可存储较长时间以便长期数据回溯与建模应用。数据采集、清洗,数据指标设计与数仓构建:通过关键节点及路径的日志搜索、数据清洗处理、核心指标设计与建设、数仓的构建,将采集好的数据形成可看可用的指标。设计可视化系统(含数据模型),形成闪屏广告全链路异动归因体系。
以APP闪屏广告流转链路为例,按照业务与技术部门主要需求可划分为两大类:1)形成数据漏斗,监测环节的总量变化(含成功与失败损耗);并具备波动情况快速排查、问题定位能力:对波动进行归因分析/因果推断,挖掘各节点变化量背后导致的原因;2)基于链路损耗情况与业务/技术改进方向,对链路中节点实施策略干预,并通过数据量化干预结果,最终实现链路优化(包括链路失败减损、动态分层策略、广告频控、用户体验提升等)。
为了满足不同的需要,离线数据建立多个数据层级,多个数据层级可以包括ODS层、DWD层、DWM层、DWS层以及ADS层中的至少两层。其中,ODS为Operation Data Store的缩写,ODS表示数据准确区,贴源层。DWD为Data warehouse details的缩写,DWD表示数据细节层。DWM为Data warehouse middle的缩写,DWM表示数据中间层。DWS为Data warehouseservice的缩写,DWS表示数据服务层。ADS为application data service的缩写,ADS表示数据应用层。如图12所示,展示了各个数据层级的数据流向图。首先,基于原始数据(即上报的数据),建立数据仓库明细层(DWD层),解析各类不同格式的上报数据,该数据接入olap分析平台,满足细粒度问题定位和分析。基于DWD层,建立面向闪屏的数据服务层数据(DWS层),该数据针对具体分析诉求,保留关键维度合计算关键指标,该数据接入olap分析平台,可以实现数据的可视化和损耗监测以及请求和订单粒度的问题监测。基于服务层数据,建立应用层结果数据,该数据在服务层上进行进一步的聚合,数据量级和存储均收敛到可控范围。实际存储和使用过程中,可以针对不同层级数据设立对应的存储时间,满足长期和短期排查问题的诉求。
在建设完成DWD、DWS以及ADS数据指标体系基础上,可导入可视olap工具平台形成漏斗数据可视化效果,并通轻量计算满足日常多维下钻与关联分析诉求。在可视化方面,可以开发自助数据工具或者使用现有工具(例如Tableau)等,也可以通过代码(例如python))实现负载可视与下钻,从而可以展示数据初级可视化、洞察分析与监测效果。例如,对于闪屏广告流转链路中的一级链路的固化节点,上报的数据中包括各个节点的损耗以及失败原因,从而可以直观显示链路中各个节点的损耗情况、失败原因等;同时,在工具中导入常用数据维度(如日期、启动方式、手机客户端系统类型)进行简单的多维下钻分析。对于广告闪屏链路中的二级链路,对于使用双向指针动态埋点方法采集后的数据,可在出口节点获取并统计全部系统选单路径,并形成路径桑吉图,用于可视化以及量化分析常用路径状况与节点遍历频率等。还可以对链路节点的特定维度进行统计与洞察,例如,对于广告闪屏链路中的二级链路,可以获取独立事件中的特定维度(如耗时),汇总统计形成耗时独立指标,并计算其出现频次,形成热力图进行洞察,也可以指定埋点维度(例如广告类型、每个节点的去向成分比例等),形成饼图进行分析。还可以对链路进行日常定位,除对于链路中节点的日常情况分析(横向)外,也可以进行长周期时间的波动监测(纵向)和定位,例如可以将时间窗口加长为1周、1个月或1年来查看数据的趋势变化情况,并定位归因其趋势或波动的形成原因。
在一些实施例中,可以通过AB实验降低链路的损耗。例如,基于统计与洞察分析的结果,链路中各个节点之间的流转gap、损耗原因、失败或成功情况已可执行量化分析,并指定与之对应的优化干预策略。例如,假设通过数据漏斗确定APP启动与闪屏广告sdk调用之间存在43%的损耗率,其中,22%源于启动方式导致的损耗,并且在多维下钻分析后可知特定启动方式的成功率低下,则可以对此类维度(画像标签)用户进行策略干预,如启动方式的优化或拓展等。最终,通过AB test的方式划分小流量用户进行对照实验,并评估实际策略干预的效果和影响。本申请通过实验,达到链路减损超过34%,全局收益增长超过15%的正向效果。
在一些实施例中,可以通过科学算法模型,对周期数据进行时序的自动化预测,并以相对高的检测灵敏度(真实值-预测值)执行波动告警,减少误判以及人工观测的工作量。也可以通过因果推断或归因分析模型,进行根因分析并自动化得出数据波动的主要成因子维度或成分。例如,可以选取与广告业务数据情况相结合贴切的facebook prophet模型进行时序的预测与自动化告警,以及采用adtributor算法进行波动归因分析。
在一些实施例中,对于策略干预优化部分,可以基于数据洞察结果执行人工干预策略,比如拓展启动方式或变更特定启动方式下的广告选单策略。然而,人工策略需要长期多次执行数据洞察来捕捉用户结构或链路结构的变化,并随即调整人工干预策略使之与新的用户或链路特性相符合,因此,人工干预策略的优化方式属于链路优化的初级方式。可以采用动态策略进行优化,通过制定并部署特定规则的动态优化模型,以线性或动态优化的解代替人工一次性策略。以用户启动APP后闪屏广告的出单策略为例:互联网APP,为减少过渡的用户打扰可以采取频率控制策略,设定闪屏广告在热启动情况下,若用户切换前后台时间阈值小于等于3分钟时,则不再出闪屏广告以保障用户体验,某些基于通过广告营销变现增收公司,则将阈值设定为1分钟,但可能会面临用户投诉或卸载APP的情况,此类场景中,关于阈值3分钟或1分钟的策略定于,可以采用动态策略,通过用户分层及线性优化的方式,动态生成每个用户定制的平路控制阈值解。例如,可以将全局用户按照商业价值高、中、低,广告耐受程度高、中、低进行用户分层,将全局的收益指标、用户体验指标以及业务核心指标作为线性优化模型的限制条件,以收益结果作为优化目标,属于预制分钟的优化结果。
本实施例中,针对目标对象在目标多路径业务流转链路中产生的各个埋点数据块,从各个埋点数据块中获取任务执行相关信息,基于获取的各个任务执行相关信息进行数据统计,得到数据统计结果,将数据统计结果进行可视化展示,提高了数据的直观性。
本申请还提供一种应用场景,该应用场景为涉及到网络媒体中的闪屏广告,目标多路径业务流转链路为闪屏广告流转链路中的目标二级链路,目标二级链路为用于选取广告的二级链路,该应用场景应用上述的业务数据采集方法。如图13所示,具体地,该方法可以由终端或服务器执行,还可以由终端和服务器共同执行,以该方法应用于服务器为例进行说明,该业务数据采集方法在该应用场景的应用如下:
步骤1302,在确定目标对象的终端中触发了开启应用程序的情况下,在闪屏广告流转链路中的目标二级链路中,确定目标对象对应的当前节点,目标二级链路为用于选取广告的二级链路。
其中,闪屏广告流转链路包括主干链路(即一级链路)以及支干链路(即二级链路),主干链路以及支干链路是基于变更可能度划分得到的,支干链路包括多条路径、且支干链路的变更可能度小于可能度阈值,主干链路的变更可能度大于可能度阈值。闪屏广告流转链路可以包括一个或多个支干链路,例如可以包括用于选取广告的二级链路,用于选取广告的二级链路例如图4所示的二级链路。
在得到复杂系统下的业务流转链路时,可以通过梳理复杂系统下的程序流,并抽象形成关键节点,按照业务关注与技术损耗分析的路径,将系统中的程序流抽象成合理个数的环节点,例如可以按照复杂程度和投入产出价值,汇聚形成5-30个环节不等,以便量化并透明化链路流中的损失情况。
不同的业务部门所关注的内容有所不同,例如APP闪屏广告中,技术部门主要关注闪屏广告系统程序中的主要途径的几个环节及其中间的漏损情况,例如前端请求系统、后台处理系统、搜索引擎推荐、返回前端布局展示等;而业务部门更倾向关注用户的行为和消费转化中的情况,并分析用户特性,用户特性包括:用户曝光、用户点击广告、用户触达广告落地页、小程序或直达商城购买等关键卡点。
闪屏广告流转链路可以是通过梳理以及抽象所得出的链路。闪屏广告流转链路的梳理与抽象工作,同时兼顾业务员关注角度与技术关注角度,使得抽象结果及数据符合不同场景下的分析诉求,提高了数据的可用性和价值。
步骤1304,执行当前节点的广告选取任务,以从当前节点对应的候选广告中选取与目标对象匹配的广告,在选取失败的情况下,执行步骤1306,在选取成功的情况下,执行步骤1310。
步骤1306,获取当前节点在目标二级链路中的后向邻接节点的标识,当前节点的后向邻接节点为至少一个。
步骤1308,从获取的后向邻接节点中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识。
步骤1310,将目标二级链路中的终止节点的标识,确定为当前节点的去向节点标识。
步骤1312,确定当前节点的来源节点标识,来源节点标识对应有至少一个的埋点数据块,从来源节点标识的各个埋点数据块中,确定去向节点标识为当前节点的埋点数据块,得到目标埋点数据块,从目标埋点数据块中获取累积路径,在获取的累积路径的基础上添加当前节点的标识,得到更新后的累积路径。
步骤1314,获取执行广告选取任务所得到的任务执行相关信息。
步骤1316,将来源节点标识、去向节点标识、更新后的累积路径以及任务执行相关信息,添加至当前节点的埋点结构体中,得到目标对象在当前节点的埋点数据块。
步骤1318,在当前节点的去向节点标识不是终止节点的情况下,将当前节点的去向节点标识确定为新的当前节点,返回步骤1304。
步骤1320,在当前节点的去向节点标识为终止节点的情况下,确定目标指示信息,将目标指示信息、当前节点的标识添加到终止节点的埋点结构体中,得到终止节点的埋点数据块。
其中,目标指示信息可以为内容指示信息,内容指示信息用于指示被选中的广告,目标指示信息也可以为预设指示信息,预设指示信息用于指示预设的广告。
步骤1322,对于生成的各个埋点数据块,当满足上报条件时,上报埋点数据块,以基于埋点数据块中存储的信息进行数据分析。
本实施例中,提供了一种复杂系统的数据埋点和分析方法,针对商业化业务下的开屏(闪屏)广告,以贯穿互联网APP的前端技术、后台技术、对象行为与消费转化等环节为主要路径,提供了一种创新性日志数据定制量化、采集和数据建设办法,并在此基础上实现链路归因定位分析、减损与策略增长、动态优化、最终达到业务收益提升的实践过程。
本申请提供的业务数据采集方式中,实现了一种双向指针动态埋点方法:闪屏广告全链路最终归纳并抽象形成两级数据分析链路:一级漏斗分析(主干链路)、二级路径分析(支干链路);其中,二级路径采用双向指针动态埋点方法:一种适应于因策略调整导致链路环节与路径变更时,无需再重新重构既有埋点顺序和逻辑的灵活自适应埋点方法,体现了埋点技术的高延展性、前瞻性,节约了成本。
目前,闪屏广告技术流程复杂,从用户启动APP到展示曝光闪屏广告之间,已执行完成较多的系统程序交互模块(即可能的流量利用损耗待排查点)。系统的流程呈现出错综复杂的状态,且有流程间前后依赖或连贯顺序关系。若按照通用的埋点方法,即每个系统环节埋设一个数据事件,将形成庞大、晦涩、变更成本高的上报。例如,对于视频业务中,使用通用埋点法时,呈现出以下特性和困难:历史遗留已知上报事件较多,未知事件数量及信息不详,旧数据埋点事件分散且数量多,由于数据埋点伴随技术问题定位与排查需求而生产,因此呈现数据事件无收敛性扩增,数据事件复用性低。且闪屏全链路预加载及选单技术流程复杂,链路技术节点伴随技术迭代过程中变更频繁(包括新增插入、删减、修改节点等),也经常出现新增临时性节点进行技术调优或问题定位排查,导致已有的系统梳理和埋点顺序被破坏,数据更改造价高,牵一发动全身导致出错几率高。
而本申请提供的业务数据采集方法,针对此类型复杂系统流程下的数据埋点,从面向业务分析和技术优化分析的需求出发,进行关键节点的抽象与归纳,主要以面向业务分析的归纳抽象,易于理解与通用性,辅之以满足技术优化的定位、排查需求,考虑数据定义的规范性、统一性、灵活变更性、可延展性,考虑原始数据采集存储的可行性、数仓解析与处理的方便性,考虑到数据考法的成本、投入产出比,并不全部链路流程进行埋点采集。
本申请提供的业务数据采集方法,还可以应用于其他广告,其他广告包括但不限于是焦点图广告、信息流feeds广告、框内贴片广告等。例如可以将上述实施例中的闪屏广告替换为其他广告,从而将本申请的业务数据采集方法应用于其他广告。
本申请提供的业务数据采集方法,可以应用于涉及到后端交互链路的任意的产品形态,例如可以应用于互联网APP等涉及到后端交互链路的产品形态,还可以应用于APP内容业务形态。
本申请提供的业务数据采集方法,实现了一种双向指针动态埋点法,在数仓表结构设计与表存储、数据计算与遍历查询上,复杂度大幅降低,详见下表:当链路节点个数为n,每个节点采集的日志数据量为k时:
表1复杂度
/>
其中,另外,O(n)、O(n2)、O(nn)以及O(1)表示复杂度,括号中的数值越大,则表示复杂度越大,针对链路埋点分析与优化增长小流量试验效果,链路降损效果:流量利用率提升大于34%。链路策略优化效果:闪屏广告收益增长大于15%。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的业务数据采集方法的业务数据采集装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个业务数据采集装置实施例中的具体限定可以参见上文中对于业务数据采集方法的限定,在此不再赘述。
在一些实施例中,如图14所示,提供了一种业务数据采集装置,包括:节点确定模块1402、标识获取模块1404、去向节点标识得到模块1406、来源节点标识确定模块1408和业务采集数据得到模块1410,其中:
节点确定模块1402,用于在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;
标识获取模块1404,用于获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识;当前节点的后向邻接节点为至少一个;
去向节点标识得到模块1406,用于从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识;
来源节点标识确定模块1408,用于确定当前节点的来源节点标识;来源节点标识唯一对应来源节点,来源节点是当前节点的各个前向邻接节点中流转至当前节点的节点;
业务采集数据得到模块1410,用于将来源节点标识和去向节点标识添加至当前节点的埋点结构体中,以得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,目标多路径业务流转链路匹配有邻接节点标识集合;邻接节点标识集合,包括目标多路径业务流转链路中各个节点的邻接节点的标识,当前节点的邻接节点包括后向邻接节点;标识获取模块,还用于:从目标多路径业务流转链路匹配的邻接节点标识集合中,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识。
在一些实施例中,装置还用于:获取节点变更信息;基于节点变更信息,对目标多路径业务流转链路的邻接节点标识集合进行变更,得到更新后的邻接节点标识集合,更新后的邻接节点标识集合匹配的链路为新的目标多路径业务流转链路,返回在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点的步骤。
在一些实施例中,当前节点的来源节点标识和去向节点标识皆为至少一个;业务采集数据得到模块,还用于:确定当前节点的双向标识组合;每个双向标识组合包括一个来源节点标识以及一个去向节点标识,不同的双向标识组合中的来源节点标识和去向节点标识中的至少一个不同;对于每个双向标识组合,将双向标识组合中的来源节点标识和去向节点标识添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块;基于各个双向标识组合对应的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,业务采集数据得到模块,还用于:对于每个双向标识组合,确定与双向标识组合中的来源节点标识对应的、且指向当前节点的目标埋点数据块;从目标埋点数据块中获取存储的累积路径,累积路径为从目标多路径业务流转链路的起始节点到来源节点的一条路径;在获取的累积路径的基础上添加当前节点的标识,得到更新后的累积路径;将双向标识组合中的来源节点标识、去向节点标识以及更新后的累积路径,添加至当前节点的埋点结构体中,得到双向标识组合对应的埋点数据块。
在一些实施例中,目标多路径业务流转链路为用于选择与目标对象匹配的内容的链路,当前节点对应有候选内容;装置还用于:从当前节点对应的候选内容中选取与目标对象匹配的内容,当选取失败时,获取当前节点在目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与目标对象匹配的节点标识,得到当前节点的去向节点标识;将当前节点的去向节点标识确定为新的当前节点,返回从当前节点对应的候选内容中选取与目标对象匹配的内容的步骤,直到当前节点的去向节点标识为终止节点为止。
在一些实施例中,装置还用于:当选取成功时,将目标多路径业务流转链路中的终止节点的标识,确定为当前节点的去向节点标识。
在一些实施例中,装置还用于:当选取成功时,确定内容指示信息;内容指示信息用于指示所选中的内容;将内容指示信息添加到终止节点的埋点结构体中,得到终止节点的埋点数据块;基于终止节点的埋点数据块中存储的内容指示信息,确定与目标对象匹配的目标内容;将目标内容推送至目标对象。
在一些实施例中,目标多路径业务流转链路中的至少一个节点设置有节点进入条件,当前节点的去向节点标识是基于当前节点的后向邻接节点的节点进入条件选出的;装置还包括链路得到模块,链路得到模块,用于:获取初始多路径业务流转链路,将初始多路径业务流转链路确定为当前多路径业务流转链路;确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容;当当前选取内容不满足预设内容条件时,调整当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过当前多路径业务流转链路为目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足预设内容条件为止;将当前选取内容满足预设内容条件时的当前多路径业务流转链路,确定为目标多路径业务流转链路。
在一些实施例中,目标多路径业务流转链路为目标系统流转链路中的支干链路,目标系统流转链路还包括主干链路,主干链路以及支干链路是基于变更可能度划分得到的,支干链路包括多条路径、且支干链路的变更可能度小于可能度阈值,主干链路的变更可能度大于可能度阈值。
在一些实施例中,业务采集数据得到模块,还用于:获取执行当前节点对应的任务所得到的任务执行相关信息;将来源节点标识、去向节点标识以及任务执行相关信息,添加至当前节点的埋点结构体中,得到当前节点的埋点数据块;基于当前节点的埋点数据块,得到针对目标对象在目标多路径业务流转链路中采集到的业务采集数据。
在一些实施例中,装置还用于:针对目标对象在目标多路径业务流转链路中产生的各个埋点数据块,从各个埋点数据块中获取任务执行相关信息;基于获取的各个任务执行相关信息进行数据统计,得到数据统计结果;将数据统计结果进行可视化展示。
上述业务数据采集装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一些实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图15所示。该计算机设备包括处理器、存储器、输入/输出接口(Input/Output,简称I/O)和通信接口。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储业务数据采集方法中涉及到的数据。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种业务数据采集方法。
在一些实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图16所示。该计算机设备包括处理器、存储器、输入/输出接口、通信接口、显示单元和输入装置。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口、显示单元和输入装置通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种业务数据采集方法。该计算机设备的显示单元用于形成视觉可见的画面,可以是显示屏、投影装置或虚拟现实成像装置,显示屏可以是液晶显示屏或电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图15和图16中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一些实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述业务数据采集方法中的步骤。
在一些实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述业务数据采集方法中的步骤。
在一些实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述业务数据采集方法中的步骤。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (16)
1.一种业务数据采集方法,其特征在于,所述方法包括:
在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;
获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识;所述当前节点的后向邻接节点为至少一个;
从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;
确定所述当前节点的来源节点标识;所述来源节点标识唯一对应来源节点,所述来源节点是所述当前节点的各个前向邻接节点中流转至所述当前节点的节点;
将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
2.根据权利要求1所述的方法,其特征在于,所述目标多路径业务流转链路匹配有邻接节点标识集合;所述邻接节点标识集合,包括所述目标多路径业务流转链路中各个节点的邻接节点的标识,所述当前节点的邻接节点包括后向邻接节点;
所述获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识包括:
从所述目标多路径业务流转链路匹配的邻接节点标识集合中,获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
获取节点变更信息;
基于所述节点变更信息,对所述目标多路径业务流转链路的邻接节点标识集合进行变更,得到更新后的邻接节点标识集合,所述更新后的邻接节点标识集合匹配的链路为新的目标多路径业务流转链路,返回在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点的步骤。
4.根据权利要求1所述的方法,其特征在于,所述当前节点的来源节点标识和去向节点标识皆为至少一个;所述将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据包括:
确定所述当前节点的双向标识组合;每个所述双向标识组合包括一个来源节点标识以及一个去向节点标识,不同的所述双向标识组合中的来源节点标识和去向节点标识中的至少一个不同;
对于每个所述双向标识组合,将所述双向标识组合中的来源节点标识和去向节点标识添加至所述当前节点的埋点结构体中,得到所述双向标识组合对应的埋点数据块;
基于各个所述双向标识组合对应的埋点数据块,得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
5.根据权利要求4所述的方法,其特征在于,所述对于每个所述双向标识组合,将所述双向标识组合中的来源节点标识和去向节点标识添加至所述当前节点的埋点结构体中,得到所述双向标识组合对应的埋点数据块包括:
对于每个所述双向标识组合,确定与所述双向标识组合中的来源节点标识对应的、且指向所述当前节点的目标埋点数据块;
从所述目标埋点数据块中获取存储的累积路径,所述累积路径为从所述目标多路径业务流转链路的起始节点到所述来源节点的一条路径;
在获取的所述累积路径的基础上添加所述当前节点的标识,得到更新后的累积路径;
将所述双向标识组合中的来源节点标识、去向节点标识以及所述更新后的累积路径,添加至所述当前节点的埋点结构体中,得到所述双向标识组合对应的埋点数据块。
6.根据权利要求1所述的方法,其特征在于,所述目标多路径业务流转链路为用于选择与所述目标对象匹配的内容的链路,所述当前节点对应有候选内容;所述获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识包括:
从所述当前节点对应的候选内容中选取与所述目标对象匹配的内容,当选取失败时,获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识,从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;
所述方法还包括:
将所述当前节点的去向节点标识确定为新的当前节点,返回从所述当前节点对应的候选内容中选取与所述目标对象匹配的内容的步骤,直到所述当前节点的去向节点标识为终止节点为止。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
当选取成功时,将所述目标多路径业务流转链路中的终止节点的标识,确定为所述当前节点的去向节点标识。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
当选取成功时,确定内容指示信息;所述内容指示信息用于指示所选中的内容;
将所述内容指示信息添加到所述终止节点的埋点结构体中,得到所述终止节点的埋点数据块;
基于所述终止节点的埋点数据块中存储的内容指示信息,确定与所述目标对象匹配的目标内容;
将所述目标内容推送至所述目标对象。
9.根据权利要求6所述的方法,其特征在于,所述目标多路径业务流转链路中的至少一个节点设置有节点进入条件,所述当前节点的去向节点标识是基于所述当前节点的后向邻接节点的节点进入条件选出的;得到所述目标多路径业务流转链路的步骤如下:
获取初始多路径业务流转链路,将所述初始多路径业务流转链路确定为当前多路径业务流转链路;
确定通过所述当前多路径业务流转链路为所述目标对象选取的内容,得到当前选取内容;
当所述当前选取内容不满足预设内容条件时,调整所述当前多路径业务流转链路中的至少一个节点的节点进入条件,得到新的当前多路径业务流转链路,返回确定通过所述当前多路径业务流转链路为所述目标对象选取的内容,得到当前选取内容的步骤,直到当前选取内容满足所述预设内容条件为止;
将当前选取内容满足所述预设内容条件时的当前多路径业务流转链路,确定为所述目标多路径业务流转链路。
10.根据权利要求1至9任意一项所述的方法,其特征在于,所述目标多路径业务流转链路为目标系统流转链路中的支干链路,所述目标系统流转链路还包括主干链路,所述主干链路以及所述支干链路是基于变更可能度划分得到的,所述支干链路包括多条路径、且所述支干链路的变更可能度小于可能度阈值,所述主干链路的变更可能度大于所述可能度阈值。
11.根据权利要求1所述的方法,其特征在于,所述将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据包括:
获取执行所述当前节点对应的任务所得到的任务执行相关信息;将所述来源节点标识、所述去向节点标识以及所述任务执行相关信息,添加至所述当前节点的埋点结构体中,得到所述当前节点的埋点数据块;
基于所述当前节点的埋点数据块,得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
12.根据权利要求11所述的方法,其特征在于,所述方法还包括:
针对所述目标对象在所述目标多路径业务流转链路中产生的各个埋点数据块,从各个所述埋点数据块中获取任务执行相关信息;
基于获取的各个所述任务执行相关信息进行数据统计,得到数据统计结果;
将所述数据统计结果进行可视化展示。
13.一种业务数据采集装置,其特征在于,所述装置包括:
节点确定模块,用于在包括多个节点的目标多路径业务流转链路中,确定目标对象对应的当前节点;
标识获取模块,用于获取所述当前节点在所述目标多路径业务流转链路中的后向邻接节点的标识;所述当前节点的后向邻接节点为至少一个;
去向节点标识得到模块,用于从获取的后向邻接节点的标识中选取与所述目标对象匹配的节点标识,得到所述当前节点的去向节点标识;
来源节点标识确定模块,用于确定所述当前节点的来源节点标识;所述来源节点标识唯一对应来源节点,所述来源节点是所述当前节点的各个前向邻接节点中流转至所述当前节点的节点;
业务采集数据得到模块,用于将所述来源节点标识和所述去向节点标识添加至所述当前节点的埋点结构体中,以得到针对所述目标对象在所述目标多路径业务流转链路中采集到的业务采集数据。
14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至12中任一项所述的方法的步骤。
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
16.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210275969.4A CN116860541A (zh) | 2022-03-21 | 2022-03-21 | 业务数据采集方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210275969.4A CN116860541A (zh) | 2022-03-21 | 2022-03-21 | 业务数据采集方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116860541A true CN116860541A (zh) | 2023-10-10 |
Family
ID=88217719
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210275969.4A Pending CN116860541A (zh) | 2022-03-21 | 2022-03-21 | 业务数据采集方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116860541A (zh) |
-
2022
- 2022-03-21 CN CN202210275969.4A patent/CN116860541A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10235430B2 (en) | Systems, methods, and apparatuses for detecting activity patterns | |
US8978034B1 (en) | System for dynamic batching at varying granularities using micro-batching to achieve both near real-time and batch processing characteristics | |
CN110647512B (zh) | 一种数据存储和分析方法、装置、设备和可读介质 | |
US20140201331A1 (en) | Platform for the delivery of content and services to networked connected computing devices | |
US11106460B2 (en) | Software change tracking and analysis | |
KR20210038454A (ko) | 사용자 그룹화 방법 및 장치, 컴퓨터 장비, 컴퓨터 판독가능 저장 매체 및 컴퓨터 프로그램 | |
US10970338B2 (en) | Performing query-time attribution channel modeling | |
CN115422169B (zh) | 基于商业广告场景的数据仓库构建方法及装置 | |
CN112925664A (zh) | 目标用户的确定方法、装置、电子设备及存储介质 | |
CN112749863A (zh) | 关键词的调价方法及装置、电子设备 | |
CN111414410A (zh) | 数据处理方法、装置、设备和存储介质 | |
CN112579655A (zh) | 一种整合客户画像指标的方法、装置及设备 | |
US10296763B1 (en) | Consumption history privacy | |
US9305066B2 (en) | System and method for remote data harmonization | |
CN113672660B (zh) | 一种数据查询方法、装置及设备 | |
CN116860541A (zh) | 业务数据采集方法、装置、计算机设备和存储介质 | |
CN116302867A (zh) | 行为数据分析方法、装置、计算机设备、介质和程序产品 | |
CN110223108B (zh) | 点击通过率的预测方法、装置及设备 | |
CN115017185A (zh) | 一种数据处理方法、装置及存储介质 | |
CN106874327A (zh) | 一种针对业务数据的计数方法及装置 | |
CN112925813A (zh) | 基于混合编排的数据处理方法、装置、系统和存储介质 | |
CN111143328A (zh) | 一种敏捷商业智能数据构建方法、系统、设备、存储介质 | |
CN114253951B (zh) | 数据处理方法、系统及第二服务器 | |
CN113971007B (zh) | 信息处理方法、装置、电子设备及介质 | |
CN115329733B (zh) | 报表统计方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |