CN113762665B - 一种实时指标的相关实时数据回溯方法及系统 - Google Patents

一种实时指标的相关实时数据回溯方法及系统 Download PDF

Info

Publication number
CN113762665B
CN113762665B CN202010606102.3A CN202010606102A CN113762665B CN 113762665 B CN113762665 B CN 113762665B CN 202010606102 A CN202010606102 A CN 202010606102A CN 113762665 B CN113762665 B CN 113762665B
Authority
CN
China
Prior art keywords
real
time data
time
index
logic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010606102.3A
Other languages
English (en)
Other versions
CN113762665A (zh
Inventor
赵帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Zhenshi Information Technology Co Ltd
Original Assignee
Beijing Jingdong Zhenshi Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Zhenshi Information Technology Co Ltd filed Critical Beijing Jingdong Zhenshi Information Technology Co Ltd
Priority to CN202010606102.3A priority Critical patent/CN113762665B/zh
Publication of CN113762665A publication Critical patent/CN113762665A/zh
Application granted granted Critical
Publication of CN113762665B publication Critical patent/CN113762665B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06393Score-carding, benchmarking or key performance indicator [KPI] analysis

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种实时指标的相关实时数据回溯方法及系统,本发明实施例获取实时指标的相关实时数据,对所述相关实时数据进行处理,得到指标的统计逻辑信息后,以流程化形式展示指标的统计逻辑信息,及将所述统计逻辑信息存储。这样,用户就可以根据所得到的指标的逻辑统计,对实时指标计算结果的准确性进行简单且准确判断,本发明实施例就实现了对实时指标的相关实时数据进行回溯,提高判断实时指标计算结果的准确性且易于实现。

Description

一种实时指标的相关实时数据回溯方法及系统
技术领域
本发明涉及计算机的数据处理技术,特别涉及一种实时指标的相关实时数据回溯方法及系统。
背景技术
随着计算机网络的发展,海量的数据存在于网络中。对网络中的海量数据如何进行处理成为了关键。在众多处理网络中数据的方式中,有一种是对实时数据的实时指标进行计算,实时指标指的是基于实时数据衡量目标的单位或方法。在进行实时数据的实时指标获取过程中,当得到本次实时数据的实时指标之后,都会覆盖上次计算的实时指标结果,且只给用户展现的是当前计算得到的实时指标。
因此,对于实时数据的实时指标的计算结果,用户无法及时判断该结果的准确性,只能通过与历史得到的实时指标进行对比,或者通过实时查询计算该实时指标所对应的实时数据后,进行分析对比,从而判断得到的实时指标的结果是否存在问题。这会导致实时指标的计算结果的判断准确性降低及判断过程复杂,难以实现。
发明内容
有鉴于此,本发明实施例提供一种实时指标的相关实时数据回溯方法,该方法能够对实时指标的相关实时数据进行回溯,提高判断实时指标计算结果的准确性且易于实现。
本发明实施例还提供一种实时指标的相关实时数据回溯系统,该系统能对实时指标的相关实时数据进行回溯,提高判断实时指标计算结果的准确性且易于实现。
本发明实施例是这样实现的:
一种实时指标的相关实时数据回溯方法,所述方法包括:
获取得到实时指标的相关实时数据;
根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息;
按照指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息,及将所述统计逻辑信息进行存储。
所述获取得到实时指标的相关实时数据包括:
配置所需的实时数据信息;
基于所述实时数据信息,获取实时指标的相关实时数据。
所述统计逻辑规则包括:相关实时数据的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计的三种类型,对所述相关实时数据进行处理包括:
基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
还包括:
对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
一种实时指标的相关实时数据回溯系统,包括:实时数据获取单元、实时指标处理单元、实时指标结果单元、用户配置单元、指标逻辑分析单元及指标逻辑分析结果单元,其中,
所述实时数据获取单元,用于获取实时数据;
所述实时指标处理单元,用于根据所获取的实时数据,计算得到实时指标;
所述实时指标结果单元,用于将计算得到的实时指标进行存储;
所述用户配置单元,用于配置所需的实时数据信息;
所述指标逻辑分析单元,用于根据所需的实时数据信息,从获取的实时数据中确定要进行指标逻辑分析的实时数据,根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息,按照指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息;
所述指标逻辑分析结果单元,用于将得到的指标的统计逻辑信息进行存储。
所述统计逻辑规则包括:相关实时数据的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计的三种类型;
所述指标逻辑分析单元,还用于基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
还包括检查单元,用于对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
一种实时指标的相关实时数据回溯装置,包括:
存储器;以及耦接至所述存储器的处理器,所述处理器被配置为基于存储在所述存储器中的指令,执行上述任一项所述的实时指标的相关实时数据回溯方法。
一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述任一项所述的实时指标的相关实时数据回溯方法。
如上所见,本发明实施例获取实时指标的相关实时数据,对所述相关实时数据进行处理,得到指标的统计逻辑信息后,以流程化形式展示指标的统计逻辑信息,及将所述统计逻辑信息存储。这样,用户就可以根据所得到的指标的逻辑统计,对实时指标计算结果的准确性进行简单且准确判断,本发明实施例就实现了对实时指标的相关实时数据进行回溯,提高判断实时指标计算结果的准确性且易于实现。
附图说明
图1为本发明实施例提供的一种实时指标的相关实时数据回溯方法流程图;
图2为本发明实施例提供的一种实时指标的相关实时数据系统结构示意图;
图3为本发明实施例提供的指标逻辑分析单元的执行流程图;
图4为本发明实施例提供的构建及执行统计逻辑的流程图;
图5为本发明实施例提供的构建出统计逻辑的流程图的过程示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含。例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其他步骤或单元。
下面以具体实施例对本发明的技术方案进行详细说明。下面几个具体实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
从背景技术可以看出,由于实时数据在同步时存在延时,实时指标的计算结果往往与实际的实时指标存在偏差,使得用户无法准确判断实时指标的计算结果是否准确。即使在后续通过与历史得到的实时指标进行对比,或通过实时查询计算该实时指标所对应的实时数据后,进行分析对比后,复杂地判断了实时指标的计算结果不准确时,也无法确定不准确的原因是由于实时数据延迟导致,还是逻辑问题导致,即无法确定实时指标的计算结果不准确的原因。
为了克服上述问题,本发明实施例获取了实时指标的相关实时数据,对所述相关实时数据进行处理,得到指标的统计逻辑信息后,以流程化形式展示指标的统计逻辑信息,及将所述统计逻辑信息进行存储。
这样,用户就可以根据所得到的指标的逻辑统计,对实时指标计算结果的准确性进行简单且准确判断,本发明实施例就实现了对实时指标的相关实时数据进行回溯,提高判断实时指标计算结果的准确性且易于实现。
在这里,以流程化形式展示指标的统计逻辑信息实际上就是以流程为导向,显示所述指标的逻辑统计信息。具体地说,就是按照所述指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息。
具体地说,本发明实施例通过实时指标的统计逻辑,展现出实时数据到实时指标的计算结果的统计逻辑流程并记录统计逻辑信息,及时查看用户所配置的每条实时数据的实时指标获取过程,方便用户判断实时指标计算结果的准确性,确认指标结果是否出于延迟导致的,也方便判断指标的计算逻辑是否出现问题。采用本发明实施例,在实时数据的实时指标的计算中,可对相关实时数据进行回溯查找,快速排出实时指标计算结果出现的各种问题。
本发明实施例利用实时指标在获取过程中的统计逻辑规则,实时构建从实时数据到实时指标的计算逻辑流程,在不影响实时指标的计算结果的情况下,动态展现出实时指标的每条相关实时数据从读取到得到实时指标的统计结果的整个流程,供核对,使得实时指标的每条相关实时数据的统计逻辑流程可视,保证实时指标的计算结果的准确性。
图1为本发明实施例提供的一种实时指标的相关实时数据回溯方法,其具体步骤包括:
步骤101、获取得到实时指标的相关实时数据;
步骤102、根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息;
步骤103、按照所述指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息,及将所述统计逻辑信息进行存储。
在该方法中,获取得到实时指标的相关实时数据包括:
配置所需的实时数据信息;
基于所述实时数据信息,获取实时指标的相关实时数据。
这样,用户不需要将所有用于计算实时指标的相关实时数据都获取到,而仅仅是针对其中的所需实时数据信息进行逻辑化处理,更有针对性。
在该方法中的图1的步骤2中,根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行处理,得到指标的统计逻辑信息。这样,由于所设置的统计逻辑规则是基于实时指标的获取过程设置的,其能够准确反映出得到实时指标的整个获取过程,并可以流程化展示,所以对于判断实时指标的准确性起到了关键作用,能够提高判断准确性及易于判断。在这里,按照所述指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息的展示方式简称为流程化展示。
在该方法中,所述统计逻辑规则包括:关联、条件及统计的三种类型,对所述相关实时数据进行处理包括:
基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
在这里,关联、条件及统计的三种类型,实际上就是实时指标获取过程中对相关实时数据进行处理所采用的不同方式,分别指的是:相关实时数据之间的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计。这样,就可以根据统计逻辑规则对相关实时数据进行处理,以得到指标的逻辑统计信息进行对应的执行流程展示,执行流程展示时也就是以关联关系的流程形式、符合实时指标中的条件的流程形式及相关实时数据的汇总统计的流程形式展示。
这样,就可以得到以流程化的形式得到指标的统计逻辑信息,展示并保存。
图2为本发明实施例提供的一种实时指标的相关实时数据系统结构示意图,包括:实时数据获取单元、实时指标处理单元、实时指标结果单元、用户配置单元、指标逻辑分析单元及指标逻辑分析结果单元,其中,
实时数据获取单元,用于获取实时数据;
实时指标处理单元,用于根据所获取的实时数据,计算得到实时指标;
实时指标结果单元,用于将计算得到的实时指标进行存储;
用户配置单元,用于配置所需的实时数据信息;
指标逻辑分析单元,用于根据所需的实时数据信息,从获取的实时数据中确定要进行指标逻辑分析的实时数据,根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息,按照所述指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息;
指标逻辑分析结果单元,用于将得到的指标的统计逻辑信息进行存储。
在该系统中,实时数据获取单元、实时指标处理单元及实时指标结果单元都是已有的单元,而用户配置单元、指标逻辑分析单元及指标逻辑分析结果单元是本发明实施例增加的单元,是本发明实施例的核心。
在该系统中,用户在需要判断实时指标的计算结果是否正确时,就可以在用户配置单元中配置自己所需的实时数据信息,由指标逻辑分析单元进行逻辑分析,执行完成后存储在指标逻辑分析结果中。在指标逻辑分析单元中,所设置的统计逻辑规则是根据实时指标的获取过程设置的。
在该系统中,所述统计逻辑规则包括:相关实时数据的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计的三种类型;
所述指标逻辑分析单元,还用于基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
在该系统中,还包括检查单元,用于对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
图3为本发明实施例提供的指标逻辑分析单元的执行流程图,其具体步骤包括:
步骤301、从实时指标处理单元拉取实时指标的计算逻辑,确定统计逻辑规则;
步骤302、根据所确定的统计逻辑规则,构建统计逻辑的流程图;
步骤303、根据所需的实时数据信息,从实时逻辑获取单元中拉取所确定的要进行指标逻辑分析的实时数据;
步骤304、根据所确定的要进行指标逻辑分析的实时数据执行统计逻辑的流程图;
步骤305、将执行的统计逻辑的流程图进行展示,及后续发送给指标逻辑分析结果单元进行保存。
在图3所述的过程中,构建及执行统计逻辑的流程图的过程如图4所示,包括:
步骤401、拉取实时指标的计算逻辑;
步骤402、解析所拉取的实时指标的计算逻辑,确定统计逻辑规则,统计逻辑规则可以分为关联、条件及统计三大类型,每个类型中可以包括多个要处理的对象;
在本步骤中,要处理的对象是基于所确定的要进行指标逻辑分析的实时数据生成的;
步骤403、根据统计逻辑规则,组织要处理的对象先后顺序;
步骤404、根据要处理的对象先后顺序,构建出统计逻辑的流程图;
步骤405、顺序执行该统计逻辑的流程图;
步骤406、将执行后的统计逻辑的流程图进行展示,及后续发送给指标逻辑分析结果单元进行保存。
本发明实施例中,从实时指标处理单元拉取实时指标的计算逻辑到指标逻辑分析单元,然后分析该计算逻辑并构建要处理的对象,其中对对象进行统计逻辑规则的执行包括三种类型:
关联,表示对象与对象之间的关联关系,具体是相关实时数据的关联关系;
条件,表示对对象要进行条件查询,具体是相关实时数据符合实时指标中的条件;
统计,表示对对象要进行统计,具体是相关实时数据的汇总统计。
指标分析单元然后标记所设置的对象执行顺序后,再次从实时指标处理单元拉取下一次构建所采用的计算逻辑。如此循环,得到所有计算逻辑且都对应了要执行的对象,根据要执行的对象,读取执行该对象的计算逻辑及执行顺序,构建成完整的统计逻辑流程图。
在本发明实施例中,实时数据可以以各种形态表示,比如以表的形式表示等等,这里不限定。
图5为本发明实施例提供的构建出统计逻辑的流程图的过程示意图,其具体步骤为:
步骤501、获取要进行统计逻辑的对象;
步骤502、判断所获取的对象是否为空,如果是,则结束;如果否,执行步骤503;
在本步骤中,如果对象为空,则流程直接结束;
步骤503、根据统计逻辑规则执行该对象;
在执行时,如果统计逻辑规则为关联,则执行该对象根据关联条件获取关联结果,如果关联不到结果,则保存关联结果为空及其他相关信息;
如果统计逻辑规则为条件,则针对该对象的执行条件执行该对象,得到执行结果,如果结果为空,则保存条件结果为空及其他相关信息;
如果统计逻辑规则为统计,则对该对象进行统计判断,如果判断结果为空,则保存统计结果为空及其他相关信息;
步骤504、判断是否存在下一个判断对象,如果是,则返回步骤501继续执行;如果否,则结束。
在本步骤中,如果结果不为空,则获取下一个对象,如果下一个对象存在,则继续执行对象判断,一直到下一个对象不存在,则流程结束。
按照图5所述的过程执行完成后,将得到的指标的统计逻辑信息保存在指标逻辑分析结果单元中。
用户可以在指标逻辑分析结果单元中查看到所设置的实时数据的执行结果,结果包含每条实时数据在指标逻辑分析单元中的执行过程:如果存在关联规则或条件规则为空的实时数据,则可查看执行的相关信息,确认出具体逻辑问题,如果存在统计为空的实时数据,则可查看关联对象,确定是否由于数据延迟而导致。
具体地说,就是图1所述的过程还包括:对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
至此,根据任一用户所需的实时数据信息获取得到的用户所需的实时数据,即可以展现出它每一步的执行内容及顺序,并定位到在执行过程中出现的问题,比如数据延迟问题及逻辑问题,从而得到实时指标的相关实时数据回溯的目的。
举一个具体例子对本发明实施例进行详细说明。
假设实时数据为两个实体在当前时间t1的实时数据,将不同实体的当前时间t1的实时数据分别采用A表和B表的形式存储,实时目标就是确定当前时间t1的两个实体的关联记录。
1)一对一的关联关系
在这种情况下,A表和B表的关系为1:1,并以A表的标识字段与B表的a_id字段进行关联。针对此种表关联关系,某一实时数据在A表和B表上分别标记落地的时间a_ts,b_ts,当A表和B表进行关联时,计算a_ts和b_ts之间的差值a_b_ts,即可得到A表的实时数据和B表的实时数据的延迟时间,如果a_b_ts的值小于所设置的阈值,则打标为数据正常,关联数目标记为1,如果a_b_ts的值大于等于所设置的阈值,则打标为数据延迟,关联数目标记为1。如果a_ts与当前时间的差值大于等于用户配置的阈值时,依然没有关联到B表的a_id,则打标为数据未关联。
2)一对多的关联关系
在这种情况下,A表和B表的关系为1:n,n为自然数,并以A表的标识字段与B表的a_id字段关联。实时数据在A表和B表分别标记落地的时间a_ts,b_ts,当A表和B表关联时,计算a_ts和b_ts之间的差值a_b_ts,即可得到A表的数据和B表的数据的延迟时间。如果m条数据的a_b_ts的值都小于配置的阈值,打标为数据正常,关联数目标记为m,如果n条数据的a_b_ts的值都大于等于配置的阈值,打标为数据延迟,关联数目标记为n。当a_ts与当前时间的差值大于等于配置的阈值时,依然没有关联到B表的a_id,则打标为数据未关联。
3)多对多的关联关系
在这种情况下,可以将多对多的关联关系划分为一对多的关联关系,采用第2)种方式一一执行,这里不再重复阐述,
记录当前时间t2的关联记录
与上述记录当前时间ts1的关联记录类似,这里不再重复阐述。
处理时间t1和t2的关联记录
4)一对一关联关系
在一对一关联关系中,A表的数据与B表的数据的关联数据标记为c。如果时间t1和时间t2中,c都打标为数据正常,则忽略数据,不需要保存对应日志。如果时间t1和时间t2中,c都为数据延迟,则说明A表或B表的数据存在延迟,保存对应的日志记录。如果c在时间t1打标为关联失败,在时间t2中打标为数据延迟,则说明A表或B表的数据存在延迟,保存对应的日志记录。如果时间t1与时间t2中,c都打标为数据延迟,则说明A表的数据a_id在B表中未关联到数据,忽略对应的数据。
2)一对多关联关系
在一对多关联关系中,时间t1标记出数据正常的关联个数m1,数据延迟的关联个数n1。时间t2标记出数据正常的关联个数m2,数据延迟的关联个数n2。如果n1和n2都为0,则说明数据未延迟,则忽略数据。如果n1和n2不都为0,且n1等于n2,则认为A表的数据a_id与B表的关联完成,但是数据存在延迟,保存对应的日志记录。如果n1和n2都不为0,且n1不等于n2,则认为与A表的数据a_id关联B表的数据还在写入中,但是B表的数据存在延迟,保存对应的日志记录。
3)多对多关联关系
在这种情况下,可以将多对多的关联关系划分为一对多的关联关系,采用第2)种方式一一执行,这里不再重复阐述。
日志记录的输出
随着时间的不断推移,时间t2与时间t1的不断对比,在日志中就会记录到每个时间段中,由于实时数据延迟导致t1时间的实时数据没有关联到,而在t2时间时,实时数据又关联到了实时数据。至此可以确认哪些数据是由于数据延迟而导致当前时间的数据统计值不准确,从而达到实时指标回溯的目标。
本发明实施例设置了实时目标的相关实时数据的逻辑分析的获取过程,可以让相关实时数据的计算逻辑可视化,可实时验证,及准确判断实时数据的延迟。
本申请实施例还提供一种计算机可读介质,所述计算机可读存储介质存储指令,所述指令在由处理器执行时可执行如上所述的实时指标的相关实时数据回溯方法中的步骤。实际应用中,所述的计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的,也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或多个程序被执行时,可以实现上述各实施例描述的所述的分享展示的实现方法。根据本申请公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件,或者上述的任意合适的组合,但不用于限制本申请保护的范围。在本申请公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
本发明实施例还提供一种电子设备,其中可以集成本申请实施例实现方法的装置。具体来讲:
该电子设备可以包括一个或一个以上处理核心的处理器、一个或一个以上计算机可读存储介质的存储器以及存储在存储器上并可在处理器上运行的计算机程序。在执行所述存储器的程序时,可以实现上述的自动售货装置实现售货的方法。
具体的,实际应用中,该电子设备还可以包括电源、输入单元、以及输出单元等部件。本领域技术人员可以理解,本发明实施例中的电子设备的结构并不构成对该电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器是该电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器内的软件程序和/或模块,以及调用存储在存储器内的数据,执行服务器的各种功能和处理数据,从而对该电子设备进行整体监控。
存储器可用于存储软件程序以及模块,即上述计算机可读存储介质。处理器通过运行存储在存储器的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据服务器的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器还可以包括存储器控制器,以提供处理器对存储器的访问。
该电子设备还包括给各个部件供电的电源,可以通过电源管理系统与处理器逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元,该输入单元可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
该电子设备还可以包括输出单元,该输出单元可以用于显示由用户输入的信息或提供给用户的信息以及各种图像用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。
本申请附图中的流程图和框图,示出了按照本申请公开的各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或者代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应该注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同附图中所标准的顺序发生。例如,两个连接地表示的方框实际上可以基本并行地执行,它们有时也可以按照相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或者流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本申请中。特别地,在不脱离本申请精神和教导的情况下,本申请的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,所有这些组合和/或结合均落入本申请公开的范围。
本文中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思路,并不用于限制本申请。对于本领域的技术人员来说,可以依据本发明的思路、精神和原则,在具体实施方式及应用范围上进行改变,其所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (7)

1.一种实时指标的相关实时数据回溯方法,其特征在于,所述方法包括:
获取得到实时指标的相关实时数据;
根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息;
按照指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息,及将所述统计逻辑信息进行存储;
其中,所述方法还包括:
对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
2.如权利要求1所述的方法,其特征在于,所述获取得到实时指标的相关实时数据包括:
配置所需的实时数据信息;
基于所述实时数据信息,获取实时指标的相关实时数据。
3.如权利要求1所述的方法,其特征在于,所述统计逻辑规则包括:相关实时数据的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计的三种类型,对所述相关实时数据进行处理包括:
基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
4.一种实时指标的相关实时数据回溯系统,其特征在于,包括:实时数据获取单元、实时指标处理单元、实时指标结果单元、用户配置单元、指标逻辑分析单元及指标逻辑分析结果单元,其中,
所述实时数据获取单元,用于获取实时数据;
所述实时指标处理单元,用于根据所获取的实时数据,计算得到实时指标;
所述实时指标结果单元,用于将计算得到的实时指标进行存储;
所述用户配置单元,用于配置所需的实时数据信息;
所述指标逻辑分析单元,用于根据所需的实时数据信息,从获取的实时数据中确定要进行指标逻辑分析的实时数据,根据实时指标的获取过程设置统计逻辑规则,基于所设置的逻辑统计规则对所述相关实时数据进行逻辑分析,得到指标的统计逻辑信息,按照所述指标的统计逻辑信息的执行流程,展示所述指标的统计逻辑信息;
所述指标逻辑分析结果单元,用于将得到的指标的统计逻辑信息进行存储;
其中,所述装置还包括检查单元,用于对所述统计逻辑信息进行检查,如果其中存在相关实时数据的关联关系、相关实时数据符合实时指标中的条件为空的实时数据,则进一步检查其中的执行相关信息,确认出具体逻辑问题;如果存在相关实时数据的汇总统计为空的实时数据,则进一步检查所述实时数据的关联实时数据,确定是否是出现数据延迟问题。
5.如权利要求4所述的装置,其特征在于,所述统计逻辑规则包括:相关实时数据的关联关系、相关实时数据符合实时指标中的条件及相关实时数据的汇总统计的三种类型;
所述指标逻辑分析单元,还用于基于所述相关实时数据生成对象,统计逻辑规则的每种类型在执行中包括多个对象;
组织执行对象的先后顺序,基于执行对象所采用的统计逻辑规则构建流程图;
顺序执行所构建的流程图。
6.一种实时指标的相关实时数据回溯装置,其特征在于,包括:
存储器;以及耦接至所述存储器的处理器,所述处理器被配置为基于存储在所述存储器中的指令,执行如权利要求1-3中任一项所述的实时指标的相关实时数据回溯方法。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-3中任一项所述的实时指标的相关实时数据回溯方法。
CN202010606102.3A 2020-06-29 2020-06-29 一种实时指标的相关实时数据回溯方法及系统 Active CN113762665B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010606102.3A CN113762665B (zh) 2020-06-29 2020-06-29 一种实时指标的相关实时数据回溯方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010606102.3A CN113762665B (zh) 2020-06-29 2020-06-29 一种实时指标的相关实时数据回溯方法及系统

Publications (2)

Publication Number Publication Date
CN113762665A CN113762665A (zh) 2021-12-07
CN113762665B true CN113762665B (zh) 2024-04-16

Family

ID=78785449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010606102.3A Active CN113762665B (zh) 2020-06-29 2020-06-29 一种实时指标的相关实时数据回溯方法及系统

Country Status (1)

Country Link
CN (1) CN113762665B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722655A (zh) * 2012-06-05 2012-10-10 北京岳能科技有限公司 一种风电场数据分析应用模型
CN103778059A (zh) * 2014-01-03 2014-05-07 浙江大唐乌沙山发电有限责任公司 一种异常报警的方法和系统
CN105574081A (zh) * 2015-12-07 2016-05-11 安徽继远软件有限公司 一种基于无回路有向图的数据溯源建模方法
CN105761010A (zh) * 2016-02-24 2016-07-13 国网山东省电力公司 基于实时数据采集的集团企业稽核实时监控方法及系统
WO2018132507A1 (en) * 2017-01-11 2018-07-19 Abbott Diabetes Care Inc. Systems, devices, and methods for episode detection and evaluation with visit guides and action plans
CN109597842A (zh) * 2018-12-14 2019-04-09 深圳前海微众银行股份有限公司 数据实时计算方法、装置、设备及计算机可读存储介质
CN109669992A (zh) * 2018-12-20 2019-04-23 云南电网有限责任公司玉溪供电局 一种数据可视化转换的实现方法
CN109738871A (zh) * 2018-12-14 2019-05-10 中国人民解放军63893部队 基于规则引擎的雷达对抗装备试验裁决评估数据处理方法
CN110069519A (zh) * 2018-08-23 2019-07-30 平安科技(深圳)有限公司 数据信息管理方法、装置、计算机设备及存储介质
CN110333983A (zh) * 2019-05-31 2019-10-15 口口相传(北京)网络技术有限公司 业务监控及搜索业务监控方法及装置
CN110414813A (zh) * 2019-07-18 2019-11-05 阿里巴巴集团控股有限公司 指标曲线的构建方法、装置及设备
CN110941634A (zh) * 2019-11-27 2020-03-31 北京明略软件系统有限公司 数据的处理方法及装置、存储介质和电子装置
CN110989432A (zh) * 2019-11-29 2020-04-10 北京京能电力股份有限公司 一种机组启停时序逻辑分析系统及方法
CN110987083A (zh) * 2019-12-23 2020-04-10 北京蜂云科创信息技术有限公司 一种基于车联网对车辆排放数据监测的方法和设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9367597B2 (en) * 2013-11-18 2016-06-14 International Business Machines Corporation Automatically managing mapping and transform rules when synchronizing systems

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722655A (zh) * 2012-06-05 2012-10-10 北京岳能科技有限公司 一种风电场数据分析应用模型
CN103778059A (zh) * 2014-01-03 2014-05-07 浙江大唐乌沙山发电有限责任公司 一种异常报警的方法和系统
CN105574081A (zh) * 2015-12-07 2016-05-11 安徽继远软件有限公司 一种基于无回路有向图的数据溯源建模方法
CN105761010A (zh) * 2016-02-24 2016-07-13 国网山东省电力公司 基于实时数据采集的集团企业稽核实时监控方法及系统
WO2018132507A1 (en) * 2017-01-11 2018-07-19 Abbott Diabetes Care Inc. Systems, devices, and methods for episode detection and evaluation with visit guides and action plans
CN110069519A (zh) * 2018-08-23 2019-07-30 平安科技(深圳)有限公司 数据信息管理方法、装置、计算机设备及存储介质
CN109597842A (zh) * 2018-12-14 2019-04-09 深圳前海微众银行股份有限公司 数据实时计算方法、装置、设备及计算机可读存储介质
CN109738871A (zh) * 2018-12-14 2019-05-10 中国人民解放军63893部队 基于规则引擎的雷达对抗装备试验裁决评估数据处理方法
CN109669992A (zh) * 2018-12-20 2019-04-23 云南电网有限责任公司玉溪供电局 一种数据可视化转换的实现方法
CN110333983A (zh) * 2019-05-31 2019-10-15 口口相传(北京)网络技术有限公司 业务监控及搜索业务监控方法及装置
CN110414813A (zh) * 2019-07-18 2019-11-05 阿里巴巴集团控股有限公司 指标曲线的构建方法、装置及设备
CN110941634A (zh) * 2019-11-27 2020-03-31 北京明略软件系统有限公司 数据的处理方法及装置、存储介质和电子装置
CN110989432A (zh) * 2019-11-29 2020-04-10 北京京能电力股份有限公司 一种机组启停时序逻辑分析系统及方法
CN110987083A (zh) * 2019-12-23 2020-04-10 北京蜂云科创信息技术有限公司 一种基于车联网对车辆排放数据监测的方法和设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Assessnebt of Building Intelligence Requirements for Real Time Performance Testing in Smart Buildings;Elena Markoska;IEEE;20190801;第1-6页 *
可回溯性智能导航设计方法;刘峥;孙波;;西安工业大学学报;20130831(第08期);第628-632页 *
网络流量分析及业务性能管理平台在医院中的应用;曲强;苗元青;于宗一;杨兆凯;徐浩;;中国数字医学;20171231(第03期);第86-88页 *

Also Published As

Publication number Publication date
CN113762665A (zh) 2021-12-07

Similar Documents

Publication Publication Date Title
US9317400B2 (en) Code coverage rate determination method and system
US8612372B2 (en) Detection rule-generating facility
KR20160068978A (ko) 코드 리뷰 동안 테스트 커버리지 데이터를 디스플레이하기 위한 프로세스
CN104137078A (zh) 操作管理设备、操作管理方法和程序
CN111563014A (zh) 接口服务性能测试方法、装置、设备和存储介质
US9684582B2 (en) Automatically analyzing operation sequences
CN113010389A (zh) 一种训练方法、故障预测方法、相关装置及设备
CN112148779A (zh) 确定业务指标的方法、装置及存储介质
CN110647447A (zh) 用于分布式系统的异常实例检测方法、装置、设备和介质
CN111752833B (zh) 一种软件质量体系准出方法、装置、服务器及存储介质
CN108304276B (zh) 一种日志处理方法、装置及电子设备
CN111339231B (zh) 众包更新结果的处理方法及装置
CN111309586A (zh) 一种命令测试方法、装置及其存储介质
CN113762665B (zh) 一种实时指标的相关实时数据回溯方法及系统
US8565910B2 (en) Manufacturing execution system (MES) including a wafer sampling engine (WSE) for a semiconductor manufacturing process
CN111274143B (zh) 埋点测试方法、装置、设备及存储介质
CN115576831A (zh) 一种测试案例推荐方法、装置、设备及存储介质
CN113742213A (zh) 一种用于数据分析的方法、系统和介质
CN112631852A (zh) 宏检查方法、装置、电子设备和计算机可读存储介质
CN114926154B (zh) 一种多场景数据识别的保护切换方法及系统
CN117077592B (zh) 回归数据监控方法、监控装置及监控系统
CN116010349B (zh) 基于元数据的数据检核方法和装置、电子设备和存储介质
CN117033215A (zh) 增量代码的测试数据处理方法、装置、电子设备和存储介质
CN111124794B (zh) 数据处理系统的监测方法、装置以及计算机设备
CN109726818B (zh) 一种模型编辑方法、装置、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant