CN114003472B - 一种数据处理方法、装置、电子设备及存储介质 - Google Patents

一种数据处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114003472B
CN114003472B CN202210000911.9A CN202210000911A CN114003472B CN 114003472 B CN114003472 B CN 114003472B CN 202210000911 A CN202210000911 A CN 202210000911A CN 114003472 B CN114003472 B CN 114003472B
Authority
CN
China
Prior art keywords
information
target object
identification information
calling
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210000911.9A
Other languages
English (en)
Other versions
CN114003472A (zh
Inventor
刘成穆
余欢
孔万群
陈少云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lianlian Hangzhou Information Technology Co ltd
Original Assignee
Lianlian Hangzhou Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lianlian Hangzhou Information Technology Co ltd filed Critical Lianlian Hangzhou Information Technology Co ltd
Priority to CN202210000911.9A priority Critical patent/CN114003472B/zh
Publication of CN114003472A publication Critical patent/CN114003472A/zh
Application granted granted Critical
Publication of CN114003472B publication Critical patent/CN114003472B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/875Monitoring of systems including the internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)
  • Devices For Executing Special Programs (AREA)

Abstract

本发明公开了一种数据处理方法、装置、电子设备及存储介质,包括:第一目标对象在接收到第一调用信息的情况下,生成第二调用信息并向第二目标对象发送第二调用信息;第一目标对象在第二调用信息不存在跟踪信息的情况下,根据第一标识信息和第二调用信息确定第一缓存信息,并将第一缓存信息进行缓存;第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息获取缓存信息中的第二标识信息;第三目标对象基于第二标识信息生成并依次上报第三标识信息和第四标识信息。根据本发明的技术方案,可以解决由于特定协议导致调用链断开而无法完整跟踪的问题,实现了在存在特定协议情况下仍能够形成完整的调用链。

Description

一种数据处理方法、装置、电子设备及存储介质
技术领域
本发明涉及到分布式系统监控技术领域,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
背景技术
当下分布式已经成了系统的标准形态,分布式系统的监控也已经有了很多方法和技术,比如zipkin(微服务链路跟踪工具)和skywalking(分布式追踪系统)等,在技术上都是基于在远程调用过程中注入一些跟踪信息,然后通过跟踪信息来串联系统的调用过程,基本能够覆盖绝大部分场景。
通过上述方法跟踪也有它的前提约束,首先要求通讯协议能够增加跟踪信息而不破坏本身的调用。比如当下dubbo,http之类的协议都能很好的支持。但对于其他一些协议就不再适用,比如ISO 8583之类的协议,一旦加入跟踪信息就会破坏本身的通讯。
发明内容
本发明的目的是提供一种数据处理方法、装置、电子设备及存储介质,通过第一标识信息和第二调用信息,确定第一缓存信息并将第一缓存信息进行缓存,在第三目标对象接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息获取缓存信息中的第二标识信息,由第三目标对象基于第二标识信息生成第三标识信息和第四标识信息,并依次上报第三标识信息和第四标识信息,可以解决由于特定协议导致调用链断开而无法完整跟踪的问题,实现了在存在特定协议情况下仍能够形成完整的调用链。
为实现上述目的,本发明提供了如下方案:
一种数据处理方法,所述方法包括:
第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送所述第二调用信息,所述第一调用信息包括第一标识信息;
所述第一目标对象在所述第二调用信息不存在跟踪信息的情况下,根据所述第一标识信息和第二调用信息,确定第一缓存信息,并将所述第一缓存信息进行缓存,所述第一缓存信息包括第二标识信息;
第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取缓存信息中的第二标识信息,所述缓存信息包括所述第一缓存信息;
所述第三目标对象基于所述第二标识信息生成第三标识信息和第四标识信息,并依次上报所述第三标识信息和所述第四标识信息,所述第三标识信息包括所述第二目标对象的标识信息,所述第四标识信息包括所述第三目标对象的标识信息。
可选的,所述根据所述第一标识信息和第二调用信息,确定第一缓存信息,包括:
根据所述第一标识信息,确定所述第二标识信息;
获取所述第二调用信息中的第一特征信息;
建立所述第二标识信息和所述第一特征信息的映射关系,得到所述第一缓存信息。
可选的,所述基于所述第三调用信息,获取所述缓存信息中的第二标识信息,包括:
获取所述第三调用信息的第二特征信息;
基于所述第二特征信息和所述映射关系,获取所述缓存信息中的第二标识信息。
可选的,所述基于所述第二特征信息和所述映射关系,获取所述缓存信息中的第二标识信息,包括:
基于所述第二特征信息,进行匹配处理,得到所述缓存信息中与所述第二特征信息匹配的所述第一特征信息;
基于所述第一特征信息和所述映射关系,获取第二标识信息。
可选的,所述第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取所述缓存信息中的第二标识信息之前,还包括:
所述第二目标对象在接收到所述第二调用信息的情况下,生成所述第三调用信息;
所述第二目标对象向所述第三目标对象发送所述第三调用信息。
可选的,所述第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,包括:
获取所述第二目标对象的协议信息和通用协议信息;
对所述第二目标对象的协议信息与所述通用协议信息进行匹配处理,得到协议匹配结果;
基于所述协议匹配结果,生成所述第二调用信息。
可选的,所述基于所述协议匹配结果,生成所述第二调用信息,包括:
在所述协议匹配结果为所述第二目标对象的协议信息与所述通用协议信息中的协议信息匹配的情况下,生成存在跟踪信息的第二调用信息;
在所述协议匹配结果为所述第二目标对象的协议信息与所述通用协议信息中的协议信息不匹配的情况下,生成不存在跟踪信息的第二调用信息。
另一方面,本发明还提供了一种数据处理装置,所述装置包括:
信息发送模块,用于第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送所述第二调用信息,所述第一调用信息包括第一标识信息;
第一缓存信息确定模块,用于所述第一目标对象在所述第二调用信息不存在跟踪信息的情况下,根据所述第一标识信息和第二调用信息,确定第一缓存信息,并将所述第一缓存信息进行缓存,所述第一缓存信息包括第二标识信息;
第二标识信息获取模块,用于第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取缓存信息中的第二标识信息,所述缓存信息包括所述第一缓存信息;
标识信息上报模块,用于所述第三目标对象基于所述第二标识信息生成第三标识信息和第四标识信息,并分别上报所述第三标识信息和所述第四标识信息,所述第三标识信息包括所述第二目标对象的标识信息,所述第四标识信息包括所述第三目标对象的标识信息。
另一方面,本发明还提供了一种电子设备,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器被配置为执行上述数据处理方法。
另一方面,本发明还提供了一种非易失性计算机可读存储介质,其上存储有计算机程序指令,其中,所述计算机程序指令被处理器执行时实现上述数据处理方法。
本发明提供的一种数据处理方法、装置、电子设备及存储介质,通过第一标识信息和第二调用信息,确定第一缓存信息并将第一缓存信息进行缓存,在第三目标对象接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息获取缓存信息中的第二标识信息,由第三目标对象基于第二标识信息生成第三标识信息和第四标识信息,并依次上报第三标识信息和第四标识信息,可以解决由于特定协议导致调用链断开而无法完整跟踪的问题,实现了在存在特定协议情况下仍能够形成完整的调用链。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还能够根据这些附图获得其它附图。
图1是本发明实施例提供的一种数据处理方法的方法流程图;
图2是本发明实施例提供的一种数据处理方法的示意图;
图3是本发明实施例提供的一种根据第一标识信息和第二调用信息,确定第一缓存信息的方法流程图;
图4是本发明实施例提供的一种基于第三调用信息,获取缓存信息中的第二标识信息的方法流程图;
图5是本发明实施例提供的一种基于第二特征信息和映射关系,获取缓存信息中的第二标识信息的方法流程图;
图6是本发明实施例提供的一种第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息,获取缓存信息中的第二标识信息之前的方法流程图;
图7是本发明实施例提供的一种第一目标对象在接收到第一调用信息的情况下,生成第二调用信息的方法流程图;
图8是本发明实施例提供的一种基于所述协议匹配结果,生成第二调用信息的方法流程图;
图9是本发明实施例提供的一种数据处理装置的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
以下介绍本发明的一种数据处理方法的实施例,图1是本发明实施例提供的一种数据处理方法的方法流程图,图2是本发明实施例提供的一种数据处理方法的示意图。需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的系统产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。如图1-图2所示,本实施例提供了一种数据处理方法,该方法包括:
S101.第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送第二调用信息,第一调用信息包括第一标识信息。
其中,在系统完成一次服务的过程中,会需要调用多个应用。第一目标对象、第二目标对象和第三目标对象可以是指某次服务中需要调用的应用。为便于理解,在本实施例的调用链中可以包括四个应用,分别为第一应用、第二应用。第三应用和第四应用;具体地,第一目标对象可以是第二应用,第二目标对象可以是第三应用,第三目标对象可以是第四应用。第一调用信息可以用于调用第二应用;具体地,第一调用信息可以是由第一应用向第一目标对象发送的调用信息。第二调用信息可以用于调用第三应用;具体地,第二调用信息可以是由第一目标对象向第二目标对象发送的调用信息。第一标识信息可以用于上报以形成一个服务的完整调用过程。具体地,第一标识信息可以包括第一应用的标识信息和跟踪标识;跟踪标识可以包括跟踪ID(Trace ID)和跨度ID(Span ID)。
在实际应用中,第一应用在接收到调用指令后,可以生成第一标识信息并上报第一标识信息,在应用完成后可以生成包含第一标识信息的第一调用信息,并将第一调用信息发送给第一目标对象。第一目标对象在接收到第一调用信息的情况下,可以生成第二调用信息,并向第二目标对象发送第二调用信息。
S102.第一目标对象在第二调用信息不存在跟踪信息的情况下,根据第一标识信息和第二调用信息,确定第一缓存信息,并将第一缓存信息进行缓存,第一缓存信息包括第二标识信息。
其中,跟踪信息可以是用于应用生成其对应标识信息的信息。例如,在第二调用信息存在跟踪信息的情况下,第二调用信息的跟踪信息可以包括第一应用的标识信息和跟踪标识。第一缓存信息可以是指第一目标对象缓存至缓存器中的与其相关的跟踪信息。第二标识信息可以用于上报以形成一个服务的完整调用过程。具体地,第二标识信息可以包括第二应用的标识信息和跟踪标识。
在实际应用中,由于第三应用的特殊协议,第二调用信息无法加入跟踪信息。第一目标对象在接收到第一标识信息后,可以根据第一标识信息生成其对应的第二标识信息。在第二调用信息不存在跟踪信息的情况下,可以将第二标识信息中的第二应用的标识信息和第二调用信息作为第一缓存信息,进行缓存。需要说明的是,在本实施例中,第一标识信息、第二标识信息、第三标识信息以及第四标识信息的生成过程可以是按照调用链中跟踪信息的生成过程,本公开不作限定。
S103.第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息,获取缓存信息中的第二标识信息,缓存信息包括第一缓存信息。
其中,第三调用信息可以用于调用第四应用;具体地,第三调用信息可以是由第二目标对象向第三目标对象发送的调用信息。可以理解的是,由于第三应用的特殊协议,第二目标对象(即第三应用)发送的第三调用信息不存在跟踪信息。缓存信息可以是指缓存器中所缓存的所有信息;具体地,缓存信息可以包括第一缓存信息。
在实际应用中,第三调用信息中可以携带第三应用的标识信息;第一缓存信息中可以包括第三应用的标识信息,可以基于第三调用信息中的第三应用的标识信息,通过查表的方式查找到缓存信息中的第一缓存信息,从而获取得到第一缓存信息中的第二标识信息。
S104.第三目标对象基于第二标识信息生成第三标识信息和第四标识信息,并依次上报第三标识信息和第四标识信息,第三标识信息包括第二目标对象的标识信息,第四标识信息包括第三目标对象的标识信息。
其中,第三标识信息和第四标识信息可以用于上报以形成一个服务的完整调用过程;具体地,第三标识信息可以包括第二目标对象的标识信息和跟踪信息,第四标识信息可以包括第三目标对象的标识信息和跟踪信息。
在实际应用中,第三目标对象可以基于第二标识信息生成第三标识信息和第四标识信息;通过依次上报第三标识信息和第四标识信息后,监控系统可以根据一次服务调用过程中上报的全部标识信息来确定应用的调用过程,从而形成该服务完整的调用链。
通过第一标识信息和第二调用信息,确定第一缓存信息并将第一缓存信息进行缓存,在第三目标对象接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息获取缓存信息中的第二标识信息,由第三目标对象基于第二标识信息生成第三标识信息和第四标识信息,并依次上报第三标识信息和第四标识信息,可以解决由于特定协议导致调用链断开而无法完整跟踪的问题,实现了在存在特定协议情况下仍能够形成完整的调用链。
图3是本发明实施例提供的一种根据第一标识信息和第二调用信息,确定第一缓存信息的方法流程图。在一个可能的实施方式中,如图3所示,上述根据第一标识信息和第二调用信息,确定第一缓存信息,可以包括:
S301.根据第一标识信息,确定第二标识信息。
在实际应用中,可以根据第一标识信息包括的跟踪信息确定第二标识信息中的跟踪信息。例如,可以根据第一标识信息的跟踪信息中的Trace ID和Span ID确定第二标识信息的跟踪信息中的Trace ID和Span ID。
S302.获取第二调用信息中的第一特征信息。
其中,第一特征信息可以是指第二调用信息中与第三调用信息所共有的且与其他调用信息不共有的特征信息。例如,发送至第二目标对象的第二调用信息中的某特定位置的信息与第三调用信息中相同位置的信息相同,可以将第二调用信息中该特定位置的信息作为第一特征信息。
在实际应用中,可以基于第三应用的协议,确定第一特征信息。具体地,可以基于第三应用的协议,确定第二调用信息中与第三调用信息所共有的且与其他调用信息不共有的特征读取范围,并获取该特征读取范围内的信息作为第一特征信息。
S303.建立第二标识信息和第一特征信息的映射关系,得到第一缓存信息。
通过建立第二标识信息和第一特征信息之间的映射关系,可以使得第三目标对象在缓存信息中基于映射关系快速查找到第二标识信息。
图4是本发明实施例提供的一种基于第三调用信息,获取缓存信息中的第二标识信息的方法流程图。在一个可能的实施方式中,如图4所示,上述步骤S103可以包括:
S401.获取第三调用信息的第二特征信息。
其中,第二特征信息可以是指第三调用信息中与第二调用信息所共有的且与其他调用信息不共有的特征信息。例如,第三调用信息中特定位置的信息与第二调用信息中相同位置的信息相同,可以将第三调用信息中特定位置的信息作为第二特征信息。
在实际应用中,可以基于第三应用的协议,确定第二特征信息。具体地,可以基于第三应用协议,确定第三调用信息中与第二调用信息所共有的且与其他调用信息不共有的特征读取范围,并获取该特征读取范围内的信息作为第二特征信息。
S402.基于第二特征信息和映射关系,获取缓存信息中的第二标识信息。
在一个可能的实施方式中,如图5所示,上述步骤S402可以包括:
S501.基于第二特征信息,进行匹配处理,得到缓存信息中与第二特征信息匹配的第一特征信息。
在实际应用中,通过将第二特征信息与缓存信息中的多个特征信息进行匹配,可以得到与第二特征信息相匹配的第一特征信息。
S502.基于第一特征信息和映射关系,获取第二标识信息。
在实际应用中,基于第一特征信息与第二标识信息之间的映射关系,可以得到第二标识信息。通过第一特征信息与第二标识信息之间的映射关系,可以快速在缓存信息中得到第二标识信息。
图6是本发明实施例提供的一种第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息,获取缓存信息中的第二标识信息之前的方法流程图。在一个可能的实施方式中,如图6所示,上述第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息,获取缓存信息中的第二标识信息之前,还可以包括:
S601.第二目标对象在接收到第二调用信息的情况下,生成第三调用信息。
S602.第二目标对象向第三目标对象发送第三调用信息。
在实际应用中,第二目标对象在接收到第二调用信息后,完成其相应的应用服务后,生成第三调用信息,并将第三调用信息发送至第三目标对象,以对第四应用进行调用。
图7是本发明实施例提供的一种第一目标对象在接收到第一调用信息的情况下,生成第二调用信息的方法流程图。在一个可能的实施方式中,如图7所示,上述第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,可以包括:
S701.获取第二目标对象的协议信息和通用协议信息。
其中,第二目标对象的协议信息可以是指第二应用所采用的协议的信息。具体地,第二目标对象的协议信息可以是第二应用所采用的协议名称。通用协议信息可以是指能够加入跟踪信息的多个协议对应的协议信息。通用协议信息可以用于与第二目标对象的协议信息进行匹配以确定第二目标对象的协议信息是否可以加入跟踪信息。通用协议信息可以包括多个能够加入跟踪信息的协议名称。
在实际应用中,可以根据第三应用的服务内容得到第三应用的协议信息。通用协议信息可以是预先存储在存储器中的,可以通过向存储器中获取得到。
S702.对第二目标对象的协议信息与通用协议信息进行匹配处理,得到协议匹配结果。
具体地,可以通过第二目标对象的协议信息与通用协议信息中的多个协议信息依次进行匹配,得到协议匹配结果。
S703.基于协议匹配结果,生成第二调用信息。
在一个可能的实施方式中,如图8所示,上述步骤S703可以包括:
S801.在协议匹配结果为第二目标对象的协议信息与通用协议信息中的协议信息匹配的情况下,生成存在跟踪信息的第二调用信息。
在实际应用中,在第二目标对象的协议信息与通用协议信息中的协议信息匹配的情况下,可以认为是第二目标对象采用的是可以加入跟踪信息的协议,可以生成存在跟踪信息的第二调用信息,用于第一目标对象发送给第二目标对象以调用第二应用。
S802.在协议匹配结果为第二目标对象的协议信息与通用协议信息中的协议信息不匹配的情况下,生成不存在跟踪信息的第二调用信息。
在实际应用中,在第二目标对象的协议信息与通用协议信息中的协议信息不匹配的情况下,可以认为是第二目标对象采用的是不能加入跟踪信息的协议,可以通过生成不存在跟踪信息的第二调用信息,用于第一目标对象发送给第二目标对象以调用第二应用。
通过获取通用协议信息并将第二目标对象的协议信息与通用协议信息进行匹配,可以确定第二目标对象的协议信息是否可以加入跟踪信息。
图9是本发明实施例提供的一种数据处理装置的结构框图。另一方面,本发明还提供了一种数据处理装置,如图9所示,该装置包括:
信息发送模块10,用于第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送第二调用信息,第一调用信息包括第一标识信息;
第一缓存信息确定模块20,用于第一目标对象在第二调用信息不存在跟踪信息的情况下,根据第一标识信息和第二调用信息,确定第一缓存信息,并将第一缓存信息进行缓存,第一缓存信息包括第二标识信息;
第二标识信息获取模块30,用于第三目标对象在接收到第二目标对象发送的第三调用信息的情况下,基于第三调用信息,获取缓存信息中的第二标识信息,缓存信息包括第一缓存信息;
标识信息上报模块40,用于第三目标对象基于第二标识信息生成第三标识信息和第四标识信息,并分别上报第三标识信息和第四标识信息,第三标识信息包括第二目标对象的标识信息,第四标识信息包括第三目标对象的标识信息。
另一方面,本发明实施例还提供了一种电子设备,包括:处理器;用于存储处理器可执行指令的存储器;其中,处理器被配置为执行上述数据处理方法。
另一方面,本发明实施例还提供了一种非易失性计算机可读存储介质,其上存储有计算机程序指令,其中,计算机程序指令被处理器执行时实现上述数据处理方法。
要说明的是,对于前述的各方法实施例,为了简便描述,将其都表述为二系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。同样地,上述数据处理装置的各模块是指计算机程序或者程序段,用于执行某一项或多项特定的功能,此外,上述各模块的区分并不代表实际的程序代码也必须是分开的。此外,还可对上述实施例进行任意组合,得到其他的实施例。
在上述实施例中,对各实施例的描述都各有侧重,某各实施例中没有详述的部分,可以参见其它实施例的相关描述。本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrative logical block),单元,和步骤可以通过电子硬件、电脑软件,或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability),上述的各种说明性部件(illustrative components),单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用,可以使用各种方法实现所述的功能,但这种实现不应被理解为超出本发明实施例保护的范围。
上述说明已经充分揭露了本发明的具体实施方式。需要指出的是,熟悉该领域的技术人员对本发明的具体实施方式所做的任何改动均不脱离本发明的权利要求书的范围。相应地,本发明的权利要求的范围也并不仅仅局限于前述具体实施方式。

Claims (10)

1.一种数据处理方法,其特征在于,所述方法包括:
第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送所述第二调用信息,所述第一调用信息包括第一标识信息,第一标识信息包括第一应用的标识信息和第一应用对应的跟踪标识,所述第一应用对应的跟踪标识包括第一应用对应的Trace ID和Span ID;
所述第一目标对象在所述第二调用信息不存在跟踪信息的情况下,根据所述第一标识信息和第二调用信息,确定第一缓存信息,并将所述第一缓存信息进行缓存,所述第一缓存信息包括第二标识信息,所述第二标识信息包括所述第一目标对象的标识信息和所述第一目标对象对应的跟踪标识,所述第一目标对象对应的跟踪标识包括所述第一目标对象对应的Trace ID和Span ID;
第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取缓存信息中的第二标识信息,所述缓存信息包括所述第一缓存信息;
所述第三目标对象基于所述第二标识信息生成第三标识信息和第四标识信息,并依次上报所述第三标识信息和所述第四标识信息,所述第三标识信息包括所述第二目标对象的标识信息和所述第二目标对象对应的跟踪标识,所述第二目标对象对应的跟踪标识包括所述第二目标对象对应的Trace ID和Span ID,所述第四标识信息包括所述第三目标对象的标识信息和所述第三目标对象对应的跟踪标识,所述第三目标对象对应的跟踪标识包括所述第三目标对象对应的Trace ID和Span ID;所述第一标识信息、所述第二标识信息、所述第三标识信息和所述第四标识信息用于上报以形成一个服务的完整调用过程。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一标识信息和第二调用信息,确定第一缓存信息,包括:
根据所述第一标识信息,确定所述第二标识信息;
获取所述第二调用信息中的第一特征信息;
建立所述第二标识信息和所述第一特征信息的映射关系,得到所述第一缓存信息。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第三调用信息,获取所述缓存信息中的第二标识信息,包括:
获取所述第三调用信息的第二特征信息;
基于所述第二特征信息和所述映射关系,获取所述缓存信息中的第二标识信息。
4.根据权利要求3所述的方法,其特征在于,所述基于所述第二特征信息和所述映射关系,获取所述缓存信息中的第二标识信息,包括:
基于所述第二特征信息,进行匹配处理,得到所述缓存信息中与所述第二特征信息匹配的所述第一特征信息;
基于所述第一特征信息和所述映射关系,获取第二标识信息。
5.根据权利要求1所述的方法,其特征在于,所述第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取所述缓存信息中的第二标识信息之前,还包括:
所述第二目标对象在接收到所述第二调用信息的情况下,生成所述第三调用信息;
所述第二目标对象向所述第三目标对象发送所述第三调用信息。
6.根据权利要求1所述的方法,其特征在于,所述第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,包括:
获取所述第二目标对象的协议信息和通用协议信息;
对所述第二目标对象的协议信息与所述通用协议信息进行匹配处理,得到协议匹配结果;
基于所述协议匹配结果,生成所述第二调用信息。
7.根据权利要求6所述的方法,其特征在于,所述基于所述协议匹配结果,生成所述第二调用信息,包括:
在所述协议匹配结果为所述第二目标对象的协议信息与所述通用协议信息中的协议信息匹配的情况下,生成存在跟踪信息的第二调用信息;
在所述协议匹配结果为所述第二目标对象的协议信息与所述通用协议信息中的协议信息不匹配的情况下,生成不存在跟踪信息的第二调用信息。
8.一种数据处理装置,其特征在于,所述装置包括:
信息发送模块,用于第一目标对象在接收到第一调用信息的情况下,生成第二调用信息,并向第二目标对象发送所述第二调用信息,所述第一调用信息包括第一标识信息,第一标识信息包括第一应用的标识信息和第一应用对应的跟踪标识,所述第一应用对应的跟踪标识包括第一应用对应的Trace ID和Span ID;
第一缓存信息确定模块,用于所述第一目标对象在所述第二调用信息不存在跟踪信息的情况下,根据所述第一标识信息和第二调用信息,确定第一缓存信息,并将所述第一缓存信息进行缓存,所述第一缓存信息包括第二标识信息,所述第二标识信息包括所述第一目标对象的标识信息和所述第一目标对象对应的跟踪标识,所述第一目标对象对应的跟踪标识包括所述第一目标对象对应的Trace ID和Span ID;
第二标识信息获取模块,用于第三目标对象在接收到所述第二目标对象发送的第三调用信息的情况下,基于所述第三调用信息,获取缓存信息中的第二标识信息,所述缓存信息包括所述第一缓存信息;
标识信息上报模块,用于所述第三目标对象基于所述第二标识信息生成第三标识信息和第四标识信息,并分别上报所述第三标识信息和所述第四标识信息,所述第三标识信息包括所述第二目标对象的标识信息和所述第二目标对象对应的跟踪标识,所述第二目标对象对应的跟踪标识包括所述第二目标对象对应的Trace ID和Span ID,所述第四标识信息包括所述第三目标对象的标识信息和所述第三目标对象对应的跟踪标识,所述第三目标对象对应的跟踪标识包括所述第三目标对象对应的Trace ID和Span ID;所述第一标识信息、所述第二标识信息、所述第三标识信息和所述第四标识信息用于上报以形成一个服务的完整调用过程。
9.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述可执行指令以实现权利要求1至7中任意一项所述的数据处理方法。
10.一种非易失性计算机可读存储介质,其上存储有计算机程序指令,其特征在于,所述计算机程序指令被处理器执行时实现权利要求1至7中任意一项所述的数据处理方法。
CN202210000911.9A 2022-01-04 2022-01-04 一种数据处理方法、装置、电子设备及存储介质 Active CN114003472B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210000911.9A CN114003472B (zh) 2022-01-04 2022-01-04 一种数据处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210000911.9A CN114003472B (zh) 2022-01-04 2022-01-04 一种数据处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114003472A CN114003472A (zh) 2022-02-01
CN114003472B true CN114003472B (zh) 2022-04-12

Family

ID=79932544

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210000911.9A Active CN114003472B (zh) 2022-01-04 2022-01-04 一种数据处理方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114003472B (zh)

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104219316A (zh) * 2014-09-12 2014-12-17 微梦创科网络科技(中国)有限公司 一种分布式系统中的调用请求处理方法及装置
CN105224445A (zh) * 2015-10-28 2016-01-06 北京汇商融通信息技术有限公司 分布式跟踪系统
US9369332B1 (en) * 2013-02-27 2016-06-14 Amazon Technologies, Inc. In-memory distributed cache
CN106603270A (zh) * 2016-11-10 2017-04-26 广州酷狗计算机科技有限公司 分布式系统中调用链路的追踪方法及装置
CN106790718A (zh) * 2017-03-16 2017-05-31 北京搜狐新媒体信息技术有限公司 服务调用链路分析方法及系统
CN109286608A (zh) * 2018-08-20 2019-01-29 中国平安人寿保险股份有限公司 调用链处理方法、装置及存储设备、计算机设备
CN109726016A (zh) * 2017-10-30 2019-05-07 阿里巴巴集团控股有限公司 一种用于分布式系统的链路追踪方法、装置和系统
CN109921927A (zh) * 2019-02-20 2019-06-21 苏州人之众信息技术有限公司 基于微服务的实时调用链跟踪方法
CN109992465A (zh) * 2017-12-29 2019-07-09 中国电信股份有限公司 服务追踪方法、装置和计算机可读存储介质
CN110457190A (zh) * 2019-07-09 2019-11-15 优估(上海)信息科技有限公司 一种基于区块链的全链路监控方法、装置及系统
CN111431773A (zh) * 2020-05-18 2020-07-17 江苏电力信息技术有限公司 一种基于OpenTracing的链路跟踪方法
CN112100537A (zh) * 2020-07-28 2020-12-18 苏宁云计算有限公司 基于本地缓存和分布式缓存的数据获取方法、应用服务器
CN112558947A (zh) * 2020-12-18 2021-03-26 京东数字科技控股股份有限公司 程序调用追踪方法、装置以及存储介质
CN112737800A (zh) * 2019-10-28 2021-04-30 顺丰科技有限公司 服务节点故障定位方法、调用链生成方法及服务器
CN113162977A (zh) * 2021-03-16 2021-07-23 Oppo广东移动通信有限公司 一种信息处理方法及装置、设备、存储介质
CN113625936A (zh) * 2020-05-09 2021-11-09 腾讯科技(深圳)有限公司 数据处理方法、装置、存储介质及设备
CN113760562A (zh) * 2020-09-30 2021-12-07 北京沃东天骏信息技术有限公司 链路追踪方法、装置、系统、服务器和存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110246518A1 (en) * 2010-04-01 2011-10-06 Verizon Patent And Licensing Inc. Method and system of distributed caching
CN110245035A (zh) * 2019-05-20 2019-09-17 平安普惠企业管理有限公司 一种链路跟踪方法及装置
CN112948225B (zh) * 2019-12-24 2023-02-17 深圳市明源云科技有限公司 一种链路监控方法、装置、监控设备及存储介质

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9369332B1 (en) * 2013-02-27 2016-06-14 Amazon Technologies, Inc. In-memory distributed cache
CN104219316A (zh) * 2014-09-12 2014-12-17 微梦创科网络科技(中国)有限公司 一种分布式系统中的调用请求处理方法及装置
CN105224445A (zh) * 2015-10-28 2016-01-06 北京汇商融通信息技术有限公司 分布式跟踪系统
CN106603270A (zh) * 2016-11-10 2017-04-26 广州酷狗计算机科技有限公司 分布式系统中调用链路的追踪方法及装置
CN106790718A (zh) * 2017-03-16 2017-05-31 北京搜狐新媒体信息技术有限公司 服务调用链路分析方法及系统
CN109726016A (zh) * 2017-10-30 2019-05-07 阿里巴巴集团控股有限公司 一种用于分布式系统的链路追踪方法、装置和系统
CN109992465A (zh) * 2017-12-29 2019-07-09 中国电信股份有限公司 服务追踪方法、装置和计算机可读存储介质
CN109286608A (zh) * 2018-08-20 2019-01-29 中国平安人寿保险股份有限公司 调用链处理方法、装置及存储设备、计算机设备
CN109921927A (zh) * 2019-02-20 2019-06-21 苏州人之众信息技术有限公司 基于微服务的实时调用链跟踪方法
CN110457190A (zh) * 2019-07-09 2019-11-15 优估(上海)信息科技有限公司 一种基于区块链的全链路监控方法、装置及系统
CN112737800A (zh) * 2019-10-28 2021-04-30 顺丰科技有限公司 服务节点故障定位方法、调用链生成方法及服务器
CN113625936A (zh) * 2020-05-09 2021-11-09 腾讯科技(深圳)有限公司 数据处理方法、装置、存储介质及设备
CN111431773A (zh) * 2020-05-18 2020-07-17 江苏电力信息技术有限公司 一种基于OpenTracing的链路跟踪方法
CN112100537A (zh) * 2020-07-28 2020-12-18 苏宁云计算有限公司 基于本地缓存和分布式缓存的数据获取方法、应用服务器
CN113760562A (zh) * 2020-09-30 2021-12-07 北京沃东天骏信息技术有限公司 链路追踪方法、装置、系统、服务器和存储介质
CN112558947A (zh) * 2020-12-18 2021-03-26 京东数字科技控股股份有限公司 程序调用追踪方法、装置以及存储介质
CN113162977A (zh) * 2021-03-16 2021-07-23 Oppo广东移动通信有限公司 一种信息处理方法及装置、设备、存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
"Improving Networked File System Performance Using a Locality-Aware Cooperative Cache Protocol";Song Jiang等;《IEEE Transactions on Computers》;20100218;第59卷(第11期);第1508-1519页 *
"Size-Aware Cache Management for Compressed Cache Architectures";Seungcheol Baek等;《IEEE Transactions on Computers》;20140926;第64卷(第8期);第2337-2352页 *
"分布式跟踪告警诊断系统的设计与实现";鲁伟林;《中国优秀硕士学位论文全文数据库•信息科技辑》;20190115;第2019年卷(第1期);第I140-2563页 *
"分布式跟踪系统中数据分析引擎的设计与实现";汪灿丰;《中国优秀硕士学位论文全文数据库•信息科技辑》;20190115;第2019年卷(第1期);第I138-2164页 *

Also Published As

Publication number Publication date
CN114003472A (zh) 2022-02-01

Similar Documents

Publication Publication Date Title
US20070106541A1 (en) Method for the construction and execution of a distributed workflow in a communication system
CN109376088B (zh) 一种自动化测试系统及自动化测试方法
CN113691635B (zh) 调用微服务的方法、装置、电子设备和可读存储介质
CN108052474B (zh) 数据格式转换方法、装置、设备及计算机可读存储介质
CN105279435A (zh) 网页漏洞检测方法和装置
CN111782530B (zh) 一种远程调试方法、装置、系统、电子设备及存储介质
JP6433578B2 (ja) 情報自主登録の実現方法、装置、システム及びコンピュータ記憶媒体
CN112615753A (zh) 一种链路异常追踪方法、第一节点、第二节点以及链路
CN110543428A (zh) 应用系统的测试方法及装置
CN106407061B (zh) 一种北向接口测试装置和北向接口的测试方法
CN114003472B (zh) 一种数据处理方法、装置、电子设备及存储介质
CN108647139B (zh) 系统的测试方法、装置、存储介质及电子装置
CN111200519B (zh) 数据处理方法、装置、bbu、接入网设备和存储介质
CN112559124A (zh) 一种模型管理系统以及目标操作指令的处理方法和装置
CN117119078A (zh) 基于Kubernetes集群互联互通调度框架的隐私任务调度方法及装置
CN111680475A (zh) 一种数据转换方法、装置、电子设备及存储介质
CN113535020B (zh) 用于生成应用图标的方法、装置、设备、介质和产品
CN112965735B (zh) 模型更新方法、装置、设备及计算机可读介质
CN107872493B (zh) 一种信息处理方法、终端和服务器
CN114785871A (zh) 日志查询方法及装置
CN114629917A (zh) 一种用于跨系统通讯的数据处理方法、装置及电子设备
CN110941568B (zh) 缓存更新方法、装置、系统、电子设备及介质
CN108710557B (zh) 分布式软件程序数据一致性的判断方法及系统
CN111078571A (zh) 模拟响应的测试方法、终端设备及计算机可读存储介质
CN110825406A (zh) 一种软件升级的方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant