CN103684898B - 一种监测用户请求在分布式系统中运行的方法及装置 - Google Patents

一种监测用户请求在分布式系统中运行的方法及装置 Download PDF

Info

Publication number
CN103684898B
CN103684898B CN201210342909.6A CN201210342909A CN103684898B CN 103684898 B CN103684898 B CN 103684898B CN 201210342909 A CN201210342909 A CN 201210342909A CN 103684898 B CN103684898 B CN 103684898B
Authority
CN
China
Prior art keywords
request
user
identifier
daily record
distributed system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210342909.6A
Other languages
English (en)
Other versions
CN103684898A (zh
Inventor
蔡华
周琦
孙廷韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Cloud Computing Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201210342909.6A priority Critical patent/CN103684898B/zh
Priority to TW101146909A priority patent/TWI564732B/zh
Priority to US14/023,014 priority patent/US9485317B2/en
Priority to JP2015532018A priority patent/JP5978401B2/ja
Priority to EP13766818.2A priority patent/EP2895956B1/en
Priority to PCT/US2013/059229 priority patent/WO2014043211A1/en
Publication of CN103684898A publication Critical patent/CN103684898A/zh
Application granted granted Critical
Publication of CN103684898B publication Critical patent/CN103684898B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/006Identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3072Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3072Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
    • G06F11/3075Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting the data filtering being achieved in order to maintain consistency among the monitored data, e.g. ensuring that the monitored data belong to the same timeframe, to the same system or component
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3476Data logging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/805Real-time
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/835Timestamp
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请公开了一种监测用户请求在分布式系统中运行的方法及装置,在用户访问分布式系统时,对采样的用户请求生成与其对应的标识符,并在该用户请求调用的各线程中传递该标识符;针对各服务器运行的每个被预先注入跟踪接口的进程,若检测到当前该进程包含用户请求对应的标识符,则将标识符和跟踪所指示的函数的相关信息对应并生成日志;最后将生成的日志按照所对应的标识符分别进行汇总。在对用户请求进行监测时,由于采用采样的方式抽样监测用户请求,对系统性能的扰动低,不会给监测系统造成太大压力,并且,针对监测分布式系统中的各服务器产生的日志能够按照用户请求的标识符实时汇总,能够支持实时分析用户请求。

Description

一种监测用户请求在分布式系统中运行的方法及装置
技术领域
本申请涉及分布式系统技术领域,尤其涉及一种监测用户请求在分布式系统中运行的方法及装置。
背景技术
在大型分布式系统中,用户的应用服务请求往往需要经过多种服务构件才能完成操作,例如:在阿里巴巴的云计算平台中,用户的一次写文件的访问请求需经过调度、通信、索引以及分布式存储等服务构件,才能完成更新索引缓存、维护用户元信息、写文件以及写访问日志等多种操作,而这些服务构件一般部署在数以百计的服务器的不同进程上且由不同的软件构成。
目前,对于用户调用分布式系统行为的监控和分析,往往集中在分布式系统的单个服务构件上,例如:通过监控文件系统的读写,监控上层系统的吞吐量等。通过这种监控方式只能对单一服务构件进行分析,无法准确得到用户的应用服务请求行为对整个分布式系统的影响。
综上所述,如何在对系统性能低扰动的情况下,实现在分布式系统中实时监测用户请求的运行,是本领域技术人员亟需解决的技术问题。
发明内容
本申请实施例提供了一种监测用户请求在分布式系统中运行的方法及装置,用以实现在分布式系统中对系统性能低扰动的情况下,实时监测用户请求的运行。
本申请实施例提供的一种监测用户请求在分布式系统中运行的方法,包括:
对分布式系统中各服务器接收到的用户请求进行采样;
对各服务器采样到的用户请求生成对应的标识符,所述标识符在所述用户请求调用线程时会作为变量被传递到当前线程中;
预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将所述标识符和跟踪接口所指示的函数的相关信息对应并生成日志;
将生成的日志按照所对应的标识符分别进行汇总。
本申请实施例提供的一种监测用户请求在分布式系统中运行的装置,包括:
采样模块,用于对分布式系统中各服务器接收到的用户请求进行采样;
标识符生成模块,用于对各服务器采样到的用户请求生成对应的标识符,所述标识符在所述用户请求调用线程时会作为变量被传递到当前线程中;
注入跟踪接口模块,用于预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将所述标识符和跟踪接口所指示的函数的相关信息对应并生成日志;
日志汇总模块,用于将生成的日志按照所对应的标识符分别进行汇总。
本申请实施例的有益效果包括:
本申请实施例提供的一种监测用户请求在分布式系统中运行的方法及装置,在用户访问分布式系统时,对分布式系统接收到的用户请求进行采样,并对采样到的用户请求生成与其对应的标识符,在该用户请求调用的各线程中传递该标识符;针对分布式系统中各服务器运行的每个被预先注入跟踪接口的进程,当运行到跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将标识符和跟踪接口所指示的函数的相关信息对应并生成日志;最后将生成的日志按照所对应的标识符分别进行汇总。在对用户请求进行监测时,由于采用采样的方式抽样监测用户请求,对系统性能的扰动低,不会给监测系统造成太大压力,并且,针对监测分布式系统中的各服务器产生的日志能够按照用户请求的标识符实时汇总,能够支持实时分析用户请求的行为。
附图说明
图1为本申请实施例提供的监测用户请求在分布式系统中运行的方法的流程图;
图2为本申请实施例提供的日志输出格式的示意图;
图3为本申请实施例提供的用一个调用的不同系统行为的比较示意图;
图4为本申请实施例提供的同一个调用的不同系统行为的差异分析的示意图;
图5为本申请实施例提供的MBoxServer::GetMail的详细调用情况的示意图;
图6为为本申请实施例提供的用户请求次数和机器之间的分布的示意图;
图7为本申请实施例提供的监测用户请求在分布式系统中运行的装置的结构示意图。
具体实施方式
下面结合附图,对本申请实施例提供的监测用户请求在分布式系统中运行的方法及装置的具体实施方式进行详细地说明。
本申请实施例提供的一种监测用户请求在分布式系统中运行的方法,如图1所示,具体流程包括以下步骤:
S101、对分布式系统中各服务器接收到的用户请求进行采样;
S102、对各服务器采样到的用户请求生成对应的标识符,该标识符在用户请求调用线程时会作为变量被传递到当前线程中;
S103、预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将标识符和跟踪接口所指示的函数的相关信息对应并生成日志;
S104、将生成的日志按照所对应的标识符分别进行汇总。
下面对上述各步骤的具体实现方式进行详细的说明。
在具体实施时,为了能够减少监测对分布式系统性能的扰动影响,且保证监测系统不会有太严重的负担,对分布式系统中各服务器接受到的用户请求一般按照1%-5%的比例进行随机采样,被采样到的用户请求会在调用的个线程汇总被跟踪生成对应的日志。
具体地,本申请实施例提供的方法中,是根据识别用户请求对应的标识符,来对采样到的用户请求进行跟踪。进一步地,在对各服务器采样到的用户请求生成对应的标识符时,需要保证生成的标识符在该分布式系统中具有唯一性,在具体实施时,针对各接收服务器采样到的用户请求,可以根据采集到的用户请求发送时间和请求接收服务器的标识按照设定的的算法生成用户请求唯一对应的标识符,在此对生成标识符的算法不做具体限定。
为了保证采样到的用户请求能够在各服务器运行的进程中能被有效的检测出,用户请求对应的标识符会作为变量传递到当前被用户请求调用的线程中,具体地,在同一进程中用户请求调用不同的线程时,标识符会保留在进程的线程变量(TLS)中;在进程创建子进程时,会把标识符传递到子进程中;当用户请求跨进程调用不同的线程时,该标识符被通讯协议传递到各进程中;具体地,可以通过在网络模块发送网络请求时从线程取得标识符,放置在网络请求的报头中传递到接收端,接收端从接收到的网络请求中提取该标识符,并在当前处理网络请求的线程中传递该标识符。
具体地,对于分布式系统中各服务器,可以预先对所需监测的进行注入跟踪接口,例如在具体实施时可以是TRACE_LOG接口,该跟踪接口用于在注入点显式地添加与注入点类型有关的描述信息。所有跟踪接口都可以采用RAII编程规范,即接口必须显式地完成对系统资源的释放与申请。通过跟踪接口,用户请求在进入和离开注入点的时间戳可分别由构造函数和析构函数记录,并导入到日志中。
在具体实施时,可以通过下述代码实现注入探针跟踪:
这样,当在分布式系统中各服务器的程序运行到TRACE_LOG接口时,就会检测当前运行的进程是否包含用户请求对应的标识符;
若有,逻辑就会从线程中获取该标识符,将其和跟踪接口所指示的函数的相关信息对应并生成日志中,具体地,可以将该标识符、调用的函数名称和位置、调用函数的时间、以及调用时产生的错误信息输出到日志中,输出日志的具体格式可以例如图2所示,其中,TRACE_ID_:001表示标识符为001的请求,_FUNC_:FunctionA_start表示FunctionA开始的时间点,_FUNC_:FunctionA_end表示FunctionA结束的时间点,/Example.cpp:117是附加信息,表示该日志位于Example.cpp的第117行;
若无,即没有设置标识符或该标识符为0,则表示该调用该进程的用户请求未被跟踪监测,逻辑就不执行任何操作。
具体地,在步骤S104中,当分布式系统中各服务器的日志生成后,后台收集程序会每隔一段时间将日志收集到处理服务器中进行关联,即按照不同的标识符进行汇总。具体地,可以按照下述方式进行汇总:
首先,将收集到的日志按照不同标识符分别进行归类;
然后,对于同一标识符的日志,按照不同的进程分别进行归类;
接着,对于同一标识符的同一进程的日志,按照函数按照调用开始和结束时间分别进行合并;
最后,对同一标识符跨进程的日志,按照时间顺序进行组合。
较佳地,在步骤S104将日志进行汇总之后,还可以根据具体需求,对汇总后的日志进行分析,并输出分析结果。在具体实施时,可以通过日志分析程序将不同的标识符进行归类组合,形成分析的原始数据。为了能够方便分析用户请求在程序中的运行方式,可以采用可视化/分析框架帮助理解程序运行的方式。
其中,对日志的具体分析可以是下述方式或其任意组合:
1、对同一种调用方式的用户请求进行不同路径的分析:在分布式系统中,同一种调用方式由于系统的不同状况可能会出现不同的行为,例如:分布式系统在是否命中Cache情况会有一样的两种反应,可以通过统计同一个方式处理不同的调用行为分析出分布式系统真实的处理情况。例如如图3所示,对同一MailBox::GetMail的处理,两种不同的行为(A,B),分别占99.77%和0.22%,如图4所示,通过细节比较我们能看出行为A,行为B之间的差异。
2、对用户请求在分布式系统中的运行路径,以及在各模块中运行时间的分析:根据汇总的用户请求日志,如图5所示,可以统计出用户请求的调用数据,在各服务器的各模块的进程中该用户请求运行的时间消耗。
3、对分布式系统中各模块调用频率的分析:除了可以查看各用户请求调用各模块的平均值和最大值之外,还可以根据不同的维度,即从时间,标识符以及设备的角度查看程序调用情况的分布,例如如图6所示,可从设备的角度查看所有用户请求在该设备上的分布情况。
基于同一发明构思,本申请实施例还提供了一种监测用户请求在分布式系统中运行的装置,由于该装置解决问题的原理与前述一种监测用户请求在分布式系统中运行的方法相似,因此该装置的实施可以参见方法的实施,重复之处不再赘述。
本申请实施例提供的一种监测用户请求在分布式系统中运行的装置,如图7所示,包括:
采样模块01,用于对分布式系统中各服务器接收到的用户请求进行采样;
标识符生成模块02,用于对各服务器采样到的用户请求生成对应的标识符,该标识符在所述用户请求调用线程时会作为变量被传递到当前线程中;
注入跟踪接口模块03,用于预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将所述标识符和跟踪接口所指示的函数的相关信息对应并生成日志;
日志汇总模块04,用于将生成的日志按照所对应的标识符分别进行汇总。
进一步地,上述装置如图2所示,还包括:日志分析模块05,用于对汇总后的日志进行分析并输出分析结果,具体采用以下方式或其任意组合分析日志:对同一种调用方式的用户请求进行不同路径的分析;对用户请求在分布式系统中的运行路径,以及在各模块中运行时间的分析;对分布式系统中各模块调用频率的分析。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本申请实施例可以通过硬件实现,也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解,本申请实施例的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
本领域技术人员可以理解附图只是一个优选实施例的示意图,附图中的模块或流程并不一定是实施本申请所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中,也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请实施例提供的一种监测用户请求在分布式系统中运行的方法及装置,在用户访问分布式系统时,对分布式系统接收到的用户请求进行采样,并对采样到的用户请求生成与其对应的标识符,在该用户请求调用的各线程中传递该标识符;针对分布式系统中各服务器运行的每个被预先注入跟踪接口的进程,当运行到跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将标识符和跟踪接口所指示的函数的相关信息对应并生成日志;最后将生成的日志按照所对应的标识符分别进行汇总。在对用户请求进行监测时,由于采用采样的方式抽样监测用户请求,对系统性能的扰动低,不会给监测系统造成太大压力,并且,针对监测分布式系统中的各服务器产生的日志能够按照用户请求的标识符实时汇总,能够支持实时分析用户请求的行为。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (9)

1.一种监测用户请求在分布式系统中运行的方法,其特征在于,包括:
对分布式系统中各服务器接收到的用户请求进行采样;
对各服务器采样到的用户请求生成唯一对应的标识符,在同一进程中所述用户请求调用不同的线程时,在进程创建子进程时,将所述标识符传递到所述子进程中;当所述用户请求跨进程调用不同的线程时,所述标识符被通讯协议传递到各进程中;
预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将所述标识符和跟踪接口所指示的函数的相关信息对应并生成日志;所述函数的相关信息为调用函数时产生的相关信息;
将生成的日志按照所对应的标识符分别进行汇总。
2.如权利要求1所述的方法,其特征在于,对分布式系统中各服务器接收到的用户请求进行采样,具体包括:
对分布式系统中各服务器接收到的用户请求按照1%-5%的比例进行随机采样。
3.如权利要求1所述的方法,其特征在于,所述对各服务器采样到的用户请求生成唯一对应的标识符,具体包括:
针对各接收服务器采样到的用户请求,根据请求发送时间和请求接收服务器的标识按照设定的算法生成唯一对应的标识符。
4.如权利要求1所述的方法,其特征在于,将所述标识符和跟踪接口所指示的函数的相关信息输出到日志中,具体包括:
将所述标识符、调用的函数名称和位置、调用函数的时间、以及调用时产生的错误信息输出到日志中。
5.如权利要求1-4任一项所述的方法,其特征在于,将生成的日志按照对应的标识符分别进行汇总,具体包括:
将收集到的日志按照不同标识符分别进行归类;
对于同一标识符的日志,按照不同的进程分别进行归类;
对于同一标识符的同一进程的日志,按照函数按照调用开始和结束时间分别进行合并;
对同一标识符跨进程的日志,按照时间顺序进行组合。
6.如权利要求1-4任一项所述的方法,其特征在于,在将日志进行汇总之后,还包括:
对汇总后的日志进行分析,并输出分析结果。
7.如权利要求6所述的方法,其特征在于,所述对汇总后的日志进行分析,具体包括以下方式或其任意组合:
对同一种调用方式的用户请求进行不同路径的分析;
对用户请求在分布式系统中的运行路径,以及在各模块中运行时间的分析;
对分布式系统中各模块调用频率的分析。
8.一种监测用户请求在分布式系统中运行的装置,其特征在于,包括:
采样模块,用于对分布式系统中各服务器接收到的用户请求进行采样;
标识符生成模块,用于对各服务器采样到的用户请求生成唯一对应的标识符,在同一进程中所述用户请求调用不同的线程时,在进程创建子进程时,将所述标识符传递到所述子进程中;当所述用户请求跨进程调用不同的线程时,所述标识符被通讯协议传递到各进程中;
注入跟踪接口模块,用于预先对分布式系统中各服务器运行的进程注入跟踪接口,当进程运行到该跟踪接口时,若检测到当前该进程包含用户请求对应的标识符,则将所述标识符和跟踪接口所指示的函数的相关信息对应并生成日志;所述函数的相关信息为调用函数时产生的相关信息;
日志汇总模块,用于将生成的日志按照所对应的标识符分别进行汇总。
9.如权利要求8所述的装置,其特征在于,还包括:日志分析模块,用于对汇总后的日志进行分析并输出分析结果,具体采用以下方式或其任意组合分析日志:对同一种调用方式的用户请求进行不同路径的分析;对用户请求在分布式系统中的运行路径,以及在各模块中运行时间的分析;对分布式系统中各模块调用频率的分析。
CN201210342909.6A 2012-09-14 2012-09-14 一种监测用户请求在分布式系统中运行的方法及装置 Active CN103684898B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201210342909.6A CN103684898B (zh) 2012-09-14 2012-09-14 一种监测用户请求在分布式系统中运行的方法及装置
TW101146909A TWI564732B (zh) 2012-09-14 2012-12-12 A method and apparatus for monitoring user requests to run in a decentralized system
US14/023,014 US9485317B2 (en) 2012-09-14 2013-09-10 Method and system for monitoring execution of user request in distributed system
JP2015532018A JP5978401B2 (ja) 2012-09-14 2013-09-11 分散システムにおいてユーザリクエストの実行を監視するための方法及びシステム
EP13766818.2A EP2895956B1 (en) 2012-09-14 2013-09-11 Method and system for monitoring execution of user request in distributed system
PCT/US2013/059229 WO2014043211A1 (en) 2012-09-14 2013-09-11 Method and system for monitoring execution of user request in distributed system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210342909.6A CN103684898B (zh) 2012-09-14 2012-09-14 一种监测用户请求在分布式系统中运行的方法及装置

Publications (2)

Publication Number Publication Date
CN103684898A CN103684898A (zh) 2014-03-26
CN103684898B true CN103684898B (zh) 2017-06-23

Family

ID=50275660

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210342909.6A Active CN103684898B (zh) 2012-09-14 2012-09-14 一种监测用户请求在分布式系统中运行的方法及装置

Country Status (6)

Country Link
US (1) US9485317B2 (zh)
EP (1) EP2895956B1 (zh)
JP (1) JP5978401B2 (zh)
CN (1) CN103684898B (zh)
TW (1) TWI564732B (zh)
WO (1) WO2014043211A1 (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104683181B (zh) * 2015-02-12 2019-02-15 北京蓝海讯通科技有限公司 一种性能监控方法、设备和系统
CN105183621A (zh) * 2015-08-17 2015-12-23 浪潮(北京)电子信息产业有限公司 一种基于多线程的日志管理方法及系统
CN105207806A (zh) * 2015-08-20 2015-12-30 百度在线网络技术(北京)有限公司 分布式服务的监控方法及装置
CN105227395B (zh) * 2015-08-28 2018-09-28 北京奇艺世纪科技有限公司 一种分布式jvm性能分析的方法、装置及系统
CN105512027B (zh) * 2015-11-26 2018-10-30 珠海多玩信息技术有限公司 进程状态监控方法和装置
CN105808414A (zh) * 2016-03-08 2016-07-27 联想(北京)有限公司 一种日志处理方法及日志处理电子设备
CN107273276A (zh) * 2016-04-06 2017-10-20 中兴通讯股份有限公司 一种基于虚拟化的全流程跟踪方法及装置
CN108228432A (zh) * 2016-12-12 2018-06-29 阿里巴巴集团控股有限公司 一种分布式链路跟踪、分析方法及服务器、全局调度器
CN108228322B (zh) * 2016-12-12 2022-03-25 阿里巴巴集团控股有限公司 一种分布式链路跟踪、分析方法及服务器、全局调度器
CN107592230B (zh) * 2017-09-22 2023-02-21 北京奇艺世纪科技有限公司 一种跟踪信息获取方法及装置
CN107872353A (zh) * 2017-12-27 2018-04-03 北京奇艺世纪科技有限公司 一种故障定位方法及装置
CN108319536B (zh) * 2017-12-29 2021-11-23 北京五八信息技术有限公司 一种日志设置方法、装置、设备及计算机可读存储介质
CN108459939B (zh) * 2018-01-08 2020-06-23 平安科技(深圳)有限公司 一种日志收集方法、装置、终端设备及存储介质
CN108694061A (zh) * 2018-05-11 2018-10-23 深圳壹账通智能科技有限公司 一种数据库的调用方法、装置及计算机可读存储介质
CN108958850A (zh) * 2018-06-29 2018-12-07 郑州云海信息技术有限公司 一种日志优化方法、装置、设备及计算机可读存储介质
CN109039817B (zh) * 2018-08-03 2020-09-01 京东数字科技控股有限公司 一种用于流量监控的信息处理方法、装置、设备及介质
US11556120B2 (en) 2018-10-29 2023-01-17 Honeywell International Inc. Systems and methods for monitoring performance of a building management system via log streams
CN109474698A (zh) * 2018-12-14 2019-03-15 平安城市建设科技(深圳)有限公司 访问请求标记方法、装置、设备及存储介质
CN111385122B (zh) * 2018-12-29 2023-06-16 广州市百果园信息技术有限公司 分布式系统链路跟踪方法、装置、计算机设备及存储介质
CN111625431B (zh) * 2019-02-28 2022-04-22 华为技术有限公司 一种日志信息生成方法、装置及电子设备
CN112115012A (zh) * 2019-06-19 2020-12-22 中兴通讯股份有限公司 分布式数据库的事务监控方法及装置、系统、存储介质
CN110413496B (zh) * 2019-07-29 2022-08-19 福建南威软件有限公司 一种实现电子证照运行数据组件化收集的方法
CN111459766B (zh) * 2019-11-14 2024-01-12 国网浙江省电力有限公司信息通信分公司 一种面向微服务系统的调用链跟踪与分析方法
CN111274091B (zh) * 2020-01-17 2024-01-09 北京达佳互联信息技术有限公司 日志的处理方法、装置、计算机设备和存储介质
CN113760640A (zh) * 2020-11-13 2021-12-07 北京沃东天骏信息技术有限公司 监控日志处理方法、装置、设备及存储介质
CN112463561B (zh) * 2020-11-20 2024-06-18 中国建设银行股份有限公司 一种故障定位方法、装置、设备及存储介质
CN113656247A (zh) * 2021-08-16 2021-11-16 北京奇艺世纪科技有限公司 一种服务监控方法、装置、电子设备及可读存储介质
CN114115746A (zh) * 2021-12-02 2022-03-01 北京乐讯科技有限公司 一种用户态存储系统的全链路追踪装置
CN115589307A (zh) * 2022-09-07 2023-01-10 支付宝(杭州)信息技术有限公司 分布式系统的风险监测方法和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7093073B2 (en) * 2003-06-26 2006-08-15 International Business Machines Corporation Systems and methods for adjusting caching policies for web service requests
CN101778105A (zh) * 2010-01-20 2010-07-14 杭州华三通信技术有限公司 获取基于web的实时性能监视指标数的方法、系统及设备

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7191440B2 (en) 2001-08-15 2007-03-13 Intel Corporation Tracking operating system process and thread execution and virtual machine execution in hardware or in a virtual machine monitor
US7185085B2 (en) 2002-02-27 2007-02-27 Webtrends, Inc. On-line web traffic sampling
US7401141B2 (en) * 2003-01-07 2008-07-15 International Business Machines Corporation Method and system for monitoring performance of distributed applications
JP4300808B2 (ja) 2003-01-24 2009-07-22 株式会社日立製作所 統合ログ表示方法及びシステム
US7606814B2 (en) * 2004-03-11 2009-10-20 Microsoft Corporation Tracing a web request through a web server
US7716335B2 (en) 2005-06-27 2010-05-11 Oracle America, Inc. System and method for automated workload characterization of an application server
JP4867864B2 (ja) 2007-09-05 2012-02-01 富士電機株式会社 性能データ収集・表示システム、性能データ表示装置、そのプログラム
US8321840B2 (en) 2007-12-27 2012-11-27 Intel Corporation Software flow tracking using multiple threads
US8554623B2 (en) * 2008-03-03 2013-10-08 Yahoo! Inc. Method and apparatus for social network marketing with consumer referral
JP4778092B2 (ja) 2010-01-25 2011-09-21 富士通株式会社 トレース処理方法、プログラム及び装置
US8631356B2 (en) * 2010-07-22 2014-01-14 Yahoo! Inc. Presentation of advertisements based on user interactivity with a web page
KR101892273B1 (ko) 2011-10-12 2018-08-28 삼성전자주식회사 스레드 프로그레스 트래킹 방법 및 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7093073B2 (en) * 2003-06-26 2006-08-15 International Business Machines Corporation Systems and methods for adjusting caching policies for web service requests
CN101778105A (zh) * 2010-01-20 2010-07-14 杭州华三通信技术有限公司 获取基于web的实时性能监视指标数的方法、系统及设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Non-intrusive end-to-end runtime path tracing for J2EE systems;T.Parsons;《IEEE》;20060831;第7-8页 *

Also Published As

Publication number Publication date
JP2015528612A (ja) 2015-09-28
US9485317B2 (en) 2016-11-01
TWI564732B (zh) 2017-01-01
JP5978401B2 (ja) 2016-08-24
TW201411367A (zh) 2014-03-16
EP2895956B1 (en) 2024-02-07
WO2014043211A1 (en) 2014-03-20
US20140082184A1 (en) 2014-03-20
CN103684898A (zh) 2014-03-26
EP2895956A1 (en) 2015-07-22

Similar Documents

Publication Publication Date Title
CN103684898B (zh) 一种监测用户请求在分布式系统中运行的方法及装置
CN106534242B (zh) 一种分布式系统中请求的处理方法以及装置
CN101997925A (zh) 具有预警功能的服务器监控方法及其系统
US20120303625A1 (en) Managing heterogeneous data
WO2014049804A1 (ja) 分散システムにおけるシステム動作トレース方法
CN111383748A (zh) 基于弹性计算和5g技术的医疗集成平台系统
CN1960297A (zh) 监控网络上设备组的系统与方法
CN112256530A (zh) 一种可链路追踪的日志服务方法及其系统
CN102142985A (zh) 混合模式分析
CN102868938B (zh) 一种用于获取网络中分段视频文件的方法与设备
CN107634878A (zh) 一种性能测试管理平台
CN109714214A (zh) 一种服务器异常的处理方法及管理设备
CN102043594A (zh) 分布式环境下实现输入输出踪迹收集回放的系统和方法
CN110532153A (zh) 一种业务层级用户操作体验可视化系统
Saavedra et al. A comparison between text, parquet, and PCAP formats for use in distributed network flow analysis on Hadoop
CN116719750A (zh) 软件测试方法及装置、服务器设备和存储介质
CN109474529B (zh) 一种终端网络关联数据反馈的方法
CN111176950A (zh) 一种监控服务器集群的网卡的方法和设备
CN115801538A (zh) 场站服务器应用资产深度识别方法、系统及设备
CN106648912A (zh) 数据采集平台中数据处理的模块化方法及装置
CA2793952C (en) Extracting data related to clinical diagnostic instruments
CN114416597A (zh) 测试用例记录的生成方法和装置
CN114138720A (zh) 日志处理方法、装置、电子装置和存储介质
CN110413496A (zh) 一种实现电子证照运行数据组件化收集的方法
CN117312104B (zh) 一种基于机场生产运营系统的可视化链路追踪方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230612

Address after: Room 1-2-A06, Yungu Park, No. 1008 Dengcai Street, Sandun Town, Xihu District, Hangzhou City, Zhejiang Province

Patentee after: Aliyun Computing Co.,Ltd.

Address before: Box four, 847, capital building, Grand Cayman Island capital, Cayman Islands, UK

Patentee before: ALIBABA GROUP HOLDING Ltd.