CN114201231B - 一种分布式的微服务编排系统及方法 - Google Patents

一种分布式的微服务编排系统及方法 Download PDF

Info

Publication number
CN114201231B
CN114201231B CN202111438229.XA CN202111438229A CN114201231B CN 114201231 B CN114201231 B CN 114201231B CN 202111438229 A CN202111438229 A CN 202111438229A CN 114201231 B CN114201231 B CN 114201231B
Authority
CN
China
Prior art keywords
service
data
services
micro
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111438229.XA
Other languages
English (en)
Other versions
CN114201231A (zh
Inventor
宣梓华
刘爱军
虞鹏飞
王发成
岳冬艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Jinnong Co ltd
Original Assignee
Jiangsu Jinnong Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Jinnong Co ltd filed Critical Jiangsu Jinnong Co ltd
Priority to CN202111438229.XA priority Critical patent/CN114201231B/zh
Publication of CN114201231A publication Critical patent/CN114201231A/zh
Application granted granted Critical
Publication of CN114201231B publication Critical patent/CN114201231B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G06F9/44521—Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种分布式的微服务编排系统，包括请求接收模块、微服务模块、调用模块、数据处理模块、监控模块和返回模块，所述请求接收模块接收用户请求，并对请求进行分析，返回需要查询的问题，所述微服务模块存储服务，并根据请求对所需服务进行梳理，本发明通过设置监控模块，利用编排监控单元、故障识别单元和故障排除单元对系统中微服务的异常响应时间进行排序，对异常响应的差值进行计算比较，确定异常响应时间，进而得出对应的异常数据，方便快速的在微服务中得出异常的数据，删除异常数据，排除微服务系统存在的故障，避免微服务故障继续使用，导致故障影响加深，节省后续查找故障的时间。

Description

一种分布式的微服务编排系统及方法
技术领域
本发明涉及微服务编排技术领域，具体为一种分布式的微服务编排系统及方法。
背景技术
微服务是将单一应用程序划分成一组小的服务，服务之间互相协调、互相配合，为用户提供最终价值，每个服务运行在其独立的进程中，服务与服务间采用轻量级的通信机制互相沟通，每个服务都围绕着具体业务进行构建，并且能够独立地部署到生产环境、类生产环境等；
但是目前在微服务的使用上，不能对微服务中的故障进行监控分析，导致故障无法排除，使故障不断在系统中运行，导致故障的影响越来越大，由于未及时发现，在后期难以查找对应的故障，从而导致系统带来的误差较大，降低微服务的使用效果。
发明内容
本发明提供一种分布式的微服务编排系统及方法，可以有效解决上述背景技术中提出目前在微服务的使用上，不能对微服务中的故障进行监控分析，导致故障无法排除，使故障不断在系统中运行，导致故障的影响越来越大，由于未及时发现，在后期难以查找对应的故障，从而导致系统带来的误差较大，降低微服务的使用效果的问题。
为实现上述目的，本发明提供如下技术方案：一种分布式的微服务编排系统，包括请求接收模块、微服务模块、调用模块、数据处理模块、监控模块和返回模块；
所述监控模块包括编排监控单元、故障识别单元和故障排除单元，编排监控单元对编排的整个流程进行监控，故障识别单元识别故障，故障排除单元查找故障位置，并处理故障；
所述编排监控单元的监控步骤如下：
S1、首先监控流程和服务，将每一条数据按照顺序进行梳理；
S2、根据梳理的流程，依次对微服务的数据进行监控；
S3、监控服务中每个数据的响应时间，并按照响应时间从长到短进行排序，排序后的响应时间为t1、t2、t3…ti；
S4、计算分析响应时间的差值，从而得出对应的异常数据；
S5、再确定异常数据的位置，根据异常数据查找异常数据的前端数据和后端数据，排除异常数据；
所述S4中，响应时间的差值分析公式为：
Figure 940441DEST_PATH_IMAGE001
式中，tj表示服务中任一数据的响应时间；
ti表示服务中数据的最短响应时间；
i表示响应时间的排序序号；
tj-ti表示服务中任一数据的响应时间与最短响应时间的差值，且1≤j≤i；
当上述不等式成立时，响应时间tj为异常响应时间，将tj对应的数据单独提取出来进行二次查看，从而确定异常数据和异常数据的位置；
异常数据确定后，将异常数据的前端数据和后端数据进行整理，将异常数据删除，排除服务故障。
根据上述技术方案，所述请求接收模块接收用户请求，并对请求进行分析，返回需要查询的问题；
所述微服务模块存储服务，并根据请求对所需服务进行梳理；
所述调用模块根据用户请求和流程，调取对应的服务，获取需要的数据；
所述数据处理模块对获取的数据进行处理，对多余数据进行过滤，并将数据整理；
所述监控模块监控服务编排的整个过程，识别和分析编排故障；
所述返回模块将整理后的数据返回至请求接收模块，供用户查看。
根据上述技术方案，所述微服务模块包括微服务划分单元和流程梳理单元，微服务划分单元将用户请求划分为若干个服务，并设置默认选择，流程梳理单元将划分的服务进行排序，按流程获取对应的数据；
所述微服务划分和设置的步骤如下：
F1、将用户请求初次划分为粗分服务，再对粗分服务进行划分，得出细分服务，并且保存每次划分的服务；
F2、调取微服务时，在粗分服务和细分服务中选择需要的服务，并进行记录，组成完整的服务流程；
F3、使用一段时间，根据粗分服务和细分服务使用的频率，对使用频率在75%-100%的服务设置为默认选择；
F4、在默认选择设置后，再次使用同样的服务时，直接调取默认的服务即可，未设置默认选择的，仍然手动选择服务。
根据上述技术方案，所述F3中，细分服务为粗分服务再次划分后的服务，一个粗分服务对应两个细分服务，一个粗分服务和其对应的两个细分服务组成一组服务；
在一组服务的使用记录中，粗分服务使用的频率为75%-100%时，在微服务架构中设置默认选择粗分服务；
在一组服务的使用记录中，细分服务使用的频率为75%-100%时，在微服务架构中设置默认选择细分服务；
在一组服务的使用记录中，粗分服务使用的频率为26%-74%时，细分服务使用的频率为26%-74%时，在微服务架构中，对粗分服务和细分服务进行手动选择。
根据上述技术方案，一种分布式的微服务编排方法，根据分布式的微服务编排系统所使用的任一步骤方法。
与现有技术相比，本发明的有益效果：
1、通过设置监控模块，利用编排监控单元、故障识别单元和故障排除单元对系统中微服务的异常响应时间进行排序，对异常响应的差值进行计算比较，确定异常响应时间，进而得出对应的异常数据，方便快速的在微服务中得出异常的数据，删除异常数据，排除微服务系统存在的故障，避免微服务故障继续使用，导致故障影响加深，节省后续查找故障的时间。
2、通过设置微服务划分单元和流程梳理单元，对一组微服务中的粗分服务和细分服务的使用频率进行记录，统计粗分服务和细分服务的使用频率，使用频率较高的通过系统设置为默认选择，后续调取想设置后的微服务，即可默认选择使用频率较高的粗分服务或细分服务，从而节省在粗分服务和细分服务中选择的步骤，使微服务系统的使用更加便捷。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
在附图中：
图1是本发明的系统结构框图；
图2是本发明的编排监控的步骤图；
图3是本发明的异常响应的分析流程图；
图4是本发明的服务划分和设置的步骤图；
图5是本发明粗分服务和细分服务的选择框图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
实施例1：
如图1-3所示，本发明提供一种技术方案，一种分布式的微服务编排系统及方法，包括请求接收模块、微服务模块、调用模块、数据处理模块、监控模块和返回模块；
请求接收模块接收用户请求，并对请求进行分析，返回需要查询的问题；
微服务模块存储服务，并根据请求对所需服务进行梳理；
调用模块根据用户请求和流程，调取对应的服务，获取需要的数据；
数据处理模块对获取的数据进行处理，对多余数据进行过滤，并将数据整理；
监控模块监控服务编排的整个过程，识别和分析编排故障；
返回模块将整理后的数据返回至请求接收模块，供用户查看。
根据上述技术方案，监控模块包括编排监控单元、故障识别单元和故障排除单元，编排监控单元对编排的整个流程进行监控，故障识别单元识别故障，故障排除单元查找故障位置，并处理故障；
编排监控单元的监控步骤如下：
S1、首先监控流程和服务，将每一条数据按照顺序进行梳理；
S2、根据梳理的流程，依次对微服务的数据进行监控；
S3、监控服务中每个数据的响应时间，并按照响应时间从长到短进行排序，排序后的响应时间为t1、t2、t3…ti；
S4、计算分析响应时间的差值，从而得出对应的异常数据；
S5、再确定异常数据的位置，根据异常数据查找异常数据的前端数据和后端数据，排除异常数据。
根据上述技术方案，S4中，响应时间的差值分析公式为：
Figure 326423DEST_PATH_IMAGE002
式中，tj表示服务中任一数据的响应时间；
ti表示服务中数据的最短响应时间；
i表示响应时间的排序序号；
tj-ti表示服务中任一数据的响应时间与最短响应时间的差值，且1≤j≤i；
当上述不等式成立时，响应时间tj为异常响应时间，将tj对应的数据单独提取出来进行二次查看，从而确定异常数据和异常数据的位置；
异常数据确定后，将异常数据的前端数据和后端数据进行整理，将异常数据删除，排除服务故障。
根据上述技术方案，一种分布式的微服务编排方法，根据分布式的微服务编排系统所使用的任一步骤方法。
实施例2：
如图4-5所示，根据上述技术方案，微服务模块包括微服务划分单元和流程梳理单元，微服务划分单元将用户请求划分为若干个服务，并设置默认选择，流程梳理单元将划分的服务进行排序，按流程获取对应的数据；
微服务划分和设置的步骤如下：
F1、将用户请求初次划分为粗分服务，再对粗分服务进行划分，得出细分服务，并且保存每次划分的服务；
F2、调取微服务时，在粗分服务和细分服务中选择需要的服务，并进行记录，组成完整的服务流程；
F3、使用一段时间，根据粗分服务和细分服务使用的频率，对使用频率在98%的服务设置为默认选择；
F4、在默认选择设置后，再次使用同样的服务时，直接调取默认的服务即可，未设置默认选择的，仍然手动选择服务。
根据上述技术方案，F3中，细分服务为粗分服务再次划分后的服务，一个粗分服务对应两个细分服务，一个粗分服务和其对应的两个细分服务组成一组服务；
在粗分服务A、细分服务A1和细分服务A2的使用记录中：
粗分服务A使用频率为98%，细分服务A1和细分服务A2的使用频率为2%；
则在粗分服务A、细分服务A1和细分服务A2中设置粗分服务A为默认选择。
实施例3：
如图4-5所示，根据上述技术方案，微服务模块包括微服务划分单元和流程梳理单元，微服务划分单元将用户请求划分为若干个服务，并设置默认选择，流程梳理单元将划分的服务进行排序，按流程获取对应的数据；
微服务划分和设置的步骤如下：
F1、将用户请求初次划分为粗分服务，再对粗分服务进行划分，得出细分服务，并且保存每次划分的服务；
F2、调取微服务时，在粗分服务和细分服务中选择需要的服务，并进行记录，组成完整的服务流程；
F3、使用一段时间，根据粗分服务和细分服务使用的频率；
F4、在默认选择设置后，再次使用同样的服务时，直接调取默认的服务即可，未设置默认选择的，仍然手动选择服务。
根据上述技术方案，F3中，细分服务为粗分服务再次划分后的服务，一个粗分服务对应两个细分服务，一个粗分服务和其对应的两个细分服务组成一组服务；
在粗分服务B、细分服务B1和细分服务B2的使用记录中：
粗分服务B使用频率为56%，细分服务B1和细分服务B2的使用频率为44%； 则在粗分服务B、细分服务B1和细分服务B2中不进行设置，使用手动进行选择。
实施例4：
如图4-5所示，根据上述技术方案，微服务模块包括微服务划分单元和流程梳理单元，微服务划分单元将用户请求划分为若干个服务，并设置默认选择，流程梳理单元将划分的服务进行排序，按流程获取对应的数据；
微服务划分和设置的步骤如下：
F1、将用户请求初次划分为粗分服务，再对粗分服务进行划分，得出细分服务，并且保存每次划分的服务；
F2、调取微服务时，在粗分服务和细分服务中选择需要的服务，并进行记录，组成完整的服务流程；
F3、使用一段时间，根据粗分服务和细分服务使用的频率，对使用频率在86%的服务设置为默认选择；
F4、在默认选择设置后，再次使用同样的服务时，直接调取默认的服务即可，未设置默认选择的，仍然手动选择服务。
根据上述技术方案，F3中，细分服务为粗分服务再次划分后的服务，一个粗分服务对应两个细分服务，一个粗分服务和其对应的两个细分服务组成一组服务；
在粗分服务C、细分服务C1和细分服务C2的使用记录中：
细分服务C1和细分服务C2使用频率为86%，粗分服务C的使用频率为14%；
则在粗分服务C、细分服务C1和细分服务C2中设置细分服务C1和细分服务C为默认选择。
最后应说明的是：以上所述仅为本发明的优选实例而已，并不用于限制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (1)

1.一种分布式的微服务编排系统，其特征在于：包括请求接收模块、微服务模块、调用模块、数据处理模块、监控模块和返回模块；
所述监控模块包括编排监控单元、故障识别单元和故障排除单元，编排监控单元对编排的整个流程进行监控，故障识别单元识别故障，故障排除单元查找故障位置，并处理故障；
所述编排监控单元的监控步骤如下：
S1、首先监控流程和服务，将每一条数据按照顺序进行梳理；
S2、根据梳理的流程，依次对微服务的数据进行监控；
S3、监控服务中每个数据的响应时间，并按照响应时间从长到短进行排序，排序后的响应时间为t1、t2、t3…ti；
S4、计算分析响应时间的差值，从而得出对应的异常数据；
S5、再确定异常数据的位置，根据异常数据查找异常数据的前端数据和后端数据，排除异常数据；
所述S4中，响应时间的差值分析公式为：
Figure DEST_PATH_IMAGE002
式中，tj表示服务中任一数据的响应时间；
ti表示服务中数据的最短响应时间；
i表示响应时间的排序序号；
tj-ti表示服务中任一数据的响应时间与最短响应时间的差值，且1≤j≤i；
当上述不等式成立时，响应时间tj为异常响应时间，将tj对应的数据单独提取出来进行二次查看，从而确定异常数据和异常数据的位置；
异常数据确定后，将异常数据的前端数据和后端数据进行整理，将异常数据删除，排除服务故障；
所述请求接收模块接收用户请求，并对请求进行分析，返回需要查询的问题；
所述微服务模块存储服务，并根据请求对所需服务进行梳理；
所述调用模块根据用户请求和流程，调取对应的服务，获取需要的数据；
所述数据处理模块对获取的数据进行处理，对多余数据进行过滤，并将数据整理；
所述监控模块监控服务编排的整个过程，识别和分析编排故障；
所述返回模块将整理后的数据返回至请求接收模块，供用户查看；
所述微服务模块包括微服务划分单元和流程梳理单元，微服务划分单元将用户请求划分为若干个服务，并设置默认选择，流程梳理单元将划分的服务进行排序，按流程获取对应的数据；
所述微服务模块进行划分和设置的步骤如下：
F1、将用户请求初次划分为粗分服务，再对粗分服务进行划分，得出细分服务，并且保存每次划分的服务；
F2、调取微服务时，在粗分服务和细分服务中选择需要的服务，并进行记录，组成完整的服务流程；
F3、使用一段时间，根据粗分服务和细分服务使用的频率，对使用频率在75%-100%的服务设置为默认选择；
F4、在默认选择设置后，再次使用同样的服务时，直接调取默认的服务即可，未设置默认选择的，仍然手动选择服务；
所述F3中，细分服务为粗分服务再次划分后的服务，一个粗分服务对应两个细分服务，一个粗分服务和其对应的两个细分服务组成一组服务；
在一组服务的使用记录中，粗分服务使用的频率为75%-100%时，在微服务架构中设置默认选择粗分服务；
在一组服务的使用记录中，细分服务使用的频率为75%-100%时，在微服务架构中设置默认选择细分服务；
在一组服务的使用记录中，粗分服务使用的频率为26%-74%时，细分服务使用的频率为26%-74%时，在微服务架构中，对粗分服务和细分服务进行手动选择。
CN202111438229.XA 2021-11-29 2021-11-29 一种分布式的微服务编排系统及方法 Active CN114201231B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111438229.XA CN114201231B (zh) 2021-11-29 2021-11-29 一种分布式的微服务编排系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111438229.XA CN114201231B (zh) 2021-11-29 2021-11-29 一种分布式的微服务编排系统及方法

Publications (2)

Publication Number Publication Date
CN114201231A CN114201231A (zh) 2022-03-18
CN114201231B true CN114201231B (zh) 2023-01-03

Family

ID=80649576

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111438229.XA Active CN114201231B (zh) 2021-11-29 2021-11-29 一种分布式的微服务编排系统及方法

Country Status (1)

Country Link
CN (1) CN114201231B (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103412805A (zh) * 2013-07-31 2013-11-27 交通银行股份有限公司 一种it故障源诊断方法及系统
CN106533804A (zh) * 2016-12-22 2017-03-22 成都西加云杉科技有限公司 一种网络运营支撑系统
CN108845910B (zh) * 2018-05-31 2024-02-06 康键信息技术（深圳）有限公司 大规模微服务系统的监控方法、装置及存储介质
CN111130908B (zh) * 2019-12-31 2022-09-06 中信百信银行股份有限公司 基于调用流量分析预测的微服务动态聚合拆分系统
CN111245916B (zh) * 2020-01-07 2023-03-17 苏宁云计算有限公司 基于微服务网关的服务调用方法、服务编排方法及装置
CN111737033B (zh) * 2020-05-26 2024-03-08 复旦大学 一种基于运行时图谱分析的微服务故障定位方法
CN112148484B (zh) * 2020-09-14 2024-02-23 北京大学 一种基于耦合度的微服务在线分配方法与系统

Also Published As

Publication number Publication date
CN114201231A (zh) 2022-03-18

Similar Documents

Publication Publication Date Title
CN107526807B (zh) 信息推荐方法及装置
US20170039214A1 (en) Data analysis using multiple systems
EP1110143B1 (en) Transaction recognition and prediction using regular expressions
CN110473594B (zh) 病原微生物基因组数据库及其建立方法
US20090182794A1 (en) Error management apparatus
US7308436B2 (en) Distributed data mining and compression method and system
CN109669967B (zh) 一种基于大数据技术的时空数据关联分析方法
CN108521588A (zh) 一种基于时间分片的主播排名方法及系统、服务器及存储介质
CN114201231B (zh) 一种分布式的微服务编排系统及方法
Chaudhuri et al. PAC identification of many good arms in stochastic multi-armed bandits
CN106933883A (zh) 基于检索日志的兴趣点常用检索词分类方法、装置
US6760737B2 (en) Spatial median filter
CN112232290B (zh) 数据聚类方法、服务器、系统以及计算机可读存储介质
CN108712269A (zh) 离网用户的找回方法及装置
CN110716986B (zh) 一种大数据分析系统及其应用方法
Choueiry et al. A decomposition heuristic for resource allocation
CN111581942B (zh) 一种数据文件的比对方法
CN112765010A (zh) 业务参数集中管理方法、装置、设备及存储介质
US10235458B2 (en) And relating to the matching of forensic results
CN110309177B (zh) 一种数据处理的方法以及相关装置
CN107222368B (zh) 一种数据重放方法及装置
CN108427688B (zh) 数据查询方法和装置
CN112737799A (zh) 一种数据处理方法、装置及存储介质
CN113268494B (zh) 待优化数据库语句处理方法及装置
Bechtoldt A confirmatory analysis of the factor stability hypothesis

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant