CN112860269A - 一种基于微服务的分布式向量生成系统及方法 - Google Patents

一种基于微服务的分布式向量生成系统及方法 Download PDF

Info

Publication number
CN112860269A
CN112860269A CN202110047505.3A CN202110047505A CN112860269A CN 112860269 A CN112860269 A CN 112860269A CN 202110047505 A CN202110047505 A CN 202110047505A CN 112860269 A CN112860269 A CN 112860269A
Authority
CN
China
Prior art keywords
service
vector generation
vector
generation system
distributed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110047505.3A
Other languages
English (en)
Inventor
吴志豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Zemu Information Technology Co ltd
Original Assignee
Guangzhou Zemu Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Zemu Information Technology Co ltd filed Critical Guangzhou Zemu Information Technology Co ltd
Priority to CN202110047505.3A priority Critical patent/CN112860269A/zh
Publication of CN112860269A publication Critical patent/CN112860269A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/12Avoiding congestion; Recovering from congestion
    • H04L47/125Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及应用程序领域,具体是一种基于微服务的分布式向量生成系统及方法,包括向量生成系统和网络安全系统,向量生成系统包括微服务系统和向量生成器,微服务系统包括分布式事务、服务划分、熔断器机制、服务网关、服务配置统一管理和分布式链路追踪,微服务系统与向量生成器连接,向量生成连接器的输出端连接有生成指定向量,网络安全系统包括网关、防火墙和网络服务器,网络服务器与向量生成系统连接,分布式事务包括第一阶段和第二阶段。本发明的有益效果每个服务的各自进行负载均衡扩展和数据库扩展,提高向量生成系统的容错性,使得向量生成系统具有每个服务足够内聚,足够小,代码容易理解、开发效率高。

Description

一种基于微服务的分布式向量生成系统及方法
技术领域
本发明涉及应用程序领域,具体是一种基于微服务的分布式向量生成系统及方法。
背景技术
应用程序指为完成某项或多项特定工作的计算机程序,它运行在用户模式,可以和用户进行交互,具有可视的用户界面,在应用程序产生向量生产时可以用到微服务系统。
微服务架构是一项在云中部署应用和服务的新技术。大部分围绕微服务的争论都集中在容器或其他技术是否能很好的实施微服务,而红帽说API应该是重点。微服务可以在“自己的程序”中运行,并通过“轻量级设备与HTTP型API进行沟通”。关键在于该服务可以在自己的程序中运行。通过这一点我们就可以将服务公开与微服务架构(在现有系统中分布一个API)区分开来。在服务公开中,许多服务都可以被内部独立进程所限制。如果其中任何一个服务需要增加某种功能,那么就必须缩小进程范围。在微服务架构中,只需要在特定的某种服务中增加所需功能,而不影响整体进程的架构。
中国专利号CN106921688B提供一种分布式系统的服务提供方法及分布式系统。其中,该方法包括:获取待执行的任务,其中,任务包括至少一个服务及至少一个服务的服务执行序列,且每个服务包括至少一个组件及至少一个组件的组件执行序列;以及根据服务执行序列依次调用并执行至少一个服务,并接收至少一个服务的返回结果,其中,至少一个服务在执行时根据组件的执行序列依次调用并执行至少一个组件。本申请实施例的分布式系统的服务提供方法及分布式系统,实现了待执行的任务的快速布控,提高了通用逻辑的复用率,进而提高了对业务的响应能力。
现有的分布式向量生成系统及方法,存在以下问题:每个服务不能相对较好的各自进行负载均衡扩展和数据库扩展,向量生成系统的容错性相对较差,使得向量生成系统不具有每个服务足够内聚,足够小,代码容易理解,开发效率底特点的缺点,因此亟需研发一种基于微服务的分布式向量生成系统及方法。
发明内容
本发明的目的在于提供一种基于微服务的分布式向量生成系统及方法,以解决上述背景技术中提出的每个服务不能相对较好的各自进行负载均衡扩展和数据库扩展,向量生成系统的容错性相对较差的问题。
本发明的技术方案是:一种基于微服务的分布式向量生成系统,包括向量生成系统和网络安全系统,所述向量生成系统包括微服务系统和向量生成器,所述微服务系统包括分布式事务、服务划分、熔断器机制、服务网关、服务配置统一管理和分布式链路追踪,所述微服务系统与向量生成器连接,所述向量生成连接器的输出端连接有生成指定向量。
进一步地,所述网络安全系统包括网关、防火墙和网络服务器,所述网络服务器与向量生成系统连接。
进一步地,所述分布式事务包括第一阶段和第二阶段,第一阶段:发起一个分部时事务,交给事务协调器TC处理,TC向多有的参与事务的节点发送处理事务操作的准备操作,所有的参与节点执行准备操作,将Undo和Redo信息写进日志,并向事务管理器返回准备操作是否成功。
进一步地,所述第二阶段:事务管理器收集所有节点的准备操作是否成功,如果都成功,则通知所有的节点执行提交操作;如果有一个失败,则执行回滚操作。
进一步地,所述服务划分包括有横向拆开和纵向拆分,所述横向拆分:按照不同的业务域进行拆分,形成独立的业务领域微服务集群,纵向拆分:把一个业务功能里的不同模块或者组件进行拆分。
进一步地,所述熔断器机制:当一个服务的处理用户请求的失败次数在一定时间内小于设置的阀值时,熔断器出于关闭状态,服务正常,当服务处理用户请求失败次数在一定时间内大于设置的阀值时,说明服务会出现故障,打开熔断器,这是所有的请求会快速失败,不执行业务逻辑。
进一步地,所述熔断器机制中,当出于开关状态的熔断器时,一段时间后出于半打开状态,并执行一定数量的请求,剩余的请求会执行快速失败,若执行请求失败了,则继续打开熔断器,若成功看,则将熔断器关闭。
进一步地,所述服务网关的网关层通常以集群的形式存在,并在服务网关层前通常会加上Nginx用来负载均衡。
进一步地,所述分布式服务链路追踪设置在微服务系统中,必须实现分布式链路追踪,去跟进一个请求到底有哪些服务参与、参与顺序,是每个请求链路清晰可见,便于问题快速定位。
一种基于微服务的分布式向量生成方法,包括以下步骤:
S1.向量生产系统:用户通过智能设备进入到用户系统内,用户系统通过网络安全系统进入到向量生成系统内;
S2.微服务系统:用户通过向量生成系统内的微服务系统操作向量生成器,并进入到向量生成器内;
S3.向量生成器:用户通过向量生成器生成指定向量。
本发明通过改进在此提供一种基于微服务的分布式向量生成系统及方法,与现有技术相比,具有如下改进及优点:
(1)本发明采用的微服务系统,采用微服务系统使得向量生成系统具有每个服务足够内聚,足够小,代码容易理解、开发效率高,同时服务之间可以独立部署,每个服务可以各自进行负载均衡扩展和数据库扩展,每个服务可以根据自己的需要部署到合适的硬件服务器上,提高向量生成系统的容错性,一个服务的内存泄露并不会让整个系统瘫痪,使得向量生成系统不会被长期限制在某个技术栈上。
(2)本发明采用的网络安全系统,网络安全系统对用户登录时进行网络安全检查,防止在用户登录时受到网络安全威胁,同时提高向量生产系统网络使用的安全性。
附图说明
下面结合附图和实施例对本发明作进一步解释:
图1是本发明的系统框架图;
图2是本发明的向量生成方法流程图。
具体实施方式
下面将结合附图1至图2对本发明进行详细说明,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明通过改进在此提供一种基于微服务的分布式向量生成系统,如图1-图2所示,包括向量生成系统和网络安全系统,提高向量生产系统网络使用的安全性,向量生成系统包括微服务系统和向量生成器,采用微服务系统使得向量生成系统具有每个服务足够内聚,足够小,代码容易理解、开发效率高,微服务系统包括分布式事务、服务划分、熔断器机制、服务网关、服务配置统一管理和分布式链路追踪,微服务系统与向量生成器连接,向量生成连接器的输出端连接有生成指定向量。
进一步地,网络安全系统包括网关、防火墙和网络服务器,网络服务器与向量生成系统连接,网络安全系统对用户登录时进行网络安全检查,防止在用户登录时受到网络安全威胁。
进一步地,分布式事务包括第一阶段和第二阶段,第一阶段:发起一个分部时事务,交给事务协调器TC处理,TC向多有的参与事务的节点发送处理事务操作的准备操作,所有的参与节点执行准备操作,将Undo和Redo信息写进日志,并向事务管理器返回准备操作是否成功。
进一步地,第二阶段:事务管理器收集所有节点的准备操作是否成功,如果都成功,则通知所有的节点执行提交操作;如果有一个失败,则执行回滚操作,两阶段提交,将事务分成两部分能够大大提高分布式事务成功的概率,如果在第一阶段都成功了,而执行第一阶段的某一个节点失败,仍然导致数据的不准确,这时一般需要人工去处理,这就是当初在第一步记录日志的原因。另外,如果分布式事务涉及的节点很多,某一个节点的网络出现异常会导致整个事务处于阻塞状态,大大降低数据库的性能。
进一步地,服务划分包括有横向拆开和纵向拆分,横向拆分:按照不同的业务域进行拆分,形成独立的业务领域微服务集群,纵向拆分:把一个业务功能里的不同模块或者组件进行拆分,按照业务划分服务,单个服务代码量小,业务单一,易于维护,每个微服务都有自己独立的基础组件,例如数据库、缓存等且运行在独立的进程中。
进一步地,熔断器机制:当一个服务的处理用户请求的失败次数在一定时间内小于设置的阀值时,熔断器出于关闭状态,服务正常,当服务处理用户请求失败次数在一定时间内大于设置的阀值时,说明服务会出现故障,打开熔断器,这是所有的请求会快速失败,不执行业务逻辑。
进一步地,熔断器机制中,当出于开关状态的熔断器时,一段时间后出于半打开状态,并执行一定数量的请求,剩余的请求会执行快速失败,若执行请求失败了,则继续打开熔断器,若成功看,则将熔断器关闭,熔断器不仅能防止系统的“雪崩”效应,同时具有将资源进行隔离,服务降级的功能,自我修复能力。
进一步地,服务网关的网关层通常以集群的形式存在,并在服务网关层前通常会加上Nginx用来负载均衡,网关将所有服务的API接口资源统一聚合,对外统一暴露,网关可以实现监控功能,实时日志输出、对请求进行记录。
进一步地,分布式服务链路追踪设置在微服务系统中,必须实现分布式链路追踪,去跟进一个请求到底有哪些服务参与、参与顺序,是每个请求链路清晰可见,便于问题快速定位。
一种基于微服务的分布式向量生成方法,包括以下步骤:
S1.向量生产系统:用户通过智能设备进入到用户系统内,用户系统通过网络安全系统进入到向量生成系统内,网络安全系统对用户登录时进行网络安全检查,防止在用户登录时受到网络安全威胁;
S2.微服务系统:用户通过向量生成系统内的微服务系统操作向量生成器,并进入到向量生成器内;
S3.向量生成器:用户通过向量生成器生成指定向量。
工作原理:用户通过智能设备进入到用户系统内,用户系统通过网络安全系统进入到向量生成系统内,用户通过向量生成系统内的微服务系统操作向量生成器,并进入到向量生成器内,用户通过向量生成器生成指定向量。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种基于微服务的分布式向量生成系统,其特征在于:包括向量生成系统和网络安全系统,所述向量生成系统包括微服务系统和向量生成器,所述微服务系统包括分布式事务、服务划分、熔断器机制、服务网关、服务配置统一管理和分布式链路追踪,所述微服务系统与向量生成器连接,所述向量生成连接器的输出端连接有生成指定向量。
2.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述网络安全系统包括网关、防火墙和网络服务器,所述网络服务器与向量生成系统连接。
3.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述分布式事务包括第一阶段和第二阶段,第一阶段:发起一个分部时事务,交给事务协调器TC处理,TC向多有的参与事务的节点发送处理事务操作的准备操作,所有的参与节点执行准备操作,将Undo和Redo信息写进日志,并向事务管理器返回准备操作是否成功。
4.根据权利要求3所述的一种基于微服务的分布式向量生成系统,其特征在于:所述第二阶段:事务管理器收集所有节点的准备操作是否成功,如果都成功,则通知所有的节点执行提交操作;如果有一个失败,则执行回滚操作。
5.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述服务划分包括有横向拆开和纵向拆分,所述横向拆分:按照不同的业务域进行拆分,形成独立的业务领域微服务集群,纵向拆分:把一个业务功能里的不同模块或者组件进行拆分。
6.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述熔断器机制:当一个服务的处理用户请求的失败次数在一定时间内小于设置的阀值时,熔断器出于关闭状态,服务正常,当服务处理用户请求失败次数在一定时间内大于设置的阀值时,说明服务会出现故障,打开熔断器,这是所有的请求会快速失败,不执行业务逻辑。
7.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述熔断器机制中,当出于开关状态的熔断器时,一段时间后出于半打开状态,并执行一定数量的请求,剩余的请求会执行快速失败,若执行请求失败了,则继续打开熔断器,若成功看,则将熔断器关闭。
8.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述服务网关的网关层通常以集群的形式存在,并在服务网关层前通常会加上Nginx用来负载均衡。
9.根据权利要求1所述的一种基于微服务的分布式向量生成系统,其特征在于:所述分布式服务链路追踪设置在微服务系统中,必须实现分布式链路追踪,去跟进一个请求到底有哪些服务参与、参与顺序,是每个请求链路清晰可见,便于问题快速定位。
10.一种基于微服务的分布式向量生成方法,其特征在于:包括以下步骤:
S1.向量生产系统:用户通过智能设备进入到用户系统内,用户系统通过网络安全系统进入到向量生成系统内;
S2.微服务系统:用户通过向量生成系统内的微服务系统操作向量生成器,并进入到向量生成器内;
S3.向量生成器:用户通过向量生成器生成指定向量。
CN202110047505.3A 2021-01-14 2021-01-14 一种基于微服务的分布式向量生成系统及方法 Withdrawn CN112860269A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110047505.3A CN112860269A (zh) 2021-01-14 2021-01-14 一种基于微服务的分布式向量生成系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110047505.3A CN112860269A (zh) 2021-01-14 2021-01-14 一种基于微服务的分布式向量生成系统及方法

Publications (1)

Publication Number Publication Date
CN112860269A true CN112860269A (zh) 2021-05-28

Family

ID=76005748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110047505.3A Withdrawn CN112860269A (zh) 2021-01-14 2021-01-14 一种基于微服务的分布式向量生成系统及方法

Country Status (1)

Country Link
CN (1) CN112860269A (zh)

Similar Documents

Publication Publication Date Title
WO2012000997A1 (en) An apparatus for processing a batched unit of work
CN107193672B (zh) 一种跨区块异步调用合约系统
EP0845121A1 (en) Method and apparatus for handling processing errors in telecommunications exchanges
CN111585913B (zh) 基于回收令牌的服务流量限制方法及存储介质
Kim ROAFTS: A middleware architecture for real-time object-oriented adaptive fault tolerance support
US7454761B1 (en) Method and apparatus for correlating output of distributed processes
US7523113B2 (en) Distributed system, computer and state transition control method for distributed system
US6185702B1 (en) Method and system for process state management using checkpoints
CN112596801A (zh) 事务处理方法、装置、设备、存储介质、数据库
CN113064755B (zh) 数据恢复方法、装置、设备、介质及程序产品
CN112434050B (zh) 电网业务处理系统的数据同步方法、装置和业务处理系统
CN112860269A (zh) 一种基于微服务的分布式向量生成系统及方法
CN115642700A (zh) 一种基于去中心化预言机的状态通道监控方法
CN115827366A (zh) 适用于隔离装置的集群调度组件及方法
CN115033351A (zh) 一种分布式事务补偿方法及相关装置
Sun et al. A generic availability model for clustered computing systems
CN110677469B (zh) 一种证券灾备系统及灾备实现方法
Wang et al. A state synchronization mechanism for orchestrated processes
CN101187952B (zh) 一种网络信息系统的生存能力的仿真判定方法
Katsaros et al. Optimal object state transfer-recovery policies for fault tolerant distributed systems
Le Lann A methodology for designing and dimensioning critical complex computing systems
Manikandan et al. An efficient non blocking two phase commit protocol for distributed transactions
Nyström et al. High‐level distribution for the rapid production of robust telecoms software: comparing C++ and Erlang
CN113704101B (zh) 一种基于网关异步复制的分布式系统兼容测试方法
CN117992340B (zh) 数据库集群模糊测试方法、系统、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210528

WW01 Invention patent application withdrawn after publication