CN116661969A - 一种基于消息队列的业务处理方法及系统 - Google Patents

一种基于消息队列的业务处理方法及系统 Download PDF

Info

Publication number
CN116661969A
CN116661969A CN202310667184.6A CN202310667184A CN116661969A CN 116661969 A CN116661969 A CN 116661969A CN 202310667184 A CN202310667184 A CN 202310667184A CN 116661969 A CN116661969 A CN 116661969A
Authority
CN
China
Prior art keywords
message
task
service processing
service
message queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310667184.6A
Other languages
English (en)
Other versions
CN116661969B (zh
Inventor
林森
凌永志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Hanshuo Information Technology Co ltd
Original Assignee
Shanghai Hanshuo Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Hanshuo Information Technology Co ltd filed Critical Shanghai Hanshuo Information Technology Co ltd
Priority to CN202310667184.6A priority Critical patent/CN116661969B/zh
Publication of CN116661969A publication Critical patent/CN116661969A/zh
Application granted granted Critical
Publication of CN116661969B publication Critical patent/CN116661969B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G06F9/4887Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues involving deadlines, e.g. rate based, periodic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3055Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/548Queue
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种基于消息队列的业务处理方法及系统,方法包括:响应于业务请求,获取基于业务请求的任务消息;基于任务消息的配置信息对任务消息进行分类;基于任务消息的配置信息计算任务消息的业务处理压力;将任务消息加入消息队列,监控任务消息的状态,计算任务消息的等待时间;基于任务消息的业务处理压力和等待时间,对消息队列中的任务消息进行排序,以满足总业务处理压力且使总等待时间最短;调用业务处理服务器执行任务消息,并返回任务消息执行结果;根据任务消息执行结果对任务消息的排序进行调整。本发明提供的业务处理方法及系统,通过监控任务消息的执行过程,满足总业务处理压力的情况下尽量缩短总等待时间,提高业务处理效率。

Description

一种基于消息队列的业务处理方法及系统
技术领域
本发明实施例涉及业务处理领域,特别是涉及一种基于消息队列的业务处理方法及系统。
背景技术
目前,常用的消息队列都是应用模块调用消息队列,消息队列按照新先进先出的原则进行处理。
例如,申请号为:CN202010926608.2、名称为“分布式任务系统、管理方法、装置和计算机设备”的发明专利,公开了了一种分布式任务系统、管理方法、装置和计算机设备。分布式任务系统包括主节点、工作节点和管理节点,管理节点用于存储定时任务的任务状态,工作节点用于执行定时任务以及根据定时任务的执行状态修改任务状态;分布式任务管理方法的执行主体为主节点,包括:查询任务消息队列中是否具有第一任务,其中,任务消息队列包括待执行的定时任务,第一任务为达到执行时间要求的定时任务;当任务消息队列中具有第一任务时,将第一任务分发至第一工作节点;向管理节点获取第一任务的任务状态;以及根据获取到的第一任务的任务状态管理第一任务。
现有技术中仅是根据时间对消息队列进行排序,根据业务端的调用的逻辑将需要执行的应用添加到消息队列里,并不对应用的调用排序作进一步处理,导致业务端在等待中,但又不知道该执行具体哪个应用。
为此,有必要提供一种基于消息队列的业务处理系统,以解决上述问题。
发明内容
本申请实施例的目的在于提出一种基于消息队列的业务处理方法及系统,通过监控任务消息的执行过程,满足总业务处理压力的情况下尽量缩短总等待时间,提高业务处理效率。
根据本发明的一个方面,提供一种基于消息队列的业务处理系统,所述方法包括:
响应于业务请求,获取基于业务请求的任务消息;
基于所述任务消息的配置信息对所述任务消息进行分类;
基于所述任务消息的配置信息计算所述任务消息的业务处理压力;
将所述任务消息加入消息队列,监控所述任务消息的状态,计算所述任务消息的等待时间;
基于所述任务消息的业务处理压力和等待时间,对所述消息队列中的所述任务消息进行排序,以满足总业务处理压力且使总等待时间最短;
调用业务处理服务器执行所述任务消息,并返回所述任务消息执行结果;根据任务消息执行结果对任务消息的排序进行调整。
优选地,还包括给所述消息队列中的每个所述任务消息配置心跳服务,所述任务消息每间隔设定的时间周期发送心跳包,根据接收的心跳包确认所述任务消息的状态,同时根据时间周期和心跳包数量计算所述任务消息的等待时间。
优选地,还包括根据所述任务消息的配置信息将所述任务消息分为数据读取消息和数据写入消息;所述数据读取消息根据配置信息中需要读取、导出以及加密数据的大小计算业务处理压力;所述数据写入消息根据配置信息中需要写入的字段和计算业务处理压力。
优选地,还包括根据所述任务消息的等待时间和业务处理压力,采用分支界限算法,计算满足总业务处理压力的所有排序,并保存所有排序的分支和子节点信息;选取其中总等待时间最短的排序,并按照该排序对所述消息队列中所述任务消息进行排序,所述总等待时间通过以下公式进行计算:
其中,T表示总等待时间,ti1表示第一业务处理服务器开始启动业务处理需要的时间,tj2表示第二业务处理服务器处理所有业务累计需要的时间,tk3表示第三业务处理服务器处理所有业务需要的时间,j为整数,j的取值范围为[1-n],k为整数,n为整数。
所述总业务处理压力的上限通过以下公式进行计算:
其中,ub表示总业务处理压力的上限,v表示当前业务处理压力的值,W表示当前业务处理压力的数,w表示初始业务处理压力的数,vi表示第i个业务处理压力的价值,wi表示第i个业务处理压力的重量,i为动态业务增加值,i为整数。
优选地,还包括将所述业务处理服务器的业务处理能力作为所述总业务处理压力的上限,计算满足总业务处理压力的所有排序。
优选地,所述任务消息的执行结果执行为无服务响应或者等待时间超过设定的等待时间阈值时,根据保存所有排序的分支和子节点信息,采用回溯算法对任务消息的排序进行调整。
优选地,还包括将满足总业务处理压力的所有排序的分支和子节点信息保存在数据库中,写入所述数据库的分发状态处理表中。
根据本发明的另一方面,提供一种基于消息队列的业务处理系统,所述系统包括:
业务请求模块,包括业务请求入口,通过所述业务请求入口获取任务消息;
业务管理模块,与所述业务请求模块交互,读取所述任务消息的配置信息对获取的所述任务消息进行分类;
业务分配模块,与所述业务管理模块交互,将所述任务消息按照分类加入消息队列;
业务处理模块,与所述消息队列交互,调用业务处理服务器执行消息队列中的任务消息,并返回任务消息执行结果;
所述业务分配模块包括:分配组件和性能获取组件;
所述分配组件监控消息队列中每个所述任务消息的状态,计算所述任务消息的等待时间和业务处理压力,根据所述任务消息的等待时间和业务处理压力,对所述消息队列中所述任务消息进行排序;
所述性能获取组件与所述业务处理模块交互,获取所述业务处理服务器的业务处理能力,监控任务消息执行结果,并反馈给所述分配组件,所述分配组件根据任务消息执行结果对任务消息的排序进行调整。
优选地,所述分配组件将所述业务处理服务执行所述数据读取消息反馈的执行结果中读取、导出以及加密的数据通过分配管理模块反馈给业务请求模块。
优选地,所述业务请求入口包括输入界面,所述输入界面设置有消息查询、消息新增、消息修改和消息删除操作。
本申请公开的一种基于消息队列的业务处理方法及系统,监控任务消息的执行过程,根据任务消息的处理压力和等待时间对消息队列中的任务消息进行排序,以期在以满足总业务处理压力的情况下尽量缩短总等待时间,提高业务处理效率;
进一步地,还可以根据任务消息的执行结果对任务消息的排序进行调整,进一步提高业务处理效率;
进一步地,通过心跳服务监控任务消息的执行过程,易于实现且可靠;
进一步地,采用分支界限算法计算满足总业务处理压力的所有排序,有利于快速找到所有解和最优解;
进一步地,在执行结果执行为无服务响应或者等待时间超过设定的等待时间阈值时,根据保存所有排序的分支和子节点信息,采用回溯算法对任务消息的排序进行调整,简化计算过程。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图做一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,而不是全部实施例。对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施方式的基于消息队列的业务处理方法的流程图;
图2是根据本发明实施方式的基于消息队列的业务处理系统的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。根据本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面以具体的实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
根据现有技术存在的问题,本发明实施例提供一种基于消息队列的业务处理方法及系统,通过监控任务消息的执行过程,满足总业务处理压力的情况下尽量缩短总等待时间,提高业务处理效率。
图1是根据本发明实施方式的基于消息队列的业务处理方法的流程图,如图1所示,本发明实施例提供的一种基于消息队列的业务处理方法100包括:
步骤101,响应于业务请求,获取基于业务请求的任务消息;
步骤102,基于任务消息的配置信息对任务消息进行分类;
在一个实施例中,根据任务消息的配置信息将任务消息分为数据读取消息和数据写入消息;
步骤103,基于任务消息的配置信息计算任务消息的业务处理压力;
在一个实施例中,根据任务消息的分类计算业务处理压力,数据读取消息需要根据配置信息读取并导出数据,在导出数据时需要对数据进行加密,并支持权限和部分数据加密;因此,数据读取消息根据配置信息中需要读取、导出以及加密数据的大小计算业务处理压力;数据写入消息根据配置信息中需要写入的字段和计算业务处理压力。
步骤104,将任务消息加入消息队列,监控任务消息的状态,计算任务消息的等待时间;
在一个实施例中,通过给消息队列中的每个任务消息配置心跳服务来监控任务消息的状态,任务消息每间隔设定的时间周期发送心跳包,根据接收的心跳包确认任务消息的状态,同时根据时间周期和心跳包数量计算任务消息的等待时间。
步骤105,基于任务消息的业务处理压力和等待时间,对消息队列中的任务消息进行排序,以满足总业务处理压力且使总等待时间最短;
在一个实施例中,根据所述任务消息的等待时间和业务处理压力,采用分支界限算法,计算满足总业务处理压力的所有排序,并保存所有排序的分支和子节点信息;选取其中总等待时间最短的排序,并按照该排序对所述消息队列中所述任务消息进行排序,所述总等待时间通过以下公式进行计算:
其中,T表示总等待时间,ti1表示第一业务处理服务器开始启动业务处理需要的时间,tj2表示第二业务处理服务器处理所有业务累计需要的时间,tk3表示第三业务处理服务器处理所有业务需要的时间,j为整数,j的取值范围为[1-n],k为整数,n为整数。
所述总业务处理压力的上限通过以下公式进行计算:
其中,ub表示总业务处理压力的上限,v表示当前业务处理压力的值,W表示当前业务处理压力的数,w表示初始业务处理压力的数,vi表示第i个业务处理压力的价值,wi表示第i个业务处理压力的重量,i为动态业务增加值,i为整数。
采用分支界限算法计算满足总业务处理压力的所有排序,有利于快速找到所有解和最优解,适合将问题最小化。
在一个实施例中,将业务处理服务器的业务处理能力作为总业务处理压力的上限,计算满足总业务处理压力的所有排序。业务处理服务器为多个,多个业务处理服务器的性能不同,处理速度以及空闲时间不同,因此,可以将业务处理服务器的业务处理能力作为总业务处理压力的边界。
步骤106,调用业务处理服务器执行任务消息,并返回任务消息执行结果;根据任务消息执行结果对任务消息的排序进行调整。
在一个实施例中,任务消息的执行结果执行为无服务响应或者等待时间超过设定的等待时间阈值时,根据保存所有排序的分支和子节点信息,采用回溯算法对任务消息的排序进行调整,简化计算过程。
在一个实施例中,将满足总业务处理压力的所有排序的分支和子节点信息保存在数据库中,写入数据库的分发状态处理表中。
图2是根据本发明实施方式的基于消息队列的业务处理系统的结构示意图,如图2所示,本发明实施例提供的一种基于消息队列的业务处理系统200包括:业务请求模块201、业务管理模块202、业务分配模块203和业务处理模块204。
业务请求模块201,包括业务请求入口,通过业务请求入口获取任务消息;
业务管理模块202,与业务请求模块201交互,读取任务消息的配置信息对获取的任务消息进行分类;
业务分配模块203,与业务管理模块202交互,将任务消息按照分类加入消息队列400;
业务处理模块204,与消息队列400交互,调用业务处理服务器300执行消息队列400中的任务消息,并返回任务消息执行结果;
业务分配模块203包括:分配组件2031和性能获取组件2031;
分配组件2031监控消息队列400中每个任务消息的状态,计算任务消息的等待时间和业务处理压力,根据任务消息的等待时间和业务处理压力,对消息队列400中任务消息进行排序;
性能获取组件2031与业务处理模块204交互,获取业务处理服务器300的业务处理能力,监控任务消息执行结果,并反馈给分配组件2031,分配组件2031根据任务消息执行结果对任务消息的排序进行调整。
在一个实施例中,分配组件2031将业务处理服务器300执行数据读取消息反馈的执行结果中读取、导出以及加密的数据通过分配管理模块202反馈给业务请求模块201。
在一个实施例中,业务请求入口包括输入界面,输入界面设置有消息查询、消息新增、消息修改和消息删除操作。
综上所述,本申请公开的一种基于消息队列的业务处理方法及系统,监控任务消息的执行过程,根据任务消息的处理压力和等待时间对消息队列中的任务消息进行排序,以期在以满足总业务处理压力的情况下尽量缩短总等待时间,提高业务处理效率;
进一步地,还可以根据任务消息的执行结果对任务消息的排序进行调整,进一步提高业务处理效率;
进一步地,通过心跳服务监控任务消息的执行过程,易于实现且可靠;
进一步地,采用分支界限算法计算满足总业务处理压力的所有排序,有利于快速找到所有解和最优解;
进一步地,在执行结果执行为无服务响应或者等待时间超过设定的等待时间阈值时,根据保存所有排序的分支和子节点信息,采用回溯算法对任务消息的排序进行调整,简化计算过程。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于消息队列的业务处理方法,其特征在于,包括:
响应于业务请求,获取基于业务请求的任务消息;
基于所述任务消息的配置信息对所述任务消息进行分类;
基于所述任务消息的配置信息计算所述任务消息的业务处理压力;
将所述任务消息加入消息队列,监控所述任务消息的状态,计算所述任务消息的等待时间;
基于所述任务消息的业务处理压力和等待时间,对所述消息队列中的所述任务消息进行排序,以满足总业务处理压力且使总等待时间最短;
调用业务处理服务器执行所述任务消息,并返回所述任务消息执行结果;根据任务消息执行结果对任务消息的排序进行调整。
2.根据权利要求1所述的基于消息队列的业务处理方法,其特征在于,还包括给所述消息队列中的每个所述任务消息配置心跳服务,所述任务消息每间隔设定的时间周期发送心跳包,根据接收的心跳包确认所述任务消息的状态,同时根据时间周期和心跳包数量计算所述任务消息的等待时间。
3.根据权利要求1所述的基于消息队列的业务处理方法,其特征在于,还包括根据所述任务消息的配置信息将所述任务消息分为数据读取消息和数据写入消息;所述数据读取消息根据配置信息中需要读取、导出以及加密数据的大小计算业务处理压力;所述数据写入消息根据配置信息中需要写入的字段和计算业务处理压力。
4.根据权利要求1所述的基于消息队列的业务处理方法,其特征在于,还包括根据所述任务消息的等待时间和业务处理压力,采用分支界限算法,计算满足总业务处理压力的所有排序,并保存所有排序的分支和子节点信息;选取其中总等待时间最短的排序,并按照该排序对所述消息队列中所述任务消息进行排序,所述总等待时间通过以下公式进行计算:
其中,T表示总等待时间,ti1表示第一业务处理服务器开始启动业务处理需要的时间,tj2表示第二业务处理服务器处理所有业务累计需要的时间,tk3表示第三业务处理服务器处理所有业务需要的时间,j为整数,j的取值范围为[1-n],k为整数,n为整数。
所述总业务处理压力的上限通过以下公式进行计算:
其中,ub表示总业务处理压力的上限,v表示当前业务处理压力的值,W表示当前业务处理压力的数,w表示初始业务处理压力的数,vi表示第i个业务处理压力的价值,wi表示第i个业务处理压力的重量,i为动态业务增加值,i为整数。
5.根据权利要求4所述的基于消息队列的业务处理方法,其特征在于,还包括将所述业务处理服务器的业务处理能力作为所述总业务处理压力的上限,计算满足总业务处理压力的所有排序。
6.根据权利要求4所述的基于消息队列的业务处理方法,其特征在于,所述任务消息的执行结果执行为无服务响应或者等待时间超过设定的等待时间阈值时,根据保存所有排序的分支和子节点信息,采用回溯算法对任务消息的排序进行调整。
7.根据权利要求4所述的基于消息队列的业务处理方法,其特征在于,还包括将满足总业务处理压力的所有排序的分支和子节点信息保存在数据库中,写入所述数据库的分发状态处理表中。
8.一种基于消息队列的业务处理系统,其特征在于,包括:
业务请求模块,包括业务请求入口,通过所述业务请求入口获取任务消息;
业务管理模块,与所述业务请求模块交互,读取所述任务消息的配置信息对获取的所述任务消息进行分类;
业务分配模块,与所述业务管理模块交互,将所述任务消息按照分类加入消息队列;
业务处理模块,与所述消息队列交互,调用业务处理服务器执行消息队列中的任务消息,并返回任务消息执行结果;
所述业务分配模块包括:分配组件和性能获取组件;
所述分配组件监控消息队列中每个所述任务消息的状态,计算所述任务消息的等待时间和业务处理压力,根据所述任务消息的等待时间和业务处理压力,对所述消息队列中所述任务消息进行排序;
所述性能获取组件与所述业务处理模块交互,获取所述业务处理服务器的业务处理能力,监控任务消息执行结果,并反馈给所述分配组件,所述分配组件根据任务消息执行结果对任务消息的排序进行调整。
9.根据权利要求8所述的基于消息队列的业务处理系统,其特征在于,所述分配组件将所述业务处理服务执行所述数据读取消息反馈的执行结果中读取、导出以及加密的数据通过分配管理模块反馈给业务请求模块。
10.根据权利要求8所述的基于消息队列的业务处理系统,其特征在于,所述业务请求入口包括输入界面,所述输入界面设置有消息查询、消息新增、消息修改和消息删除操作。
CN202310667184.6A 2023-06-07 2023-06-07 一种基于消息队列的业务处理方法及系统 Active CN116661969B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310667184.6A CN116661969B (zh) 2023-06-07 2023-06-07 一种基于消息队列的业务处理方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310667184.6A CN116661969B (zh) 2023-06-07 2023-06-07 一种基于消息队列的业务处理方法及系统

Publications (2)

Publication Number Publication Date
CN116661969A true CN116661969A (zh) 2023-08-29
CN116661969B CN116661969B (zh) 2024-03-12

Family

ID=87727589

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310667184.6A Active CN116661969B (zh) 2023-06-07 2023-06-07 一种基于消息队列的业务处理方法及系统

Country Status (1)

Country Link
CN (1) CN116661969B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060152756A1 (en) * 2005-01-12 2006-07-13 International Business Machines Corporation Automating responses by grid providers to bid requests indicating criteria for a grid job
CN109672627A (zh) * 2018-09-26 2019-04-23 深圳壹账通智能科技有限公司 基于集群服务器的业务处理方法、平台、设备及存储介质
KR20200045639A (ko) * 2018-10-23 2020-05-06 삼성에스디에스 주식회사 큐 관리 장치 및 방법
CN112150035A (zh) * 2020-10-13 2020-12-29 中国农业银行股份有限公司 数据处理方法和装置
CN112416542A (zh) * 2020-09-07 2021-02-26 上海哔哩哔哩科技有限公司 分布式任务系统、管理方法、装置和计算机设备
CN112882813A (zh) * 2021-03-18 2021-06-01 苏州科达科技股份有限公司 任务调度方法、装置、系统及电子设备
CN115827183A (zh) * 2022-03-18 2023-03-21 中南大学 一种基于组合优化的混合容器云环境下Serverless服务调度系统
WO2023040399A1 (zh) * 2021-09-18 2023-03-23 深圳前海微众银行股份有限公司 一种业务持久化方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060152756A1 (en) * 2005-01-12 2006-07-13 International Business Machines Corporation Automating responses by grid providers to bid requests indicating criteria for a grid job
CN109672627A (zh) * 2018-09-26 2019-04-23 深圳壹账通智能科技有限公司 基于集群服务器的业务处理方法、平台、设备及存储介质
KR20200045639A (ko) * 2018-10-23 2020-05-06 삼성에스디에스 주식회사 큐 관리 장치 및 방법
CN112416542A (zh) * 2020-09-07 2021-02-26 上海哔哩哔哩科技有限公司 分布式任务系统、管理方法、装置和计算机设备
CN112150035A (zh) * 2020-10-13 2020-12-29 中国农业银行股份有限公司 数据处理方法和装置
CN112882813A (zh) * 2021-03-18 2021-06-01 苏州科达科技股份有限公司 任务调度方法、装置、系统及电子设备
WO2023040399A1 (zh) * 2021-09-18 2023-03-23 深圳前海微众银行股份有限公司 一种业务持久化方法及装置
CN115827183A (zh) * 2022-03-18 2023-03-21 中南大学 一种基于组合优化的混合容器云环境下Serverless服务调度系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
XUNYUN LIU 等: "Resource Management and Scheduling in Distributed Stream Processing Systems: A Taxonomy, Review, and Future Directions", 《ACM COMPUTING SURVEYS》, vol. 53, no. 3, 28 May 2020 (2020-05-28), pages 1 - 41 *
胡文斌 等: "面向请求预处理的实时按需数据广播调度方法", 《计算机学报》, vol. 41, no. 9, 5 December 2018 (2018-12-05), pages 2060 - 2076 *
蒋卓君: "Spark数据倾斜场景解决方案的研究与应用", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 5, 15 May 2021 (2021-05-15), pages 138 - 508 *

Also Published As

Publication number Publication date
CN116661969B (zh) 2024-03-12

Similar Documents

Publication Publication Date Title
US6411982B2 (en) Thread based governor for time scheduled process execution
CN1097913C (zh) Atm流量调节
CN111258737B (zh) 一种资源调度的方法、装置和过滤式调度器
US20100229182A1 (en) Log information issuing device, log information issuing method, and program
CN107844524A (zh) 数据处理方法、数据处理装置、计算机设备和存储介质
CN107577534A (zh) 一种资源调度方法及装置
CN107239342A (zh) 一种存储集群任务管理方法及装置
CN103634224A (zh) 网络中数据传输的方法和系统
US11789950B1 (en) Dynamic storage and deferred analysis of data stream events
CN116777182A (zh) 半导体晶圆制造执行任务派工方法
CN102098170B (zh) 一种数据采集优化方法及系统
CN103248636A (zh) 离线下载的系统及方法
CN116661969B (zh) 一种基于消息队列的业务处理方法及系统
CN113422808B (zh) 物联网平台http信息推送方法、系统、装置及介质
CN113849450A (zh) 一种信息处理方法和信息处理装置
CN111352746B (zh) 消息限流方法、存储介质
CN114546610B (zh) 一种海量数据分布式脱敏装置
CN115712572A (zh) 任务的测试方法、装置、存储介质及电子装置
JP5226189B2 (ja) 伝票処理プログラムおよび伝票処理装置
CN116016117A (zh) 网络设备运维数据采集方法、系统、电子设备及存储介质
US6330652B1 (en) Method and apparatus for high-speed data queuing and data retrieval
CN112579324A (zh) 一种基于cost模型的商品汇总统计方法
KR100959898B1 (ko) 인터넷 서비스를 위한 부하 분산형 스케줄링 구조를 가지는서비스 서버 및 그 서비스 방법
CN117240903B (zh) 一种物联网脱机消息动态管理配置系统
CN110866027A (zh) 一种提高区块链查询效率的系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant