CN115086328A - 一种元数据服务业务处理方法、装置、设备及介质 - Google Patents
一种元数据服务业务处理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN115086328A CN115086328A CN202210469690.XA CN202210469690A CN115086328A CN 115086328 A CN115086328 A CN 115086328A CN 202210469690 A CN202210469690 A CN 202210469690A CN 115086328 A CN115086328 A CN 115086328A
- Authority
- CN
- China
- Prior art keywords
- service
- processing unit
- target service
- metadata
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 claims abstract description 56
- 230000007717 exclusion Effects 0.000 claims abstract description 44
- 230000008569 process Effects 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims description 17
- 239000012634 fragment Substances 0.000 claims description 4
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000007726 management method Methods 0.000 description 23
- 238000004891 communication Methods 0.000 description 6
- 230000003993 interaction Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000000125 metastable de-excitation spectroscopy Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/52—Program synchronisation; Mutual exclusion, e.g. by means of semaphores
- G06F9/526—Mutual exclusion algorithms
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种元数据服务业务处理方法、装置、设备及介质,涉及计算机技术领域。该方法包括:获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。通过上述技术方案,提升了处理业务请求的性能。综上,本申请能够当负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种元数据服务业务处理方法、装置、设备及介质。
背景技术
分布式文件系统对元数据高度的依赖,任何客户端发起的数据存储节点的写入或者查询都需要从元数据获取访问权限、路径等元数据方可找到对应的数据存储位置以及能否对数据进行操作。MDS(即Metadata Data Server,元数据服务)为分布式文件系统提供元数据访问的守护进程,MDS对元数据访问的能力就成为了分布式文件系统性能的关键因素。目前开源社区为了解决单节点元数据的性能瓶颈,支持元数据服务集群(即Multi-MDS)部署,元数据服务集群不仅解决了单点故障的风险,同时增加了元数据多进程并发的能力。通过MDS负载均衡的方式将客户端请求分发到不同的MDS上进行业务请求的处理,负载到单点MDS上的请求会减少一些,从而降低了MDS的请求延迟。
然而,对于单节点MDS当负载到大量的业务请求时,由于元数据服务锁机制导致内部业务逻辑处理无法实现并发处理,使得单节点MDS依旧存在成为性能瓶颈的可能性。综上,如何能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率的问题有待进一步解决。
发明内容
有鉴于此,本发明的目的在于提供一种元数据服务业务处理方法、装置、设备及介质,能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。其具体方案如下:
第一方面,本申请公开了一种元数据服务业务处理方法,包括:
获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;
将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;
当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
可选的,所述获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程之前,还包括:
初始化元数据服务并同步创建预设数量的所述业务处理单元线程;
将所述预设数量的业务处理单元线程加入至业务处理单元管理层的集合中。
可选的,还包括:
在所述业务处理单元管理层构建所述业务处理单元线程的状态集合并收集所述业务处理单元线程的状态与所述元数据服务的监管系统进行交互。
可选的,所述初始化元数据服务并同步创建预设数量的所述业务处理单元线程,包括:
将所述元数据服务中的与业务流程无关的功能模块放入公共处理区域并将与业务流程相关的功能模块放入至所述业务处理单元线程中以创建预设数量的所述业务处理单元线程。
可选的,还包括:
当接收到外部的输入命令时,利用所述业务处理单元管理层收集各个所述业务处理单元线程对应的信息并统一进行展示。
可选的,还包括:
将所述元数据服务中的互斥锁限制取消并对每个所述业务处理线程增加对应的互斥锁,以控制所述业务请求的输入。
可选的,所述获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程,包括:
获取客户端发送的目标业务请求,并根据所述目标业务请求基于哈希算法确定需要访问的元数据服务;
根据所述目标业务请求对应的操作文件或目录的分片基于哈希算法确定所述元数据服务中对应的目标业务处理单元线程。
第二方面,本申请公开了一种元数据服务业务处理装置,包括:
业务请求获取模块,用于获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;
业务请求处理模块,用于将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;
互斥锁释放模块,用于当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
第三方面,本申请公开了一种电子设备,包括:
存储器,用于保存计算机程序;
处理器,用于执行所述计算机程序,以实现前述公开的所述的元数据服务业务处理方法的步骤。
第四方面,本申请公开了一种计算机可读存储介质,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现前述公开的所述的元数据服务业务处理方法的步骤。
本申请在进行元数据服务业务处理时,先获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。可见,本申请在进行元数据服务业务处理时,先通过获取到目标业务请求来判断执行所述目标业务请求的元数据服务与目标业务处理单元线程,在所述目标业务请求进入到所述目标业务处理单元线程后则开启互斥锁,当所述目标业务处理单元线程将所述目标业务处理完后则解除所述互斥锁。由此,在进行元数据服务业务处理时,通过在元数据服务内预设多个业务处理单元线程,并将所述互斥锁设置在业务处理单元线程内,即在单节点元数据服务的单进程下预设多个线程,使得多个业务处理单元线程可同时进行业务处理操作且互不干扰,从而单节点元数据服务当负载到大量的业务请求时可将大量业务请求分配到不同的业务处理单元线程中进行处理,显著提升了元数据服务处理业务请求的性能;同时,相较于当前在元数据服务中设置互斥锁本申请将互斥锁设置于业务处理单元线程中,进而减小锁的颗粒度,提升业务处理单元线程的并发处理能力并降低客户端延迟。综上,本申请能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请提供了一种元数据服务业务处理方法流程图;
图2为本申请提供的一种具体的元数据服务业务处理方法流程图;
图3为本申请提供的一种元数据服务业务处理装置结构示意图;
图4为本申请提供的一种电子设备结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前开源社区为了解决单节点元数据的性能瓶颈,支持元数据服务集群(即Multi-MDS)部署,元数据服务集群不仅解决了单点故障的风险,同时增加了元数据多进程并发的能力。通过MDS负载均衡的方式将客户端请求分发到不同的MDS上进行业务请求的处理,负载到单点MDS上的请求会减少一些,从而降低了MDS的请求延迟。对于单节点MDS当负载到大量的业务请求时,由于元数据服务锁机制导致内部业务逻辑处理无法实现并发处理,使得单节点MDS依旧存在成为性能瓶颈的可能性。为此,本申请提供了一种元数据服务业务处理方法能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。
本发明实施例公开了一种元数据服务业务处理方法,参见图1所述,该方法包括:
步骤S11:获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程。
在本实施例中,获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程包括:获取客户端发送的目标业务请求,并根据所述目标业务请求基于哈希算法确定需要访问的元数据服务;根据所述目标业务请求对应的操作文件或目录的分片基于哈希算法确定所述元数据服务中对应的目标业务处理单元线程。即,通过目标业务请求首先确定所需要的访问的元数据服务,并根据目标业务请求中的信息确定处理所述目标业务请求的目标业务处理单元线程。通过上述技术方案,相较于目前将业务请求直接使用元数据服务的进程进行处理的方式,本实施例将目标业务请求输入至更精细的操作模块即目标业务处理单元线程中进行目标业务请求的处理,使得当单节点元数据服务当负载到大量的业务请求时可将大量业务请求分配到不同的业务处理单元线程中进行处理,显著提升了元数据服务处理业务请求的性能。
步骤S12:将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程。
需要指出的是,在进行业务处理开始前,还包括:将所述元数据服务中的互斥锁限制取消并对每个所述业务处理线程增加对应的互斥锁,以控制所述业务请求的输入。即,取消元数据服务中现有的互斥锁并将互斥锁下放到所述业务处理单元线程中。进一步的,当元数据服务接收到目标业务请求,并将所述目标业务请求输入至目标业务处理单元线程中时,所述目标业务处理单元线程开启对应的互斥锁,以禁止其他的业务请求进入到目标业务处理单元线程中并开始处理所述目标业务请求。通过上述技术方案,将在元数据服务中的互斥锁下放到业务处理单元线程中,使得同一个元数据服务进程可以通过多个元数据处理单元线程进行多个业务请求的同时处理,通过减小锁的颗粒度,提升了业务处理单元线程的并发处理能力并降低客户端延迟。
步骤S13:当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
在本实施例中,当目标业务请求在目标业务处理单元线程中已被处理完后,则释放所述目标业务处理单元线程对应的互斥锁,并等待处理后续的目标业务请求。通过上述技术方案,当目标业务请求被完成后,则释放开所述目标业务处理单元线程对应的互斥锁,使得上述目标业务处理单元线程可以进一步处理后续的目标业务请求。
可见,本实施例在进行元数据服务业务处理时,先通过获取到目标业务请求来判断执行所述目标业务请求的元数据服务与目标业务处理单元线程,在所述目标业务请求进入到所述目标业务处理单元线程后则开启互斥锁,当所述目标业务处理单元线程将所述目标业务处理完后则解除所述互斥锁。由此,在进行元数据服务业务处理时,通过在元数据服务内预设多个业务处理单元线程,并将所述互斥锁设置在业务处理单元线程内,即在单节点元数据服务的单进程下预设多个线程,使得多个业务处理单元线程可同时进行业务处理操作且互不干扰,从而单节点元数据服务当负载到大量的业务请求时可将大量业务请求分配到不同的业务处理单元线程中进行处理,显著提升了元数据服务处理业务请求的性能;同时,相较于当前在元数据服务中设置互斥锁本申请将互斥锁设置于业务处理单元线程中,进而减小锁的颗粒度,提升业务处理单元线程的并发处理能力并降低客户端延迟。综上,本申请能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。
参见图2所示,本发明实施例公开了一种具体的元数据服务业务处理方法,相对于上一实施例,本实施例对技术方案作了进一步说明和优化。
步骤S21:初始化元数据服务并同步创建预设数量的所述业务处理单元线程,然后将所述预设数量的业务处理单元线程加入至业务处理单元管理层的集合中。
在本实施例中,首先初始化元数据服务并创建预设数量的业务处理单元线程,可以理解的是,所述预设数量可根据实际运用场景进行配置,在一些具体实施方式中,所述预设数量为2n。所述业务处理单元线程均可以进行业务请求的处理,将所述预设数量的业务处理单元线程加入到业务处理管理层的集合中,以便于通过所述业务处理管理层对所述预设数量的业务处理单元线程进行同一管理。
在一些具体实施方式中,将所述元数据服务中的与业务流程无关的功能模块放入公共处理区域并将与业务流程相关的功能模块放入至所述业务处理单元线程中以创建预设数量的所述业务处理单元线程。所述与业务流程无关的功能模块包括但不限于管理线程模块、心跳机制模块与信息交互模块;所述与业务流程相关的功能模块包括但不限于高速缓冲存储器、业务处理核心模块、日志记录模块。通过上述技术方案,与业务流程无关的功能模块放入公共处理区域,使得在处理与业务流程无关的业务请求时可直接使用公共区域的功能模块,从而提升了业务请求处理的效率。
在一些具体实施方式中,在所述业务处理单元管理层构建所述业务处理单元线程的状态集合并收集所述业务处理单元线程的状态与所述元数据服务的监管系统进行交互。所述业务处理单元线程的状态包括但不限于active(即提供服务状态)与standby(即休眠状态);当出现故障后故障恢复时,需要业务处理单元管理层协调各业务处理单元线程全部启用恢复的流程,使得每个业务处理单元线程都可以进行缓存内容重建,完成之后通知业务处理单元管理层,由业务处理单元管理层和所述监管模块进行交互进行状态切换。
在一些具体实施方式中,当接收到外部的输入命令时,利用所述业务处理单元管理层收集各个所述业务处理单元线程对应的信息并统一进行展示。即当外部命令输入时,由业务处理单元管理层统计各个业务处理单元线程的信息,并进行统一反馈与展示。通过上述技术方案,将所述业务处理单元线程使用业务处理单元管理层进行统一管理,以便于通过所述业务处理单元管理层即可协调各个业务处理单元线程的工作以及与其他的功能模块的交互。
步骤S22:获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程。
步骤S23:将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程。
步骤S24:当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
在本实施例中,通过创建可配置的预设数量的所述业务处理单元线程,使得元数据服务可以同时进行多个业务请求的同时处理,并可以通过配置预设数量来更改所述元数据服务器中可同时处理业务请求的个数,以满足不同场景下的需求;另一方面,与业务流程无关的功能模块放入公共处理区域,使得在处理与业务流程无关的业务请求时可直接使用公共区域的功能模块,从而提升了业务请求处理的效率;同时,将所述业务处理单元线程使用业务处理单元管理层进行统一管理,可以当状态发生改变时由业务处理单元管理层和所述监管模块进行交互进行状态切换,并且通过所述业务处理单元管理层即可协调各个业务处理单元线程的工作以及与其他的功能模块的交互。
参见图3所示本申请实施例公开了一种元数据服务业务处理装置,包括:
业务请求获取模块11,用于获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;
业务请求处理模块12,用于将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;
互斥锁释放模块13,用于当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
可见,本实施例在进行元数据服务业务处理时,先通过获取到目标业务请求来判断执行所述目标业务请求的元数据服务与目标业务处理单元线程,在所述目标业务请求进入到所述目标业务处理单元线程后则开启互斥锁,当所述目标业务处理单元线程将所述目标业务处理完后则解除所述互斥锁。由此,在进行元数据服务业务处理时,通过在元数据服务内预设多个业务处理单元线程,并将所述互斥锁设置在业务处理单元线程内,即在单节点元数据服务的单进程下预设多个线程,使得多个业务处理单元线程可同时进行业务处理操作且互不干扰,从而单节点元数据服务当负载到大量的业务请求时可将大量业务请求分配到不同的业务处理单元线程中进行处理,显著提升了元数据服务处理业务请求的性能;同时,相较于当前在元数据服务中设置互斥锁本申请将互斥锁设置于业务处理单元线程中,进而减小锁的颗粒度,提升业务处理单元线程的并发处理能力并降低客户端延迟。综上,本申请能够当元数据服务负载到大量业务请求时降低客户端的业务延迟从而提高业务处理效率。
在一些具体实施例中,所述元数据服务业务处理模块还包括:
线程创建模块,用于初始化元数据服务并同步创建预设数量的所述业务处理单元线程;
管理层配置模块,用于将所述预设数量的业务处理单元线程加入至业务处理单元管理层的集合中。
在一些具体实施例中,所述元数据服务业务处理模块还包括:
状态交互模块,用于在所述业务处理单元管理层构建所述业务处理单元线程的状态集合并收集所述业务处理单元线程的状态与所述元数据服务的监管系统进行交互。
在一些具体实施例中,所述线程创建模块,具体用于:将所述元数据服务中的与业务流程无关的功能模块放入公共处理区域并将与业务流程相关的功能模块放入至所述业务处理单元线程中以创建预设数量的所述业务处理单元线程。
在一些具体实施例中,所述元数据服务业务处理模块还包括:
信息展示模块,用于当接收到外部的输入命令时,利用所述业务处理单元管理层收集各个所述业务处理单元线程对应的信息并统一进行展示。
在一些具体实施例中,所述元数据服务业务处理模块还包括:
互斥锁下放模块,用于将所述元数据服务中的互斥锁限制取消并对每个所述业务处理线程增加对应的互斥锁,以控制所述业务请求的输入。
在一些具体实施例中,所述业务请求获取模块11,具体包括:
元数据服务确定单元,用于获取客户端发送的目标业务请求,并根据所述目标业务请求基于哈希算法确定需要访问的元数据服务;
线程确定单元,用于根据所述目标业务请求对应的操作文件或目录的分片基于哈希算法确定所述元数据服务中对应的目标业务处理单元线程。
图4所示为本申请实施例提供的一种电子设备20。该电子设备20,具体还可以包括:至少一个处理器21、至少一个存储器22、电源23、通信接口24、输入输出接口25和通信总线26。其中,所述存储器22用于存储计算机程序,所述计算机程序由所述处理器21加载并执行,以实现前述任一实施例公开的元数据服务业务处理方法中的相关步骤。另外,本实施例中的电子设备20具体可以为电子计算机。
本实施例中,电源23用于为电子设备20上的各硬件设备提供电压;通信接口24能够为电子设备20创建与外界设备之间的数据传输通道,其所遵循的通信协议是能够适用于本申请技术方案的任意通信协议,在此不对其进行具体限定;输入输出接口25,用于获取外界输入数据或向外界输出数据,其具体的接口类型可以根据具体应用需要进行选取,在此不进行具体限定。
另外,存储器22作为资源储存的载体,可以是只读存储器、随机存储器、磁盘或者光盘等,其上所存储的资源可以包括操作系统221,计算机程序222等,存储方式可以是短暂存储或者永久存储。
其中,操作系统221用于管理与控制电子设备20上的各硬件设备以及计算机程序222其可以是Windows Server、Netware、Unix、Linux等。计算机程序222除了包括能够用于完成前述任一实施例公开的由电子设备20执行的元数据服务业务处理方法的计算机程序外,还可以进一步包括能够用于完成其他特定工作的计算机程序。
进一步的,本申请还公开了一种计算机可读存储介质,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现前述公开的元数据服务业务处理方法。关于该方法的具体步骤可以参考前述实施例中公开的相应内容,在此不再进行赘述。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的一种元数据服务业务处理方法、装置、设备及介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种元数据服务业务处理方法,其特征在于,包括:
获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;
将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;
当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
2.根据权利要求1所述的元数据服务业务处理方法,其特征在于,所述获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程之前,还包括:
初始化元数据服务并同步创建预设数量的所述业务处理单元线程;
将所述预设数量的业务处理单元线程加入至业务处理单元管理层的集合中。
3.根据权利要求2所述的元数据服务业务处理方法,其特征在于,还包括:
在所述业务处理单元管理层构建所述业务处理单元线程的状态集合并收集所述业务处理单元线程的状态与所述元数据服务的监管系统进行交互。
4.根据权利要求2所述的元数据服务业务处理方法,其特征在于,所述初始化元数据服务并同步创建预设数量的所述业务处理单元线程,包括:
将所述元数据服务中的与业务流程无关的功能模块放入公共处理区域并将与业务流程相关的功能模块放入至所述业务处理单元线程中以创建预设数量的所述业务处理单元线程。
5.根据权利要求2所述的元数据服务业务处理方法,其特征在于,还包括:
当接收到外部的输入命令时,利用所述业务处理单元管理层收集各个所述业务处理单元线程对应的信息并统一进行展示。
6.根据权利要求1所述的元数据服务业务处理方法,其特征在于,还包括:
将所述元数据服务中的互斥锁限制取消并对每个所述业务处理线程增加对应的互斥锁,以控制所述业务请求的输入。
7.根据权利要求1至6中任一项所述的元数据服务业务处理方法,其特征在于,所述获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程,包括:
获取客户端发送的目标业务请求,并根据所述目标业务请求基于哈希算法确定需要访问的元数据服务;
根据所述目标业务请求对应的操作文件或目录的分片基于哈希算法确定所述元数据服务中对应的目标业务处理单元线程。
8.一种元数据服务业务处理装置,其特征在于,包括:
业务请求获取模块,用于获取客户端发送的目标业务请求,并确定处理所述目标业务请求的元数据服务与对应的目标业务处理单元线程;所述元数据服务中包含预设数量的业务处理单元线程;
业务请求处理模块,用于将所述目标业务请求输入至所述目标业务处理单元线程中并开启所述目标业务处理单元线程的互斥锁,以禁止其他业务请求进入所述目标业务处理单元线程;
互斥锁释放模块,用于当所述目标业务请求处理完毕后,释放所述目标业务处理单元线程的互斥锁,并等待处理后续的目标业务请求。
9.一种电子设备,其特征在于,包括:
存储器,用于保存计算机程序;
处理器,用于执行所述计算机程序,以实现如权利要求1至7任一项所述的元数据服务业务处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的元数据服务业务处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210469690.XA CN115086328A (zh) | 2022-04-30 | 2022-04-30 | 一种元数据服务业务处理方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210469690.XA CN115086328A (zh) | 2022-04-30 | 2022-04-30 | 一种元数据服务业务处理方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115086328A true CN115086328A (zh) | 2022-09-20 |
Family
ID=83247823
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210469690.XA Pending CN115086328A (zh) | 2022-04-30 | 2022-04-30 | 一种元数据服务业务处理方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115086328A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1834956A (zh) * | 2005-03-18 | 2006-09-20 | 联想(北京)有限公司 | 多线程元数据的处理方法 |
CN106095817A (zh) * | 2016-06-01 | 2016-11-09 | 常熟理工学院 | 基于微内核的可扩展文件系统及文件访问方法 |
CN107229632A (zh) * | 2016-03-24 | 2017-10-03 | 阿里巴巴集团控股有限公司 | 一种避免线程并发访问数据库的方法和装置 |
CN107729495A (zh) * | 2017-10-18 | 2018-02-23 | 郑州云海信息技术有限公司 | 一种文件元数据浏览方法及装置 |
CN108052396A (zh) * | 2017-11-27 | 2018-05-18 | 深圳市恒扬数据股份有限公司 | 一种资源分配方法及系统 |
-
2022
- 2022-04-30 CN CN202210469690.XA patent/CN115086328A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1834956A (zh) * | 2005-03-18 | 2006-09-20 | 联想(北京)有限公司 | 多线程元数据的处理方法 |
CN107229632A (zh) * | 2016-03-24 | 2017-10-03 | 阿里巴巴集团控股有限公司 | 一种避免线程并发访问数据库的方法和装置 |
CN106095817A (zh) * | 2016-06-01 | 2016-11-09 | 常熟理工学院 | 基于微内核的可扩展文件系统及文件访问方法 |
CN107729495A (zh) * | 2017-10-18 | 2018-02-23 | 郑州云海信息技术有限公司 | 一种文件元数据浏览方法及装置 |
CN108052396A (zh) * | 2017-11-27 | 2018-05-18 | 深圳市恒扬数据股份有限公司 | 一种资源分配方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11086531B2 (en) | Scaling events for hosting hierarchical data structures | |
CN103038788B (zh) | 提供多个网络资源 | |
US6466965B1 (en) | Centralized affinity maintenance in a workload managed client/server data processing system | |
US20120102506A1 (en) | Web service patterns for globally distributed service fabric | |
US20130332927A1 (en) | System and method for managing resources in virtualized environment | |
WO2012054185A1 (en) | Dynamically splitting multi-tenant databases | |
CA2847597A1 (en) | Clustered client failover | |
CN103946833A (zh) | 管理专用缓存的系统和方法 | |
US9747291B1 (en) | Non-disruptive upgrade configuration translator | |
US9910881B1 (en) | Maintaining versions of control plane data for a network-based service control plane | |
US11449241B2 (en) | Customizable lock management for distributed resources | |
US10789138B2 (en) | SMB service fault processing method and storage device | |
WO2023284473A1 (zh) | 数据管理方法、装置、计算机设备及存储介质 | |
US6779028B1 (en) | System application management method and system, and storage medium which stores program for executing system application management | |
US11822552B2 (en) | Methods for updating reference count and shared objects in a concurrent system | |
WO2023016414A1 (zh) | 凭据的轮转方法、计算设备及存储介质 | |
CN111736809A (zh) | 分布式机器人集群网络管理框架及其实现方法 | |
CN109165078B (zh) | 一种虚拟分布式服务器及其访问方法 | |
CN115086328A (zh) | 一种元数据服务业务处理方法、装置、设备及介质 | |
CN112241398A (zh) | 一种数据迁移方法和系统 | |
US11507512B2 (en) | Fault tolerant cluster data handling | |
CN114036164A (zh) | 一种乐观锁和悲观锁组合的高并发交易加锁方法及系统 | |
CN106844058B (zh) | 一种虚拟化资源的管理方法和装置 | |
US10592484B1 (en) | Data migration between different lightweight directory access protocol (LDAP) based wireless communication subscriber data stores | |
Guo et al. | Cornus: Atomic Commit for a Cloud DBMS with Storage Disaggregation (Extended Version) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |