CN114466027A - 一种云原生数据库服务提供方法、系统、设备及介质 - Google Patents

一种云原生数据库服务提供方法、系统、设备及介质 Download PDF

Info

Publication number
CN114466027A
CN114466027A CN202210096003.4A CN202210096003A CN114466027A CN 114466027 A CN114466027 A CN 114466027A CN 202210096003 A CN202210096003 A CN 202210096003A CN 114466027 A CN114466027 A CN 114466027A
Authority
CN
China
Prior art keywords
database service
cloud
native database
data center
metadata
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210096003.4A
Other languages
English (en)
Other versions
CN114466027B (zh
Inventor
吴栋
亓开元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202210096003.4A priority Critical patent/CN114466027B/zh
Publication of CN114466027A publication Critical patent/CN114466027A/zh
Application granted granted Critical
Publication of CN114466027B publication Critical patent/CN114466027B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G06F11/1453—Management of the data involved in backup or backup restore using de-duplication of the data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
    • H04L41/0668—Management of faults, events, alarms or notifications using network fault recovery by dynamic selection of recovery network elements, e.g. replacement by the most appropriate element after failure
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种云原生数据库服务提供方法、系统、设备及介质，包括：基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心；在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。能够提供跨数据中心、跨地域的一致性云服务，并保障服务质量。

Description

一种云原生数据库服务提供方法、系统、设备及介质
技术领域
本申请涉及云服务技术领域，特别涉及一种云原生数据库服务提供方法、系统、设备及介质。
背景技术
目前，采用云计算的形式，进行信息化集约建设，统一在云上提供开箱即用的数据库、中间件等云服务变得越来越流行，大大降低了信息化建设的成本，使得最终用户获取信息化服务更加便捷。然而，基于已有的传统云服务提供方式，通常通过人工实现大量脚本来进行主从备份，自动化程度不高，难以实现跨数据中心、跨地域提供一致性云服务，服务的连续性、可靠性无法得到高质量保障。
发明内容
有鉴于此，本申请的目的在于提供一种云原生数据库服务提供方法、系统、设备及介质，能够提供跨数据中心、跨地域的一致性云服务，并保障服务质量。其具体方案如下：
第一方面，本申请公开了一种云原生数据库服务提供方法，包括：
基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；
在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心；
在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；
通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
可选的，所述元数据同步装置包括部署于所述主数据中心的元数据备份控制器以及部署于所述备数据中心的元数据恢复控制器；
相应的，所述在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心，包括：
在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发所述元数据备份控制器从所述主数据中心的ETCD数据库中获取所述元数据，并将所述元数据保存至中继存储中；
通过所述元数据恢复控制器从所述中继存储中获取所述元数据，并保存至所述备数据中心的ETCD数据库，以完成元数据同步。
可选的，还包括：
通过全局负载均衡器检测所述主数据中心的运行状态；
当所述主数据中心运行正常，则将业务流量发送至所述主数据中心；
当所述主数据中心发生故障，则将所述业务流量发送至所述备数据中心。
可选的，还包括：
当所述主数据中心或所述备数据中心接收到所述全局负载均衡器发送的业务流量，则在所述主云原生数据库服务集群或所述从云原生数据库服务集群中对接收到的所述业务流量进行负载均衡，并将任一所述云原生数据库服务写入的数据复制到集群中其他云原生数据库服务。
可选的，所述基于K8s平台在主数据中心部署主云原生数据库服务集群，包括：
基于Kubernetes Operator机制定义资源，并基于所述资源在主数据中心部署主云原生数据库服务集群。
可选的，所述业务数据差量复制装置包括部署于所述主数据中心的业务数据复制控制器以及部署于所述备数据中心的业务数据恢复控制器；
相应的，所述通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群，包括：
通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，将所述数据差量备份到中继存储；
通过所述业务数据恢复控制器定时驱动文件系统恢复代理从所述中继存储中将所述数据差量复制到所述从云原生数据库服务集群。
可选的，所述通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，包括：
基于预设规则从所述主云原生数据库服务集群中确定出目标容器；
通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中所述目标容器的文件系统。
第二方面，本申请公开了一种云原生数据库服务提供系统，包括：
云原生数据库服务部署装置，用于基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；
元数据同步装置，用于在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动将所述元数据同步至备数据中心；相应的所述云原生数据库服务部署装置，还用于在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；
业务数据差量复制装置，用于定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
第三方面，本申请公开了一种电子设备，包括处理器和存储器；其中，
所述存储器，用于保存计算机程序；
所述处理器，用于执行所述计算机程序以实现前述的云原生数据库服务提供方法。
第四方面，本申请公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述的云原生数据库服务提供方法。
可见，本申请先基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中，并在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心，之后在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群，最后通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。也即，本申请基于K8s平台部署基于容器的云原生数据库服务集群，在主云原生数据库服务集群部署完成，元数据存入ETCD数据库后，自动触发元数据同步装置将元数据同步至备数据中心，以在备数据中心建立从云原生数据库服务集群，数据库服务集群部署完成后，通过业务数据差量复制装置定时将主云原生数据库服务集群的数据差量复制到从云原生数据库服务集群，这样，通过K8s平台部署基于容器的云原生数据库服务集群，便于对服务的监测和管理，并且，在主云原生数据库服务集群部署完成，元数据保存至ETCD数据库后，会自动进行元数据同步，在从云原生数据库服务集群部署完成后，通过业务数据差量复制装置定时的将主数据中心的数据差量备份至从数据中心，提高了服务的自动化程度，能够提供跨数据中心、跨地域的一致性云服务，并保障服务质量。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种云原生数据库服务提供方法流程图；
图2为本申请公开的一种云原生数据库服务提供方案示意图；
图3为本申请公开的一种云原生数据库服务提供系统结构示意图；
图4为本申请公开的一种电子设备结构图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
目前，采用云计算的形式，进行信息化集约建设，统一在云上提供开箱即用的数据库、中间件等云服务变得越来越流行，大大降低了信息化建设的成本，使得最终用户获取信息化服务更加便捷。然而，基于已有的传统云服务提供方式，通常通过人工实现大量脚本来进行主从备份，自动化程度不高，难以实现跨数据中心、跨地域提供一致性云服务，服务的连续性、可靠性无法得到高质量保障。为此，本申请提供了一种云原生数据库服务提供方案，能够提供跨数据中心、跨地域的一致性云服务，并保障服务质量。
参见图1所示，本申请实施例公开了一种云原生数据库服务提供方法，包括：
步骤S11：基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中。
在具体的实施方式中，可以基于Kubernetes Operator机制定义资源，并基于所述资源在主数据中心部署主云原生数据库服务集群。
在具体的实施方式中，可以基于Kubernetes Operator机制，定义DDRDMS(Distributed distribution relational database management system，分布式分发数据库管理系统)资源，资源中包含有状态负载应用、卷模板、headless服务、数据复制控制器等资源。并定义DDRDMS资源的控制器，当用户通过APIServer完成DDRDMS资源创建时，该控制器会监控该资源对象，并进行pod调度，创建对应的有状态负载、卷模板、headless服务等其他对象，完成云原生数据库服务集群部署。
步骤S12：在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心。
其中，所述元数据同步装置包括部署于所述主数据中心的元数据备份控制器以及部署于所述备数据中心的元数据恢复控制器。
相应的，在具体的实施方式中，本申请实施例在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发所述元数据备份控制器从所述主数据中心的ETCD数据库中获取所述元数据，并将所述元数据保存至中继存储中；通过所述元数据恢复控制器从所述中继存储中获取所述元数据，并保存至所述备数据中心的ETCD数据库，以完成元数据同步。
也即，本申请实施例，当在主数据中心完成数据库服务集群部署后，数据库服务实例的元数据会存储到ETCD中，同时触发元数据备份控制器调用查询接口从ETCD中获取元数据，并将元数据库复制到中继对象存储中，完成中继。元数据恢复控制器会从中继对象存储中获取数据，异步恢复到备数据中心K8s集群的ETCD数据库中，完成元数据同步。
步骤S13：在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群。
步骤S14：通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
其中，所述业务数据差量复制装置包括部署于所述主数据中心的业务数据复制控制器以及部署于所述备数据中心的业务数据恢复控制器。
相应的，在具体的实施方式中，本申请实施例可以通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，将所述数据差量备份到中继存储；通过所述业务数据恢复控制器定时驱动文件系统恢复代理从所述中继存储中将所述数据差量复制到所述从云原生数据库服务集群。
并且，在具体的实施方式中，可以基于预设规则从所述主云原生数据库服务集群中确定出目标容器；通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中所述目标容器的文件系统。其中，预设规则可以为随机选一个，也可以为集群中写入数据次数最多的数据库服务的运行容器。
也即，本申请实施例可以通过业务数据差量复制装置将主数据中心中数据库服务集群产生的业务数据增量复制到备数据中心的数据库服务集群中，实现数据和服务一致性。业务数据差量复制装置由部署于所述主数据中心的业务数据复制控制器以及部署于备数据中心的业务数据恢复控制器两个控制器构成，在完成跨地域数据库服务部署后，业务数据复制控制器会驱动文件系统备份代理访问数据库服务运行的容器的文件系统，启动数据扫盘动作将增量的业务数据备份到中继对象存储上，业务数据恢复控制器会定期驱动文件系统恢复代理，将中继对象存储上的数据拷贝到备数据中心的数据库实例的文件系统中，实现业务数据的差量复制，完成数据同步。
进一步的，本申请实施例可以通过全局负载均衡器检测所述主数据中心的运行状态；当所述主数据中心运行正常，则将业务流量发送至所述主数据中心；当所述主数据中心发生故障，则将所述业务流量发送至所述备数据中心。
并且，当所述主数据中心或所述备数据中心接收到所述全局负载均衡器发送的业务流量，则在所述主云原生数据库服务集群或所述从云原生数据库服务集群中对接收到的所述业务流量进行负载均衡，并将任一所述云原生数据库服务写入的数据复制到集群中其他云原生数据库服务。
在具体的实施方式中，当全局负载均衡将流量分发到特定数据中心的数据库服务集群后，数据库服务集群将会在多个数据库服务之间进行负载均衡，完成二次分流。接收写流量的数据库服务，完成数据写入后会在binlog文件中形成对应记录，集群内的数据复制控制器会针对binlog中新增的记录复制到其他数据库服务，其他数据库服务获取到binlog数据后进行反向操作，完成对应的数据写操作，保证集群中各数据库服务之间的数据一致性。
例如，参见图2所示，图2为本申请实施例提供的一种云原生数据库服务提供方案示意图。提供跨地域数据库服务时，采用云原生数据库服务部署装置，在主数据中心中部署云原生数据库服务实例，通过元数据同步装置将主数据中心的云原生数据库服务的元数据同步到备数据中心，并采用全局负载均衡器对两个地域中存在的数据库服务进行负载均衡，使用主备方式提供高可用数据库服务。当主数据中心接收到写请求完成数据写入后，业务数据差量复制装置会定时对主数据中心中的数据进行差量复制，保证主备数据中心中业务数据的实时性。当主数据中心发生故障时，全局负载均衡器会自动检测并将业务流量完全切换到备中心的服务上，从而实现跨数据中心、跨地域的高可用云原生数据库服务。具体实施过程如下：先通过云原生数据库服务部署装置，基于Kubernetes Operator机制，定义DDRDMS资源并实现对应的控制器，当用户通过APIServer完成DDRDMS资源创建时，该资源对应的控制器会监控该资源对象，并进行pod调度，创建对应的有状态负载、卷模板、headless服务等其他对象，完成云原生数据库集群A的部署。当全局负载均衡将流量分发到该服务集群后，集群将会在多个数据库服务副本之间进行负载均衡，完成二次分流。元数据同步装置包括元数据备份控制器以及元数据恢复控制器，当在主数据中心完成数据库服务集群部署后，每个数据库服务实例的元数据会存储到ETCD中，同时触发元数据备份控制器调用查询接口从ETCD中获取元数据，并将元数据库复制到中继对象存储中，完成中继，随后元数据恢复控制器会从中继对象存储中获取数据异步恢复到备数据中心K8s集群的ETCD数据库中，完成元数据同步。然后基于同步的元数据在备数据中心部署云原生数据库服务集群A’。进一步的，业务数据差量复制装置由业务数据复制控制器和业务数据恢复控制器构成，在完成跨地域数据库服务部署后，业务数据复制控制器，会启动数据扫盘动作将业务数据备份到中继对象存储上，业务数据恢复控制器会定期将中继对象存储上的数据备份到备数据中心的数据库服务实例挂载的存储卷中，实现业务数据的差量复制，完成数据同步。这样，实现跨数据中心、跨地域的基于容器的数据库服务，大幅提升服务提供的可靠性和连续性。
参见图3所示，本申请实施例公开了一种云原生数据库服务提供系统，包括：
云原生数据库服务部署装置11，用于基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；
元数据同步装置12，用于在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动将所述元数据同步至备数据中心；相应的所述云原生数据库服务部署装置11，还用于在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；
业务数据差量复制装置13，用于定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
可见，本申请实施例基于K8s平台部署基于容器的云原生数据库服务集群，在主云原生数据库服务集群部署完成，元数据存入ETCD数据库后，自动触发元数据同步装置将元数据同步至备数据中心，以在备数据中心建立从云原生数据库服务集群，数据库服务集群部署完成后，通过业务数据差量复制装置定时将主云原生数据库服务集群的数据差量复制到从云原生数据库服务集群，这样，通过K8s平台部署基于容器的云原生数据库服务集群，便于对服务的监测和管理，并且，在主云原生数据库服务集群部署完成，元数据保存至ETCD数据库后，会自动进行元数据同步，在从云原生数据库服务集群部署完成后，通过业务数据差量复制装置定时的将主数据中心的数据差量备份至从数据中心，提高了服务的自动化程度，能够提供跨数据中心、跨地域的一致性云服务，并保障服务质量。
其中，所述元数据同步装置包括部署于所述主数据中心的元数据备份控制器以及部署于所述备数据中心的元数据恢复控制器；
相应的，元数据备份控制器，用于在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动从所述主数据中心的ETCD数据库中获取所述元数据，并将所述元数据保存至中继存储中；
所述元数据恢复控制器，具体用于从所述中继存储中获取所述元数据，并保存至所述备数据中心的ETCD数据库，以完成元数据同步。
所述系统还包括：
全局负载均衡器，用于检测所述主数据中心的运行状态；当所述主数据中心运行正常，则将业务流量发送至所述主数据中心；当所述主数据中心发生故障，则将所述业务流量发送至所述备数据中心。
进一步的，当所述主数据中心或所述备数据中心接收到所述全局负载均衡器发送的业务流量，则在所述主云原生数据库服务集群或所述从云原生数据库服务集群中对接收到的所述业务流量进行负载均衡，并将任一所述云原生数据库服务写入的数据复制到集群中其他云原生数据库服务。
云原生数据库服务部署装置11，具体用于基于Kubernetes Operator机制定义资源，并基于所述资源在主数据中心部署主云原生数据库服务集群。
进一步的，所述业务数据差量复制装置13包括部署于所述主数据中心的业务数据复制控制器以及部署于所述备数据中心的业务数据恢复控制器；
在具体的实施方式中，所述业务数据复制控制器，用于定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，将所述数据差量备份到中继存储；所述业务数据恢复控制器，用于定时驱动文件系统恢复代理从所述中继存储中将所述数据差量复制到所述从云原生数据库服务集群。
在一种具体的实施方式中，所述系统还包括目标容器确定单元，用于基于预设规则从所述主云原生数据库服务集群中确定出目标容器；所述业务数据复制控制器，用于定时驱动文件系统备份代理访问所述主云原生数据库服务集群中所述目标容器的文件系统。
参见图4所示，本申请实施例公开了一种电子设备，包括处理器21和存储器22；其中，所述存储器22，用于保存计算机程序；所述处理器21，用于执行所述计算机程序，前述实施例公开的云原生数据库服务提供方法。
关于上述云原生数据库服务提供方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
进一步的，本申请实施例还公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述实施例公开的云原生数据库服务提供方法。
关于上述云原生数据库服务提供方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的系统而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的一种云原生数据库服务提供方法、系统、设备及介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种云原生数据库服务提供方法，其特征在于，包括：
基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；
在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心；
在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；
通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
2.根据权利要求1所述的云原生数据库服务提供方法，其特征在于，所述元数据同步装置包括部署于所述主数据中心的元数据备份控制器以及部署于所述备数据中心的元数据恢复控制器；
相应的，所述在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发元数据同步装置将所述元数据同步至备数据中心，包括：
在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动触发所述元数据备份控制器从所述主数据中心的ETCD数据库中获取所述元数据，并将所述元数据保存至中继存储中；
通过所述元数据恢复控制器从所述中继存储中获取所述元数据，并保存至所述备数据中心的ETCD数据库，以完成元数据同步。
3.根据权利要求1所述的云原生数据库服务提供方法，其特征在于，还包括：
通过全局负载均衡器检测所述主数据中心的运行状态；
当所述主数据中心运行正常，则将业务流量发送至所述主数据中心；
当所述主数据中心发生故障，则将所述业务流量发送至所述备数据中心。
4.根据权利要求3所述的云原生数据库服务提供方法，其特征在于，还包括：
当所述主数据中心或所述备数据中心接收到所述全局负载均衡器发送的业务流量，则在所述主云原生数据库服务集群或所述从云原生数据库服务集群中对接收到的所述业务流量进行负载均衡，并将任一所述云原生数据库服务写入的数据复制到集群中其他云原生数据库服务。
5.根据权利要求1所述的云原生数据库服务提供方法，其特征在于，所述基于K8s平台在主数据中心部署主云原生数据库服务集群，包括：
基于Kubernetes Operator机制定义资源，并基于所述资源在主数据中心部署主云原生数据库服务集群。
6.根据权利要求1至5任一项所述的云原生数据库服务提供方法，其特征在于，所述业务数据差量复制装置包括部署于所述主数据中心的业务数据复制控制器以及部署于所述备数据中心的业务数据恢复控制器；
相应的，所述通过业务数据差量复制装置定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群，包括：
通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，将所述数据差量备份到中继存储；
通过所述业务数据恢复控制器定时驱动文件系统恢复代理从所述中继存储中将所述数据差量复制到所述从云原生数据库服务集群。
7.根据权利要求6所述的云原生数据库服务提供方法，其特征在于，所述通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中目标容器的文件系统，包括：
基于预设规则从所述主云原生数据库服务集群中确定出目标容器；
通过所述业务数据复制控制器定时驱动文件系统备份代理访问所述主云原生数据库服务集群中所述目标容器的文件系统。
8.一种云原生数据库服务提供系统，其特征在于，包括：
云原生数据库服务部署装置，用于基于K8s平台在主数据中心部署主云原生数据库服务集群；所述主云原生数据库服务集群中任一云原生数据库服务均封装在容器中；
元数据同步装置，用于在所述主云原生数据库服务集群的元数据存储到所述主数据中心的ETCD数据库后，自动将所述元数据同步至备数据中心；相应的所述云原生数据库服务部署装置，还用于在所述备数据中心基于所述元数据部署与所述主云原生数据库服务集群对应的从云原生数据库服务集群；
业务数据差量复制装置，用于定时将所述主云原生数据库服务集群的数据差量复制到所述从云原生数据库服务集群。
9.一种电子设备，其特征在于，包括处理器和存储器；其中，
所述存储器，用于保存计算机程序；
所述处理器，用于执行所述计算机程序以实现如权利要求1至7任一项所述的云原生数据库服务提供方法。
10.一种计算机可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的云原生数据库服务提供方法。
CN202210096003.4A 2022-01-26 2022-01-26 一种云原生数据库服务提供方法、系统、设备及介质 Active CN114466027B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210096003.4A CN114466027B (zh) 2022-01-26 2022-01-26 一种云原生数据库服务提供方法、系统、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210096003.4A CN114466027B (zh) 2022-01-26 2022-01-26 一种云原生数据库服务提供方法、系统、设备及介质

Publications (2)

Publication Number Publication Date
CN114466027A true CN114466027A (zh) 2022-05-10
CN114466027B CN114466027B (zh) 2023-08-04

Family

ID=81411539

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210096003.4A Active CN114466027B (zh) 2022-01-26 2022-01-26 一种云原生数据库服务提供方法、系统、设备及介质

Country Status (1)

Country Link
CN (1) CN114466027B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115658390A (zh) * 2022-11-14 2023-01-31 济南浪潮数据技术有限公司 容器容灾方法、系统、装置、设备及计算机可读存储介质
CN115878378A (zh) * 2022-11-23 2023-03-31 北京凌云雀科技有限公司 基于云原生的两地三中心数据库容灾系统部署方法及装置
CN116244040A (zh) * 2023-03-10 2023-06-09 安超云软件有限公司 一种主备容器集群系统及其数据同步方法、电子设备
CN116389233A (zh) * 2023-02-28 2023-07-04 港珠澳大桥管理局 容器云管理平台主备切换系统、方法、装置和计算机设备
FR3136291A1 (fr) * 2022-06-03 2023-12-08 Data Perspective système de sauvegarde des métadonnées pour les configurations des hébergeurs d’infrastructure en nuage

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107957920A (zh) * 2017-10-31 2018-04-24 清远恒成智道信息科技有限公司 数据库备份系统
CN108241555A (zh) * 2016-12-26 2018-07-03 阿里巴巴集团控股有限公司 一种分布式数据库的备份、恢复方法、装置和服务器
WO2018166111A1 (zh) * 2017-03-13 2018-09-20 平安科技（深圳）有限公司 基于集中控制器及dci设备的负载均衡的方法、系统、电子装置及计算机可读存储介质
CN109344000A (zh) * 2018-08-16 2019-02-15 北京京东尚科信息技术有限公司 区块链网络服务平台、恢复工具及其故障处理方法、存储介质
CN109976952A (zh) * 2019-04-09 2019-07-05 苏州浪潮智能科技有限公司 云计算系统中跨域备份的方法和装置
CN111651275A (zh) * 2020-06-04 2020-09-11 山东汇贸电子口岸有限公司 一种MySQL集群自动化部署系统及方法
CN112929221A (zh) * 2021-03-02 2021-06-08 浪潮云信息技术股份公司 一种实现云服务产品主备容灾的方法
CN113467993A (zh) * 2021-06-24 2021-10-01 广东浪潮智慧计算技术有限公司 一种云平台资源的还原方法、系统、设备及存储介质
CN113590595A (zh) * 2021-09-30 2021-11-02 苏州浪潮智能科技有限公司 一种数据库多写方法、装置及相关设备
CN113687911A (zh) * 2021-07-30 2021-11-23 广东浪潮智慧计算技术有限公司 一种元数据管理方法、系统、电子设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108241555A (zh) * 2016-12-26 2018-07-03 阿里巴巴集团控股有限公司 一种分布式数据库的备份、恢复方法、装置和服务器
WO2018166111A1 (zh) * 2017-03-13 2018-09-20 平安科技（深圳）有限公司 基于集中控制器及dci设备的负载均衡的方法、系统、电子装置及计算机可读存储介质
CN107957920A (zh) * 2017-10-31 2018-04-24 清远恒成智道信息科技有限公司 数据库备份系统
CN109344000A (zh) * 2018-08-16 2019-02-15 北京京东尚科信息技术有限公司 区块链网络服务平台、恢复工具及其故障处理方法、存储介质
CN109976952A (zh) * 2019-04-09 2019-07-05 苏州浪潮智能科技有限公司 云计算系统中跨域备份的方法和装置
CN111651275A (zh) * 2020-06-04 2020-09-11 山东汇贸电子口岸有限公司 一种MySQL集群自动化部署系统及方法
CN112929221A (zh) * 2021-03-02 2021-06-08 浪潮云信息技术股份公司 一种实现云服务产品主备容灾的方法
CN113467993A (zh) * 2021-06-24 2021-10-01 广东浪潮智慧计算技术有限公司 一种云平台资源的还原方法、系统、设备及存储介质
CN113687911A (zh) * 2021-07-30 2021-11-23 广东浪潮智慧计算技术有限公司 一种元数据管理方法、系统、电子设备及存储介质
CN113590595A (zh) * 2021-09-30 2021-11-02 苏州浪潮智能科技有限公司 一种数据库多写方法、装置及相关设备

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3136291A1 (fr) * 2022-06-03 2023-12-08 Data Perspective système de sauvegarde des métadonnées pour les configurations des hébergeurs d’infrastructure en nuage
CN115658390A (zh) * 2022-11-14 2023-01-31 济南浪潮数据技术有限公司 容器容灾方法、系统、装置、设备及计算机可读存储介质
CN115878378A (zh) * 2022-11-23 2023-03-31 北京凌云雀科技有限公司 基于云原生的两地三中心数据库容灾系统部署方法及装置
CN115878378B (zh) * 2022-11-23 2023-09-05 北京凌云雀科技有限公司 基于云原生的两地三中心数据库容灾系统部署方法及装置
CN116389233A (zh) * 2023-02-28 2023-07-04 港珠澳大桥管理局 容器云管理平台主备切换系统、方法、装置和计算机设备
CN116389233B (zh) * 2023-02-28 2024-05-28 港珠澳大桥管理局 容器云管理平台主备切换系统、方法、装置和计算机设备
CN116244040A (zh) * 2023-03-10 2023-06-09 安超云软件有限公司 一种主备容器集群系统及其数据同步方法、电子设备
CN116244040B (zh) * 2023-03-10 2024-05-03 安超云软件有限公司 一种主备容器集群系统及其数据同步方法、电子设备

Also Published As

Publication number Publication date
CN114466027B (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
CN114466027A (zh) 一种云原生数据库服务提供方法、系统、设备及介质
CN110377395B (zh) 一种Kubernetes集群中的Pod迁移方法
US10642694B2 (en) Monitoring containers in a distributed computing system
WO2019154394A1 (zh) 分布式数据库集群系统、数据同步方法及存储介质
CN105814544B (zh) 用于支持分布式数据网格中的持久化分区恢复的系统和方法
CN109151045B (zh) 一种分布式云系统及监控方法
CN106339278A (zh) 一种网络文件系统的数据备份及恢复方法
WO2020248507A1 (zh) 基于容器云的系统资源监控方法及相关设备
CN110581782B (zh) 一种容灾数据的处理方法、装置及系统
CN103294701B (zh) 一种分布式文件系统以及数据处理的方法
JP2005535044A (ja) マルチコンピュータ・アーキテクチャにおけるソフトウェアの模写による作動の連続性
CN111221678B (zh) Hbase数据备份/恢复系统、方法、装置及电子设备
CN114637475A (zh) 一种分布式存储系统控制方法、装置及可读存储介质
CN112181720A (zh) 一种基于云管理平台的虚拟数据中心备份方法及装置
CN113467993A (zh) 一种云平台资源的还原方法、系统、设备及存储介质
CN108733808B (zh) 大数据软件系统切换方法、系统、终端设备及存储介质
CN110196788B (zh) 一种数据读取方法、装置、系统及存储介质
CN103793296A (zh) 一种在集群中用于辅助备份复制计算机系统的方法
CN115964226A (zh) 一种基于保护组的数据备份设备、方法、装置以及介质
CN111522688A (zh) 分布式系统的数据备份方法及装置
CN114443369A (zh) 异构集群虚拟机备份恢复方法、系统及云平台
CN111400098B (zh) 一种副本管理方法、装置、电子设备及存储介质
CN111898161B (zh) 一种hue的权限管理方法、系统、设备以及介质
CN110764954A (zh) 一种云站点容灾方法、装置、设备及存储介质
CN116610500B (zh) 数据备份方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant