CN117290160A - 数据库读写分离集群的备份方法、存储介质与设备 - Google Patents
数据库读写分离集群的备份方法、存储介质与设备 Download PDFInfo
- Publication number
- CN117290160A CN117290160A CN202311268606.9A CN202311268606A CN117290160A CN 117290160 A CN117290160 A CN 117290160A CN 202311268606 A CN202311268606 A CN 202311268606A CN 117290160 A CN117290160 A CN 117290160A
- Authority
- CN
- China
- Prior art keywords
- standby node
- standby
- node
- read
- backup
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000926 separation method Methods 0.000 title claims abstract description 99
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000005540 biological transmission Effects 0.000 claims description 45
- 238000012163 sequencing technique Methods 0.000 claims description 8
- 230000004083 survival effect Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种数据库读写分离集群的备份方法、存储介质与设备。其中上述方法包括:接收读写分离集群的备份指令;获取读写分离集群的备节点列表;根据备份指令在备节点列表中确定目标备节点;根据目标备节点进行物理备份。通过此方法,能够根据备份指令确定目标备节点进行物理备份,并且通过多种选择策略对备节点进行筛选,从而在不影响读写分离集群正常工作的前提下,选择最优的备节点进行物理备份。节省主节点的资源消耗,同时提高主节点也即读写分离集群对外服务的能力,提高数据库服务效率,提升读写分离集群的存活能力,增加冗余度。
Description
技术领域
本发明涉及数据库领域,特别是涉及一种数据库读写分离集群的备份方法、存储介质与设备。
背景技术
在现有的数据库中,读写分离集群是现代数据库集群中的最常见方案之一,由集群中的一个节点提供写入和读取服务,其余节点提供读取服务。提供读写服务的节点,称为主节点;其余节点称为备节点。在异常或管理员主动发起的情况下,主备角色可以进行切换。
针对读写分离集群的物理备份,通常是连接主节点进行物理备份,在某些使用场景中,主节点承担大量的客户连接,IO资源比较紧张。此时使用主节点进行物理备份将会较低整体数据库系统对外服务的能力。
发明内容
本发明的一个目的是提高数据库对外服务的性能。
本发明的一个进一步的目的是以备节点进行物理备份。
本发明的一个进一步的目的是能够动态选择最优备节点。
特别地,本发明提供了一种数据库读写分离集群的备份方法,包括:
接收读写分离集群的备份指令;
获取读写分离集群的备节点列表;
根据备份指令在备节点列表中确定目标备节点;
根据目标备节点进行物理备份。
可选地,获取读写分离集群的备节点列表的步骤包括:
判断读写分离集群的可用性;
在读写分离集群可用的情况下,记录读写分离集群中所有的备节点,得到备节点列表;
判断备节点列表中每个备节点的可访问性;
将备节点列表中不可访问的备节点删除。
可选地,根据备份指令在备节点列表中确定目标备节点的步骤包括:
根据备份指令获取目标备节点的选择策略;
根据选择策略对备节点列表进行更新;
在更新后的备节点列表中选择最优的备节点作为目标备节点。
可选地,选择策略包括:
指定策略,指定策略为按照预设指定次序修改备节点列表的顺序;和/或
运行状态排序策略,运行状态排序策略为根据备节点自身忙碌状态进行排序;和/或
数据传输状态排序策略,数据传输状态排序策略为根据备节点与主节点数据传输状态进行排序。
可选地,根据选择策略对备节点列表进行更新的步骤包括:
判断指定策略是否启用;
在指定策略启用的情况下,根据预先指定的排序方式对备节点列表中的备节点进行排序;
在备节点列表中存在多个备节点的情况下,删除备节点列表中最差的备节点。
可选地,删除备节点列表中最靠后的备节点的步骤之后还包括:
判断运行状态排序策略是否启用;
若是,则根据备节点自身忙碌状态进行排序;
在备节点列表中存在多个备节点的情况下,删除备节点列表中自身忙碌状态最差的备节点。
可选地,删除备节点列表中自身忙碌状态最差的备节点的步骤之后还包括:
判断数据传输状态排序策略是否启用;
若是,则根据备节点与主节点数据传输状态进行排序;
在备节点列表中存在多个备节点的情况下,删除备节点与主节点数据传输状态最差的备节点。
可选地,根据备节点与主节点数据传输状态进行排序的步骤包括:
根据备节点与主节点之间的同步程度以及差异量大小进行排序;和/或
根据备节点与主节点之间的网络传输带宽以及延迟情况进行排序。
根据本发明的又一个方面,还提供了一种机器可读存储介质,其上存储有机器可执行程序,机器可执行程序被处理器执行时实现上述任一种的数据库读写分离集群的备份方法。
根据本发明的再一个方面,还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并在处理器上运行的机器可执行程序,并且处理器执行机器可执行程序时实现上述任一种的数据库读写分离集群的备份方法。
本发明的方案中,在接收到读写分离集群的备份指令之后,获取读写分离集群的备节点列表;随后根据备份指令在备节点列表中确定目标备节点;接着根据目标备节点进行物理备份。通过此方法,能够根据备份指令确定目标备节点进行物理备份,从而节省主节点的资源消耗,进而提高主节点也即数据库对外服务的能力。
进一步地,本发明的方案中,根据备份指令中获取目标备节点的选择策略,随后根据选择策略对备节点列表进行更新,在更新后的备节点列表中选择最优的备节点作为目标备节点。通过此方法,能够根据指定的选择对目标备节点进行选择,从而实现动态选择最优备节点的目的。
根据下文结合附图对本发明具体实施例的详细描述,本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。
附图说明
后文将参照附图以示例性而非限制性的方式详细描述本发明的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解,这些附图未必是按比例绘制的。附图中:
图1是根据本发明一个实施例的数据库读写分离集群的备份方法的流程示意图;
图2是根据本发明另一个实施例的数据库读写分离集群的备份方法的流程示意图;
图3是根据本发明一个实施例的数据库读写分离集群的备份方法的读写分离集群架构示意图;
图4是根据本发明一个实施例的数据库读写分离集群的备份方法中机器可读存储介质的示意图;以及
图5是根据本发明一个实施例的数据库读写分离集群的备份方法计算机设备的示意图。
具体实施方式
本领域技术人员应当理解的是,下文所描述的实施例仅仅是本发明的一部分实施例,而不是本发明的全部实施例,该一部分实施例旨在用于解释本发明的技术原理,并非用于限制本发明的保护范围。基于本发明提供的实施例,本领域普通技术人员在没有付出创造性劳动的情况下所获得的其它所有实施例,仍应落入到本发明的保护范围之内。
图1是根据本发明一个实施例的数据库读写分离集群的备份方法的流程示意图。在一些可选的实施例中,本实施例的流程一般可以包括:
步骤S101,接收读写分离集群的备份指令。随着互联网的发展,数据的量级也是呈指数级增长,对数据的各种操作也是愈加的困难,传统的关系性数据库已经无法满足快速查询与插入数据的需求。这个时候为了高效地存储数据,出现了读写分离集群的概念,读写分离集群就是通过将数据分散存储在多个服务器中进行统一使用,并且分为主节点和备节点,主节点负责写入操作,备节点负责读取操作,备节点保持与主节点的同步,通过此方式,提高数据库的响应速度以及性能。为了保证数据的安全,需要进行物理备份,即将读写分离集群中的数据进行复制,将复制得到的数据作为备份,保证读写分离集群的可用性。
在本实施例中,备份指令用于控制数据库对读写分离集群进行物理备份的指令。其可以是用户主动发出物理备份的指令也可以是数据库内部通过预先设定的程序定时发出的指令。本领域技术人员可以根据实际情况确定备份指令的生成方式以及具体内容格式。
步骤S102,获取读写分离集群的备节点列表。在本实施例中,读写分离集群的常用方式有一主一从或者一主多从,其中主是指负责写入数据的主节点,从则是指负责读取数据的备节点,不同的备节点可能具有不同的角色定义或不同的硬件配置,备节点列表则是记录了读写分离集群所有备节点信息的一种信息表。本领域技术人员可以根据实际情况确定备节点列表的具体形式。
步骤S103,根据备份指令在备节点列表中确定目标备节点。在本实施例中,备份指令中通常包含有选择目标备节点的选择策略,通过获取备份指令中的选择策略能够最终确定目标备节点。
步骤S104,根据目标备节点进行物理备份。在本实施例中,由于读写分离集群中的主节点通常只有一个,因此通过根据步骤S103得到的目标备节点进行物理备份,从而在保证备份数据完整的前提下,还不需要占用主节点的资源,从而保证主节点的对外服务能力。
通过此方法,能够根据备份指令确定目标备节点进行物理备份,从而节省主节点的资源消耗,进而提高主节点也即读写分离集群对外服务的能力,提高数据库服务效率,提升读写分离集群的存活能力,增加冗余度。
在一些可选的实施例中,获取读写分离集群的备节点列表的步骤一般可以包括:判断读写分离集群的可用性;在读写分离集群可用的情况下,记录读写分离集群中所有的备节点,得到备节点列表;判断备节点列表中每个备节点的可访问性;将备节点列表中不可访问的备节点删除。其中读写分离集群的可用性是指当前数据库对应的读写分离集群是否正常运行,若是,则证明读写分离集群可用。此时,记录读写分离集群中已有的备节点,从而得到备节点列表。并且在得到备节点列表之后,部分备节点可能由于特殊情况导致不可访问,此类备节点无法进行物理备份,因此需要删除备节点列表中不可访问的备节点。
在另一些可选的实施例中,根据备份指令在备节点列表中确定目标备节点的步骤一般可以包括:根据备份指令获取目标备节点的选择策略;根据选择策略对备节点列表进行更新;在更新后的备节点列表中选择最优的备节点作为目标备节点。其中选择策略是指选取最终用来进行物理备份的备节点所用到的策略。随后在更新后的备节点列表中选择最优的备节点作为目标备节点。本领域技术人员可以根据实际情况确定备节点列表中最优的备节点的确定方式。
在本实施例中,选择策略一般可以包括:指定策略,指定策略为按照预设指定次序修改备节点列表的顺序;和/或运行状态排序策略,运行状态排序策略为根据备节点自身忙碌状态进行排序;和/或数据传输状态排序策略,数据传输状态排序策略为根据备节点与主节点数据传输状态进行排序。并且上述策略需要按照顺序进行选择是否启用,例如,可以选择启用指定策略以及数据传输状态排序策略,随后在对备节点列表的更新过程中,便会先通过指定策略进行第一次更新排序,随后再根据数据传输状态排序策略对更新后的备节点列表进行二次更新排序,最终经过多种选择策略更新之后,可以选择备节点列表中第一个备节点作为最优备节点。
根据选择策略对备节点列表进行更新的步骤一般可以包括:判断指定策略是否启用;在指定策略启用的情况下,根据预先指定的排序方式对备节点列表中的备节点进行排序;在备节点列表中存在多个备节点的情况下,删除备节点列表中最差的备节点。在本实施例中,预先指定的排序方式可以由用户自行配置,从而能够按照用户的想法选择得到最优备节点。本领域技术人员可以根据实际情况确定指定策略的具体排序方式。
删除备节点列表中最靠后的备节点的步骤之后一般还可以包括:判断运行状态排序策略是否启用;若是,则根据备节点自身忙碌状态进行排序;在备节点列表中存在多个备节点的情况下,删除备节点列表中自身忙碌状态最差的备节点。在本实施例中,当用户选择启用指定策略之后,还启用了运行状态排序策略,则读写分离集群便会在根据指定策略进行操作最后,继续根据运行状态排序策略对备节点列表进行二次更新。当用户选择不启用指定策略,但是启用了运行状态排序策略,读写分离集群则会在经过判断之后,直接根据运行状态排序策略对备节点列表进行更新。其中运行状态排序策略是指根据备节点自身忙碌状态进行排序,一种可选的示例如:根据备节点自身的IO忙碌程度进行倒序排序,也即判断备节点在需要进行物理备份时,是否正在进行其他IO操作,若是,则为了保证现有功能的正常实施,会尽量避开此类IO忙碌程度较高的备节点,从而选取较为空闲的备节点进行物理备份。保证在物理备份的过程中,不影响读写分离集群的正常功能。并且,当排序完成后,若备节点列表中存在多个备节点,则删除排名最靠后的备节点,也即删除IO忙碌程度最高的备节点,确保此备节点不会被选中进行物理备份。
删除备节点列表中自身忙碌状态最差的备节点的步骤之后一般还可以包括:判断数据传输状态排序策略是否启用;若是,则根据备节点与主节点数据传输状态进行排序;在备节点列表中存在多个备节点的情况下,删除备节点与主节点数据传输状态最差的备节点。在本实施例中,读写分离集群经过判断指定策略以及运行状态排序策略之后,还会继续判断是否启用了数据传输状态排序策略,若是,则经过上述判断指定策略以及运行状态排序策略的操作之后,继续根据数据传输状态排序策略对备节点列表进行再次更新。一种可选的示例如:用户选择不启用指定策略,启用了运行状态排序策略以及数据传输状态排序策略,则读写分离集群会在经过判断之后,先根据运行状态排序策略进行更新操作,随后继续根据数据传输状态排序策略进行操作。另一种可选的示例如:用户选择启用指定策略和数据传输状态排序策略,不启用运行状态排序策略,则读写分离集群会在经过判断之后,先根据指定策略进行更新操作,随后继续根据数据传输状态排序策略进行操作。
也就是说,指定策略、运行状态排序策略以及数据传输状态排序策略三者的顺序为固定顺序,但是用户可以根据实际情况选择启用哪些选择策略对备节点进行更新。当读写分离集群开始根据数据传输状态排序策略进行更新操作时,首先通过备节点与主节点数据传输状态进行排序;随后在备节点列表中存在多个备节点的情况下,删除备节点与主节点数据传输状态最差的备节点。
在一些可选的实施例中,根据备节点与主节点数据传输状态进行排序的步骤一般可以包括:根据备节点与主节点之间的同步程度以及差异量大小进行排序;和/或根据备节点与主节点之间的网络传输带宽以及延迟情况进行排序。其中,读写分离集群首先会根据备节点与主节点之间的同步程度以及差异量大小对备节点列表进行排序,随后在备节点列表中存在多个备节点时,删除备节点列表中最靠后的备节点,也即同步程度低并且差异量大的备节点,从而保证物理备份的数据的准确性。随后,读写分离集群会根据备节点与主节点之间的网络传输带宽以及延迟情况对备节点列表进行排序,随后在备节点列表中存在多个备节点时,删除备节点列表中最靠后的备节点,也即网络传输带宽低并且延迟较大的备节点,从而保证物理备份时的速度。
在经过上述排序操作之后,若备节点列表中仍存在多个备节点,则选择排名第一的备节点作为目标备节点进行物理备份,也即选择各项性能综合排序最优的备节点作为目标备节点进行物理备份。
图2是根据本发明另一个实施例的数据库读写分离集群的备份方法的流程示意图。在一些可选的实施例中,本流程一般可以包括:
步骤S201,接收读写分离集群的备份指令。在本实施例中,备份指令用于控制读写分离集群进行物理备份的指令。其可以是用户主动发出物理备份的指令也可以是读写分离集群内部通过预先设定的程序定时发出的指令。本领域技术人员可以根据实际情况确定备份指令的生成方式以及具体内容格式。
步骤S202,判断读写分离集群是否可用。在本实施例中,当读写分离集群不可用时,表示此读写分离集群出现异常,因此无法通过本方式进行物理备份。所以需要先保证读写分离集群可用。本领域技术人员可以根据实际情况确定读写分离集群可用性的判断方式。
步骤S203,在步骤S202判断为是的情况下,记录读写分离集群中所有的备节点,得到备节点列表。
步骤S204,判断备节点列表中每个备节点是否可访问。在本实施例中,不同的备节点可能具有不同的角色定义或不同的硬件配置,部分备节点可能由于特殊情况导致不可访问,此类备节点无法进行物理备份,因此需要通过逐一判断的方式找出不可访问的备节点。本领域技术人员可以根据实际情况确定备节点是否可以访问的判断方式。
步骤S205,在步骤S204判断为否的情况下,将备节点列表中不可访问的备节点删除。
步骤S206,在步骤S204判断为是或者步骤S205执行完毕的情况下,根据备份指令获取目标备节点的选择策略。在一些可选的实施例中,选择策略一般可以包括:指定策略,指定策略为按照预设指定次序修改备节点列表的顺序;运行状态排序策略,运行状态排序策略为根据备节点自身忙碌状态进行排序;数据传输状态排序策略,数据传输状态排序策略为根据备节点与主节点数据传输状态进行排序,并且根据备节点与主节点数据传输状态进行排序的方式可以分为根据备节点与主节点之间的同步程度以及差异量大小进行排序以及根据备节点与主节点之间的网络传输带宽以及延迟情况进行排序。并且上述策略需要按照设定的顺序进行逐一使用。在本实施例中,上述选择策略一般是默认全部启用,用户在实际使用的过程中可以根据实际情况选择需要启用的选择策略。
步骤S207,根据选择策略对备节点列表进行更新。在本实施例中,为说明每个选择策略的实施方式,本实施例默认步骤S206中的选择策略全部启用,在实际使用过程中,若是某个选择策略不选择启用,则会跳过对应的选择策略继续执行后续的操作。
首先,读写分离集群会判断指定策略是否启用,若是,则会根据预先指定的排序方式对备节点列表中的备节点进行排序;在备节点列表中存在多个备节点的情况下,删除备节点列表中最差的备节点。此时备节点列表中第一个为最优的备节点。
接着,判断运行状态排序策略是否启用;若是,则根据备节点自身忙碌状态进行排序;在备节点列表中存在多个备节点的情况下,删除备节点列表中自身忙碌状态最差的备节点。其中自身忙碌程度的一种可选示例如:IO忙碌程度。根据备节点自身的IO忙碌程度进行倒序排序,即判断备节点在需要进行物理备份时,是否正在进行其他IO操作,若是,则为了保证现有功能的正常实施,会尽量避开此类IO忙碌程度较高的备节点,从而选取较为空闲的备节点进行物理备份。保证在物理备份的过程中,不影响读写分离集群的正常功能。并且,当排序完成后,若备节点列表中存在多个备节点,则删除排名最靠后的备节点,也即删除IO忙碌程度最高的备节点,确保此备节点不会被选中进行物理备份。
然后,判断数据传输状态排序策略是否启用;若是,则根据备节点与主节点数据传输状态进行排序;在备节点列表中存在多个备节点的情况下,删除备节点与主节点数据传输状态最差的备节点。并且本策略中分为两种,读写分离集群首先会根据备节点与主节点之间的同步程度以及差异量大小对备节点列表进行排序,随后在备节点列表中存在多个备节点时,删除备节点列表中最靠后的备节点,也即同步程度低并且差异量大的备节点,从而保证物理备份的数据的准确性。随后,读写分离集群会根据备节点与主节点之间的网络传输带宽以及延迟情况对备节点列表进行排序,随后在备节点列表中存在多个备节点时,删除备节点列表中最靠后的备节点,也即网络传输带宽低并且延迟较大的备节点,从而保证物理备份时的速度。并且上述两种选择策略也可以自行决定是否启用,读写分离集群会按照顺序判断是否启用对应的策略,从而进行更新操作。
步骤S208,在更新后的备节点列表中选择最优的备节点作为目标备节点进行物理备份。在一些可选的实施例中,在经过上述步骤的排序操作之后,若备节点列表中仅存在一个备节点,则会将此备节点作为最优备节点进行物理备份。若备节点列表中仍存在多个备节点,则选择排名第一的备节点作为目标备节点进行物理备份,也即选择各项性能综合排序最优的备节点作为目标备节点进行物理备份。
通过此方法,能够根据备份指令确定目标备节点进行物理备份,并且通过多种选择策略对备节点进行筛选,从而在不影响读写分离集群正常工作的前提下,选择最优的备节点进行物理备份。节省主节点的资源消耗,同时提高主节点也即读写分离集群对外服务的能力,提高数据库服务效率,提升读写分离集群的存活能力,增加冗余度。
图3是根据本发明一个实施例的数据库读写分离集群的备份方法的读写分离集群架构示意图。在一些可选的实施例中,本示意图一般可以包括:
应用程序310,数据库驱动320以及读写分离集群330。
其中,应用程序310是指基于数据库提供服务的客户端程序,用户能够通过应用程序310对数据库中的内容进行操作。
数据库驱动320的一种可选示例如JDBC(java database connectivity)Driver,它的作用是在JAVA程序与数据库系统之间建立一条通信的渠道,从而保证数据库与应用程序之间的连接。
读写分离集群330是数据库在互联网快速发展的过程中,由于数据的量级也是呈指数级增长,对数据的各种操作也是愈加的困难,传统的关系性数据库已经无法满足快速查询与插入数据的需求。这个时候为了高效地存储数据,出现了读写分离集群的概念,读写分离集群就是通过将数据分散存储在多个服务器中进行统一使用,并且分为主节点和备节点,主节点负责写入操作,备节点负责读取操作,备节点保持与主节点的同步,通过读写分离集群330,提高数据库的响应速度以及性能。
在本实施例中,读写分离集群330可以包括:主节点331、备节点332以及备节点333。其中,应用程序310通过数据库驱动320对读写分离集群330进行写入操作时,便会对主节点331进行写入操作;当应用程序310通过数据库驱动320对读写分离集群330进行读取操作时,便会对备节点332或者备节点333进行读取操作;并且在此过程中,备节点332和备节点333会与主节点331进行数据同步,从而保证读取数据的准确性。
在一些可选的实施例中,读写分离集群的常用方式有一主一从或者一主多从,由此可以看出,在读写分离集群330中经常仅有一个主节点331进行写入操作,因此主节点331所承载的压力较大,因此通过本发明的方法,通过读写分离集群330中的备节点332或者备节点333进行物理备份,从而降低主节点331的负担,在多节点的读写分离集群中,合理使用资源,对外提供服务的能力优先,在不影响数据冗余安全的情况下,更大的灵活度,在集群内部合理调配资源,提示数据库的性能。
本实施还提供了一种机器可读存储介质和计算机设备。图4是根据本发明一个实施例的机器可读存储介质401的示意图,图5是根据本发明一个实施例的计算机设备503的示意图。
机器可读存储介质401其上存储有机器可执行程序402,机器可执行程序402被处理器执行时实现上述任一实施例的数据库读写分离集群的备份方法。
计算机设备503可以包括存储器501、处理器502及存储在存储器501上并在处理器502上运行的机器可执行程序402,并且处理器502执行机器可执行程序402时实现上述任一实施例的数据库读写分离集群的备份方法。
需要说明的是,在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,根据选择策略进行排序,可以具体实现在任何机器可读存储介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。
就本实施例的描述而言,机器可读存储介质401可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。
计算机设备503可以是例如车载计算机等类型的车机设备。计算机设备503可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常,程序模块可以包括执行特定的任务或者实现特定的抽象数据类型的例程、程序、目标程序、组件、逻辑、数据结构等。计算机设备503可以在通过通信网络链接的远程处理设备执行任务的分布式云计算环境中实施。在分布式云计算环境中,程序模块可以位于包括存储设备的本地或远程计算系统存储介质上,例如汽车中央处理器。
计算机设备503可以包括适于执行存储的指令的处理器502、在操作期间为所述指令的操作提供临时存储空间的存储器501。处理器502可以是单核处理器、多核处理器、计算集群或任何数量的其他配置。存储器501可以包括随机存取存储器(RAM)、只读存储器、闪存或任何其他合适的存储系统。
处理器502可以通过系统互连(例如PCI、PCI-Express等)连接到适于将计算机设备503连接到一个或多个I/O设备(输入/输出设备)的I/O接口(输入/输出接口)。I/O设备可以包括例如键盘和指示设备,其中指示设备可以包括触摸板或触摸屏等等。I/O设备可以是计算机设备503的内置组件,或者可以是外部连接到计算设备的设备。
处理器502也可以通过系统互连链接到适于将计算机设备503连接到显示设备的显示接口。显示设备可以包括作为计算机设备503的内置组件的显示屏。显示设备还可以包括外部连接到计算机设备503的计算机监视器、电视机或投影仪等。此外,网络接口控制器(network interface controller,NIC)可以适于通过系统互连将计算机设备503连接到网络。在一些实施例中,NIC可以使用任何合适的接口或协议(诸如因特网小型计算机系统接口等)来传输数据。网络可以是蜂窝网络、无线电网络、广域网(WAN))、局域网(LAN)或因特网等等。远程设备可以通过网络连接到计算设备。
本实施例提供的流程图并不旨在指示方法的操作将以任何特定的顺序执行,或者方法的所有操作都包括在所有的每种情况下。此外,方法可以包括附加操作。在本实施例方法提供的技术思路的范围内,可以对上述方法进行附加的变化。
至此,本领域技术人员应认识到,虽然本文已详尽示出和描述了本发明的多个示例性实施例,但是,在不脱离本发明精神和范围的情况下,仍可根据本发明公开的内容直接确定或推导出符合本发明原理的许多其他变型或修改。因此,本发明的范围应被理解和认定为覆盖了所有这些其他变型或修改。
Claims (10)
1.一种数据库读写分离集群的备份方法,包括:
接收所述读写分离集群的备份指令;
获取所述读写分离集群的备节点列表;
根据所述备份指令在所述备节点列表中确定目标备节点;
根据所述目标备节点进行物理备份。
2.根据权利要求1所述的数据库读写分离集群的备份方法,其中,
所述获取所述读写分离集群的备节点列表的步骤包括:
判断所述读写分离集群的可用性;
在所述读写分离集群可用的情况下,记录所述读写分离集群中所有的备节点,得到所述备节点列表;
判断所述备节点列表中每个所述备节点的可访问性;
将所述备节点列表中不可访问的备节点删除。
3.根据权利要求1所述的数据库读写分离集群的备份方法,其中,
所述根据所述备份指令在所述备节点列表中确定目标备节点的步骤包括:
根据所述备份指令获取所述目标备节点的选择策略;
根据所述选择策略对所述备节点列表进行更新;
在更新后的所述备节点列表中选择最优的备节点作为所述目标备节点。
4.根据权利要求3所述的数据库读写分离集群的备份方法,其中,
所述选择策略包括:
指定策略,所述指定策略为按照预设指定次序修改所述备节点列表的顺序;和/或
运行状态排序策略,所述运行状态排序策略为根据所述备节点自身忙碌状态进行排序;和/或
数据传输状态排序策略,所述数据传输状态排序策略为根据所述备节点与主节点数据传输状态进行排序。
5.根据权利要求4所述的数据库读写分离集群的备份方法,其中,
所述根据所述选择策略对所述备节点列表进行更新的步骤包括:
判断所述指定策略是否启用;
在所述指定策略启用的情况下,根据预先指定的排序方式对所述备节点列表中的备节点进行排序;
在所述备节点列表中存在多个所述备节点的情况下,删除所述备节点列表中最差的所述备节点。
6.根据权利要求5所述的数据库读写分离集群的备份方法,其中,
所述删除所述备节点列表中最靠后的所述备节点的步骤之后还包括:
判断所述运行状态排序策略是否启用;
若是,则根据所述备节点自身忙碌状态进行排序;
在所述备节点列表中存在多个所述备节点的情况下,删除所述备节点列表中自身忙碌状态最差的备节点。
7.根据权利要求6所述的数据库读写分离集群的备份方法,其中,
所述删除所述备节点列表中自身忙碌状态最差的备节点的步骤之后还包括:
判断数据传输状态排序策略是否启用;
若是,则根据所述备节点与所述主节点数据传输状态进行排序;
在所述备节点列表中存在多个所述备节点的情况下,删除所述备节点与所述主节点数据传输状态最差的备节点。
8.根据权利要求7所述的数据库读写分离集群的备份方法,其中,
所述根据所述备节点与所述主节点数据传输状态进行排序的步骤包括:
根据所述备节点与所述主节点之间的同步程度以及差异量大小进行排序;和/或
根据所述备节点与所述主节点之间的网络传输带宽以及延迟情况进行排序。
9.一种机器可读存储介质,其上存储有机器可执行程序,所述机器可执行程序被处理器执行时实现根据权利要求1至8任一项所述的数据库读写分离集群的备份方法。
10.一种计算机设备,包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的机器可执行程序,并且所述处理器执行所述机器可执行程序时实现根据权利要求1至8任一项所述的数据库读写分离集群的备份方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311268606.9A CN117290160A (zh) | 2023-09-27 | 2023-09-27 | 数据库读写分离集群的备份方法、存储介质与设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311268606.9A CN117290160A (zh) | 2023-09-27 | 2023-09-27 | 数据库读写分离集群的备份方法、存储介质与设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117290160A true CN117290160A (zh) | 2023-12-26 |
Family
ID=89238598
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311268606.9A Pending CN117290160A (zh) | 2023-09-27 | 2023-09-27 | 数据库读写分离集群的备份方法、存储介质与设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117290160A (zh) |
-
2023
- 2023-09-27 CN CN202311268606.9A patent/CN117290160A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20190220266A1 (en) | Upgrading Bundled Applications In A Distributed Computing System | |
US5687372A (en) | Customer information control system and method in a loosely coupled parallel processing environment | |
CN108900626B (zh) | 一种云环境下数据存储方法、装置及系统 | |
JPH0950418A (ja) | 疎結合並列処理環境において一時的記憶待ち行列機能を有する顧客情報制御システム及び方法 | |
US7543121B2 (en) | Computer system allowing any computer to copy any storage area within a storage system | |
US5790868A (en) | Customer information control system and method with transaction serialization control functions in a loosely coupled parallel processing environment | |
US10642817B2 (en) | Index table update method, and device | |
JPH0944461A (ja) | 疎結合並列処理環境においてapiスタート及びキャンセルトランザクション機能を有する顧客情報制御システム及び方法 | |
CN113467719A (zh) | 数据写入方法及装置 | |
CN115964176B (zh) | 云计算集群调度方法、电子设备和存储介质 | |
CN111431951B (zh) | 一种数据处理方法、节点设备、系统及存储介质 | |
CN114816272B (zh) | Kubernetes环境下的磁盘管理系统 | |
CN117290160A (zh) | 数据库读写分离集群的备份方法、存储介质与设备 | |
CN112527561B (zh) | 基于物联网云存储的数据备份方法及装置 | |
CN112685130A (zh) | 分布式存储环境下的虚拟机备份方法、装置和存储介质 | |
CN113687935A (zh) | 一种基于超融合设计的云原生存储调度方式 | |
CN109639704B (zh) | 一种主从式服务器系统应用方法、系统、服务器及存储介质 | |
JPH11232233A (ja) | ネットワークコンピュータ管理方法及びネットワークコンピュータシステム | |
CN111427851A (zh) | 一种hdfs跨外部存储系统多层级存储效率优化的方法和设备 | |
CN111711531B (zh) | 集群数据管理方法、存储介质 | |
CN111274320B (zh) | 分布式存储系统的控制方法、装置及分布式存储系统 | |
CN117215499B (zh) | 精简卷的数据访问方法、装置、产品及多控存储系统 | |
CN117407042B (zh) | 一种国土空间基础信息平台的扩展设计方法和系统 | |
US10862958B1 (en) | Flexible associativity in multitenant clustered environments | |
CN109542588B (zh) | 一种用于在云环境下管理虚拟设备的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |