CN113449042A - 数据自动分库方法及装置 - Google Patents
数据自动分库方法及装置 Download PDFInfo
- Publication number
- CN113449042A CN113449042A CN202110797149.7A CN202110797149A CN113449042A CN 113449042 A CN113449042 A CN 113449042A CN 202110797149 A CN202110797149 A CN 202110797149A CN 113449042 A CN113449042 A CN 113449042A
- Authority
- CN
- China
- Prior art keywords
- data
- enterprise
- sub
- stored
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 238000004590 computer program Methods 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 13
- 238000013075 data extraction Methods 0.000 claims description 7
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 238000012544 monitoring process Methods 0.000 claims description 4
- 238000007726 management method Methods 0.000 abstract description 13
- 238000013500 data storage Methods 0.000 abstract description 11
- 238000000638 solvent extraction Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 11
- 238000011161 development Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/26—Visual data mining; Browsing structured data
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据自动分库方法及装置,涉及大数据技术领域,其中该方法包括:接收第一企业的待存储数据,获取第一企业对于数据的存储要求;查询已构建的各个分库中是否已存储第一企业的数据;如果没有,则根据预设的大客户列表判断第一企业是否属于大客户;如果第一企业不属于大客户,则查询各个分库中是否存储有目标企业的数据,所述目标企业为与第一企业存储要求相同的企业;如果有,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。本发明可以提供一种具有针对性的分库方案,满足多集成大量企业客户的管理类系统中不同客户对于数据存储的差异化需求。
Description
技术领域
本发明涉及大数据技术领域,尤其涉及一种数据自动分库方法及装置。
背景技术
本部分旨在为权利要求书中陈述的本发明实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
随着IT互联网技术的兴起,电子化的信息管理系统已经成为企事业单位的常规化需求。随着IT系统的逐步普及,用户对于数据存储的需求也在逐步提高。同时,国内技术已经发展到了一定程度,简单的数据存储和信息管理已经不是难题。然而对于海量数据的存储,人们一直在不断的探索。
单一数据库的数据容量有限,而且大量的数据存储于一个数据库必然会形成读写的瓶颈。目前常用的海量数据技术为数据分表分库技术,将数据进行水平拆分或垂直拆分后分别存储在多个数据库中。MySQL、SQLServer等数据库目前已经支持数据的自动分区,可以轻松实现数据的水平拆分。然而现有的数据多基于某个字段进行数据的分库,例如,银行系统通过省份或交易时间进行分库,分库后,单个数据库的业务关联性降低,增加了数据处理的难度。
总体上来说,现有的数据库分库方案,针对性不强,不能满足多集成大量企业客户的管理类系统中不同客户对数据存储的差异化需求。
发明内容
本发明实施例提供一种数据自动分库方法,用以提供一种具有针对性的分库方案,满足多集成大量企业客户的管理类系统中不同客户对于数据存储的差异化需求,该方法包括:
接收第一企业的待存储数据,获取第一企业对于数据的存储要求;
查询已构建的各个分库中是否已存储第一企业的数据;
如果没有,则根据预设的大客户列表判断第一企业是否属于大客户;
如果第一企业不属于大客户,则查询各个分库中是否存储有目标企业的数据,所述目标企业为与第一企业存储要求相同的企业;
如果有,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
本发明实施例还提供一种数据自动分库装置,用以提供一种具有针对性的分库方案,满足多集成大量企业客户的管理类系统中不同客户对于数据存储的差异化需求,该装置包括:
通信模块,用于接收第一企业的待存储数据,获取第一企业对于数据的存储要求;
查询模块,用于查询已构建的各个分库中是否已存储第一企业的数据;
判断模块,用于当已构建的各个分库中没有存储第一企业的数据时,根据预设的大客户列表判断第一企业是否属于大客户;
查询模块,还用于当第一企业不属于大客户时,查询各个分库中是否存储有目标企业的数据,所述目标企业为与第一企业存储要求相同的企业;
存储模块,用于当有分库存储目标企业的数据时,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述数据自动分库方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述数据自动分库方法的计算机程序。
本发明实施例中,提供一种灵活的可动态扩展的数据分库存储方案,分库从企业客户的维度触发,保证同一企业高关联的数据存储在同一个数据库中,在分库的情况下,实现企业数据的集中存储,既满足集成大量企业客户的管理类系统横向发展,也能满足其下的单个客户的纵向发展,进而解决这类系统的数据存储难题。并且,对于不同存储要求的企业数据分别存储,也满足了不同企业的个性化存储需求,提升了数据库存储的针对性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本发明实施例中一种数据自动分库方法的流程图;
图2为本发明实施例中另一种数据自动分库方法的流程图;
图3为本发明实施例中另一种数据自动分库方法的流程图;
图4为本发明实施例中一种数据自动分库装置的结构示意图;
图5为本发明实施例中一种计算机设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。
本发明实施例提供了一种数据自动分库方法,如图1所示,该方法包括步骤101至步骤105:
步骤101、接收第一企业的待存储数据,获取第一企业对于数据的存储要求。
其中,第一企业对于数据的存储要求可以是预先存储在服务器中的,也可以是随待存储数据一同接收的。
存储要求可以为加密存储,或者以某种特定格式进行存储等。该存储要求由企业根据自身需求设定。
步骤102、查询已构建的各个分库中是否已存储第一企业的数据。
考虑到同一企业的数据往往关联性较大,且存储要求也相同,因此,从企业维度出发,将相同企业的数据存储在同一分库中,以保证高关联的业务数据存储在同一数据库中。
在执行步骤102之后,如图2所示,还可以执行如下步骤201:
步骤201、如果有,则将待存储数据存入已存储第一企业的数据的分库中。
也就是说,如果已构建的各个分库中存在一个或多个分库已存储了第一企业的数据,则直接将第一企业的数据按照存储要求存入该一个或多个分库中。
步骤103、如果没有,则根据预设的大客户列表判断第一企业是否属于大客户。
大客户列表中的企业为需要存储大量数据的企业,其一个企业的数据可能能存满一个数据库或者多个数据库。为了保证大企业的需求,将其单独存储,不与其他企业的数据共享同一个数据库。因此,在执行步骤103根据预设的大客户列表判断第一企业是否属于大客户之后,如图3所示,还可以执行如下步骤301:
步骤301、如果第一企业属于大客户,则新建分库,将待存储数据存入新建分库中。
也就是说,如果第一企业属于大客户,且当前各个分库中均没有存储该第一企业的数据,则为业务新建一个数据库,以满足大客户数据单独存储的需求。
或者,如果当前存在空数据库,也可以不新建分库,而是将待存储数据存入空数据库中。
步骤104、如果第一企业不属于大客户,则查询各个分库中是否存储有目标企业的数据,目标企业为与第一企业存储要求相同的企业。
考虑到相同存储要求的数据存储在相同数据库中较容易管理,在本发明实施例中,优先将数据存入存储目标企业的数据的数据库中。
步骤105、如果有,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
本发明实施例中,如果存在多个目标分库,可以任意从中选择一个数据库存储待存储数据,也可以比较各个分库中已存储的数据量,从中选择已存储的数据量较少的数据库作为最终选择的目标分库,以均匀各个数据库中的数据量。
本发明实施例的一种实现方式中,考虑到大量数据存储在同一数据库,可能导致数据库的读取效率变低,为了保障数据库的读取效率,本发明实施例中,可以为数据库设定分库最大容量,以此来限制数据库中存储的数据量,可以避免因某个数据库的数据大量增长而造成的单库数据存储超出数据库存储容量的危险,同时也能使各个数据中数据存储的较为均匀的效果。基于此,在将待存储数据按照第一企业对于数据的存储要求存储至目标分库中之前,还可以获取目标分库的当前容量,根据预设的分库最大容量与当前容量确定目标分库的剩余容量;判断待存储数据的数据量是否大于目标分库的剩余容量;如果待存储数据的数据量小于等于目标分库的剩余容量,则将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
在另一种实现方式中,如果存在多个目标分库的剩余容量均小于待存储数据的数据量,则可以从中任意选择一个数据库进行存储,也可以选择其中剩余容量最大的数据库进行存储。
在另一种实现方式中,如果待存储数据的数据量大于目标分库的剩余容量,则新建分库,将待存储数据存入新建分库中。也就是说,如果每个目标分库中存入待存储数据后都会超出其最大容量,则新建一个数据库来存储待存储数据,以保证第一企业的数据存储在一个数据库中,并且能够和其他相同存储要求的数据共同存储,达到方便管理的目的。
由于设定了分库最大容量,则可以随时监控各个分库的数据量;如果监控到任一分库的数据量大于预设的分库最大容量,则按照预设规则对该任一分库中存储的数据进行调整,以使分库中的数据量小于等于分库最大容量。
其中,预设规则可以为,将其中一个或多个企业的数据整体迁移至另一数据库中,或者新建分库,将其中一个或多个企业的数据整体迁移至该新建分库中。迁移一个还是多个企业的数据,可以根据企业的数据量,以及超出分库最大容量的数据量确定,如果企业的数据量大,且将该一个企业的数据迁移出之后,即可令当前数据库中的数据量小于分库最大容量,则可以迁移该一个企业;否则可以迁移多个企业的数据,以此来保证每个数据库中的数据量均小于等于分库最大容量。
这样对各个数据库中的数据进行动态调整,可以满足集成类系统企业数据的横向增长以及单个客户的用户数据纵向增长的需求。
但需要注意的是,数据调整的最小粒度为单个企业的所有数据,例如数据库1中存储着的A、D、G三个企业的数据,如果这三个企业的数据增长超过数据库1的分库最大容量,则将其中一个客户的数据全部调整至另外的数据库,以保证单个数据库中业务数据关联性,提高数据提取效率。当个别客户自己的数据大小超出分库最大容量时,将其业务数据存储在独立的两个或多个数据库上。
在另一种实现方式中,还可以利用监控仪表盘,实时显示各个数据库中的数据量,实现可视化展示。
考虑到客户具有不同的存储要求,当接收到终端发送的数据提取请求,根据数据提取请求确定待提取数据,并获取待提取数据的存储要求;基于数据的存储要求,将待提取数据转换为指定格式的数据;向终端发送格式转换后的待提取数据。比如说,如果存储要求为加密,则基于该加密的要求,将待提取数据做解密处理后,向终端发送解密后的数据,以屏蔽不同数据库中数据存储要求的差异,使终端对于数据库的存储状态无感知,既满足企业对于数据存储的个性化需求,又保证终端能够快速、方便的读取数据库中数据。
本发明实施例中,提供一种灵活的可动态扩展的数据分库存储方案,分库从企业客户的维度触发,保证同一企业高关联的数据存储在同一个数据库中,在分库的情况下,实现企业数据的集中存储,既满足集成大量企业客户的管理类系统横向发展,也能满足其下的单个客户的纵向发展,进而解决这类系统的数据存储难题。并且,对于不同存储要求的企业数据分别存储,也满足了不同企业的个性化存储需求,提升了数据库存储的针对性。
本发明实施例中还提供了一种数据自动分库装置,如下面的实施例所述。由于该装置解决问题的原理与数据自动分库方法相似,因此该装置的实施可以参见数据自动分库方法的实施,重复之处不再赘述。
如图4所示,该装置400包括通信模块401、查询模块402、判断模块403和存储模块404。
其中,通信模块401,用于接收第一企业的待存储数据,获取第一企业对于数据的存储要求;
查询模块402,用于查询已构建的各个分库中是否已存储第一企业的数据;
判断模块403,用于当已构建的各个分库中没有存储第一企业的数据时,根据预设的大客户列表判断第一企业是否属于大客户;
查询模块402,还用于当第一企业不属于大客户时,查询各个分库中是否存储有目标企业的数据,目标企业为与第一企业存储要求相同的企业;
存储模块404,用于当有分库存储目标企业的数据时,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
在本发明实施例的一种实现方式中,存储模块,还用于:
当于当已构建的各个分库中有存储第一企业的数据时,将待存储数据存入已存储第一企业的数据的分库中。
在本发明实施例的一种实现方式中,装置还包括:
获取模块,用于获取目标分库的当前容量,根据预设的分库最大容量与当前容量确定目标分库的剩余容量;
判断模块,还用于判断待存储数据的数据量是否大于目标分库的剩余容量;
存储模块,用于:
如果待存储数据的数据量小于等于目标分库的剩余容量,则将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
在本发明实施例的一种实现方式中,存储模块,用于:
当待存储数据的数据量大于目标分库的剩余容量时,新建分库,将待存储数据存入新建分库中。
在本发明实施例的一种实现方式中,存储模块,用于:
当第一企业属于大客户时,新建分库,将待存储数据存入新建分库中。
在本发明实施例的一种实现方式中,装置还包括:
监控模块,用于监控各个分库的数据量;
调整模块,用于当监控到任一分库的数据量大于预设的分库最大容量时,按照预设规则对该任一分库中存储的数据进行调整,以使分库中的数据量小于等于分库最大容量。
在本发明实施例的一种实现方式中,
当通信模块接收到终端发送的数据提取请求,提取模块根据数据提取请求确定待提取数据,并由获取模块获取待提取数据的存储要求;
转换模块,用于基于数据的存储要求,将待提取数据转换为指定格式的数据;
通信模块,还用于向终端发送格式转换后的待提取数据。
本发明实施例中,提供一种灵活的可动态扩展的数据分库存储方案,分库从企业客户的维度触发,保证同一企业高关联的数据存储在同一个数据库中,在分库的情况下,实现企业数据的集中存储,既满足集成大量企业客户的管理类系统横向发展,也能满足其下的单个客户的纵向发展,进而解决这类系统的数据存储难题。并且,对于不同存储要求的企业数据分别存储,也满足了不同企业的个性化存储需求,提升了数据库存储的针对性。
本发明实施例还提供一种计算机设备,图5为本发明实施例中计算机设备的示意图,该计算机设备能够实现上述实施例中的数据自动分库方法中全部步骤,该计算机设备具体包括如下内容:
处理器(processor)501、存储器(memory)502、通信接口(CommunicationsInterface)503和通信总线504;
其中,所述处理器501、存储器502、通信接口503通过所述通信总线504完成相互间的通信;所述通信接口503用于实现相关设备之间的信息传输;
所述处理器501用于调用所述存储器502中的计算机程序,所述处理器执行所述计算机程序时实现上述实施例中的数据自动分库方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述数据自动分库方法的计算机程序。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种数据自动分库方法,其特征在于,所述方法包括:
接收第一企业的待存储数据,获取第一企业对于数据的存储要求;
查询已构建的各个分库中是否已存储第一企业的数据;
如果没有,则根据预设的大客户列表判断第一企业是否属于大客户;
如果第一企业不属于大客户,则查询各个分库中是否存储有目标企业的数据,所述目标企业为与第一企业存储要求相同的企业;
如果有,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
2.根据权利要求1所述的方法,其特征在于,在查询已构建的各个分库中是否已存储第一企业的数据之后,所述方法还包括:
如果有,则将待存储数据存入已存储第一企业的数据的分库中。
3.根据权利要求1所述的方法,其特征在于,在将待存储数据按照第一企业对于数据的存储要求存储至目标分库中之前,所述方法还包括:
获取目标分库的当前容量,根据预设的分库最大容量与当前容量确定目标分库的剩余容量;
判断待存储数据的数据量是否大于目标分库的剩余容量;
将待存储数据按照第一企业对于数据的存储要求存储至目标分库中,包括:
如果待存储数据的数据量小于等于目标分库的剩余容量,则将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
4.根据权利要求3所述的方法,其特征在于,在判断待存储数据的数据量是否大于目标分库的剩余容量之后,所述方法还包括:
如果待存储数据的数据量大于目标分库的剩余容量,则新建分库,将待存储数据存入新建分库中。
5.根据权利要求1所述的方法,其特征在于,在根据预设的大客户列表判断第一企业是否属于大客户之后,所述方法还包括:
如果第一企业属于大客户,则新建分库,将待存储数据存入新建分库中。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
监控各个分库的数据量;
如果监控到任一分库的数据量大于预设的分库最大容量,则按照预设规则对该任一分库中存储的数据进行调整,以使分库中的数据量小于等于分库最大容量。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当接收到终端发送的数据提取请求,根据数据提取请求确定待提取数据,并获取待提取数据的存储要求;
基于数据的存储要求,将待提取数据转换为指定格式的数据;
向终端发送格式转换后的待提取数据。
8.一种数据自动分库装置,其特征在于,所述装置包括:
通信模块,用于接收第一企业的待存储数据,获取第一企业对于数据的存储要求;
查询模块,用于查询已构建的各个分库中是否已存储第一企业的数据;
判断模块,用于当已构建的各个分库中没有存储第一企业的数据时,根据预设的大客户列表判断第一企业是否属于大客户;
查询模块,还用于当第一企业不属于大客户时,查询各个分库中是否存储有目标企业的数据,所述目标企业为与第一企业存储要求相同的企业;
存储模块,用于当有分库存储目标企业的数据时,将存储有目标企业的数据的分库确定为目标分库,将待存储数据按照第一企业对于数据的存储要求存储至目标分库中。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7任一所述方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有执行权利要求1至7任一所述方法的计算机程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110797149.7A CN113449042B (zh) | 2021-07-14 | 2021-07-14 | 数据自动分库方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110797149.7A CN113449042B (zh) | 2021-07-14 | 2021-07-14 | 数据自动分库方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113449042A true CN113449042A (zh) | 2021-09-28 |
CN113449042B CN113449042B (zh) | 2024-06-21 |
Family
ID=77816353
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110797149.7A Active CN113449042B (zh) | 2021-07-14 | 2021-07-14 | 数据自动分库方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113449042B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117709903A (zh) * | 2024-01-03 | 2024-03-15 | 上海普华科技发展股份有限公司 | 一种分库方法、装置、电子设备及存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106547849A (zh) * | 2016-10-18 | 2017-03-29 | 华南师范大学 | 一种满足租户差异化需求的多租户数据库的构建方法 |
CN106897409A (zh) * | 2017-02-16 | 2017-06-27 | 北京致远互联软件股份有限公司 | 数据分库存储方法及装置 |
CN108108384A (zh) * | 2016-11-25 | 2018-06-01 | 中国移动通信有限公司研究院 | 一种数据存储方法及装置 |
CN109558409A (zh) * | 2018-12-06 | 2019-04-02 | 泰康保险集团股份有限公司 | 数据处理方法及装置 |
CN110851427A (zh) * | 2019-11-19 | 2020-02-28 | 泰康保险集团股份有限公司 | 数据库容量变更方法和装置 |
CN111459985A (zh) * | 2020-03-31 | 2020-07-28 | 美的集团股份有限公司 | 标识信息处理方法及装置 |
CN112083885A (zh) * | 2020-09-08 | 2020-12-15 | 北京嘀嘀无限科技发展有限公司 | 一种数据迁移方法、装置、电子设备及存储介质 |
CN112395293A (zh) * | 2020-11-27 | 2021-02-23 | 浙江诺诺网络科技有限公司 | 分库分表方法、分库分表装置、分库分表设备及存储介质 |
CN112416908A (zh) * | 2020-12-04 | 2021-02-26 | 重庆忽米网络科技有限公司 | 基于Handle标识解析前缀分库存储数据的方法及系统 |
CN112835904A (zh) * | 2021-02-04 | 2021-05-25 | 北京电解智科技有限公司 | 一种数据处理方法和数据处理装置 |
-
2021
- 2021-07-14 CN CN202110797149.7A patent/CN113449042B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106547849A (zh) * | 2016-10-18 | 2017-03-29 | 华南师范大学 | 一种满足租户差异化需求的多租户数据库的构建方法 |
CN108108384A (zh) * | 2016-11-25 | 2018-06-01 | 中国移动通信有限公司研究院 | 一种数据存储方法及装置 |
CN106897409A (zh) * | 2017-02-16 | 2017-06-27 | 北京致远互联软件股份有限公司 | 数据分库存储方法及装置 |
CN109558409A (zh) * | 2018-12-06 | 2019-04-02 | 泰康保险集团股份有限公司 | 数据处理方法及装置 |
CN110851427A (zh) * | 2019-11-19 | 2020-02-28 | 泰康保险集团股份有限公司 | 数据库容量变更方法和装置 |
CN111459985A (zh) * | 2020-03-31 | 2020-07-28 | 美的集团股份有限公司 | 标识信息处理方法及装置 |
CN112083885A (zh) * | 2020-09-08 | 2020-12-15 | 北京嘀嘀无限科技发展有限公司 | 一种数据迁移方法、装置、电子设备及存储介质 |
CN112395293A (zh) * | 2020-11-27 | 2021-02-23 | 浙江诺诺网络科技有限公司 | 分库分表方法、分库分表装置、分库分表设备及存储介质 |
CN112416908A (zh) * | 2020-12-04 | 2021-02-26 | 重庆忽米网络科技有限公司 | 基于Handle标识解析前缀分库存储数据的方法及系统 |
CN112835904A (zh) * | 2021-02-04 | 2021-05-25 | 北京电解智科技有限公司 | 一种数据处理方法和数据处理装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117709903A (zh) * | 2024-01-03 | 2024-03-15 | 上海普华科技发展股份有限公司 | 一种分库方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113449042B (zh) | 2024-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110019125B (zh) | 数据库管理的方法和装置 | |
US10572285B2 (en) | Method and apparatus for elastically scaling virtual machine cluster | |
CN108629029B (zh) | 一种应用于数据仓库的数据处理方法和装置 | |
CN105530272B (zh) | 一种应用数据的同步方法和装置 | |
US20190140902A1 (en) | Centralized configuration data in a distributed file system | |
CN109639750B (zh) | 业务数据处理方法及设备 | |
CN108958959B (zh) | 检测hive数据表的方法和装置 | |
CN108196787B (zh) | 集群存储系统的配额管理方法以及集群存储系统 | |
CN104469392A (zh) | 一种视频文件存储方法及装置 | |
CN111338571B (zh) | 任务处理方法、装置、设备及存储介质 | |
EP3803625A1 (en) | Frequent pattern analysis for distributed systems | |
CN110019539A (zh) | 一种数据仓库的数据同步的方法和装置 | |
CN115858488A (zh) | 基于数据治理的平行迁移方法、装置及可读介质 | |
CN113449042A (zh) | 数据自动分库方法及装置 | |
CN110795419A (zh) | 动态分库路由的方法和装置 | |
CN112948383A (zh) | 政务数据共享交换方法和装置 | |
CN110851853B (zh) | 一种数据隔离方法、装置、计算机设备及存储介质 | |
CN116775712A (zh) | 联表查询方法、装置、电子设备、分布式系统和存储介质 | |
CN116016561A (zh) | 数据的同步方法和装置 | |
CN108959309B (zh) | 数据分析的方法和装置 | |
CN115858905A (zh) | 数据处理的方法、装置、电子设备和存储介质 | |
CN115794876A (zh) | 针对业务数据包的分片处理方法、装置、设备及存储介质 | |
CN110019445B (zh) | 数据同步方法和装置、计算设备和存储介质 | |
CN113779048A (zh) | 一种数据处理方法和装置 | |
CN111552715A (zh) | 用户查询方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |