CN115408396B - 业务数据的存储方法、装置、计算机设备和存储介质 - Google Patents
业务数据的存储方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN115408396B CN115408396B CN202211069850.8A CN202211069850A CN115408396B CN 115408396 B CN115408396 B CN 115408396B CN 202211069850 A CN202211069850 A CN 202211069850A CN 115408396 B CN115408396 B CN 115408396B
- Authority
- CN
- China
- Prior art keywords
- service data
- user
- weight
- data table
- target user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000003860 storage Methods 0.000 title claims abstract description 40
- 238000013507 mapping Methods 0.000 claims abstract description 88
- 238000004590 computer program Methods 0.000 claims description 22
- 238000009826 distribution Methods 0.000 claims description 14
- 238000012216 screening Methods 0.000 claims description 10
- 230000007246 mechanism Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 16
- 238000013500 data storage Methods 0.000 description 7
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000003203 everyday effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 239000006227 byproduct Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000002994 raw material Substances 0.000 description 1
- 239000011265 semifinished product Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请涉及一种业务数据的存储方法、装置、计算机设备和存储介质。所述方法包括:当出现新增用户时,确定第一集合中待选业务数据表对应的权重;依据所述权重确定所述待选业务数据表的选取概率;基于所述选取概率从所述待选业务数据表中选取出目标用户表;确定所述新增用户的用户标识,并建立所述用户标识与所述目标用户表的映射关系;当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表。采用本方法能够提升业务数据的存储效率。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种业务数据的存储方法、装置、计算机设备和存储介质。
背景技术
随着业务的发展,产生了越来越多的业务数据,为了支撑业务的发展,如何有效的存储业务数据,显得尤为重要。
传统的业务数据存储方式主要是按存储的时间对依次对业务数据进行存储,可能存在某一段时间内几乎所有的业务都发生在同一张表上,从而导致业务数据的存储效率低下。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提升业务数据的存储效率的业务数据的存储方法、装置、计算机设备和计算机可读存储介质。
第一方面,本申请提供了一种业务数据的存储方法。所述方法包括:
当出现新增用户时,确定第一集合中待选业务数据表对应的权重;
依据所述权重确定所述待选业务数据表的选取概率;
基于所述选取概率从所述待选业务数据表中选取出目标用户表;
确定所述新增用户的用户标识,并建立所述用户标识与所述目标用户表的映射关系;
当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表。
在其中一个实施例中,所述确定第一集合中待选业务数据表对应的权重之前,所述方法还包括:
依据预设定时统计系统内业务数据表的数据量;
基于所述数据量对所述业务数据表进行筛选,得到待选业务数据表;
当所述待选业务数据表的数量大于预设值时,对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重;
基于所述待选业务数据表的表名、对应的数据量以及所述权重生成第一集合。
在其中一个实施例中,所述方法还包括:
当所述待选业务数据表的数量等于预设值时,创建新的业务数据表;
将所述新的业务数据表作为所述目标用户表。
在其中一个实施例中,所述对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重包括:
将所述待选业务数据表对应的数据量作为权重数据量;
依据所述权重数据量对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重。
在其中一个实施例中,所述建立所述用户标识与所述目标用户表的映射关系之后,所述方法还包括:
将所述映射关系存储于映射表;
所述当所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表包括:
当所述新增用户产生的业务数据时,从所述映射表中获取所述映射关系;
基于所述映射关系将所述业务数据存储于所述目标用户表。
在其中一个实施例中,所述方法还包括:
当需查询所述新增用户存储的业务数据时,从所述映射表中获取所述映射关系;
依据所述映射关系查询所述目标用户表;
从所述目标用户表中获取所述新增用户存储的业务数据。
第二方面,本申请还提供了一种业务数据的存储装置。所述装置包括:
第一确定模块,用于当出现新增用户时,确定第一集合中待选业务数据表对应的权重;
第二确定模块,用于依据所述权重确定所述待选业务数据表的选取概率;
选取模块,用于基于所述选取概率从所述待选业务数据表中选取出目标用户表;
确定与建立模块,用于确定所述新增用户的用户标识,并建立所述用户标识与所述目标用户表的映射关系;
存储模块,用于当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表。
在其中一个实施例中,所述装置还包括:
生成模块,用于依据预设定时统计系统内业务数据表的数据量;基于所述数据量对所述业务数据表进行筛选,得到待选业务数据表;当所述待选业务数据表的数量大于预设值时,对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重;基于所述待选业务数据表的表名、对应的数据量以及所述权重生成第一集合。
在其中一个实施例中,所述生成模块还用于当所述待选业务数据表的数量等于预设值时,创建新的业务数据表;将所述新的业务数据表作为所述目标用户表。
在其中一个实施例中,所述生成模块还用于将所述待选业务数据表对应的数据量作为权重数据量;依据所述权重数据量对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重。
在其中一个实施例中,所述确定与建立模块还用于将所述映射关系存储于映射表;所述存储模块还用于当所述新增用户产生的业务数据时,从所述映射表中获取所述映射关系;基于所述映射关系将所述业务数据存储于所述目标用户表。
在其中一个实施例中,所述装置还包括:
查询模块,用于当需查询所述新增用户存储的业务数据时,从所述映射表中获取所述映射关系;依据所述映射关系查询所述目标用户表;从所述目标用户表中获取所述新增用户存储的业务数据。
第三方面,本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法的步骤。
第四方面,本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述方法的步骤。
第五方面,本申请还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述方法的步骤。
上述业务数据的存储方法、装置、计算机设备和存储介质,当出现新增用户时,通过确定第一集合中待选业务数据表对应的权重;依据权重确定待选业务数据表的选取概率;基于选取概率从待选业务数据表中选取出目标用户表;确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系;通过确定业务数据表对应的权重,并按选取概率从待选业务数据表选取出新增用户的目标用户表,依据业务数据表的数据量智能的选取目标用户表,解决了业务数据存储的数据分布不均匀的问题,不仅如此,当需存储新增用户产生的业务数据时,基于映射关系将业务数据存储于目标用户表。依据映射关系实现了用户的业务数据与目标用户表明确的对应关系,避免了同一时间所有用户的业务数据都存储于同一张业务数据表上,有效的提升了业务数据的存储效率。
附图说明
图1为一个实施例中业务数据的存储方法的应用环境图;
图2为一个实施例中业务数据的存储方法的流程示意图;
图3为一个实施例中业务数据的存储方法的原理图;
图4为一个实施例中映射表与业务数据表的示意图;
图5为一个实施例中生成第一集合步骤的流程示意图;
图6为一个实施例中集合的示意图;
图7为另一个实施例中集合权重的示意图;
图8为一个实施例中业务数据表的选取概率示意图;
图9为一个实施例中业务数据的存储装置的结构框图;
图10为另一个实施例中业务数据的存储装置的结构框图;
图11为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的业务数据的存储方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他网络服务器上。本申请可由终端102或服务器104执行,本实施例以服务器104执行为例进行说明。
当出现新增用户时,服务器104确定第一集合中待选业务数据表对应的权重;服务器104依据权重确定待选业务数据表的选取概率;服务器104基于选取概率从待选业务数据表中选取出目标用户表;服务器104确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系;当需存储新增用户产生的业务数据时,服务器104基于映射关系将业务数据存储于目标用户表。
其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备,物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种业务数据的存储方法,以该方法应用于图1中的服务器104为例进行说明,包括以下步骤:
S202,当出现新增用户时,确定第一集合中待选业务数据表对应的权重。
其中,新增用户可以指新增的有存储业务数据需求的用户。业务数据可以指业务相关的数据,业务数据可以包括用工形式、员工人数、员工结构、工资结构、社保缴纳、薪酬发放时间与频率、资金来源、资金结构、资金投向、资金筹集计划、债务清单、相关台账记录、借款合同、核心专利、非专利技术、特许权、厂房、生产线、设备、相关生产记录、资产构建、劳动合同与工资表等原始凭证、采购模式、主要供应商、采购的主要原材料、主要能源信息、采购结算过程、采购业务台账记录、供应商评价资料、采购合同、验收入库单等原始凭证、主要产品、半成品、副产品、边角料、研发模式,生产模式,产能产量,生产周期,生产的业务台账记录、客户结构、销售模式、销售台账、发货记录、验收记录和回款记录等等。
第一集合可以包括业务数据表的表名、业务数据表的数据量以及业务数据表的权重的集合,且在第一集合中表名、数据量和权重呈对应关系。
待选业务数据表可以指第一集合中的表名对应业务数据表。业务数据表可以指存储业务数据的表单。权重可以指依据数据量确定的权重,权重可用于确定待选业务数据表的选取概率。选取概率可以指待选业务数据表被选取作为新增用户的目标用户表的概率。目标用户表可以指用于存储新增用户的业务数据表。
图3为一个实施例中业务数据的存储方法的原理图;如图3所示,在系统内部包括定时任务1:每月为下月自动创建N个业务数据表;定时任务2每天统计系统内各业务数据表的数据量,通过定时任务1,则系统内每个月至少会新增N个空的业务数据表,以便后续的新增用户使用。通过定时任务2,每天统计系统内业务数据表的数据量,从而实现后续依据数据量对业务数据表进行选取。在映射表中,user_id是指新增用户的主键id,user_id是用户标识的一种,用户标识可以指新增用户的标识,可用于指代新增用户;table_name是指业务数据表的表名,表名可以指业务数据表的名称,例如,表名可为“table_name_202201_1”、“table_name_202201_2”和“table_name_202206_3”等等。
图4为一个实施例中映射表与业务数据表的示意图;如图4可知,映射表中可存储多个业务数据表与新增用户的映射关系。映射关系可以指业务数据表与新增用户的对应绑定关系。需指出的是,一个新增用户通常是与一个业务数据表进行绑定,即新增用户的映射关系确定后,一个新增用户的所有业务数据都存储在一个业务数据表上,而一个业务数据表可与多个新增用户进行映射关系绑定,即一个业务数据表可存储多个新增用户的业务数据。
具体地,当出现新增用户时,终端可响应于新增用户在登录页面的注册操作,向服务器发送新增用户的业务数据的存储请求,服务器接收该请求后,查询第一集合中待选业务数据表对应的权重。其中,第一集合中的待选业务数据表的数量可为一个或多个。
在一个实施例中,查询第一集合中待选业务数据表对应的权重包括查询第一集合中待选业务数据表对应的表名,在第一集合中确定表名对应的权重,该权重则为待选业务数据表对应的权重。
例如,新增用户为“xx公司”在登录页面,点击注册,在注册信息填写页面,输入相关用户信息,例如,姓名:张三;电话号码:123xxxxxxxx;企业名称“xx公司”等等,完成注册后,服务器接收“xx公司”的业务数据的存储请求,查询第一集合,第一集合中含有“table_name_202201_1”、“table_name_202201_2”和“table_name_202206_3”三个待选业务数据表的表名,分别对应的权重为“3”、“2”和“1”。则依次确定各待选数据表的权重为“3”、“2”和“1”。
S204,依据权重确定待选业务数据表的选取概率。
具体地,服务器可以先确定各权重之间的和值,再确定各权重与该和值各自的占比值,依据该占比值确定各待选业务数据表的选取概率。
例如,假设有1至i个权重,权重i的和值计算公式可为:和值=权重1+权重2…+权重n;权重i的占比值的计算公式可为:
例如,第一集合中含有权重1为“4”,权重2为“3”和权重3为“6”,则和值为4+3+6=13;权重1的占比值为4/13;权重2的占比值为3/13;权重3的占比值为6/13。
在一个实施例中,当第一集合中的待选业务数据表的表名只有一个时,则将该表名对应的业务数据表作为新增用户的目标用户表。
S206,基于选取概率从待选业务数据表中选取出目标用户表。
具体的,服务器可以依据选取概率从待选业务数据表中随机选取出目标用户表。其中,当待选业务数据表的选取概率越大,则该待选业务数据表被随机选中的概率越大;当待选业务数据表的选取概率越小,则该待选业务数据表被随机选中的概率越小。
在一个实施例中,服务器可以响应对待选业务数据表的选取指令,依据选取概率,按预设选取机制对待选业务数据表进行选取,得到目标用户表。
其中,预设选取机制可以指预先设置的对待选业务数据表的选取机制,例如,预设选取机制可以是取各选取概率中最大的选取概率,对应的待选业务数据表作为目标用户表。
S208,确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系。
具体地,服务器可以获取新增用户的注册信息,依据新增用户的注册信息,生成相应的用户标识,并将该用户标识与目标用户表建立对应关系,即映射关系。
其中,注册信息可以指新增用户在终端的可用于进行业务数据存储的页面,注册时填写的新增用户自身相关的信息。注册信息包括姓名、电话号码、企业名称、企业类型和邮箱等信息。
在一个实施例中,依据新增用户的注册信息,生成相应的用户标识包括服务器可以依据企业类型,查询服务器内同类型的企业对应的当前最大用户标识,对当前最大用户标识进行自增,得到新增用户的用户标识。
在一个实施例中,确定新增用户的用户标识还包括服务器可以随机生成用户标识,且该用户标识与服务器内其他用户的标识不同。
在一个实施例中,在S208之后,服务器将映射关系存储于映射表;当新增用户产生的业务数据时,从映射表中获取映射关系;基于映射关系将业务数据存储于目标用户表。
S210,当需存储新增用户产生的业务数据时,基于映射关系将业务数据存储于目标用户表。
在一个实施例中,当需存储新增用户产生的业务数据时,新增用户可以在终端的业务数据的存储页面,点击用于存储的控件,终端响应于存储控件的触发操作,向服务器发送业务数据的存储请求,服务器接收该请求后,依据该新增用户的用户标识查询映射表中对应的映射关系,将映射关系中对应的业务数据表作为目标用户表,并将新增用户上传的业务数据存储于目标用户表。
在一个实施例中,当需查询新增用户存储的业务数据时,服务器从映射表中获取映射关系;依据映射关系查询目标用户表;从目标用户表中获取新增用户存储的业务数据。
在一个实施例中,当需查询新增用户存储的业务数据时,新增用户可以在终端的业务数据的查询页面,点击用于查询的控件,终端响应于查询控件的触发操作,向服务器发送业务数据的查询请求,服务器接收该请求后,依据该新增用户的用户标识查询映射表中对应的映射关系,该映射关系对应的业务数据表为目标用户表,读取目标用户表中与用户标识对应的业务数据,并将该业务数据发送给终端,以使终端显示该业务数据。
上述业务数据的存储方法中,当出现新增用户时,通过确定第一集合中待选业务数据表对应的权重;依据权重确定待选业务数据表的选取概率;基于选取概率从待选业务数据表中选取出目标用户表;确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系;通过确定业务数据表对应的权重,并按选取概率从待选业务数据表选取出新增用户的目标用户表,依据业务数据表的数据量智能的选取目标用户表,解决了业务数据存储的数据分布不均匀的问题,不仅如此,当需存储新增用户产生的业务数据时,基于映射关系将业务数据存储于目标用户表。依据映射关系实现了用户的业务数据与目标用户表明确的对应关系,避免了同一时间所有用户的业务数据都存储于同一张业务数据表上,有效的提升了业务数据的存储效率。
在一个实施例中,如图5所示,生成第一集合步骤包括:
S502,依据预设定时统计系统内业务数据表的数据量。
其中,预设定时可以指预先设置的时间,例如,预设定时可为每天8:00或预设定时可为间隔12小时。系统可用于存储业务数据。数据量可以指业务数据表中数据的条数,例如,数据量可为1000万条。
具体地,服务器可以确定预设定时,依据预设定时查询系统内所有业务数据表,并依次确定所有业务数据表的数据量。
S504,基于数据量对业务数据表进行筛选,得到待选业务数据表。
具体地,服务器依据数据量设置筛选策略,依据筛选策略对业务数据表进行筛选,得到待选业务数据表。
其中,筛选策略可用于对业务数据表进行筛选,筛选策略可以为筛选出数据量小于预设数据量的业务数据表。预设数据量可以指预先设置的数据的条数,例如,预设数据量可为500万条。
S506,当待选业务数据表的数量大于预设值时,对待选业务数据表进行权重分配,得到待选业务数据表的权重。
其中,预设值可以指预先设置的用于衡量待选业务数据表的数量的值,例如,预设值可为0。
具体地,服务可以先统计待选业务数据表的数量,再判断该数量是否大于预设值,当待选业务数据表的数量大于预设值时,对待选业务数据表进行权重分配,得到待选业务数据表的权重。
在一个实施例中,将待选业务数据表对应的数据量作为权重数据量;依据权重数据量对待选业务数据表进行权重分配,得到待选业务数据表的权重。
其中,权重数据量可以指用于权重分配的数据量,当权重数据量越大时,对应的待选业务数据表的权重越大,当权重数据量越小时,对应的待选业务数据表的权重越小。
在一个实施例中,当待选业务数据表的数量等于预设值时,服务器创建新的业务数据表;将新的业务数据表作为目标用户表。
S508,基于待选业务数据表的表名、对应的数据量以及权重生成第一集合。
具体地,服务器确定各待选业务数据表的表名、数据量以及权重的对应关系,再将所有待选业务数据表的表名,数据量和权重组合成第一集合。
本实施例中,通过依据预设定时统计系统内业务数据表的数据量,基于数据量对业务数据表进行筛选,得到待选业务数据表,当待选业务数据表的数量大于预设值时,对待选业务数据表进行权重分配,得到待选业务数据表的权重,基于待选业务数据表的表名、对应的数据量以及权重生成第一集合,生成了用于对新增用户分配目标用户表的第一集合,为后续选取出存储新增用户的业务数据的表做铺垫。
作为一个示例,如图3所示,本实施例如下,
(1)系统创建一个映射表用来维护用户主键user_id与业务数据表的表名的映射关系。
(2)创建业务数据表:系统每月定时创建N个业务数据表用于存储业务数据,由定时任务1执行,表名例如:table_name_202206_1table_name_202206_2等等。
(3)系统每天会定时统计业务数据表的数据量,由定时任务2执行,根据计算得到一个数据量小于X的表的业务数据表名集合A,图6为一个实施例中集合的示意图;集合A如图6所示。
(4)自动创建业务数据表:如果集合A为空,自动创建一张业务数据表,则当月业务数据表的数量为N+1。
(5)通过对集合A中所有的表的数据量进行计算,通过算法a为每个表分配一个权重,表的数据量越大,分配的权重越少,反之则分配的权重越多,得到一个权重分配结果集合B,将集合B缓存至Redis数据库中,其中,图7为另一个实施例中集合权重的示意图;如图7所示,算法a具体的逻辑是:表数据量越大,分配的权重越少,反之分配的权重则越多。
(6)随机路由分配业务数据表:新增用户时,先从缓存中读取权重分配结果集合B,通过算法b随机获取集合B中的一个表B1,将用户与该表的映射关系绑定及存储至映射表。其中,图8为一个实施例中业务数据表的选取概率示意图;如图8所示,通过算法b的计算,分配的权重越多的表被选取到的概率越大。
应该理解的是,虽然如上的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的业务数据的存储方法的业务数据的存储装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个业务数据的存储装置实施例中的具体限定可以参见上文中对于业务数据的存储方法的限定,在此不再赘述。
在一个实施例中,如图9所示,提供了一种业务数据的存储装置,包括:第一确定模块902、第二确定模块904、选取模块906、确定与建立模块908和存储模块910,其中:
第一确定模块902,用于当出现新增用户时,确定第一集合中待选业务数据表对应的权重;
第二确定模块904,用于依据权重确定待选业务数据表的选取概率;
选取模块906,用于基于选取概率从待选业务数据表中选取出目标用户表;
确定与建立模块908,用于确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系;
存储模块910,用于当需存储新增用户产生的业务数据时,基于映射关系将业务数据存储于目标用户表。
在一个实施例中,确定与建立模块908还用于将映射关系存储于映射表;存储模块还用于当新增用户产生的业务数据时,从映射表中获取映射关系;基于映射关系将业务数据存储于目标用户表。
在一个实施例中,如图10所示,该业务数据的存储装置,还包括:
生成模块912,用于依据预设定时统计系统内业务数据表的数据量;基于数据量对业务数据表进行筛选,得到待选业务数据表;当待选业务数据表的数量大于预设值时,对待选业务数据表进行权重分配,得到待选业务数据表的权重;基于待选业务数据表的表名、对应的数据量以及权重生成第一集合。
查询模块914,用于当需查询新增用户存储的业务数据时,从映射表中获取映射关系;依据映射关系查询目标用户表;从目标用户表中获取新增用户存储的业务数据。
在一个实施例中,生成模块912还用于当待选业务数据表的数量等于预设值时,创建新的业务数据表;将新的业务数据表作为目标用户表。
在一个实施例中,生成模块912还用于将待选业务数据表对应的数据量作为权重数据量;依据权重数据量对待选业务数据表进行权重分配,得到待选业务数据表的权重。
上述实施例,通过确定第一集合中待选业务数据表对应的权重;依据权重确定待选业务数据表的选取概率;基于选取概率从待选业务数据表中选取出目标用户表;确定新增用户的用户标识,并建立用户标识与目标用户表的映射关系;通过确定业务数据表对应的权重,并按选取概率从待选业务数据表选取出新增用户的目标用户表,依据业务数据表的数据量智能的选取目标用户表,解决了业务数据存储的数据分布不均匀的问题,不仅如此,当需存储新增用户产生的业务数据时,基于映射关系将业务数据存储于目标用户表。依据映射关系实现了用户的业务数据与目标用户表明确的对应关系,避免了同一时间所有用户的业务数据都存储于同一张业务数据表上,有效的提升了业务数据的存储效率。
上述业务数据的存储装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器或终端,以该计算机设备为服务器进行说明,其内部结构图可以如图11所示。该计算机设备包括处理器、存储器、输入/输出接口(Input/Output,简称I/O)和通信接口。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储业务数据的存储数据。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种业务数据的存储方法。
本领域技术人员可以理解,图11中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各实施例。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述各实施例。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述各实施例。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (10)
1.一种业务数据的存储方法,其特征在于,所述方法包括:
当出现新增用户时,确定第一集合中待选业务数据表对应的权重;
依据所述权重确定所述待选业务数据表的选取概率;
基于所述选取概率从所述待选业务数据表中选取出目标用户表;
确定所述新增用户的用户标识,并建立所述用户标识与所述目标用户表的映射关系;
当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表;
所述确定第一集合中待选业务数据表对应的权重之前,所述方法还包括:依据预设定时统计系统内业务数据表的数据量;基于所述数据量对所述业务数据表进行筛选,得到待选业务数据表;当所述待选业务数据表的数量大于预设值时,将所述待选业务数据表对应的数据量作为权重数据量;依据所述权重数据量对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重;基于所述待选业务数据表的表名、对应的数据量以及所述权重生成第一集合。
2.根据权利要求1所述的方法,其特征在于,所述第一集合包括业务数据表的表名、业务数据表的数据量以及业务数据表的权重的集合,且所述表名、所述数据量和所述权重呈对应关系。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述待选业务数据表的数量等于预设值时,创建新的业务数据表;
将所述新的业务数据表作为所述目标用户表。
4.根据权利要求1所述的方法,其特征在于,所述基于所述选取概率从所述待选业务数据表中选取出目标用户表,包括:
基于所述选取概率,按照预设选取机制从所述待选业务数据表中选取出目标用户表。
5.根据权利要求1所述的方法,其特征在于,所述建立所述用户标识与所述目标用户表的映射关系之后,所述方法还包括:
将所述映射关系存储于映射表;
所述当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表包括:
当需存储所述新增用户产生的业务数据时,从所述映射表中获取所述映射关系;
基于所述映射关系将所述业务数据存储于所述目标用户表。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
当需查询所述新增用户存储的业务数据时,从所述映射表中获取所述映射关系;
依据所述映射关系查询所述目标用户表;
从所述目标用户表中获取所述新增用户存储的业务数据。
7.一种业务数据的存储装置,其特征在于,所述装置包括:
第一确定模块,用于当出现新增用户时,确定第一集合中待选业务数据表对应的权重;
第二确定模块,用于依据所述权重确定所述待选业务数据表的选取概率;
选取模块,用于基于所述选取概率从所述待选业务数据表中选取出目标用户表;
确定与建立模块,用于确定所述新增用户的用户标识,并建立所述用户标识与所述目标用户表的映射关系;
存储模块,用于当需存储所述新增用户产生的业务数据时,基于所述映射关系将所述业务数据存储于所述目标用户表;
所述确定第一集合中待选业务数据表对应的权重之前,所述第一确定模块还用于:依据预设定时统计系统内业务数据表的数据量;基于所述数据量对所述业务数据表进行筛选,得到待选业务数据表;当所述待选业务数据表的数量大于预设值时,将所述待选业务数据表对应的数据量作为权重数据量;依据所述权重数据量对所述待选业务数据表进行权重分配,得到所述待选业务数据表的权重;基于所述待选业务数据表的表名、对应的数据量以及所述权重生成第一集合。
8.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211069850.8A CN115408396B (zh) | 2022-09-02 | 2022-09-02 | 业务数据的存储方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211069850.8A CN115408396B (zh) | 2022-09-02 | 2022-09-02 | 业务数据的存储方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115408396A CN115408396A (zh) | 2022-11-29 |
CN115408396B true CN115408396B (zh) | 2024-04-05 |
Family
ID=84163298
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211069850.8A Active CN115408396B (zh) | 2022-09-02 | 2022-09-02 | 业务数据的存储方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115408396B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104754001A (zh) * | 2013-12-30 | 2015-07-01 | 方正宽带网络服务股份有限公司 | 云存储系统和数据存储方法 |
KR20150096006A (ko) * | 2014-02-13 | 2015-08-24 | 주식회사 더존다스 | 사용자 정의 데이터 테이블 관리 시스템 및 그 제공방법 |
CN111831232A (zh) * | 2020-07-22 | 2020-10-27 | 浙江大华技术股份有限公司 | 数据的存储方法及装置、存储介质和电子装置 |
CN112148458A (zh) * | 2020-10-10 | 2020-12-29 | 腾讯科技(深圳)有限公司 | 任务调度方法、装置 |
WO2021051880A1 (zh) * | 2019-09-18 | 2021-03-25 | 平安科技(深圳)有限公司 | 资源数据获取的方法、装置、计算机设备和存储介质 |
CN113568895A (zh) * | 2021-02-01 | 2021-10-29 | 腾讯科技(深圳)有限公司 | 数据库的数据处理方法、装置、电子设备 |
CN114253481A (zh) * | 2021-12-23 | 2022-03-29 | 深圳市名竹科技有限公司 | 数据储存方法、装置、计算机设备、存储介质 |
CN114387021A (zh) * | 2022-01-11 | 2022-04-22 | 平安普惠企业管理有限公司 | 业务状态生成方法、装置、设备及存储介质 |
-
2022
- 2022-09-02 CN CN202211069850.8A patent/CN115408396B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104754001A (zh) * | 2013-12-30 | 2015-07-01 | 方正宽带网络服务股份有限公司 | 云存储系统和数据存储方法 |
KR20150096006A (ko) * | 2014-02-13 | 2015-08-24 | 주식회사 더존다스 | 사용자 정의 데이터 테이블 관리 시스템 및 그 제공방법 |
WO2021051880A1 (zh) * | 2019-09-18 | 2021-03-25 | 平安科技(深圳)有限公司 | 资源数据获取的方法、装置、计算机设备和存储介质 |
CN111831232A (zh) * | 2020-07-22 | 2020-10-27 | 浙江大华技术股份有限公司 | 数据的存储方法及装置、存储介质和电子装置 |
CN112148458A (zh) * | 2020-10-10 | 2020-12-29 | 腾讯科技(深圳)有限公司 | 任务调度方法、装置 |
CN113568895A (zh) * | 2021-02-01 | 2021-10-29 | 腾讯科技(深圳)有限公司 | 数据库的数据处理方法、装置、电子设备 |
CN114253481A (zh) * | 2021-12-23 | 2022-03-29 | 深圳市名竹科技有限公司 | 数据储存方法、装置、计算机设备、存储介质 |
CN114387021A (zh) * | 2022-01-11 | 2022-04-22 | 平安普惠企业管理有限公司 | 业务状态生成方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN115408396A (zh) | 2022-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8200709B2 (en) | Data model and applications | |
US20200175403A1 (en) | Systems and methods for expediting rule-based data processing | |
CN112651826B (zh) | 授信额度管控系统、方法及可读存储介质 | |
CN111178830B (zh) | 成本的核算方法、装置、计算机设备和存储介质 | |
CN112036631A (zh) | 采购量确定方法、装置、设备及存储介质 | |
CN115408396B (zh) | 业务数据的存储方法、装置、计算机设备和存储介质 | |
CN114693283B (zh) | 跨系统的业务流程审批处理方法、装置和计算机设备 | |
CN117043743A (zh) | 用于多维数据库环境的动态应用构建器 | |
CN115017185A (zh) | 一种数据处理方法、装置及存储介质 | |
CN107506970B (zh) | 一种项目数据处理的方法和系统 | |
CN111553749A (zh) | 一种活动推送策略配置方法及装置 | |
CN109727144A (zh) | 保险发生率计算方法、装置、设备及计算机可读存储介质 | |
CN114841791B (zh) | 预算管控方法、系统、装置、计算机设备和存储介质 | |
CN117453759B (zh) | 业务数据处理方法、装置、计算机设备和存储介质 | |
US20160162959A1 (en) | Performance Optimization Utilizing Pre-Analysis of Condition Records | |
CN117195003A (zh) | 签约数据的处理方法、装置、计算机设备和存储介质 | |
CN117743373A (zh) | 单据处理方法、装置、计算机设备和存储介质 | |
CN113344706A (zh) | 产品限额控制方法、装置、电子设备和计算机可读介质 | |
CN114676675A (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
US20150186960A1 (en) | Multi-Item Access of Pricing Condition Tables | |
CN115689511A (zh) | 多维控编方法、装置、计算机设备和存储介质 | |
CN115408280A (zh) | 流量分配方法、分流模型配置方法、设备、介质和产品 | |
CN115878715A (zh) | 一种页面展示方案的生成方法、装置、计算机设备 | |
CN117390011A (zh) | 报表数据处理方法、装置、计算机设备和存储介质 | |
CN117372152A (zh) | 资源归还计划信息生成方法、装置和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |