CN113535687B - 数据变量管理方法、装置、计算机可读存储介质及处理器 - Google Patents

数据变量管理方法、装置、计算机可读存储介质及处理器 Download PDF

Info

Publication number
CN113535687B
CN113535687B CN202110865781.0A CN202110865781A CN113535687B CN 113535687 B CN113535687 B CN 113535687B CN 202110865781 A CN202110865781 A CN 202110865781A CN 113535687 B CN113535687 B CN 113535687B
Authority
CN
China
Prior art keywords
data
variable
changed
change
application information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110865781.0A
Other languages
English (en)
Other versions
CN113535687A (zh
Inventor
郭剑
邢钦华
郑佰云
肖延超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hujin Xinrong Technology Co ltd
Original Assignee
Beijing Hujin Xinrong Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hujin Xinrong Technology Co ltd filed Critical Beijing Hujin Xinrong Technology Co ltd
Priority to CN202110865781.0A priority Critical patent/CN113535687B/zh
Publication of CN113535687A publication Critical patent/CN113535687A/zh
Application granted granted Critical
Publication of CN113535687B publication Critical patent/CN113535687B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases

Abstract

本发明公开了一种数据变量管理方法、装置、计算机可读存储介质及处理器。其中,该方法包括:通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;从数据库中提取变量位置信息对应的数据作为待变更变量数据;基于变更类型对待变更变量数据进行变更后,得到已变更数据;将已变更数据传输至数仓平台进行存储。本发明解决了现有开发需求的变量管理方式效率低的技术问题。

Description

数据变量管理方法、装置、计算机可读存储介质及处理器
技术领域
本发明涉及数据处理领域,具体而言,涉及一种数据变量管理方法、装置、计算机可读存储介质及处理器。
背景技术
对于业务涉及面较大,业务系统更新迭代快,业务开发小组多的开发团队,以往通常使用邮件和git发布需求,再由专业的数仓团队开发上线。
但是,这种上线模式存在耗时长,延时大,回退操作麻烦,风险难以管控等诸多问题。
针对上述现有开发需求的变量管理方式效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据变量管理方法、装置、计算机可读存储介质及处理器,以至少解决现有开发需求的变量管理方式效率低的技术问题。
根据本发明实施例的一个方面,提供了一种数据变量管理方法,包括:通过操作页面获取用户的变更申请信息,其中,所述变更申请信息至少包括:变量位置信息和变更类型;从数据库中提取所述变量位置信息对应的数据作为待变更变量数据;基于所述变更类型对所述待变更变量数据进行变更后,得到已变更数据;将所述已变更数据传输至数仓平台进行存储。
可选地,所述变更申请信息还包括:用户信息;从数据库中提取所述变量位置信息对应的数据作为待变更变量数据包括:基于所述用户信息对所述变更申请信息的用户进行权限校验;在所述用户的权限校验通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
可选地,所述变更申请信息还包括:变更原因;从数据库中提取所述变量位置信息对应的数据作为待变更变量数据包括:基于所述变更原因对所述变更申请信息进行审批;在审批通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
可选地,在将所述已变更数据传输至数仓平台进行存储之后,所述方法还包括:基于查询语句在所述数仓平台中查询所述已变更数据。
可选地,所述操作页面至少包括:申请页面,用于通过可视化插件生成所述变更申请信息;审批页面,用于对所述变更申请信息进行审批;查询页面,用于查询用户历史生成的变更申请信息;以及查询所述数仓平台中存储的所述已变更数据。
根据本发明实施例的另一方面,还提供了一种数据变量管理装置,包括:获取单元,用于通过操作页面获取用户的变更申请信息,其中,所述变更申请信息至少包括:变量位置信息和变更类型;提取单元,用于从数据库中提取所述变量位置信息对应的数据作为待变更变量数据;变更单元,用于基于所述变更类型对所述待变更变量数据进行变更后,得到已变更数据;传输单元,用于将所述已变更数据传输至数仓平台进行存储。
可选地,所述变更申请信息还包括:用户信息;所述提取单元包括:校验模块,用于基于所述用户信息对所述变更申请信息的用户进行权限校验;第一提取模块,用于在所述用户的权限校验通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
可选地,所述变更申请信息还包括:变更原因;所述提取单元包括:审批模块,用于基于所述变更原因对所述变更申请信息进行审批;第二提取模块,用于在审批通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行上述所述数据变量管理方法。
根据本发明实施例的另一方面,还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行所述所述数据变量管理方法。
在本发明实施例中,通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;从数据库中提取变量位置信息对应的数据作为待变更变量数据;基于变更类型对待变更变量数据进行变更后,得到已变更数据;将已变更数据传输至数仓平台进行存储;从而通过操作页面对待变更变量数据进行变更申请,并将变更后的已变更数据存储至数仓平台,使开发人员不再使用邮件申请审批,达到了提高了开发效率的目的,实现了提高针对开发需求的变量管理效率的技术效果,进而解决了现有开发需求的变量管理方式效率低技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种数据变量管理方法的流程图;
图2是根据本发明实施例的一种基于大数据平台的元数据变量系统的示意图一;
图3是根据本发明实施例的一种基于大数据平台的元数据变量系统的示意图二;
图4是根据本发明实施例的一种申请页面的示意图;
图5是根据本发明实施例的一种审批页面的示意图;
图6是根据本发明实施例的一种申请查询页面的示意图一;
图7是根据本发明实施例的一种申请查询页面的示意图二;
图8是根据本发明实施例的一种数据变量管理装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种数据变量管理方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种数据变量管理方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;
步骤S104,从数据库中提取变量位置信息对应的数据作为待变更变量数据;
步骤S106,基于变更类型对待变更变量数据进行变更后,得到已变更数据;
步骤S108,将已变更数据传输至数仓平台进行存储。
在本发明实施例中,通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;从数据库中提取变量位置信息对应的数据作为待变更变量数据;基于变更类型对待变更变量数据进行变更后,得到已变更数据;将已变更数据传输至数仓平台进行存储;从而通过操作页面对待变更变量数据进行变更申请,并将变更后的已变更数据存储至数仓平台,使开发人员不再使用邮件申请审批,达到了提高了开发效率的目的,实现了提高针对开发需求的变量管理效率的技术效果,进而解决了现有开发需求的变量管理方式效率低技术问题。
在上述步骤S102中,变更类型用于指示对待变更变量数据进行新增、更新、和删除。
在上述步骤S104中,数据库可以是业务系统的关系型书库,如mysql、oracle、sqlsever等。
在上述步骤S108中,数仓平台可以是Hadoop分布式数据库。
作为一种可选的实施例,变更申请信息还包括:用户信息;从数据库中提取变量位置信息对应的数据作为待变更变量数据包括:基于用户信息对变更申请信息的用户进行权限校验;在用户的权限校验通过后,基于变量位置信息从数据库中提取待变更变量数据。
本发明上述实施例,变更申请信息还包括:用户信息,基于该用户信息可以确定用户对数据库的访问权限,使用户可以对针对权限范围内的数据提出变更申请,发出变更申请信息,还可以基于用户的权限对其他用户的变更申请信息进行审批。
作为一种可选的实施例,变更申请信息还包括:变更原因;从数据库中提取变量位置信息对应的数据作为待变更变量数据包括:基于变更原因对变更申请信息进行审批;在审批通过后,基于变量位置信息从数据库中提取待变更变量数据。
本发明上述实施例,用户可以在变更申请信息中提出变更原因,便于审批人员依据变更原因对该用户发出的变更申请信息进行审批。
作为一种可选的实施例,在将已变更数据传输至数仓平台进行存储之后,方法还包括:基于查询语句在数仓平台中查询已变更数据。
本发明上述实施例,通过查询语句可以在数仓平台中快速查询已变更数据。
可选地,在基于变更类型对待变更变量数据进行变更后,可以将已变更数据,以及已变更数据的变更日志存储在本地,在对已变更数据进行查询时,可以基于本地查询,也可以基于数仓平台查询已上传的已变更数据。
作为一种可选的实施例,操作页面至少包括:申请页面,用于通过可视化插件生成变更申请信息;审批页面,用于对变更申请信息进行审批;查询页面,用于查询用户历史生成的变更申请信息;以及查询数仓平台中存储的已变更数据。
本发明上述实施例,可视化插件至少包括:选择插件,用于选择变更类型,以及选择变量位置信息,用户可以基于可视化插件生成变更申请信息,从而无需用户通过编写代码的方式进行变更申请信息的编辑,提高变更申请信息的编写效率。
可选地,可视化插件包括:变更类型的选择插件,其中,变更类型包括新增,更新,分别用来新增变量和更新变量。
可选地,可视化插件包括:变量所在库的选择插件:使用户选择变量所在业务数据库名称;
可选地,可视化插件包括:变量所在表的选择插件,使用户选择变量所在业务数据库中的所在表;
可选地,可视化插件包括:变量名称的选择插件,使用户勾选要新增或者更新的变量名称;
可选地,可视化插件包括:接入的Hadoop账号的选择插件,根据系统用户的用户ID,自动识别该用户ID所有权限的账户,由用户选择所需要选择的用户ID;
可选地,可视化插件包括:申请原因的编写插件,让用户填写申请该操作的原因和理由,供领导审批;
可选地,可视化插件包括:申请人信息的生成插件,将申请人的业务部门,申请人姓名和申请日期,拼接起来并放到该处,用户不得修改;
可选地,可视化插件包括:提交按键:用户提交申请按钮;
可选地,可视化插件包括:取消按键:用户取消该次申请。
本发明还提供了一种优选实施例,该优选实施例提供了一种基于大数据平台的元数据变量系统。
本发明提供了一种开发人员线上对生产系统数据库变量到数仓平台的元数据变量管理系统,以可视化的页面在线上进行申请,审批变量导入申请,也提高线上变量查询平台的系统。
本发明的目的在于:通过构建一套可视化的系统,由产品等非技术人员可以在系统上通过简单的填写必填项实现变更数仓内的变量数据。
本发明提供一套审批系统,使只有通过相关管理人员审批的上线变更需求才会被执行。
本发明提供一套基于大数据平台的元数据变量系统,用来连接业务数据库和数仓平台;用来实现生产流程的申请,修改,废弃,驳回,通过等操作;以及用来记录所有用户的操作。
图2是根据本发明实施例的一种基于大数据平台的元数据变量系统的示意图一,如图2所示,包括:系统平台202,业务系统204和数仓平台206。
可选地,系统平台202提供一个操作页面和系统数据库,系统平台用来完成用户的申请添加表,添加字段,查询变量,审批等操作,并将生成的日志,保存到系统数据库中。
可选地,系统平台提供一个关系型数据库的接口,用来连接业务系统204如mysql、oracle、sqlsever等关系型数据库,对登陆的用户身份和权限进行校验,然后加载相应的业务库的url,读取相应数据库的元数据。
可选地,系统平台提供一个数仓平台的接口,用来连接数仓平台的元数据库206。
图3是根据本发明实施例的一种基于大数据平台的元数据变量系统的示意图二,如图3所示,包括:关系数据库301、数据采集模块302,系统平台202,数据推送模块304,数仓平台206。
可选地,数据采集模块,用于读取关系型数据库的元数据,获取关系数据库的表和字段,并将数据发送给系统平台;
可选地,数据推送模块,用于获取系统平台的数据,并推送到数仓平台。
可选地,数仓平台可以是Hadoop。
可选地,系统平台用于连接数据采集模块和数据推送模块,作为两者的数据传输通道,并对数据流进行控制。
本系统提供的基于大数据平台的元数据变量系统,用于执行增加,修改,查询变量。
图4是根据本发明实施例的一种申请页面的示意图,如图4所示,包括:变更类型,其中,变更类型包括新增,更新,分别用来新增变量和更新变量;变量所在库,用于使用户选择变量所在业务数据库名称;变量所在表,用于使用户选择变量所在业务数据库中的所在表;变量名称,用于使用户勾选要新增或者更新的变量名称;接入的Hadoop账号,用于根据系统用户的用户ID,自动识别该用户ID所有权限的账户,由用户选择所需要选择的用户ID;申请原因,用于让用户填写申请该操作的原因和理由,供领导审批;申请人信息,用于将申请人的业务部门,申请人姓名和申请日期,拼接起来并放到该处,用户不得修改;提交,用于用户提交申请按钮;取消,用于用户取消该次申请。
图5是根据本发明实施例的一种审批页面的示意图,如图5所示,第一条数据表示由张三发出的数据变量变更的申请(即发出变更申请信息),待赵sir进行审批;第二条数据表示由李四发出的数据变量变更申请(即发出变更申请信息),已由赵sir审批通过;第三条数据表示由王五发出的数据变量变更申请(即发出变更申请信息),已由赵sir审批驳回。
图6是根据本发明实施例的一种申请查询页面的示意图一,如图6所示,张三历史的申请页面,用于展示张三历史申请单的审批结果;其中,第一条数据表示由张三发出的数据变量变更申请(即发出变更申请信息),目前待赵sir进行审批;第二条数据表示由张三发出的数据变量变更申请(即发出变更申请信息),已由赵sir审批通过;第三条数据表示由张三发出的数据变量变更申请(即发出变更申请信息),已由赵sir审批驳回,需要张三重新申请。
图7是根据本发明实施例的一种申请查询页面的示意图二,如图7所示,用户提供查询已经接入到数仓的变量的数据;其中,查询窗口提供三个标签:表名,字段名,表注释,用来满足用户的三种查询方式,分别模糊匹配出表名和字段名所在的库,表和字段,表注释。
可选地,如图7所示的条形框,让用户填写输入查询的信息。
可选地,如图7所示的搜索按钮,用户点击“搜索”,页面范围查询结果。
可选地,如图7所示的搜索结果,向用户展示查询到的数据变量的结果。
本发明提供的基于大数据平台的元数据变量系统,,使开发人员不再使用邮件申请审批,提高了开发效率。
本发明提供的基于大数据平台的元数据变量系统,给用户提供线上的变量查询服务,使用户可以在系统上查询大数据平台的变量信息,可以不再去大数据平台元数据库查询相关的表和字段数据,方便了系统数据的权限管控,增强了公司数据资产的安全性。
根据本发明的又一个实施例,还提供了一种存储介质,所述存储介质包括存储的程序,其中,所述程序运行时执行上述任一项所述的数据变量管理方法。
根据本发明的又一个实施例,还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述任一项所述的数据变量管理方法。
根据本发明实施例,还提供了一种数据变量管理装置实施例,需要说明的是,该数据变量管理装置可以用于执行本发明实施例中的数据变量管理方法,本发明实施例中的数据变量管理方法可以在该数据变量管理装置中执行。
图8是根据本发明实施例的一种数据变量管理装置的示意图,如图8所示,该装置可以包括:获取单元80,用于通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;提取单元82,用于从数据库中提取变量位置信息对应的数据作为待变更变量数据;变更单元84,用于基于变更类型对待变更变量数据进行变更后,得到已变更数据;传输单元86,用于将已变更数据传输至数仓平台进行存储。
需要说明的是,该实施例中的获取单元80可以用于执行本申请实施例中的步骤S102,该实施例中的提取单元82可以用于执行本申请实施例中的步骤S104,该实施例中的变更单元84可以用于执行本申请实施例中的步骤S106,该实施例中的传输单元86可以用于执行本申请实施例中的步骤S108。上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例所公开的内容。
在本发明实施例中,通过操作页面获取用户的变更申请信息,其中,变更申请信息至少包括:变量位置信息和变更类型;从数据库中提取变量位置信息对应的数据作为待变更变量数据;基于变更类型对待变更变量数据进行变更后,得到已变更数据;将已变更数据传输至数仓平台进行存储;从而通过操作页面对待变更变量数据进行变更申请,并将变更后的已变更数据存储至数仓平台,使开发人员不再使用邮件申请审批,达到了提高了开发效率的目的,实现了提高针对开发需求的变量管理效率的技术效果,进而解决了现有开发需求的变量管理方式效率低技术问题。
作为一种可选的实施例,变更申请信息还包括:变更原因;提取单元包括:审批模块,用于基于变更原因对变更申请信息进行审批;第二提取模块,用于在审批通过后,基于变量位置信息从数据库中提取待变更变量数据。
作为一种可选的实施例,装置还包括:查询单元,用于在将已变更数据传输至数仓平台进行存储之后,基于查询语句在数仓平台中查询已变更数据。
作为一种可选的实施例,操作页面至少包括:申请页面,用于通过可视化插件生成变更申请信息;审批页面,用于对变更申请信息进行审批;查询页面,用于查询用户历史生成的变更申请信息;以及查询数仓平台中存储的已变更数据。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种数据变量管理方法,其特征在于,包括:
通过操作页面获取用户的变更申请信息,其中,所述变更申请信息至少包括:变量位置信息和变更类型;
从数据库中提取所述变量位置信息对应的数据作为待变更变量数据,其中,所述数据库为关系型数据库;
基于所述变更类型对所述待变更变量数据进行变更后,得到已变更数据;
将所述已变更数据传输至数仓平台进行存储,其中,所述数仓平台为分布式数据库;
其中,所述操作页面至少包括:
申请页面,用于通过可视化插件生成所述变更申请信息;
审批页面,用于对所述变更申请信息进行审批;
查询页面,用于查询用户历史生成的变更申请信息;以及查询所述数仓平台中存储的所述已变更数据;
其中,所述可视化插件至少包括:变更类型的选择插件,变量所在库的选择插件,变量所在表的选择插件,变量名称的选择插件,接入的Hadoop账号的选择插件,申请原因的编写插件,申请人信息的生成插件,提交按键,以及取消按键;
其中,基于所述变更类型对所述待变更变量数据进行变更后,将所述已变更数据,以及所述已变更数据的变更日志存储在本地,在对所述已变更数据进行查询时,基于本地查询已变更数据,或基于所述数仓平台查询已上传的已变更数据。
2.根据权利要求1所述的方法,其特征在于,所述变更申请信息还包括:用户信息;
从数据库中提取所述变量位置信息对应的数据作为待变更变量数据包括:
基于所述用户信息对所述变更申请信息的用户进行权限校验;
在所述用户的权限校验通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
3.根据权利要求1所述的方法,其特征在于,所述变更申请信息还包括:变更原因;
从数据库中提取所述变量位置信息对应的数据作为待变更变量数据包括:
基于所述变更原因对所述变更申请信息进行审批;
在审批通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
4.根据权利要求1所述的方法,其特征在于,在将所述已变更数据传输至数仓平台进行存储之后,所述方法还包括:
基于查询语句在所述数仓平台中查询所述已变更数据。
5.一种数据变量管理装置,其特征在于,包括:
获取单元,用于通过操作页面获取用户的变更申请信息,其中,所述变更申请信息至少包括:变量位置信息和变更类型;
提取单元,用于从数据库中提取所述变量位置信息对应的数据作为待变更变量数据,其中,所述数据库为关系型数据库;
变更单元,用于基于所述变更类型对所述待变更变量数据进行变更后,得到已变更数据;
传输单元,用于将所述已变更数据传输至数仓平台进行存储,其中,所述数仓平台为分布式数据库;
其中,所述操作页面至少包括:
申请页面,用于通过可视化插件生成所述变更申请信息;
审批页面,用于对所述变更申请信息进行审批;
查询页面,用于查询用户历史生成的变更申请信息;以及查询所述数仓平台中存储的所述已变更数据;
其中,所述可视化插件至少包括:变更类型的选择插件,变量所在库的选择插件,变量所在表的选择插件,变量名称的选择插件,接入的Hadoop账号的选择插件,申请原因的编写插件,申请人信息的生成插件,提交按键,以及取消按键;
其中,基于所述变更类型对所述待变更变量数据进行变更后,将所述已变更数据,以及所述已变更数据的变更日志存储在本地,在对所述已变更数据进行查询时,基于本地查询已变更数据,或基于所述数仓平台查询已上传的已变更数据。
6.根据权利要求5所述的装置,其特征在于,所述变更申请信息还包括:用户信息;所述提取单元包括:
校验模块,用于基于所述用户信息对所述变更申请信息的用户进行权限校验;
第一提取模块,用于在所述用户的权限校验通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
7.根据权利要求5所述的装置,其特征在于,所述变更申请信息还包括:变更原因;所述提取单元包括:
审批模块,用于基于所述变更原因对所述变更申请信息进行审批;
第二提取模块,用于在审批通过后,基于所述变量位置信息从所述数据库中提取所述待变更变量数据。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至4中任意一项所述数据变量管理方法。
9.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至4中任意一项所述数据变量管理方法。
CN202110865781.0A 2021-07-29 2021-07-29 数据变量管理方法、装置、计算机可读存储介质及处理器 Active CN113535687B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110865781.0A CN113535687B (zh) 2021-07-29 2021-07-29 数据变量管理方法、装置、计算机可读存储介质及处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110865781.0A CN113535687B (zh) 2021-07-29 2021-07-29 数据变量管理方法、装置、计算机可读存储介质及处理器

Publications (2)

Publication Number Publication Date
CN113535687A CN113535687A (zh) 2021-10-22
CN113535687B true CN113535687B (zh) 2024-01-26

Family

ID=78089715

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110865781.0A Active CN113535687B (zh) 2021-07-29 2021-07-29 数据变量管理方法、装置、计算机可读存储介质及处理器

Country Status (1)

Country Link
CN (1) CN113535687B (zh)

Citations (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101419552A (zh) * 2008-12-03 2009-04-29 浪潮集团山东通用软件有限公司 一种通用业务数据采集表单的定义与生成方法
CN101739453A (zh) * 2009-12-17 2010-06-16 中国电力科学研究院 一种对数据库表进行条件查询的方法及装置
CN101997854A (zh) * 2009-08-31 2011-03-30 阿里巴巴集团控股有限公司 一种提供数据服务的处理系统及方法
CN102724321A (zh) * 2012-06-21 2012-10-10 中国科学院高能物理研究所 一种用于高能物理试验大批量数据的传输系统及传输方法
CN103473247A (zh) * 2012-06-30 2013-12-25 中国地质调查局西安地质调查中心 地质资料信息集群机理与接口聚合模型
CN103646311A (zh) * 2013-12-06 2014-03-19 因为科技无锡有限公司 一种交通数据服务系统
CN105446632A (zh) * 2014-08-20 2016-03-30 珠海金山办公软件有限公司 一种幻灯片放映控制方法及装置
CN105867765A (zh) * 2016-03-25 2016-08-17 网易(杭州)网络有限公司 对于触控虚拟控件的反馈方法、系统及移动终端
CN105879387A (zh) * 2014-12-19 2016-08-24 上海涌杰信息科技有限公司 基于电容式触摸屏智能外设装置设置娱乐控件的控制方法
CN106059825A (zh) * 2016-07-08 2016-10-26 福建天晴数码有限公司 一种分布式系统及配置方法
CN106651092A (zh) * 2016-09-22 2017-05-10 济南浪潮高新科技投资发展有限公司 可配置的数据变更流程化监管方法
CN107479902A (zh) * 2017-08-29 2017-12-15 网易(杭州)网络有限公司 控件处理方法及装置,存储介质、处理器和终端
CN107491463A (zh) * 2016-07-21 2017-12-19 平安科技(深圳)有限公司 数据查询的优化方法和系统
CN107918600A (zh) * 2017-11-15 2018-04-17 泰康保险集团股份有限公司 报表开发系统及方法、存储介质和电子设备
CN108536778A (zh) * 2018-03-29 2018-09-14 客如云科技(成都)有限责任公司 一种数据应用共享平台及方法
CN108804613A (zh) * 2018-05-30 2018-11-13 国网山东省电力公司经济技术研究院 一种多源数据库实时融合系统及其融合方法
CN108876121A (zh) * 2018-05-31 2018-11-23 康键信息技术(深圳)有限公司 工单处理方法、装置、计算机设备和存储介质
CN110083587A (zh) * 2019-04-16 2019-08-02 会找房(北京)网络技术有限公司 一种基于Git的数据库变更审批方法
CN111556052A (zh) * 2020-04-27 2020-08-18 京东方科技集团股份有限公司 权限管理方法、处理设备及存储介质
CN111625552A (zh) * 2020-05-20 2020-09-04 北京百度网讯科技有限公司 数据收集方法、装置、设备和可读存储介质
CN111797104A (zh) * 2020-06-12 2020-10-20 中国建设银行股份有限公司 数据变更情况的获取方法、装置及电子设备
CN112036736A (zh) * 2020-08-28 2020-12-04 杭州指令集智能科技有限公司 一种工作流创建方法及装置
CN112256672A (zh) * 2020-10-22 2021-01-22 中国联合网络通信集团有限公司 数据库变更审批方法及装置
CN112765245A (zh) * 2020-12-31 2021-05-07 广西中科曙光云计算有限公司 一种电子政务大数据处理平台
CN113094037A (zh) * 2021-04-20 2021-07-09 上海携宁计算机科技股份有限公司 表单和工作流的交互方法、开发平台、设备及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9568495B2 (en) * 2015-05-20 2017-02-14 AIST-NT, Inc. Systems and methods for non-destructive surface chemical analysis of samples
US11088907B2 (en) * 2016-03-24 2021-08-10 Intel Corporation System characterization and configuration distribution for facilitating improved performance at computing devices

Patent Citations (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101419552A (zh) * 2008-12-03 2009-04-29 浪潮集团山东通用软件有限公司 一种通用业务数据采集表单的定义与生成方法
CN101997854A (zh) * 2009-08-31 2011-03-30 阿里巴巴集团控股有限公司 一种提供数据服务的处理系统及方法
CN101739453A (zh) * 2009-12-17 2010-06-16 中国电力科学研究院 一种对数据库表进行条件查询的方法及装置
CN102724321A (zh) * 2012-06-21 2012-10-10 中国科学院高能物理研究所 一种用于高能物理试验大批量数据的传输系统及传输方法
CN103473247A (zh) * 2012-06-30 2013-12-25 中国地质调查局西安地质调查中心 地质资料信息集群机理与接口聚合模型
CN103646311A (zh) * 2013-12-06 2014-03-19 因为科技无锡有限公司 一种交通数据服务系统
CN105446632A (zh) * 2014-08-20 2016-03-30 珠海金山办公软件有限公司 一种幻灯片放映控制方法及装置
CN105879387A (zh) * 2014-12-19 2016-08-24 上海涌杰信息科技有限公司 基于电容式触摸屏智能外设装置设置娱乐控件的控制方法
CN105867765A (zh) * 2016-03-25 2016-08-17 网易(杭州)网络有限公司 对于触控虚拟控件的反馈方法、系统及移动终端
CN106059825A (zh) * 2016-07-08 2016-10-26 福建天晴数码有限公司 一种分布式系统及配置方法
CN107491463A (zh) * 2016-07-21 2017-12-19 平安科技(深圳)有限公司 数据查询的优化方法和系统
CN106651092A (zh) * 2016-09-22 2017-05-10 济南浪潮高新科技投资发展有限公司 可配置的数据变更流程化监管方法
CN107479902A (zh) * 2017-08-29 2017-12-15 网易(杭州)网络有限公司 控件处理方法及装置,存储介质、处理器和终端
CN107918600A (zh) * 2017-11-15 2018-04-17 泰康保险集团股份有限公司 报表开发系统及方法、存储介质和电子设备
CN108536778A (zh) * 2018-03-29 2018-09-14 客如云科技(成都)有限责任公司 一种数据应用共享平台及方法
CN108804613A (zh) * 2018-05-30 2018-11-13 国网山东省电力公司经济技术研究院 一种多源数据库实时融合系统及其融合方法
CN108876121A (zh) * 2018-05-31 2018-11-23 康键信息技术(深圳)有限公司 工单处理方法、装置、计算机设备和存储介质
CN110083587A (zh) * 2019-04-16 2019-08-02 会找房(北京)网络技术有限公司 一种基于Git的数据库变更审批方法
CN111556052A (zh) * 2020-04-27 2020-08-18 京东方科技集团股份有限公司 权限管理方法、处理设备及存储介质
CN111625552A (zh) * 2020-05-20 2020-09-04 北京百度网讯科技有限公司 数据收集方法、装置、设备和可读存储介质
CN111797104A (zh) * 2020-06-12 2020-10-20 中国建设银行股份有限公司 数据变更情况的获取方法、装置及电子设备
CN112036736A (zh) * 2020-08-28 2020-12-04 杭州指令集智能科技有限公司 一种工作流创建方法及装置
CN112256672A (zh) * 2020-10-22 2021-01-22 中国联合网络通信集团有限公司 数据库变更审批方法及装置
CN112765245A (zh) * 2020-12-31 2021-05-07 广西中科曙光云计算有限公司 一种电子政务大数据处理平台
CN113094037A (zh) * 2021-04-20 2021-07-09 上海携宁计算机科技股份有限公司 表单和工作流的交互方法、开发平台、设备及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于工业互联的企业数据系统架构设计与实践;丛力群;;冶金自动化(03);第11-21页 *
数据中心基础设施管理系统的研究与设计;李兢;;电信工程技术与标准化(09);第88-93页 *

Also Published As

Publication number Publication date
CN113535687A (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
US11487529B2 (en) User interface that integrates plural client portals in plural user interface portions through sharing of one or more log records
Wazlawick Object-Oriented Analysis and Design for Information Systems: Agile Modeling with UML, OCL, and IFML
US8949166B2 (en) Creating and processing a data rule for data quality
US7574379B2 (en) Method and system of using artifacts to identify elements of a component business model
CN110083623B (zh) 一种业务规则生成方法及装置
Maro et al. Traceability maintenance: factors and guidelines
US8078568B2 (en) Properties of data elements
CN103329130A (zh) 管理数据集合的更改
US20170228356A1 (en) System Generator Module for Electronic Document and Electronic File
CN103605703A (zh) 一种多平台之间数据一致性检测的方法和系统
Dam et al. Managing changes in the enterprise architecture modelling context
CN104756067A (zh) 用于管理元数据的方法和系统
CN113535687B (zh) 数据变量管理方法、装置、计算机可读存储介质及处理器
CN111754206A (zh) 一种政务服务事项颗粒化梳理方法
CN106506661A (zh) 一种动态返回数据的方法、服务端及系统
Krathu et al. Semantic interpretation of UN/EDIFACT messages for evaluating inter-organizational relationships
CN112685389A (zh) 数据管理方法、数据管理装置、电子设备及存储介质
CN112905153B (zh) 一种面向软件定义卫星的软件并行构建方法以及装置
Sandifer et al. Business rules: Capturing the most elusive information asset
JP2001222420A (ja) セキュリティシステム設計支援方法
US20240028310A1 (en) Comprehensive component analysis and visualization
KR101799198B1 (ko) 거래 정보 관리 방법 및 장치
Jose‐Garcia et al. Rule‐based approach for topic maps learning from relational databases
Ilgner et al. An implementation to transform business collaboration models to executable process specifications
Segéň Connecting ERP and e-commerce systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant