CN114510497A - 一种变量加工方法、装置、设备及可读存储介质 - Google Patents

一种变量加工方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN114510497A
CN114510497A CN202210102435.1A CN202210102435A CN114510497A CN 114510497 A CN114510497 A CN 114510497A CN 202210102435 A CN202210102435 A CN 202210102435A CN 114510497 A CN114510497 A CN 114510497A
Authority
CN
China
Prior art keywords
variable
data
data table
sql statement
executing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210102435.1A
Other languages
English (en)
Inventor
曾婵
董涛
周阳
宁维宇
俞致远
黄梦阳
李丰
谭领航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Du Xiaoman Technology Beijing Co Ltd
Original Assignee
Du Xiaoman Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Du Xiaoman Technology Beijing Co Ltd filed Critical Du Xiaoman Technology Beijing Co Ltd
Priority to CN202210102435.1A priority Critical patent/CN114510497A/zh
Publication of CN114510497A publication Critical patent/CN114510497A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/242Query formulation
    • G06F16/2433Query languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种变量加工方法,该方法采用SQL语句的形式进行变量加工逻辑的表述,完成变量的逻辑加工和上线,可以缩短变量提出到上线的周期,可以解决各种业务场景下变量加工效率的问题,还可以加快策略的上线,提早带来收益;同时整体加工过程只需在确定加工逻辑后进行相应SQL语句进行描述即可自动实现变量的加工,避免口述和代码的转换,降低沟通和出错成本。本发明还公开了一种变量加工装置、设备及可读存储介质,具有相应的技术效果。

Description

一种变量加工方法、装置、设备及可读存储介质
技术领域
本发明涉及数据处理技术领域,特别是涉及一种变量加工方法、装置、设备及可读存储介质。
背景技术
为满足不同的自动化功能实现,需要进行变量加工,变量加工指通过编码实现变量的自动化处理。目前变量加工采用硬编码实现,即变量加工需求提出后,需求方和程序员首先对变量逻辑进行沟通,逻辑确认后开始硬编码开发,再经过测试无误后方可上线代码,最后在管理后台增加出参和配置信贷变量,至此信贷变量完成了整个上线的周期。
该种方式下加工周期长,需求方在提出需求前需要耗费若干天进行需求调研,提出需求后还需要进行需求评审,程序员排期开发代码和自测需耗时几天,需求提测后测试需要一定时间,测试无误后模块上线还需要占用一定时长,整个周期耗时较长;而且信贷变量加工逻辑采用硬编码实现时,需要程序员实时维护变量逻辑口径,并解答加工逻辑相关问题,占用了大量的人力;另外,由于需求方调研结果产出是通过执行SQL批量分析数据得到,再经过沟通口述,到代码的开发,中间经过多次转换,容易存在语义理解误差,最终导致变量逻辑有误,造成无用功。
综上所述,如何缩短变量提出到上线的周期,同时降低沟通和出错概率,是目前本领域技术人员急需解决的技术问题。
发明内容
本发明的目的是提供一种变量加工方法、装置、设备及可读存储介质,以缩短变量提出到上线的周期,同时降低沟通和出错概率。
为解决上述技术问题,本发明提供如下技术方案:
一种变量加工方法,包括:
获取用户填写的SQL配置的基础信息,将所述基础信息存储于数据库;其中,所述基础信息包括:变量名、SQL语句以及数据表;
从所述数据库中确定所述数据表,并创建与所述数据表之间的连接;
从所述数据库中提取出所述变量名,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,得到变量键值对;
释放与所述数据表之间的连接。
可选地,在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,还包括:
根据所述SQL语句中的表名在内存数据库中创建对应的虚拟表,并将所述数据表中的数据插入到所述虚拟表中;
则相应地,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,具体为:根据所述变量名从所述虚拟表中提取对应的数据执行所述SQL语句。
可选地,在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,还包括:
从所述数据库中提取出所述基础信息,并判断所述基础信息中是否存在自定义算子;
若存在,注册所述自定义算子,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤;
若不存在,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤。
可选地,在所述将所述基础信息存储于数据库之前,还包括:
若接收到变量试算请求,确定用户指定的试算类型;其中,试算类型包括:导入样本试算、随机样本试算和单事例试算中至少一种;
根据所述试算类型读取相应的试算样本执行所述SQL语句,得到变量执行结果;
若接收到信息变更请求,根据用户变更的数据更新所述基础信息;
若接收到提交请求,执行所述将所述基础信息存储于数据库的步骤。
可选地,在所述创建与所述数据表之间的连接之前,还包括:
判断所述数据表是否来自相同数据源;
若是,执行所述创建与所述数据表之间的连接的步骤;
若否,将各所述数据表中的数据添加至统一管理表中,则相应地,所述创建与所述数据表之间的连接,具体为:创建与所述统一管理表表之间的连接。
一种变量加工装置,包括:
页面管理端,用于获取用户填写的SQL配置的基础信息,将所述基础信息存储于数据库;其中,所述基础信息包括:变量名、SQL语句以及数据表;
在线端,用于从所述数据库中确定所述数据表,并创建与所述数据表之间的连接;从所述数据库中提取出所述变量名,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,得到变量键值对;释放与所述数据表之间的连接。
可选地,所述页面管理端,还用于:在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,根据所述SQL语句中的表名在内存数据库中创建对应的虚拟表,并将所述数据表中的数据插入到所述虚拟表中;则相应地,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,具体为:根据所述变量名从所述虚拟表中提取对应的数据执行所述SQL语句。
可选地,所述在线端,还用于:在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,从所述数据库中提取出所述基础信息,并判断所述基础信息中是否存在自定义算子;若存在,注册所述自定义算子,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤;若不存在,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤。
一种计算机设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述变量加工方法的步骤。
一种可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述变量加工方法的步骤。
本发明实施例所提供的方法采用SQL语句的形式进行变量加工逻辑的表述,完成变量的逻辑加工和上线,可以缩短变量提出到上线的周期,可以解决各种业务场景下变量加工效率的问题,还可以加快策略的上线,提早带来收益;同时整体加工过程只需在确定加工逻辑后进行相应SQL语句进行描述即可自动实现变量的加工,避免口述和代码的转换,降低沟通和出错成本。
相应地,本发明实施例还提供了与上述变量加工方法相对应的变量加工装置、设备和可读存储介质,具有上述技术效果,在此不再赘述。
附图说明
为了更清楚地说明本发明实施例或相关技术中的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中一种变量加工方法的实施流程图;
图2为本发明实施例中一种变量加工流程简化对比示意图;
图3为本发明实施例中一种变量加工装置的工作示意图;
图4为本发明实施例中一种基础服务变量加工流程示意图;
图5为本发明实施例中一种计算机设备的结构示意图。
具体实施方式
本发明的核心是提供一种变量加工方法,可以缩短变量提出到上线的周期,同时降低沟通和出错概率。
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,图1为本发明实施例中一种变量加工方法的流程图,该方法包括以下步骤:
S101、获取用户填写的SQL配置的基础信息,将基础信息存储于数据库;
用户在交互界面输入用于加工变量的SQL配置的基础信息,其中,基础信息包括但不限于:变量名(待加工的变量名)、SQL语句(针对变量进行加工的逻辑语句)以及数据表(存储有变量的原始数据表)。本方法中的变量加工过程替换了现有硬编码加工方式,采用SQL语句的形式表述,根据变量所用到的数据信息创建对应虚拟表,通过获取用户填写的SQL语句即可完成变量的逻辑加工和上线,可以应用于信贷风控场景、数学统计场景、数据分析场景等多种业务场景,可以显著提升多业务场景下的变量加工效率。
当然除了以上信息之外,还可以进一步包含其他信息,比如变量出参描述、变量出参类型、变量出参名称以及服务名称等用于方便其他用户了解当前变量加工的用处、方法等类型的信息,本实施例中对于基础信息中具体包括的信息类型不做限定,可以根据实际使用需要进行设定。
用户在交互界面输入用于加工变量的SQL配置的基础信息,其中,交互界面为本方法中用于与用户侧进行信息交互,获取用户填写的信息以及输出相应结果信息的界面,交互界面主要由查看界面和变量SQL新增界面组成;其中,查看界面可以方便用户获取所需变量的加工逻辑,变量SQL新增界面主要用于方便用户输入SQL配置的基础信息,以及得到变量执行结果。
获取到用户填写的SQL配置的基础信息后,将该变量的SQL配置的基础信息存到数据库中,以供后续加载执行。
通过以上配置,即可取代当前RD(Research and Development,研发)开发、QA(Quality Assurance,质保)测试和RD上线的步骤,如图2所示,大大加快了变量上线周期,工作量可下降85%(约3.5人/天降低到约0.5人/天),显著提高了RD的工作效率。
S102、从数据库中确定数据表,并创建与数据表之间的连接;
在将对于当前变量加工的SQL配置基础信息添加至数据库后,将触发线上对SQL配置表的加载。在获取外部的数据表后,首先创建与该数据表之间的连接,以便于提取变量数据,连接的创建过程可以参照相关实现技术的介绍,在此不再赘述。
S103、从数据库中提取出变量名,根据变量名从数据表中提取对应的数据执行SQL语句,得到变量键值对;
从数据库中提取出变量名对应的数据,将该数据插入至SQL语句变量名对应的部分,并执行该SQL语句,即可获得变量键值对,变量键值对即SQL语句的执行结果,将其返回至用户侧即可。
本实施例中对于数据库的接入方式不做限定,为便于针对不同的服务类型实现最优的接入,可以采用两种接入方式(接口接入和贴源接入),对于外部服务以接口方式返回结果的,采用接口接入方式,对接口返回内容进行解析;对于直接与数据库交互的服务,采取贴源接入。本实施例中仅以该种数据库的数据接入方式为例,其他接入方式均可参照本实施例的介绍,在此不再赘述。
S104、释放与数据表之间的连接。
执行完毕释放数据库连接,以结束SQL语句的执行。需要说明的是,连接释放的过程可以参照相关技术的介绍,在此不再赘述。
基于上述介绍,本发明实施例所提供的技术方案,替换目前针对变量的硬编码加工方式,采用SQL语句的形式进行变量加工逻辑的表述,完成变量的逻辑加工和上线,可以缩短变量提出到上线的周期,可以解决各种业务场景下变量加工效率的问题,还可以加快策略的上线,提早带来收益;同时整体加工过程只需在确定加工逻辑后进行相应SQL语句进行描述即可自动实现变量的加工,避免口述和代码的转换,降低沟通和出错成本。
需要说明的是,基于上述实施例,本发明实施例还提供了相应的改进方案。在优选/改进实施例中涉及与上述实施例中相同步骤或相应步骤之间可相互参考,相应的有益效果也可相互参照,在本文的优选/改进实施例中不再一一赘述。
本方法中采用SQL语句的形式表述,根据变量所用到的数据信息创建对应虚拟表,通过获取用户填写的SQL语句即可完成变量的逻辑加工和上线。上述实施例中对于SQL语句编写的过程不做限定,其中,SQL语句的编写可以直接采用SQL原有逻辑(算子)进行编写生成,而为了丰富变量加工中的逻辑类型,本实施例中提出对于SQL无法实现的逻辑,可结合UDF(user-defined functions,用户自定义函数,也可以称为自定义算子)实现复杂逻辑。
则相应地,在上述实施例步骤S103根据变量名从数据表中提取对应的数据执行SQL语句之前,可以进一步执行以下步骤:
S105、从数据库中提取出基础信息,并判断基础信息中是否存在自定义算子;若存在,触发S106;若不存在,触发步骤S103;
S106、注册自定义算子后,执行步骤S103;
对于变量逻辑较复杂的,SQLite语法实现不了的,可通过自定义UDF实现,通过创建用户自定义函数可以满足复杂逻辑的变量SQL化的需求。
则相应的实现流程为:在获取到数据表后,首先创建数据库连接,注册UDF,接着根据变量SQL语句中的表名创建对应的虚拟表,并将外部数据中对应的数据插入到虚拟表中,最后执行SQL获得变量键值对,执行完毕释放数据库连接。
为避免占用大的磁盘空间和字段频繁变更,采用虚拟表存储数据,能更灵活性地进行虚拟表的映射。
相应地,在步骤S103根据变量名从数据表中提取对应的数据执行SQL语句之前,可以根据SQL语句中的表名在内存数据库中创建对应的虚拟表,并将数据表中的数据插入到虚拟表中;
则相应地,步骤S103根据变量名从数据表中提取对应的数据执行SQL语句,具体为:根据变量名从虚拟表中提取对应的数据执行SQL语句。
根据变量SQL语句中的表名创建对应的虚拟表,并将外部数据中对应的数据插入到虚拟表中,最后执行SQL获得变量键值对,执行完毕释放数据库连接。其中,采用的内存数据库,其数据不是存储在磁盘中,而是在内存中,其在数据缓存、快速算法和并行操作上都有一定的改进,因此在处理速度上比传统数据库要快。
当然,也可采用传统数据库取代内存数据库,但维护实体表的成本较高,且处理速度相对较慢,本实施例中对于该种情况不做赘述,可参照现有实现方式的介绍。
在上述实施例的基础上,为进一步满足用户核对SQL语句以及逻辑的正确性的需要,避免无用功,在步骤S101将基础信息存储于数据库之前,还可以进一步执行以下步骤:
S107、若接收到变量试算请求,确定用户指定的试算类型;
S108、根据试算类型读取相应的试算样本执行SQL语句,得到变量执行结果;
S109、若接收到信息变更请求,根据用户变更的数据更新基础信息;
S110、若接收到提交请求,执行将基础信息存储于数据库的步骤。
填写好变量基础信息后,对于编辑好的SQL语句可先执行试算,可选择导入样本、随机和单case试算中的任意方式,查看试算结果是否符合预期,当变量结果和预期不一致时,可以通过检查虚拟表和算子是否选择正确,以及SQL语句是否无误进行更正,直至最终变量值符合预期后将更正后的基础信息提交,从而可以确保SQL的逻辑正确性。
需要说明的是,本实施例中对于试算的类型不做限定,在此仅以试算类型包括:导入样本试算、随机样本试算和单事例试算中至少一种为例,可以根据实际使用需要自主添加其他类型,以实现不同的试算目的,在此不再赘述。
基于上述实施例,进一步地,在步骤S102创建与数据表之间的连接之前,可以执行以下步骤:
S111、判断数据表是否来自相同数据源;若是,执行创建与数据表之间的连接的步骤;若否,执行S112;
S112、将各数据表中的数据添加至统一管理表中。
则相应地,步骤S102创建与数据表之间的连接,具体为:创建与统一管理表表之间的连接。
对于跨源变量的加工,本实施例中提出将多个数据源的数据放到同一张表中,即统一管理表,多数据源的数据统一管理后,就会将变量计算的依赖复杂性转化为表字段维护的复杂性,且不同源的数据是以接口维度返回的,因此对于跨源变量的计算仍基于变量层面,依赖多个源的变量进行加工计算。
进一步地,在步骤S102将基础信息存储于数据库之前,为进一步兼顾线上性能和稳定性,SQL变量新增审批流差异化处理,其中PM审批变量需求合理性,RD审批SQL逻辑正确性,QA进行半自动化压测确保性能,若对线上性能影响较大,可采用自定义UDF的方法解决;三方均审核通过后,线上才可加载并计算该变量值。当然,也可以不进行上述设置,在此不做限定。
为加深对于上述方法实施例的理解,本实施例中以根据外部数据—手机通讯信息加工一个变量——本地电话通讯总时长,变量键名为phoneTotalDuration。
首先在用户在交互界面进行SQL配置,选择数据库表-phoneInfoTable(手机信息表),具体逻辑是对通讯时长(communicateDuration)求和,可直接用数据库自带的函数sum(),不需要选择自定义的函数(自定义算子,UDF),最后输入SQL语句:
select sum(communicateDuration)as phoneTotalDuration fromphoneInfoTable where ifLocal="1";
提交上述SQL语句,将其写入数据库表-变量SQL配置信息表(mg_SQL_conf),其中该表的字段有:
Figure BDA0003492902910000091
根据SQL语句中的表名在内存数据库中创建对应的虚拟表,并将数据表中的数据插入到虚拟表中,一种外部数据库虚拟表phoneInfoTable如下所示:
Figure BDA0003492902910000101
设置定时任务每10s读取表mg_SQL_conf中的数据,获取变量键名(phoneTotalDuration)、SQL语句(select sum(communicateDuration)asphoneTotalDuration from phoneInfoTable where ifLocal="1";)和自定义算子(无);
(2)然后实时请求外部数据返回如下:
Figure BDA0003492902910000102
Figure BDA0003492902910000111
(3)创建数据库连接,注册自定义算子,接着根据SQL语句中的表名(phoneInfoTable)创建对应的虚拟表,并将外部数据中对应的数据插入到虚拟表中,如下表所示:
Figure BDA0003492902910000112
(4)最后执行SQL语句获得变量键值对:{"phoneTotalDuration":"60"},释放数据库连接。
进一步地,还可以进行离线回溯,将在线变量计算逻辑在离线的适配,离线数据从FDW中获取,引入在线的公共jar包,同样经过虚拟化表和执行SQL,回溯得到新增变量值,确保在线和离线的逻辑一致性,在此不再赘述。
相应于上面的方法实施例,本发明实施例还提供了一种变量加工装置,下文描述的变量加工装置与上文描述的变量加工方法可相互对应参照。
参见图3所示,该装置包括以下模块:主要由管理端和在线端组成。
其中,管理端的功能:变量SQL的配置、验证、提交和查看;管理端新增变量SQL配置后将触发在线端对SQL配置表的加载,在线端获取全量的SQL语句和UDF函数(相当于算子),在获取外部数据后,首先创建数据库连接,注册UDF,接着根据变量SQL语句中的表名创建对应的虚拟表,并将外部数据中对应的数据插入到虚拟表中,最后执行SQL获得变量键值对,执行完毕释放数据库连接。
具体地,页面管理端主要用于获取用户填写的SQL配置的基础信息,将基础信息存储于数据库;其中,基础信息包括:变量名、SQL语句以及数据表;
在线端主要用于从数据库中确定数据表,并创建与数据表之间的连接;从数据库中提取出变量名,根据变量名从数据表中提取对应的数据执行SQL语句,得到变量键值对;释放与数据表之间的连接。
在本发明的一种具体实施方式中,页面管理端还用于:在根据变量名从数据表中提取对应的数据执行SQL语句之前,根据SQL语句中的表名在内存数据库中创建对应的虚拟表,并将数据表中的数据插入到虚拟表中;则相应地,根据变量名从数据表中提取对应的数据执行SQL语句,具体为:根据变量名从虚拟表中提取对应的数据执行SQL语句。
在本发明的一种具体实施方式中,在线端还用于:在根据变量名从数据表中提取对应的数据执行SQL语句之前,从数据库中提取出基础信息,并判断基础信息中是否存在自定义算子;若存在,注册自定义算子,执行根据变量名从数据表中提取对应的数据执行SQL语句的步骤;若不存在,执行根据变量名从数据表中提取对应的数据执行SQL语句的步骤。
在本发明的一种具体实施方式中,变量加工装置可以采用SQLite数据库引擎是轻量级的数据库引擎,处理速度相对较快,能和很多程序语言相结合;使用SQLite的内存模式,创建连接Connection,执行完后释放连接。对于数据源信息较多且数据维度单一的,采用的轻量级的SQLite数据库引擎,使用其内存模式,可灵活根据SQL语句创建对应的表,其基础服务变量加工流程如图4所示,批量执行SQL的过程,在内存中创建数据库连接,创建执行SQL的statement,接着注册自定义的算子,创建指定的表,并插入对应表的数据,最后执行SQL语句,执行完后关闭statement并释放数据库连接;对于贴源接入的数据源,可继续使用MySQL数据库对数据表进行操作和执行SQL。
相应于上面的方法实施例,本发明实施例还提供了一种计算机设备,下文描述的一种计算机设备与上文描述的一种变量加工方法可相互对应参照。
该计算机设备包括:
存储器,用于存储计算机程序;
处理器,用于执行计算机程序时实现上述方法实施例的变量加工方法的步骤。
具体的,请参考图5,为本实施例提供的一种计算机设备的具体结构示意图,该计算机设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processing units,CPU)322(例如,一个或一个以上处理器)和存储器332,存储器332存储有一个或一个以上的计算机应用程序342或数据344。其中,存储器332可以是短暂存储或持久存储。存储在存储器332的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对数据处理设备中的一系列指令操作。更进一步地,中央处理器322可以设置为与存储器332通信,在计算机设备301上执行存储器332中的一系列指令操作。
计算机设备301还可以包括一个或一个以上电源326,一个或一个以上有线或无线网络接口350,一个或一个以上输入输出接口358,和/或,一个或一个以上操作系统341。
上文所描述的变量加工方法中的步骤可以由计算机设备的结构实现。
相应于上面的方法实施例,本发明实施例还提供了一种可读存储介质,下文描述的一种可读存储介质与上文描述的一种变量加工方法可相互对应参照。
一种可读存储介质,可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述方法实施例的变量加工方法的步骤。
该可读存储介质具体可以为U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可存储程序代码的可读存储介质。
本领域技术人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

Claims (10)

1.一种变量加工方法,其特征在于,包括:
获取用户填写的SQL配置的基础信息,将所述基础信息存储于数据库;其中,所述基础信息包括:变量名、SQL语句以及数据表;
从所述数据库中确定所述数据表,并创建与所述数据表之间的连接;
从所述数据库中提取出所述变量名,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,得到变量键值对;
释放与所述数据表之间的连接。
2.根据权利要求1所述的变量加工方法,其特征在于,在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,还包括:
根据所述SQL语句中的表名在内存数据库中创建对应的虚拟表,并将所述数据表中的数据插入到所述虚拟表中;
则相应地,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,具体为:根据所述变量名从所述虚拟表中提取对应的数据执行所述SQL语句。
3.根据权利要求1所述的变量加工方法,其特征在于,在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,还包括:
从所述数据库中提取出所述基础信息,并判断所述基础信息中是否存在自定义算子;
若存在,注册所述自定义算子,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤;
若不存在,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤。
4.根据权利要求1所述的变量加工方法,其特征在于,在所述将所述基础信息存储于数据库之前,还包括:
若接收到变量试算请求,确定用户指定的试算类型;其中,试算类型包括:导入样本试算、随机样本试算和单事例试算中至少一种;
根据所述试算类型读取相应的试算样本执行所述SQL语句,得到变量执行结果;
若接收到信息变更请求,根据用户变更的数据更新所述基础信息;
若接收到提交请求,执行所述将所述基础信息存储于数据库的步骤。
5.根据权利要求1所述的变量加工方法,其特征在于,在所述创建与所述数据表之间的连接之前,还包括:
判断所述数据表是否来自相同数据源;
若是,执行所述创建与所述数据表之间的连接的步骤;
若否,将各所述数据表中的数据添加至统一管理表中,则相应地,所述创建与所述数据表之间的连接,具体为:创建与所述统一管理表表之间的连接。
6.一种变量加工装置,其特征在于,包括:
页面管理端,用于获取用户填写的SQL配置的基础信息,将所述基础信息存储于数据库;其中,所述基础信息包括:变量名、SQL语句以及数据表;
在线端,用于从所述数据库中确定所述数据表,并创建与所述数据表之间的连接;从所述数据库中提取出所述变量名,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,得到变量键值对;释放与所述数据表之间的连接。
7.根据权利要求6所述的变量加工装置,其特征在于,所述页面管理端,还用于:在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,根据所述SQL语句中的表名在内存数据库中创建对应的虚拟表,并将所述数据表中的数据插入到所述虚拟表中;则相应地,根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句,具体为:根据所述变量名从所述虚拟表中提取对应的数据执行所述SQL语句。
8.根据权利要求6所述的变量加工装置,其特征在于,所述在线端,还用于:在所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句之前,从所述数据库中提取出所述基础信息,并判断所述基础信息中是否存在自定义算子;若存在,注册所述自定义算子,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤;若不存在,执行所述根据所述变量名从所述数据表中提取对应的数据执行所述SQL语句的步骤。
9.一种计算机设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至5任一项所述变量加工方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述变量加工方法的步骤。
CN202210102435.1A 2022-01-27 2022-01-27 一种变量加工方法、装置、设备及可读存储介质 Pending CN114510497A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210102435.1A CN114510497A (zh) 2022-01-27 2022-01-27 一种变量加工方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210102435.1A CN114510497A (zh) 2022-01-27 2022-01-27 一种变量加工方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN114510497A true CN114510497A (zh) 2022-05-17

Family

ID=81548956

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210102435.1A Pending CN114510497A (zh) 2022-01-27 2022-01-27 一种变量加工方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN114510497A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115437683A (zh) * 2022-11-10 2022-12-06 平安银行股份有限公司 基于sdk的变量配置方法、装置及计算机可读存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115437683A (zh) * 2022-11-10 2022-12-06 平安银行股份有限公司 基于sdk的变量配置方法、装置及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN104866426B (zh) 软件测试综合控制方法及系统
CN114003451B (zh) 一种接口测试方法、装置、系统及介质
CN111782117B (zh) 界面的展示方法和装置、存储介质、电子装置
CN114510497A (zh) 一种变量加工方法、装置、设备及可读存储介质
CN115599347A (zh) 一种自动化代码开发实现方法和系统
CN111190814A (zh) 软件测试用例的生成方法、装置、存储介质及终端
CN113535141A (zh) 数据库操作代码的生成方法及装置
CN111078573A (zh) 一种测试报文的生成方法及装置
CN117556008A (zh) 基于大语言模型的交互方法、介质、装置和计算设备
CN117370217A (zh) 一种基于python的接口测试结果自动生成方法
CN116841898A (zh) 一种测试用例和测试脚本生成方法、装置、系统和介质
CN115048359A (zh) 一种多类型接入数据源的通用数据处理架构设计方法
CN113901025A (zh) 数据库管理方法、装置、设备和存储介质
CN114297961A (zh) 一种芯片测试用例处理方法及相关装置
CN113419957A (zh) 基于规则的大数据离线批处理性能容量扫描方法及装置
CN114356454A (zh) 对账数据处理方法、设备、存储介质及程序产品
CN114090462A (zh) 软件重复缺陷识别方法、装置、计算机设备及存储介质
CN114860566A (zh) 源代码测试方法、装置、电子设备及存储介质
CN111401020A (zh) 一种界面加载方法、系统和计算设备
CN115982055B (zh) 一种专门服务于java语言开发程序的测试方法
CN114900569B (zh) 一种测试脚本的获取方法及装置
CN113703769B (zh) 一种cli命令执行方法及相关装置
CN115373655B (zh) 一种基于标准化模板的信息协议代码自动生成方法
CN113434409A (zh) 微服务测试方法及装置
CN115599469A (zh) 交易执行方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination