CN113741868A - 业务计算任务处理方法、装置、计算机设备和存储介质 - Google Patents

业务计算任务处理方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN113741868A
CN113741868A CN202010477568.8A CN202010477568A CN113741868A CN 113741868 A CN113741868 A CN 113741868A CN 202010477568 A CN202010477568 A CN 202010477568A CN 113741868 A CN113741868 A CN 113741868A
Authority
CN
China
Prior art keywords
service
task
calculation
business
computing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010477568.8A
Other languages
English (en)
Other versions
CN113741868B (zh
Inventor
文创业
黄东庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010477568.8A priority Critical patent/CN113741868B/zh
Publication of CN113741868A publication Critical patent/CN113741868A/zh
Application granted granted Critical
Publication of CN113741868B publication Critical patent/CN113741868B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Stored Programmes (AREA)

Abstract

本申请涉及数据计算,提供一种业务计算任务处理方法、装置、计算机设备和存储介质。所述方法包括:获取业务计算任务创建请求;根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。采用本方法能够有效提高业务计算任务的开发效率和数据计算准确性。

Description

业务计算任务处理方法、装置、计算机设备和存储介质
技术领域
本申请涉及计算机技术领域,特别是涉及一种业务计算任务处理方法、装置、计算机设备和存储介质。
背景技术
随着计算机技术的迅速发展,通过软件开发能够实现各种业务。软件开发是根据业务需求建造出软件系统或者系统中的软件部分的过程。随着业务需求不断增大,软件开发中的计算业务也不断增多,各种业务系统中需要部署大量的计算任务。
传统方式中,通常是通过个性化方式逐个开发各种业务对应的计算规则,并针对每一个业务场景编写相应的计算任务。然而,这种方式需要开发人员单独编写相应的代码以进行业务数据计算。在业务计算量较大时,开发成本较高,且加大了出错概率,导致业务系统的开发效率较低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够有效提高业务计算任务的开发效率和数据计算准确性的业务计算任务处理方法、装置、计算机设备和存储介质。
一种业务计算任务处理方法,所述方法包括:
获取业务计算任务创建请求;
根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
一种业务计算任务处理装置,所述装置包括:
请求获取模块,用于获取业务计算任务创建请求;
信息获取模块,用于根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
计算单元获取模块,用于基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
任务创建模块,用于基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
在其中一个实施例中,所述信息获取模块还用于基于所述业务功能参数信息所包括的业务字段信息,确定各业务计算单元对应的业务功能标识;所述业务字段信息是通过字段配置页面预配置的。
在其中一个实施例中,所述业务计算单元预部署在业务计算平台;所述信息获取模块还用于根据所述业务功能标识查找相应的路径参数;基于所述业务功能标识和所述路径参数,从所述业务计算平台调用与所述业务功能标识相应的业务计算单元。
在其中一个实施例中,所述任务创建模块还用于基于各业务功能标识对应的业务功能参数信息,调整与所述各业务功能标识对应的业务计算单元的配置参数;基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
在其中一个实施例中,所述业务计算任务创建请求包括业务任务标识;所述任务创建模块还用于基于与所述各业务计算单元对应的各业务计算任务,生成所述业务任务标识对应的业务计算任务集合。
在其中一个实施例中,所述任务创建模块还用于基于所述业务功能参数信息和各业务功能标识确定所述各业务计算任务的任务执行序列;基于所述各业务计算任务以及相应的任务执行序列,生成所述业务任务标识对应的业务计算任务集合。
在其中一个实施例中,所述任务创建模块还用于基于所述业务任务标识,对所述各业务计算任务分配与所述业务任务标识对应的计算编号标识;基于所述各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建所述各业务计算任务对应的任务计算表;所述任务计算表用于执行所述业务计算任务时根据所述任务计算表输出相应的计算结果。
在其中一个实施例中,所述装置还包括任务发布模块,用于根据所述业务计算任务创建请求的业务任务标识,获取与所述业务任务标识对应的业务系统的业务平台接口;基于所述业务平台接口将所述业务计算任务发布至所述业务系统。
在其中一个实施例中,所述任务发布模块还用于基于所述业务平台接口对所述业务计算任务的任务状态进行校验;当所述业务计算任务校验通过后,基于所述业务平台接口将所述业务计算任务发布至所述业务系统。
在其中一个实施例中,所述各业务计算任务包括输入参数、任务计算规则和任务计算表;所述装置还包括数据处理模块,用于获取计算数据源;确定所述计算数据源对应的计算编号标识;将所述计算编号标识和所述计算数据源确定为输入参数,输入至所述计算编号标识对应的业务计算任务;基于所述业务计算任务的任务计算规则对所述计算数据源进行处理,基于所述任务计算表得到任务计算结果。
在其中一个实施例中,所述数据处理模块还用于将所述计算数据源输入至所述计算编号标识对应的业务计算任务集合;通过所述业务计算任务集合中当前业务计算任务的任务计算规则,对所述计算数据源进行处理,得到当前任务计算结果;基于所述当前任务计算结果和相应的任务计算表生成当前任务结果表;将所述当前任务结果表和所述计算编号标识确定为下一个业务计算任务的输入参数,基于所述下一个业务计算任务的任务计算规则对所述当前任务结果表进行处理,得到下一个任务结果表;继续通过所述业务计算任务集合中的各业务计算任务对所述下一个任务结果表进行处理,直到获得目标任务计算结果。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取业务计算任务创建请求;
根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取业务计算任务创建请求;
根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
上述业务计算任务处理方法、装置、计算机设备和存储介质,获取业务计算任务创建请求后,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;通过配置页面能够快速有效地配置所需的业务配置信息。基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;基于业务功能参数信息和业务计算单元,创建业务计算任务。由于业务计算单元是预配置的可复用的代码模板,由此只需要通过配置相应业务配置信息,并调用可复用的业务计算单元,就可以自动地根据基于业务功能参数信息对业务计算单元进行配置,从而生成相应的业务计算任务。从而在开发针对不同业务需求时,无需每次重复编码,通过获取可复用的业务计算单元,只需要调整参数配置就能过有效实现业务扩展,由此在复用时能够有效保证数据计算的准确性和可靠性,从而有效提高了计算任务的开发效率,并且有效保证了业务计算任务的计算准确性。
附图说明
图1为一个实施例中业务计算任务处理方法的应用环境图;
图2为一个实施例中业务计算任务处理方法的流程示意图;
图3为一个实施例中配置业务字段信息的界面示意图;
图4为一个实施例中字段定义配置的界面示意图;
图5为一个实施例中一个业务功能标识对应的业务功能参数的配置界面示意图;
图6为一个实施例中多个业务功能标识对应的业务功能参数的配置界面示意图;
图7为一个实施例中配置业务配置信息的流程图;
图8为另一个实施例中业务计算任务处理方法的流程示意图;
图9为一个实施例中表名称规范的示意图;
图10为一个实施例中基于接口表将业务计算任务发布至业务系统的示意图;
图11为一个实施例中发布业务计算任务的流程示意图;
图12为一个实施例中基于计算数据源创建任务结果表的流程示意图;
图13为又一个实施例中业务计算任务处理方法的流程示意图;
图14为一个实施例中创建的业务计算任务集合的示意图;
图15为一个实施例中各个业务计算任务的处理过程示意图;
图16为一个具体的实施例中业务计算任务处理方法的流程示意图;
图17为一个实施例中业务计算任务处理装置的结构框图;
图18为另一个实施例中业务计算任务处理装置的结构框图;
图19为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
云计算(cloud computing)是一种计算模式,它将计算任务分布在大量计算机构成的资源池上,使各种应用系统能够根据需要获取计算力、存储空间和信息服务。提供资源的网络被称为“云”。“云”中的资源在使用者看来是可以无限扩展的,并且可以随时获取,按需使用,随时扩展,按使用付费。作为云计算的基础能力提供商,会建立云计算资源池(简称云平台,一般称为IaaS(Infrastructure as a Service,基础设施即服务)平台,在资源池中部署多种类型的虚拟资源,供外部客户选择使用。云计算资源池中主要包括:计算设备(为虚拟化机器,包含操作系统)、存储设备、网络设备。
广义云计算指服务的交付和使用模式,指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关,也可是其他服务。云计算是网格计算(GridComputing)、分布式计算(DistributedComputing)、并行计算(Parallel Computing)、效用计算(Utility Computing)、网络存储(Network Storage Technologies)、虚拟化(Virtualization)、负载均衡(Load Balance)等传统计算机和网络技术发展融合的产物。随着互联网、实时数据流、连接设备多样化的发展,以及搜索服务、社会网络、移动商务和开放协作等需求的推动,云计算迅速发展起来。不同于以往的并行分布式计算,云计算的产生从理念上将推动整个互联网模式、企业管理模式发生革命性的变革。随着云时代的来临,大数据也吸引了越来越多的关注,大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
本申请提供的业务计算任务处理方法,可应用于计算机设备中。计算机设备可以为终端或服务器。可以理解的是,本申请提供的业务计算任务处理方法可以应用于终端,也可以应用于服务器,还可以应用于包括终端和服务器的系统,并通过终端和服务器的交互实现。
在其中一个实施例中,计算机设备可以为服务器。本申请提供的业务计算任务处理方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104通过网络进行通信。开发人员可以利用对应的终端102通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。服务器104获取业务计算任务创建请求后,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;通过配置页面能够快速有效地配置所需的业务配置信息。服务器104基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;基于业务功能参数信息和业务计算单元,创建业务计算任务。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机和平板电脑,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种业务计算任务处理方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
S202,获取业务计算任务创建请求。
其中,业务计算任务是指计算机设备运行相应的业务程序时所执行的计算任务,具体可以是根据业务需求信息创建的,用于实现相应的计算业务需求。通过创建业务计算任务,可以自动地实现相应的计算业务。
当需要创建业务计算任务时,开发人员可以通过对应的终端展示的配置页面,通过配置页面可以配置业务所需的业务配置信息。具体地,配置业务配置信息中包括业务功能参数和至少一个业务功能标识。
终端通过配置页面配置所需的业务配置信息后,则可以基于业务配置信息向服务器发起业务计算任务创建请求。服务器进而根据业务计算任务创建请求以及业务配置信息创建相应的业务计算任务。
S204,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。
其中,业务功能参数信息是指实现相应的计算业务需求所需的参数信息。业务功能标识是表示实现相应的业务功能所对应的标识,用于获取相应业务功能对应的业务计算单元。
其中,每个业务计算单元具有可复用性、原子性和可扩展性。可复用性即业务计算单元是可复用的代码模板,能够实现功能重复利用,基于业务计算单元的业务计算任务进行处理时,只需要传入参数:计算编号标识和上一个任务结果表,就可以实现功能复用。原子性即每个业务计算单元具有对应的一个计算功能,用于生成相应的结果表。扩展性即每个业务计算单元在运行时传入上一个任务结果表,作为计算数据源,经过计算处理后生成相应的任务结果表。
服务器获取终端发送的业务计算任务请求后,基于业务计算任务请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。其中,业务功能标识可以对应相应的业务功能参数,例如一个业务功能标识可以与该业务功能的业务功能参数相对应。
在一个实施例中,上述业务计算任务处理方法还包括:基于业务功能参数信息所包括的业务字段信息,确定各业务计算单元对应的业务功能标识;业务字段信息是通过字段配置页面预配置的。
其中,字段是指与对象或类关联的变量,每个字段由若干按照某种界限划分的相同数据类型的数据项组成。例如在数据库中,把数据表中的每一行可以为一个记录,每一个记录包含这行中的所有信息。字段是比记录更小的单位,字段集合组成记录,每个字段描述的某一特征,即数据项,并有唯一的供计算机识别的字段标识符。
具体地,业务字段信息通过预先配置的。例如可以在开发阶段进行开发配置,开发配置各种业务字段的名称和表字段。开发规则配置具体可以包括计算规则名称和表字段名称等。例如,参照图3,图3所示为一个实施例中配置业务字段信息的界面示意图。参照图4,图4为一个实施例中字段定义配置的界面示意图。
开发人员利用终端基于配置页面进行配置,通过配置页面配置业务计算需要的计算规则,以及相应的业务单元。具体地,通过配置页面可以配置业务字段信息,这些业务字段信息可以是个业务单元对应的业务功能参数。其中,各个业务功能标识对应有相应部分的业务功能参数。
例如,可以通过配置页面配置业务计算的名称、表字段名称、有效期等参数信息。以条件限制功能为例,业务功能标识可以为“限制条件”,对应的业务功能参数可以包括以下规则信息:白名单、黑名单、门槛规则和封顶规则等。通过配置页面可以配置一个或多个业务功能标识对应的业务功能参数。参照图5,图5为一个实施例中一个业务功能标识对应的业务功能参数的配置界面示意图。
进一步地,若业务计算任务中包括多个业务功能标识时,还可以通过配置多个业务功能标识对应的业务功能参数。其中,多个是指至少两个。参照图6,图6为一个实施例中多个业务功能标识对应的业务功能参数的配置界面示意图。
参照图7,图7为一个实施例中配置业务配置信息的流程图。终端通过配置页面新增配置业务任务,通过配置页面新增计算规则,并保存配置业务任务。服务器还可以基于新增的计算规则生成业务配置文件。服务器获取业务计算任务创建请求后,则可以获取对应的业务配置文件,基于业务配置文件获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。
本实施例中,通过配置页面配置所需的业务字段信息,由此能够高效地配置业务计算任务创建请求所需的业务配置信息,有效提高了业务计算任务的创建效率。
在其中一个实施例中,还可以对预配置的业务字段信息进行数据规范,具体地,可以对业务字段信息进行数据清洗,例如可以对异常值数据和非法数据等进行过滤清洗处理,从而规范业务字段信息。进一步地,还可以对各个业务计算单元进行规范。具体可以对各个业务计算单元进行分类,并根据分类结果按照各个类别将业务计算单元进行分类存储,从而对业务计算单元进行规范处理。由此使得在调用业务计算单元时,能够根据类别快速有效地获取相应的业务计算单元。
S206,基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;业务计算单元是基于代码模板预配置的。
其中,单元可以是系统中的独立成分,不可再分。业务计算单元是预配置的用于实现相应业务功能的代码模板,具体可以是根据业务功能的计算逻辑预配置的代码模板组件,通常是在各种不同的环境中能够独立执行计算任务的组件。业务计算单元都具有相应的计算功能,且每个业务计算单元都是可复用的计算单元。
业务计算单元包括预配置的所需的功能规则,通过利用业务需求相应的业务功能参数进一步配置业务计算单元的规则参数,使得配置后的业务计算单元具有完整的计算规则,从而能够实现相应业务计算任务的计算逻辑。
其中,路径参数是指业务计算单元的路径,具体可以是业务计算单元的存储路径或调用路径,用于获取业务计算单元。
具体地,服务器根据业务功能标识从路径列表中查找与业务功能标识对应的路径参数,由此可以根据路径参数,获取预配置的与业务功能标识相应的业务计算单元。例如,业务功能标识可以包括“子商户报名”、“报名账单组件”、“返佣银行关系组件”以及“买单关系组件”等。通过业务功能标识可以获取相应的业务计算单元组件。
在一个实施例中,业务计算单元预部署在业务计算平台;基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元,包括:根据业务功能标识查找相应的路径参数;基于业务功能标识和路径参数,从业务计算平台调用与业务功能标识相应的业务计算单元。
其中,业务计算单元的路径参数可以预先存储在路径参数列表中,路径参数列表可以为一个文件也可以一个数据表。路径参数可以是字符串。路径参数列表还可以是一个目录的列表,用于调用业务计算单元所在的目录。
服务器预配置各个业务功能标识对应的业务计算单元后,将预配置的业务计算单元部署在业务计算平台中,以便于在创建业务计算任务时,直接从业务计算平台中调用所需的业务计算单元。
具体地,服务器根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识后,根据业务功能标识查找相应的路径参数。具体可以从预设的路径参数列表中查找与业务功能标识对应的路径参数。服务器进而基于业务功能标识和路径参数,从业务计算平台调用与业务功能标识相应的业务计算单元。
本实施例中,通过将预配置的业务计算单元存储在大数据平台,并构建路径参数列表。由此在获取计算单元时,能够快速有效地根据路径参数获取相应的业务计算单元,从而有效实现业务计算单元的复用。
S208,基于业务功能参数信息和业务计算单元,创建业务计算任务。
其中,所创建的业务计算任务可以直接用于对待处理的数据源进行相应的业务处理。
服务器获取与业务功能标识相应的业务计算单元后,利用与业务功能标识对应的业务功能参数信息对业务计算单元进行参数配置,根据参数配置后的业务计算单元,创建与各业务计算单元对应的业务计算任务。由此能够快速有效地基于预配置的可复用的业务计算单元创建所需的业务计算任务。
上述业务计算任务处理方法中,服务器获取业务计算任务创建请求后,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;通过配置页面能够快速有效地配置所需的业务配置信息。服务器基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;基于业务功能参数信息和业务计算单元,创建业务计算任务。由于业务计算单元是预配置的可复用的代码模板,由此只需要通过配置相应业务配置信息,并调用可复用的业务计算单元,就可以自动地根据基于业务功能参数信息对业务计算单元进行配置,从而生成相应的业务计算任务。从而在开发针对不同业务需求时,无需每次重复编码,通过获取可复用的业务计算单元,只需要调整参数配置就能过有效实现业务扩展,由此在复用时能够有效保证数据计算的准确性和可靠性,从而有效提高了计算任务的开发效率,并且有效保证了业务计算任务的计算准确性。
在一个实施例中,基于业务功能参数信息和业务计算单元,创建业务计算任务,包括:基于各业务功能标识对应的业务功能参数信息,调整与各业务功能标识对应的业务计算单元的配置参数;基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
其中,业务计算单元为预配置的代码模板。业务计算单元包括预配置的各单元所需的功能规则,通过利用业务需求相应的业务功能参数进一步配置业务计算单元的规则参数,使得配置后的业务计算单元具有完整的计算规则,从而能够实现相应业务计算任务的计算逻辑。
服务器获取业务计算任务创建请求后,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。具体地,服务器可以获取各个业务功能表示对应的业务功能参数信息。基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元后,基于各业务功能标识对应的业务功能参数信息,调整与各业务功能标识对应的业务计算单元的配置参数。
具体地,业务功能参数信息中可以包括个业务字段对应的参数值。服务器可以将各业务功能标识对应的业务功能参数信息的参数值,填充至相应的业务计算单元的计算规则字段中,使得配置后的业务计算单元具有完整的计算规则,从而实现对业务计算单元的参数进行配置。配置成功后,服务器进而基于配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
本实施例中,通过业务功能参数对获取的业务计算单元进行配置,从而能够有效使得配置后的业务计算单元具有业务需求所需的计算规则,从而能够实现相应业务计算任务的计算逻辑,有效提高了业务计算任务的配置效率。
在一个实施例中,业务计算任务创建请求包括业务任务标识;上述业务计算任务处理方法还包括:基于与各业务计算单元对应的各业务计算任务,生成业务任务标识对应的业务计算任务集合。
其中,若业务计算任务创建请求后,获取通过配置页面配置了至少一个业务功能标识,并通过配置页面配置了各个业务功能标识对应的业务功能参数信息。
具体地,服务器获取业务计算任务创建请求,业务计算任务创建请求携带了业务任务标识。其中,业务任务标识可以是这个业务计算任务创建请求对应的业务需求的标识。
服务器获取业务计算任务创建请求后,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。具体地,服务器可以获取各个业务功能表示对应的业务功能参数信息。基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元后,基于各业务功能标识对应的业务功能参数信息,调整与各业务功能标识对应的业务计算单元的配置参数。服务器进而基于与各业务计算单元对应的各业务计算任务,生成业务任务标识对应的业务计算任务集合。
本实施例中,当业务计算任务创建请求包括多个业务功能标识时,能够有效地直接创建业务计算任务创建请求所携带的业务任务标识对应的业务计算任务集合,由此能够高效地根据业务需求创建所需的业务计算任务。
在一个实施例中,如图8所示,提供了一种业务计算任务处理方法,包括以下步骤:
S802,获取业务计算任务创建请求;业务计算任务创建请求包括业务任务标识。
S804,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。
S806,基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;业务计算单元是基于代码模板预配置的。
S808,基于各业务功能标识对应的业务功能参数信息,确定各业务计算任务的任务执行序列,并调整与各业务功能标识对应的业务计算单元的配置参数。
S810,基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
S812,基于与各业务计算单元对应的业务计算任务以及任务执行序列,生成业务任务标识对应的业务计算任务集合。
其中,任务执行序列是指业务计算任务在相应的运行环境中的执行顺序。任务执行序列可以通过在配置页面配置得到。
服务器获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识,基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元后。服务器进而基于各业务功能标识对应的业务功能参数信息,确定各业务计算任务的任务执行序列,并调整与各业务功能标识对应的业务计算单元的配置参数。
具体地,通过配置页面配置业务配置信息时,配置页面中包括了各个业务功能标识的配置顺序。服务器获取通过配置页面所配置的各个业务功能标识的配置顺序,并将各个业务功能标识的配置顺序确定为各业务计算任务的任务执行序列,由此能够有效地根据业务功能标识确定对应的各业务计算任务的任务执行序列。
在另一个实施例中,终端在配置业务配置信息时,还可以在业务功能参数信息中自定义配置各业务功能标识对应的执行序列,并根据各业务功能标识的执行序列确定为各业务计算任务的任务执行序列。
服务器基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。服务器进而基于与各业务计算单元对应的业务计算任务以及任务执行序列,生成业务任务标识对应的业务计算任务集合。
本实施例中,当业务计算任务创建请求中需要创建多个业务计算任务时,通过所配置的业务功能参数信息和各业务功能标识,确定各业务计算任务的任务执行序列,从而能够有效地生成包括多个业务计算任务的业务计算任务集合,有效提高了业务计算任务的创建效率。
在一个实施例中,上述业务计算任务处理方法还包括:基于业务任务标识,对各业务计算任务分配与业务任务标识对应的计算编号标识;基于各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建各业务计算任务对应的任务计算表;任务计算表用于执行业务计算任务时根据任务计算表输出相应的计算结果。
其中,任务计算表是指各个业务计算单元用于根据具体的业务数据源产出相应的结果的模板表,任务计算表可以是基于各业务字段信息创建的表结构,即计算过程表。任务计算表可以是用于临时保存数据的虚拟的数据表,用于业务计算任务对计算数据源进行计算处理时,生成相应的计算结果表。其中,计算编号标识是指一个计算业务所包括的业务计算任务的标识,同一个业务任务标识下的各个业务计算任务的计算编号标识相同。
服务器基于调整配置参数后的业务计算单元,创建与各业务计算单元对应的业务计算任务后,还根据个业务计算任务中所包括的业务字段信息创建对应的任务计算表。具体地,服务器根据业务计算任务创建请求携带的业务任务标识,对各业务计算任务分配与业务任务标识对应的计算编号标识。服务器则基于各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建各业务计算任务对应的任务计算表。
服务器创建各业务计算任务以及相应的任务计算表后,可以对获取的计算数据源进行处理。服务器对计算数据源进行处理时,则根据任务计算表输出相应的任务计算结果,具体可以基于任务计算表输出对计算数据源进行处理后的任务结果表。任务结果表即为基于任务计算表得到的最终结果表。
例如,如图9所示,为一个实施例中表名称规范的示意图。任务任务计算表包括类别标识、项目名称、业务计算名称、计算单元简称以及时间规则等信息。其中,类别标识可以用于区分计算过程表和最终结果表;项目名称可以业务任务标识对应的业务名称;业务计算名称可以是业务任务标识;计算单元简称可以是与业务功能标识对应的字符简称;时间规则可以是生成计算结果表的时间。其中,基于任务计算表得到的每个业务计算单元对应的任务结果表的表名称都是唯一的。例如,任务计算表的命名规则可以为:t_{分类模块}_{项目名称}_{业务计算名称}_{单元简称}_{时间规则},举例:t_dw_commission_facepay_blacklist_month,dw是计算过程表,commission表是计算佣金项目,facepay是一个智慧零售业务,blacklist是可复用计算单元的黑名单过滤规则,month表示按月计算。
时间规则可以为业务计算任务的生命周期,生命周期可以根据项目的需求来定。每个任务结果表可以是离线大数据平台里面的HIVE表,在数据落地是则基于任务计算表生成任务结果表。
本实施例中,通过创建各业务计算任务对应的任务计算表,可以业务计算任务对计算数据源进行处理时,能够高效准确地生成相应的任务结果表,从而有效提高了计算任务处理效率。
在一个实施例中,基于业务功能参数信息和业务计算单元,创建业务计算任务之后,还包括:根据业务计算任务创建请求的业务任务标识,获取与业务任务标识对应的业务系统的业务平台接口;基于业务平台接口将业务计算任务发布至业务系统。
其中,业务系统是指提供给基础人员使用的系统,是对业务处理过程进行针对性支持的信息系统,能够为某项工作的完成提供有力的工具支撑。比如ERP系统,可以看作是典型的业务处理型系统,能够对相关生产、采购等业务环节,基于某些功能模块提供很好的支持。
业务平台接口可以是业务开发接口,业务开发接口是指面向业务开发者、用以编写应用业务逻辑的接口,通过业务开发接口编写的业务逻辑可通过业务加载接口加载到业务系统中,此后业务逻辑可在业务系统中执行,并通过业务接口访问底层网络资源。开发人员可以预先配置各个业务系统的接口表,以定义各个业务系统对应的数据接口。其中,接口表可以基于数据表的定义表名称和字段名称的规范进行配置,以实现不同系统间的并行开发。例如,业务平台接口可以为离线大数据平台(TDW)提供的开发接口,比如可以包括创建计算任务、修改计算任务以及导入导出数据等接口。例如,参照图10,图10为一个实施例中基于接口表将业务计算任务发布至业务系统的示意图。不同业务系统间对接数据接口,可以由数据开发人员定义,上游业务系统提供给下游业务系统的接口表,可以由下游的数据开发人员定义,上游业务系统可以将下游的接口负责写入对应的数据接口表中。
服务器基于各业务功能标识对应的业务计算单元和业务功能参数,创建业务计算任务后,进一步根据业务计算任务创建请求的业务任务标识,获取与业务任务标识对应的业务系统的业务平台接口,并基于业务平台接口将业务计算任务发布至业务系统,由此能够有效地将创建的业务计算任务进行发布,从而有效地提高了业务计算任务的创建和开发效率。
在一个实施例中,上述业务计算任务处理方法还包括:基于业务平台接口对业务计算任务的任务状态进行校验;当业务计算任务校验通过后,基于业务平台接口将业务计算任务发布至业务系统。
服务器基于各业务功能标识对应的业务计算单元和业务功能参数,创建业务计算任务后,根据业务计算任务创建请求的业务任务标识,获取与业务任务标识对应的业务系统的业务平台接口。服务器基于业务平台接口对业务计算任务的任务状态进行校验,以验证业务计算任务是否发布成功。
具体地,服务器调用业务计算任务的接口,并校验是否返回任务创建成功的任务编号标识和任务创建成功状态。若任务状态成功后,再根据任务编号标识调用业务平台节后,查找相应的业务计算任务是否存在。若任务状态成功且业务计算任务已存在,则确认业务计算任务校验通过。当业务计算任务校验通过后,基于业务平台接口将业务计算任务发布至业务系统。例如,参照图11,如图11所示,为一个实施例中发布业务计算任务的流程示意图。其中,服务器创建业务计算任务后,调用大数据平台任务接口对业务计算任务进行发布。服务器基于平台接口判断业务计算任务是否发布成功。若发布未成功则重新调用大数据平台任务接口对业务计算任务进行发布。若发布成功,则咋相应的业务系统中生成业务计算任务。
本实施例中,基于业务平台接口将业务计算任务发布至业务系统,并对发布的业务计算任务进行验证,由此能够有效地将创建的业务计算任务进行发布,并保证了发布的业务计算任务的有效性,有效地提高了业务计算任务的创建和开发效率。
在一个实施例中,各业务计算任务包括输入参数、任务计算规则和任务计算表;基于业务功能参数信息和业务计算单元,创建业务计算任务之后,还包括:获取计算数据源;确定计算数据源对应的计算编号标识;将计算编号标识和计算数据源确定为输入参数,输入至计算编号标识对应的业务计算任务;基于业务计算任务的任务计算规则对计算数据源进行处理,基于任务计算表得到任务计算结果。
其中,运行时的各个业务计算任务均包括相应的输入参数、任务计算规则和任务计算表。计算数据源是指待处理的业务数据。输入参数是指描述从环境向系统输入信息的一组变量,即可以将计算数据源作为业务计算任务的输入参数。任务计算规则是指已创建的业务计算任务中所包括的计算规则,即计算逻辑,用于根据配置的计算逻辑对计算数据源进行相应的业务处理。任务计算表是基于业务计算任务的计算逻辑对应的计算过程表,用于对计算数据源进行处理后生成对应的任务结果表。
在其中一个实施例中,服务器获取计算数据源后,还可以对计算数据源进行数据清洗,例如包括异常值处理、非法数据过滤等处理。进而通过业务计算任务的计算规则流程对计算数据源进行相应的计算处理,包括对数据统计处理等,比如计算月总用户数、月总订单数、月订单增长笔数等。
服务器基于各业务功能标识对应的业务计算单元和业务功能参数,创建业务计算任务并发布后,可以获取计算数据源。通过所创建的业务计算任务对计算数据源进行处理。
计算数据源可以是终端基于业务请求向服务器发送的,也可以是业务系统中待处理的计算数据源。其中,计算数据源包括业务任务标识。服务器可以根据业务任务标识确定计算数据源对应的计算编号标识。具体地,计算编号标识可以与业务任务标识相同,也可以与业务任务标识不同。其中,业务任务标识所对应的各个业务计算任务的计算编号标识相同,由此可以有效保证同一个业务任务标识下的多个业务计算任务是在同一个业务计算链上。其中,业务计算链表示实现业务功能需求所需要的上游业务计算和下游业务计算。
具体地,服务器将计算数据源和对应的计算编号标识确定为输入参数,输入至计算编号标识对应的业务计算任务。服务器则基于业务计算任务的任务计算规则对计算数据源进行处理,并基于任务计算表得到任务计算结果。其中,服务器通过业务计算任务对每次输入的计算数据源进行计算处理时,均可以基于任务计算表和计算结果自动生成相应的任务结果表。例如,如图12所示,为一个实施例中基于计算数据源创建任务结果表的流程示意图。服务器将计算数据源传入至业务计算任务后,业务计算任务对计算数据源进行相应的计算处理。并基于计算处理过程中的自动化计算数据流,根据业务计算单元的字段名称、表名称、配置表名称字段等信息,自动创建对应的任务结果表。
本实施例中,通过基于可复用的业务计算单元创建业务计算任务后,由于可复用的业务计算单元是经过验证的,在此复用时能够有效保证数据计算的准确性和可靠性,从而能够高效地利用业务计算任务对计算数据源进行计算处理,有效提高了数据处理效率。
在一个实施例中,如图13所示,为一个实施例中通过业务计算任务对计算数据源进行处理的流程示意图,具体包括以下步骤:
S1302,获取计算数据源;确定计算数据源对应的计算编号标识。
S1304,将计算编号标识和所述计算数据源确定为输入参数,将计算数据源输入至计算编号标识对应的业务计算任务集合。
S1306,通过业务计算任务集合中当前业务计算任务的任务计算规则,对计算数据源进行处理,得到当前任务计算结果;基于当前任务计算结果和相应的任务计算表生成当前任务结果表;
S1308,将当前任务结果表和计算编号标识确为下一个业务计算任务的输入参数,基于下一个业务计算任务的任务计算规则对当前任务结果表进行处理,得到下一个任务结果表;
S1310,继续通过业务计算任务集合中的各业务计算任务对下一个任务结果表进行处理,直到获得目标任务计算结果。
其中,若业务任务标识下包括多个业务计算任务,则业务计算任务集合中各个业务计算任务的计算编号标识一致,且业务计算任务集合中的各个业务计算任务在同一个业务计算链上。
若业务任务标识下包括多个业务计算任务时,服务器创建的则为业务任务标识对应的业务计算任务集合。服务器获取计算数据源后,将计算数据源和对应的计算编号标识确定为输入参数,将计算数据源输入至计算编号标识对应的业务计算任务集合。
服务器首先将计算数据源输入至业务计算任务集合中的首个业务计算任务,首个业务计算任务基于对应的任务计算规则对计算数据源进行处理,并基于任务计算表生成对应的任务结果表。每个业务计算任务传入上一个业务计算任务的任务结果表作为计算数据源进行计算处理。
具体地,服务器通过业务计算任务集合中当前业务计算任务的任务计算规则,对计算数据源进行处理,得到当前任务计算结果;基于当前任务计算结果和相应的任务计算表生成当前任务结果表。当前的业务计算任务对计算数据源进行处理得当任务计算结果后,则将当前任务结果表作为下一个业务计算任务的计算数据源,并确定为输入参数,传入下一个业务计算任务中。下一个业务计算任务基于相应的任务计算规则对输入的计算数据源进行计算处理后,得到相应的下一个任务计算结果。服务器进而继续通过业务计算任务集合中的各业务计算任务对下一个任务结果表进行处理,直到获得目标任务计算结果。由此能够有效地对计算数据源进行相应的完整的计算处理。
例如,参照图14,如图14所示,为一个实施例中创建的业务计算任务集合的示意图。业务计算任务集合中的各个业务计算任务组成计算业务的业务计算链。计算业务可以为各个业务任务标识对应的计算业务。参照图15,如图15所示,为一个实施例中各个业务计算任务的处理过程示意图。
本实施例中,基于可复用的业务计算单元创建业务计算任务后,通过所创建的各业务计算任务依次对计算数据源进行计算处理,由此在基于复用的业务计算单元创建的业务计算任务处理计算数据源时,能够有效保证数据计算的准确性和可靠性,从而能够高效地利用业务计算任务对计算数据源进行计算处理,有效提高了数据处理效率。
在一个具体的实施例中,如图16所示,提供了一种具体的业务计算任务处理方法,包括以下步骤:
S1602,获取业务计算任务创建请求;业务计算任务创建请求包括业务任务标识。
S1604,根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识。
S1606,根据业务功能标识查找相应的路径参数;基于业务功能标识和路径参数,从业务计算平台调用与业务功能标识相应的业务计算单元。
S1608,基于各业务功能标识对应的业务功能参数信息,调整与各业务功能标识对应的业务计算单元的配置参数;基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
S1610,基于业务功能参数信息和各业务功能标识确定各业务计算任务的任务执行序列。
S1612,基于各业务计算任务以及相应的任务执行序列,生成业务任务标识对应的业务计算任务集合。
S1614,基于业务任务标识,对各业务计算任务分配与业务任务标识对应的计算编号标识。
S1616,基于各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建各业务计算任务对应的任务计算表。
S1618,根据业务计算任务创建请求的业务任务标识,获取与业务任务标识对应的业务系统的业务平台接口。
S1620,基于业务平台接口将业务计算任务发布至业务系统。
本实施例中,由于业务计算单元是预配置的可复用的代码模板,由此只需要通过配置相应业务配置信息,并调用可复用的业务计算单元,就可以自动地根据基于业务功能参数信息对业务计算单元进行配置,从而生成相应的业务计算任务。从而在开发针对不同业务需求时,无需每次重复编码,通过获取可复用的业务计算单元,只需要调整参数配置就能过有效实现业务扩展,由此在复用时能够有效保证数据计算的准确性和可靠性,从而有效提高了计算任务的开发效率。
本申请还提供一种应用场景,该应用场景应用上述的业务计算任务处理方法。具体地,该业务计算任务处理方法在该应用场景的应用如下:
终端通过配置页面配置业务配置信息后,服务器可以基于业务计算任务创建请求获取业务配置信息中的业务功能参数信息以及至少一个业务功能标识。服务器基于业务功能标识对应的路径参数,获取与各业务功能标识相应的业务计算单元;基于业务功能参数信息和各业务计算单元,创建相应的离线业务计算任务,并将离线业务计算任务发布至相应的业务系统。其中,业务系统为基于大数据离线计算平台的业务计算系统。
通过可复用的业务计算单元创建相应的离线业务计算任务,能够有效地基于代码复用通过配置实现个性化的业务计算任务,从而提高了数据计算业务的开发效率,在海量数据的离线计算处理场景中,大大提高了生产效率。同时通过配置方式,可以有效减少在计算过程中的出错率,有效保证了数据计算处理的准确性。
本申请还另外提供一种应用场景,该应用场景应用上述的业务计算任务处理方法。具体地,该业务计算任务处理方法在该应用场景的应用如下:
服务器基于业务计算任务创建请求,获取业务配置信息中的业务功能参数信息以及至少一个业务功能标识后,基于业务功能标识对应的路径参数,获取与各业务功能标识相应的业务计算单元;基于业务功能参数信息和各业务计算单元,创建相应的实时业务计算任务,并将实时业务计算任务发布至相应的业务系统。其中,业务系统可以为基于关系型数据库平台的业务计算系统。
通过可复用的业务计算单元创建相应的实时业务计算任务,能够有效地基于代码复用通过配置实现个性化的业务计算任务,从而提高了数据计算业务的开发效率。同时通过配置方式,可以有效减少在计算过程中的出错率。在数据量不大的实时计算处理场景中,能够有效保证数据的处理效率,同时能够有效保证数据计算处理的准确性。
应该理解的是,虽然图2、8、13、16的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2、8、13、16中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图17所示,提供了一种业务计算任务处理装置1700,该装置可以采用软件模块或硬件模块,或者是二者的结合成为计算机设备的一部分,该装置具体包括:请求获取模块1702、信息获取模块1704、计算单元获取模块1706和任务创建模块1708,其中:
请求获取模块1702,用于获取业务计算任务创建请求;
信息获取模块1704,用于根据业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
计算单元获取模块1706,用于基于业务功能标识对应的路径参数,获取与业务功能标识相应的业务计算单元;业务计算单元是基于代码模板预配置的;
任务创建模块1708,用于基于业务功能参数信息和业务计算单元,创建业务计算任务。
在一个实施例中,信息获取模块1704还用于基于业务功能参数信息所包括的业务字段信息,确定各业务计算单元对应的业务功能标识;业务字段信息是通过字段配置页面预配置的。
在一个实施例中,业务计算单元预部署在业务计算平台;信息获取模块1704还用于根据业务功能标识查找相应的路径参数;基于业务功能标识和路径参数,从业务计算平台调用与业务功能标识相应的业务计算单元。
在一个实施例中,任务创建模块1708还用于基于各业务功能标识对应的业务功能参数信息,调整与各业务功能标识对应的业务计算单元的配置参数;基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
在一个实施例中,业务计算任务创建请求包括业务任务标识;任务创建模块1708还用于基于与各业务计算单元对应的各业务计算任务,生成业务任务标识对应的业务计算任务集合。
在一个实施例中,任务创建模块1708还用于基于业务功能参数信息和各业务功能标识确定各业务计算任务的任务执行序列;基于各业务计算任务以及相应的任务执行序列,生成业务任务标识对应的业务计算任务集合。
在一个实施例中,任务创建模块1708还用于基于业务任务标识,对各业务计算任务分配与业务任务标识对应的计算编号标识;基于各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建各业务计算任务对应的任务计算表;任务计算表用于执行业务计算任务时根据任务计算表输出相应的计算结果。
在一个实施例中,上述业务计算任务处理装置还包括任务发布模块,用于根据业务计算任务创建请求的业务任务标识,获取与业务任务标识对应的业务系统的业务平台接口;基于业务平台接口将业务计算任务发布至业务系统。
在一个实施例中,任务发布模块还用于基于业务平台接口对业务计算任务的任务状态进行校验;当业务计算任务校验通过后,基于业务平台接口将业务计算任务发布至业务系统。
在一个实施例中,如图18所示,各业务计算任务包括输入参数、任务计算规则和任务计算表;上述业务计算任务处理装置1700还包括数据处理模块1710,用于获取计算数据源;确定计算数据源对应的计算编号标识;将计算编号标识和计算数据源确定为输入参数,输入至计算编号标识对应的业务计算任务;基于业务计算任务的任务计算规则对计算数据源进行处理,基于任务计算表得到任务计算结果。
在一个实施例中,数据处理模块1710还用于将计算数据源输入至计算编号标识对应的业务计算任务集合;通过业务计算任务集合中当前业务计算任务的任务计算规则,对计算数据源进行处理,得到当前任务计算结果;基于当前任务计算结果和相应的任务计算表生成当前任务结果表;将当前任务结果表和计算编号标识确定为下一个业务计算任务的输入参数,基于下一个业务计算任务的任务计算规则对当前任务结果表进行处理,得到下一个任务结果表;继续通过业务计算任务集合中的各业务计算任务对下一个任务结果表进行处理,直到获得目标任务计算结果。
关于业务计算任务处理装置的具体限定可以参见上文中对于业务计算任务处理方法的限定,在此不再赘述。上述业务计算任务处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图19所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储业务功能参数信息、业务功能标识、业务计算单元等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种业务计算任务处理方法。
本领域技术人员可以理解,图19中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (15)

1.一种业务计算任务处理方法,其特征在于,所述方法包括:
获取业务计算任务创建请求;
根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述业务功能参数信息所包括的业务字段信息,确定各业务计算单元对应的业务功能标识;所述业务字段信息是通过字段配置页面预配置的。
3.根据权利要求1所述的方法,其特征在于,所述业务计算单元预部署在业务计算平台;所述基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元,包括:
根据所述业务功能标识查找相应的路径参数;
基于所述业务功能标识和所述路径参数,从所述业务计算平台调用与所述业务功能标识相应的业务计算单元。
4.根据权利要求1所述的方法,其特征在于,所述基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务,包括:
基于各业务功能标识对应的业务功能参数信息,调整与所述各业务功能标识对应的业务计算单元的配置参数;
基于调整配置参数后的业务计算单元,分别创建与各业务计算单元对应的业务计算任务。
5.根据权利要求4所述的方法,其特征在于,所述业务计算任务创建请求包括业务任务标识;所述方法还包括:
基于与所述各业务计算单元对应的各业务计算任务,生成所述业务任务标识对应的业务计算任务集合。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
基于所述业务功能参数信息和各业务功能标识确定所述各业务计算任务的任务执行序列;
基于所述各业务计算任务以及相应的任务执行序列,生成所述业务任务标识对应的业务计算任务集合。
7.根据权利要求5所述的方法,其特征在于,所述方法还包括:
基于所述业务任务标识,对所述各业务计算任务分配与所述业务任务标识对应的计算编号标识;
基于所述各业务计算任务的计算编号标识、任务执行序列和业务字段信息,分别创建所述各业务计算任务对应的任务计算表;所述任务计算表用于执行所述业务计算任务时根据所述任务计算表输出相应的计算结果。
8.根据权利要求1所述的方法,其特征在于,所述基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务之后,还包括:
根据所述业务计算任务创建请求的业务任务标识,获取与所述业务任务标识对应的业务系统的业务平台接口;
基于所述业务平台接口将所述业务计算任务发布至所述业务系统。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
基于所述业务平台接口对所述业务计算任务的任务状态进行校验;
当所述业务计算任务校验通过后,基于所述业务平台接口将所述业务计算任务发布至所述业务系统。
10.根据权利要求1至9任意一项所述的方法,其特征在于,所述各业务计算任务包括输入参数、任务计算规则和任务计算表;所述基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务之后,还包括:
获取计算数据源;确定所述计算数据源对应的计算编号标识;
将所述计算编号标识和所述计算数据源确定为输入参数,输入至所述计算编号标识对应的业务计算任务;
基于所述业务计算任务的任务计算规则对所述计算数据源进行处理,基于所述任务计算表得到任务计算结果。
11.根据权利要求10所述的方法,其特征在于,所述基于所述业务计算任务的任务计算规则对所述计算数据源进行处理,基于所述任务计算表得到任务计算结果,包括:
将所述计算数据源输入至所述计算编号标识对应的业务计算任务集合;
通过所述业务计算任务集合中当前业务计算任务的任务计算规则,对所述计算数据源进行处理,得到当前任务计算结果;基于所述当前任务计算结果和相应的任务计算表生成当前任务结果表;
将所述当前任务结果表和所述计算编号标识确定为下一个业务计算任务的输入参数,基于所述下一个业务计算任务的任务计算规则对所述当前任务结果表进行处理,得到下一个任务结果表;
继续通过所述业务计算任务集合中的各业务计算任务对所述下一个任务结果表进行处理,直到获得目标任务计算结果。
12.一种业务计算任务处理装置,其特征在于,所述装置包括:
请求获取模块,用于获取业务计算任务创建请求;
信息获取模块,用于根据所述业务计算任务创建请求,获取通过配置页面配置的业务功能参数信息以及至少一个业务功能标识;
计算单元获取模块,用于基于所述业务功能标识对应的路径参数,获取与所述业务功能标识相应的业务计算单元;所述业务计算单元是基于代码模板预配置的;
任务创建模块,用于基于所述业务功能参数信息和所述业务计算单元,创建业务计算任务。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括任务处理模块,用于获取计算数据源;确定所述计算数据源对应的计算编号标识;将所述计算编号标识和所述计算数据源输入至所述计算编号标识对应的业务计算任务;基于所述业务计算任务的任务计算规则对所述计算数据源进行处理,得到任务计算结果。
14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述的方法的步骤。
15.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。
CN202010477568.8A 2020-05-29 2020-05-29 业务计算任务处理方法、装置、计算机设备和存储介质 Active CN113741868B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010477568.8A CN113741868B (zh) 2020-05-29 2020-05-29 业务计算任务处理方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010477568.8A CN113741868B (zh) 2020-05-29 2020-05-29 业务计算任务处理方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN113741868A true CN113741868A (zh) 2021-12-03
CN113741868B CN113741868B (zh) 2024-05-24

Family

ID=78724809

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010477568.8A Active CN113741868B (zh) 2020-05-29 2020-05-29 业务计算任务处理方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN113741868B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115277573A (zh) * 2022-08-09 2022-11-01 康键信息技术(深圳)有限公司 发布应用任务的负载均衡处理方法及装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150289944A1 (en) * 2014-04-09 2015-10-15 Koninklijke Philips N.V Devices, systems and methods for authenticated intravascular device use and reuse
US20160299791A1 (en) * 2014-01-14 2016-10-13 Tencent Technology (Shenzhen) Company Limited Method And Apparatus For Processing Computational Task
CN106095534A (zh) * 2016-06-07 2016-11-09 百度在线网络技术(北京)有限公司 一种计算任务处理方法和系统
CN109582681A (zh) * 2018-10-26 2019-04-05 平安科技(深圳)有限公司 业务数据处理方法、装置、计算机设备及存储介质
CN109597842A (zh) * 2018-12-14 2019-04-09 深圳前海微众银行股份有限公司 数据实时计算方法、装置、设备及计算机可读存储介质
CN110472747A (zh) * 2019-08-16 2019-11-19 第四范式(北京)技术有限公司 用于执行多机器学习任务的分布式系统及其方法
CN111026797A (zh) * 2019-12-02 2020-04-17 卫盈联信息技术(深圳)有限公司 业务数据处理方法、服务器及存储介质
CN111131516A (zh) * 2019-12-31 2020-05-08 中国联合网络通信集团有限公司 业务的配置方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160299791A1 (en) * 2014-01-14 2016-10-13 Tencent Technology (Shenzhen) Company Limited Method And Apparatus For Processing Computational Task
US20150289944A1 (en) * 2014-04-09 2015-10-15 Koninklijke Philips N.V Devices, systems and methods for authenticated intravascular device use and reuse
CN106095534A (zh) * 2016-06-07 2016-11-09 百度在线网络技术(北京)有限公司 一种计算任务处理方法和系统
CN109582681A (zh) * 2018-10-26 2019-04-05 平安科技(深圳)有限公司 业务数据处理方法、装置、计算机设备及存储介质
CN109597842A (zh) * 2018-12-14 2019-04-09 深圳前海微众银行股份有限公司 数据实时计算方法、装置、设备及计算机可读存储介质
CN110472747A (zh) * 2019-08-16 2019-11-19 第四范式(北京)技术有限公司 用于执行多机器学习任务的分布式系统及其方法
CN111026797A (zh) * 2019-12-02 2020-04-17 卫盈联信息技术(深圳)有限公司 业务数据处理方法、服务器及存储介质
CN111131516A (zh) * 2019-12-31 2020-05-08 中国联合网络通信集团有限公司 业务的配置方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
戴紫彬;曲彤洲;: "基于预配置和配置重用的粗粒度动态可重构系统任务调度技术", 电子与信息学报, no. 06, 28 February 2019 (2019-02-28) *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115277573A (zh) * 2022-08-09 2022-11-01 康键信息技术(深圳)有限公司 发布应用任务的负载均衡处理方法及装置
CN115277573B (zh) * 2022-08-09 2024-09-13 康键信息技术(深圳)有限公司 发布应用任务的负载均衡处理方法及装置

Also Published As

Publication number Publication date
CN113741868B (zh) 2024-05-24

Similar Documents

Publication Publication Date Title
CN108958714B (zh) 业务组件式开发方法、装置、计算机设备及存储介质
CN111176802B (zh) 任务处理方法、装置、电子设备及存储介质
CN110233741B (zh) 服务计费方法、装置、设备及存储介质
CN112101994A (zh) 会员权益管理方法、装置、计算机设备和可读存储介质
CN111598575A (zh) 业务流程控制方法、装置、电子设备和可读存储介质
US20170033979A1 (en) Restoration of consistent regions within a streaming environment
CN114531477B (zh) 功能组件的配置方法、装置、计算机设备和存储介质
CN114327374A (zh) 业务流程的生成方法、装置及计算机设备
CN110717647A (zh) 决策流构建方法、装置、计算机设备和存储介质
CN112685091A (zh) 基于大数据的业务请求处理方法、装置、设备和介质
CN111988429A (zh) 算法调度方法以及系统
CN110781180A (zh) 一种数据筛选方法和数据筛选装置
CN113867600A (zh) 处理流式数据的开发方法、装置和计算机设备
CN112416488A (zh) 一种用户画像实现的方法、装置、计算机设备及计算机可读存储介质
CN110737425A (zh) 一种计费平台系统的应用程序的建立方法及装置
CN114581241A (zh) 智能合约的处理方法和装置、处理器及电子设备
CN113741868B (zh) 业务计算任务处理方法、装置、计算机设备和存储介质
CN113360210A (zh) 数据对账方法、装置、计算机设备和存储介质
CN109389271B (zh) 应用性能管理方法及系统
CN116521509A (zh) 智能合约测试方法、装置、设备、存储介质及产品
CN115914219A (zh) 任务请求处理方法、装置、系统、可读存储介质和电子设备
CN114254278A (zh) 用户账号合并方法、装置、计算机设备以及存储介质
CN115686811A (zh) 进程管理方法、装置、计算机设备及存储介质
CN112799797A (zh) 一种任务管理的方法和装置
CN112418796A (zh) 子流程节点激活方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant