CN110297850B - 特征作业集发布方法、装置、电子设备及存储介质 - Google Patents

特征作业集发布方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN110297850B
CN110297850B CN201910452934.1A CN201910452934A CN110297850B CN 110297850 B CN110297850 B CN 110297850B CN 201910452934 A CN201910452934 A CN 201910452934A CN 110297850 B CN110297850 B CN 110297850B
Authority
CN
China
Prior art keywords
feature
job
storage space
issued
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910452934.1A
Other languages
English (en)
Other versions
CN110297850A (zh
Inventor
姜丹薇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201910452934.1A priority Critical patent/CN110297850B/zh
Publication of CN110297850A publication Critical patent/CN110297850A/zh
Application granted granted Critical
Publication of CN110297850B publication Critical patent/CN110297850B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2465Query processing support for facilitating data mining operations in structured databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Fuzzy Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种特征作业集发布方法、装置、电子设备及存储介质。所述方法包括:创建与目标数据源对应的空特征作业集;提取由所述目标数据源下发的多个特征数据中包含的第一特征;将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。本发明可以对多个特征作业进行线上监控,自动提取数据源下发的特征数据中的特征;可以在待发布特征作业集发布后,按照特征作业集的版本信息可以实现特征作业的回溯,可以按照版本信息实现已发布特征作业集的管理,达到了对已发布特征作业集的管理目的。

Description

特征作业集发布方法、装置、电子设备及存储介质
技术领域
本发明涉及数据处理技术领域,特别是涉及一种特征作业集发布方法、装置、电子设备及存储介质。
背景技术
在安全风控和推荐系统中都会去分析用户的行为,从而提取相应的特征以用于欺诈检测、黑产识别、个性化推荐、精准营销等任务。
而现有的特征任务管理方式通常由人工开发维护,在特征任务的运行过程中,无法对各个特征任务进行监控,并且,特征作业的发布没有版本的概念,无法进行特征作业的回溯。
发明内容
本发明实施例所要解决的技术问题是提供一种特征作业集发布方法、装置、电子设备及存储介质,以解决现有技术中无法对各个特征任务进行监控,并且,特征作业的发布没有版本的概念,无法进行特征作业回溯的技术问题。
为了解决上述问题,本发明实施例提供了一种特征作业集发布方法,包括:创建与目标数据源对应的空特征作业集;提取由所述目标数据源下发的多个特征数据中包含的第一特征;将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
优选地,在所述创建与目标数据源对应的空特征作业集之后,还包括:在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则;所述提取由所述目标数据源下发的多个特征数据中包含的第一特征,包括:启动预先创建的与所述空特征作业集关联的至少一个流任务;由各所述流任务接收由所述目标数据源下发的多个特征数据;由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征。
优选地,所述将所述第一特征保存至与所述空特征作业集对应的指定存储空间,包括:针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间;所述第一子存储空间隶属于所述指定存储空间;将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
优选地,在所述发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息之前,还包括:在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面;在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则;由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征;将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间;所述在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息,包括:依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
优选地,在所述第二特征作业为新配置的特征作业时,所述启动与所述第二特征作业对应的流任务,包括:判断各所述流任务执行的特征作业的数目是否达到设定阈值;在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务;启动所述下一流任务;所述由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征,包括:由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,包括:在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间;将所述第二特征存储于所述第二子存储空间。
优选地,在所述第二特征作业为由第三特征作业修改得到的特征作业时,所述启动与所述第二特征作业对应的流任务,包括:获取与所述第三特征作业对应的目标流任务;所述第三特征作业为多个第一特征作业中的一个特征作业;重启所述目标流任务;所述由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征,包括:由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,包括:获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间;清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间;将所述第二特征存储于所述第二子存储空间。
优选地,在所述将所述多个第一特征作业展示于预览界面之后,还包括:在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业;清空所述第四子存储空间,得到更新后的第二待发布特征作业集;所述在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息,包括:依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
优选地,在所述发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息之后,还包括:接收与已发布的特征作业集对应的特征查看指令;依据所述特征查看指令,获取并展示所述已发布的特征作业集;在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集;依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
为了解决上述问题,本发明实施例提供了一种特征作业集发布装置,包括:空作业集创建模块,用于创建与目标数据源对应的空特征作业集;第一特征提取模块,用于提取由所述目标数据源下发的多个特征数据中包含的第一特征;待发布作业集生成模块,用于将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;作业集发布模块,用于在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
优选地,还包括:第一特征作业创建模块,用于在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则;所述第一特征提取模块包括:流任务启动子模块,用于启动预先创建的与所述空特征作业集关联的至少一个流任务;特征数据接收子模块,用于由各所述流任务接收由所述目标数据源下发的多个特征数据;第一特征提取子模块,用于由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征。
优选地,所述待发布作业集生成模块包括:第一子空间获取子模块,用于针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间;所述第一子存储空间隶属于所述指定存储空间;第一特征保存子模块,用于将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
优选地,还包括:第一特征作业展示模块,用于在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面;流任务启动模块,用于在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则;第二特征提取模块,用于由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征;第一作业集获取模块,用于将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间;所述作业集发布模块包括:第一作业集发布子模块,用于依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
优选地,在所述第二特征作业为新配置的特征作业时,所述流任务启动模块包括:特征作业数目判断子模块,用于判断各所述流任务执行的特征作业的数目是否达到设定阈值;下一流任务创建子模块,用于在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务;下一流任务启动子模块,用于启动所述下一流任务;所述第二特征提取模块包括:第二特征提取子模块,用于由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述第一作业集获取模块包括:第二子空间创建子模块,用于在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间;第二特征保存子模块,用于将所述第二特征存储于所述第二子存储空间。
优选地,在所述第二特征作业为由第三特征作业修改得到的特征作业时,所述流任务启动模块包括:目标流任务获取子模块,用于获取与所述第三特征作业对应的目标流任务;所述第三特征作业为多个第一特征作业中的一个特征作业;目标流任务重启子模块,用于重启所述目标流任务;所述第二特征提取模块包括:第二特征获取子模块,用于由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述第一作业集获取模块包括:第三子空间获取子模块,用于获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间;第二子空间获取子模块,用于清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间;第二特征存储子模块,用于将所述第二特征存储于所述第二子存储空间。
优选地,还包括:第四子空间获取模块,用于在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业;第二作业集获取模块,用于清空所述第四子存储空间,得到更新后的第二待发布特征作业集;所述作业集发布模块包括:第二作业集发布子模块,用于依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
优选地,还包括:查看指令接收模块,用于接收与已发布的特征作业集对应的特征查看指令;特征作业集展示模块,用于依据所述特征查看指令,获取并展示所述已发布的特征作业集;更改作业集获取模块,用于在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集;更改作业集发布模块,用于依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
为了解决上述问题,本发明实施例提供了一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述任一项所述的特征作业集发布方法的步骤。
为了解决上述问题,本发明实施例还提供了计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的特征作业集发布方法中的步骤。
与现有技术相比,本发明实施例包括以下优点:
本发明实施例中,通过创建与目标数据源对应的空特征作业集,提取由目标数据源下发的多个特征数据中包含的第一特征,将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布作业集,并在监测到与待发布特征作业集对应的发布指令时,发布待发布特征作业集,并生成与待发布特征作业集对应的版本信息。本发明实施例通过创建的与数据源对应的空特征作业集,可以对多个特征作业进行线上监控,自动提取数据源下发的特征数据中的特征,并且,在空特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照特征作业集的版本信息可以实现特征作业的回溯,可以按照版本信息实现已发布特征作业集的管理,达到了对已发布特征作业集的管理目的。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
图1是本发明实施例提供的一种特征作业集发布方法的步骤流程图;
图2是本发明实施例提供的一种特征作业集发布方法的步骤流程图;
图2a是本发明实施例提供的一种待发布特征作业集发布状态的示意图;
图2b是本发明实施例提供的一种展示特征作业的示意图;
图2c是本发明实施例提供的一种删除特征作业的示意图;
图2d是本发明实施例提供的一种特征作业集框架的示意图;
图2e是本发明实施例提供的一种特征作业集的示意图;
图3是本发明实施例提供的一种特征作业集发布装置的结构示意图;
图4是本发明实施例提供的一种特征作业集发布装置的结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明实施例提供的一种特征作业集发布方法的步骤流程图,具体可以包括如下步骤:
步骤101:创建与目标数据源对应的空特征作业集。
在本发明实施例中,数据源(DataSource)是指提供某种所需要数据的器件或原始媒体,也即数据的来源,例如,服务器可以根据数据访问请求从而产生相应的访问数据,而产生的访问数据可以保存于服务器侧预先建立的数据库中,则该服务器可以作为一个数据源,以提供相应的数据。
目标数据源是指需要建立对应的空特征作业集的数据源。
空特征作业集是指特征作业集才创建完成的阶段,并未在特征作业集中存储任何数据时对应的作业集。
对于一个目标数据源可以建立一个单独的空特征作业集,例如,目标数据源包括数据源A和数据源B,可以为数据源A创建空特征作业集a,并为数据源B创建空特征作业集b。
当然,对于一个目标数据源也可以建立多个空特征作业集,例如,目标数据源包括数据源F,可以为数据源F创建对应的空特征作业集d和空特征作业集e。对于此种形式,可以是在不同的时间段内创建的空特征作业集,以对各个时段内的特征作业进行统一管理,例如,对目标数据源创建的特征作业集1在发布之后,则可以对目标数据源创建特征作业集2。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在创建与目标数据源对应的空特征作业集之后,执行步骤102。
步骤102:提取由所述目标数据源下发的多个特征数据中包含的第一特征。
特征数据是指由于网上交互行为而产生的数据,通常是指行为日志,如登录日志,比如用户登录一次,就可以实时接收到一条日志数据:什么用户、什么设备、什么IP、什么时间产生了一条登录日志等数据信息。
在目标数据源中可以根据网上交互行为实时生成交互数据(即特征数据),目标数据源产生特征数据之后,可以将特征数据实时下发给终端侧,并由终端侧预先设置的流任务负责接收产生的特征数据。
第一特征是指根据不同的特征提取规则而提取由目标数据源下发的多个特征数据中的特征,例如,在特征提取规则为:30s内登录次数大于3的IP,则提取的第一特征即为30s内登录次数大于3的IP地址;而在特征提取规则为:30s内登录次数大于3小于10的IP,则提取的第一特征即为30s内登录次数大于3小于10的IP地址。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在系统中,可以预先设置多个流任务,每个流任务可以执行多个特征作业,每个特征作业对应于一个相应的特征提取规则,按照不同的特征提取规则可以从特征数据中提取相应的特征,如在提取规则为:30s内登录次数大于3的IP,则提取的第一特征即为30s内登录次数大于3的IP地址。
在接收到由目标数据源下发的多个特征数据之后,可以启动相应的流任务,以流任务执行对应的特征作业,以按照与各流任务对应的特征提取规则提取多个特征数据中包含的第一特征,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤102之后,还可以包括:
步骤A:在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则。
在本发明实施例中,第一特征作业是指预先创建的隶属于空特征作业集的特征作业。
第一特征提取规则是指与第一特征作业对应的特征提取规则。
对于同一个空特征作业集而言,每个第一特征作业均对应于一个第一特征提取规则,不同的第一特征作业对应有不同的第一特征提取规则。
第一特征作业即是指按照对应的第一特征提取规则从目标数据源下发的特征数据中提取特征的作业。
在创建多个第一特征作业之后,上述步骤102可以包括:
子步骤B1:启动预先创建的与所述空特征作业集关联的至少一个流任务。
在系统中可以预先创建至少一个流任务,并建立各流任务与空特征作业集之间的关联关系,在空特征作业集创建完成,且需要从目标数据源接收特征数据时,可以启动至少一个流任务,并执行子步骤B2。
子步骤B2:由各所述流任务接收由所述目标数据源下发的多个特征数据。
在至少一个流任务启动之后,可以由流任务接收由目标数据源下发的多个特征数据。
可以理解地,在目标数据源中由于用户的网络行为会源源不断地产生特征数据(即日志信息),目标数据源可以按照设定时间周期下发特征数据。
启动的至少一个流任务可以接收目标数据源下发的特征数据,并执行子步骤B3。
子步骤B3:由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征。
在由各流任务接收由目标数据源下发的特征数据之后,可以由各流任务执行与各流任务所关联的至少一个特征作业,以按照与各第一特征作业对应的第一特征提取规则,从多个特征数据中提取第一特征。
对于上述过程可以结合附图进行如下详细描述。
参照图2d,示出了本发明实施例提供的一种特征作业集框架的示意图,如图2d所示,对于同一数据源可以创建一个或多个特征作业集,如图2d所示,数据源下创建由作业集V1、作业集V2、作业集V3,图2d中所示的队列即相当于流任务,在每个特征作业集下可以对应有一个或多个流任务,如作业集V1、作业集V2和作业集V3均对应有队列1、…、队列n,每个流任务可以执行一个或多个特征作业,如队列1对应有作业1、…、作业n,其中,n为大于等于1的正整数。
当然,由于系统资源的限制,在实际应用中,每个流任务最多可以同时执行20个特征作业,即流任务同时执行的特征作业的取值范围是0~20,而对于每个流任务执行的特征作业的具体数值可以根据实际情况进行设置,本发明实施例对此不加以限制。
在提取由目标数据源下发的多个特征数据中包含的第一特征之后,执行步骤103。
步骤103:将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集。
在本发明实施例中,指定存储空间可以是指预先创建的数据库,如Oracle数据库、SQL Server数据库、Mysql数据库等等,对于具体的数据库类型可以根据实际情况进行设定,本发明实施例对此不加以限制。
在提取多个特征数据中包含的第一特征之后,可以将提取的第一特征保存至与空特征作业集对应的指定存储空间(如数据库等存储空间)中。
当然,每个第一特征作业对应于一个特征提取规则,对于一个特征作业集而言,不同的第一特征作业所提取的第一特征也是不相同的,在本发明中,还可以预先设置不同的第一特征作业对应于不同的子存储空间。具体地,参照下述优选实施例进行详细描述。
在本发明的一种优选实施例中,上述步骤103可以包括:
子步骤C1:针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间。
在本发明实施例中,第一子存储空间是指隶属于指定存储空间的一个子存储空间,即在指定存储空间中可以预先创建多个子存储空间,将这些子存储空间作为第一子存储空间,例如,指定存储空间A划分的子存储空间包括空间a、空间b和空间c,则可以将空间a、空间b和空间c作为第一子存储空间。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
针对每个第一特征作业均对应有相应的第一子存储空间,针对每个第一特征作业,可以获取与其对应的第一子存储空间,并执行子步骤C2。
子步骤C2:将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
与第一特征作业对应的第一特征是指执行第一特征作业,按照与第一特征作业对应的第一特征提取规则提取的第一特征。
在执行第一特征作业提取相应的第一特征之后,可以将提取的第一特征存储于与第一特征作业对应的第一子存储空间中,例如,第一特征作业包括作业1、作业2,执行作业1提取的第一特征包括特征a、特征b,执行作业2提取的第一特征包括特征c,作业1对应的第一子存储空间为空间A,作业2对应的第一子存储空间为空间B,则将特征a和特征b存储于空间A中,将特征c存储于空间B中。
当然,在指定存储空间为数据库时,在数据库中预先建立不同的数据库表,不同的数据库表对应于不同的子存储空间,每个数据库表中存储执行相应的第一特征作业而提取的特征,例如,可以在特征数据库中预先建立数据库表1、数据库表2和数据库表3,执行第一特征作业A,按照第一特征提取规则a提取的第一特征存储于数据表1对应的子存储空间中;执行第一特征作业B,按照第一特征提取规则b提取的第一特征存储于数据表2对应的子存储空间中;执行第一特征作业C,按照第一特征提取规则c提取的第一特征存储于数据表3对应的子存储空间中。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在将第一特征保存至指定存储空间之后,可以生成与空特征作业集对应的待发布特征作业集,即待发布特征作业集是在研发人员在空特征作业集中配置的特征作业全部执行成功,且提取到相应的特征存储于指定存储空间之后,生成的待发布特征作业集。
在将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布特征作业集之后,执行步骤104。
步骤104:在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
发布指令是指用户或者特征管理人员触发生成的发布待发布特征作业集的指令。例如,在待发布特征作业集对应的预览界面可以预先设置“发布”按钮,在管理人员点击“发布”按钮时,可以触发生成发布指令;或者是,根据管理人员输入的发布指令语音,如“发布特征作业集A”等,通过对语音进行解析,从而得到相应的发布指令。
在具体实现中,还可以采用其它方式触发生成发布指令,本发明实施例对此不加以限制。
版本信息是指待发布特征作业集发布之后的版本介绍信息,版本介绍信息可以是作业集版本号等信息,如v43_20180914,即发布版本为43,发布时间为2018-09-14等。
对于待发布作业集的版本信息结合附图进行如下详细描述。
参照图2a,示出了待发布特征作业集发布状态的示意图。如图2a所示,发布的待发布特征作业集的版本信息可以是作业集版本号,如V43_20180914、V42_20180913,当然,还可以包括待发布特征作业集的其它描述信息,如作业集ID,如72、71、…、67;作业集描述,如下线测试配置、测试ip省份等;作业集状态,如上线成功等,作业集创建者,如lusiyan、jiangdanwei等;作业集更新时间,如2018-09-14、2018-09-13等。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在监测到与待发布特征作业集对应的发布指令之后,可以依据发布指令发布待发布特征作业集,在待发布特征作业集发布成功之后,可以生成与待发布特征作业集对应的版本信息,通过待发布特征作业集的版本信息可以清楚了解到待发布特征作业集的发布版本,以便于后续过程中对已发布的特征作业集进行管理,如执行后期的查询更改等操作,可以优化特征作业集的管理目的。
当然,在待发布特征作业集发布之前,还可以将待发布特征作业集中的特征作业在预览界面展示,并在预览界面内监测是否有新增或修改的特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤104之前,还可以包括:
步骤D1:在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面。
在本发明实施例中,预览指令是指预览待发布特征作业集中各个第一特征作业的状态及特征详细信息的指令。
在待发布特征作业集的管理界面可以预先设置“预览”按钮,在用户点击“预览”按钮时即可触发生成与待发布特征作业集对应的预览指令。
当然,在系统中还可以预先设置语音接收设备,在接收到用户输入的与待发布特征作业集对应的“预览”语音时,可以对语音信息进行解析,从而触发生成与待发布特征作业集对应的预览指令。
在具体实现中,还可以采用其它方式触发生成与待发布特征作业集对应的预览指令,具体地,可以根据实际情况而定,本发明实施例对此不加以限制。
预览界面是指展示待发布特征作业集中各第一特征作业的界面,预览界面可以为预先设定的一个浏览界面,可以为一个弹窗界面,也可以为一个web界面,具体地,可以根据实际情况进行设定,本发明实施例对此不加以限制。
在监测到与待发布特征作业集对应的预览指令之后,可以将待发布特征作业集中的多个第一特征作业展示于预览界面。
可以理解地,同一预览界面内可展示的第一特征作业的数量是有限的,例如,当前页面内仅可展示30或50个特征作业等。而在待发布特征作业集中的第一特征作业数量较多时,以分页的形式分批次展示,具体地,可以根据实际情况设定。
在将多个第一特征作业展示于预览界面之后,执行步骤D2。
步骤D2:在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则。
第二特征作业是指用户(如研发人员)新增的特征作业,或将第一特征作业进行修改而得到的特征作业。
第二特征作业对应于第二特征提取规则,第二特征提取规则是指执行第二特征作业,按照第二特征提取规则从特征数据中提取特征的规则,例如,第二特征规则为:30s内登录次数大于10次的IP等等。
第二特征作业可以由对应的流任务执行,具体地,在第二特征作业为新增的特征作业时,可以判断预先创建的流任务所执行的特征数量是否达到可执行特征作业的设定阈值,若是,则创建新的流任务执行第二特征作业;而在第二特征作业为将第一特征作业修改之后得到的特征作业时,则可以由与第一特征作业对应的流任务执行第二特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的另一种优选实施例中,在所述第二特征作业为新配置的特征作业时,上述步骤D2可以包括:
子步骤D2-1:判断各所述流任务执行的特征作业的数目是否达到设定阈值。
在本发明实施例中,新配置的特征作业是指在流任务执行第一特征作业的过程中或第一特征作业执行完成后,由待发布特征作业集的维护人员重新配置的特征作业,例如,预先创建的第一特征作业包括作业1、作业2和作业3,在流任务A执行作业1、作业2和作业3的过程中,或作业1、作业2和作业3已被执行完成后,系统又监测到了一个特征作业:作业4,则作业4即为新配置的特征作业。
结合附图对新配置的特征作业进行如下描述。
参照图2b,示出了本发明实施例提供的一种展示特征作业的示意图,如图2b所示,待发布特征作业集的ID为22,作业集描述信息:用于统计泡泡投票业务统计类特征,作业集类型、是否变动等等信息,待发布特征作业集包含有多个特征作业,对应的ID为:1、3、4…,而变动信息可以显示为各个特征作业是否有变动,如特征作业ID为37和38所示变动信息可知,ID为37和38的两个特征作业为新增的两个特征作业,则ID为37和38的两个特征作业即为新配置的特征作业,即第二特征作业。
再例如,参照图2c,示出了本发明实施例提供的一种删除特征作业的示意图,如图2c所示,特征作业包括:552和557(特征作业的编号),特征作业552为被删除的特征作业,即特征作业552为第三特征作业,而编号557为修改之后得到的第二特征作业,即特征作业557为第二特征作业。
而对应的删除特征作业的代码可以如图2c所示:
代码中:版本信息:153389012048上所显示的横线即为特征作业对应的版本的删除线,新增的第二特征作业的版本信息为:1534750144659,修改的阈值为:将阈值“10”修改为阈值“5”,阈值即为特征提取规则中的一个提取条件。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
设定阈值是指预先设置的流任务可同时执行特征作业的数量的数值,当然,对于一个流任务而言,最多可同时执行20个特征作业,该设定阈值可以设置为20,也可以设置为19、16等等,具体地,可以根据实际情况预先设置设定阈值的具体数值,本发明实施例对此不加以限制。
在第二特征作业为新配置的特征作业时,则判断与待发布特征作业集对应的各流任务当前执行的特征作业的数目是否达到设定阈值,并执行子步骤D2-2。
子步骤D2-2:在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务。
在与待发布特征作业集对应的至少一个流任务当前同时执行的特征作业的数目有一个或多个未达到设定阈值的情况下,可以选择任一个未达到设定阈值的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征。
而在与待发布特征作业集对应的至少一个流任务当前同时执行的特征作业的数目均达到设定阈值的情况,则需要创建下一流任务,即创建一个新的流任务,并执行子步骤D2-2。
子步骤D2-3:启动所述下一流任务。
在下一流任务创建完成之后,在由下一流任务执行第二特征作业之前需要启动下一流任务,在启动下一流任务之后,可以由下一流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征,具体地,将在下述步骤中进行详细描述。
而在第二特征作业为对第一特征作业进行修改之后得到的特征作业时,可以按照下述优选实施例进行详细描述。
在本发明的另一优选实施例中,在所述第二特征作业为由第三特征作业修改得到的特征作业时,所述第三特征作为多个第一特征作业中的一个特征作业,上述步骤D2可以包括:
子步骤D21:获取与所述第三特征作业对应的目标流任务。
在本发明实施例中,第三特征作业为多个第一特征作业中的一个特征作业。
目标流任务是指在将第三特征作业修改为第二特征作业之前,执行第三特征作业的流任务。
在第二特征作业是对第三特征作业进行修改而得到的特征作业时,可以由执行第三特征作业的流任务执行经修改得到的第二特征作业。
则可以获取与第三特征作业对应的目标流任务,并执行子步骤D22。
子步骤D22:重启所述目标流任务。
在获取与第三特征作业对应的目标流任务之后,在需要目标流任务执行第二特征作业时,则需要重启目标流任务。
在重启目标流任务之后,可以由目标流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征,具体地,将在下述步骤中进行描述。
在启动与第二特征作业对应的流任务之后,执行步骤D3。
步骤D3:由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征。
第二特征是指执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取的特征。
在启动与第二特征对应的流任务之后,可以由启动后的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征。具体地,可以按照下述两个优选实施例进行描述。
在第二特征作业为新配置的特征作业时,上述步骤D3可以包括:
子步骤D3-1:由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征。
在第二特征作业为新配置的特征作业,且与待发布特征作业集对应的至少一个流任务当前执行的特征作业的数目均达到设定阈值时,需要重新创建下一流任务,并启动下一流任务。
进而由启动的下一流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取第二特征。
而在第二特征作业为由第三特征作业修改之后得到的特征作业时,上述步骤D3可以包括:
子步骤D31:由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征。
在在第二特征作业为由第三特征作业修改之后得到的特征作业时,需要重启与第三特征作业对应的目标流任务。
然后,由目标流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征。
在由启动后的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征之后,执行步骤D4。
步骤D4:将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间。
第二子存储空间是指定存储空间中的一个子存储空间,是用于存储按照第二特征提取规则提取的第二特征的存储空间。
第一待发布特征作业集是指在执行第二特征作业,提取第二特征并存储于指定存储空间之后,得到的一个更新的特征作业集。
在提取第二特征之后,可以将第二特征存储于第二子存储空间中,从而可以得到更新后的第一待发布特征作业集。例如,如图2e所示,数据源下先前创建的特征作业集为:作业集version1,在作业集version1中包括特征作业1version1、…、特征作业Nversion1,特征作业1version1、…、特征作业Nversion1对应于队列1,即将特征作业1version1、…、特征作业Nversion1添加至队列1中,进而在后续执行过程中,可以启动队列1对应的流任务,可以通过该启动的流任务同时执行特征作业1version1、…、特征作业Nversion1(可以理解地,由于系统资源的限制,每个流任务最多可同时执行20个特征作业,因此,此处N为小于等于20的正整数),而在执行特征作业1version1、…、特征作业Nversion1时,可以从数据源中提取相应的特征,如图所示数据源至特征作业1version1、…、特征作业Nversion1的箭头即为执行特征作业提取特征的过程。可以理解地,可以在预先设置的队列N中挂载特征作业Nversion1、…、特征作业Nversion1,进而,在启动与队列N对应的流任务之后,可以通过该流任务执行特征作业Nversion1、…、特征作业Nversion1,以从数据源中提取相应的特征,如数据源至特征作业Nversion1、…、特征作业Nversion1的箭头所示,即为执行特征作业提取相应特征的过程。而在执行完所有的特征作业,并提取相应特征后,在某个特征作业发生改变时,如图中虚线框所示,在version1中的特征作业1version1,更改为特征作业1version2时,得到的更新的特征作业集即为:作业集version2,则可以重启与队列1对应的流任务,并由该重启后的流任务执行特征作业1version2,从数据源中提取相应的特征。
具体地,对于第二子存储空间可以为在指定存储空间中新创建的子存储空间,还可以为第三特征作业对应的子存储空间,具体地,可以结合下述优选实施例进行详细描述。
在第二特征作业为新配置的特征作业时,上述步骤D4可以包括:
子步骤D4-1:在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间。
在本发明实施例中,在第二特征作业为新配置的特征作业时,第二子存储空间即为在指定存储空间中新创建的子存储空间。
具体地,可以在指定存储空间中划分出一个子存储空间以作为第二子存储空间,并执行子步骤D4-2。
子步骤D4-2:将所述第二特征存储于所述第二子存储空间。
在指定存储空间中创建第二子存储空间之后,可以将提取的第二特征存储于第二子存储空间中。
而在第二特征作业为由第三特征作业修改得到的特征作业时,上述步骤D4可以包括:
子步骤D41:获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间。
在本发明实施例中,第三子存储空间为指定存储空间中的一个子存储空间,也即第三特征作业对应的子存储空间。
在第二特征作业是由第三特征作业修改之后得到的特征作业时,可以获取与第三特征作业对应的子存储空间,并执行子步骤D42。
子步骤D42:清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间。
由于对第三特征作业进行了修改,则可以将第三特征作业对应的第三子存储空间清空,即清空第三子存储空间中预先存储的按照第三特征作业对应的特征提取规则提取的特征。
在清空第三子存储空间之后,可以将第三子存储空间作为第二子存储空间,即将执行第二特征作业,按照第二特征作业对应的第二特征提取规则提取的第二特征存储于第三子存储空间中。
在清空第三子存储空间,并将清空后的第三子存储空间作为第二子存储空间之后,执行子步骤D43。
子步骤D43:将所述第二特征存储于所述第二子存储空间。
在执行第二特征作业,按照与第二特征作业对应的第二特征提取规则提取第二特征之后,可以将第二特征存储于第二子存储空间,即将提取的第二特征存储于清空后的第三子存储空间中。
在得到更新后的第一待发布特征作业集之后,可以发布第一待发布特征作业集,具体地,以下述优选实施例进行详细描述。
在本发明的另一种优选实施例中,上述步骤104可以包括:
在步骤E:依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
在得到更新后的第一待发布特征作业集之后,可以依据监测到的发布指令发布第一待发布特征作业集,并生成与第一待发布特征作业集对应的版本信息,版本信息指示了第一待发布特征作业集发布之后的发布版本,如第一待发布特征作业集对应的发布版本号等。
当然,在对待发布特征作业集发布之前,还可以在预览界面内监测是否存在被删除的特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤104之前,还可以包括:
步骤F1:在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业。
在本发明实施例中,第四特征作业是指多个第一特征作业中的一个特征作业。
第四子存储空间是指用于存储在执行第四特征作业后,按照与第四特征作业对应的第四特征提取规则从多个特征数据中提取的特征的子存储空间。第四子存储空间也是指定存储空间中的一个子存储空间。
在预览界面内可以监测是否存在被用户(如研发人员等)删除的第四特征作业,例如,参照图2c,示出了本发明实施例提供的一种删除特征作业的示意图,如图2c所示,特征作业包括:552和557(特征作业的编号),特征作业552为被删除的特征作业,即特征作业552为第四特征作业。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在预览界面内监测到用户删除的第四特征作业时,可以获取与第四特征作业对应的第四子存储空间,并执行步骤F2。
步骤F2:清空所述第四子存储空间,得到更新后的第二待发布特征作业集。
在第四特征作业被用户删除之后,可以清空与第四特征作业对应的第四子存储空间,即清除第四子存储空间中存储的执行第四特征作业获取的特征。
在将第四子存储空间清空之后,可以得到更新后的第二待发布特征作业集。
在得到更新后的第二待发布特征作业集之后,可以执行第二待发布特征作业集的发布操作,具体地,以下述优选实施例进行描述。
在本发明的另一种优选实施例中,上述步骤104可以包括:
子步骤G1:依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
本步骤中的版本信息是指第二待发布特征作业集发布之后得到的发布版本信息,例如,发布版本号等。
在得到更新后的第二待发布特征作业集之后,可以依据监测到的发布指令,发布第二待发布特征作业集,在发布成功之后,即可获得与第二待发布特征作业集对应的版本信息。版本信息指示了第二待发布特征作业集发布之后的发布版本号。
本发明实施例可以对多个特征作业进行线上监控,并且,在待发布特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照待发布特征作业集对应的版本信息即可实现特征作业的回溯,可以按照待发布特征作业集对应的版本信息实现对特征作业集的管理。
本发明实施例提供的特征作业集发布方法,通过创建与目标数据源对应的空特征作业集,提取由目标数据源下发的多个特征数据中包含的第一特征,将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布作业集,并在监测到与待发布特征作业集对应的发布指令时,发布待发布特征作业集,并生成与待发布特征作业集对应的版本信息。本发明实施例通过创建的与数据源对应的空特征作业集,可以对多个特征作业进行线上监控,自动提取数据源下发的特征数据中的特征,并且,在空特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照特征作业集的版本信息实现特征作业的回溯,可以按照版本信息实现对已发布特征作业集的管理,达到了对已发布特征作业集的管理目的。
参照图2,示出了本发明实施例提供的一种特征作业集发布方法的步骤流程图,具体可以包括如下步骤:
步骤201:创建与目标数据源对应的空特征作业集。
在本发明实施例中,数据源(DataSource)是指提供某种所需要数据的器件或原始媒体,也即数据的来源,例如,服务器可以根据数据访问请求从而产生相应的访问数据,而产生的访问数据可以保存于服务器侧预先建立的数据库中,则该服务器可以作为一个数据源,以提供相应的数据。
目标数据源是指需要建立对应的空特征作业集的数据源。
空特征作业集是指特征作业集才创建完成的阶段,并未在特征作业集中存储任何数据时对应的作业集。
对于一个目标数据源可以建立一个单独的空特征作业集,例如,目标数据源包括数据源A和数据源B,可以为数据源A创建空特征作业集a,并为数据源B创建空特征作业集b。
当然,对于一个目标数据源也可以建立多个空特征作业集,例如,目标数据源包括数据源F,可以为数据源F创建对应的空特征作业集d和空特征作业集e。对于此种形式,可以是在不同的时间段内创建的空特征作业集,以对各个时段内的特征作业进行统一管理,例如,对目标数据源创建的特征作业集1在发布之后,则可以对目标数据源创建特征作业集2。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在创建与目标数据源对应的空特征作业集之后,执行步骤202。
步骤202:提取由所述目标数据源下发的多个特征数据中包含的第一特征。
特征数据是指由于网上交互行为而产生的数据,通常是指行为日志,如登录日志,比如用户登录一次,就可以实时接收到一条日志数据:什么用户、什么设备、什么IP、什么时间产生了一条登录日志等数据信息。
在目标数据源中可以根据网上交互行为实时生成交互数据(即特征数据),目标数据源产生特征数据之后,可以将特征数据实时下发给终端侧,并由终端侧预先设置的流任务负责接收产生的特征数据。
第一特征是指根据不同的特征提取规则而提取由目标数据源下发的多个特征数据中的特征,例如,在特征提取规则为:30s内登录次数大于3的IP,则提取的第一特征即为30s内登录次数大于3的IP地址;而在特征提取规则为:30s内登录次数大于3小于10的IP,则提取的第一特征即为30s内登录次数大于3小于10的IP地址。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在系统中,可以预先设置多个流任务,每个流任务可以执行多个特征作业,每个特征作业对应于一个相应的特征提取规则,按照不同的特征提取规则可以从特征数据中提取相应的特征,如在提取规则为:30s内登录次数大于3的IP,则提取的第一特征即为30s内登录次数大于3的IP地址。
在接收到由目标数据源下发的多个特征数据之后,可以启动相应的流任务,以流任务执行对应的特征作业,以按照与各流任务对应的特征提取规则提取多个特征数据中包含的第一特征,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤202之后,还可以包括:
步骤H:在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则。
在本发明实施例中,第一特征作业是指预先创建的隶属于空特征作业集的特征作业。
第一特征提取规则是指与第一特征作业对应的特征提取规则。
对于同一个空特征作业集而言,每个第一特征作业均对应于一个第一特征提取规则,不同的第一特征作业对应有不同的第一特征提取规则。
第一特征作业即是指按照对应的第一特征提取规则从目标数据源下发的特征数据中提取特征的作业。
在创建多个第一特征作业之后,上述步骤202可以包括:
子步骤I1:启动预先创建的与所述空特征作业集关联的至少一个流任务。
在系统中可以预先创建至少一个流任务,并建立各流任务与空特征作业集之间的关联关系,在空特征作业集创建完成,且需要从目标数据源接收特征数据时,可以启动至少一个流任务,并执行子步骤I2。
子步骤I2:由各所述流任务接收由所述目标数据源下发的多个特征数据。
在至少一个流任务启动之后,可以由流任务接收由目标数据源下发的多个特征数据。
可以理解地,在目标数据源中由于用户的网络行为会源源不断地产生特征数据(即日志信息),目标数据源可以按照设定时间周期下发特征数据。
启动的至少一个流任务可以接收目标数据源下发的特征数据,并执行子步骤I3。
子步骤I3:由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征。
在由各流任务接收由目标数据源下发的特征数据之后,可以由各流任务执行与各流任务所关联的至少一个特征作业,以按照与各第一特征作业对应的第一特征提取规则,从多个特征数据中提取第一特征。
对于上述过程可以结合附图进行如下详细描述。
参照图2d,示出了本发明实施例提供的一种特征作业集框架的示意图,如图2d所示,对于同一数据源可以创建一个或多个特征作业集,如图2d所示,数据源下创建由作业集V1、作业集V2、作业集V3,图2d中所示的队列即相当于流任务,在每个特征作业集下可以对应有一个或多个流任务,如作业集V1、作业集V2和作业集V3均对应有队列1、…、队列n,每个流任务可以执行一个或多个特征作业,如队列1对应有作业1、…、作业n,其中,n为大于等于1的正整数。
当然,由于系统资源的限制,在实际应用中,每个流任务最多可以同时执行20个特征作业,即流任务同时执行的特征作业的取值范围是0~20,而对于每个流任务执行的特征作业的具体数值可以根据实际情况进行设置,本发明实施例对此不加以限制。
在提取由目标数据源下发的多个特征数据中包含的第一特征之后,执行步骤203。
步骤203:将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集。
在本发明实施例中,指定存储空间可以是指预先创建的数据库,如Oracle数据库、SQL Server数据库、Mysql数据库等等,对于具体的数据库类型可以根据实际情况进行设定,本发明实施例对此不加以限制。
在提取多个特征数据中包含的第一特征之后,可以将提取的第一特征保存至与空特征作业集对应的指定存储空间(如数据库等存储空间)中。
当然,每个第一特征作业对应于一个特征提取规则,对于一个空特征作业集而言,不同的第一特征作业所提取的第一特征也是不相同的,在本发明中,还可以预先设置不同的第一特征作业对应于不同的子存储空间。具体地,参照下述优选实施例进行详细描述。
在本发明的一种优选实施例中,上述步骤203可以包括:
子步骤J1:针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间。
在本发明实施例中,第一子存储空间是指隶属于指定存储空间的一个子存储空间,即在指定存储空间中可以预先创建多个子存储空间,将这些子存储空间作为第一子存储空间,例如,指定存储空间A划分的子存储空间包括空间a、空间b和空间c,则可以将空间a、空间b和空间c作为第一子存储空间。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
针对每个第一特征作业均对应有相应的第一子存储空间,针对每个第一特征作业,可以获取与其对应的第一子存储空间,并执行子步骤J2。
子步骤J2:将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
与第一特征作业对应的第一特征是指执行第一特征作业,按照与第一特征作业对应的第一特征提取规则提取的第一特征。
在执行第一特征作业提取相应的第一特征之后,可以将提取的第一特征存储于与第一特征作业对应的第一子存储空间中,例如,第一特征作业包括作业1、作业2,执行作业1提取的第一特征包括特征a、特征b,执行作业2提取的第一特征包括特征c,作业1对应的第一子存储空间为空间A,作业2对应的第一子存储空间为空间B,则将特征a和特征b存储于空间A中,将特征c存储于空间B中。
当然,在指定存储空间为数据库时,在数据库中预先建立不同的数据库表,不同的数据库表对应于不同的子存储空间,每个数据库表中存储执行相应的第一特征作业而提取的特征,例如,可以在特征数据库中预先建立数据库表1、数据库表2和数据库表3,执行第一特征作业A,按照第一特征提取规则a提取的第一特征存储于数据表1对应的子存储空间中;执行第一特征作业B,按照第一特征提取规则b提取的第一特征存储于数据表2对应的子存储空间中;执行第一特征作业C,按照第一特征提取规则c提取的第一特征存储于数据表3对应的子存储空间中。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在将第一特征保存至指定存储空间之后,可以生成与空特征作业集对应的待发布特征作业集,即待发布特征作业集是在研发人员在空特征作业集中配置的特征作业全部执行成功,且提取到相应的特征存储于指定存储空间之后,生成的待发布特征作业集。
在将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布特征作业集之后,执行步骤204。
步骤204:在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
发布指令是指用户或者特征管理人员触发生成的发布待发布特征作业集的指令。例如,在待发布特征作业集对应的预览界面可以预先设置“发布”按钮,在管理人员点击“发布”按钮时,可以触发生成发布指令;或者是,根据管理人员输入的发布指令语音,如“发布特征作业集A”等,通过对语音进行解析,从而得到相应的发布指令。
在具体实现中,还可以采用其它方式触发生成发布指令,本发明实施例对此不加以限制。
版本信息是指待发布特征作业集发布之后的版本介绍信息,版本介绍信息可以是作业集版本号等信息,如v43_20180914,即发布版本为43,发布时间为2018-09-14等。
对于待发布作业集的版本信息结合附图进行如下详细描述。
参照图2a,示出了待发布特征作业集发布状态的示意图。如图2a所示,发布的待发布特征作业集的版本信息可以是作业集版本号,如V43_20180914、V42_20180913,当然,还可以包括待发布特征作业集的其它描述信息,如作业集ID,如72、71、…、67;作业集描述,如下线测试配置、测试ip省份等;作业集状态,如上线成功等,作业集创建者,如lusiyan、jiangdanwei等;作业集更新时间,如2018-09-14、2018-09-13等。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在监测到与待发布特征作业集对应的发布指令之后,可以依据发布指令发布待发布特征作业集,在待发布特征作业集发布成功之后,可以生成与待发布特征作业集对应的版本信息,通过待发布特征作业集的版本信息可以清楚了解到待发布特征作业集的发布版本,以便于后续过程中对已发布的特征作业集进行管理,如执行后期的查询更改等操作,可以优化特征作业集的管理目的。
当然,在待发布特征作业集发布之前,还可以将待发布特征作业集中的特征作业在预览界面展示,并在预览界面内监测是否有新增或修改的特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤204之前,还可以包括:
步骤K1:在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面。
在本发明实施例中,预览指令是指预览待发布特征作业集中各个第一特征作业的状态及特征详细信息的指令。
在待发布特征作业集的管理界面可以预先设置“预览”按钮,在用户点击“预览”按钮时即可触发生成与待发布特征作业集对应的预览指令。
当然,在系统中还可以预先设置语音接收设备,在接收到用户输入的与待发布特征作业集对应的“预览”语音时,可以对语音信息进行解析,从而触发生成与待发布特征作业集对应的预览指令。
在具体实现中,还可以采用其它方式触发生成与待发布特征作业集对应的预览指令,具体地,可以根据实际情况而定,本发明实施例对此不加以限制。
预览界面是指展示待发布特征作业集中各第一特征作业的界面,预览界面可以为预先设定的一个浏览界面,可以为一个弹窗界面,也可以为一个web界面,具体地,可以根据实际情况进行设定,本发明实施例对此不加以限制。
在监测到与待发布特征作业集对应的预览指令之后,可以将待发布特征作业集中的多个第一特征作业展示于预览界面。
可以理解地,同一预览界面内可展示的第一特征作业的数量是有限的,例如,当前页面内仅可展示30或50个特征作业等。而在待发布特征作业集中的第一特征作业数量较多时,以分页的形式分批次展示,具体地,可以根据实际情况设定。
在将多个第一特征作业展示于预览界面之后,执行步骤K2。
步骤K2:在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则。
第二特征作业是指用户(如研发人员)新增的特征作业,或将第一特征作业进行修改而得到的特征作业。
第二特征作业对应于第二特征提取规则,第二特征提取规则是指执行第二特征作业,按照第二特征提取规则从特征数据中提取特征的规则,例如,第二特征规则为:30s内登录次数大于10次的IP等等。
第二特征作业可以由对应的流任务执行,具体地,在第二特征作业为新增的特征作业时,可以判断预先创建的流任务所执行的特征数量是否达到可执行特征作业的设定阈值,若是,则创建新的流任务执行第二特征作业;而在第二特征作业为将第一特征作业修改之后得到的特征作业时,则可以由与第一特征作业对应的流任务执行第二特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的另一种优选实施例中,在所述第二特征作业为新配置的特征作业时,上述步骤K2可以包括:
子步骤K2-1:判断各所述流任务执行的特征作业的数目是否达到设定阈值。
在本发明实施例中,新配置的特征作业是指在流任务执行第一特征作业的过程中或第一特征作业执行完成后,由待发布特征作业集的维护人员重新配置的特征作业,例如,预先创建的第一特征作业包括作业1、作业2和作业3,在流任务A执行作业1、作业2和作业3的过程中,或作业1、作业2和作业3已被执行完成后,系统又监测到了一个特征作业:作业4,则作业4即为新配置的特征作业。
结合附图对新配置的特征作业进行如下描述。
参照图2b,示出了本发明实施例提供的一种展示特征作业的示意图,如图2b所示,待发布特征作业集的ID为22,作业集描述信息:用于统计泡泡投票业务统计类特征,作业集类型、是否变动等等信息,待发布特征作业集包含有多个特征作业,对应的ID为:1、3、4…,而变动信息可以显示为各个特征作业是否有变动,如特征作业ID为37和38所示变动信息可知,ID为37和38的两个特征作业为新增的两个特征作业,则ID为37和38的两个特征作业即为新配置的特征作业,即第二特征作业。
再例如,参照图2c,示出了本发明实施例提供的一种删除特征作业的示意图,如图2c所示,特征作业包括:552和557(特征作业的编号),特征作业552为被删除的特征作业,即特征作业552为第三特征作业,而编号557为修改之后得到的第二特征作业,即特征作业557为第二特征作业。
而对应的删除特征作业的代码可以如图2c所示:
代码中:版本信息:153389012048上所显示的横线即为特征作业对应的版本的删除线,新增的第二特征作业的版本信息为:1534750144659,修改的阈值为:将阈值“10”修改为阈值“5”,阈值即为特征提取规则中的一个提取条件。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
设定阈值是指预先设置的流任务可同时执行特征作业的数量的数值,当然,对于一个流任务而言,最多可同时执行20个特征作业,该设定阈值可以设置为20,也可以设置为19、16等等,具体地,可以根据实际情况预先设置设定阈值的具体数值,本发明实施例对此不加以限制。
在第二特征作业为新配置的特征作业时,则判断与待发布特征作业集对应的各流任务当前执行的特征作业的数目是否达到设定阈值,并执行子步骤K2-2。
子步骤K2-2:在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务。
在与待发布特征作业集对应的至少一个流任务当前同时执行的特征作业的数目有一个或多个未达到设定阈值的情况下,可以选择任一个未达到设定阈值的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征。
而在与待发布特征作业集对应的至少一个流任务当前同时执行的特征作业的数目均达到设定阈值的情况,则需要创建下一流任务,即创建一个新的流任务,并执行子步骤K2-2。
子步骤K2-3:启动所述下一流任务。
在下一流任务创建完成之后,在由下一流任务执行第二特征作业之前需要启动下一流任务,在启动下一流任务之后,可以由下一流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征,具体地,将在下述步骤中进行详细描述。
而在第二特征作业为对第一特征作业进行修改之后得到的特征作业时,可以按照下述优选实施例进行详细描述。
在本发明的另一优选实施例中,在所述第二特征作业为由第三特征作业修改得到的特征作业时,所述第三特征作为多个第一特征作业中的一个特征作业,上述步骤K2可以包括:
子步骤K21:获取与所述第三特征作业对应的目标流任务。
在本发明实施例中,第三特征作业为多个第一特征作业中的一个特征作业。
目标流任务是指在将第三特征作业修改为第二特征作业之前,执行第三特征作业的流任务。
在第二特征作业是对第三特征作业进行修改而得到的特征作业时,可以由执行第三特征作业的流任务执行经修改得到的第二特征作业。
则可以获取与第三特征作业对应的目标流任务,并执行子步骤K22。
子步骤K22:重启所述目标流任务。
在获取与第三特征作业对应的目标流任务之后,在需要目标流任务执行第二特征作业时,则需要重启目标流任务。
在重启目标流任务之后,可以由目标流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取特征,具体地,将在下述步骤中进行描述。
在启动与第二特征作业对应的流任务之后,执行步骤K3。
步骤K3:由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征。
第二特征是指执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取的特征。
在启动与第二特征对应的流任务之后,可以由启动后的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征。具体地,可以按照下述两个优选实施例进行描述。
在第二特征作业为新配置的特征作业时,上述步骤K3可以包括:
子步骤K3-1:由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征。
在第二特征作业为新配置的特征作业,且与特征作业集对应的至少一个流任务当前执行的特征作业的数目均达到设定阈值时,需要重新创建下一流任务,并启动下一流任务。
进而由启动的下一流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则从多个特征数据中提取第二特征。
而在第二特征作业为由第三特征作业修改之后得到的特征作业时,上述步骤K3可以包括:
子步骤K31:由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征。
在在第二特征作业为由第三特征作业修改之后得到的特征作业时,需要重启与第三特征作业对应的目标流任务。
然后,由目标流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征。
在由启动后的流任务执行第二特征作业,按照与第二特征作业对应的第二特征提取规则,从多个特征数据中提取第二特征之后,执行步骤K4。
步骤K4:将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间。
第二子存储空间是指定存储空间中的一个子存储空间,是用于存储按照第二特征提取规则提取的第二特征的存储空间。
第一待发布特征作业集是指在执行第二特征作业,提取第二特征并存储于指定存储空间之后,得到的一个更新的特征作业集。
在提取第二特征之后,可以将第二特征存储于第二子存储空间中,从而可以得到更新后的第一待发布特征作业集。
具体地,对于第二子存储空间可以为在指定存储空间中新创建的子存储空间,还可以为第三特征作业对应的子存储空间,具体地,可以结合下述优选实施例进行详细描述。
在第二特征作业为新配置的特征作业时,上述步骤K4可以包括:
子步骤K4-1:在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间。
在本发明实施例中,在第二特征作业为新配置的特征作业时,第二子存储空间即为在指定存储空间中新创建的子存储空间。
具体地,可以在指定存储空间中划分出一个子存储空间以作为第二子存储空间,并执行子步骤K4-2。
子步骤K4-2:将所述第二特征存储于所述第二子存储空间。
在指定存储空间中创建第二子存储空间之后,可以将提取的第二特征存储于第二子存储空间中。
而在第二特征作业为由第三特征作业修改得到的特征作业时,上述步骤K4可以包括:
子步骤K41:获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间。
在本发明实施例中,第三子存储空间为指定存储空间中的一个子存储空间,也即第三特征作业对应的子存储空间。
在第二特征作业是由第三特征作业修改之后得到的特征作业时,可以获取与第三特征作业对应的子存储空间,并执行子步骤K42。
子步骤K42:清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间。
由于对第三特征作业进行了修改,则可以将第三特征作业对应的第三子存储空间清空,即清空第三子存储空间中预先存储的按照第三特征作业对应的特征提取规则提取的特征。
在清空第三子存储空间之后,可以将第三子存储空间作为第二子存储空间,即将执行第二特征作业,按照第二特征作业对应的第二特征提取规则提取的第二特征存储于第三子存储空间中。
在清空第三子存储空间,并将清空后的第三子存储空间作为第二子存储空间之后,执行子步骤K43。
子步骤K43:将所述第二特征存储于所述第二子存储空间。
在执行第二特征作业,按照与第二特征作业对应的第二特征提取规则提取第二特征之后,可以将第二特征存储于第二子存储空间,即将提取的第二特征存储于清空后的第三子存储空间中。
在得到更新后的第一待发布特征作业集之后,可以发布第一待发布特征作业集,具体地,以下述优选实施例进行详细描述。
在本发明的另一种优选实施例中,上述步骤204可以包括:
在步骤L:依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
在得到更新后的第一待发布特征作业集之后,可以依据监测到的发布指令发布第一待发布特征作业集,并生成与第一待发布特征作业集对应的版本信息,版本信息指示了第一待发布特征作业集发布之后的发布版本,如第一待发布特征作业集对应的发布版本号等。
当然,在对待发布特征作业集发布之前,还可以在预览界面内监测是否存在被删除的特征作业,具体地,以下述优选实施例进行详细描述。
在本发明的一种优选实施例中,在上述步骤204之前,还可以包括:
步骤M1:在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业。
在本发明实施例中,第四特征作业是指多个第一特征作业中的一个特征作业。
第四子存储空间是指用于存储执行第四特征作业,按照与第四特征作业对应的第四特征提取规则从多个特征数据中提取的特征的子存储空间。第四子存储空间也是指定存储空间中的一个子存储空间。
在预览界面内可以监测是否存在用户(如研发人员等)删除的第四特征作业,例如,参照图2c,示出了本发明实施例提供的一种删除特征作业的示意图,如图2c所示,特征作业包括:552和557(特征作业的编号),特征作业552为被删除的特征作业,即特征作业552为第四特征作业。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在预览界面内监测到用户删除的第四特征作业时,可以获取与第四特征作业对应的第四子存储空间,并执行步骤M2。
步骤M2:清空所述第四子存储空间,得到更新后的第二待发布特征作业集。
在第四特征作业被用户删除之后,可以清空与第四特征作业对应的第四子存储空间,即清除第四子存储空间中存储的执行第四特征作业获取的特征。
在将第四子存储空间清空之后,可以得到更新后的第二待发布特征作业集。
在得到更新后的第二待发布特征作业集之后,可以执行第二待发布特征作业集的发布操作,具体地,以下述优选实施例进行描述。
在本发明的另一种优选实施例中,上述步骤204可以包括:
子步骤N1:依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
本步骤中的版本信息是指第二待发布特征作业集发布之后得到的发布版本信息,例如,发布版本号等。
在得到更新后的第二待发布特征作业集之后,可以依据监测到的发布指令,发布第二待发布特征作业集,在发布成功之后,即可获得与第二待发布特征作业集对应的版本信息。版本信息指示了第二待发布特征作业集发布之后的发布版本号。
本发明实施例可以对多个特征作业进行线上监控,并且,在待发布特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照待发布特征作业集对应的版本信息即可实现特征作业的回溯,可以按照待发布特征作业集对应的版本信息实现对特征作业集的管理。
步骤205:接收与已发布的特征作业集对应的特征查看指令。
特征查看指令是指查看已发布的特征作业集的指令。
特征查看指令可以是在已发布的特征作业集的管理界面,点击预先设置的特征作业集“查看”按钮而触发的查看指令。
特征查看指令也可以是由特征作业集管理人员输入的已发布的特征作业集对应的语音查看指令,通过对输入语音进行解析,触发生成的查看指令。
当然,不仅限于此,在具体实现中,本领域技术人员还可以根据实际需要设定特征查看指令的触发方式,本发明实施例对此不加以限制。
在系统中可以预先设置与特征查看指令对应的监控程序,该监控程序可以实时检测触发生成的特征查看指令,当然,还可以采用其它方法实时获取与已发布的特征作业集对应的特征查看指令,具体地,可以根据实际情况进行设置,本发明实施例对此不加以限制。
在接收到与已发布的特征作业集对应的特征查看指令之后,执行步骤206。
步骤206:依据所述特征查看指令,获取并展示所述已发布的特征作业集。
在接收到特征查看指令之后,可以依据特征查看指令,获取已发布的特征作业集,并将已发布的特征作业集展示于指定界面,例如,将已发布的特征作业集展示于一个弹窗界面等等。
当然,对于特征查看指令可以是对应于多个已发布的特征作业集的查看指令,在对应于多个已发布的特征作业集时,可以将多个已发布的特征作业集展示于指定界面,例如,如图2a所示,展示的上线成功(即已发布)的特征作业集包括:ID号分别为:72、71、…、67的特征作业集。
可以理解地,上述示例仅是为了更好地理解本发明实施例的技术方案而列举的示例,不作为对本发明实施例的唯一限制。
在依据特征查看指令,获取并展示已发布的特征作业集之后,执行步骤207。
步骤207:在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集。
更改操作可以为已发布的特征作业集中的一个特征作业的新增操作,即特征作业集中新增一个特征作业的操作。
更改操作也可以为已发布的特征作业集中的一个特征作业的删除操作,即删除已发布的特征作业集中的一个特征作业的操作。
更改操作还可以为已发布的特征作业集中的一个特征作业的修改操作,即修改已发布的特征作业集中的一个特征作业的操作。
已发布的特征作业集对应的更改操作可以为上述更改操作中的任一个操作,也可以为上述更改操作中的多个操作,对此可以根据实际情况而定,本发明实施例对此不加以限制。
在监测到与已发布的特征作业集对应的更改操作时,按照更改操作对已发布的特征作业集进行更改,从而得到更改后的特征作业集。
例如,在更改操作为新增特征作业的操作时,可以执行新增的特征作业,按照与新增特征作业对应的特征提取规则从目标数据源下发的特征数据中提取特征,并保存至指定存储空间,从而得到更改后的特征作业集。
在更改操作为删除特征作业的操作时,则可以清除删除的特征作业对应的特征,从而得到更改后的特征作业集。
而在更改操作为修改特征作业的操作时,可以删除被更改的特征作业提取的特征,并执行修改后的特征作业提取相应的特征,存储于指定存储空间,从而得到更改后的特征作业集。
当然,在更改操作包括多个上述更改操作时,可以按照上述过程执行,从而得到最终的更改后的特征作业集。
在监测到与已发布的特征作业集对应的更改操作时,对已发布的特征作业集进行更改,得到更改后的特征作业集之后,执行步骤208。
步骤208:依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
本步骤中的版本信息是指更改后的特征作业集发布之后生成的作业集版本,如发布版本号等。
在对已发布的特征作业集进行更改之后,可以监测与更改后的特征作业集的发布指令,在监测到与更改后的特征作业集对应的发布指令之后,可以依据发布指令发布更改后的特征作业集,在发布成功之后,即可获得与更改后的特征作业集对应的版本信息。版本信息指示了更改后的特征作业集的发布版本。
本发明实施例提供的特征作业集发布方法,除了具有上述实施例提供的特征作业集发布方法所具有的有益效果外,还可以对已发布的特征作业集进行回溯,避免了特征作业的发布没有版本的概念,无法进行特征作业的回溯的问题,并且,直接按照发布的特征作业集的版本信息即可快速查找到已发布的特征作业集,提高了特征作业的查找效率。
参照图3,示出了本发明实施例提供的一种特征作业集发布装置的结构示意图,具体可以包括:
空作业集创建模块310,用于创建与目标数据源对应的空特征作业集;第一特征提取模块320,用于提取由所述目标数据源下发的多个特征数据中包含的第一特征;待发布作业集生成模块330,用于将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;作业集发布模块340,用于在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
优选地,还包括:第一特征作业创建模块,用于在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则;所述第一特征提取模块包括:流任务启动子模块,用于启动预先创建的与所述空特征作业集关联的至少一个流任务;特征数据接收子模块,用于由各所述流任务接收由所述目标数据源下发的多个特征数据;第一特征提取子模块,用于由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征。
优选地,所述待发布作业集生成模块330包括:第一子空间获取子模块,用于针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间;所述第一子存储空间隶属于所述指定存储空间;第一特征保存子模块,用于将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
优选地,还包括:第一特征作业展示模块,用于在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面;流任务启动模块,用于在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则;第二特征提取模块,用于由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征;第一作业集获取模块,用于将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间;
所述作业集发布模块340包括:第一作业集发布子模块,用于依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
优选地,在所述第二特征作业为新配置的特征作业时,所述流任务启动模块包括:特征作业数目判断子模块,用于判断各所述流任务执行的特征作业的数目是否达到设定阈值;下一流任务创建子模块,用于在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务;下一流任务启动子模块,用于启动所述下一流任务;所述第二特征提取模块包括:第二特征提取子模块,用于由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述第一作业集获取模块包括:第二子空间创建子模块,用于在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间;第二特征保存子模块,用于将所述第二特征存储于所述第二子存储空间。
优选地,在所述第二特征作业为由第三特征作业修改得到的特征作业时,所述流任务启动模块包括:目标流任务获取子模块,用于获取与所述第三特征作业对应的目标流任务;所述第三特征作业为多个第一特征作业中的一个特征作业;目标流任务重启子模块,用于重启所述目标流任务;所述第二特征提取模块包括:第二特征获取子模块,用于由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;所述第一作业集获取模块包括:第三子空间获取子模块,用于获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间;第二子空间获取子模块,用于清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间;第二特征存储子模块,用于将所述第二特征存储于所述第二子存储空间。
优选地,还包括:第四子空间获取模块,用于在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业;第二作业集获取模块,用于清空所述第四子存储空间,得到更新后的第二待发布特征作业集;所述作业集发布模块340包括:第二作业集发布子模块,用于依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
本发明实施例提供的特征作业集发布装置,通过创建与目标数据源对应的空特征作业集,提取由目标数据源下发的多个特征数据中包含的第一特征,将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布作业集,并在监测到与待发布特征作业集对应的发布指令时,发布待发布特征作业集,并生成与待发布特征作业集对应的版本信息。本发明实施例通过创建的与数据源对应的空特征作业集,可以对多个特征作业进行线上监控,自动提取数据源下发的特征数据中的特征,并且,在空特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照特征作业集的版本信息实现特征作业的回溯,可以按照版本信息实现对已发布特征作业集的管理,达到了对已发布特征作业集的管理目的。
参照图4,示出了本发明实施例提供的一种特征作业集发布装置的结构示意图,具体可以包括:
空作业集创建模块410,用于创建与目标数据源对应的空特征作业集;第一特征提取模块420,用于提取由所述目标数据源下发的多个特征数据中包含的第一特征;待发布作业集生成模块430,用于将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;作业集发布模块440,用于在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息;查看指令接收模块450,用于接收与已发布的特征作业集对应的特征查看指令;特征作业集展示模块460,用于依据所述特征查看指令,获取并展示所述已发布的特征作业集;更改作业集获取模块470,用于在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集;更改作业集发布模块480,用于依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
本发明实施例提供的特征作业集发布装置,除了具有上述实施例提供的特征作业集发布装置所具有的有益效果外,还可以对已发布的特征作业集进行回溯,避免了特征作业的发布没有版本的概念,无法进行特征作业的回溯的问题,并且,直接按照发布的特征作业集的版本信息即可快速查找到已发布的特征作业集,提高了特征作业的查找效率。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
可选的,本发明还提供一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述特征作业集发布方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
可选的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述的特征作业集发布方法中的步骤。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例中,通过创建与目标数据源对应的空特征作业集,提取由目标数据源下发的多个特征数据中包含的第一特征,将第一特征保存至与空特征作业集对应的指定存储空间,生成待发布作业集,并在监测到与待发布特征作业集对应的发布指令时,发布待发布特征作业集,并生成与待发布特征作业集对应的版本信息。本发明实施例通过创建的与数据源对应的空特征作业集,可以对多个特征作业进行线上监控,自动提取数据源下发的特征数据中的特征,并且,在空特征作业集发布之后,可以生成相应的版本信息,可以在待发布特征作业集发布后,按照特征作业集的版本信息实现特征作业的回溯,可以按照版本信息实现对已发布特征作业集的管理,达到了对已发布特征作业集的管理目的。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种特征作业集发布方法、一种特征作业集发布装置、一种电子设备及一种计算机可读存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (16)

1.一种特征作业集发布方法,其特征在于,包括:
创建与目标数据源对应的空特征作业集;
在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则;
启动预先创建的与所述空特征作业集关联的至少一个流任务;
由各所述流任务接收由所述目标数据源下发的多个特征数据;
由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征;
将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;
在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一特征保存至与所述空特征作业集对应的指定存储空间,包括:
针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间;所述第一子存储空间隶属于所述指定存储空间;
将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
3.根据权利要求1所述的方法,其特征在于,在所述发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息之前,还包括:
在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面;
在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则;
由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征;
将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间;
所述在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息,包括:
依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
4.根据权利要求3所述的方法,其特征在于,在所述第二特征作业为新配置的特征作业时,
所述启动与所述第二特征作业对应的流任务,包括:
判断各所述流任务执行的特征作业的数目是否达到设定阈值;
在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务;
启动所述下一流任务;
所述由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征,包括:
由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;
所述将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,包括:
在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间;
将所述第二特征存储于所述第二子存储空间。
5.根据权利要求3所述的方法,其特征在于,在所述第二特征作业为由第三特征作业修改得到的特征作业时,
所述启动与所述第二特征作业对应的流任务,包括:
获取与所述第三特征作业对应的目标流任务;所述第三特征作业为多个第一特征作业中的一个特征作业;
重启所述目标流任务;
所述由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征,包括:
由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;
所述将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,包括:
获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间;
清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间;
将所述第二特征存储于所述第二子存储空间。
6.根据权利要求3所述的方法,其特征在于,在所述将所述多个第一特征作业展示于预览界面之后,还包括:
在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业;
清空所述第四子存储空间,得到更新后的第二待发布特征作业集;
所述在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息,包括:
依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
7.根据权利要求1所述的方法,其特征在于,在所述发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息之后,还包括:
接收与已发布的特征作业集对应的特征查看指令;
依据所述特征查看指令,获取并展示所述已发布的特征作业集;
在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集;
依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
8.一种特征作业集发布装置,其特征在于,包括:
空作业集创建模块,用于创建与目标数据源对应的空特征作业集;
第一特征作业创建模块,用于在所述空特征作业集中创建多个第一特征作业;每个第一特征作业对应于一个第一特征提取规则;
所述第一特征提取模块包括:
流任务启动子模块,用于启动预先创建的与所述空特征作业集关联的至少一个流任务;
特征数据接收子模块,用于由各所述流任务接收由所述目标数据源下发的多个特征数据;
第一特征提取子模块,用于由各所述流任务分别执行与各所述流任务关联的至少一个所述第一特征作业,按照与各所述第一特征作业对应的第一特征提取规则,从所述多个特征数据中提取所述第一特征;
待发布作业集生成模块,用于将所述第一特征保存至与所述空特征作业集对应的指定存储空间,生成待发布特征作业集;
作业集发布模块,用于在监测到与所述待发布特征作业集对应的发布指令时,发布所述待发布特征作业集,并生成与所述待发布特征作业集对应的版本信息。
9.根据权利要求8所述的装置,其特征在于,所述待发布作业集生成模块包括:
第一子空间获取子模块,用于针对各所述第一特征作业,依次获取与所述第一特征作业对应的第一子存储空间;所述第一子存储空间隶属于所述指定存储空间;
第一特征保存子模块,用于将与所述第一特征作业对应的第一特征存储于所述第一子存储空间。
10.根据权利要求8所述的装置,其特征在于,还包括:
第一特征作业展示模块,用于在监测到与所述待发布特征作业集对应的预览指令后,将所述多个第一特征作业展示于预览界面;
流任务启动模块,用于在所述预览界面内监测到用户添加的第二特征作业时,启动与所述第二特征作业对应的流任务;所述第二特征作业对应于第二特征提取规则;
第二特征提取模块,用于由启动后的流任务执行所述第二特征作业,按照与所述第二特征作业对应的所述第二特征提取规则,从所述多个特征数据中提取第二特征;
第一作业集获取模块,用于将所述第二特征存储于与所述第二特征作业对应的第二子存储空间,得到更新后的第一待发布特征作业集;所述第二子存储空间隶属于所述指定存储空间;
所述作业集发布模块包括:
第一作业集发布子模块,用于依据所述发布指令,发布所述第一待发布特征作业集,并生成与所述第一待发布特征作业集对应的版本信息。
11.根据权利要求10所述的装置,其特征在于,在所述第二特征作业为新配置的特征作业时,
所述流任务启动模块包括:
特征作业数目判断子模块,用于判断各所述流任务执行的特征作业的数目是否达到设定阈值;
下一流任务创建子模块,用于在各所述流任务执行的特征作业的数目均达到设定阈值的情况下,创建下一流任务;
下一流任务启动子模块,用于启动所述下一流任务;
所述第二特征提取模块包括:
第二特征提取子模块,用于由所述下一流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;
所述第一作业集获取模块包括:
第二子空间创建子模块,用于在所述指定存储空间中创建与所述第二特征作业对应的第二子存储空间;
第二特征保存子模块,用于将所述第二特征存储于所述第二子存储空间。
12.根据权利要求10所述的装置,其特征在于,在所述第二特征作业为由第三特征作业修改得到的特征作业时,
所述流任务启动模块包括:
目标流任务获取子模块,用于获取与所述第三特征作业对应的目标流任务;所述第三特征作业为多个第一特征作业中的一个特征作业;
目标流任务重启子模块,用于重启所述目标流任务;
所述第二特征提取模块包括:
第二特征获取子模块,用于由所述目标流任务执行所述第二特征作业,按照所述第二特征提取规则,从所述多个特征数据中提取所述第二特征;
所述第一作业集获取模块包括:
第三子空间获取子模块,用于获取与所述第三特征作业对应的第三子存储空间;所述第三子存储空间隶属于所述指定存储空间;
第二子空间获取子模块,用于清空所述第三子存储空间,并将清空后的第三子存储空间作为所述第二子存储空间;
第二特征存储子模块,用于将所述第二特征存储于所述第二子存储空间。
13.根据权利要求10所述的装置,其特征在于,还包括:
第四子空间获取模块,用于在所述预览界面内监测到所述用户删除的第四特征作业时,获取与所述第四特征作业对应的第四子存储空间;所述第四特征作业为所述多个第一特征作业中的一个特征作业;
第二作业集获取模块,用于清空所述第四子存储空间,得到更新后的第二待发布特征作业集;
所述作业集发布模块包括:
第二作业集发布子模块,用于依据所述发布指令,发布所述第二待发布特征作业集,并生成与所述第二待发布特征作业集对应的版本信息。
14.根据权利要求8所述的装置,其特征在于,还包括:
查看指令接收模块,用于接收与已发布的特征作业集对应的特征查看指令;
特征作业集展示模块,用于依据所述特征查看指令,获取并展示所述已发布的特征作业集;
更改作业集获取模块,用于在监测到与所述已发布的特征作业集对应的更改操作时,对所述已发布的特征作业集进行更改,得到更改后的特征作业集;
更改作业集发布模块,用于依据与所述更改后的特征作业集对应的发布指令,发布所述更改后的特征作业集,并生成与所述更改后的特征作业集对应的版本信息。
15.一种电子设备,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的特征作业集发布方法的步骤。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的特征作业集发布方法中的步骤。
CN201910452934.1A 2019-05-28 2019-05-28 特征作业集发布方法、装置、电子设备及存储介质 Active CN110297850B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910452934.1A CN110297850B (zh) 2019-05-28 2019-05-28 特征作业集发布方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910452934.1A CN110297850B (zh) 2019-05-28 2019-05-28 特征作业集发布方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN110297850A CN110297850A (zh) 2019-10-01
CN110297850B true CN110297850B (zh) 2021-10-15

Family

ID=68027336

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910452934.1A Active CN110297850B (zh) 2019-05-28 2019-05-28 特征作业集发布方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN110297850B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104199893A (zh) * 2014-08-25 2014-12-10 成都索贝数码科技股份有限公司 一种快速将全媒体内容发布的系统和方法
CN104462258A (zh) * 2014-11-21 2015-03-25 浙江中测新图地理信息技术有限公司 一种多版本的非结构化模型的组织管理方法
CN105653250A (zh) * 2014-11-14 2016-06-08 中国科学院沈阳计算技术研究所有限公司 一种用于三维模拟系统的任务控制系统
CN106610792A (zh) * 2016-07-28 2017-05-03 四川用联信息技术有限公司 云存储中一种重复数据删除算法
CN107609064A (zh) * 2017-08-30 2018-01-19 成都中建科联网络科技有限公司 基于数据挖掘的竞争对手智能分析方法
CN107643712A (zh) * 2017-09-25 2018-01-30 中国航空工业集团公司西安飞机设计研究所 一种多传感器智能监测装置
CN108549722A (zh) * 2018-04-25 2018-09-18 稿定(厦门)科技有限公司 多平台数据发布方法、系统及介质
CN108958288A (zh) * 2018-07-26 2018-12-07 杭州瓦屋科技有限公司 基于地理信息的低空作业无人机系统及其航迹规划方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6488903B2 (ja) * 2015-06-16 2019-03-27 富士通株式会社 画面転送制御システム、画面転送制御プログラム及び画面転送制御方法
AU2016321319A1 (en) * 2015-09-09 2018-04-26 Psomagen, Inc. Method and system for microbiome-derived diagnostics and therapeutics for eczema
CN108363714A (zh) * 2017-12-21 2018-08-03 北京至信普林科技有限公司 一种方便数据分析人员使用的集成机器学习的方法及系统
CN109145100A (zh) * 2018-08-24 2019-01-04 深圳追科技有限公司 一种可定制化流程的任务型客服机器人系统及其工作方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104199893A (zh) * 2014-08-25 2014-12-10 成都索贝数码科技股份有限公司 一种快速将全媒体内容发布的系统和方法
CN105653250A (zh) * 2014-11-14 2016-06-08 中国科学院沈阳计算技术研究所有限公司 一种用于三维模拟系统的任务控制系统
CN104462258A (zh) * 2014-11-21 2015-03-25 浙江中测新图地理信息技术有限公司 一种多版本的非结构化模型的组织管理方法
CN106610792A (zh) * 2016-07-28 2017-05-03 四川用联信息技术有限公司 云存储中一种重复数据删除算法
CN107609064A (zh) * 2017-08-30 2018-01-19 成都中建科联网络科技有限公司 基于数据挖掘的竞争对手智能分析方法
CN107643712A (zh) * 2017-09-25 2018-01-30 中国航空工业集团公司西安飞机设计研究所 一种多传感器智能监测装置
CN108549722A (zh) * 2018-04-25 2018-09-18 稿定(厦门)科技有限公司 多平台数据发布方法、系统及介质
CN108958288A (zh) * 2018-07-26 2018-12-07 杭州瓦屋科技有限公司 基于地理信息的低空作业无人机系统及其航迹规划方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Hadoop下资源匹配最大集作业调度算法;朱洁等;《计算机应用》;20151210;3383-3386,3446 *

Also Published As

Publication number Publication date
CN110297850A (zh) 2019-10-01

Similar Documents

Publication Publication Date Title
WO2018196559A1 (zh) 应用程序异常处理方法、装置及存储介质
CN107908550B (zh) 一种软件缺陷统计处理方法及装置
CN111639027B (zh) 一种测试方法、装置及电子设备
CN111783103A (zh) 基于Maven的依赖管理方法、装置、电子装置及存储介质
US10949218B2 (en) Generating an execution script for configuration of a system
CN111858608A (zh) 一种数据管理方法、装置、服务器和存储介质
CN111414351A (zh) 一种MySQL数据库的性能诊断方法及装置
CN107168844B (zh) 一种性能监控的方法及装置
CN112306880A (zh) 测试方法、装置、电子设备和计算机可读存储介质
CN114153688A (zh) 基于云平台的分布式监控方法及装置
US10949333B1 (en) Application maturity console
CN110795332A (zh) 一种自动化测试方法和装置
CN111865673A (zh) 一种自动化故障管理方法、装置及系统
CN107908525B (zh) 告警处理方法、设备及可读存储介质
US11526347B2 (en) Intelligent software patch management
CN110297850B (zh) 特征作业集发布方法、装置、电子设备及存储介质
JP6642024B2 (ja) 管理装置,管理方法および管理プログラム
CN109815082B (zh) Kafka主题监控方法、装置、电子设备及存储介质
CN114896418A (zh) 知识图谱构建方法、装置、电子设备及存储介质
CA3144122A1 (en) Data verifying method, device and system
CN115065597A (zh) 一种容器资源配置方法、装置、介质和设备
CN112306862A (zh) 一种前端自动化测试系统及方法、存储介质、计算设备
CN112906387A (zh) 风险内容识别方法、装置、设备、介质和计算机程序产品
US20150207866A1 (en) Determination device and determination method
CN113641670B (zh) 数据存储及数据检索方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant