CN116382666B - 一种基于人工智能模型的项目执行方法和系统 - Google Patents

一种基于人工智能模型的项目执行方法和系统 Download PDF

Info

Publication number
CN116382666B
CN116382666B CN202310346405.XA CN202310346405A CN116382666B CN 116382666 B CN116382666 B CN 116382666B CN 202310346405 A CN202310346405 A CN 202310346405A CN 116382666 B CN116382666 B CN 116382666B
Authority
CN
China
Prior art keywords
node
execution
item
project
task
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310346405.XA
Other languages
English (en)
Other versions
CN116382666A (zh
Inventor
陶杨
易水寒
刘睿民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Birui Data Technology Co ltd
Original Assignee
Beijing Birui Data Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Birui Data Technology Co ltd filed Critical Beijing Birui Data Technology Co ltd
Priority to CN202310346405.XA priority Critical patent/CN116382666B/zh
Publication of CN116382666A publication Critical patent/CN116382666A/zh
Application granted granted Critical
Publication of CN116382666B publication Critical patent/CN116382666B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/34Graphical or visual programming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/10Requirements analysis; Specification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/545Interprogram communication where tasks reside in different layers, e.g. user- and kernel-space
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种人工智能模型项目的执行方法和系统,该方法包括:根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果,从而提升人工智能模型的项目生成和执行的效率。

Description

一种基于人工智能模型的项目执行方法和系统
技术领域
本申请涉及数据库系统技术和数人工智能领域,更具体地,涉及一种人工智能模型项目的执行方法和系统。
背景技术
随着数据时代发展,互联网数据量呈现爆发式增长,庞大多样的数据量丰富了人工智能模型样本数据集进而帮助提高人工智能模型预测准确度,但同时也对执行端的数据处理性能提出较高要求。为获得更高数据处理性能,通常以分布式系统替代原始的单机设备,进行人工智能模型执行。
目前,数据处理设备通过网络通信的方式组成分布式集群,集群中各设备分别存储人工智能模型的一个分片,设备间通过互联网通信传输样本数据集以配合完成人工智能模型的执行,但该分布式集群的搭建往往需要花费很高成本,往往为大规模使用者所有,对中小规模使用者不友好。同时在根据业务涉及的数据处理过程使用任务算子构建人工智能模型和执行人工智能模型项目的过程中,无法根据业务的释义和数据处理过程自动构建人工智能模型,往往需要大量的认为手动参与生成人工智能模型和执行人工智能模型项目,这导致人工智能模型构建和人工智能模型项目构建和执行效率都大幅降低,同时获得准确的执行结果事件也大大拉长,也进一步增加人力成本、时间成本和费用成本,提高了可视化人工智能操作平台使用的门槛。
基于此,有必要引入一种新的方法和系统,能够根据用户的业务需求和项目执行请求,自动解析与该项目执行请求对应的画布信息,并利用人工智能模型任务算子自动生成人工智能模型拓扑关系图结构和人工智能模型项目,并在执行人工智能模型项目后自动返回执行结果,以解决现有技术中人工智能项目生成和执行依赖人工、成本高、时间长等问题,从而简化人工智能模型的项目生成过程、提升项目执行的效率,降低时间和人力成本,提升可视化人工智能操作平台的易用性。
发明内容
针对上面提到的技术问题,本发明提供了一种人工智能模型项目的执行方法和系统,通过根据画布信息的构成和图拓扑关系结构定义画布信息数据结构和人工智能模型数据结构,并基于画布信息数据结构和人工智能模型数据结构,根据用户的人工智能模型项目的项目执行请求,将项目执行请求对应的画布信息解析生成匹配了任务算子地址的人工智能模型图结构和任务执行序列,实现了根据用户的业务需求和项目执行请求,自动解析与该项目执行请求对应的画布信息,并利用人工智能模型任务算子自动生成人工智能模型拓扑关系图结构和人工智能模型项目,并在执行人工智能模型项目后自动返回执行结果,解决了现有技术中人工智能项目生成和执行依赖人工、成本高、时间长等问题,从而简化人工智能模型的项目生成过程、提升项目执行的效率,降低时间和人力成本,提升可视化人工智能操作平台的易用性。
本发明提供一种人工智能模型项目的执行方法,应用于由主节点和从节点并行连接的数据库系统中,所述方法包括:
S101,根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果。
如上所述,所述画布信息数据结构包括节点属性、节点连接关系和节点拖入时间;所述人工智能模型数据结构包括节点标识、节点间的拓扑关系、节点梯度、节点任务、所述任务算子地址、初始参数、参数地址、处理结果记录标记和执行状态;其中,所述节点属性包括节点标识和节点位置;所述节点连接关系包括输入节点和输出节点;所述执行状态包括待执行、执行错误和执行完成。
如上所述,所述S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息的步骤包括:所述主节点接收所述网页端发出的人工智能模型项目的项目执行请求,并对所述项目执行请求进行解析,得到所述人工智能模型项目的所述项目id和所述项目版本id,并向所述数据库系统发送画布信息获取请求;所述数据库系统收到所述画布信息获取请求后,根据所述项目id、所述项目版本id和所述画布信息数据结构,向所述主节点返回与项目执行请求对应的画布信息;其中,所述与项目执行请求对应的画布信息包括与项目执行请求对应的所述节点属性、所述节点连接关系和所述节点拖入时间。
如上所述,所述S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址的步骤包括:构建节点间拓扑关系,基于所述画布信息数据结构,所述主节点对与所述项目执行请求对应的画布信息进行解析,根据与项目执行请求对应的所述节点属性,得到所述节点标识、所述节点位置,根据与项目执行请求对应的所述节点连接关系和所述节点标识,得到所述输入节点和所述输出节点,以及各节点的所述节点任务、所述任务算子地址、所述初始参数、所述参数地址、所述处理结果记录标记和所述节点拖入时间,并构建所述节点间的拓扑关系和所述节点梯度;生成MS模型,基于所述人工智能模型数据结构,根据所述节点标识、所述节点间的拓扑关系、所述任务算子地址、所述初始参数、所述参数地址和所述处理结果记录标记,生成与所述项目执行请求对应的MS模型,并初始化各节点的所述执行状态均为待执行;其中,与所述项目执行请求对应的MS模型为根据所述节点标识和所述节点间的拓扑关系,按照执行的先后顺序将各节点承载的人工智能运算任务与所述任务算子地址匹配后生成的人工智能模型图结构;所述节点梯度为与所述节点间的拓扑关系对应的节点任务执行的先后顺序标识,同一个所述节点梯度包含一个或多个节点,所述节点梯度的值越小,节点任务执行优先级越高。
如上所述,所述S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果的步骤包括:a)根据各节点的所述执行状态、所述梯度和所述节点标识,确定节点任务执行优先级最高的所述节点为第一级节点;b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态;c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态;d)重复步骤c),直到所有所述执行状态为待执行的节点任务均执行完成,生成最终执行结果,并将所述最终执行结果返回至所述主节点。
如上所述,所述b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态的步骤还包括节点状态处理步骤,具体为:若所述第一级节点的所述节点任务执行失败,则所述第一执行结果为空集,将所述第一级节点的执行状态设置为执行错误;若所述第一级节点的所述节点任务执行成功,则获取所述第一执行结果,将所述第一级节点的执行状态设置为执行完成,并根据所述处理结果记录标记处理所述第一执行结果。
如上所述,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输入节点处理的步骤,具体为:若所述下一级节点存在两个或两个以上的输入节点,则所述下一级节点获取全部所述输入节点的执行结果后,所述下一级节点将全部所述输入节点的执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果;根据所述第二执行结果更新所述下一级节点的执行状态。
如上所述,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输出分支节点处理的步骤,具体为:
若所述下一级节点中包含两个或两个以上的分支节点,则比较各分支节点的所述节点拖入时间,并根据比较结果分别执行所述分支节点的所述节点任务;1)将所述第一执行结果,以及拖入时间在前的分支节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述分支节点的所述任务算子地址对应的所述从节点上执行,得到分支节点执行结果,并根据所述分支节点执行结果更新所述分支节点的执行状态;2)根据所述分支节点的所述梯度、所述节点标识、所述节点间的拓扑关系,将所述分支节点执行结果,发送至与所述分支节点的下一个分支节点的所述任务算子地址对应的所述从节点上执行,得到下一个分支节点执行结果,并根据下一个分支节点执行结果更新所述分支节点的执行状态;3)重复步骤1)和步骤2),直到所有分支节点的所述节点任务全部执行完成。
相应的,本发明还提供了一种人工智能模型项目的执行系统,部署于由主节点和从节点并行连接的数据库系统上,所述系统包括模型定义单元、请求解析单元、模型生成单元和项目执行单元;
其中,所述模型定义单元,用于根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;所述请求解析单元,用于接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;所述模型生成单元,用于基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;所述项目执行单元,用于根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果。
本发明通过应用以上技术方案,实现了通过根据画布信息的构成和图拓扑关系结构定义画布信息数据结构和人工智能模型数据结构,并基于画布信息数据结构和人工智能模型数据结构,根据用户的人工智能模型项目的项目执行请求,将项目执行请求对应的画布信息解析生成匹配了任务算子地址的人工智能模型图结构和任务执行序列,进而实现了根据用户的业务需求和项目执行请求,自动解析与该项目执行请求对应的画布信息,并利用人工智能模型任务算子自动生成人工智能模型拓扑关系图结构和人工智能模型项目,并在执行人工智能模型项目后自动返回执行结果,解决了现有技术中人工智能项目生成和执行依赖人工、成本高、时间长等问题,从而简化人工智能模型的项目生成过程、提升项目执行的效率,降低时间和人力成本,提升可视化人工智能操作平台的易用性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本发明实施例提出的一种人工智能模型项目的执行方法的流程示意图;
图2示出了本发明实施例提出的一种人工智能模型项目的执行系统的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本发明提供了一种人工智能模型项目的执行方法,所述方法应用于由主节点和从节点并行连接的数据库系统中,如图1所示,所述方法包括以下步骤:
S101,根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构。
本实施例中,所述画布信息数据结构包括节点属性、节点连接关系和节点拖入时间;
所述人工智能模型数据结构包括节点标识、节点间的拓扑关系、节点梯度、节点任务、所述任务算子地址、初始参数、参数地址、处理结果记录标记和执行状态;
其中,
所述节点属性包括节点标识和节点位置;
所述节点连接关系包括输入节点和输出节点;
所述执行状态包括待执行、执行错误和执行完成。
S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息。
为了提高对画布信息解析的准确度和效率,本实施例中,所述S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息的步骤包括:
所述主节点接收所述网页端发出的人工智能模型项目的项目执行请求,并对所述项目执行请求进行解析,得到所述人工智能模型项目的所述项目id和所述项目版本id,并向所述数据库系统发送画布信息获取请求;
所述数据库系统收到所述画布信息获取请求后,根据所述项目id、所述项目版本id和所述画布信息数据结构,向所述主节点返回与项目执行请求对应的画布信息;
其中,所述与项目执行请求对应的画布信息包括与项目执行请求对应的所述节点属性、所述节点连接关系和所述节点拖入时间。
S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址。
本实施例中,所述S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址的步骤包括:
构建节点间拓扑关系,基于所述画布信息数据结构,所述主节点对与所述项目执行请求对应的画布信息进行解析,根据与项目执行请求对应的所述节点属性,得到所述节点标识、所述节点位置,根据与项目执行请求对应的所述节点连接关系和所述节点标识,得到所述输入节点和所述输出节点,以及各节点的所述节点任务、所述任务算子地址、所述初始参数、所述参数地址、所述处理结果记录标记和所述节点拖入时间,并构建所述节点间的拓扑关系和所述节点梯度;
生成MS模型,基于所述人工智能模型数据结构,根据所述节点标识、所述节点间的拓扑关系、所述任务算子地址、所述初始参数、所述参数地址和所述处理结果记录标记,生成与所述项目执行请求对应的MS模型,并初始化各节点的所述执行状态均为待执行;
其中,
与所述项目执行请求对应的MS模型为根据所述节点标识和所述节点间的拓扑关系,按照执行的先后顺序将各节点承载的人工智能运算任务与所述任务算子地址匹配后生成的人工智能模型图结构;
所述节点梯度为与所述节点间的拓扑关系对应的节点任务执行的先后顺序标识,同一个所述节点梯度包含一个或多个节点,所述节点梯度的值越小,节点任务执行优先级越高。
S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果。
本实施例中,所述S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果的步骤包括:
a)根据各节点的所述执行状态、所述梯度和所述节点标识,确定节点任务执行优先级最高的所述节点为第一级节点;
b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态;
c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态;
d)重复步骤c),直到所有所述执行状态为待执行的节点任务均执行完成,生成最终执行结果,并将所述最终执行结果返回至所述主节点。
为了对节点任务执行状态进行更好地管理,本实施例中,所述b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态的步骤还包括节点状态处理步骤,具体为:
若所述第一级节点的所述节点任务执行失败,则所述第一执行结果为空集,将所述第一级节点的执行状态设置为执行错误;
若所述第一级节点的所述节点任务执行成功,则获取所述第一执行结果,将所述第一级节点的执行状态设置为执行完成,并根据所述处理结果记录标记处理所述第一执行结果。
为了更好地处理同一节点存在的两个或两个以上的输入节点的情况,本实施例中,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输入节点处理的步骤,具体为:
若所述下一级节点存在两个或两个以上的输入节点,
则所述下一级节点获取全部所述输入节点的执行结果后,所述下一级节点将全部所述输入节点的执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果;
根据所述第二执行结果更新所述下一级节点的执行状态。
为了更好地处理同一节点存在的两个或两个以上的输出节点的情况,本实施例中,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输出分支节点处理的步骤,具体为:
若所述下一级节点中包含两个或两个以上的分支节点,则比较各分支节点的所述节点拖入时间,并根据比较结果分别执行所述分支节点的所述节点任务;
1)将所述第一执行结果,以及拖入时间在前的分支节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述分支节点的所述任务算子地址对应的所述从节点上执行,得到分支节点执行结果,并根据所述分支节点执行结果更新所述分支节点的执行状态;
2)根据所述分支节点的所述梯度、所述节点标识、所述节点间的拓扑关系,将所述分支节点执行结果,发送至与所述分支节点的下一个分支节点的所述任务算子地址对应的所述从节点上执行,得到下一个分支节点执行结果,并根据下一个分支节点执行结果更新所述分支节点的执行状态;
3)重复步骤1)和步骤2),直到所有分支节点的所述节点任务全部执行完成。
通过应用以上技术方案,根据画布信息的构成和图拓扑关系结构定义画布信息数据结构和人工智能模型数据结构,并基于画布信息数据结构和人工智能模型数据结构,根据用户的人工智能模型项目的项目执行请求,将项目执行请求对应的画布信息解析生成匹配了任务算子地址的人工智能模型图结构和任务执行序列,进而实现了根据用户的业务需求和项目执行请求,自动解析与该项目执行请求对应的画布信息,并利用人工智能模型任务算子自动生成人工智能模型拓扑关系图结构和人工智能模型项目,并在执行人工智能模型项目后自动返回执行结果,解决了现有技术中人工智能项目生成和执行依赖人工、成本高、时间长等问题,从而简化人工智能模型的项目生成过程、提升项目执行的效率,降低时间和人力成本,提升可视化人工智能操作平台的易用性。
与本发明实施例中的一种所述人工智能模型项目的执行方法相对应,本发明还公开了一种人工智能模型项目的执行系统,所述系统部署于由主节点和从节点并行连接的数据库系统上,如图2所示,所述系统包括模型定义单元、请求解析单元、模型生成单元和项目执行单元;
其中,所述模型定义单元,用于根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;
所述请求解析单元,用于接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;
所述模型生成单元,用于基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;
所述项目执行单元,用于根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (7)

1.一种人工智能模型项目的执行方法,应用于由主节点和从节点并行连接的数据库系统中,其特征在于,所述方法包括:
S101,根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;
其中,所述画布信息数据结构包括节点属性、节点连接关系和节点拖入时间;
所述人工智能模型数据结构包括节点标识、节点间的拓扑关系、节点梯度、节点任务、任务算子地址、初始参数、参数地址、处理结果记录标记和执行状态;所述节点属性包括节点标识和节点位置;
所述节点连接关系包括输入节点和输出节点;
所述执行状态包括待执行、执行错误和执行完成;
S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;
S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;
S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果;
其中,所述S103,基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址的步骤包括:
构建节点间拓扑关系,基于所述画布信息数据结构,所述主节点对与所述项目执行请求对应的画布信息进行解析,根据与项目执行请求对应的所述节点属性,得到所述节点标识、所述节点位置,根据与项目执行请求对应的所述节点连接关系和所述节点标识,得到所述输入节点和所述输出节点,以及各节点的所述节点任务、所述任务算子地址、所述初始参数、所述参数地址、所述处理结果记录标记和所述节点拖入时间,并构建所述节点间的拓扑关系和所述节点梯度;
生成MS模型,基于所述人工智能模型数据结构,根据所述节点标识、所述节点间的拓扑关系、所述任务算子地址、所述初始参数、所述参数地址和所述处理结果记录标记,生成与所述项目执行请求对应的MS模型,并初始化各节点的所述执行状态均为待执行;
其中,与所述项目执行请求对应的MS模型为根据所述节点标识和所述节点间的拓扑关系,按照执行的先后顺序将各节点承载的人工智能运算任务与所述任务算子地址匹配后生成的人工智能模型图结构;
所述节点梯度为与所述节点间的拓扑关系对应的节点任务执行的先后顺序标识,同一个所述节点梯度包含一个或多个节点,所述节点梯度的值越小,节点任务执行优先级越高。
2.如权利要求1所述的方法,其特征在于,所述S102,接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息的步骤包括:
所述主节点接收所述网页端发出的人工智能模型项目的项目执行请求,并对所述项目执行请求进行解析,得到所述人工智能模型项目的所述项目id和所述项目版本id,并向所述数据库系统发送画布信息获取请求;
所述数据库系统收到所述画布信息获取请求后,根据所述项目id、所述项目版本id和所述画布信息数据结构,向所述主节点返回与项目执行请求对应的画布信息;
其中,所述与项目执行请求对应的画布信息包括与项目执行请求对应的所述节点属性、所述节点连接关系和所述节点拖入时间。
3.如权利要求1所述的方法,其特征在于,所述S104,根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果的步骤包括:
a)根据各节点的所述执行状态、所述梯度和所述节点标识,确定节点任务执行优先级最高的所述节点为第一级节点;
b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态;
c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态;
d)重复步骤c),直到所有所述执行状态为待执行的节点任务均执行完成,生成最终执行结果,并将所述最终执行结果返回至所述主节点。
4.如权利要求3所述的方法,其特征在于,所述b)将所述第一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述第一级节点的所述任务算子地址对应的所述从节点上执行,并返回第一执行结果,根据所述第一执行结果更新所述第一级节点的执行状态的步骤还包括节点状态处理步骤,具体为:
若所述第一级节点的所述节点任务执行失败,则所述第一执行结果为空集,将所述第一级节点的执行状态设置为执行错误;
若所述第一级节点的所述节点任务执行成功,则获取所述第一执行结果,将所述第一级节点的执行状态设置为执行完成,并根据所述处理结果记录标记处理所述第一执行结果。
5.如权利要求3所述的方法,其特征在于,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输入节点处理的步骤,具体为:
若所述下一级节点存在两个或两个以上的输入节点,
则所述下一级节点获取全部所述输入节点的执行结果后,所述下一级节点将全部所述输入节点的执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果;
根据所述第二执行结果更新所述下一级节点的执行状态。
6.如权利要求3所述的方法,其特征在于,所述c)根据所述梯度、所述节点标识和所述节点间的拓扑关系,确定下一个执行优先级的节点为下一级节点,将所述第一执行结果,以及所述下一级节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述下一级节点的所述任务算子地址对应的所述从节点上执行,并返回第二执行结果,根据所述第二执行结果更新所述下一级节点的执行状态的步骤还包括多输出分支节点处理的步骤,具体为:
若所述下一级节点中包含两个或两个以上的分支节点,则比较各分支节点的所述节点拖入时间,并根据比较结果分别执行所述分支节点的所述节点任务;
1)将所述第一执行结果,以及拖入时间在前的分支节点的所述节点任务、所述初始参数和所述参数地址,发送至与所述分支节点的所述任务算子地址对应的所述从节点上执行,得到分支节点执行结果,并根据所述分支节点执行结果更新所述分支节点的执行状态;
2)根据所述分支节点的所述梯度、所述节点标识、所述节点间的拓扑关系,将所述分支节点执行结果,发送至与所述分支节点的下一个分支节点的所述任务算子地址对应的所述从节点上执行,得到下一个分支节点执行结果,并根据下一个分支节点执行结果更新所述分支节点的执行状态;
3)重复步骤1)和步骤2),直到所有分支节点的所述节点任务全部执行完成。
7.一种实施权利要求1所述人工智能模型项目的执行方法的系统,部署于由主节点和从节点并行连接的数据库系统上,其特征在于,所述系统包括模型定义单元、请求解析单元、模型生成单元和项目执行单元;
其中,
所述模型定义单元,用于根据画布信息的构成和图拓扑关系结构,定义画布信息数据结构和人工智能模型数据结构;
所述请求解析单元,用于接收并解析网页端发出的人工智能模型项目的项目执行请求,得到项目id和项目版本id,根据所述项目id、所述项目版本id和所述画布信息数据结构,获取与所述项目执行请求对应的画布信息;
所述模型生成单元,用于基于所述人工智能模型数据结构,对与所述项目执行请求对应的画布信息进行解析,生成与所述项目执行请求对应的MS模型,并获取任务算子地址;
所述项目执行单元,用于根据与所述项目执行请求对应的MS模型、所述任务算子地址和节点拖入时间执行所述人工智能模型项目,并返回执行结果。
CN202310346405.XA 2023-04-03 2023-04-03 一种基于人工智能模型的项目执行方法和系统 Active CN116382666B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310346405.XA CN116382666B (zh) 2023-04-03 2023-04-03 一种基于人工智能模型的项目执行方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310346405.XA CN116382666B (zh) 2023-04-03 2023-04-03 一种基于人工智能模型的项目执行方法和系统

Publications (2)

Publication Number Publication Date
CN116382666A CN116382666A (zh) 2023-07-04
CN116382666B true CN116382666B (zh) 2023-09-26

Family

ID=86967037

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310346405.XA Active CN116382666B (zh) 2023-04-03 2023-04-03 一种基于人工智能模型的项目执行方法和系统

Country Status (1)

Country Link
CN (1) CN116382666B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017181587A1 (zh) * 2016-04-20 2017-10-26 乐视控股(北京)有限公司 Cdn网络中的节点管理方法和电子设备
KR102164844B1 (ko) * 2020-05-07 2020-10-14 주식회사 크라우드웍스 인공지능 학습데이터 생성을 위한 크라우드소싱 기반 프로젝트의 작업 단위 난이도를 활용한 작업자 평가 방법
EP3764174A1 (en) * 2019-07-11 2021-01-13 Yokogawa Electric Corporation System and method for module enginnering with sequence libraries
CN114356190A (zh) * 2022-01-06 2022-04-15 中电云数智科技有限公司 基于Web的AI可视化建模流程绘制方法、系统及用途
WO2022212852A1 (en) * 2021-04-02 2022-10-06 Liveperson, Inc. Domain adaptation of ai nlp encoders with knowledge distillation
CN115169810A (zh) * 2022-06-09 2022-10-11 国电南瑞科技股份有限公司 一种面向电网调控的人工智能系统构建方法及装置
CN115509509A (zh) * 2022-09-13 2022-12-23 中银金融科技有限公司 应用软件开发过程的可视化方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200075019A1 (en) * 2017-08-02 2020-03-05 Veritone, Inc. System and method for neural network orchestration
US10796228B2 (en) * 2017-09-29 2020-10-06 Oracle International Corporation Machine-learning-based processing of de-obfuscated data for data enrichment

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017181587A1 (zh) * 2016-04-20 2017-10-26 乐视控股(北京)有限公司 Cdn网络中的节点管理方法和电子设备
EP3764174A1 (en) * 2019-07-11 2021-01-13 Yokogawa Electric Corporation System and method for module enginnering with sequence libraries
KR102164844B1 (ko) * 2020-05-07 2020-10-14 주식회사 크라우드웍스 인공지능 학습데이터 생성을 위한 크라우드소싱 기반 프로젝트의 작업 단위 난이도를 활용한 작업자 평가 방법
WO2022212852A1 (en) * 2021-04-02 2022-10-06 Liveperson, Inc. Domain adaptation of ai nlp encoders with knowledge distillation
CN114356190A (zh) * 2022-01-06 2022-04-15 中电云数智科技有限公司 基于Web的AI可视化建模流程绘制方法、系统及用途
CN115169810A (zh) * 2022-06-09 2022-10-11 国电南瑞科技股份有限公司 一种面向电网调控的人工智能系统构建方法及装置
CN115509509A (zh) * 2022-09-13 2022-12-23 中银金融科技有限公司 应用软件开发过程的可视化方法及系统

Also Published As

Publication number Publication date
CN116382666A (zh) 2023-07-04

Similar Documents

Publication Publication Date Title
US20070250331A1 (en) Method for composition of stream processing plans
US20110016451A1 (en) Method and system for generating test cases for a software application
CN113760971B (zh) 用于检索图数据库的数据的方法、计算设备和存储介质
CN110866029B (zh) sql语句构建方法、装置、服务器及可读存储介质
CN114490630A (zh) 一种查询处理方法、数据源注册方法及查询引擎
CN113641591A (zh) 测试用例生成方法及装置、测试方法及装置
CN115934097A (zh) 生成可执行语句的方法、装置、存储介质及电子装置
CN113220907B (zh) 业务知识图谱的构建方法及装置、介质、电子设备
CN116382666B (zh) 一种基于人工智能模型的项目执行方法和系统
KR20190059152A (ko) 행위자 기반 시뮬레이션 모델의 데이터 동화 시스템 및 그 방법
CN112541556A (zh) 模型构建优化方法、设备、介质及计算机程序产品
CN116244301A (zh) 一种基于有向无环图的时空过程机理模型服务链编排方法
CN110727729A (zh) 一种实现智能运算的方法及装置
CN112395339A (zh) 系统间数据准入校验方法、装置、计算机设备和存储介质
CN112287005A (zh) 一种数据处理方法、装置、服务器及介质
CN113992549B (zh) 一种测试方法、装置、电子设备及存储介质
CN114615144B (zh) 网络优化方法及系统
CN116360764B (zh) 一种可视化建模平台的模型优化方法和系统
CN116566846B (zh) 模型的管理方法、系统以及共享节点、网络节点
CN113486024B (zh) 数据字典信息的传输方法及装置、存储介质及电子设备
CN116541377B (zh) 任务的物化视图的处理方法、系统和电子设备
CN114185937B (zh) 基于数字金融的大数据溯源方法及系统
CN115062722B (zh) 基于云端业务大数据清洗的ai训练方法及人工智能云系统
CN114302431A (zh) 网元配置方法、装置、电子设备及存储介质
CN117422426B (zh) 基于水运工程bim模型的信息优化方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant