CN109496320B - 具有架构师模块的人工智能引擎 - Google Patents

具有架构师模块的人工智能引擎 Download PDF

Info

Publication number
CN109496320B
CN109496320B CN201780020322.4A CN201780020322A CN109496320B CN 109496320 B CN109496320 B CN 109496320B CN 201780020322 A CN201780020322 A CN 201780020322A CN 109496320 B CN109496320 B CN 109496320B
Authority
CN
China
Prior art keywords
model
training
engine
trained
training data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780020322.4A
Other languages
English (en)
Other versions
CN109496320A (zh
Inventor
M·I·哈蒙德
K·M·布朗
M·坎波斯
M·J·布朗
R·孔
M·亚当斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN109496320A publication Critical patent/CN109496320A/zh
Application granted granted Critical
Publication of CN109496320B publication Critical patent/CN109496320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/31Programming languages or programming paradigms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/76Architectures of general purpose stored program computers
    • G06F15/80Architectures of general purpose stored program computers comprising an array of processing units with common control, e.g. single instruction multiple data processors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/951Indexing; Web crawling techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2148Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the process organisation or structure, e.g. boosting cascade
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/31Programming languages or programming paradigms
    • G06F8/311Functional or applicative languages; Rewrite languages
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/38Creation or generation of source code for implementing user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/40Transformation of program code
    • G06F8/41Compilation
    • G06F8/43Checking; Contextual analysis
    • G06F8/436Semantic checking
    • G06F8/437Type checking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5066Algorithms for mapping a plurality of inter-dependent sub-tasks onto a plurality of physical CPUs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/004Artificial life, i.e. computing arrangements simulating life
    • G06N3/008Artificial life, i.e. computing arrangements simulating life based on physical entities controlled by simulated intelligence so as to replicate intelligent life forms, e.g. based on robots replicating pets or humans in their appearance or behaviour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/10Interfaces, programming languages or software development kits, e.g. for simulating neural networks
    • G06N3/105Shells for specifying net layout
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/04Inference or reasoning models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/30Circuit design
    • G06F30/32Circuit design at the digital level
    • G06F30/333Design for testability [DFT], e.g. scan chain or built-in self-test [BIST]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Medical Informatics (AREA)
  • Geometry (AREA)
  • Robotics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)

Abstract

本文中在一些实施例中提供了一种被托管在被配置为与一个或多个数据库协作的一个或多个服务器上的人工智能(“AI”)引擎,人工智能引擎包括一个或多个AI引擎模块。一个或多个AI引擎模块包括被配置为从汇编代码提出AI模型的架构师模块。汇编代码可以从按照教学编程语言而被编写的源代码被生成,源代码描述要由AI模型学习的一个或多个概念模块的心智模型以及用于在一个或多个训练周期中在一个或多个概念模块上训练AI模型的一个或多个功课的课程。AI引擎可以被配置为基于由AI模型在一个或多个训练周期中学习的一个或多个概念模块来实例化经训练的AI模型。

Description

具有架构师模块的人工智能引擎
相关申请的交叉引用
本申请要求于2017年1月26日提交的美国专利申请No.15/416,904和于2016年1月27日提交的名称为“BONSAI PLATFORM,LANGUAGE,AND TOOLING”的临时专利申请No.US 62/287,861的优先权,其全部内容通过引用并入本文中。
著作权声明
本公开内容的一部分包含受著作权保护的材料。著作权所有者不反对任何人对如在美国专利商标局的专利文件或记录中出现的受著作权保护的材料进行传真复制,但在其他方面保留所有著作权。
技术领域
本文中提供的设计的实施例总体上涉及人工智能系统及其方法。
背景技术
人工智能(“AI”)有可能成为21世纪及以后的最具影响力的技术之一。不幸的是,目前希望利用AI工作的软件开发者必须学习复杂的工具包,使用有限的应用程序编程接口(“API”),使用用于AI的受限制的黑盒解决方案或它们的某些组合。必须克服上述限制,软件开发者和企业才能解决AI的实际问题。此外,虽然只有不到20,000名能够在最低级别构建AI的数据科学专家,但需要使软件开发社区的2000万或更多软件开发者更容易使用AI进行工作。本文中提供了解决前述问题的AI系统和方法。
发明内容
本文中在一些实施例中提供了一种被托管在被配置为与一个或多个数据库协作的一个或多个服务器上的、包括一个或多个AI引擎模块的AI引擎。一个或多个AI引擎模块可以包括被配置为从汇编代码提出AI模型的架构师(architect)模块。汇编代码可以从按照教学编程语言而被编写的源代码被生成,源代码描述要由AI模型学习的一个或多个概念模块的心智模型以及用于在一个或多个训练周期中在一个或多个概念模块上训练AI模型的一个或多个功课(lesson)的课程(curricula)。一个或多个功课中的每个功课可以被配置为可选地使用训练数据的不同流。AI引擎可以被配置为基于由AI模型在一个或多个训练周期中学习的一个或多个概念模块来实例化经训练的心智模型。
本文中在一些实施例中还提供了一种AI系统,其包括一个或多个服务器、一个或多个数据库和一个或多个客户端。一个或多个服务器可以包括AI引擎,AI引擎包括一个或多个AI引擎模块和编译器。一个或多个AI引擎模块可以包括被配置为从汇编代码提出AI模型的架构师模块。编译器可以被配置为从按照教学编程语言而被编写的源代码生成汇编代码,源代码描述要由AI模型学习的一个或多个概念模块的心智模型以及用于在一个或多个训练周期中在一个或多个概念模块上训练AI模型的一个或多个功课的课程。一个或多个功课中的每个功课可以被配置为可选地使用训练数据的不同流。AI引擎可以被配置为基于由AI模型在一个或多个训练周期中学习的一个或多个概念模块来实例化经训练的AI模型。一个或多个客户端可以包括用于生成按照教学编程语言而被编写的源代码的编码器。AI系统还可以包括被配置为提供训练数据的一个或多个训练数据源,其中一个或多个训练数据源包括被配置为提供训练数据的至少一个服务器侧训练数据源或至少一个客户端侧训练数据源。
本文中在一些实施例中还提供了一种用于AI引擎的方法,包括编译汇编代码,提出AI模型,训练AI模型,以及实例化经训练的AI模型。汇编代码可以从源代码被编译,其中编译器被配置为从按照教学编程语言而被编写的源代码生成汇编代码。源代码可以包括要由AI模型使用训练数据学习的一个或多个概念模块的心智模型。源代码还可以包括用于在一个或多个概念模块上训练AI模型的一个或多个功课的课程。一个或多个功课中的每个功课可以被配置为可选地使用训练数据的不同流。AI模型可以由包括用于从汇编代码提出AI模型的架构师模块的一个或多个AI引擎模块提出。AI模型可以由AI引擎在一个或多个训练周期中利用来自一个或多个训练数据源的训练数据训练。经训练的AI模型可以由AI引擎基于由AI模型在一个或多个训练周期中学习的一个或多个概念来实例化。例如,可以使用先前训练的概念来构造新的神经网络。
参考构成本专利申请的公开内容的附图、说明书和权利要求,可以更好地理解本文中提供的设计的这些和其他特征。
附图说明
附图涉及本文中提供的设计的一些实施例,在附图中:
图1A提供了示出简单的人工神经网络的示意图。
图1B提供了示出根据一些实施例的构建、训练和部署经训练的AI模型的示意图。
图2A提供了示出根据一些实施例的AI系统的示意图。
图2B提供了示出根据一些实施例的与AI系统相关联的方法的示意图。
图3A提供了示出根据一些实施例的AI系统的示意图。
图3B提供了示出根据一些实施例的与AI系统相关联的方法的示意图。
图4A提供了示出根据一些实施例的心智模型的示意图。
图4B提供了示出根据一些实施例的心智模型的示意图。
图5提供了示出根据一些实施例的AI系统的示意图。
图6A提供了示出根据一些实施例的AI系统的示意图。
图6B提供了示出根据一些实施例的AI系统的示意图。
图7提供了根据一些实施例的一个或多个网络。
图8提供了根据一些实施例的一个或多个计算系统。
虽然设计受到各种修改、等同物和备选形式的限制,但是其具体实施例在附图中通过示例的方式而被示出,并且现在将被详细描述。应当理解,设计不限于所公开的特定实施例,而是相反,意图在于使用具体实施例覆盖所有修改、等同物和备选形式。
具体实施方式
在以下描述中,阐述了很多具体细节,诸如具体数据信号、命名组件、设备中的存储器等的示例,以便提供对本设计的透彻理解。然而,对于本领域普通技术人员很清楚的是,可以在没有这些具体细节的情况中实践本设计。在其他情况中,没有详细描述公知的组件或方法,而是在框图中描述其,以避免不必要地模糊本设计。此外,可以进行诸如第一驱动器等具体数字引用。然而,具体数字引用不应当被解释为文字顺序,而是应当被解释为第一通知与第二通知不同。因此,所阐述的具体细节仅仅是示例性的。具体细节可以在本设计的精神和范围内被变化,并且仍然被认为是在本设计的精神和范围内。术语“耦合”被定义为意味着被直接连接到组件或通过另一组件而被间接连接到组件。此外,本文中描述的应用包括软件应用、移动app、程序和其他类似的软件可执行程序,它们是独立的软件可执行文件或操作系统应用的一部分。
本文中使用的“AI模型”包括但不限于神经网络,诸如复发(recurrent)神经网络、递归(recursive)神经网络、前馈神经网络、卷积神经网络、深信念网络和卷积深信念网络;多层感知器;自组织地图;深玻尔兹曼机器;以及堆叠式去噪自动编码器。
本文中使用的“人工神经网络”或简称为“神经网络”可以包括处理元件的高度互连的网络,每个处理元件可选地与本地存储器相关联。图1A提供了示出简单的人工神经网络101的示意图。处理元件在本文中可以被称为“人工神经单元”、“人工神经元”、“神经单元”、“神经元”、“节点”等,虽然处理元件之间的连接在这里可以被称为“突触”、“权重”等。神经元可以分别通过一个或多个加权突触从输入或一个或多个其他神经元接收数据,处理数据,并且分别通过一个或多个其他加权突触将经处理的数据发送给输出或一个或多个其他神经元。神经网络或它的一个或多个神经元可以在硬件、软件或硬件和软件的组合中被生成,并且神经网络随后可以被训练。
除非另外定义,否则本文中使用的所有技术和科学术语具有与本领域普通技术人员通常理解的含义相同的含义。
AI有可能成为21世纪及以后的最具影响力的技术之一。不幸的是,目前希望使用AI进行工作的软件开发者必须学习复杂的工具包,使用有限的API,使用用于AI的受限制的黑盒解决方案或它们的某些组合。必须克服上述限制,软件开发者和企业才能解决AI的实际问题。此外,虽然只有不到20,000名能够在最低级别构建AI的数据科学专家,但需要使软件开发社区的2000万或更多软件开发者更容易使用AI进行工作。本文中提供了解决前述问题的AI系统和方法。
例如,本文中在一些实施例中提供了一种被托管在被配置为与一个或多个数据库协作的一个或多个服务器上的、包括一个或多个AI引擎模块的AI引擎。一个或多个AI引擎模块可以包括被配置为从汇编代码提出AI模型的架构师模块。汇编代码可以从按照教学编程语言而被编写的源代码被生成,源代码描述要由AI模型学习的一个或多个概念模块的心智模型以及用于在一个或多个训练周期中在一个或多个概念模块上训练AI模型的一个或多个功课的课程。一个或多个功课中的每个功课可以被配置为可选地使用训练数据的不同流。AI引擎可以被配置为基于由AI模型在一个或多个训练周期中学习的一个或多个概念模块来实例化经训练的AI模型。
图1B提供了示出根据一些实施例的构建、训练和部署经训练的AI模型的示意图。
如所示,本文中提供的AI系统和方法使得诸如软件开发者的用户能够设计AI模型,构建AI模型,训练AI模型以提供经训练的AI模型,并且按照多种期望的方式中的任何期望的方式将经训练的AI模型部署为部署的AI模型。例如,本文中提供的AI系统和方法使得诸如软件开发者的用户能够设计神经网络布局或神经网络拓扑102,构建神经网络104,训练神经网络104以提供经训练的神经网络106,并且按照多种期望的方式中的任何期望的方式将经训练的神经网络106部署为部署的神经网络108。例如,经训练的AI模型或经训练的神经网络106可以被部署在软件应用或基于硬件的系统中或与其一起被使用。
图2A提供了示出根据一些实施例的AI系统200的示意图。
如所示,AI系统200包括一个或多个客户端系统210和一个或多个服务器系统220,其中一个或多个服务器系统220中的每个服务器系统或任何两个或更多个服务器系统在本文中可以被称为AI引擎。一个或多个客户端系统210可以包括编码器212或用于生成诸如InklingTM的教学编程语言的编程代码的编码装置。一个或多个客户端系统210还可以包括训练数据源214。尽管图2A中未示出,但是备选地,训练数据源214可以被包括在一个或多个服务器系统220中,或者训练数据源214可以被包括在一个或多个客户端系统210和一个或多个服务器系统220中。一个或多个服务器系统220可以是服务器系统并且包括用于InklingTM代码的编译器222和用于经由AI生成器223中的一个或多个训练循环生成经训练的神经网络106的AI生成器223。
图2B提供了示出根据一些实施例的与AI系统相关联的方法201的示意图。
如鉴于图2A所示,一个或多个客户端210中的客户端可以在一个或多个服务器系统220的服务器上从编码器212或中间代理向编译器222发送按照教学编程语言的代码,以用于将代码编译为用于AI生成器223的优化的汇编代码。编译器222可以向AI生成器223发送经编译的代码或汇编代码,AI生成器223提出并且构建诸如神经网络104的神经网络以用于训练,如通过代码的特征所确定的。AI生成器可以从训练数据源214请求训练数据,并且训练数据源214可以在请求时向AI生成器223发送训练数据。随后,AI生成器223可以在一个或多个训练周期中在训练数据上训练神经网络104以提供神经网络或经训练的神经网络106的经训练的状态。AI生成器223可以从经训练的神经网络106引出预测,并且基于预测和可选的附加训练周期针对已更新的训练数据向训练数据源214发送预测。当一个或多个训练周期完成时,AI生成器223可以将神经网络的经训练的状态保存为经训练的神经网络106。
图3A提供了示出根据一些实施例的AI系统的示意图。
接下来是图2A的AI系统200,用于生成经训练的神经网络106的AI生成器223可以包括选自至少讲师模块324、架构师模块326和学习者模块328的一个或多个AI生成器模块,如所示。讲师模块324、架构师模块326和学习者模块328在本文中可以分别被称为讲师、架构师和学习者。讲师模块324可以可选地包括超级学习者模块325,超级学习者模块325在本文中可以被称为超级学习者并且可以被配置为针对神经网络配置、学习算法、学习优化器等中的任何一个或多个选择一个或多个超参数。在选择一个或多个超参数之前,超级学习者模块325可以访问从先前的问题和先前构建的AI模型的一个或多个存储库收集的解决方案统计数据库,并且通过使用随机预测来获取可用数据样本的指纹。超级学习者模块325可以可选地被包含在诸如架构师模块326或学习者模块328的不同的AI生成器模块中,或者超级学习者模块325可以是AI生成器模块本身。学习者模块328可以可选地包括预测器模块329,预测器模块329在本文中可以被称为预测器并且可以针对诸如按照预测模式而被托管的经训练的神经网络106的经训练的神经网络提供一个或多个预测。预测器模块329可以可选地被包含在诸如讲师模块324或架构器模块326的不同的AI生成器模块中,或者预测器模块329可以是AI生成器模块本身。包括前述一个或多个AI生成器模块的AI生成器223可以被配置为经由AI生成器223中的一个或多个训练周期从编译的代码生成经训练的神经网络106。
图3B提供了示出根据一些实施例的与AI系统相关联的方法的示意图。
如鉴于图3A所示,一个或多个客户端210中的客户端可以在一个或多个服务器系统220的服务器上从编码器212或中间代理向编译器222发送按照教学编程语言的代码,以用于将代码编译为优化的汇编代码。编译器222可以向讲师模块324发送经编译的代码或汇编代码,讲师模块324转而可以将代码发送给架构师模块326。架构师模块326可以提出诸如神经网络布局102的神经网络布局以及优化神经网络布局102以用于如由代码的特征确定地进行构建和训练,并且架构师模块326可以向讲师模块324发送神经网络布局102。此外,架构师模块326可以在按照教学编程语言而被表达的概念与神经网络布局102的层之间映射,并且向学习者模块328发送一个或多个映射。学习者模块328可以从由架构师模块326指定的神经网络布局104构建诸如神经网络104的神经网络。讲师模块324可以从训练数据源214请求训练数据,并且训练数据源214可以在请求时向讲师模块324发送训练数据。讲师模块324随后可以指示学习者模块328使用按照教学编程语言而被表达的课程训练神经网络104(例如,应当以哪种顺序教授哪些功课),用于训练一个或多个概念、训练数据和来自超级学习者模块325的一个或多个超参数。训练神经网络104可以在一个或多个训练周期中进行以产生神经网络或经训练的神经网络106的经训练的状态。讲师模块324可以决定什么概念和流应当在心智模型中被积极训练、以及用于训练概念的终止条件。学习者模块328或预测器模块329可以从经训练的神经网络106引出预测并且向讲师模块324发送预测。讲师模块324转而可以基于预测针对已更新的训练数据向训练数据源214发送预测,并且可选地在另外的训练周期中指示学习者模块328。当一个或多个训练周期完成时,学习者模块328可以将神经网络的经训练的状态保存为经训练的神经网络106。
图4A和图4B提供了分别示出根据一些实施例的心智模型400A和400B的示意图。
教学编程语言InklingTM是一种专用编程语言,其旨在使用要被教授的更高级别的心智模型和概念而不是能够学习它们的系统的低级机制来实现经训练的AI模型。
概念教学编程语言可以是软件对象和/或AI模型可以被训练和学习的东西。概念可以落入至少两个群组之一中:事实和战略。事实类型概念可以描述诸如物体、球、角色、敌人、光、人的一个或多个事物的状态。状态可以是一个或多个事物是打开还是关闭,是热还是冷,是数字还是字母,等等。事实类型概念还可以描述位置。策略类型概念可以反映诸如“avoid ghosts”、“keep the_paddle under the ball”、“don't run into walls”、“turnlights off”、“get high score”的方法或行为。图4A和图4B都示出了包括策略类型概念“get high score”的心智模型。
教学编程语言的心智模型也是AI模型可以被训练和学习的东西。心智模型可以包括根据一个或多个概念构造(例如,分层地、循环地等)的一个或多个概念,并且心智模型还可以包括一个或多个数据变换流。如图4A中所示,单概念心智模型可以包括诸如“get highscore”的策略类型概念。如图4B中所示,多概念心智模型可以包括分层结构,包括例如诸如“keep paddle under ball”和“get high score”的策略类型概念以及诸如“balllocation”的状态类型概念。多概念心智模型中的概念可以从心智模型中的其他概念接收输入,向心智模型中的其他概念发送输出,提供最终输出或结果输出,或其组合。向心智模型添加更多概念可以减少AI模型的训练时间,并且使得经训练的AI模型能够提供更智能的更精确的预测。
参考以下内容可以更好地理解本文中提供的AI系统和方法的其他特征:
基础原语
本文中提供的AI系统和方法通过提供可以用于表示AI而不指定如何创建AI的一组基础原语来实现面向教学的方法。这些基础原语是1)概念和心智模型,2)课程和功课,以及3)训练数据源,如本文中进一步详细描述的。
概念和心智模型
概念或概念模块是可以被学习的东西。一旦被学习,它就可以提供智能输出。概念可以从其他概念和训练数据源(例如,模拟器)接收输入数据,并且向其他概念或最终结果发送输出数据。概念可以单独地被使用,但是,从相对简单的概念开始并且构建到更复杂的概念,构建相关概念的层级通常更有用。
术语“心智模型”可以被用于描述一组结构化概念。备选地,对问题域进行建模的概念的集合及它们的相互关系可以被称为心智模型。给定这种心智模型框架的选择,可以编写基础概念及它们的关系。课程和功课
课程被用于教授概念。为此,用户需要提供数据来训练概念并且告诉AI引擎系统对概念的理解是否正确。这类似于教师将来自书的阅读分配给学生并且随后根据书的内容测试学生。这些数据的呈现方式被分解为被称为“功课”的各个组成部分。在书类比中,功课可以是书中的单个章节。功课允许概念逐位学习,而不是一次性学习。
教学编程侧重于编纂两个主要支柱:1)与问题领域相关的概念是什么,以及概念如何相互关联?2)如何教授这些概念?
AI引擎
AI系统500使得开发者能够更高效地构建、教授和使用智能模型。
AI引擎描述了问题以及如何教授涵盖要解决的问题的各方面的概念,并且AI引擎将编码的描述编译成机器可以更容易理解的较低级别的结构化数据对象,构建涵盖要解决的问题的各方面的主要问题概念和子概念的网络拓扑,训练子概念和主要概念的编码实例,并且执行包含一个、两个或更多个神经网络的经训练的AI模型。
AI引擎可以抽象并且自动化AI的低级别机制,并且AI引擎可以管理和自动化AI工作的大部分低级复杂性。按照教学编程语言而被开发的每个程序可以被馈送到AI引擎中以便生成和训练适当的智能模型,其在本文中可以被称为基本的循环人工智能网络(“BRAIN”)。从本质上讲,BRAIN可以是包括潜在的循环网络智能处理节点的拓扑或基本网络,因此首字母缩写是“BRAIN”。
AI引擎可以抽象神经网络拓扑的生成,以获取课程和功课的最佳解决方案和更快的训练时间,以经由构成神经网络的每个节点上的递归模拟和训练功课来教授神经网络。
AI引擎可以包含用于各种AI模型的大量机器学习算法,具有用于选择学习算法和指导训练的逻辑,管理数据流和数据存储,并且提供硬件资源的有效分配。AI引擎可以构建通过系统有效地支持流数据的基础设施,并且AI引擎可以使用一组启发法来选择使用哪些学习算法来训练每个BRAIN。这组启发法还使得AI引擎能够从任意数目的可能算法、拓扑等选择,并行地训练多个BRAIN,并且选择最佳结果。
AI引擎可以是被配置为管理训练AI网络固有的复杂性的云托管的平台即服务。因此,AI引擎利用一个或多个客户端侧接口而可访问,以允许第三方提交按照教学编程语言的对问题的描述,并且使得在线AI引擎能够针对一个或多个第三方构建和生成经训练的智能模型。
主要组件
图5提供了示出根据一些实施例的包括AI引擎的AI系统500的示意图。
BRAIN服务器的任何给定实现方式的细节可能有很大差异,但很多具有共同的架构组件,诸如以下六个组件:1)架构师模块、2)讲师模块、3)学习者模块、4)编译器、5)超级学习者模块、以及6)用于将通信交换进出AI引擎的一个或多个接口。
接下来是图2A和图3A的AI系统200,AI系统500包括在一个或多个客户端系统上的编码器212以及在一个或多个服务器系统上的以下各项:编译器222;AI生成器模块,其包括讲师模块324、架构师模块326和学习者模块328、超级学习者模块325和预测器模块329。除了上述之外,AI系统500还可以包括被配置为加载训练数据的训练数据加载器521、训练数据数据库514a、模拟器514b和流数据服务器523。训练数据可以是批量化训练数据、流式训练数据或它们的组合,并且AI引擎可以被配置为从选自模拟器、训练数据生成器、训练数据数据库或其组合的一个或多个训练数据源推送或拉取训练数据。在至少一个实施例中,批量数据源可以从数据库提供批量化数据。随机数据生成器可以基于用户输入参数来生成随机数据。在一些实施例中,数据流管理器可以被配置为管理流式传输的训练数据的流式传输。此外,除了前述之外,图5示出了被配置为提出诸如神经网络布局102的神经网络布局的架构师模块326和被配置为保存诸如经训练的神经网络106的神经网络的经训练的状态的学习者模块328。
编译器模块自动转换和编译描述问题(主要概念)和分解为问题的子概念的教学编程语言。按照教学编程语言而被叙述的每个语句可以被编译到结构化数据对象的定义字段中,该字段随后可以由架构师模块生成并且实例化到其自己的子概念节点中。每个节点可以具有一个或多个神经网络,以用于处理输入数据和结果输出决策/动作的一个或多个输入。被馈送到AI编译器中的经编译的语句、命令和其他编码可以被变换为较低级别的AI规范。
架构师模块
架构师模块是负责基于心智模型提出和优化学习拓扑(例如,神经网络)的系统的组件。
神经网络可以基于松散地模拟生物大脑解决通过轴突连接的大量生物神经元问题的方式的大量神经单元。每个神经单元被与很多其他神经单元连接,并且链接可以强制或抑制它们对连接的神经单元的激活状态的影响。每个单独的神经单元可以具有例如将所有输入的值组合在一起的求和函数。在每个连接和单元本身上可能存在阈值函数或限制函数,从而使得它必须超过它才能传播到其他神经元。这些系统是自学习和训练的而不是被明确编程的,并且在传统计算机程序中难以表达解决方案或特征检测的领域中表现优异。
神经网络可以由多个层或立方体设计组成,并且信号路径可以从前向后穿过。神经网络的目标是以与人类大脑相同的方式解决问题,尽管几个神经网络更抽象。现代神经网络项目通常使用几千到几百万个神经单元和数百万个连接来工作。
架构师模块可以采用编码的心智模型和教学法,并且提出架构师模块认为最能够学习模型中的概念的一组候选低级学习算法、主要概念和子概念的拓扑、以及它们的配置。这类似于数据科学家在工具包方法中所做的工作、或者搜索系统在使用统计数据分析工具的方式中自动化的工作。这里,它由教学编程而不是广泛的搜索进行指导。架构师模块可以采用各种技术来标识这样的模型。架构师模块可以生成节点的有向图或高级心智模型的低级实例。架构师模块可以将要解决的问题分解为更小的任务/概念,所有这些任务/概念都考虑到要解决的更复杂的主要问题。架构师模块可以实例化主要概念和馈送到主概念中的子概念层。架构师模块可以生成每个概念,包括具有存储输出动作/决策的抽头(tap)的子概念以及该节点实现该结果输出的原因(例如,哪些参数主导决策和/或导致节点实现结果输出的其他因素)。结果输出的这种存储的输出和节点实现结果输出的原因可以被存储在经训练的智能模型中。在每个实例化的节点中创建的抽头允许智能模型中每个步骤关于经训练的智能模型如何为一组数据输入产生其结果输出的可解释性。架构师模块可以引用要使用的算法数据库以及要使用的网络拓扑数据库。架构师模块可以引用最佳建议拓扑布置的表或数据库,包括给定问题的拓扑图中有多少层级(如果可用)。架构师模块还具有用于引用通过比较签名而解决的类似问题的逻辑。如果签名足够接近,则架构师模块可以尝试被用来最佳地解决具有类似签名的存档数据库中存储的问题的拓扑。架构师模块还可以并行地实例化所有要测试和模拟的多个拓扑布置,以查看哪个拓扑具有最佳结果。最佳结果可以基于诸如性能时间、精确度、完成训练模拟所需要的计算资源等因素。
在一些实施例中,例如,架构师模块可以被配置为提出多个神经网络,并且针对多个神经网络中的每个神经网络,从一个或多个数据库中的多个机器学习算法启发式地选择适当的学习算法。AI引擎或其训练者模块可以被配置为并行地训练多个神经网络。可以利用来自一个或多个训练数据源的训练数据在一个或多个训练周期中训练多个神经网络。AI引擎可以随后以基于由多个神经网络在一个或多个训练周期中学习的概念来实例化多个经训练的神经网络,并且在多个经训练的神经网络之中标识最佳的经训练的神经网络(例如,通过基于诸如性能时间、精确度的因素的最佳结果)。
用户可以通过设置特定节点的依赖性来帮助构建节点的拓扑。架构师模块可以针对在不同的两步过程中解决问题所需要的所有概念生成和实例化神经网络拓扑。架构师模块可以生成网络概念的描述。架构师模块还可以采用描述并且实例化一个或多个拓扑形状、层或其他图形布置以解决问题描述。架构师模块可以基于以下因素来选择要使用的拓扑算法:诸如当前问题的输出类型是1)估计输出还是2)离散输出,以及其他参数中的因素,诸如完成算法的性能时间、精确度、完成训练模拟所需要的计算资源、原创性、属性数量等。
讲师模块
讲师模块是负责执行按照教学编程语言而被编纂的训练计划的系统的组成部分。训练可以包括教导神经网络以获取一个或多个结果,例如,在模拟器上。训练可以涉及使用可以在包括教学编程语言的文件中进行描述的一组特定的概念、课程和功课。与更复杂的任务相比,讲师模块可以更早地训练更容易理解的任务。因此,讲师模块可以训练子概念节点,并且然后训练更高级别的节点。在训练其他节点之后,讲师模块可以训练依赖于其他节点的子概念节点。但是,可以并行地训练图中的多个节点。讲师模块可以使用输入数据在节点上运行模拟,包括来自学习者模块的正被训练的节点的结果的统计和反馈。学习者模块和讲师模块可以与模拟器或其他数据源一起工作以使用不同数据输入迭代地训练节点。讲师模块可以通过不同方式将数据并行地流向拓扑图中的一个或多个节点来引用如何有效地训练节点的知识库,备选地,如果存在依赖性,则讲师模块可以连续地训练只有在满足早期依赖性之后才会发生的功课的某些部分。讲师模块可以引用拓扑图中的依赖性,其中依赖性可以来自指定依赖性的用户和/或拓扑中的节点的布置如何被实例化。讲师模块可以在计算资源和依赖性检查允许并行地训练的同时,向多个节点并行地提供来自诸如模拟器的数据源的数据流。
学习者模块
学习者模块是被配置为执行低级基础AI算法的实际执行的系统的组件。在训练模式中,学习者模块可以实例化符合架构师模块提出的内容的系统,与讲师模块对接以执行计算和评估性能,并且然后执行学习算法本身。在执行模式中,学习者模块可以实例化并且执行已经被训练的系统的实例。最后,学习者模块针对每个经训练的子节点写出网络状态,并且然后将主节点的拓扑图与所有子节点的组合写入本文中被称为BRAIN的经训练的智能模型。学习者模块还可以写入每个节点的存储输出以及该节点实现BRAIN的输出的原因,这可以解释AI如何以及为何提出解决方案或实现结果。
超级学习者模块
超级学习者模块可以执行当前问题与一个或多个数据库中的先前问题的比较。超级学习者模块可以参考存档的先前构建和训练的智能模型,以帮助指导讲师模块训练当前的节点模型。超级学习者模块可以解析经训练的智能模型的存档数据库、已知的过去的类似问题和提出的解决方案、以及其他来源。超级学习者模块可以比较类似于当前问题中所需要的解决方案的先前的解决方案,并且比较类似于当前问题的先前问题,以建议潜在的最佳神经网络拓扑以及训练功课和训练方法。
模拟器
如果课程使用模拟或程序生成训练,则功课的数据不是要被传递给学习系统的数据,而是要被传递给模拟器的数据。否则,然后可以在传递到学习系统之前在功课中可选地过滤/扩充数据。模拟器可以使用该数据来配置自身,并且模拟器随后可以针对学习系统产生要使用以用于训练的多条数据。这种分离允许适当地分离关注点。模拟器是指令的方法,并且功课提供调节该指令方法的方法,这使得它或多或少取决于学习系统所展示的当前掌握级别。模拟可以在客户端计算机上运行,并且将数据流式传输到AI引擎用于训练。在这样的实施例中,客户端机器需要在BRAIN训练时保持连接到AI引擎。但是,如果客户端计算机与AI引擎的服务器断开连接,择它可以在重新连接时自动从中断处继续。
注意,1)模拟和程序生成在各种情况中对于数据是很好的选择;2)当你可以更轻松地教授与计算时,概念对于流是很好的选择。
面向流的数据流处理
BRAIN服务器可以在低层对数据流操作,并且因此可以被认为是数据流处理系统。数据可以通过传统程序被流式传输到BRAIN服务器,数据可以流经BRAIN模型中的节点(包括循环流),并且经处理的输出可以在立即或异步的基于事件的模型中可用于呼叫者。除非用户在其程序中明确创建持久数据存储,否则流经系统的所有数据都可能是短暂的。从本质上讲,BRAIN可以是包括潜在的循环网络的智能处理节点的基本网络,因此首字母缩写为“BRAIN”。
操作模式
BRAIN服务器至少具有三种操作模式:创作/调试、训练和执行(或预测)。在实践中,所有三种操作模式可以同时运行,并且大多数BRAIN服务器的实现方式都是高可用性多租户分布式系统。话虽如此,每个个体用户通常一次以一种操作模式操作。
创作/调试模式
当处于创作/调试模式时,可以调节BRAIN服务器以帮助用户迭代地开发心智模型和教学法。例如,在创作/调试模式中,用户可以在BRAIN模型中的节点上设置断点,并且当遇到断点时,用户可以检查通向该节点的流处理链。即使给定节点可以表示神经网络或其他复杂的AI学习系统,由于进行训练的方式,系统可以从高维张量(tensor)表示编码和解码成与概念相关联的输出类型。这并不表示高维表示必然在节点之间折叠,而只是针对所有节点学习解码器。除了这种直接的模型检测功能外,作者还可以类似地调试课程。例如,可以在特定课程上设置观察条件,并且将实际训练性能和适应的学习执行计划与规范的编码的功课排序比较。高级用户可以自己检查底层学习算法,并且调试工具可以根据意图帮助可视化在不理解的概念中实际学到的内容。
由于很多开发者可能同时处理给定的BRAIN模型,因此创作模式还处理正在开发、训练和单独部署的表示。
训练模式
当处于训练模式时,AI引擎被配置为i)实例化符合架构师模块提出的神经网络的神经网络,以及ii)训练神经网络。为了实现上述目的,BRAIN服务器可以采用经编译的代码并且生成BRAIN学习拓扑,并且继续按照课程教授指定的概念。取决于模型,训练可能会花费大量时间。因此,BRAIN服务器可以提供有关训练的状态的交互式上下文,包括示出正在积极训练哪些节点,关于每个节点对其相关联的概念的掌握的当前信念、总体和细粒度的精确度和性能、当前的训练执行计划和/或完成时间的估计。这样,在一些实施例中,AI引擎可以被配置为提供选自以下各项的关于训练神经网络的一个或多个训练状态更新:i)针对神经网络而被完成的训练计划的比例的估计,ii)用于完成训练计划的完成时间的估计,iii)神经网络正在积极训练的一个或多个概念,iv)神经网络在学习一个或多个概念时的掌握,v)神经网络在学习一个或多个概念时的细粒度的精确度和性能,以及vi)神经网络在学习一个或多个心智模型时的整体精确度和表现。
由于构建教学编程的过程是迭代的,因此训练模式中的BRAIN服务器也可以提供增量训练。也就是说,如果代码相对于在已经训练的其他概念之后的概念而改变,则这些先行概念不需要被重新训练。
此外,在训练模式中,如果程序本身允许无限期训练,则用户能够指定什么构成令人满意的训练。
当开始训练操作时,讲师模块可以首先生成执行计划。这是讲师模块在教授概念时打算使用的顺序,并且针对每个概念,讲师模块打算以什么顺序教授的功课。在执行计划执行时,讲师模块可以在概念与功课之间来回跳转以优化学习速率。通过不需要在开始训练依赖概念之前完全训练每个概念,系统自然可以避免某些系统性机器学习问题,诸如过度拟合。用于确定何时在功课和训练概念之间切换的主要技术是强化学习和自适应学习。例如,对于确定美国破产申请数量的第一主要问题,可以在关于如何确定加利福尼亚州的破产申请的第一功课中训练第一子节点。第二功课可以训练第一个子节点如何确定加利福尼亚州和约克的破产申请。节点上的连续功课可以构建和增加节点在训练功课期间训练的早期功课。
执行模式
当处于执行模式或预测模式时,AI引擎可以被配置为i)通过一个或多个API端点在训练数据上实例化并且执行经训练的神经网络,用于预测模式中的一个或多个预测。为了实现上述目标,BRAIN服务器可以采用经训练的BRAIN模型,启用API端点,从而使得可以将数据流入和流出模型,并且然后在执行模式或预测模式下优化其分布以提高性能。由于学习和指定的数据变换本质上是可用的,因此变换可以被自动地并行化并且被分发给可以加速其执行的硬件。例如,文本处理可以分发给具有大量CPU资源的机器集群,而利用深度学习的节点可以类似地分发给具有大量GPU资源的机器集群。
执行BRAIN模型的运营管理也可以在这种模式下进行。这包括通过操作仪表板来监测数据提取率、执行性能(在速度和精确度方面)、日志、事件订阅等。
参考以下内容可以更好地理解本文中提供的用于创作/调试、训练和执行(或预测)的AI系统和方法的其他特征:
算法选择
BRAIN服务器可以采取的第一步是选择适当的学习算法来训练心智模型。这是训练AI的一个显著步骤,并且如果没有专家指导,则这是一个没有AI专业知识的人无法完成的步骤。BRAIN服务器可以具有很多可用的学习算法的知识、以及用于选择适当算法的一组启发法,包括用于训练的初始配置。
例如,如果BRAIN服务器选择深度Q学习来训练心智模型,则它还会选择适当的拓扑、超参数和突触的初始权重值。以编程方式使用启发法的好处是,BRAIN服务器不限于单一选择;它可以选择任何数目的可能的算法、拓扑等,并行地训练多个BRAINS,并且选择最佳结果。
选择适当算法等的过程由已经过AI引擎训练(并且将继续训练)的BRAIN执行,这表示,BRAIN在每次构建新的BRAIN时都会更好地构建BRAIN。诸如BRAIN的经训练的AI引擎神经网络由此提供启用AI,用于从汇编代码提出神经网络并且从一个或多个数据库中的多个机器学习算法中选择适当的学习算法以用于训练神经网络。AI引擎可以被配置为持续训练经训练的AI引擎神经网络以提供启用AI,以提出神经网络并且选择适当的学习算法,从而更好地构建BRAIN。
架构师模块还可以在拓扑和算法选择中使用启发法、心智模型签名、统计分布推理和元学习:
首先,AI引擎及其架构师模块可以被配置为从一个或多个数据库中的多个机器学习算法启发式地选择适当的学习算法,以用于训练由架构师模块提出的神经网络。关于心智模型的很多启发法可以被用于通知可以使用哪种类型的AI和机器学习算法。例如,使用的数据类型具有很大的影响。为此,除了基本数据类型之外,诸如InklingTM语言的教学编程语言还包含丰富的本机数据类型。例如,如果架构师模块看到正在使用图像,则卷积深度学习神经网络架构可能是合适的。如果架构师模块看到本质上是时间的数据(例如,音频数据、序列数据等),则如长短期存储器(“LSTM”)网络的递归深度学习神经网络架构可能更合适。启发法的集合可以由数据科学和机器学习/AI专家生成,他们在架构师模块代码库上工作,并且试图捕获他们自己在实践中使用的启发法。
系统还可以计算心智模型的签名。这些签名是散列的形式,从而使得具有类似机器学习算法特征的心智模型具有类似的签名。然后,这些签名可以与启发法和元学习结合被使用。
除了在心智模型处查看之外,架构师模块还可以考虑在按照教学编程语言而被表达的代码中提供的教学法。例如,它可以查看正被使用的任何数据集的统计分布;并且,在模拟器的情况中,它可以要求模拟器生成大量数据,以便确定将在训练期间使用的数据的统计数据。这些分布属性可以进一步告知所使用的启发法。
元学习是架构师模块使用的高级技术。顾名思义,它是学习关于学习的。这表示,由于架构师模块可以生成用于训练的候选算法选择和拓扑,因此它可以记录这个数据以及模型的签名和最终的系统性能。然后,该数据集可以在其自己的学习系统中被使用。因此,通过提出、探索和优化学习模型,架构师模块可以观察哪些有效以及哪些无效,并且使用它来了解它在看到类似签名时应当尝试的模型。
为了实现元学习,AI引擎可以包括被配置为将诸如元学习记录的记录保存在一个或多个数据库中的元学习模块。记录可以包括:i)由AI引擎处理的源代码,ii)源代码和/或其签名的心智模型,iii)用于训练神经网络的训练数据,iv)经训练的神经网络,v)经训练的神经网络多么快地被训练到足够精确度,以及vi)经训练的神经网络在做出关于训练数据的预测时多么精确。
对于高级用户,可以完全或部分明确指定学习拓扑的低级细节。架构师模块可以将任何这样的参数固定地视为其默认行为的覆盖。以这种方式,可以提供特定算法,或者可以固定生成的模型以用于手动细化。
指导训练
一旦选择了算法,BRAIN服务器就可以经由课程及其功课继续训练BRAIN的心智模型。AI引擎或BRAIN服务器可以管理数据流(例如,通过数据流管理器)、数据存储、硬件资源的有效分配、选择或以其他方式确定何时训练每个概念、根据心智模型中的相关性来训练概念的广泛程度(例如,处理过度拟合和欠拟合的问题)并且通常负责基于给定的心智模型和课程来生成经训练的BRAIN。因此,AI引擎被配置为做出关于以下的确定:i)何时在一个或多个概念中的每个概念上训练神经网络,以及ii)在一个或多个概念中的每个概念上多么广泛地训练神经网络。这样的确定可以基于如下相关性,该相关性是基于训练数据的经训练的神经网络的一个或多个预测中的一个或多个概念中的每个概念的相关性。
与选择合适的学习算法的情况一样,指导训练、特别是避免过度拟合和欠拟合以产生精确的AI解决方案是需要训练AI的知识和经验的任务,并且BRAIN服务器可以具有一组编码的启发法来以很少或根本没有用户参来与管理这个操作。类似地,指导训练的过程也是经过训练的BRAIN,它只会通过它训练的每个BRAIN而变得更聪明。
AI引擎还可以确定何时训练每个概念,基于其相关性训练每个概念多少,并且最终产生经训练的BRAIN。此外,AI引擎可以利用元学习。在元学习中,AI引擎记录它所看到的每个程序、它用于训练的数据以及它做出的所生成的AI。它还记录这些AI的训练速度以及它们的精确程度。AI引擎服务器了解该数据集。
学习后端
学习后端编码使用特定AI或机器学习算法进行工作所需要的底层细节。BRAIN服务器可以提供很多后端,诸如用于深度学习的后端。但是,如果需要,学习算法作者也可以提供他们自己的后端。通过以这种方式构建BRAIN服务器,按照教学编程语言而被表达的代码可以包括来自特定方法的另一级抽象。如果创建性能优于现有算法的的新学习算法,则需要添加的仅是新的后端。然后,架构师模块可以立即开始使用后端来构建系统,并且可以在不进行修改的情况中重新编译按照教学编程语言的现有程序以利用改进的算法。
在线学习
除了迁移学习状态的功能之外,BRAIN服务器的某些实现方式还提供了启用在线学习的功能。由于在线学习可以在运行时经由状态变化打破节点的纯功能特性,所以系统被配置为提供的另一策略是使用数据守护进程持续训练在线学习的数据,以设定的间隔逐步训练网络,并且然后将更新的网络重新分配为整个BRAIN服务器的功能块。
学习状态的迁移
当系统经历了实质性训练以达到学习状态,并且对潜在心智模型的随后改变可能需要重新训练时,可能需要迁移学习状态而不是从头开始训练。BRAIN服务器被配置为提供转换功能,从而使得先前学习的高维表示可以被迁移到适当的新的高维表示。这可以在神经网络中被实现,例如,通过扩展输入层的宽度以考虑到与下游层的零权重连接的改变。然后,系统可以人为地减少来自要修剪的输入的连接的权重,直到它们达到零并且然后可以被完全修剪。
部署和使用
一旦对BRAIN进行了充分的训练,就可以对其进行部署,从而使得其可以在生产应用中被使用。使用部署的BRAIN的接口很简单:用户将数据(与训练过的BRAIN类型相同)提交给BRAIN服务器API,并且接收BRAIN对该数据的评估。
作为如何使用部署的BRAIN的实际示例,可以首先训练BRAIN以识别来自混合国家标准与技术研究院(“MNIST”)数据集的手写数字。可以创建包含手写数字的图像,可能直接通过基于触摸的接口,或者间接通过用写在其上的手写数字扫描一张纸。然后可以将图像下采样到28×28的分辨率并且转换为灰度,因为这是用于训练示例BRAIN的输入模式。当通过BRAIN服务器API而被提交给BRAIN服务器时,BRAIN可以将图像作为输入并且输出长度为10的一维数组(其中每个数组项表示由BRAIN判断的图像是与索引相对应的数字的概率)。该数组可以是从API返回给用户的值,用户可以根据需要使用该值。
尽管在一些实施例中呈现了用于构建BRAIN的线性方法,但是作者训练部署工作流不必被视为瀑布过程。如果用户决定需要进一步细化BRAIN,无论是通过对现有数据的额外训练、对新的补充数据的额外训练、还是使用心智模型的修改版本或用于训练的课程的额外训练,则BRAIN服务器被配置为支持BRAIN的版本控制,从而使得用户可以保留(并且可能恢复)BRAIN的当前状态,同时细化BRAIN的经训练的状态,直到达到新的更令人满意的状态。
命令行界面(“CLI”)
CLI是被配置为使得用户能够配置AI引擎的工具。CLI对于自动化和与其他工具的连接特别有用。一些动作只能使用CLI而被执行。可以使用CLI而被执行的一些操作包括加载按照教学编程语言而被表达的文件并且连接模拟器。
网站
网站是一种基于浏览器的工具,其用于配置和分析存储在AI引擎中的BRAIN。网站可以用于共享,协作和学习。可以从网站访问的一些信息是BRAIN训练进度的可视化。
图6A提供了示出根据一些实施例的AI系统600A的示意图。
如图6A中所示,诸如软件开发者的用户可以通过在线接口与AI系统600A连接;然而,用户不限于在线接口,并且在线接口不限于图6A中所示的接口。考虑到这一点,图6A的AI系统600A可以使得用户能够通过域名系统(“DNS”)发出API和web请求,该请求可以可选地通过代理进行过滤以将API请求路由到API负载均衡器并且将web请求路由到web负载均衡器。API负载均衡器可以被配置为在Docker网络或容器化平台中运行的多个BRAIN服务容器之间分配API请求,这些容器被配置为将一个或多个软件包装在包含代码、运行时、系统工具、系统库等所有内容的完整文件系统中。web负载均衡器可以被配置为在Docker网络中运行的多个web服务容器之间分发web请求。Docker网络或Docker BRAIN网络可以包括中央处理单元(“CPU”)节点和图形处理单元(“GPU”)节点,Docker网络的节点可以根据需要自动调节。CPU节点可以被用于Docker网络上运行的大多数BRAIN服务容器,并且GPU节点可以用于计算密集度更高的组件,诸如TensorFlow和学习者模块。如图6A中进一步所示,BRAIN服务工程师可以通过被配置为保护Docker网络的虚拟私有云(“VPC”)网关和硬化堡垒主机与AI系统600A接口。可以在所有生产集群之间共享Elastisearch-Logstash-Kibana(“ELK”)堆栈集群,以进行专用监测和日志记录。
图6B提供了示出根据一些实施例的AI系统600B的示意图。
在AI系统600A之后,堡垒主机和一个或多个CPU节点可以在公共子网上,以通过因特网网关进行双向通信。一个或多个其他CPU节点以及GPU节点可以位于借助于其间的子网与公共子网通信耦合的私有子网上。公共子网上的一个或多个CPU节点可以由图2A、3A和5的编译器222以及图3A和5的架构师模块326使用。私有子网上的一个或多个其他CPU节点可以由图3A和5的讲师模块324使用,并且GPU节点可以由图3A和5的学习者模块328和预测器模块329使用。如图6B中进一步所示,私有子网可以被配置为通过网络地址转换(“NAT”)网关向因特网发送传出通信。
方法
鉴于前述内容,在一些实施例中,AI引擎的一个或多个方法可以包括编译汇编代码,提出AI模型,训练AI模型,以及实例化经训练的AI模型。汇编代码可以从源代码编译,其中编译器被配置为从按照教学编程语言而被编写的源代码生成汇编代码。源代码可以包括要由AI模型使用训练数据学习的一个或多个概念模块的心智模型。源代码还可以包括用于在一个或多个概念模块上训练AI模型的一个或多个功课的课程。一个或多个功课中的每个功课可以被配置为可选地使用训练数据的不同流。AI模型可以由包括用于从汇编代码提出AI模型的架构师模块的一个或多个AI引擎模块提出。AI模型可以由AI引擎在一个或多个训练周期中使用来自一个或多个训练数据源的训练数据来训练。经训练的AI模型可以由AI引擎基于由AI模型在一个或多个训练周期中学习的一个或多个概念模块来实例化。
在这样的实施例中,AI引擎还可以包括推送或拉取训练数据。AI引擎可以被配置用于从选自模拟器、训练数据生成器、训练数据数据库或其组合的一个或多个训练源推送或拉取训练数据。训练数据可以是批量训练数据、流式训练数据或其组合。
在这样的实施例中,AI引擎还可以包括在一个或多个训练周期期间以训练模式或预测模式操作AI引擎。在训练模式下,AI引擎可以i)实例化符合架构师模块提出的AI模型的AI模型,以及ii)训练AI模型。在预测模式下,AI引擎可以通过一个或多个API端点在训练数据上实例化并且执行经训练的AI模型,用于预测模式下的一个或多个预测。
在这样的实施例中,AI引擎还可以包括启发式地挑选适当的学习算法。AI引擎可以被配置用于从一个或多个数据库中的多个机器学习算法中挑选适当的学习算法,用于训练架构师模块提出的AI模型。
在这样的实施例中,AI引擎还可以包括向前述初始AI模型提出一个或多个附加AI模型;对于一个或多个附加AI模型中的每个附加AI模型启发式地挑选适当的学习算法;并行地训练AI模型;实例化一个或多个附加经训练的AI模型;以及在经训练的AI模型中标识最佳训练的AI模型。架构师模块可以被配置用于提出一个或多个附加AI模型。AI引擎可以被配置用于对于一个或多个附加AI模型中的每个附加AI模型,从一个或多个数据库中的多个机器学习算法中启发式地挑选适当的学习算法。AI引擎可以被配置用于并行地训练AI模型,其中一个或多个附加AI模型还可以在一个或多个训练周期中使用来自一个或多个训练数据源的训练数据进行训练。AI引擎可以被配置为基于由一个或多个AI模型在一个或多个训练周期中学习的概念模块来实例化一个或多个附加经训练的AI模型,并且AI引擎可以被配置为在经训练的AI模型中标识最佳训练的AI模型。
在这样的实施例中,AI引擎还可以包括提供启用AI,用于从汇编代码提出AI模型,并且从一个或多个数据库中的多个机器学习算法中挑选适当的学习算法用于训练AI模型。AI引擎可以持续训练经训练的AI引擎AI模型,以提供启用AI以提出AI模型并且挑选适当的学习算法。
在这样的实施例中,AI引擎还可以包括使用元学习模块在一个或多个数据库中保存记录。记录可以包括i)由AI引擎处理的源代码,ii)源代码的心智模型,iii)用于训练AI模型的训练数据,iv)经训练的AI模型,v)经训练的AI模型被训练到足够精确度的速度有多快,以及vi)经训练的AI模型在对训练数据进行预测时变得有多精确。
在这样的实施例中,AI引擎还可以包括进行某些确定。这样的确定可以包括何时在一个或多个概念模块中的每个概念模块上训练AI模型。这样的确定可以备选地或附加地包括在一个或多个概念模块中的每个概念模块上多么广泛地训练AI模型。确定可以基于一个或多个概念模块中的每个概念模块在基于训练数据的经训练的AI模型的一个或多个预测中的相关性。
在这样的实施例中,AI引擎还可以包括在训练AI模型时提供一个或多个训练状态更新。这样的训练更新可以包括:i)针对AI模型而被完成的训练计划的比例的估计,ii)用于完成训练计划的完成时间的估计,iii)AI模型正在积极训练的一个或多个概念模块,iv)在学习一个或多个概念模块时对AI模型的掌握,v)在学习一个或多个概念模块时AI模型的细粒度精确度和性能,和/或vi)在学习一个或多个心智模型时AI模型的整体精确度和性能。
网络
图7示出了根据一些实施例的在网络环境中彼此通信的多个电子系统和设备。网络环境700具有通信网络720。网络720可以包括从光学网络、蜂窝网络、因特网、局域网(“LAN”)、广域网(“WAN”)、卫星网络、光纤网络、有线网络及它们的组合选择的的一个或多个网络。在一些实施例中,通信网络720是因特网。如所示,可以存在经由通信网络720被彼此连接的很多服务器计算系统和很多客户端计算系统。然而,应当理解,例如,单个客户端计算系统也可以被连接到单个服务器计算系统。这样,图7示出了经由通信网络720彼此连接的服务器计算系统和客户端计算系统的任何组合。
通信网络720可以将选自至少第一服务器计算系统704A和第二服务器计算系统704B的一个或多个服务器计算系统彼此连接,并且连接到至少一个或多个客户端计算系统。例如,服务器计算系统704A和704B可以是图2A和图3A的一个或多个服务器系统220。服务器计算系统704A和704B可以分别可选地包括有组织的数据结构,诸如数据库706A和706B。一个或多个服务器计算系统中的每个服务器计算系统可以具有一个或多个虚拟服务器计算系统,并且多个虚拟服务器计算系统可以通过设计而被实现。一个或多个服务器计算系统中的每个服务器计算系统可以具有一个或多个防火墙以保护数据完整性。
至少一个或多个客户端计算系统可以选自第一移动计算设备702A(例如,具有基于Android的操作系统的智能电话)、第二移动计算设备702E(例如,具有基于iOS的操作系统的智能电话)、第一可穿戴电子设备702C(例如,智能手表)、第一便携式计算机702B(例如,膝上型计算机)、第三移动计算设备或第二便携式计算机702F(例如,具有基于Android或iOS的操作系统的平板计算机)、合并到第一智能自行车702D中的智能设备或系统、合并到第一智能自行车702G中的智能设备或系统、第一智能电视702H、第一虚拟现实或增强现实耳机704C等。例如,客户端计算系统702B可以是图2A和图3A的一个或多个客户端系统210中的一个,并且任何一个或多个其他客户端计算系统(例如,702A、702C、702D、702E、702F、702G、702H和/或704C)可以包括例如软件应用或其中可以部署经训练的神经网络106的基于硬件的系统。一个或多个客户端计算系统中的每个客户端计算系统可以具有一个或多个防火墙以保护数据完整性。
应当理解,术语“客户端计算系统”和“服务器计算系统”的使用旨在指示通常发起通信的系统和通常响应于通信的系统。例如,客户端计算系统通常可以发起通信,并且服务器计算系统通常响应于通信。除非明确说明,否则不暗示任何等级。这两个功能可以在单个通信系统或设备中,在这种情况中,客户端服务器和服务器客户端关系可以被视为是对等的。因此,如果第一便携式计算机702B(例如,客户端计算系统)和服务器计算系统704A都可以发起和响应于通信,则它们的通信可以被视为是对等的。另外,服务器计算系统704A和704B包括能够通过网络720彼此通信的电路和软件。
任何一个或多个服务器计算系统可以是云提供商。云提供商可以在云(例如,诸如因特网的网络720)中安装和操作应用软件,并且云用户可以从一个或多个客户端计算系统访问应用软件。通常,在云中具有基于云的站点的云用户不能单独管理运行应用软件的云基础架构或平台。因此,服务器计算系统及它的组织的数据结构可以是共享资源,其中每个云用户被给予对共享资源的一定量的专用使用。每个云用户的基于云的站点可以在云中获取一定量的虚拟的专用空间和带宽。云应用在其可伸缩性方面可以与其他应用不同,这可以通过在运行时将任务克隆到多个虚拟机以满足不断变化的工作需求而被实现。负载平衡器在一组虚拟机上分配工作。这个过程对云用户是透明的,云用户只能看到单个接入点。
基于云的远程访问可以被编码,以利用诸如超文本传输协议(“HTTP”)的协议来与客户端计算系统(诸如驻留在客户端计算系统上的web浏览器应用)上的应用进行请求和响应循环。可以通过智能手机、台式计算机、平板计算机或任何其他客户端计算系统随时和/或随地访问基于云的远程访问。基于云的远程访问被编码为参与1)来自所有基于web浏览器的应用的请求和响应周期,3)来自专用在线服务器的请求和响应周期,4)直接在驻留在客户端设备上的本机应用与对另一客户端计算系统的基于云的远程访问之间的请求和响应周期,以及5)这些的组合。
在一个实施例中,服务器计算系统704A可以包括服务器引擎、网页管理组件、内容管理组件和数据库管理组件。服务器引擎可以执行基本处理和操作系统级任务。网页管理组件可以处理与接收和提供数字内容和数字广告相关联的网页或屏幕的创建和显示或路由。用户(例如,云用户)可以借助于与其相关联的统一资源定位符(“URL”)来访问一个或多个服务器计算系统。内容管理组件可以处理本文中描述的实施例中的大多数功能。数据库管理组件可以包括关于数据库的存储和取回任务、对数据库的查询和数据的存储。
在一些实施例中,服务器计算系统可以被配置为在窗口、网页等中显示信息。包括当在例如服务器计算系统704A上被执行时可执行的任何程序模块、应用、服务、进程和其他类似软件的应用可以使得服务器计算系统704A在显示屏空间的一部分中显示窗口和用户接口屏幕。关于网页,例如,用户经由客户端计算系统702B上的浏览器可以与网页交互,并且然后向用户接口屏幕呈现的查询/字段和/或服务提供输入。网页可以由web服务器(例如,服务器计算系统704A)在支持任何超文本标记语言(“HTML”)或无线访问协议(“WAP”)的客户端计算系统(例如,客户端计算系统702B)或其任何等同物上提供。客户端计算系统702B可以托管浏览器和/或具体应用以与服务器计算系统704A交互。每个应用具有用于执行软件组件被编码为执行的功能的代码脚本,诸如呈现字段以获取期望信息的详细信息。例如,服务器计算系统704A内的算法、例程和引擎可以从呈现字段获取信息并且将该信息放入适当的存储介质中,诸如数据库(例如,数据库706A)。比较向导可以编写脚本以引用数据库并且使用这样的数据。应用可以被托管在例如服务器计算系统704A上,并且被提供给例如客户端计算系统702B的具体应用或浏览器。然后,应用提供允许详细信息的录入的窗口或页面。
计算系统
图8示出了根据一些实施例的计算系统800,其可以完全或部分地是一个或多个服务器或客户端计算设备的一部分。参考图8,计算系统800的组件可以包括但不限于具有一个或多个处理核的处理单元820、系统存储器830和将包括系统存储器830的各种系统组件耦合到处理单元820的系统总线821。系统总线821可以是使用各种总线架构中的任何总线架构的选自存储器总线或存储器控制器、外围总线和本地总线的几种类型的总线结构中的任何总线结构。
计算系统800通常包括各种计算机器可读介质。计算机器可读介质可以是可以由计算系统800访问的任何可用介质,并且包括易失性和非易失性介质以及可移除和不可移除介质。作为示例而非限制,计算机器可读介质使用包括诸如计算机可读指令、数据结构、其他可执行软件或其他数据的信息的存储。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储技术、CD-ROM、数字通用盘(DVD)或其他光盘存储器、磁带盒、磁带、磁盘存储器或其他磁存储设备、或者可以用于存储期望的信息并且可以由计算设备800访问的任何其他有形介质。诸如无线信道的移动介质不包括在机器可读介质中。通信介质通常包含计算机可读指令、数据结构、其他可执行软件或其他传输机制,并且包括任何信息传递介质。作为示例,图8的网络820上的一些客户端计算系统可能没有光或磁存储装置。
系统存储器830包括诸如只读存储器(ROM)831和随机存取存储器(RAM)832的易失性和/或非易失性存储器形式的计算机存储介质。包含有助于例如在启动期间在计算系统800内的元件之间传送信息的基本例程的基本输入/输出系统833(BIOS)通常存储在ROM831中。RAM 832通常包含可立即访问和/或当前由处理单元820操作的数据和/或软件。作为示例而非限制,图8示出了RAM 832可以包括操作系统834、应用程序835、其他可执行软件836和程序数据837的一部分。
计算系统800还可以包括其他可移除/不可移除的易失性/非易失性计算机存储介质。仅作为示例,图8示出了固态存储器841。可以在示例操作环境中使用的其他可移除/不可移除的易失性/非易失性计算机存储介质包括但不限于USB驱动器和设备、闪存卡、固态RAM、固态ROM等。固态存储器841通常通过诸如接口840的不可移除存储器接口连接到系统总线821,并且USB驱动器851通常通过诸如接口850的可移除存储器接口被连接到系统总线821。
上面讨论并且在图8中示出的驱动器及其相关联的计算机存储介质提供针对计算系统800的计算机可读指令、数据结构、其他可执行软件和其他数据的存储。例如,在图8中,固态存储器841被示出为用于存储操作系统844、应用程序845、其他可执行软件846和程序数据847。注意,这些组件可以与操作系统834、应用程序835、其他可执行软件836和程序数据837相同或不同。操作系统844、应用程序845、其他可执行软件846和程序数据847在这里被给予不同的数字以说明它们至少是不同的副本。
用户可以通过诸如键盘、触摸屏或软件或硬件输入按钮862、麦克风863、指点设备和/或滚动输入组件(诸如鼠标、轨迹球或触摸板)的输入设备向计算系统800中录入命令和信息。麦克风863可以与语音识别软件协作。这些和其他输入设备通常通过被耦合到系统总线821的用户输入接口860被连接到处理单元820,但是可以通过其他接口和总线结构(诸如并行端口、游戏端口或通用串行总线(USB))被连接。显示监测器891或其他类型的显示屏设备也经由诸如显示器接口890的接口被连接到系统总线821。除了监测器891之外,计算设备还可以包括可以通过输出外围接口895被连接的其他外围输出设备,诸如扬声器897、振动器899和其他输出设备。
计算系统800可以使用到一个或多个远程计算机/客户端设备(诸如远程计算系统880)的逻辑连接在联网环境中操作。远程计算系统880可以是个人计算机、手持设备、服务器、路由器、网络PC、对等设备或其他公共网络节点,并且通常包括上面相对于计算系统800而被描述的元件中的很多或所有元件。图8中描绘的逻辑连接可以包括个域网(“PAN”)872(例如,
Figure BDA0001812675710000321
)、局域网(“LAN”)871(例如,Wi-Fi)和广域网(“WAN”)873(例如,蜂窝网络),但也可以包括其他网络。这样的联网环境在办公室、企业范围的计算机网络、内联网和因特网中是常见的。浏览器应用可以驻留在计算设备上以及被存储在存储器中。
当在LAN网络环境中被使用时,计算系统800通过网络接口或适配器87被0连接到LAN 871,网络接口或适配器870可以是例如
Figure BDA0001812675710000322
或Wi-Fi适配器。当在WAN网络环境(例如,因特网)中被使用时,计算系统800通常包括用于通过WAN 873建立通信的一些装置。关于移动电信技术,例如,可以是内部或外部的无线电接口可以经由网络接口870或其他适当的机制被连接到系统总线821。在联网环境中,相对于计算系统800而被描述的其他软件或它的部分可以被存储在远程存储器存储设备中。作为示例而非限制,图8将远程应用程序885示出为驻留在远程计算设备880上。可以理解,所示出的网络连接是示例,并且可以使用在计算设备之间建立通信链路的其他手段。
如所讨论的,计算系统800可以包括处理器820、存储器(例如,ROM 831、RAM 832等)、为计算设备供电的内置电池、为电池充电的AC电源输入、显示屏、用于与连接到网络的远程计算设备无线通信的内置Wi-Fi电路。
应当注意,本设计可以在诸如关于图而被8描述的计算系统上被执行。然而,本设计可以在服务器、专用于消息处理的计算设备、或分布式系统上被执行,在分布式系统中,本设计的不同部分在分布式计算系统的不同部分上被执行。
可以被耦合到总线821的另一设备是诸如DC电源(例如,电池)或AC适配器电路的电源。如上所述,DC电源可以是需要定期被再充电的电池、燃料电池或类似的DC电源。无线通信模块可以采用无线应用协议来建立无线通信信道。无线通信模块可以实现无线联网标准。
在一些实施例中,用于促进本文中讨论的算法的软件可以被实施在非暂态机器可读介质上。机器可读介质包括以机器(例如,计算机)可读的形式存储信息的任何机制。例如,非暂态机器可读介质可以包括只读存储器(ROM);随机存取存储器(RAM);磁盘存储介质;光存储介质;闪存设备;数字通用盘(DVD)、EPROM、EEPROM、闪存、磁卡或光卡、或适于存储电子指令的任何类型的介质。
注意,本文中描述的应用包括但不限于作为操作系统应用的一部分的软件应用、移动应用和程序。本说明书的一些部分在对计算机存储器内的数据位的操作的算法和符号表示方面而被呈现。这些算法描述和表示是数据处理领域的技术人员用来将他们工作的实质最有效地传达给本领域其他技术人员的手段。这里的算法通常被认为是导致期望结果的自相一致的步骤序列。这些步骤是需要物理操纵物理量的步骤。通常,尽管不是必须的,这些量采用能够被存储、传输、组合、比较和以其他方式操纵的电信号或磁信号的形式。有时,主要出于通用的原因,已经证明将这些信号称为比特、值、元素、符号、字符、术语、数字等是方便的。这些算法可以按照很多不同的软件编程语言(诸如C、C+或其他类似语言)而被编写。此外,算法可以利用软件中的代码行、软件中配置的逻辑门或两者的组合而被实现。在一个实施例中,逻辑包括遵循布尔逻辑规则的电子电路、包含指令模式的软件或两者的任何组合。
然而,应当记住,所有这些和类似术语都与适当的物理量相关联,并且仅仅是应用于这些量的方便标签。除非从上述讨论中明确说明,否则应当理解,在整个说明书中,利用诸如“处理”或“计算(computing)”或“计算(calculating)”或“确定”或“显示”的术语的讨论是指计算机系统或类似电子计算设备的动作和过程,这些动作和过程将在计算机系统的寄存器和存储器内表示为物理(电子)量的数据操纵和转换成类似地在计算机系统存储器或寄存器或者其他这样的信息存储、传输或显示设备内表示为物理量的其他数据。
可以通过软件仿真来复制由电子硬件组件执行的很多功能。因此,针对实现那些相同功能而被编写的软件程序可以模拟输入输出电路中的硬件组件的功能。
虽然已经相当详细地提供了前述设计和其实施例,但是本申请人的设计和实施例的意图并不是限制性的。附加的适应和/或修改是可能的,并且在更广泛的方面,还包括这些调节和/或修改。因此,在不脱离由所附权利要求提供的范围的情况中,可以偏离前述设计和实施例,上述范围仅被在适当地解释时受权利要求限制。

Claims (19)

1.一种服务器系统,包括一个或多个服务器,所述一个或多个服务器被配置为托管人工智能AI引擎,所述AI引擎包括:
一个或多个AI引擎模块,包括架构师模块,
其中所述架构师模块被配置为从汇编代码提出AI模型,
其中所述AI引擎被配置为在一个或多个训练周期中利用来自一个或多个训练数据源的训练数据训练所述AI模型,
其中所述汇编代码从按照教学编程语言而被编写的源代码被生成,
其中所述源代码包括:
要由所述AI模型使用所述训练数据学习的一个或多个概念模块的心智模型,以及
用于在所述一个或多个概念模块上训练所述AI模型的一个或多个功课的课程,
其中所述AI引擎被配置为基于由所述AI模型在所述一个或多个训练周期中学习的一个或多个概念模块来实例化经训练的AI模型,
其中所述AI引擎包括数据库,所述数据库存储针对多个心智模型而被确定的多个签名,并且存储针对先前已经被用于求解所述多个心智模型的AI模型的多个拓扑,
其中所述AI引擎被配置为确定所述源代码的所述心智模型的签名,其中针对所述多个心智模型的所述多个签名和针对所述源代码的所述心智模型的所述签名使用散列而被确定,并且
其中所述架构师模块被配置为基于所述源代码的所述心智模型的确定的所述签名来从被存储在所述数据库中的所述多个拓扑选择拓扑,并且实例化针对所述AI模型的所选择的所述拓扑。
2.根据权利要求1所述的服务器系统,所述AI引擎还包括
编译器,其被配置为从所述源代码生成所述汇编代码,
其中所述训练数据是批量化训练数据、流式训练数据或它们的组合,并且
其中所述AI引擎被配置为从选自模拟器、训练数据生成器、训练数据数据库或它们的组合的一个或多个训练数据源推送或拉取所述训练数据。
3.根据权利要求2所述的服务器系统,所述AI引擎还包括:
数据流管理器,其被配置为管理所述流式训练数据的流式传输。
4.根据权利要求1所述的服务器系统,
其中所述AI引擎被配置为在所述一个或多个训练周期期间按照训练模式或预测模式操作,
其中按照所述训练模式的所述AI引擎被配置为:
i)实例化符合由所述架构师模块提出的所述AI模型的AI模型,以及
ii)训练所述AI模型,并且
其中按照所述预测模式的所述AI引擎被配置为:
i)通过一个或多个应用程序编程接口(“API”)端点在所述训练数据上实例化并且执行所述经训练的AI模型,以用于所述预测模式中的一个或多个预测。
5.根据权利要求1所述的服务器系统,
其中所述AI引擎被配置为从被存储在所述服务器系统的一个或多个数据库中的多个机器学习算法启发式地挑选适当的学习算法,以用于训练由所述架构师模块提出的所述AI模型。
6.根据权利要求5所述的服务器系统,
其中所述架构师模块被配置为提出一个或多个附加AI模型,并且
其中所述AI引擎被配置为:
i)针对所述一个或多个附加AI模型中的每个附加AI模型,从所述一个或多个数据库中的所述多个机器学习算法启发式地挑选适当的学习算法,
ii)并行地训练所述AI模型,
其中所述一个或多个附加AI模型也在一个或多个训练周期中利用来自一个或多个训练数据源的所述训练数据而被训练,以及
iii)基于由所述一个或多个AI模型在所述一个或多个训练周期中学习的所述概念模块来实例化一个或多个附加经训练的AI模型,以及
iv)在所述经训练的AI模型之中标识最佳的经训练的AI模型。
7.根据权利要求6所述的服务器系统,所述AI引擎还包括:
经训练的AI引擎AI模型,
其中所述经训练的AI引擎AI模型提供启用AI,以用于从所述汇编代码提出所述AI模型并且从所述一个或多个数据库中的所述多个机器学习算法挑选所述适当的学习算法以用于训练所述AI模型,并且
其中所述AI引擎被配置为在提供所述启用AI以用于提出所述AI模型并且挑选所述适当的学习算法时连续地训练所述经训练的AI引擎AI模型。
8.根据权利要求6所述的服务器系统,所述AI引擎还包括:
元学习模块,其被配置为针对以下各项将记录保持在所述一个或多个数据库中:
i)由所述AI引擎处理的所述源代码,
ii)所述源代码的心智模型,
iii)被使用以用于训练所述AI模型的所述训练数据,
iv)所述经训练的AI模型,
v)所述经训练的AI模型多么快地被训练到足够精确度水平,以及
vi)所述经训练的AI模型在对所述训练数据进行预测时变得多么精确。
9.根据权利要求1所述的服务器系统,
其中所述AI引擎被配置为在训练所述AI模型时提供选自以下各项的一个或多个训练状态更新:
i)针对所述AI模型而被完成的训练计划的比例的估计,
ii)用于完成所述训练计划的完成时间的估计,
iii)所述AI模型正在积极训练的所述一个或多个概念模块,
iv)在学习所述一个或多个概念模块时对所述AI模型的掌握,
v)在学习所述一个或多个概念模块时所述AI模型的细粒度精确度和性能,以及
vi)在学习一个或多个心智模型时所述AI模型的总体精确度和性能。
10.根据权利要求1所述的服务器系统,其中针对所述多个心智模型和所述源代码的所述心智模型的签名使用散列而被确定,从而使得具有类似机器学习算法特性的心智模型具有类似签名。
11.一种服务器系统,包括一个或多个服务器,所述一个或多个服务器被配置为托管人工智能AI引擎,所述AI引擎包括:
一个或多个AI引擎模块,所述一个或多个AI引擎模块包括架构师模块,
其中所述架构师模块被配置为从汇编代码提出AI模型,
其中所述AI引擎被配置为在一个或多个训练周期中利用来自一个或多个训练数据源的训练数据训练所述AI模型,
其中所述汇编代码从按照教学编程语言而被编写的源代码被生成,
其中所述源代码包括:
要由所述AI模型使用所述训练数据学习的一个或多个概念模块的心智模型,以及
用于在所述一个或多个概念模块上训练所述AI模型的一个或多个功课的课程,所述一个或多个功课中的每个功课被配置为可选地使用所述训练数据的不同流,
其中所述AI引擎被配置为基于由所述AI模型在所述一个或多个训练周期中学习的所述一个或多个概念模块来实例化经训练的AI模型;
其中所述架构师模块被配置为实例化所述AI模型的拓扑,
其中所述AI引擎被配置为关于以下进行确定:
i)何时在所述一个或多个概念模块中的每个概念模块上训练所述AI模型,以及
ii)在所述一个或多个概念模块中的每个概念模块上多么广泛地训练所述AI模型,
其中所述确定基于所述一个或多个概念模块中的每个概念模块在基于所述训练数据的所述经训练的AI模型的一个或多个预测中的相关性。
12.一种用于训练模型的方法,包括:
在被配置为托管人工智能AI引擎的计算机设备的处理器处:
提出AI模型,
其中所述AI引擎包括一个或多个AI引擎模块,所述一个或多个AI引擎模块包括用于从汇编代码提出所述AI模型的架构师模块;
训练所述AI模型,
其中所述AI引擎被配置为在一个或多个训练周期中利用来自一个或多个训练数据源的训练数据训练所述AI模型;
从源代码编译所述汇编代码,
其中编译器被配置为从按照教学编程语言而被编写的所述源代码生成所述汇编代码,
其中所述源代码包括:
要由所述AI模型使用所述训练数据学习的一个或多个概念模块的心智模型,以及
用于在所述一个或多个概念模块上训练所述AI模型的一个或多个功课的课程,所述一个或多个功课中的每个功课被配置为可选地使用所述训练数据的不同流;
实例化经训练的AI模型,
其中所述AI引擎被配置用于基于由所述AI模型在所述一个或多个训练周期中学习的所述一个或多个概念模块来实例化所述经训练的AI模型;以及
启发式地挑选适当的学习算法,
其中所述AI引擎被配置用于从被存储在一个或多个数据库中的多个机器学习算法挑选所述适当的学习算法,以用于训练由所述架构师模块提出的所述AI模型。
13.根据权利要求12所述的方法,还包括:
推送或拉取所述训练数据,
其中所述AI引擎被配置用于从选自模拟器、训练数据生成器、训练数据数据库或它们的组合的一个或多个训练源推送或拉取所述训练数据,并且
其中所述训练数据是批量化训练数据、流式训练数据或它们的组合。
14.根据权利要求12所述的方法,还包括:
在所述一个或多个训练周期期间按照训练模式或预测模式操作所述AI引擎,
其中按照所述训练模式的所述AI引擎:
i)实例化符合由所述架构师模块提出的所述AI模型的AI模型,以及
ii)训练所述AI模型,并且
其中按照所述预测模式的所述AI引擎:
i)通过一个或多个应用程序编程接口(“API”)端点在所述训练数据上实例化并且执行所述经训练的AI模型,以用于所述预测模式中的一个或多个预测。
15.根据权利要求12所述的方法,还包括:
提出一个或多个附加AI模型,
其中所述架构师模块被配置用于提出所述一个或多个附加AI模型;
针对所述一个或多个附加AI模型中的每个附加AI模型,利用所述AI引擎从被存储在所述一个或多个数据库中的所述多个机器学习算法启发式地挑选适当的学习算法;
利用所述AI引擎并行地训练所述AI模型,
其中所述一个或多个附加AI模型也在一个或多个训练周期中利用来自一个或多个训练数据源的所述训练数据而被训练;
基于由所述一个或多个AI模型在所述一个或多个训练周期中学习的所述概念模块,利用所述AI引擎实例化一个或多个附加经训练的AI模型;以及
利用所述AI引擎在所述经训练的AI模型之中标识最佳的经训练的AI模型。
16.根据权利要求15所述的方法,还包括:
提供启用AI以用于从所述汇编代码提出所述AI模型并且从所述一个或多个数据库中的所述多个机器学习算法挑选所述适当的学习算法,以用于训练所述AI模型;以及
利用所述AI引擎持续地训练经训练的AI引擎AI模型,以提供所述启用AI以用于提出所述AI模型并且挑选所述适当的学习算法。
17.根据权利要求15所述的方法,还包括:
利用元学习模块在所述一个或多个数据库中保持记录,
其中所述记录包括:
i)由所述AI引擎处理的所述源代码,
ii)所述源代码的心智模型,
iii)用于训练所述AI模型的所述训练数据,
iv)所述经训练的AI模型,
v)所述经训练的AI模型多么快地被训练到足够精确度水平,以及
vi)所述经训练的AI模型在对所述训练数据进行预测时变得多么精确。
18.根据权利要求12所述的方法,还包括:
利用所述AI引擎关于以下各项做出确定:
i)何时在所述一个或多个概念模块中的每个概念模块上训练所述AI模型,以及
ii)在所述一个或多个概念模块中的每个概念模块上多么广泛地训练所述AI模型,
其中所述确定基于所述一个或多个概念模块中的每个概念模块在基于所述训练数据的所述经训练的AI模型的一个或多个预测中的相关性。
19.根据权利要求12所述的方法,还包括:
利用所述AI引擎在训练所述AI模型时提供一个或多个训练状态更新,
其中所述一个或多个训练状态更新选自:
i)针对所述AI模型而被完成的训练计划的比例的估计,
ii)用于完成所述训练计划的完成时间的估计,
iii)所述AI模型正在积极训练的所述一个或多个概念模块,
iv)在学习所述一个或多个概念模块时对所述AI模型的掌握,
v)在学习所述一个或多个概念模块时所述AI模型的细粒度精确度和性能,以及
vi)在学习一个或多个心智模型时所述AI模型的总体精确度和性能。
CN201780020322.4A 2016-01-27 2017-01-27 具有架构师模块的人工智能引擎 Active CN109496320B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662287861P 2016-01-27 2016-01-27
US62/287,861 2016-01-27
US15/416,904 US10733531B2 (en) 2016-01-27 2017-01-26 Artificial intelligence engine having an architect module
US15/416,904 2017-01-26
PCT/US2017/015446 WO2017132572A1 (en) 2016-01-27 2017-01-27 An artificial intelligence engine having an architect module

Publications (2)

Publication Number Publication Date
CN109496320A CN109496320A (zh) 2019-03-19
CN109496320B true CN109496320B (zh) 2022-03-29

Family

ID=59359528

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201780020299.9A Active CN110168495B (zh) 2016-01-27 2017-01-27 经训练的人工智能对象的可搜索数据库
CN201780020322.4A Active CN109496320B (zh) 2016-01-27 2017-01-27 具有架构师模块的人工智能引擎
CN201780020323.9A Active CN109564505B (zh) 2016-01-27 2017-01-27 人工智能引擎、系统及机器可读存储设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201780020299.9A Active CN110168495B (zh) 2016-01-27 2017-01-27 经训练的人工智能对象的可搜索数据库

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201780020323.9A Active CN109564505B (zh) 2016-01-27 2017-01-27 人工智能引擎、系统及机器可读存储设备

Country Status (4)

Country Link
US (11) US10664766B2 (zh)
EP (3) EP3408750B1 (zh)
CN (3) CN110168495B (zh)
WO (3) WO2017132572A1 (zh)

Families Citing this family (361)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10268974B2 (en) * 2012-09-28 2019-04-23 Rex Wiig System and method of a requirement, compliance and resource management
US9953281B2 (en) * 2012-09-28 2018-04-24 Rex Wiig System and method of a requirement, compliance and resource management
JP6616170B2 (ja) * 2015-12-07 2019-12-04 ファナック株式会社 コアシートの積層動作を学習する機械学習器、積層コア製造装置、積層コア製造システムおよび機械学習方法
US11775850B2 (en) 2016-01-27 2023-10-03 Microsoft Technology Licensing, Llc Artificial intelligence engine having various algorithms to build different concepts contained within a same AI model
US11868896B2 (en) * 2016-01-27 2024-01-09 Microsoft Technology Licensing, Llc Interface for working with simulations on premises
US10664766B2 (en) 2016-01-27 2020-05-26 Bonsai AI, Inc. Graphical user interface to an artificial intelligence engine utilized to generate one or more trained artificial intelligence models
US11120299B2 (en) 2016-01-27 2021-09-14 Microsoft Technology Licensing, Llc Installation and operation of different processes of an AI engine adapted to different configurations of hardware located on-premises and in hybrid environments
US11836650B2 (en) 2016-01-27 2023-12-05 Microsoft Technology Licensing, Llc Artificial intelligence engine for mixing and enhancing features from one or more trained pre-existing machine-learning models
US11841789B2 (en) 2016-01-27 2023-12-12 Microsoft Technology Licensing, Llc Visual aids for debugging
US11086471B2 (en) * 2016-06-06 2021-08-10 Salesforce.Com, Inc. Visualizing neural networks
US11886957B2 (en) * 2016-06-10 2024-01-30 Apple Inc. Artificial intelligence controller that procedurally tailors itself to an application
US20230185608A1 (en) * 2016-08-11 2023-06-15 Rescale, Inc. Compute recommendation engine
US10748057B1 (en) * 2016-09-21 2020-08-18 X Development Llc Neural network modules
US10341420B1 (en) * 2016-10-14 2019-07-02 Amazon Technologies, Inc. Approaches for preparing and delivering bulk data to clients
US11288551B2 (en) 2016-10-24 2022-03-29 International Business Machines Corporation Edge-based adaptive machine learning for object recognition
US11250328B2 (en) 2016-10-26 2022-02-15 Cognizant Technology Solutions U.S. Corporation Cooperative evolution of deep neural network structures
US10274335B2 (en) 2017-01-03 2019-04-30 Honda Motor Co., Ltd. System for providing a notification of a presence of an occupant in a vehicle through historical patterns and method thereof
US11615285B2 (en) 2017-01-06 2023-03-28 Ecole Polytechnique Federale De Lausanne (Epfl) Generating and identifying functional subnetworks within structural networks
US11023840B2 (en) 2017-01-27 2021-06-01 International Business Machines Corporation Scenario planning and risk management
US10235734B2 (en) 2017-01-27 2019-03-19 International Business Machines Corporation Translation of artificial intelligence representations
US10831629B2 (en) 2017-01-27 2020-11-10 International Business Machines Corporation Multi-agent plan recognition
WO2018142700A1 (ja) * 2017-02-02 2018-08-09 日本電信電話株式会社 制御装置、制御方法、及びプログラム
US10503478B2 (en) * 2017-02-14 2019-12-10 Hcl Technologies Limited System and method for guiding a user in a software development lifecycle using machine learning
US11227090B2 (en) * 2017-02-15 2022-01-18 Michael Alexander Green System and method for achieving functional coverage closure for electronic system verification
US20180247549A1 (en) * 2017-02-21 2018-08-30 Scriyb LLC Deep academic learning intelligence and deep neural language network system and interfaces
US11507844B2 (en) 2017-03-07 2022-11-22 Cognizant Technology Solutions U.S. Corporation Asynchronous evaluation strategy for evolution of deep neural networks
US10540257B2 (en) * 2017-03-16 2020-01-21 Fujitsu Limited Information processing apparatus and computer-implemented method for evaluating source code
US11915152B2 (en) * 2017-03-24 2024-02-27 D5Ai Llc Learning coach for machine learning system
US10685294B2 (en) * 2017-03-29 2020-06-16 International Business Machines Corporation Hardware device based software selection
US10101971B1 (en) 2017-03-29 2018-10-16 International Business Machines Corporation Hardware device based software verification
US10042614B1 (en) 2017-03-29 2018-08-07 International Business Machines Corporation Hardware device based software generation
US11580361B2 (en) * 2017-04-24 2023-02-14 Intel Corporation Neural network training mechanism
US10929749B2 (en) * 2017-04-24 2021-02-23 Intel Corporation Neural network optimization mechanism
US11449787B2 (en) * 2017-04-25 2022-09-20 Xaxis, Inc. Double blind machine learning insight interface apparatuses, methods and systems
US10620930B2 (en) 2017-05-05 2020-04-14 Servicenow, Inc. Software asset management
WO2018236674A1 (en) * 2017-06-23 2018-12-27 Bonsai Al, Inc. HIERARCHICAL DECOMPOSITION DEEPENING REINFORCEMENT LEARNING FOR A MODEL OF ARTIFICIAL INTELLIGENCE
US11283738B2 (en) 2017-06-23 2022-03-22 Realpage, Inc. Interaction driven artificial intelligence system and uses for same, including travel or real estate related contexts
US11362968B2 (en) * 2017-06-30 2022-06-14 Intel Corporation Technologies for dynamic batch size management
CN117892774A (zh) 2017-07-21 2024-04-16 谷歌有限责任公司 用于卷积神经网络的神经架构搜索
US11138517B2 (en) 2017-08-11 2021-10-05 Google Llc On-device machine learning platform
US11403540B2 (en) 2017-08-11 2022-08-02 Google Llc On-device machine learning platform
US20190057548A1 (en) * 2017-08-16 2019-02-21 General Electric Company Self-learning augmented reality for industrial operations
KR102384643B1 (ko) * 2017-08-17 2022-04-08 엘지전자 주식회사 전자 장치 및 그 제어 방법
US11106683B2 (en) 2017-08-25 2021-08-31 Accenture Global Solutions Limited System architecture for interactive query processing
US10679129B2 (en) * 2017-09-28 2020-06-09 D5Ai Llc Stochastic categorical autoencoder network
US11437032B2 (en) 2017-09-29 2022-09-06 Shanghai Cambricon Information Technology Co., Ltd Image processing apparatus and method
US11394667B2 (en) * 2017-10-03 2022-07-19 Rupert Labs, Inc. Chatbot skills systems and methods
US10459695B2 (en) * 2017-10-05 2019-10-29 Sap Se Correction of code errors using machine learning
US10872125B2 (en) 2017-10-05 2020-12-22 Realpage, Inc. Concept networks and systems and methods for the creation, update and use of same to select images, including the selection of images corresponding to destinations in artificial intelligence systems
US10997259B2 (en) * 2017-10-06 2021-05-04 Realpage, Inc. Concept networks and systems and methods for the creation, update and use of same in artificial intelligence systems
CN107944564B (zh) * 2017-10-13 2023-01-06 北京百度网讯科技有限公司 深度学习作业处理方法、装置、设备及存储介质
US10992156B2 (en) * 2017-10-17 2021-04-27 The Board Of Trustees Of The Leland Stanford Junior University Autonomous screening and optimization of battery formation and cycling procedures
US11223723B2 (en) 2017-10-23 2022-01-11 Accenture Global Solutions Limited Call center system having reduced communication latency
US11250314B2 (en) 2017-10-27 2022-02-15 Cognizant Technology Solutions U.S. Corporation Beyond shared hierarchies: deep multitask learning through soft layer ordering
US10754308B2 (en) * 2017-11-09 2020-08-25 International Business Machines Corporation Decomposed perturbation approach using memory based learning for compliant assembly tasks
US20190156694A1 (en) * 2017-11-21 2019-05-23 Edward Manfre Academic language teaching machine
US11537439B1 (en) * 2017-11-22 2022-12-27 Amazon Technologies, Inc. Intelligent compute resource selection for machine learning training jobs
US20200311617A1 (en) * 2017-11-22 2020-10-01 Amazon Technologies, Inc. Packaging and deploying algorithms for flexible machine learning
US11977958B2 (en) 2017-11-22 2024-05-07 Amazon Technologies, Inc. Network-accessible machine learning model training and hosting system
CN109840591B (zh) * 2017-11-29 2021-08-03 华为技术有限公司 模型训练系统、方法和存储介质
US11960976B2 (en) * 2017-11-30 2024-04-16 B.yond, Inc. Decomposing tasks through artificial intelligence chaining
US10417556B1 (en) * 2017-12-07 2019-09-17 HatchB Labs, Inc. Simulation-based controls optimization using time series data forecast
US11182677B2 (en) 2017-12-13 2021-11-23 Cognizant Technology Solutions U.S. Corporation Evolving recurrent networks using genetic programming
CA3085897C (en) * 2017-12-13 2023-03-14 Cognizant Technology Solutions U.S. Corporation Evolutionary architectures for evolution of deep neural networks
US11263162B2 (en) 2017-12-20 2022-03-01 Intel Corporation System decoder for training accelerators
KR102146602B1 (ko) * 2017-12-22 2020-08-20 건국대학교 산학협력단 도커를 이용한 컨테이너 기반 딥러닝 개발 플랫폼 제공 방법 및 장치
KR20190078292A (ko) 2017-12-26 2019-07-04 삼성전자주식회사 뉴럴 네트워크 연산을 수행하는 장치 및 이의 동작 방법
US11494633B2 (en) * 2017-12-30 2022-11-08 Intel Corporation Techniques to manage training or trained models for deep learning applications
US11308399B2 (en) * 2018-01-04 2022-04-19 Jean-Patrice Glafkidès Method for topological optimization of graph-based models
CN108268934A (zh) * 2018-01-10 2018-07-10 北京市商汤科技开发有限公司 基于深度学习的推荐方法和装置、电子设备、介质、程序
CN110045960B (zh) * 2018-01-16 2022-02-18 腾讯科技(深圳)有限公司 基于芯片的指令集处理方法、装置及存储介质
US11010233B1 (en) 2018-01-18 2021-05-18 Pure Storage, Inc Hardware-based system monitoring
US10970395B1 (en) 2018-01-18 2021-04-06 Pure Storage, Inc Security threat monitoring for a storage system
US10225360B1 (en) 2018-01-24 2019-03-05 Veeva Systems Inc. System and method for distributing AR content
US11188838B2 (en) * 2018-01-30 2021-11-30 Salesforce.Com, Inc. Dynamic access of artificial intelligence engine in a cloud computing architecture
US10635435B2 (en) * 2018-02-02 2020-04-28 Fujitsu Limited Collection of API documentations
CN108414923A (zh) * 2018-02-05 2018-08-17 武汉大学 一种基于深度置信网络特征提取的模拟电路故障诊断方法
US11615331B2 (en) * 2018-02-05 2023-03-28 Accenture Global Solutions Limited Explainable artificial intelligence
US11527308B2 (en) 2018-02-06 2022-12-13 Cognizant Technology Solutions U.S. Corporation Enhanced optimization with composite objectives and novelty-diversity selection
US10235625B1 (en) * 2018-02-09 2019-03-19 Capital One Services, Llc Automatically scaling neural networks based on load
EP3640863B1 (en) 2018-02-13 2021-10-27 Shanghai Cambricon Information Technology Co., Ltd Computation device and method
US11704125B2 (en) 2018-02-13 2023-07-18 Cambricon (Xi'an) Semiconductor Co., Ltd. Computing device and method
US11630666B2 (en) 2018-02-13 2023-04-18 Shanghai Cambricon Information Technology Co., Ltd Computing device and method
CN116991226A (zh) 2018-02-14 2023-11-03 上海寒武纪信息科技有限公司 处理器的控制装置、方法及设备
US10679070B1 (en) * 2018-02-23 2020-06-09 Facebook, Inc. Systems and methods for a video understanding platform
JP6955702B2 (ja) 2018-03-06 2021-10-27 オムロン株式会社 情報処理装置、情報処理方法、及びプログラム
WO2019182378A1 (en) * 2018-03-21 2019-09-26 Lg Electronics Inc. Artificial intelligence server
CN108447487B (zh) * 2018-03-27 2020-09-25 长春市长光芯忆科技有限公司 基于文本输入与输出训练模拟人脑思维的方法及系统
CN110399977A (zh) * 2018-04-25 2019-11-01 华为技术有限公司 池化运算装置
US10896036B2 (en) * 2018-04-25 2021-01-19 Salesforce.Com, Inc. Auto mapping recommender
US11494200B2 (en) * 2018-05-02 2022-11-08 Microsoft Technology Licensing, Llc. Configuring an electronic device using artificial intelligence
CN110163366B (zh) * 2018-05-10 2022-08-26 腾讯科技(深圳)有限公司 深度学习前向预测的实现方法、装置和机器设备
US20190354815A1 (en) * 2018-05-15 2019-11-21 Palo Alto Investors LP Homeostatic Capacity Evaluation of Artificial Intelligence Systems
WO2019218896A1 (zh) 2018-05-18 2019-11-21 上海寒武纪信息科技有限公司 计算方法以及相关产品
US20190354599A1 (en) * 2018-05-21 2019-11-21 Microsoft Technology Licensing, Llc Ai model canvas
US11429654B2 (en) * 2018-05-21 2022-08-30 Microsoft Technology Licensing, Llc Exercising artificial intelligence by refining model output
US11853401B1 (en) * 2018-06-05 2023-12-26 Amazon Technologies, Inc. Machine learning model creation via user-configured model building blocks
CN108932671A (zh) * 2018-06-06 2018-12-04 上海电力学院 一种采用深度q神经网络调参的lstm风电负荷预测方法
US11972343B2 (en) 2018-06-11 2024-04-30 Inait Sa Encoding and decoding information
US11893471B2 (en) 2018-06-11 2024-02-06 Inait Sa Encoding and decoding information and artificial neural networks
US11663478B2 (en) 2018-06-11 2023-05-30 Inait Sa Characterizing activity in a recurrent artificial neural network
US10545733B2 (en) 2018-06-25 2020-01-28 Hcl Technologies Ltd. Code reusability
WO2020001438A1 (zh) 2018-06-27 2020-01-02 上海寒武纪信息科技有限公司 片上代码断点调试方法、片上处理器及芯片断点调试系统
CN108805269B (zh) * 2018-06-28 2021-11-30 杭州叙简科技股份有限公司 一种基于lstm循环神经网络拾取震相到时的方法
JP7016295B2 (ja) * 2018-06-28 2022-02-04 三菱重工業株式会社 意思決定装置、無人システム、意思決定方法、及びプログラム
US10223616B1 (en) * 2018-06-30 2019-03-05 Figleaf Limited System and method identification and classification of internet advertising
EP3985684A1 (en) * 2018-07-18 2022-04-20 NVIDIA Corporation Virtualized computing platform for inferencing, advanced processing, and machine learning applications
US11195123B2 (en) * 2018-07-26 2021-12-07 At&T Intellectual Property I, L.P. Using singular group actions in a network to train a machine learning system
CN109413707B (zh) * 2018-08-03 2021-10-08 南京工业大学 无线网络环境下基于深度强化学习技术的智能路由方法
KR102519467B1 (ko) 2018-08-28 2023-04-06 캠브리콘 테크놀로지스 코퍼레이션 리미티드 데이터 전처리 방법, 장치, 컴퓨터 설비 및 저장 매체
US10332035B1 (en) * 2018-08-29 2019-06-25 Capital One Services, Llc Systems and methods for accelerating model training in machine learning
US11222282B2 (en) 2018-09-21 2022-01-11 International Business Machines Corporation Sourcing a new machine-learning project by reusing artifacts from reference machine learning projects
WO2020062911A1 (en) * 2018-09-26 2020-04-02 Huawei Technologies Co., Ltd. Actor ensemble for continuous control
EP3859488A4 (en) 2018-09-28 2022-06-29 Shanghai Cambricon Information Technology Co., Ltd Signal processing device, signal processing method and related product
WO2020061707A1 (en) * 2018-09-28 2020-04-02 Element Ai Inc. System for an enterprise-wide data coordinator module
US11282405B2 (en) 2018-10-04 2022-03-22 Ttec Holdings, Inc. Intelligent systems based training of customer service agents
US11468998B2 (en) * 2018-10-09 2022-10-11 Radect Inc. Methods and systems for software clinical guidance
CN109460396A (zh) * 2018-10-12 2019-03-12 中国平安人寿保险股份有限公司 模型处理方法及装置、存储介质和电子设备
US11573962B2 (en) 2018-10-19 2023-02-07 Oracle International Corporation Dynamic performance tuning based on implied data characteristics
US11568179B2 (en) * 2018-10-19 2023-01-31 Oracle International Corporation Selecting an algorithm for analyzing a data set based on the distribution of the data set
KR20200046188A (ko) * 2018-10-19 2020-05-07 삼성전자주식회사 인공 지능 모델을 재구성하기 위한 전자 장치 및 그의 제어 방법
CN111177877A (zh) * 2018-10-24 2020-05-19 百度在线网络技术(北京)有限公司 基于应用容器引擎的本地仿真方法、装置及存储介质
CN112930547A (zh) * 2018-10-25 2021-06-08 伯克希尔格雷股份有限公司 用于学习外推最佳物体运送和搬运参数的系统和方法
US11188436B2 (en) * 2018-10-30 2021-11-30 Accenture Global Solutions Limited Monitoring an artificial intelligence (AI) based process
EP3874392A1 (en) * 2018-11-02 2021-09-08 Mycollected, Inc. Computer-implemented, user-controlled method of automatically organizing, storing, and sharing personal information
CN109636699A (zh) * 2018-11-06 2019-04-16 中国电子科技集团公司第五十二研究所 一种基于深度强化学习的无监督智能作战推演系统
JP2022509762A (ja) 2018-11-08 2022-01-24 セーフ エーアイ,インコーポレイテッド 自律マシンを使用したタスクの実行
US11847166B2 (en) * 2018-11-15 2023-12-19 Microsoft Technology Licensing, Llc Search engine functionality using shared AI models
EP3884434A4 (en) * 2018-11-19 2022-10-19 Deeplite Inc. SYSTEM AND METHOD FOR DETERMINING AUTOMATED DESIGN SPACE FOR DEEP NEURAL NETWORKS
WO2020106908A1 (en) * 2018-11-21 2020-05-28 Amazon Technologies, Inc. Reinforcement learning model training through simulation
US11861490B1 (en) 2018-11-21 2024-01-02 Amazon Technologies, Inc. Decoupled machine learning training
US11455234B2 (en) 2018-11-21 2022-09-27 Amazon Technologies, Inc. Robotics application development architecture
EP3884690A1 (en) * 2018-11-21 2021-09-29 Amazon Technologies Inc. Method and system for robotics application development
US20200167687A1 (en) * 2018-11-27 2020-05-28 Amazon Technologies, Inc. Simulation modeling exchange
US11292129B2 (en) * 2018-11-21 2022-04-05 Aivot, Llc Performance recreation system
US11429762B2 (en) 2018-11-27 2022-08-30 Amazon Technologies, Inc. Simulation orchestration for training reinforcement learning models
US11836577B2 (en) 2018-11-27 2023-12-05 Amazon Technologies, Inc. Reinforcement learning model training through simulation
USD942984S1 (en) * 2018-11-23 2022-02-08 Siemens Aktiengesellschaft Display screen or portion thereof with graphical user interface
CN109597682A (zh) * 2018-11-26 2019-04-09 华南理工大学 一种采用启发式编码策略的云计算工作流调度方法
US11521067B2 (en) 2018-11-30 2022-12-06 International Business Machines Corporation Decentralized distributed deep learning
US11204761B2 (en) * 2018-12-03 2021-12-21 International Business Machines Corporation Data center including cognitive agents and related methods
US11669713B2 (en) 2018-12-04 2023-06-06 Bank Of America Corporation System and method for online reconfiguration of a neural network system
US11687785B2 (en) * 2018-12-05 2023-06-27 Jean-Patrice Glafkidès Modification of neural network topology
US11048485B2 (en) * 2018-12-07 2021-06-29 International Business Machines Corporation User interface code re-use based upon machine learning of design documents
US10353940B1 (en) * 2018-12-11 2019-07-16 Rina Systems, Llc. Enhancement of search results
CN110033091B (zh) 2018-12-13 2020-09-01 阿里巴巴集团控股有限公司 一种基于模型进行预测的方法和装置
RU2702980C1 (ru) * 2018-12-14 2019-10-14 Самсунг Электроникс Ко., Лтд. Распределённое обучение моделей машинного обучения для персонализации
CN109656566B (zh) * 2018-12-14 2020-01-10 中科寒武纪科技股份有限公司 异构计算系统可执行文件获取方法、运行方法及相关产品
CN109684087B (zh) * 2018-12-17 2020-01-10 中科寒武纪科技股份有限公司 运算方法、装置及相关产品
EP3671571A1 (en) 2018-12-20 2020-06-24 Siemens Aktiengesellschaft A method and system for generating an artificial intelligence model
KR102477762B1 (ko) * 2018-12-27 2022-12-19 (주)제이엘케이 클라우드 기반 인-메모리 의료 영상 분석 장치 및 방법
CN109584651B (zh) * 2018-12-28 2021-06-08 于珂 一种适合亲子互动学习编程的方法以及实现该方法的装置
CN111383637A (zh) 2018-12-28 2020-07-07 上海寒武纪信息科技有限公司 信号处理装置、信号处理方法及相关产品
EP3675063A1 (en) * 2018-12-29 2020-07-01 Dassault Systèmes Forming a dataset for inference of solid cad features
EP3675062A1 (en) 2018-12-29 2020-07-01 Dassault Systèmes Learning a neural network for inference of solid cad features
JP7376593B2 (ja) * 2018-12-31 2023-11-08 インテル・コーポレーション 人工知能を利用した安全保障システム
US11191492B2 (en) * 2019-01-18 2021-12-07 International Business Machines Corporation Early detection and management of eye diseases by forecasting changes in retinal structures and visual function
KR20200094577A (ko) * 2019-01-30 2020-08-07 주식회사 모비스 인공신경망 시뮬레이터와 강화학습 제어기를 사용한 실시간 가속기 제어 시스템
KR102211604B1 (ko) * 2019-02-01 2021-02-04 재단법인대구경북과학기술원 Gpu 기반의 채널 단위 딥뉴럴 네트워크 구조 검색을 사용하는 인공지능 시스템
CN111523673B (zh) * 2019-02-01 2021-07-27 创新先进技术有限公司 模型训练方法、装置及系统
US11544525B2 (en) * 2019-02-04 2023-01-03 Sateesh Kumar Addepalli Systems and methods for artificial intelligence with a flexible hardware processing framework
US11507662B2 (en) 2019-02-04 2022-11-22 Sateesh Kumar Addepalli Systems and methods of security for trusted artificial intelligence hardware processing
US11150720B2 (en) 2019-02-04 2021-10-19 Sateesh Kumar Addepalli Systems and methods for power management of hardware utilizing virtual multilane architecture
US11989647B2 (en) * 2019-02-08 2024-05-21 Adobe Inc. Self-learning scheduler for application orchestration on shared compute cluster
US11030086B2 (en) 2019-02-15 2021-06-08 Tencent America LLC Machine learning model full life cycle management framework
US11423454B2 (en) 2019-02-15 2022-08-23 Sateesh Kumar Addepalli Real-time customizable AI model collaboration and marketplace service over a trusted AI model network
US20200265509A1 (en) * 2019-02-19 2020-08-20 Pathtronic Inc. Secure and trusted multi-tenant service delivery platform for distributed multitenant-capable ai solution model compute processors
US11481639B2 (en) 2019-02-26 2022-10-25 Cognizant Technology Solutions U.S. Corporation Enhanced optimization with composite objectives and novelty pulsation
US11409990B1 (en) * 2019-03-01 2022-08-09 Bottomline Technologies (De) Inc. Machine learning archive mechanism using immutable storage
WO2020186061A1 (en) 2019-03-13 2020-09-17 Cognizant Technology Solutions U.S. Corporation System and method for implementing modular universal reparameterization for deep multi-task learning across diverse domains
KR20200109819A (ko) * 2019-03-14 2020-09-23 삼성전자주식회사 전자 장치 및 이의 제어 방법
US11065549B2 (en) * 2019-03-15 2021-07-20 Sony Interactive Entertainment Inc. AI modeling for video game coaching and matchmaking
US11569978B2 (en) 2019-03-18 2023-01-31 Inait Sa Encrypting and decrypting information
US11652603B2 (en) 2019-03-18 2023-05-16 Inait Sa Homomorphic encryption
EP3948692A4 (en) 2019-03-27 2023-03-29 Cognizant Technology Solutions U.S. Corporation PROCESS AND SYSTEM CONTAINING A SCALABLE SUBSTITUTE-ASSISTED PRESCRIPTIONS OPTIMIZATION ENGINE
US20220188517A1 (en) 2019-04-03 2022-06-16 Singularity Systems Inc. Hierarchical machine learning architecture including master engine supported by distributed light-weight real-time edge engines
US11694090B2 (en) 2019-04-10 2023-07-04 International Business Machines Corporation Debugging deep neural networks
US20200334522A1 (en) * 2019-04-18 2020-10-22 Cambricon Technologies Corporation Limited Data processing method and related products
CN111831543A (zh) * 2019-04-18 2020-10-27 中科寒武纪科技股份有限公司 一种数据处理方法及相关产品
US11194845B2 (en) 2019-04-19 2021-12-07 Tableau Software, LLC Interactive lineage analyzer for data assets
WO2020236021A1 (en) 2019-05-17 2020-11-26 Rt-Rk Istrazivacko-Razvojni Institut Rt-Rk Doo Za Sisteme Zasnovane Na Racunarima Novi Sad Universal and personalized distributed decision support system
US11321634B2 (en) * 2019-05-21 2022-05-03 International Business Machines Corporation Minimizing risk using machine learning techniques
US20200372337A1 (en) * 2019-05-21 2020-11-26 Nvidia Corporation Parallelization strategies for training a neural network
US11175898B2 (en) * 2019-05-31 2021-11-16 Apple Inc. Compiling code for a machine learning model for execution on a specialized processor
US11443244B2 (en) * 2019-06-05 2022-09-13 International Business Machines Corportation Parallel ensemble of machine learning algorithms
US11676028B2 (en) 2019-06-12 2023-06-13 Shanghai Cambricon Information Technology Co., Ltd Neural network quantization parameter determination method and related products
CN112085184B (zh) 2019-06-12 2024-03-29 上海寒武纪信息科技有限公司 量化参数调整方法、装置及相关产品
USD916916S1 (en) * 2019-06-17 2021-04-20 Verb Surgical Inc. Portion of a display screen with icon of a robotic arm
US11232327B2 (en) * 2019-06-19 2022-01-25 Western Digital Technologies, Inc. Smart video surveillance system using a neural network engine
TWI721464B (zh) * 2019-06-21 2021-03-11 鴻齡科技股份有限公司 深度學習程式配置方法、裝置、電子設備及存儲介質
US11494237B2 (en) * 2019-06-26 2022-11-08 Microsoft Technology Licensing, Llc Managing workloads of a deep neural network processor
US11636211B2 (en) * 2019-06-27 2023-04-25 Blackberry Limited Binary static analysis of application structure to identify vulnerabilities
CN110351348B (zh) * 2019-06-27 2022-03-11 广东石油化工学院 一种基于dqn的云计算资源调度优化方法
CN112148348B (zh) * 2019-06-28 2023-10-20 杭州海康威视数字技术股份有限公司 任务处理方法、装置及存储介质
US11635990B2 (en) 2019-07-01 2023-04-25 Nutanix, Inc. Scalable centralized manager including examples of data pipeline deployment to an edge system
US11003501B2 (en) 2019-07-03 2021-05-11 Advanced New Technologies Co., Ltd. Loading models on nodes having multiple model service frameworks
US11501881B2 (en) 2019-07-03 2022-11-15 Nutanix, Inc. Apparatus and method for deploying a mobile device as a data source in an IoT system
US11182715B2 (en) * 2019-07-05 2021-11-23 Invia Robotics, Inc. Systems and methods for orchestrating autonomously and manually performed operations
US11169798B1 (en) 2019-07-05 2021-11-09 Dialpad, Inc. Automated creation, testing, training, adaptation and deployment of new artificial intelligence (AI) models
US11610134B2 (en) * 2019-07-08 2023-03-21 Vianai Systems, Inc. Techniques for defining and executing program code specifying neural network architectures
US20210012209A1 (en) * 2019-07-08 2021-01-14 Vian Systems, Inc. Techniques for modifying neural network definitions
CN110399234A (zh) * 2019-07-10 2019-11-01 苏州浪潮智能科技有限公司 一种任务加速处理方法、装置、设备及可读存储介质
US11269599B2 (en) * 2019-07-23 2022-03-08 Cdw Llc Visual programming methods and systems for intent dispatch
KR20210012730A (ko) 2019-07-26 2021-02-03 삼성전자주식회사 인공지능 모델의 학습 방법 및 전자 장치
CN112306925B (zh) * 2019-08-02 2023-02-10 华为技术有限公司 访问请求的处理方法、装置、设备及存储介质
CN112308233A (zh) * 2019-08-02 2021-02-02 伊姆西Ip控股有限责任公司 用于处理数据的方法、设备和计算机程序产品
CN110515811A (zh) * 2019-08-09 2019-11-29 中国信息通信研究院 终端人工智能性能基准测试方法及装置
US11301223B2 (en) 2019-08-19 2022-04-12 International Business Machines Corporation Artificial intelligence enabled function logic infusion
US11400592B2 (en) * 2019-08-19 2022-08-02 Wipro Limited Method and system for task execution in dynamic heterogeneous robotic environment
WO2021031137A1 (zh) * 2019-08-21 2021-02-25 深圳鲲云信息科技有限公司 人工智能应用开发系统、计算机设备及存储介质
CN110502579A (zh) * 2019-08-26 2019-11-26 第四范式(北京)技术有限公司 用于批量和实时特征计算的系统和方法
US20220321424A1 (en) * 2019-08-28 2022-10-06 Telefonaktiebolaget Lm Ericsson (Publ) Network nodes and methods for handling machine learning models in a communications network
CN110704178B (zh) * 2019-09-04 2023-05-23 北京三快在线科技有限公司 机器学习模型训练方法、平台、电子设备及可读存储介质
CN110570307B (zh) * 2019-09-06 2024-01-05 北京神州同道智能信息技术有限公司 一种基于智能策略平台的全市场多品种金融资管系统
WO2021051920A1 (zh) * 2019-09-17 2021-03-25 华为技术有限公司 模型优化方法、装置、存储介质及设备
US11651003B2 (en) * 2019-09-27 2023-05-16 Tableau Software, LLC Interactive data visualization interface for data and graph models
US11727314B2 (en) * 2019-09-30 2023-08-15 Amazon Technologies, Inc. Automated machine learning pipeline exploration and deployment
US11153375B2 (en) * 2019-09-30 2021-10-19 Adobe Inc. Using reinforcement learning to scale queue-based services
US11567797B2 (en) * 2019-09-30 2023-01-31 The Travelers Indemnity Company Cloud application scaler
US11205099B2 (en) * 2019-10-01 2021-12-21 Google Llc Training neural networks using data augmentation policies
US11132687B2 (en) * 2019-10-04 2021-09-28 Visa International Service Association Method for dynamically reconfiguring machine learning models
US11593013B2 (en) 2019-10-07 2023-02-28 Kyndryl, Inc. Management of data in a hybrid cloud for use in machine learning activities
CN110647948B (zh) * 2019-10-08 2023-04-21 南京大学 一种基于神经网络的图片拼接检测方法和系统
JP7032366B2 (ja) * 2019-10-09 2022-03-08 株式会社日立製作所 運用支援システム及び方法
US11182142B2 (en) 2019-10-10 2021-11-23 Wipro Limited Method and system for dynamic deployment and vertical scaling of applications in a cloud environment
USD940172S1 (en) * 2019-10-14 2022-01-04 Roche Molecular Systems, Inc. Display screen or portion thereof with graphical user interface for interactive guidelines for multidisciplinary cancer treatment planning
USD931314S1 (en) 2019-10-14 2021-09-21 Roche Molecular Systems, Inc. Display screen or portion thereof with graphical user interface for interactive guidelines for multidisciplinary cancer treatment planning
USD930022S1 (en) 2019-10-14 2021-09-07 Roche Molecular Systems, Inc. Display screen or portion thereof with graphical user interface for interactive guidelines for multidisciplinary cancer treatment planning
US20220391420A1 (en) * 2019-10-15 2022-12-08 Quatro Consulting Llc Method and system for interpreting inputted information
CN110766072A (zh) * 2019-10-22 2020-02-07 探智立方(北京)科技有限公司 一种基于结构相似性的计算图进化ai模型自动生成方法
CN111079892A (zh) * 2019-10-30 2020-04-28 华为技术有限公司 深度学习模型的训练方法、装置及系统
US11488185B2 (en) 2019-11-05 2022-11-01 International Business Machines Corporation System and method for unsupervised abstraction of sensitive data for consortium sharing
US11556734B2 (en) 2019-11-05 2023-01-17 International Business Machines Corporation System and method for unsupervised abstraction of sensitive data for realistic modeling
US11599884B2 (en) 2019-11-05 2023-03-07 International Business Machines Corporation Identification of behavioral pattern of simulated transaction data
US11461793B2 (en) * 2019-11-05 2022-10-04 International Business Machines Corporation Identification of behavioral pattern of simulated transaction data
US11488172B2 (en) 2019-11-05 2022-11-01 International Business Machines Corporation Intelligent agent to simulate financial transactions
US11475467B2 (en) 2019-11-05 2022-10-18 International Business Machines Corporation System and method for unsupervised abstraction of sensitive data for realistic modeling
US11676218B2 (en) * 2019-11-05 2023-06-13 International Business Machines Corporation Intelligent agent to simulate customer data
US11461728B2 (en) 2019-11-05 2022-10-04 International Business Machines Corporation System and method for unsupervised abstraction of sensitive data for consortium sharing
US11475468B2 (en) 2019-11-05 2022-10-18 International Business Machines Corporation System and method for unsupervised abstraction of sensitive data for detection model sharing across entities
US11842357B2 (en) * 2019-11-05 2023-12-12 International Business Machines Corporation Intelligent agent to simulate customer data
US11494835B2 (en) 2019-11-05 2022-11-08 International Business Machines Corporation Intelligent agent to simulate financial transactions
US11423217B2 (en) 2019-11-07 2022-08-23 Tableau Software, LLC Flexible table based visualizations
US11829421B2 (en) 2019-11-08 2023-11-28 Tableau Software, LLC Dynamic graph generation for interactive data analysis
WO2021090890A1 (ja) * 2019-11-08 2021-05-14 大日本印刷株式会社 ソフトウェア作成装置、ソフトウェア作成方法、およびプログラム
US11687418B2 (en) 2019-11-22 2023-06-27 Pure Storage, Inc. Automatic generation of recovery plans specific to individual storage elements
US11657155B2 (en) 2019-11-22 2023-05-23 Pure Storage, Inc Snapshot delta metric based determination of a possible ransomware attack against data maintained by a storage system
US11520907B1 (en) 2019-11-22 2022-12-06 Pure Storage, Inc. Storage system snapshot retention based on encrypted data
US11755751B2 (en) 2019-11-22 2023-09-12 Pure Storage, Inc. Modify access restrictions in response to a possible attack against data stored by a storage system
US11651075B2 (en) 2019-11-22 2023-05-16 Pure Storage, Inc. Extensible attack monitoring by a storage system
US11720714B2 (en) 2019-11-22 2023-08-08 Pure Storage, Inc. Inter-I/O relationship based detection of a security threat to a storage system
US11675898B2 (en) 2019-11-22 2023-06-13 Pure Storage, Inc. Recovery dataset management for security threat monitoring
US11941116B2 (en) 2019-11-22 2024-03-26 Pure Storage, Inc. Ransomware-based data protection parameter modification
US11720692B2 (en) 2019-11-22 2023-08-08 Pure Storage, Inc. Hardware token based management of recovery datasets for a storage system
US11341236B2 (en) 2019-11-22 2022-05-24 Pure Storage, Inc. Traffic-based detection of a security threat to a storage system
US11500788B2 (en) 2019-11-22 2022-11-15 Pure Storage, Inc. Logical address based authorization of operations with respect to a storage system
US11645162B2 (en) 2019-11-22 2023-05-09 Pure Storage, Inc. Recovery point determination for data restoration in a storage system
US11615185B2 (en) 2019-11-22 2023-03-28 Pure Storage, Inc. Multi-layer security threat detection for a storage system
US11625481B2 (en) 2019-11-22 2023-04-11 Pure Storage, Inc. Selective throttling of operations potentially related to a security threat to a storage system
US10970651B1 (en) * 2019-12-02 2021-04-06 Sas Institute Inc. Analytic system for two-stage interactive graphical model selection
US11093217B2 (en) * 2019-12-03 2021-08-17 International Business Machines Corporation Supervised environment controllable auto-generation of HTML
US11797820B2 (en) 2019-12-05 2023-10-24 International Business Machines Corporation Data augmented training of reinforcement learning software agent
US11748128B2 (en) 2019-12-05 2023-09-05 International Business Machines Corporation Flexible artificial intelligence agent infrastructure for adapting processing of a shell
US11188558B2 (en) 2019-12-06 2021-11-30 Tableau Software, LLC Parenting computed fields with data objects
US11893484B2 (en) * 2019-12-06 2024-02-06 X Development Llc System and method for efficient parallel execution of physical simulations
CN112925558B (zh) * 2019-12-09 2022-05-17 支付宝(杭州)信息技术有限公司 模型联合训练方法及装置
US11816553B2 (en) 2019-12-11 2023-11-14 Inait Sa Output from a recurrent neural network
US11580401B2 (en) 2019-12-11 2023-02-14 Inait Sa Distance metrics and clustering in recurrent neural networks
US11651210B2 (en) 2019-12-11 2023-05-16 Inait Sa Interpreting and improving the processing results of recurrent neural networks
US11797827B2 (en) 2019-12-11 2023-10-24 Inait Sa Input into a neural network
CN112988138A (zh) 2019-12-16 2021-06-18 杭州中天微系统有限公司 应用于集成开发环境中的系统和方法
US11429434B2 (en) * 2019-12-23 2022-08-30 International Business Machines Corporation Elastic execution of machine learning workloads using application based profiling
US11829853B2 (en) 2020-01-08 2023-11-28 Subtree Inc. Systems and methods for tracking and representing data science model runs
US11086891B2 (en) * 2020-01-08 2021-08-10 Subtree Inc. Systems and methods for tracking and representing data science data runs
CN111241688B (zh) * 2020-01-15 2023-08-25 北京百度网讯科技有限公司 复合生产工艺过程监控方法及装置
US11409287B2 (en) 2020-01-17 2022-08-09 Baidu Usa Llc Neural task planner for autonomous vehicles
CN114902550A (zh) * 2020-01-17 2022-08-12 美国西门子医学诊断股份有限公司 运动控制系统中的齿隙补偿
TWI741488B (zh) * 2020-01-22 2021-10-01 宏正自動科技股份有限公司 除錯系統及預警系統
CN111311008B (zh) * 2020-02-21 2021-04-30 山东大学 交直流大电网动态安全风险态势滚动前瞻预警方法及系统
US11494703B2 (en) * 2020-02-26 2022-11-08 Opendoor Labs Inc. Machine learning model registry
KR102112858B1 (ko) * 2020-03-03 2020-05-19 셀렉트스타 주식회사 가이드 포인트를 제공하는 ui를 이용한 학습 데이터 생성 방법 및 장치
US11966413B2 (en) 2020-03-06 2024-04-23 Cisco Technology, Inc. Federated artificial intelligence with cumulative learning in a computer network
US11783025B2 (en) 2020-03-12 2023-10-10 International Business Machines Corporation Training diverse and robust ensembles of artificial intelligence computer models
US11321638B2 (en) 2020-03-16 2022-05-03 Kyndryl, Inc. Interoperable smart AI enabled evaluation of models
JP6892946B1 (ja) * 2020-03-18 2021-06-23 エヌ・ティ・ティ・コミュニケーションズ株式会社 情報処理装置、設定方法および設定プログラム
US11373069B2 (en) 2020-03-20 2022-06-28 General Electric Company Analogy engine for grounding and situational awareness
CN111427687A (zh) * 2020-03-23 2020-07-17 深圳市中盛瑞达科技有限公司 一种人工智能云平台
CN111399911B (zh) * 2020-03-24 2021-11-02 杭州博雅鸿图视频技术有限公司 一种基于多核异构计算的人工智能开发方法及装置
KR102179586B1 (ko) * 2020-04-16 2020-11-18 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
KR102150647B1 (ko) * 2020-04-16 2020-09-02 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
KR102179588B1 (ko) * 2020-04-16 2020-11-17 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
KR102179587B1 (ko) * 2020-04-16 2020-11-17 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
KR102179585B1 (ko) * 2020-04-16 2020-11-18 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
KR102179584B1 (ko) * 2020-04-16 2020-11-18 주식회사 딥노이드 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
US20210322825A1 (en) * 2020-04-20 2021-10-21 Stats Llc Graph Based Method of Next Pitch Prediction
US11663522B2 (en) * 2020-04-27 2023-05-30 Microsoft Technology Licensing, Llc Training reinforcement machine learning systems
US11640294B2 (en) * 2020-04-29 2023-05-02 Microsoft Technology Licensing, Llc. Machine-generated examples of command-line commands with parameter values
US11372585B2 (en) 2020-05-05 2022-06-28 Micron Technology, Inc. Asynchronous process topology in a memory device
CN111582478B (zh) * 2020-05-09 2023-09-22 北京百度网讯科技有限公司 用于确定模型结构的方法和装置
TWI741629B (zh) * 2020-06-01 2021-10-01 中華電信股份有限公司 機台主軸跑合預檢方法及電腦可讀媒介
KR102212966B1 (ko) * 2020-06-05 2021-02-05 주식회사 딥노이드 개별 레이어의 예상 실행시간이 표시되는 의료영상 판독을 위한 인공지능 기반의 클라우드 플랫폼 시스템
US11568283B2 (en) * 2020-06-12 2023-01-31 Paypal, Inc. Artificial intelligence orchestration layer to facilitate migrations between different artificial intelligence platforms
US11379748B2 (en) 2020-06-15 2022-07-05 Bank Of America Corporation System for threshold detection using learning reinforcement
US11775841B2 (en) 2020-06-15 2023-10-03 Cognizant Technology Solutions U.S. Corporation Process and system including explainable prescriptions through surrogate-assisted evolution
CN111824216B (zh) * 2020-06-19 2021-11-05 北京交通大学 一种列车开行方案评估方法
US20210406150A1 (en) * 2020-06-25 2021-12-30 Segment.io, Inc. Application instrumentation and event tracking
US20220004814A1 (en) * 2020-07-02 2022-01-06 Accenture Global Solutions Limited Agent environment co-creation
US11983236B2 (en) 2020-07-06 2024-05-14 The Iremedy Healthcare Companies, Inc. Automation system and method
US11977986B2 (en) 2020-07-09 2024-05-07 International Business Machines Corporation Dynamic computation rates for distributed deep learning
US11875256B2 (en) 2020-07-09 2024-01-16 International Business Machines Corporation Dynamic computation in decentralized distributed deep learning training
US11886969B2 (en) 2020-07-09 2024-01-30 International Business Machines Corporation Dynamic network bandwidth in distributed deep learning training
US11422985B2 (en) 2020-07-30 2022-08-23 Tableau Software, LLC Interactive data modeling
US11654566B2 (en) * 2020-08-12 2023-05-23 General Electric Company Robotic activity decomposition
CN111969602B (zh) * 2020-08-14 2022-02-01 山东大学 一种综合能源系统的日前随机优化调度方法及装置
CN112764900A (zh) * 2020-08-18 2021-05-07 薛东 结合云网融合和人工智能的业务数据处理方法及云端平台
EP4165828A4 (en) 2020-09-03 2023-11-29 Samsung Electronics Co., Ltd. METHOD AND WIRELESS COMMUNICATION NETWORKS FOR HANDLING A DATA-DRIVEN MODEL
CN112114791B (zh) * 2020-09-08 2022-03-25 南京航空航天大学 一种基于元学习的代码自适应生成方法
CN112171669B (zh) * 2020-09-21 2021-10-08 西安交通大学 一种脑-机协作数字孪生强化学习控制方法及系统
CN112202899B (zh) * 2020-09-30 2022-10-25 北京百度网讯科技有限公司 用于工作流的处理方法、装置、智能工作站和电子设备
CN112348063A (zh) * 2020-10-27 2021-02-09 广东电网有限责任公司电力调度控制中心 一种物联网中基于联邦迁移学习的模型训练方法及装置
CN112329830B (zh) * 2020-10-27 2023-01-31 中国人民解放军战略支援部队信息工程大学 一种基于卷积神经网络和迁移学习的无源定位轨迹数据识别方法及系统
US11074107B1 (en) 2020-11-04 2021-07-27 RazorThink, Inc. Data processing system and method for managing AI solutions development lifecycle
WO2022098698A1 (en) * 2020-11-06 2022-05-12 Xgenesis Inc. Methods and systems for modular personalization center
US11726764B2 (en) 2020-11-11 2023-08-15 Nutanix, Inc. Upgrade systems for service domains
US11665221B2 (en) 2020-11-13 2023-05-30 Nutanix, Inc. Common services model for multi-cloud platform
US20220164696A1 (en) * 2020-11-23 2022-05-26 Capital One Services, Llc Automatically training an analytical model
CN112418404A (zh) * 2020-12-01 2021-02-26 策拉人工智能科技(云南)有限公司 一种人工智能会计神经网络深度学习训练方法
WO2022120244A1 (en) * 2020-12-03 2022-06-09 Novartis Ag Collaboration platform for enabling collaboration on data analysis across multiple disparate databases
US11403090B2 (en) 2020-12-08 2022-08-02 Alibaba Group Holding Limited Method and system for compiler optimization based on artificial intelligence
CN116888602A (zh) * 2020-12-17 2023-10-13 乌姆奈有限公司 可解释转导器变换器
US11839815B2 (en) 2020-12-23 2023-12-12 Advanced Micro Devices, Inc. Adaptive audio mixing
WO2022133865A1 (en) * 2020-12-24 2022-06-30 Huawei Technologies Co., Ltd. Methods and systems for artificial intelligence based architecture in wireless network
WO2022146072A1 (ko) * 2020-12-31 2022-07-07 주식회사 제이엘케이 Api를 이용한 컨테이너 기반의 automl 방법, 장치 및 프로그램
US11349714B1 (en) * 2021-01-07 2022-05-31 Kyndryl, Inc. Cognitive command line interface for configuring devices
CN112711621A (zh) * 2021-01-18 2021-04-27 湛江市前程网络有限公司 万物互联训练平台及控制方法与装置
US20220245657A1 (en) * 2021-01-30 2022-08-04 Walmart Apollo, Llc Methods and apparatus for generating target labels from multi-dimensional time series data
US11736585B2 (en) 2021-02-26 2023-08-22 Nutanix, Inc. Generic proxy endpoints using protocol tunnels including life cycle management and examples for distributed cloud native services and applications
US11244032B1 (en) * 2021-03-24 2022-02-08 Oraichain Pte. Ltd. System and method for the creation and the exchange of a copyright for each AI-generated multimedia via a blockchain
US11713059B2 (en) 2021-04-22 2023-08-01 SafeAI, Inc. Autonomous control of heavy equipment and vehicles using task hierarchies
US20210383026A1 (en) * 2021-06-12 2021-12-09 Intel Corporation Integrity verification of pre-compiled artificial intelligence model blobs using model signatures
US11794780B2 (en) * 2021-07-29 2023-10-24 GM Global Technology Operations LLC Reward function for vehicles
US11671480B2 (en) * 2021-07-30 2023-06-06 Cisco Technology, Inc. Network topology model generation and deployment for machine learning systems
USD992588S1 (en) * 2021-08-19 2023-07-18 Covidien Lp Operating room team display screen with a graphical user interface of a surgical robotic arm
CN113703775B (zh) * 2021-08-31 2023-11-28 上海阵量智能科技有限公司 一种编译方法、装置、设备及存储介质
US20230108560A1 (en) * 2021-10-04 2023-04-06 Changfeng C Wang Methods and Systems for Representation, Composition and Execution of Artificial Intelligence Centric Applications
US11947940B2 (en) * 2021-10-11 2024-04-02 International Business Machines Corporation Training data augmentation via program simplification
CN114116093B (zh) * 2021-11-10 2023-08-01 浙江省人民医院 一种放射科应用系统
US11816231B2 (en) 2021-11-22 2023-11-14 Bank Of America Corporation Using machine-learning models to determine graduated levels of access to secured data for remote devices
US11983172B2 (en) * 2021-12-07 2024-05-14 Ocient Holdings LLC Generation of a predictive model for selection of batch sizes in performing data format conversion
CN114500290A (zh) * 2021-12-21 2022-05-13 天翼云科技有限公司 云平台网关节点探测拓扑生成的方法、装置、设备及介质
CN114172908B (zh) * 2022-02-10 2022-08-05 浙江大学 一种端云协同处理方法及设备
US11847431B2 (en) * 2022-03-03 2023-12-19 International Business Machines Corporation Automatic container specification file generation for a codebase
EP4246323A1 (en) * 2022-03-17 2023-09-20 Tata Consultancy Services Limited Method and system to process asynchronous and distributed training tasks
CN114897150B (zh) * 2022-04-01 2023-04-07 中国科学技术大学苏州高等研究院 一种ai智能模组的可靠性设计方法
CN115002215B (zh) * 2022-04-11 2023-12-05 北京邮电大学 面向云上政企的资源分配模型训练方法以及资源分配方法
US20230367703A1 (en) * 2022-05-13 2023-11-16 Microsoft Technology Licensing, Llc Automated software testing with reinforcement learning
CN114707471B (zh) * 2022-06-06 2022-09-09 浙江大学 基于超参数评估图算法的人工智能课件制作方法及装置
WO2024020422A2 (en) * 2022-07-18 2024-01-25 Sun & Thunder, Llc Systems and methods for computing featuring synthetic computing operators and collaboration
CN116225722B (zh) * 2023-05-08 2023-07-14 中国空气动力研究与发展中心计算空气动力研究所 流场变量的通信方法、装置、终端设备及存储介质
CN116841523B (zh) * 2023-07-19 2023-12-22 上海海启科技有限公司 一种基于人工智能的在线编程方法及系统
CN116910186B (zh) * 2023-09-12 2023-11-21 南京信息工程大学 一种文本索引模型构建方法、索引方法、系统和终端

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102509039A (zh) * 2010-09-30 2012-06-20 微软公司 实时多引擎选择和组合
CN104520880A (zh) * 2012-03-14 2015-04-15 西格拉姆申德勒有限公司 创新专家系统ies及其ptr数据结构ptr-ds
CN104965978A (zh) * 2015-06-15 2015-10-07 湖南工学院 一种诊断失误概率计算方法和装置

Family Cites Families (110)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5581662A (en) 1989-12-29 1996-12-03 Ricoh Company, Ltd. Signal processing apparatus including plural aggregates
US5222196A (en) 1990-02-20 1993-06-22 International Business Machines Corporation Neural network shell for application programs
GB2293027A (en) 1994-09-07 1996-03-13 Sharp Kk Apparatus for and method of controlling a microwave oven
WO1997044741A1 (en) 1996-05-23 1997-11-27 The United States Of America, Represented By The Secretary, Department Of Health And Human Services, The National Institutes Of Health System and method for combining multiple learning agents to produce a prediction method
TW504632B (en) 1997-03-21 2002-10-01 Ibm Apparatus and method for optimizing the performance of computer tasks using intelligent agent with multiple program modules having varied degrees of domain knowledge
US6574565B1 (en) 1998-09-15 2003-06-03 Ronald R. Bush System and method for enhanced hydrocarbon recovery
US20020046157A1 (en) 1999-11-01 2002-04-18 Neal Solomon System, method and apparatus for demand-initiated intelligent negotiation agents in a distributed network
US6976012B1 (en) 2000-01-24 2005-12-13 Sony Corporation Method and apparatus of using a neural network to train a neural network
US20020049750A1 (en) * 2000-04-10 2002-04-25 Srinivas Venkatram Concept mapping based knowledge acquisition system and methods
US7801591B1 (en) 2000-05-30 2010-09-21 Vladimir Shusterman Digital healthcare information management
US7516441B2 (en) 2001-06-04 2009-04-07 Microsoft Corporation Method and system for program editing and debugging in a common language runtime environment
US20030004672A1 (en) 2001-06-29 2003-01-02 National Instruments Corporation Meta-routing tool for a measurement system
US20030041047A1 (en) * 2001-08-09 2003-02-27 International Business Machines Corporation Concept-based system for representing and processing multimedia objects with arbitrary constraints
US7024033B2 (en) * 2001-12-08 2006-04-04 Microsoft Corp. Method for boosting the performance of machine-learning classifiers
US7313550B2 (en) 2002-03-27 2007-12-25 Council Of Scientific & Industrial Research Performance of artificial neural network models in the presence of instrumental noise and measurement errors
US7958073B2 (en) 2002-12-23 2011-06-07 Discovery Machine, Inc. Software and methods for task method knowledge hierarchies
US7478385B2 (en) 2003-01-17 2009-01-13 National Instruments Corporation Installing software using programmatic component dependency analysis
US20050197991A1 (en) 2003-06-25 2005-09-08 Wray Robert E. Method and apparatus for providing rule-based, autonomous software agent with ontological information
US7472118B2 (en) * 2003-12-05 2008-12-30 Microsoft Corporation Systems and methods for improving information discovery
US20050132032A1 (en) 2003-12-15 2005-06-16 Bertrand Daniel W. Autonomous agent-based system management
US7382897B2 (en) 2004-04-27 2008-06-03 Microsoft Corporation Multi-image feature matching using multi-scale oriented patches
US8442839B2 (en) 2004-07-16 2013-05-14 The Penn State Research Foundation Agent-based collaborative recognition-primed decision-making
US20060166174A1 (en) 2005-01-21 2006-07-27 Rowe T P Predictive artificial intelligence and pedagogical agent modeling in the cognitive imprinting of knowledge and skill domains
US20060218107A1 (en) 2005-03-24 2006-09-28 The University Of Tennessee Research Foundation Method for controlling a product production process
US7536364B2 (en) 2005-04-28 2009-05-19 General Electric Company Method and system for performing model-based multi-objective asset optimization and decision-making
DE102005035903A1 (de) 2005-07-28 2007-02-08 X-Aitment Gmbh Generische KI-Architektur für ein Multiagenten-System
US7757234B2 (en) * 2005-10-24 2010-07-13 Sap Aktiengesellschaft Methods and software for a batch processing framework for wizard-based processes
US20070168328A1 (en) * 2006-01-05 2007-07-19 Utah State University Intelligent space tube optimizer
US9015145B2 (en) 2006-12-22 2015-04-21 Singapore Technologies Dynamics Ptd Ltd. Method and apparatus for automatic configuration of meta-heuristic algorithms in a problem solving environment
US9286033B2 (en) 2007-05-07 2016-03-15 Biglever Software, Inc. Model elements in software tools as automatons in a software customization system and method
US7936915B2 (en) 2007-05-29 2011-05-03 Microsoft Corporation Focal length estimation for panoramic stitching
US20090003699A1 (en) 2007-05-29 2009-01-01 Peter Dugan User guided object segmentation recognition
US8214308B2 (en) 2007-10-23 2012-07-03 Sas Institute Inc. Computer-implemented systems and methods for updating predictive models
US7983997B2 (en) 2007-11-02 2011-07-19 Florida Institute For Human And Machine Cognition, Inc. Interactive complex task teaching system that allows for natural language input, recognizes a user's intent, and automatically performs tasks in document object model (DOM) nodes
BRPI0722218A2 (pt) 2007-12-20 2014-07-01 Hewlett Packard Development Co Método para gerar um modelo representando pelo menos parte de um processo de negócio baseado em computador tendo um número de etapas funcionais, software em um meio lido por máquina e sistema para gerar um modelo representando pelo menos parte de um processo de negócio baseado em computador tendo um número de etapas funcionais
US8566787B2 (en) 2008-09-15 2013-10-22 Infosys Limited System and method for improving modularity of large legacy software systems
US8135655B2 (en) 2008-10-02 2012-03-13 Global Healthcare Exchange, Llc Dynamic intelligent objects
US20100094790A1 (en) 2008-10-10 2010-04-15 Micron Technology, Inc. Machine learning of dimensions using spectral intensity response of a reflectometer
CN101645083B (zh) 2009-01-16 2012-07-04 中国科学院声学研究所 一种基于概念符号的文本领域的获取系统及方法
US8577130B2 (en) 2009-03-16 2013-11-05 Siemens Medical Solutions Usa, Inc. Hierarchical deformable model for image segmentation
US8396286B1 (en) 2009-06-25 2013-03-12 Google Inc. Learning concepts for video annotation
US20110087627A1 (en) 2009-10-08 2011-04-14 General Electric Company Using neural network confidence to improve prediction accuracy
CN102141991A (zh) 2010-02-02 2011-08-03 钟巨航 用于web服务器的方法和系统
US8521664B1 (en) 2010-05-14 2013-08-27 Google Inc. Predictive analytical model matching
CN102075560A (zh) * 2010-11-19 2011-05-25 福建富士通信息软件有限公司 一种基于系统耦合的福富企业搜索引擎技术
US9519943B2 (en) * 2010-12-07 2016-12-13 Advanced Micro Devices, Inc. Priority-based command execution
US20120159090A1 (en) * 2010-12-16 2012-06-21 Microsoft Corporation Scalable multimedia computer system architecture with qos guarantees
US8504493B2 (en) 2011-02-15 2013-08-06 Sigma Space Corporation Self-organizing sequential memory pattern machine and reinforcement learning method
US8914780B2 (en) 2011-03-04 2014-12-16 Microsoft Corporation Incremental generation of managed assemblies
US8510237B2 (en) 2011-03-15 2013-08-13 Qualcomm Incorporated Machine learning method to identify independent tasks for parallel layout in web browsers
US20120310864A1 (en) * 2011-05-31 2012-12-06 Shayok Chakraborty Adaptive Batch Mode Active Learning for Evolving a Classifier
CN102222005B (zh) 2011-07-12 2013-10-30 铜陵玉成软件科技有限责任公司 面向业务模型的软件运行平台、运行方式及一种开发方法
CN104106276B (zh) 2011-10-12 2019-03-19 万事达移动交易方案公司 多层安全移动交易使能平台
EP2774111A2 (en) * 2011-11-04 2014-09-10 Furuno Electric Co., Ltd. Computer-aided training systems, methods and apparatuses
CN102591654B (zh) 2011-12-28 2015-09-23 方正国际软件有限公司 一种基于ssh架构的代码生成器及方法
EP2629247B1 (en) 2012-02-15 2014-01-08 Alcatel Lucent Method for mapping media components employing machine learning
US10055512B2 (en) 2012-07-16 2018-08-21 Omc2 Llc System and method for CNC machines and software
US9558454B2 (en) 2013-03-14 2017-01-31 Futurewei Technologies, Inc. System and method for model-based inventory management of a communications system
US9460088B1 (en) 2013-05-31 2016-10-04 Google Inc. Written-domain language modeling with decomposition
US9235653B2 (en) 2013-06-26 2016-01-12 Google Inc. Discovering entity actions for an entity graph
US10990894B2 (en) 2013-07-11 2021-04-27 Neura, Inc. Situation forecast mechanisms for internet of things integration platform
US20150039541A1 (en) 2013-07-31 2015-02-05 Kadenze, Inc. Feature Extraction and Machine Learning for Evaluation of Audio-Type, Media-Rich Coursework
US9390404B2 (en) 2013-11-08 2016-07-12 GroupSolver, Inc. Methods, apparatuses, and systems for generating solutions
JP5777178B2 (ja) 2013-11-27 2015-09-09 国立研究開発法人情報通信研究機構 統計的音響モデルの適応方法、統計的音響モデルの適応に適した音響モデルの学習方法、ディープ・ニューラル・ネットワークを構築するためのパラメータを記憶した記憶媒体、及び統計的音響モデルの適応を行なうためのコンピュータプログラム
US11042898B2 (en) 2014-03-18 2021-06-22 Staples, Inc. Clickstream purchase prediction using Hidden Markov Models
WO2015179632A1 (en) 2014-05-22 2015-11-26 Scheffler Lee J Methods and systems for neural and cognitive processing
EP3155758A4 (en) 2014-06-10 2018-04-11 Sightline Innovation Inc. System and method for network based application development and implementation
US10318882B2 (en) * 2014-09-11 2019-06-11 Amazon Technologies, Inc. Optimized training of linear machine learning models
SG10201406215YA (en) 2014-09-30 2016-04-28 Mentorica Technology Pte Ltd Systems and methods for automated data analysis and customer relationship management
US9524461B1 (en) 2014-09-30 2016-12-20 Steven T. Huynh Conceptual computation system using a hierarchical network of modules
US11935630B2 (en) 2014-12-29 2024-03-19 Cerner Innovation, Inc. System assisted data blending
US9710238B2 (en) 2015-03-26 2017-07-18 IfWizard Corporation Automatically optimizing analytics database server
US10679136B2 (en) 2015-04-23 2020-06-09 International Business Machines Corporation Decision processing and information sharing in distributed computing environment
US10452994B2 (en) 2015-06-04 2019-10-22 International Business Machines Corporation Versioning of trained models used to deliver cognitive services
EP3278213A4 (en) 2015-06-05 2019-01-30 C3 IoT, Inc. SYSTEMS, METHODS AND DEVICES FOR AN APPLICATION DEVELOPMENT PLATFORM OF AN INTERNET OF THE THINGS OF A COMPANY
US10397043B2 (en) 2015-07-15 2019-08-27 TUPL, Inc. Wireless carrier network performance analysis and troubleshooting
US10504030B2 (en) 2015-07-25 2019-12-10 The Boeing Company Systems, methods, and computer program products for generating a query specific Bayesian network
US20170061283A1 (en) 2015-08-26 2017-03-02 Applied Brain Research Inc. Methods and systems for performing reinforcement learning in hierarchical and temporally extended environments
US9443192B1 (en) 2015-08-30 2016-09-13 Jasmin Cosic Universal artificial intelligence engine for autonomous computing devices and software applications
CN105068661B (zh) 2015-09-07 2018-09-07 百度在线网络技术(北京)有限公司 基于人工智能的人机交互方法和系统
RU2632133C2 (ru) 2015-09-29 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ (варианты) и система (варианты) создания модели прогнозирования и определения точности модели прогнозирования
US10847266B1 (en) 2015-10-06 2020-11-24 Massachusetts Mutual Life Insurance Company Systems and methods for tracking goals
US20180240062A1 (en) 2015-10-28 2018-08-23 Fractal Industries, Inc. Collaborative algorithm development, deployment, and tuning platform
CN105404673B (zh) 2015-11-19 2018-11-09 清华大学 基于nvram的高效文件系统构建方法
US20170193361A1 (en) 2015-12-31 2017-07-06 Microsoft Technology Licensing, Llc Neural network training performance optimization framework
US10664766B2 (en) 2016-01-27 2020-05-26 Bonsai AI, Inc. Graphical user interface to an artificial intelligence engine utilized to generate one or more trained artificial intelligence models
US11841789B2 (en) 2016-01-27 2023-12-12 Microsoft Technology Licensing, Llc Visual aids for debugging
US11775850B2 (en) 2016-01-27 2023-10-03 Microsoft Technology Licensing, Llc Artificial intelligence engine having various algorithms to build different concepts contained within a same AI model
US20180357543A1 (en) 2016-01-27 2018-12-13 Bonsai AI, Inc. Artificial intelligence system configured to measure performance of artificial intelligence over time
US11836650B2 (en) 2016-01-27 2023-12-05 Microsoft Technology Licensing, Llc Artificial intelligence engine for mixing and enhancing features from one or more trained pre-existing machine-learning models
US11868896B2 (en) 2016-01-27 2024-01-09 Microsoft Technology Licensing, Llc Interface for working with simulations on premises
US11120299B2 (en) 2016-01-27 2021-09-14 Microsoft Technology Licensing, Llc Installation and operation of different processes of an AI engine adapted to different configurations of hardware located on-premises and in hybrid environments
US10789547B2 (en) 2016-03-14 2020-09-29 Business Objects Software Ltd. Predictive modeling optimization
EP3440428B1 (en) 2016-04-08 2022-06-01 Orbital Insight, Inc. Remote determination of quantity stored in containers in geographical region
US20170308800A1 (en) * 2016-04-26 2017-10-26 Smokescreen Intelligence, LLC Interchangeable Artificial Intelligence Perception Systems and Methods
US10860950B2 (en) 2016-08-31 2020-12-08 Sas Institute Inc. Automated computer-based model development, deployment, and management
US11188821B1 (en) 2016-09-15 2021-11-30 X Development Llc Control policies for collective robot learning
CN115338859A (zh) 2016-09-15 2022-11-15 谷歌有限责任公司 机器人操纵的深度强化学习
US11094029B2 (en) 2017-04-10 2021-08-17 Intel Corporation Abstraction layers for scalable distributed machine learning
CN107239315B (zh) 2017-04-11 2019-11-15 赛灵思公司 面向神经网络异构计算平台的编程模型
US20190095794A1 (en) 2017-09-26 2019-03-28 Intel Corporation Methods and apparatus for training a neural network
US10800040B1 (en) 2017-12-14 2020-10-13 Amazon Technologies, Inc. Simulation-real world feedback loop for learning robotic control policies
US11669914B2 (en) 2018-05-06 2023-06-06 Strong Force TX Portfolio 2018, LLC Adaptive intelligence and shared infrastructure lending transaction enablement platform responsive to crowd sourced information
US20210248514A1 (en) 2018-05-06 2021-08-12 Strong Force TX Portfolio 2018, LLC Artificial intelligence selection and configuration
US20200117427A1 (en) 2018-10-10 2020-04-16 International Business Machines Corporation Relevance of a source code change to compliance requirements
US11423454B2 (en) 2019-02-15 2022-08-23 Sateesh Kumar Addepalli Real-time customizable AI model collaboration and marketplace service over a trusted AI model network
US11748611B2 (en) 2019-02-18 2023-09-05 Sumit Sanyal Method and apparatus for reinforcement learning training sessions with consideration of resource costing and resource utilization
US11126855B2 (en) 2019-08-08 2021-09-21 Robert Bosch Gmbh Artificial-intelligence powered ground truth generation for object detection and tracking on image sequences
KR102264571B1 (ko) 2020-10-30 2021-06-15 주식회사 애자일소다 계층 구조를 갖는 의사결정 에이전트
WO2022101515A1 (en) 2020-11-16 2022-05-19 UMNAI Limited Method for an explainable autoencoder and an explainable generative adversarial network

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102509039A (zh) * 2010-09-30 2012-06-20 微软公司 实时多引擎选择和组合
CN104520880A (zh) * 2012-03-14 2015-04-15 西格拉姆申德勒有限公司 创新专家系统ies及其ptr数据结构ptr-ds
CN104965978A (zh) * 2015-06-15 2015-10-07 湖南工学院 一种诊断失误概率计算方法和装置

Also Published As

Publication number Publication date
US11120365B2 (en) 2021-09-14
US20170213155A1 (en) 2017-07-27
US10733531B2 (en) 2020-08-04
EP3408739A4 (en) 2019-10-02
US20170213128A1 (en) 2017-07-27
EP3408739A1 (en) 2018-12-05
US20180293517A1 (en) 2018-10-11
US20180293498A1 (en) 2018-10-11
CN109564505A (zh) 2019-04-02
CN110168495A (zh) 2019-08-23
EP3408750A4 (en) 2019-09-25
US11842172B2 (en) 2023-12-12
US11762635B2 (en) 2023-09-19
US20170213154A1 (en) 2017-07-27
US10803401B2 (en) 2020-10-13
CN109496320A (zh) 2019-03-19
EP3408750B1 (en) 2022-11-23
US20170213156A1 (en) 2017-07-27
US10586173B2 (en) 2020-03-10
US20170213132A1 (en) 2017-07-27
US10664766B2 (en) 2020-05-26
US20170213126A1 (en) 2017-07-27
EP3408800A1 (en) 2018-12-05
WO2017132590A8 (en) 2019-07-25
US11164109B2 (en) 2021-11-02
US20170213131A1 (en) 2017-07-27
CN110168495B (zh) 2023-11-10
WO2017132572A1 (en) 2017-08-03
EP3408750A1 (en) 2018-12-05
WO2017132590A1 (en) 2017-08-03
WO2017132584A1 (en) 2017-08-03
US10733532B2 (en) 2020-08-04
US20180293463A1 (en) 2018-10-11
EP3408800A4 (en) 2019-09-18
US20200250583A1 (en) 2020-08-06
US11100423B2 (en) 2021-08-24
US10671938B2 (en) 2020-06-02
CN109564505B (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
CN109496320B (zh) 具有架构师模块的人工智能引擎
US11868896B2 (en) Interface for working with simulations on premises
Muniasamy et al. Deep learning: The impact on future eLearning
US11841789B2 (en) Visual aids for debugging
US11120299B2 (en) Installation and operation of different processes of an AI engine adapted to different configurations of hardware located on-premises and in hybrid environments
US11836650B2 (en) Artificial intelligence engine for mixing and enhancing features from one or more trained pre-existing machine-learning models
US20180357543A1 (en) Artificial intelligence system configured to measure performance of artificial intelligence over time
US11775850B2 (en) Artificial intelligence engine having various algorithms to build different concepts contained within a same AI model
Dounas et al. Runtime requirements monitoring framework for adaptive e-learning systems
Antony Deep Learning: The impact on e-learning during COVID-19
Feng et al. How Far Are We From AGI
Yi et al. A Conceptual Framework for Combination of Educational Data Mining and Software Cybernetics
CN115293272A (zh) 内容审核模型的训练方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200720

Address after: Washington State

Applicant after: MICROSOFT TECHNOLOGY LICENSING, LLC

Address before: California, USA

Applicant before: Bonsai AI, Inc.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant