CN115202854A - 数据控制方法、数据处理方法及相关设备 - Google Patents

数据控制方法、数据处理方法及相关设备 Download PDF

Info

Publication number
CN115202854A
CN115202854A CN202110379055.8A CN202110379055A CN115202854A CN 115202854 A CN115202854 A CN 115202854A CN 202110379055 A CN202110379055 A CN 202110379055A CN 115202854 A CN115202854 A CN 115202854A
Authority
CN
China
Prior art keywords
data
processed
target
accelerator
accelerator devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110379055.8A
Other languages
English (en)
Inventor
陈文瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Futaihua Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Futaihua Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Futaihua Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Futaihua Industry Shenzhen Co Ltd
Priority to CN202110379055.8A priority Critical patent/CN115202854A/zh
Priority to US17/712,154 priority patent/US20220326996A1/en
Publication of CN115202854A publication Critical patent/CN115202854A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5066—Algorithms for mapping a plurality of inter-dependent sub-tasks onto a plurality of physical CPUs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/50—Indexing scheme relating to G06F9/50
    • G06F2209/5017—Task decomposition

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Combined Controls Of Internal Combustion Engines (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及数据处理技术领域，提供一种数据控制方法、数据处理方法、电子设备及存储介质，所述数据控制方法运行于引擎设备中，所述方法包括：获取待处理数据；接收多个加速器设备上报的运行情况；根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；将每个子待处理数据发送至对应的目标加速器设备进行处理。本申请提供的方法提高了数据处理的效率。

Description

数据控制方法、数据处理方法及相关设备
技术领域
本申请涉及数据处理技术领域，尤其涉及一种数据控制方法、数据处理方法、电子设备及存储介质。
背景技术
在人工智能领域，尤其是人工神经网络、机器视觉和机器学习等领域，往往采用加速器设备来进行加速。加速器设备是一类专门的硬件加速器设备或计算机系统旨在加速人工智能的应用，如人工智能(AI)加速器设备。目前在人工智能应用中使用入门级的网络拓扑时，如ResNet和MobileNet等网络拓扑，加速器设备可以很好地进行加速，但是面对更复杂的网络拓扑时，加速器设备往往不能满足加速的需求，加速效率较低。
发明内容
有鉴于此，本申请的主要目的在于提供一种数据控制方法、数据处理方法、电子设备及存储介质，旨在解决如何提高数据处理效率的技术问题。
本申请的第一方面提供一种数据控制方法，运行于引擎设备中，所述数据控制方法包括：
获取待处理数据；
接收多个加速器设备上报的运行情况；
根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；
根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；
将每个子待处理数据发送至对应的目标加速器设备进行处理。
根据本申请的一个可选的实施例，所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备包括：
根据所述运行情况计算每个加速器设备的负载量；
基于所述负载量，在所述多个加速器设备中确定多个待选加速器设备；
根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备。
根据本申请的一个可选的实施例，所述根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备包括：
基于所述待处理数据，计算加速量；
根据所述加速量在所述多个待选加速器设备中，确定多个目标加速器设备。
根据本申请的一个可选的实施例，所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到处理数据包括：
获取每个目标加速器设备的预设负载阈值；
根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到目标加速量；
根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据。
根据本申请的一个可选的实施例，所述根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据包括：
获取所述待处理数据的数据标签；
根据所述目标加速量和所述数据标签对所述待处理数据进行切分，得到多个子待处理数据。
根据本申请的一个可选的实施例，所述方法还包括：
当根据所述待处理数据和所述运行情况在所述多个加速器设备中无法确定多个目标加速器设备时，在所述引擎设备中对所述待处理数据进行处理。
根据本申请的一个可选的实施例，所述将每个子待处理数据发送至对应的目标加速器设备进行处理之后，所述方法还包括：
获取所述多个目标加速器设备对所述多个子待处理数据的处理结果；
根据所述处理结果生成所述待处理数据的处理报告。
本申请的第二方面提供一种数据处理方法，运行于加速器设备中，所述数据控制方法包括：
响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求；
当不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备；
当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备，所述引擎设备用于执行如上所述的数据控制方法。
本申请的第三方面提供一种电子设备，所述电子设备包括：
存储器，用于存储至少一个指令；
处理器，用于执行所述至少一个指令时实现如上所述的数据控制方法或如上所述的数据处理方法。
本申请的第四方面提供一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一个指令，所述至少一个指令被处理器执行时实现如上所述的数据控制方法或如上所述的数据处理方法。
由以上技术方案可以看出，本申请通过获取待处理数据和多个加速器设备的运行情况，并根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；接着根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；最后将每个子待处理数据发送至对应的目标加速器设备进行处理，通过根据多个目标加速器设备的运行情况对所述待处理数据进行切分，确定每个目标加速器设备能处理完对应的子待处理数据，提高加速的效率。
附图说明
图1为本申请实施例的一种数据控制方法的示意流程图；
图2为本申请实施例的待处理数据切分得到多个子待处理数据的场景示意图；
图3为本申请实施例的一种数据处理方法的示意流程图；
图4为本申请实施例提供的一种电子设备的结构示意性框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
附图中所示的示意流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
本申请实施例提供一种数据控制方法、数据处理方法、电子设备及计算机可读存储介质。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
请参阅图1，图1是本申请实施例提供的一种数据控制方法的示意流程图。
如图1所示，所述数据控制方法具体包括步骤S11至S15，根据不同的需求，该示意流程图中步骤的顺序可以改变，某些可以省略。该数据控制方法运行于引擎设备中，所述引擎设备包括推论引擎。
步骤S11、获取待处理数据。
获取待处理数据，所述待处理数据可以包括影像数据和/或文档数据。
在一些实施方式中，所述引擎设备可以和目标装置建立通信，以接受所述目标装置发送的资料数据，对所述资料数据进行整合得到待处理数据。所述引擎设备可以和一个或多个目标装置建立通信。
示例性的，所述对所述资料数据进行整合得到待处理数据包括：根据所述资料数据的重要度对所述资料数据进行整合，得到待处理数据。例如可根据所述资料数据的数据标签确定所述资料数据的重要度，也可根据所述资料数据的执行时间确定所述资料数据的重要度，如执行时间越早，对应的重要度也越高。
可根据所述资料数据的重要度高低将所述资料数据进行排序，根据排序顺序对所述资料数据进行整合，得到待处理数据。所述待处理数据中重要度高的资料数据在前，将重要度低的资料数据在后，从而加快处理速度。
步骤S12、接收多个加速器设备上报的运行情况。
示例性的，所述引擎设备获取已进行设备认证的多个加速器设备的运行情况，进一步保障加速的安全性。所述设备认证包括加速器设备在所述引擎设备上进行注册。
步骤S13、根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备。
根据所述待处理数据的数量和所述多个加速器设备的运行情况在所述多个加速器设备中确定多个目标加速器设备。
在一些实施方式中，所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备包括：
根据所述运行情况计算每个加速器设备的负载量；
基于所述负载量，在所述多个加速器设备中确定多个待选加速器设备；
根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备。
示例性的，根据所述运行情况计算每个加速器设备的负载量；判断所述负载量是否小于预设负载阈值，将小于预设负载阈值的加速器设备确定为待选加速器设备。
在一些实施方式中，所述根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备包括：
基于所述待处理数据，计算加速量；
根据所述加速量在所述多个待选加速器设备中，确定多个目标加速器设备。
示例性的，根据加速量的多少在所述多个待选加速器设备中确定能处理完所述待处理数据的加速器设备，即确定多个目标加速器设备。
步骤S14、根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据。
示例性的，根据每个目标加速器设备的运行情况确定每个目标加速器设备对应的加速量，根据所述加速量对所述待处理数据进行切分，得到多个子待处理数据。
示例性的，如图2所示，根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到五个子待处理数据，即task1、task2、task3、task4和task5。
在一些实施方式中，所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到处理数据包括：
获取每个目标加速器设备的预设负载阈值；
根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到目标加速量；
根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据。
示例性的，可预先设置每个目标加速器设备的负载阈值，在所述负载阈值下，所述目标加速器设备可以正常进行加速。根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到每个目标加速器设备对应的目标加速量。根据所述多个目标加速量的大小对所述待处理数据进行切分，得到多个子待处理数据。
在一些实施方式中，所述根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据包括：
获取所述待处理数据的数据标签；
根据所述目标加速量和所述数据标签对所述待处理数据进行切分，得到多个子待处理数据。
示例性的，所述待处理数据可包括多个数据标签，不同的数据标签可用于标识不同的数据内容。根据所述目标加速量和所述数据标签对所述待处理数据进行切分，得到多个子待处理数据，使得同一数据标签的数据在一个子待处理数据中。
步骤S15、将每个子待处理数据发送至对应的目标加速器设备进行处理。
示例性的，根据所述子待处理数据的加速量确定所述子待处理数据对应的目标加速器设备后，将所述子待处理数据发送至对应的目标加速器设备进行处理。
在一些实施方式中，所述将每个子待处理数据发送至对应的目标加速器设备进行处理之后，所述方法还包括：
获取所述多个目标加速器设备对所述多个子待处理数据的处理结果；
根据所述处理结果生成所述待处理数据的处理报告。
示例性的，获取每个目标加速器设备对对应的子待处理数据的处理结果，得到多个处理结果，按照预设的规则根据所述多个处理结果生成所述待处理数据的处理报告。
在一些实施方式中，所述方法还包括：
当根据所述待处理数据和所述运行情况在所述多个加速器设备中无法确定多个目标加速器设备时，在所述引擎设备中对所述待处理数据进行处理。
当在所述多个加速器设备中无法确定多个目标加速器设备时，直接在所述引擎设备中对所述待处理数据进行处理，从而保证所述待处理数据被正常加速，提高加速效率。示例性的，当在所述多个加速器设备中无法确定多个目标加速器设备时，可按照预设规则生产提示信息。
上述实施例提供的数据控制方法，通过获取待处理数据和多个加速器设备的运行情况，并根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；接着根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；最后将每个子待处理数据发送至对应的目标加速器设备进行处理，通过根据多个目标加速器设备的运行情况对所述待处理数据进行切分，确定每个目标加速器设备能处理完对应的子待处理数据，提高加速的效率。
请参阅图3，图3是本申请实施例提供的一种数据处理方法的示意流程图，所述数据处理方法具体包括步骤S31至S33，根据不同的需求，该示意流程图中步骤的顺序可以改变，某些可以省略。该数据处理方法应用于加速器设备，所述加速器设备包括AI加速器设备。
步骤S31、响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求。
示例性的，响应于引擎设备发送的数据处理指令，获取所述数据处理指令对应的数据，根据所述数据判断是否满足所述数据处理指令对应的计算要求。例如，根据所述数据和所述加速器设备的负载情况判断是否满足所述数据处理指令对应的计算要求。
步骤S32、当不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备。
示例性的，当不满足所述计划要求时，上报所述加速器设备的运行情况给所述引擎设备，以使所述引擎设备重新确定执行所述数据的加速器设备。
步骤S33、当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备。
其中，所述引擎设备用于执行如上所述的数据控制方法。
当满足所述计算要求时，对所述数据处理指令对应的数据进行加速处理，并将加速结果发送至所述引擎设备。
上述实施例提供的数据处理方法，通过响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求；当不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备；当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备，保证了所述数据处理指令对应的数据能被正常加速，提高了加速效率。
请参阅图4，图4为本申请实施例提供的一种电子设备的结构示意性框图。该电子设备40可以为引擎设备或加速器设备。
其中，所述引擎设备可以为推论引擎。该加速器设备可以是AI加速器设备等电子设备。
电子设备40所处的网络包括但不限于互联网、广域网、城域网、局域网、虚拟专用网络(Virtual Private Network，VPN)等。
如图4所示，该电子设备40包括通过通信接口401、存储器402、处理器403、输入/输出(Input/Output，I/O)接口404及总线405。处理器403通过总线405分别耦合于通信接口401、存储器402、I/O接口404。
通信接口401用于进行通信。通信接口401可以为电子设备40上已有的接口，也可以为在电子设备40上新建的接口。通信接口401可以为网络接口，例如无线区域网络(Wireless Local Area Network，WLAN)接口，蜂窝网络通信接口或其组合等。
存储器402可用于可存储操作系统和计算机程序。例如，存储器402存储了上述的数据控制方法对应的程序，或存储器402存储了上述的数据处理方法对应的程序。
应当理解的是，存储器402可包括存储程序区和存储数据区。其中，存储程序区可用于存储操作系统、至少一个方法所需的应用程序(比如数据控制方法、数据处理方法等)等；存储数据区可存储根据电子装置40的使用所创建的数据(比如子待处理数据等)等。此外，存储器402可以包括易失性存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他存储器件。
处理器403提供计算和控制能力，支撑整个计算机设备的运行。例如，处理器403用于执行存储器402内存储的计算机程序，以实现上述的数据控制方法中的步骤或上述的数据处理方法中的步骤。
应当理解的是，处理器403是中央处理单元(Central Processing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
I/O接口404用于提供用户输入或输出的通道，例如I/O接口404可用于连接各种输入输出设备(鼠标、键盘或3D触控装置等)、显示器，使得用户可以录入信息，或者使信息可视化。
总线405至少用于提供电子设备40中的通信接口401、存储器402、处理器403、I/O接口404之间相互通信的通道。
本领域技术人员可以理解，图4中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，在一个实施例中，处理器403执行存储器402内存储的计算机程序，以实现数据控制方法时，实现以下步骤：
获取待处理数据；
接收多个加速器设备上报的运行情况；
根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；
根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；
将每个子待处理数据发送至对应的目标加速器设备进行处理。
在一些实施方式中，处理器403执行所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备时，具体用于实现：
根据所述运行情况计算每个加速器设备的负载量；
基于所述负载量，在所述多个加速器设备中确定多个待选加速器设备；
根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备。
在一些实施方式中，处理器403执行所述根据所述待处理数据在所述多个待选加速器设备中，确定多个目标加速器设备时，具体用于实现：
基于所述待处理数据，计算加速量；
根据所述加速量在所述多个待选加速器设备中，确定多个目标加速器设备。
在一些实施方式中，处理器403执行所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到处理数据时，具体用于实现：
获取每个目标加速器设备的预设负载阈值；
根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到目标加速量；
根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据。
在一些实施方式中，处理器403执行所述根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据时，具体用于实现：
获取所述待处理数据的数据标签；
根据所述目标加速量和所述数据标签对所述待处理数据进行切分，得到多个子待处理数据。
在一些实施方式中，处理器403执行所述将每个子待处理数据发送至对应的目标加速器设备进行处理之后，所述方法时，具体用于实现：
获取所述多个目标加速器设备对所述多个子待处理数据的处理结果；
根据所述处理结果生成所述待处理数据的处理报告。
在一些实施方式中，处理器403执行存储在存储器中的计算机程序，以实现所述数据控制方法时，还用于实现：
当根据所述待处理数据和所述运行情况在所述多个加速器设备中无法确定多个目标加速器设备时，在所述引擎设备中对所述待处理数据进行处理。
具体地，处理器403对上述指令的具体实现方法可参考前述数据控制方法实施例中相关步骤的描述，在此不赘述。
其中，在一个实施例中，处理器403执行存储器402内存储的计算机程序，以实现数据处理方法时，实现以下步骤：
响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求；
当不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备；
当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备。
其中，所述引擎设备用于执行如上所述的数据控制方法。
具体地，处理器403对上述指令的具体实现方法可参考前述数据处理方法实施例中相关步骤的描述，在此不赘述。
本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序中包括程序指令，所述程序指令被执行时所实现的方法可参照本申请数据控制方法的各个实施例或本申请数据处理方法的各个实施例。
其中，所述计算机可读存储介质可以是前述实施例所述的电子设备的内部存储单元，例如所述电子设备的硬盘或内存。所述计算机可读存储介质也可以是所述电子设备的外部存储设备，例如所述电子设备上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。
进一步地，所述计算机可读存储介质可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据电子设备的使用所创建的数据等。
前述实施例提供的电子设备及计算机可读存储介质，可以通过获取待处理数据和多个加速器设备的运行情况，并根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；接着根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；最后将每个子待处理数据发送至对应的目标加速器设备进行处理，通过根据多个目标加速器设备的运行情况对所述待处理数据进行切分，确定每个目标加速器设备能处理完对应的子待处理数据，提高加速的效率。
前述实施例提供的电子设备及计算机可读存储介质，还可以通过响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求；当不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备；当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备，保证了所述数据处理指令对应的数据能被正常加速，提高了加速效率。
还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种数据控制方法，运行于引擎设备中，其特征在于，所述数据控制方法包括：
获取待处理数据；
接收多个加速器设备上报的运行情况；
根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备；
根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据；
将每个子待处理数据发送至对应的目标加速器设备进行处理。
2.根据权利要求1所述的数据控制方法，其特征在于，所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备包括：
根据所述运行情况计算每个加速器设备的负载量；
基于所述负载量，在所述多个加速器设备中确定多个待选加速器设备；
根据所述待处理数据在所述多个待选加速器设备中确定多个目标加速器设备。
3.根据权利要求2所述的数据控制方法，其特征在于，所述根据所述待处理数据在所述多个待选加速器设备中确定多个目标加速器设备包括：
基于所述待处理数据计算加速量；
根据所述加速量在所述多个待选加速器设备中确定多个目标加速器设备。
4.根据权利要求1所述的数据控制方法，其特征在于，所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分，得到多个子待处理数据包括：
获取每个目标加速器设备的预设负载阈值；
根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到目标加速量；
根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据。
5.根据权利要求4所述的数据控制方法，其特征在于，所述根据所述目标加速量对所述待处理数据进行切分，得到多个子待处理数据包括：
获取所述待处理数据的数据标签；
根据所述目标加速量和所述数据标签对所述待处理数据进行切分，得到多个子待处理数据。
6.根据权利要求1所述的数据控制方法，其特征在于，所述方法还包括：
当根据所述待处理数据和所述运行情况在所述多个加速器设备中无法确定多个目标加速器设备时，在所述引擎设备中对所述待处理数据进行处理。
7.根据权利要求1至6中任意一项所述的数据控制方法，其特征在于，所述将每个子待处理数据发送至对应的目标加速器设备进行处理之后，所述方法还包括：
获取每个所述目标加速器设备对所述对应的子待处理数据的处理结果；
根据多个所述处理结果生成所述待处理数据的处理报告。
8.一种数据处理方法，运行于加速器设备中，其特征在于，所述数据控制方法包括：
响应于引擎设备发送的数据处理指令，判断是否满足所述数据处理指令对应的计算要求；
当确定不满足所述计算要求时，上报所述加速器设备的运行情况给所述引擎设备；
当满足所述计算要求时，对所述数据处理指令对应的数据进行加速，并将加速结果发送至所述引擎设备，使得所述引擎设备执行如权利要求1至7中任意一项所述的数据控制方法。
9.一种电子设备，其特征在于，所述电子设备包括存储器和处理器；
所述存储器用于存储至少一个指令；
所述处理器用于执行所述至少一个指令时实现如权利要求1至7中任意一项所述的数据控制方法或如权利要求8所述的数据处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一个指令，所述至少一个指令被处理器执行时实现如权利要求1至7中任意一项所述的数据控制方法或如权利要求8所述的数据处理方法。
CN202110379055.8A 2021-04-08 2021-04-08 数据控制方法、数据处理方法及相关设备 Pending CN115202854A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110379055.8A CN115202854A (zh) 2021-04-08 2021-04-08 数据控制方法、数据处理方法及相关设备
US17/712,154 US20220326996A1 (en) 2021-04-08 2022-04-03 Data processing method, electronic device, and computer storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110379055.8A CN115202854A (zh) 2021-04-08 2021-04-08 数据控制方法、数据处理方法及相关设备

Publications (1)

Publication Number Publication Date
CN115202854A true CN115202854A (zh) 2022-10-18

Family

ID=83509313

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110379055.8A Pending CN115202854A (zh) 2021-04-08 2021-04-08 数据控制方法、数据处理方法及相关设备

Country Status (2)

Country Link
US (1) US20220326996A1 (zh)
CN (1) CN115202854A (zh)

Also Published As

Publication number Publication date
US20220326996A1 (en) 2022-10-13

Similar Documents

Publication Publication Date Title
CN112232293B (zh) 图像处理模型训练、图像处理方法及相关设备
CN108229419B (zh) 用于聚类图像的方法和装置
CN112070416B (zh) 基于ai的rpa流程的生成方法、装置、设备及介质
CN111860522B (zh) 身份证图片处理方法、装置、终端及存储介质
CN114327844A (zh) 内存分配方法、相关设备及计算机可读存储介质
CN109116129A (zh) 终端检测方法、检测设备、系统及存储介质
CN112214402B (zh) 一种代码验证算法的选择方法、装置及存储介质
CN112183899A (zh) 确定安全度预测模型的方法、装置、设备和存储介质
CN111796937A (zh) 基于内存的资源分配方法、计算机设备及存储介质
CN109062683B (zh) 主机资源分配的方法、装置及计算机可读存储介质
Kucharska et al. Extended learning method for designation of co-operation
US20210406568A1 (en) Utilizing multiple stacked machine learning models to detect deepfake content
CN114359564A (zh) 图像识别方法、装置、计算机设备、存储介质和产品
CN111667018B (zh) 一种对象聚类的方法、装置、计算机可读介质及电子设备
CN113126980A (zh) 页面生成方法、装置及电子设备
CN115795097A (zh) 基于xml逻辑规则的数据处理方法及装置
CN115202854A (zh) 数据控制方法、数据处理方法及相关设备
CN114968719A (zh) 线程运行状态分类方法、装置、计算机设备及存储介质
CN112070487B (zh) 基于ai的rpa流程的生成方法、装置、设备及介质
CN114092268A (zh) 用户社群检测方法、装置、计算机设备及存储介质
CN111563250A (zh) 权限管理方法、装置、计算机设备和存储介质
CN112685007A (zh) 结合大数据画像的信息云计算推送方法及数字内容服务器
TWI777481B (zh) 數據控制方法、數據處理方法、電子設備及儲存介質
CN112561412A (zh) 目标对象标识的确定方法、装置、服务器及存储介质
Kuroki et al. BSED: Baseline Shapley-Based Explainable Detector

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination