WO2021148014A1 - 一种任务处理方法、装置及电子设备 - Google Patents
一种任务处理方法、装置及电子设备 Download PDFInfo
- Publication number
- WO2021148014A1 WO2021148014A1 PCT/CN2021/073405 CN2021073405W WO2021148014A1 WO 2021148014 A1 WO2021148014 A1 WO 2021148014A1 CN 2021073405 W CN2021073405 W CN 2021073405W WO 2021148014 A1 WO2021148014 A1 WO 2021148014A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- node
- target
- network structure
- layer network
- algorithm
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5041—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the time relationship between creation and deployment of a service
- H04L41/5054—Automatic deployment of services triggered by the service manager, e.g. service implementation by automatic configuration of network components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
- H04L43/106—Active monitoring, e.g. heartbeat, ping or trace-route using time related information in packets, e.g. by adding timestamps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/02—Topology update or discovery
- H04L45/04—Interdomain routing, e.g. hierarchical routing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/12—Discovery or management of network topologies
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/508—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
- H04L41/509—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to media content delivery, e.g. audio, video or TV
Definitions
- a second acquisition module configured to acquire at least one node of the first type that can provide the target data and at least one node of the second type that can execute the target algorithm in the network topology;
- embodiments of the present invention also provide a computer-readable storage medium on which the above-mentioned computer program is stored.
- the task processing method provided by the embodiment of the present invention obtains the target data and target algorithm required by the target task to be executed, and determines at least one node of the first type that can provide target data and at least one node that can execute the target algorithm in the network topology.
- a second-type node to select a first-type node and a second-type node, and control the selected second-type node to use the target algorithm to process the target data provided by the selected first-type node to achieve the target Execution of tasks. It can be seen that, in the embodiment of the present invention, data and algorithms are separately distributed to the network, instead of uniformly storing data on nodes that need to perform the target task, and nodes that need to perform the target task no longer execute the target algorithm by themselves.
- FIG. 6 is the third schematic diagram of the distribution of nodes involved in the addressing process in the network topology structure in the embodiment of the present invention.
- FIG. 10 is a structural block diagram of another task processing apparatus provided by an embodiment of the present invention.
- Fig. 12 schematically shows a storage unit for holding or carrying program codes for implementing the method according to the present application.
- a chassis, the plate frame is located in the chassis
- the computing device includes a storage unit and a computing unit, and both the storage unit and the computing unit are provided with a virtual management unit circuit for communication and management, and are connected to an external physical communication interface, so that the storage unit and the computing unit are connected Parallel, parallel between different computing units. It can be seen from this that the computing device in the embodiment of the present invention no longer distinguishes between computing and network, but melts computing and storage into the network, and sets the computing unit to have a unified interface for external communication to parallel computing and storage, thereby It can increase the data processing speed and meet the explosive demand of massive data and massive computing power triggered by artificial intelligence and blockchain to a certain extent.
- the first type, small-grain resources refers to the resources with complete functions inside the chip, and the location is marked with the address segment S (Silicon).
- the target data includes at least one item of data, for example, it may include two items of data A and B.
- the target algorithm includes at least one algorithm, for example, may include C and D algorithms.
- the target data corresponds to the target algorithm, that is, the target data is the data required to execute the target algorithm.
- the target task to be executed is to execute C algorithm and D algorithm successively on A and B data, then A and B data correspond to C and D algorithms.
- the time required for the nodes that provide a group of the target algorithm to execute the target algorithm may be the sum or average of the time required to execute the algorithms provided by each in the group.
- a set of target algorithms is provided by one node, then, in this case:
- a set of target algorithms may be provided by multiple nodes. Then, in this case:
- the fourth node after the fourth node receives the first relevant parameter sent by the third node, it broadcasts the first relevant parameter in the second layer network structure, and the fourth node is removed from the second layer network structure. After receiving the first relevant parameter, other nodes other than the node will judge whether they can provide the target content, and if so, they will feed back their own address to the fourth node through a connection to the fourth node.
- the fourth node can be further forwarded to the third node, and the third node can be further forwarded to the first node through the communication link from the third node to the first node.
- the second control node after the second control node receives the first relevant parameter, it can decide which or which of the second-layer network structures are based on the capability information of the nodes in the second-layer network structure.
- the node can provide the target content, and when there is a node that can provide the target content, the address of the node is fed back to the first control node of the first-layer network structure, so that the first control node can send to the first node.
- the 101 node uses the tool issued by the 301 to preprocess the requested video to generate the background video, which is encoded and compressed and sent to the 201 node; the 102 node provides AR materials to the 201 node according to the required AR action and time point; 103 node According to the required 3D content and time point, provide 3D content to node 201; node 201 receives relevant data provided by node 101, node 102, and video node 103 for video synthesis, transcodes, synthesizes a new video, and forwards it to node 301 .
- the third node forwards the second related parameter to the fourth node of the second layer network structure, so that the fourth node passes through the second layer A path from the fourth node to the second node in the network structure forwards the second related parameter to the second node.
- the first node sends the second related parameter to the second node through a path from the first node to the second node in the first-layer network structure.
- the first node of the first-layer network structure sending the second relevant parameter of the target content to the second node according to the address of the second node includes:
- the third control module 803 is configured to control the first layer network structure to receive the address of the second node sent by the second layer network structure, where the address of the second node is the second layer network The structure is obtained after addressing the second node in the second layer network structure according to the first related parameter;
- the first transmission module 804 is configured to control the first node of the first layer network structure to send the second related parameters of the target content to the second node according to the address of the second node.
- the task processing apparatus 800 further includes:
- the combination corresponding to the smallest value in the first ratio of the combination is selected as the target combination, wherein the first ratio is the node that provides a set of the target data in the combination to the node that provides a set of the target.
- the first data packet includes a video stream or an audio stream of a preset duration.
- the first control node of the first layer network structure receives the address of the second node sent by the second control node of the second layer network structure, wherein the second node sent by the second control node
- the address of is determined by the second control node according to the first related parameter and the capability information of the node in the second-layer network structure
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Cardiology (AREA)
- Health & Medical Sciences (AREA)
- Environmental & Geological Engineering (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明实施例提供了一种任务处理方法、装置及电子设备。方法包括: 获取待执行的目标任务所需的目标数据和目标算法; 获取网络拓扑结构中,能够提供目标数据的至少一个第一类节点,以及能够执行目标算法的至少一个第二类节点; 从至少一个第一类节点中选择提供一组目标数据的节点作为第一目标节点,并从至少一个第二类节点中选择提供一组目标算法的节点作为第二目标节点; 控制第二目标节点采用目标算法,对第一目标节点中的目标数据进行处理。因此,本发明的方案,能够在一定程度上解决需要完成的任务涉及大量数据时,要求执行该项任务的节点具备较强能力,从而增加整个网络拓扑结构的设计成本的问题。
Description
本申请要求在2020年1月23日提交中国专利局、申请号为202010076228.4、发明名称为“一种任务处理方法、装置及电子设备”的中国专利申请的优先权,以及在2020年1月23日提交中国专利局、申请号为202010076231.6、发明名称为“一种数据传输方法、装置及电子设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
本发明涉及通信技术领域,尤其涉及一种任务处理方法、装置及电子设备。
随着互联网的快速发展,在互联网中的数据越来越多,目前在网络架构中,对数据采用分布式存储,即将数据存储到不同节点中。其中,在某一个目标节点需要执行某项任务时,会在网络中寻找可以提供该项任务所需的数据的节点,然后从这些节点中读取相关数据,进而由目标节点去对读取的数据进行一些算法处理。
由此可知,现有技术中,在目标节点收集完执行任务所需的全部数据后,才对这些数据进行处理。其中,当完成该项任务需要大量数据和复杂算法时,则要求目标节点具备较强的能力,扩展到整个网络拓扑结构中,则使得构建网络拓扑结构的成本增加。
发明内容
本发明提供一种任务处理方法、装置及电子设备,以便在一定程度上解决需要完成的任务涉及大量数据时,要求执行该项任务的节点具备较强能力,从而增加整个网络拓扑结构的设计成本的问题。
第一方面,本发明的实施例提供了一种任务处理方法,应用于网络拓扑结构,所述网络拓扑结构包括多个节点;所述任务处理方法包括:
获取待执行的目标任务所需的目标数据和目标算法;
获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;
从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法 的节点作为第二目标节点;
控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
第二方面,本发明的实施例还提供了一种任务处理装置,应用于网络拓扑结构,所述网络拓扑结构包括多个节点;所述任务处理装置包括:
第一获取模块,用于获取待执行的目标任务所需的目标数据和目标算法;
第二获取模块,用于获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;
选择模块,用于从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点;
控制模块,用于控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
第三方面,本发明的实施例还提供了一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述所述的任务处理方法的步骤。
第四方面,本发明的实施例还提供了一种计算机程序,包括计算机可读代码,当所述计算机可读代码在计算处理设备上运行时,导致所述计算处理设备执行上述的任务处理方法。
第五方面,本发明的实施例还提供了一种计算机可读存储介质,其上存储有上述的计算机程序。
本发明实施例提供的任务处理方法,通过获取待执行的目标任务所需的目标数据和目标算法,并确定网络拓扑结构中能够提供目标数据的至少一个第一类节点以及能够执行目标算法的至少一个第二类节点,从而选出一个第一类节点和一个第二类节点,控制选出的第二类节点采用目标算法对选出的第一类节点提供的目标数据进行处理,实现对目标任务的执行。由此可见,本发明的实施例,将数据和算法分别分布到网络中,而不再将数据统一存储到需要执行目标任务的节点,也不再由需要执行目标任务节点自己执行目标算法,而是分配给具备目标算法的处理能力的节点去执行,即本发明的实施例,将分布式存储和分布式计算相结合,可以降低网络拓扑结构中单个节点的能力,从而降低单个节点的设计成本,进而降低整个网络拓扑结构的设计成本。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技 术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的一种任务处理方法的流程图;
图2为本发明实施例中的网络拓扑结构中单层网络结构的示意图;
图3为本发明实施例提供的另一种任务处理方法的流程图;
图4为本发明实施例中寻址的过程所涉及的节点在网络拓扑结构中的分布示意图之一;
图5为本发明实施例中寻址的过程所涉及的节点在网络拓扑结构中的分布示意图之二;
图6为本发明实施例中寻址的过程所涉及的节点在网络拓扑结构中的分布示意图为之三;
图7为本发明实施例中寻址的过程所涉及的节点在网络拓扑结构中的分布示意图之四;
图8为本发明实施例中网络拓扑结构的一种结构示意图;
图9为本发明实施例提供的一种任务处理装置的结构框图;
图10为本发明实施例提供的另一种任务处理装置的结构框图;
图11为本发明实施例提供的一种电子设备的结构框图;
图12示意性地示出了用于保持或者携带实现根据本申请的方法的程序代码的存储单元。
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本发明,并且能够将本发明的范围完整的传达给本领域的技术人员。
本发明的实施例提供了一种任务处理方法,应用于网络拓扑结构,所述网络拓扑结构包括多个节点。可选的,所述网络拓扑结构中包括控制节点,所述控制节点中存储有所述网络拓扑结构中的除去所述控制节点之外的节点的能力信息,即控制节点之外的其他节点可以定期向控制节点上报各自的能力信息,则本发明实施例的任务处理方法,可以由所述控制节点 执行。
可选的,如图2所示,所述网络拓扑结构包括:至少一层网络结构,每一层网络结构包括至少一个环状结构,每个环状结构包括多个节点;其中,每个环状结构中的节点首尾相连,且按照每个环状结构中的节点的编号顺序,编号为奇数的节点与其相邻节点的下一节点相连,或者编号为偶数的节点与其相邻节点的下一节点相连。其中,可以理解的是,对于环状结构的具体连接方式并不局限于此,还可是每个环状结构包括的多个节点收尾相连,并与其相邻节点的下一节点相连。
由此可知,所述网络拓扑结构包括多层串联加环路的容错网络,其中每一层结构相同,每一层都使用相同的环路拓扑结构,层间垂直跨接。这种相同的硬件设备,相同结构的重复叠加,配合相同的软件管理,逐步扩大资源聚集度,完成面向应用的超级工程。另外,本结构不存在跨两层以上的连接,简化了软件结构和系统管理。层内不同间隔的通信环,确保环内任意两点出现故障(包括抽取PCB板卡),环路不会中断,并保持正常通信。
可选的,相邻的两层网络结构之间存在至少两条连接路径。例如第一层网络结构的第三节点与第二层网络结构的第四节点连接,第一层网络结构的第五节点与第二层网络结构的第六节点连接,即第一层网络结构与第二层网络结构之间可以存在两条连接路径。
可选的,多个计算设备被划分为至少一层网络结构,其中,所述计算设备包括:
存储单元和至少一个计算单元,所述存储单元包括用于通信和管理所述存储单元的第一虚拟管理单元电路,所述计算单元包括用于通信和管理所述计算单元的第二虚拟管理单元电路;所述第一虚拟管理单元电路和所述第二虚拟管理单元电路分别与对外物理通信接口连接;
PCB单板,所述存储单元、所述计算单元位于所述PCB单板上;
板框,所述PCB单板设置于所述板框上;
机箱,所述板框位于所述机箱内;
机房,所述机箱位于所述机房内;
第一数据管理中心,所述第一数据管理中心包括至少两个机房;
第二数据管理中心,所述第二数据管理中心包括至少两个所述第一数据管理中心。
由此可知,该计算设备,包括存储单元和计算单元,且存储单元和计算单元都设置有用于通信和管理的虚拟管理单元电路,并与对外物理通信接口连接,使得存储单元和计算单元之间并行,不同计算单元之间并行。 由此可知,本发明实施例中的计算设备,不再区分计算和网络,而是把计算和储存融化到网络之中,并设置计算单元存在统一的接口对外通信,将计算与存储并行,从而可以提升数据处理速度,在一定程度上满足人工智能、区块链引发的海量数据和大量算力的爆发需求。
进一步地,所述多个计算设备被划分为八层网络结构,其中,第一层网络结构S(silicon)的节点为所述计算单元的单元电路,可编程内部电路结构和管理;第二层网络结构B(board)的节点为所述计算单元,即在单板PCB内,多芯片之间,单PCB内布线10Gbps通信,板级管理;第三层网络结构F(frame)的节点为PCB单板,即在单机框内,多PCB之间,背板间PCB内布线10Gbps通信,全联通;第四层网络结构C(cabinet)的节点为板框,在单机柜内,板框之间,机框间光纤10Gbps通信,全联通;第五层网络结构D(district)的节点为机箱,即在数据中心内分块,多机箱之间。机房内按需不完全光纤网络,10Gbps;第六层网络结构Z(zone)的节点为机房,即在数据中心内分区,多机房之间。机房内按需不完全光纤网络,10Gbps;第七层网络结构E(enterprise)的节点为所述第一数据管理中心,按需配置广域光纤,互联网承载全网管理;第八层网络结构W(world)的节点为所述第二数据管理中心,按需配置广域光纤,互联网承载,全网管理。其中,可以理解的是,对于由多个计算设备组成的网络拓扑结构,对于各层网络结构的划分形式,并不局限于此。
其中,上述八层网络结构,可以由八组8bit,共计64bit定位。也就是说,在全网(全世界)范围内可以独立查询和管理任一台设备,或者,其中任意一片单元电路,任意一块硬盘的工作状态。显然,此种网络拓扑结构设计可以在未来相当长的时期内满足需求。但是,如果将来某一天,网络规模不足以满足应用需求,该网络拓扑结构很容易在数据中心(即W层)之上增加更多层网络结构。如果将来超级芯片可服务的独立对象大幅增加,导致网络地址不够分配,很容易在芯片层(即S层)之下扩展,甚至定位到细胞级别。由此可见,该网络拓扑结构规模可以无限伸缩,满足未来可能的需求。
此外,所述网络拓扑结构可以定义三种硬件资源,并且用统一的64bit地址唯一定位。
第一种,小颗粒资源:指芯片内部具备完整功能的资源,用地址段S(Silicon)标示定位。
第二种,单板资源:指完整功能的板卡内部资源,用地址段B(Board)标示定位。
第三种,多卡组合资源:泛指由独立板卡组装的多卡集成资源,包括 各种机柜和机房的组合。其中分为6个等级,分别用地址段F(Frame),C(Cabinet),D(District),Z(Zone),E(Enterprise),和W(World)标示定位。
如图1所示,该任务处理方法包括:
步骤11:获取待执行的目标任务所需的目标数据和目标算法。
其中,所述目标数据包括至少一项数据,例如可以包括A、B两项数据。所述目标算法包括至少一种算法,例如可以包括C、D算法。本发明的实施例中,目标数据与目标算法相对应,即目标数据是执行目标算法所需的数据。例如待执行的目标任务是对A、B数据先后执行C算法和D算法,则A、B数据与C、D算法对应。
可选的,所述获取待执行的目标任务所需的目标数据和目标算法之前,还包括:
根据所述网络拓扑结构中的节点的能力信息,将待执行的任务拆分为至少一个子任务,并将所述至少一个子任务中的一个确定为所述目标任务。
由此可知,本发明实施例中,在待执行的任务涉及复杂的算法时,还可可以首先根据网络拓扑结构中各个节点的能力信息(即各个节点分别具备哪些算法处理能力),进行任务拆分,从而可以获得多项子任务,其中,一项子任务的算法由一个节点提供。
对于拆分获得的各个子任务,分别对应有执行的先后顺序,例如拆分获得子任务一、子任务二和子任务三,子任务一和子任务二所需的数据和算法互不冲突,可以并行执行,子任务三所需的数据是子任务一和子任务二所生成的数据,则子任务一和子任务二可以并行执行,其中针对子任务一和子任务二,都可以首先获取网络拓扑结构中可以提供数据和算法的节点,然后选取其中一个可以提供数据的节点和一个可以提供算法的节点,然后由提供算法的节点对提供数据的节点所提供的数据进行处理,然后存储处理后的数据。另外,在执行子任务三时,已经明确子任务一和子任务二执行算法的节点,则可以首先确定网络拓扑结构中可以提供子任务三对应的算法的节点,进而选出一个可以提供子任务三对应的算法的节点,对子任务一和子任务二中执行算法的节点中存储的子任务三所需的数据进行处理,实现对整个总任务的执行。
具体的,例如,需要对一段时长为10分钟的源视频中的前5分钟采用第一模型进行处理,后5分钟采用第二模进行处理,最后再对两部分模型处理后的视频进行合成,则该任务可以划分为三个子任务,即:
子任务一:对源视频的前5分钟进行第一模型处理;
子任务二:对源视频的后5分钟进行第二模型处理;
子任务三,进行视频合成。
针对子任务一:首先需要获取网络拓扑结构中可以提供源视频的节点,可以提供第一模型的节点,从而选出一个可以提供源视频的节点,一个可以提供第一模型的节点,进而将源视频的前5分钟的视频流传输给选出的可以提供第一模型的节点。
针对子任务二:由于子任务一中已选出一个可以提供源视频的节点,则在子任务二的处理过程中,需要获取网络拓扑结构中可以提供第二模型的节点,从而选出一个可以提供第二模型的节点,进而将源视频的后5分钟的视频流传输给选出的可以提供第二模型的节点。
针对子任务三:由于子任务三所需的数据是子任务一和子任务二执行后获得的数据,因而在子任务三的处理过程中,需要获取网络拓扑结构中可以进行视频合成的节点,从而选出一个可以进行视频合成的节点,将子任务一中提供第一模型的节点输出的数据,以及子任务二中提供第二模型的节点输出的数据进行视频合成。
由此可知,本发明的实施例,针对算法复杂的任务,可以进行任务拆分,从而将各个任务的算法分布到网络中,而不是由一个节点同一执行,不仅可以降低单个节点的能力要求,而且可以缩短任务处理时间。
步骤12:获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点。
本发明的实施例中,获取到待执行的目标任务所需的目标算法和目标数据后,通过上述步骤12获取网络拓扑结构中能够提供目标数据的节点和能够提供目标算法的节点,由此可见,本发明的实施例中,将数据和算法分别分布到网络中,而不再将数据统一存储到需要执行目标任务的节点,也不再由需要执行目标任务节点自己执行目标算法,而是分配给具备目标算法的处理能力的节点去执行,即本发明的实施例,将分布式存储和分布式计算相结合,可以降低网络拓扑结构中单个节点的能力,从而降低单个节点的设计成本,进而降低整个网络拓扑结构的设计成本。
步骤13:从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点。
其中,网络拓扑结构中包括多个节点,因此可能存在多个节点可以提供目数据,多个节点可以执行目标算法。并且,可能目标数据分布在多个节点上,目标算法也分布在多个节点上。而执行目标任务只需要提供一组 目标数据的节点以及提供一组目标算法的节点即可。
可选的,所述从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点,包括:
获取提供一组所述目标数据的节点和提供一组所述目标算法的节点形成的组合;
根据每个组合的能力信息,选择一个目标组合,并将所述目标组合中提供一组所述目标数据的节点确定为所述第一目标节点,将所述目标组合中提供一组所述目标算法的节点确定为第二目标节点;
其中,所述组合的能力信息包括所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延、提供一组所述目标算法的节点执行所述目标算法所需的时长、提供一组所述目标算法的节点的缓存空间大小中的至少一项。
其中,需要说明的是,若上述步骤11之前,未进行任务拆分,则一组目标算法可能会由多个节点来提供,那么,在此种情况下:
第一方面,若提供一组目标数据的节点也包括多个节点,则提供一组目标数据的节点到提供一组目标算法的节点的时延可以为,每一个提供目标数据的节点到每一个提供目标算法的节点的时延之差或者平均值,例如提供一组目标数据的节点包括a、b节点,提供一组目标算法的节点为c、d节点,则a-c、b-c、a-d、b-d的时延之差或者平均值可以作为该组提供目标数据的节点和该组提供目标算法的节点之间的时延。
第二方面,提供一组所述目标算法的节点执行所述目标算法所需的时长可以为,该组中执行各自所提供的算法所需的时长之和或者平均值。
第三方面,提供一组所述目标算法的节点的缓存空间大小可以为,该组中的提供目标算法的节点的缓存空间之和或者平均值。
若上述步骤11之前,进行了任务拆分,则一组目标算法由一个节点来提供,那么,在此种情况下:
第一方面,若提供一组目标数据的节点也包括多个节点,则提供一组目标数据的节点到提供一组目标算法的节点的时延可以为,每一个提供目标数据的节点到提供目标算法的节点的时延之差或者平均值,例如提供一组目标数据的节点包括a、b节点,提供一组目标算法的节点为c节点,则a-c、b-c的时延之差或者平均值可以作为该组提供目标数据的节点和提供目标算法的节点之间的时延。
第二方面,提供一组所述目标算法的节点执行所述目标算法所需的时长即为提供目标算法的节点执行目标算法所需的时长。
第三方面,提供一组所述目标算法的节点的缓存空间大小可以为,提供目标算法的节点的缓存空间。
另外,对于上述组合,例如,目标数据包括A、B两项数据,分别可以由网络拓扑结构中的a、b节点提供,目标算法包括C算法这一种,可以由网络拓扑结构中的c、d节点提供,则可以获得的组合如下所示:
组合一:a、b、c;
组合二:a、b、d。
则可以分别获取上述四个组合的能力信息,然后根据这四个组合各自的能力信息,选出一个组合,从而由选出的组合中提供目标算法的节点采用目标算法,对该组合中提供目标数据的节点所提供的目标数据进行处理。
此外,所述目标组合为提供一组目标数据的节点和提供一组目标算法的节点形成的所有组合中,能力最强的组合。其中,组合的能力可以通过组合中提供一组目标数据的节点到提供一组目标算法的节点的时延、提供一组目标算法的节点执行目标算法所需的时长、提供一组目标算法的节点的缓存空间大小中的至少一项来表示,例如提供一组目标数据的节点到提供一组目标算法的节点的时延越小、提供一组目标算法的节点执行目标算法所需的时长越小、提供一组目标算法的节点的缓存空间越大,则表示该组合的能力越强。
可选的,所述根据每个组合的能力信息,选择一个目标组合,包括:
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点的缓存空间中的最大值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点执行所述目标算法所需的时长之和中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合的第一比值中的最小值对应的组合,作为所述目标组合,其中,所述第一比值为所述组合中提供一组所述目标数据的节点到提 供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比;
或者
选择所述组合的第二比值中的最小值对应的组合,作为所述目标组合,所述第二比值为所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比。
由上述可知,本发明实施例中,可以采用上述六种方式中的任意一种来选择目标组合。其中,可以理解的是,对于选择目标组合的具体方式,并不局限于此,还可是其他根据组合的能力信息进行选择的其他方式。
步骤14:控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
可选的,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:
所述第一类节点向所述第一目标节点发送第一指示信息,所述第一指示信息用于指示所述第一目标节点将所述目标数据发送给所述第二目标节点;
所述第一类节点向所述第二目标节点发送第二指示信息,所述第二指示信息用于指示所述第二目标节点采用所述目标算法,对所述目标数据进行处理。
本发明的实施例中,需要执行目标任务的节点,通过上述步骤13选出提供一组目标数据的节点(即第一目标节点)和提供一组目标算法的节点(即第二目标节点)后,向第一目标节点发送指示信息,使得第一目标节点将其中存储的目标数据发送给第二目标节点,从而由第二目标节点采用目标算法进行处理,进而将处理后获得的数据返回给上述需要执行目标任务的节点。
其中,需要说明的是,若上述步骤11之前,未进行任务拆分,则一组目标算法可能会由多个节点来提供,那么,在此种情况下:
若提供一组目标数据的节点包括多个节点,则提供一组目标数据的多个节点分别将对应的数据传输到对应算法的节点,例如提供一组目标数据的节点包括a、b节点,提供目标算法的节点包括c、d节点,a节点提供的数据需要c节点来处理,b节点提供的数据需要d节点来处理,则a节点需要将数据传输到c节点,b节点需要将数据传输到d节点来处理。
即在一组目标算法由多个节点提供,一组目标数据由多个节点提供的情况下,需要按照数据与算法的对应关系,以及各个算法的执行顺序来进 行处理。
若上述步骤11之前,进行了任务拆分,则一组目标算法由一个节点来提供,那么,在此种情况下:
提供目标数据的节点将各自所提供的数据发送给提供目标算法的节点,由提供目标算法的节点对接收到的数据进行处理即可。
可选的,在所述目标数据包括视频流或者音频流的情况下,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:
控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理;
其中,所述第一数据包包括预设时长的视频流或音频流。所述预设时长的视频可以包括预设数量的视频帧。
可选的,所述控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理之后,还包括:
在接收所述第二目标节点发送的处理后的所述第一数据包的过程中,控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第二数据包进行处理;
其中,所述第二数据包包括预设时长的视频流或音频流。
本发明的实施例中,在对视频流或者音频流进行处理时,可以针对数据包逐一进行处理,然后将处理完成的数据包发送出去,即本发明的实施例,通过数据驱动计算,不再等待数据收集完成,而是在输出传输过程中,分步进行计算,这样能提高效率,缩短时延。
可选的,所述网络拓扑结构包括:至少一层网络结构,每一层所述网络结构包括多个按照预定方式连接的节点。其中,不同层对应的数据传输时延的取值范围不同,与第一目标层网络结构对应的数据传输时延包括所述第一目标层网络结构中的节点到目标节点的数据传输时延,所述第一目标层网络结构为任意一层所述网络结构。
如图3所示,在获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点之前,还包括:
步骤21:第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址。
其中,所述第一节点位于所述第一层网络结构中。第一层网络结构根 据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,即为第一层网络结构根据第一相关参数,在第一层网络结构中,对能够提供目标内容的第二节点进行内容寻址。亦即通过第一相关参数进行寻址,而不是真实的地址进行寻址,从而可以增强一定的安全性。另外,本发明的实施例,在层内进行内容寻址,缩小了内容寻址的范围,减小了一定开销。
其中,第二节点可以为第一类节点或第二类节点。当第一层网络结构根据第一节点所需的目标数据的第一相关参数对能够提供目标数据的第二节点进行寻址时,第二节点为第一类节点;当第一层网络结构根据第一节点所需的目标算法的第一相关参数对能够提供目标算法的第二节点进行寻址时,第二节点为第二类节点。
步骤22:所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构。
本发明的实施例中,在通过步骤21未在第一层网络结构中寻址到提供目标内容的第二节点时,则第一层网络结构需要将第一相关参数转发给第二层网络结构,使得第二层网络结构可以根据第一相关参数继续对能够提供目标内容的第二节点进行寻址。
步骤203:所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址。
其中,所述第二节点的地址是所述第二层网络结构根据所述第一相关参数在所述第二层网络结构中对所述第二节点进行寻址后获得的。
另外,若第二层网络结构在第二层网络结构中仍未寻址到能够提供目标内容的第二节点,则第二层网络结构继续将第一相关参数转发给其他层的网络结构,直到寻址到第二节点,或者直到整个对第二节点的寻址时间达到预设时间时,停止对第二节点进行寻址。
步骤24:所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数。
本发明的实施例中,第二层网络结构在第二层网络结构中寻址到能够提供目标内容的第二节点时,第二层网络结构将第二节点的地址发送给第一层网络结构的第一节点,使得第一节点可以依据第二节点的地址,向第二节点发送目标内容的第二相关参数。
其中,第二节点接收到所述第二相关参数后,按照从第二节点到第一节点之间的路径,向第一节点上报所述目标内容。
由上述可知,本发明实施例提供的任务处理方法,在第一节点所处的 第一层网络结构中根据第一节点所需的目标内容的第一相关参数,对能够提供该目标内容的第二节点进行内容寻址,并在第一层网络结构中未寻址到第二节点时,直接将第一相关参数转发给第二层网络结构中,从而在第二层网络结构中再次寻址,直到找到第二节点后,第一节点根据第二节点的地址向第二节点发送目标内容的第二相关参数。由此可知,本发明实施例的任务处理方法中,在对第二节点进行寻址的过程中,只在层内进行内容寻址,在层与层之间直接转发寻址所依据的参数,从而缩写了内容寻址的范围,减小了开销,并且,通过内容寻址方式,在一定程度上达到了安全性要求。
其中,上述网络拓扑结构中的每一层网络结构,可以设置控制节点,也可不设置控制节点。该控制节点中存储有本层网络结构中的所有节点的能力信息,即一层网络结构中除控制节点之外的其他节点会周期性向该层的控制节点上报各自的能力信息。
本发明实施例的任务处理方法,在每一层网络结构中设置控制节点,以及未设置控制节点的情况,具体的实现方式不同。
具体地,针对每一层网络结构中未设置控制节点的情况:
可选的,所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:
所述第一层网络结构的第一节点在所述第一层网络结构中广播所述第一相关参数。
本发明的实施例中,当第一层网络结构中未设置控制节点时,可以由第一节点直接在第一层网络结构中广播所述第一相关参数,则第一层网络结构中的其他节点可以在接收到该第一相关参数后,各自判断自身是否能够提供所述目标内容给第一节点。
可选的,所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:
所述第一层网络结构的第一节点在广播所述第一相关参数后的预设时间段内未接收到所述第二节点的地址时,向所述第一层网络结构的第三节点发送指示信息;
所述第一层网络结构的第三节点根据所述指示信息,将所述第一相关参数转发给所述第二层网络结构的第四节点;
其中,所述第三节点与所述第四节点连接。
由此可知,本发明的实施例中,第一层网络结构与第二层网络结构通 过第三节点与第四节点之间的连接实现通信。
另外,第一节点广播第一相关参数后的预设时间段内未接收到第一层网络结构中其他节点的反馈信息,则表示第一层网络结构中不存在可以提供目标内容的节点,则需要向其他层中继续寻找。此种情况下,第一节点可以按照第一节点与第三节点之间的一条通信链路,向第三节点发送指示信息,使得第三节点将第一相关参数转发给与第二层网络结构的第四节点,进而使得第四节点可以在第二层网络结构中继续对能够为第一节点提供目标内容的第二节点进行寻址。
可选的,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:
所述第一层网络结构的第三节点接收所述第二层网络结构的第四节点发送的所述第二节点的地址;其中,所述第四节点发送的所述第二节点的地址是所述第四节点在所述第二层网络结构中广播所述第一相关参数后,接收到的所述第二节点发送的;
所述第一层网络结构的第一节点接收所述第一层网络结构的第三节点发送的所述第二节点的地址;其中,所述第三节点发送的所述第二节点的地址,是所述第四节点发送给所述第三节点的。
由此可知,本发明的实施例中,第四节点接收到第三节点发送的第一相关参数后,在第二层网络结构中广播第一相关参数,则第二层网络结构中除去第四节点之外的其他节点接收到第一相关参数后,会判断自身能否提供目标内容,若可以,则通过其自身到第四节点的一条通向连接,将自身的地址反馈给第四节点,使得第四节点可以进一步转发给第三节点,进而使得第三节点进一步通过第三节点到第一节点的通信链路,转发给第一节点。
综上所述,当网络拓扑结构的每一层中均未设置控制节点时,本发明实施例的任务处理方法中对能够提供目标内容的第二节点进行寻址的过程,可举例如图4所示。即第一节点A在层一中广播第一相关参数,在此之后的预设时间内,第一节点A并未收到层一中其他节点的反馈,则第一节点A通过到第三节点C的一条路径,向第三节点C发送指示信息,第三节点C收到该指示信息后,将第一相关参数发送给第四节点D;第四节点D则在层二中广播第一相关参数,此后,第二节点B接收到第一相关参数后,判定自身可以提供目标内容,则第二节点B通过到第四节点D的一条路径,向第四节点D反馈自己的地址;第四节点D则将第二节点B的地址转发给第三节点C;第三节点C通过与第一节点A的一条路径,将第二节点B的地址发送给第一节点A。其中,为了便于理解,图4中的层一和层二 只画出了第一节点至第四节点。
可选的,所述任务处理方法还包括:
所述第一层网络结构的第一节点接收所述第一层网络结构的所述第二节点发送的所述第二节点的地址。
即当网络拓扑结构的每一层中均未设置控制节点时,第一节点在第一层网络结构中广播第一相关参数后,若第一层网络结构中存在可以提供目标内容的第二节点,则该第二节点通过与第一节点之间的通信链路,将第二节点的地址发送给第一节点。
由此可知,当网络拓扑结构的每一层中均未设置控制节点时,本发明实施例的任务处理方法中对能够为第一节点提供目标内容的第二节点进行寻址的过程,还可举例如图5所示。即第一节点A在层一中广播第一相关参数,第二节点B接收到第一相关参数后,判定自身可以提供目标内容,则第二节点B通过到第一节点A的一条路径,向第一节点A反馈自己的地址。其中,为了便于理解,图5中的层一只画出了第一节点和第二节点。
具体地,针对每一层网络结构中未设置控制节点的情况:
可选的,所述第一层网络结构中设置有第一控制节点,所述第一控制节点中存储有所述第一层网络结构中的节点的能力信息;
所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:
所述第一层网络结构的第一节点向所述第一层网络结构的第一控制节点发送所述第一相关参数;
所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,对所述第二节点进行寻址。
本发明的实施例中,当第一层网络结构中设置第一控制节点时,由于第一控制节点中存储有第一层网络结构中的节点的能力信息,因而第一控制节点自身就可以确定出第一层网络结构中的哪个或者哪些节点可以提供目标内容。因而第一节点只需要把第一相关参数发送给第一控制节点即可。
可选的,所述第二层网络结构中设置有第二控制节点,所述第二控制节点中存储有所述第二层网络结构中的节点的能力信息;
所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:
所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第 一层网络结构中的节点的能力信息,确定所述第一层网络结构中不存在所述第二节点时,所述第一层网络结构的第一控制节点向所述第二层网络结构的第二控制节点发送所述第一相关参数。
其中,第一控制节点根据第一层网络结构中的节点的能力信息决策出,第一层网络结构中并不存在可提供目标内容的节点时,第一控制节点则需要将第一相关参数发送到第二层网络结构中的第二控制节点,使得第二控制节点判断第二层网络结构中是否存在可以提供目标内容的节点。
另外,若第一控制节点和第二控制节点之间并不是直接相连(即第一控制节点不与第二层网络结构的节点直接相连,或者第二控制节点不与第一层网络结构的节点直接相连),例如第一层网络结构的第三节点与第二层网络结构的第四节点相连,且第三节点和第四节点均不是控制节点,则在第一控制节点向第二控制节点发送第一相关参数的过程中,第一控制节点首先需要通过与第三节点之间的通信链路,将第一相关参数发送给第三节点;然后,第三节点将第一相关参数转发给第四节点;最后,第四节点通过与第二控制节点之间的通信链路,将第一相关参数发送给第二控制节点。
可选的,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:
所述第一层网络结构的第一控制节点接收所述第二层网络结构的第二控制节点发送的所述第二节点的地址,其中,所述第二控制节点发送的所述第二节点的地址是所述第二控制节点根据所述第一相关参数和所述第二层网络结构中的节点的能力信息确定的;
所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第二节点的地址。
由此可知,本发明的实施例中,第二控制节点接收到第一相关参数后,则可以根据第二层网络结构中的节点的能力信息,决策出第二层网络结构中的哪个或者哪些节点可以提供目标内容,并在存在可以提供目标内容的节点时,将该节点的地址反馈给第一层网络结构的第一控制节点,从而使得第一控制节点可以发送给第一节点。
综上所述,当网络拓扑结构的每一层中均设置有控制节点时,本发明实施例的任务处理方法中对能够提供目标内容的第二节点进行寻址的过程,可举例如图6所示。即第一节点A将第一相关参数发送给第一控制节点E,第一控制节点E根据层一中的节点的能力信息决策出该层中并不存在可以提供目标内容的节点时,第一控制节点E通过与第三节点C之间的一条路径,将第一相关参数发送给第三节点C;第三节点C将第一相关参数转发给 第四节点D;第四节点D再将第一相关参数转发给层二的第二控制节点F,若第二控制节点F根据二中的节点的能力信息决策出该层中存在可以提供目标内容的节点,即第二节点B,则第二控制节点F通过与第四节点D之间的一条路径,将第二节点B的地址发送给第四节点D;第四节点D再将第二节点B的地址转发给第三节点C;第三节点C再通过与第一控制节点E的一条路径,将第二节点B的地址发送给第一控制节点E,使得第一控制节点E可以通过与第一节点A的一条路径,将第二节点B的地址发送给第一节点A。其中,为了便于理解,图6中的层一和层二只画出了第一节点至第四节点以及第一控制节点和第二控制节点。
由上述可知,当网络拓扑结构的每一层中均设置有控制节点时,目标内容的第一相关参数通过控制节点广播,能够提供目标内容的节点的地址,通过控制节点反馈,则需要目标内容的节点可以不需要知道提供目标内容的节点,提供目标内容的节点也可以不需要知道为哪个节点提供,从而可以进一步寻址过程中的安全性。
可选的,所述任务处理方法还包括:
所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第一层网络结构的所述第二节点的地址;
其中,所述第一控制节点发送的所述第二节点的地址,是所述第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息确定的。
即当网络拓扑结构的每一层中均设置有控制节点时,第一节点将第一相关参数发送给第一层网络结构的第一控制节点,由第一控制节点根据给第一相关参数和第一层网络结构中的节点的能力信息,确定第一层网络结构中是否存在可以提供目标内容的第二节点,若存在,则第一控制节点将第二节点的地址发送给第一节点。
由此可知,当网络拓扑结构的每一层中均设置有控制节点时,本发明实施例的任务处理方法中对能够提供目标内容的第二节点进行寻址的过程,还可举例如图7所示。即第一节点A将第一相关参数发送给层一的第一控制节点E,由第一控制节点E判定层一中存在可以提供目标内容的第二节点B,则第一控制节点E通过到第一节点A的一条路径,向第一节点A反馈第二节点B的地址。其中,为了便于理解,图7中的层一和层二只画出了第一节点、第二节点和第一控制节点。
综上所述,本发明的实施例中,在层内采用内容寻址,在层与层之间直接转发进行内容寻址所依据的参数,从而建立通信连接。其中,链路组成完成后,业务内容按照地址寻址和处理功能分块,对数据进行标记和发 送,中转节点只做自己被划分的处理,并重新组成处理后的包,其他内容透传。内容在传输过程中进行处理,每次处理后不再传输数据,而是传输处理完数据产生的知识。
综上所述,对于本发明实施例的任务处理方法,具体应用场景可举例如下:
例如图8所示,一个网络拓扑结构包括三层网络结构,其中,层一包括节点101~106,层二包括节点201~202,层三包括节点301。其中,节点101中存储有视频实拍数据,102中存储有AR素材,103中存储有3D扫描数据。
当301节点需要一个以101节点中的视频实拍为背景、以102节点中的AR舒服增加趣味性、以103节点的扫描数据作为内容的视频时,在业务开始时,301节点发出三条请求,可以广播方式,也可以直接点对点发送,其中,请求中包括:业务类型、资源请求、数据类型、内容描述。
101节点、102节点和103节点分别相应响应请求,附带样本内容反馈。301节点接收到101节点、102节点和103节点的反馈后,采用本发明实施例的任务处理方法规划处理路径,即确定提供数据的节点和提供内容的节点,例如提供数据的节点是节点101、节点102和节点103,提供算法的节点是节点201,则301节点会下发所需视频背景生成代码给101节点,下发AR动作和时间点给102节点,下发3D提取时间信息和所需内容给103节点,下发视频合成代码给节点201。
此后,101节点使用301下发的工具,对要求视频做预处理,生成背景视频,编码压缩后发生给201节点;102节点根据要求的AR动作和时间点,提供AR素材给201节点;103节点根据要求的3D内容和时间点,提供3D内容给201节点;201节点201接收101节点、102节点、103视频节点提供的相关数据进行视频合成,并转码,合成新视频后,转发给301节点。
综上所述,本发明的实施例,将数据和算法分别分布到网络中,而不再将数据统一存储到需要执行目标任务的节点,也不再由需要执行目标任务节点自己执行目标算法,而是分配给具备目标算法的处理能力的节点去执行,即本发明的实施例,将分布式存储和分布式计算相结合,不仅可以提高数据的安全性,而且可以降低网络拓扑结构中单个节点的能力,从而降低单个节点的设计成本,进而降低整个网络拓扑结构的设计成本。
此外,本发明实施例的任务处理方法,在实际应用场景中还可以举例如下所述。
例如图8所示,一个大型公司的网络拓扑结构包括三层网络结构,其 中,层一包括营业厅节点101~106,层二包括地区分公司节点201~202,层三包括省公司节点301。其中,每个营业厅节点都连接有不同类型的设备,主要包括人脸识别摄像头、人流监控摄像头、烟雾传感器、空气质量传感器,则这些设备分别进行数据采集,并存储到对应的营业厅节点。
其中,在省公司节点存在实时数据需求时,例如省公司节点要求准确寻找某个人,则省公司节点在层二中寻址可以提供该任务相关内容的节点,例如省公司节点可以将发送任务包给层二中的地区分公司节点(或者广播该任务包),则各地区分公司节点会判断是否是自己的任务,然后匹配到任务的地区分公司节点向与其连接的营业厅节点发送该任务包,从而使得接收到任务包的营业厅节点解析数据,获取到业务类型为固件更新,数据类型为代码,以及具体的设备号码,进而根据获取到的这些信息执行任务,并在完成任务后进行反馈。
具体地,省公司节点发送的任务包包括:实时上报,数据类型视频,设备类型任意,内容为被监控人照片和编号。则营业厅节点接收到该任务包后,会执行如下过程:
营业厅节点获取网表文件,由板载管理ARM通过jtag(联合测试工作组)接口下载,当下载完成时,营业厅节点的下载模块生成确认消息,发给营业厅节点的通信模块,使得通信模块按照1kB帧格式填写内容并反馈。其中,反馈后营业厅节点的ARM发指令给营业厅节点的FPGA,从而打开FPGA的通信模块,使得FPGA直接接收与营业厅节点连接的摄像头的IP数据(其中,与营业厅节点连接的摄像头运行UDP(用户数据报协议)模式)。其中,营业厅节点的FPGA通信模块接收数据后,通过FPGA视频解码模块完成解码,交由下载的AI模块负责推理。AI模块反馈发现消息,触发转发模式,记录时间点,将DDR(双倍数据速率)内1分钟内最新视频,通过通信模块转发给地区分公司节点。其中,地区分公司,还可以根据各地收到的实时上报,做进一步分析。
其中,FPGA通过ARM维护文件系统,视频内容由FPGA直接入硬盘。FPGA与ARM通过PCIE(高速串行计算机扩展总线标准)口通信。另外营业厅节点中包括多个FPGA,而此处的FPGA只负责这个场景任务,其他日常监控任务由其他FPGA并行执行。
此外,所述任务处理方法,还可包括:
第二层网络结构的第二节点周期性向第一层网络结构的第一节点上报目标内容。
例如图8所示的大型公司的网络拓扑结构包括三层网络结构,在营业厅节点周期上报设备数据时,具体执行过程可如下第一步骤至第四步骤所 述:
第一步骤:营业厅节点每日监控数据,业务类型,设备号,数据类型存于本地。例如:可以按照业务VIP统计,第一人脸摄像头,视频源文件,存储vip客户相关视频;或者按照业务VIP统计,第一人脸摄像头,在店时间,存储所监控到VIP在店时间统计;或者按照业务店员统计,第一人脸摄像头,在店时间,存储所监控到店员在店时间统计。
第二步骤:营业厅节点根据预先设定的上报内容(其中主要是统计内容),在规定时间,自动组包,包长统一1kB。其中,可以仍然用现有网络传输,地址这层只用于内容标识,营业厅节点有一0个网关,负责TCP
(TCP,Transmission Control Protocol,传输控制协议)/IP封装和与现有网络对接,这是标准TCP/IP协议,此处不再赘述。
第三步骤:地区分公司节点,根据各营业厅节点上报内容,进行本地统计,生成报表,并采用报文(该报文格式可参见表1)继续上报。其中,地区分公司节点之间有逻辑环,且每个分公司都有对上层和下层数据传输出口。
第四步骤:省公司节点统计内容,例如统计VIP进店平均时长,员工工作时长场,每个店面客流等。
表1报文格式
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过所述第一层网络结构中所述第一节点到所述第三节点中的一条路径,向所述第三节点发送所述第二相关参数;
其中,所述第三节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第四节点,使得所述第四节点通过所述第二层网络结构中所述第四节点到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址, 向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过到所述第一控制节点中的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第二控制节点,使得所述第二控制节点通过到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过所述第一层网络结构中所述第一节点到所述第二节点中的一条路径,向所述第二节点发送所述第二相关参数。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过到所述第一控制节点的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,通过到所述第二节点的一条路径,将所述第二相关参数发送给所述第二节点。
其中,所述网络拓扑结构从宏观上,给定任意两点(原点和终点),定义一条路径。因此,由上述可知,在第一节点(即起点)向第二节点(即终点)发送数据时,首先判断原点与终点是否在同一网络层次。如果在同一层次,则执行同层转发。如果不在同一层次,则通过层间垂直跨接,向上层或下层转发。
可选的,所述网络拓扑结构的节点地址包括与每一层对应的字段。例如所述网络拓扑结构包括三层网络结构时,可以分为高层、中层和低层。在从第一节点向第二节点发送数据包时,具体过程可以如下所述:
如果两者的三段地址全部相等,表示数据包到达目的地,第二节点的交换机接纳该数据包。并且表示交换功能结束。然后,执行后续可能的储存或运算操作。如果两者不全等,则需进一步分析:若两者高层地址不等,则通过跨接,向高层网络结构转发。进一步说,如果该节点不与高层直连,则数据包沿平级转发,直到找到高层网络结构的连接节点;如果数据包的目标地址与本地端口的高层地址相等,但本层地址不等,则根据本层随机地址标记,沿着本层地址增加或减少方向发送,直到找到本地匹配;如果数据包的高层和本层地址与本地端口都相等,但下层地址不等,则通过跨接转发至下层;如果该节点不与下层直连,则沿平级转发,直至找到下层网络的连接节点。本发明的实施例还提供了一种任务处理装置, 应用于网络拓扑结构,所述网络拓扑结构包括多个节点;如图9所示,所述任务处理装置400包括:
第一获取模块401,用于获取待执行的目标任务所需的目标数据和目标算法;
第二获取模块402,用于获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;
选择模块403,用于从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点;
控制模块404,用于控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
可选的,所述选择模块403包括:
组合子模块,用于获取提供一组所述目标数据的节点和提供一组所述目标算法的节点形成的组合;
选择子模块,用于根据每个组合的能力信息,选择一个目标组合,并将所述目标组合中提供一组所述目标数据的节点确定为所述第一目标节点,将所述目标组合中提供一组所述目标算法的节点确定为第二目标节点;
其中,所述组合的能力信息包括所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延、提供一组所述目标算法的节点执行所述目标算法所需的时长、提供一组所述目标算法的节点的缓存空间大小中的至少一项。
可选的,所述选择子模块具体用于:
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点的缓存空间中的最大值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点执行所述目 标算法所需的时长之和中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合的第一比值中的最小值对应的组合,作为所述目标组合,其中,所述第一比值为所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比;
或者
选择所述组合的第二比值中的最小值对应的组合,作为所述目标组合,所述第二比值为所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比。
可选的,所述任务处理装置,还包括:
拆分模块,用于根据所述网络拓扑结构中的节点的能力信息,将待执行的任务拆分为至少一个子任务,并将所述至少一个子任务中的一个确定为所述目标任务。
可选的,在所述目标数据包括视频流或者音频流的情况下,所述控制模块包括:
第一处理子模块,用于控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理;
其中,所述第一数据包包括预设时长的视频流或音频流。
可选的,所述任务处理装置还包括:
处理模块,用于在接收所述第二目标节点发送的处理后的所述第一数据包的过程中,控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第二数据包进行处理;
其中,所述第二数据包包括预设时长的视频流或音频流。
可选的,所述控制模块包括:
第一发送子模块,用于向所述第一目标节点发送第一指示信息,所述第一指示信息用于指示所述第一目标节点将所述目标数据发送给所述第二目标节点;
第二发送子模块,用于向所述第二目标节点发送第二指示信息,所述第二指示信息用于指示所述第二目标节点采用所述目标算法,对所述目标数据进行处理;
接收子模块,用于接收所述第二目标节点发送的采用所述目标算法对所述目标数据处理后获得的数据。
由上述可知,本发明实施例提供的任务处理装置,通过获取待执行的目标任务所需的目标数据和目标算法,并确定网络拓扑结构中能够提供目标数据的至少一个第一类节点以及能够执行目标算法的至少一个第二类节点,从而选出一个第一类节点和一个第二类节点,控制选出的第二类节点采用目标算法对选出的第一类节点提供的目标数据进行处理,实现对目标任务的执行。由此可见,本发明的实施例,将数据和算法分别分布到网络中,而不再将数据统一存储到需要执行目标任务的节点,也不再由需要执行目标任务节点自己执行目标算法,而是分配给具备目标算法的处理能力的节点去执行,即本发明的实施例,将分布式存储和分布式计算相结合,可以降低网络拓扑结构中单个节点的能力,从而降低单个节点的设计成本,进而降低整个网络拓扑结构的设计成本。
本发明的实施例还提供了一种任务处理装置,应用于网络拓扑结构,所述网络拓扑结构包括:至少一层网络结构,每一层所述网络结构包括多个按照预定方式连接的节点;如图10所示,该任务处理装置800包括:
第一控制模块801,用于控制第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址;其中,所述第一节点位于所述第一层网络结构中,所述第二节点为所述第一类节点或所述第二类节点;
第二控制模块802,用于在所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,控制所述第一层网络结构将所述第一相关参数转发给第二层网络结构;
第三控制模块803,用于控制所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,其中,所述第二节点的地址是所述第二层网络结构根据所述第一相关参数在所述第二层网络结构中对所述第二节点进行寻址后获得的;
第一传输模块804,用于控制所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数。
可选的,所述第一控制模块801具体用于:
控制所述第一层网络结构的第一节点在所述第一层网络结构中广播所述第一相关参数。
可选的,所述第二控制模块802具体用于:
控制所述第一层网络结构的第一节点在广播所述第一相关参数后的预设时间段内未接收到所述第二节点的地址时,向所述第一层网络结构的第三节点发送指示信息;
控制所述第一层网络结构的第三节点根据所述指示信息,将所述第一 相关参数转发给所述第二层网络结构的第四节点;
其中,所述第三节点与所述第四节点连接。
可选的,所述第三控制模块803具体用于:
控制所述第一层网络结构的第三节点接收所述第二层网络结构的第四节点发送的所述第二节点的地址;其中,所述第四节点发送的所述第二节点的地址是所述第四节点在所述第二层网络结构中广播所述第一相关参数后,接收到的所述第二节点发送的;
控制所述第一层网络结构的第一节点接收所述第一层网络结构的第三节点发送的所述第二节点的地址;其中,所述第三节点发送的所述第二节点的地址,是所述第四节点发送给所述第三节点的。
可选的,所述任务处理装置800还包括:
第二传输模块,用于控制所述第一层网络结构的第一节点接收所述第一层网络结构的所述第二节点发送的所述第二节点的地址。
可选的,所述第一层网络结构中设置有第一控制节点,所述第一控制节点中存储有所述第一层网络结构中的节点的能力信息;所述第一控制模块801具体用于:
控制所述第一层网络结构的第一节点向所述第一层网络结构的第一控制节点发送所述第一相关参数;
控制所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,对所述第二节点进行寻址。
可选的,所述第二层网络结构中设置有第二控制节点,所述第二控制节点中存储有所述第二层网络结构中的节点的能力信息;所述第二控制模块802具体用于:
控制所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:
控制所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,确定所述第一层网络结构中不存在所述第二节点时,所述第一层网络结构的第一控制节点向所述第二层网络结构的第二控制节点发送所述第一相关参数。
可选的,所述第三控制模块803具体用于:
控制所述第一层网络结构的第一控制节点接收所述第二层网络结构的第二控制节点发送的所述第二节点的地址,其中,所述第二控制节点发送的所述第二节点的地址是所述第二控制节点根据所述第一相关参数和所述第二层网络结构中的节点的能力信息确定的;
控制所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第二节点的地址。
可选的,所述任务处理装置800还包括:
第三传输模块,用于控制所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第一层网络结构的所述第二节点的地址;
其中,所述第一控制节点发送的所述第二节点的地址,是所述第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息确定的。
可选的,所述第一传输模块804具体用于:
控制所述第一节点通过所述第一层网络结构中所述第一节点到所述第三节点中的一条路径,向所述第三节点发送所述第二相关参数;
其中,所述第三节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第四节点,使得所述第四节点通过所述第二层网络结构中所述第四节点到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一传输模块804具体用于:
控制所述第一节点通过到所述第一控制节点中的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第二控制节点,使得所述第二控制节点通过到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一传输模块804具体用于:
控制所述第一节点通过所述第一层网络结构中所述第一节点到所述第二节点中的一条路径,向所述第二节点发送所述第二相关参数。
可选的,所述第一传输模块804具体用于:
控制所述第一节点通过到所述第一控制节点的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,通过到所述第二节点的一条路径,将所述第二相关参数发送给所述第二节点。
由上述可知,本发明实施例提供的任务处理装置,在第一节点所处的第一层网络结构中根据第一节点所需的目标内容的第一相关参数,对能够提供该目标内容的第二节点进行内容寻址,并在第一层网络结构中未寻址到第二节点时,直接将第一相关参数转发给第二层网络结构中,从而在第 二层网络结构中再次寻址,直到找到第二节点后,第一节点根据第二节点的地址向第二节点发送目标内容的第二相关参数。由此可知,本发明实施例的任务处理方法中,在对第二节点进行寻址的过程中,只在层内进行内容寻址,在层与层之间直接转发寻址所依据的参数,从而缩写了内容寻址的范围,减小了开销,并且,通过内容寻址方式,在一定程度上达到了安全性要求。
本发明实施例还提供了一种电子设备,如图11所示,包括处理器501、通信接口502、存储器503和通信总线504,其中,处理器501,通信接口502,存储器503通过通信总线504完成相互间的通信;
存储器503,用于存放计算机程序;
处理器501,用于执行存储器503上所存放的程序时,实现如下所述的任务处理方法中的步骤;通信接口502用于上述终端与其他设备之间的通信。
所述任务处理方法,应用于网络拓扑结构,所述网络拓扑结构包括多个节点;所述任务处理方法包括:
获取待执行的目标任务所需的目标数据和目标算法;
获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;
从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点;
控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
所述从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点,包括:
获取提供一组所述目标数据的节点和提供一组所述目标算法的节点形成的组合;
根据每个组合的能力信息,选择一个目标组合,并将所述目标组合中提供一组所述目标数据的节点确定为所述第一目标节点,将所述目标组合中提供一组所述目标算法的节点确定为第二目标节点;
其中,所述组合的能力信息包括所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延、提供一组所述目标算法的节点执行所述目标算法所需的时长、提供一组所述目标算法的节点的缓存空间大小中的至少一项。
可选的,所述根据每个组合的能力信息,选择一个目标组合,包括:
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标算法的节点的缓存空间中的最大值对应的组合,作为所述目标组合;
或者
选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点执行所述目标算法所需的时长之和中的最小值对应的组合,作为所述目标组合;
或者
选择所述组合的第一比值中的最小值对应的组合,作为所述目标组合,其中,所述第一比值为所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比;
或者
选择所述组合的第二比值中的最小值对应的组合,作为所述目标组合,所述第二比值为所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比。
可选的,所述获取待执行的目标任务所需的目标数据和目标算法之前,还包括:
根据所述网络拓扑结构中的节点的能力信息,将待执行的任务拆分为至少一个子任务,并将所述至少一个子任务中的一个确定为所述目标任务。
可选的,在所述目标数据包括视频流或者音频流的情况下,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:
控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理;
其中,所述第一数据包包括预设时长的视频流或音频流。
可选的,所述控制所述第二目标节点采用所述目标算法,对接收到的 所述第一目标节点发送的所述目标数据的第一数据包,进行处理之后,还包括:
在接收所述第二目标节点发送的处理后的所述第一数据包的过程中,控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第二数据包进行处理;
其中,所述第二数据包包括预设时长的视频流或音频流。
可选的,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:
向所述第一目标节点发送第一指示信息,所述第一指示信息用于指示所述第一目标节点将所述目标数据发送给所述第二目标节点;
向所述第二目标节点发送第二指示信息,所述第二指示信息用于指示所述第二目标节点采用所述目标算法,对所述目标数据进行处理;
接收所述第二目标节点发送的采用所述目标算法对所述目标数据处理后获得的数据。
可选的,所述网络拓扑结构包括:至少一层网络结构,每一层所述网络结构包括多个按照预定方式连接的节点;所述任务处理方法还包括:
第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址;其中,所述第一节点位于所述第一层网络结构中,所述第二节点为所述第一类节点或所述第二类节点;
所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构;
所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,其中,所述第二节点的地址是所述第二层网络结构根据所述第一相关参数在所述第二层网络结构中对所述第二节点进行寻址后获得的;
所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数。
可选的,所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:
所述第一层网络结构的第一节点在所述第一层网络结构中广播所述第一相关参数。
可选的,所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:
所述第一层网络结构的第一节点在广播所述第一相关参数后的预设时间段内未接收到所述第二节点的地址时,向所述第一层网络结构的第三节点发送指示信息;
所述第一层网络结构的第三节点根据所述指示信息,将所述第一相关参数转发给所述第二层网络结构的第四节点;
其中,所述第三节点与所述第四节点连接。
可选的,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:
所述第一层网络结构的第三节点接收所述第二层网络结构的第四节点发送的所述第二节点的地址;其中,所述第四节点发送的所述第二节点的地址是所述第四节点在所述第二层网络结构中广播所述第一相关参数后,接收到的所述第二节点发送的;
所述第一层网络结构的第一节点接收所述第一层网络结构的第三节点发送的所述第二节点的地址;其中,所述第三节点发送的所述第二节点的地址,是所述第四节点发送给所述第三节点的。
可选的,所述任务处理方法还包括:
所述第一层网络结构的第一节点接收所述第一层网络结构的所述第二节点发送的所述第二节点的地址。
可选的,所述第一层网络结构中设置有第一控制节点,所述第一控制节点中存储有所述第一层网络结构中的节点的能力信息;
所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:
所述第一层网络结构的第一节点向所述第一层网络结构的第一控制节点发送所述第一相关参数;
所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,对所述第二节点进行寻址。
可选的,所述第二层网络结构中设置有第二控制节点,所述第二控制节点中存储有所述第二层网络结构中的节点的能力信息;
所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:
所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,确定所述第一层网络结构中不存在所述第二节点时,所述第一层网络结构的第一控制节点向所述第二层网络结构的第二控制节点发送所述第一相关参数。
可选的,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:
所述第一层网络结构的第一控制节点接收所述第二层网络结构的第二控制节点发送的所述第二节点的地址,其中,所述第二控制节点发送的所述第二节点的地址是所述第二控制节点根据所述第一相关参数和所述第二层网络结构中的节点的能力信息确定的;
所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第二节点的地址。
可选的,所述任务处理方法还包括:
所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第一层网络结构的所述第二节点的地址;
其中,所述第一控制节点发送的所述第二节点的地址,是所述第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息确定的。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过所述第一层网络结构中所述第一节点到所述第三节点中的一条路径,向所述第三节点发送所述第二相关参数;
其中,所述第三节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第四节点,使得所述第四节点通过所述第二层网络结构中所述第四节点到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过到所述第一控制节点中的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第二控制节点,使得所述第二控制节点通过到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过所述第一层网络结构中所述第一节点到所述第二节点中的一条路径,向所述第二节点发送所述第二相关参数。
可选的,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:
所述第一节点通过到所述第一控制节点的一条路径,向所述第一节点发送所述第二相关参数;
其中,所述第一控制节点接收到所述第二相关参数后,通过到所述第二节点的一条路径,将所述第二相关参数发送给所述第二节点。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral Component Interconnect,简称PCI)总线或扩展工业标准结构(Extended Industry Standard Architecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。存储器具有用于执行上述方法中的任何方法步骤的程序代码1031的存储空间。例如,用于程序代码的存储空间可以包括分别用于实现上面的方法中的各种步骤的各个程序代码1031。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘,紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为如参考图12所述的便携式或者固定存储单元。该存储单元可以具有与图11的电子设备中的存储器503类似布置的存储段、存储空间等。程序代码可以例如以适当形式进行压缩。通常,存储单元包括计算机可读代码,即可以由例如诸如501之类的处理器读取的代码,这些代码当由电子设备运行时,导致该电子设备执行上面所描述的方法中的各个步骤。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application Specific Integrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的任务处理方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机 上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (25)
- 一种任务处理方法,其特征在于,应用于网络拓扑结构,所述网络拓扑结构包括多个节点;所述任务处理方法包括:获取待执行的目标任务所需的目标数据和目标算法;获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点;控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
- 根据权利要求1所述的任务处理方法,其特征在于,所述从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点,包括:获取提供一组所述目标数据的节点和提供一组所述目标算法的节点形成的组合;根据每个组合的能力信息,选择一个目标组合,并将所述目标组合中提供一组所述目标数据的节点确定为所述第一目标节点,将所述目标组合中提供一组所述目标算法的节点确定为第二目标节点;其中,所述组合的能力信息包括所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延、提供一组所述目标算法的节点执行所述目标算法所需的时长、提供一组所述目标算法的节点的缓存空间大小中的至少一项。
- 根据权利要求2所述的任务处理方法,其特征在于,所述根据每个组合的能力信息,选择一个目标组合,包括:选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延中的最小值对应的组合,作为所述目标组合;或者选择所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长中的最小值对应的组合,作为所述目标组合;或者选择所述组合中提供一组所述目标算法的节点的缓存空间中的最大值对应的组合,作为所述目标组合;或者选择所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点执行所述目标算法所需的时长之和中的最小值对应的组合,作为所述目标组合;或者选择所述组合的第一比值中的最小值对应的组合,作为所述目标组合,其中,所述第一比值为所述组合中提供一组所述目标数据的节点到提供一组所述目标算法的节点的时延,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比;或者选择所述组合的第二比值中的最小值对应的组合,作为所述目标组合,所述第二比值为所述组合中提供一组所述目标算法的节点执行所述目标算法所需的时长,与该组合中的提供一组所述目标算法的节点的缓存空间大小的数值之比。
- 根据权利要求1所述的任务处理方法,其特征在于,所述获取待执行的目标任务所需的目标数据和目标算法之前,还包括:根据所述网络拓扑结构中的节点的能力信息,将待执行的任务拆分为至少一个子任务,并将所述至少一个子任务中的一个确定为所述目标任务。
- 根据权利要求1所述的任务处理方法,其特征在于,在所述目标数据包括视频流或者音频流的情况下,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理;其中,所述第一数据包包括预设时长的视频流或音频流。
- 根据权利要求5所述的任务处理方法,其特征在于,所述控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第一数据包,进行处理之后,还包括:在接收所述第二目标节点发送的处理后的所述第一数据包的过程中,控制所述第二目标节点采用所述目标算法,对接收到的所述第一目标节点发送的所述目标数据的第二数据包进行处理;其中,所述第二数据包包括预设时长的视频流或音频流。
- 根据权利要求1所述的任务处理方法,其特征在于,所述控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理,包括:向所述第一目标节点发送第一指示信息,所述第一指示信息用于指示所述第一目标节点将所述目标数据发送给所述第二目标节点;向所述第二目标节点发送第二指示信息,所述第二指示信息用于指示所述第二目标节点采用所述目标算法,对所述目标数据进行处理;接收所述第二目标节点发送的采用所述目标算法对所述目标数据处理后获得的数据。
- 根据权利要求1所述的任务处理方法,其特征在于,所述网络拓扑结构包括至少一层网络结构,每一层所述网络结构包括多个按照预定方式连接的节点;所述获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点之前,还包括:第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址;其中,所述第一节点位于所述第一层网络结构中,所述第二节点为所述第一类节点或所述第二类节点;所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构;所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,其中,所述第二节点的地址是所述第二层网络结构根据所述第一相关参数在所述第二层网络结构中对所述第二节点进行寻址后获得的;所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数。
- 根据权利要求8所述的任务处理方法,其特征在于,所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:所述第一层网络结构的第一节点在所述第一层网络结构中广播所述第一相关参数。
- 根据权利要求9所述的任务处理方法,其特征在于,所述第一层网 络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:所述第一层网络结构的第一节点在广播所述第一相关参数后的预设时间段内未接收到所述第二节点的地址时,向所述第一层网络结构的第三节点发送指示信息;所述第一层网络结构的第三节点根据所述指示信息,将所述第一相关参数转发给所述第二层网络结构的第四节点;其中,所述第三节点与所述第四节点连接。
- 根据权利要求10所述的任务处理方法,其特征在于,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:所述第一层网络结构的第三节点接收所述第二层网络结构的第四节点发送的所述第二节点的地址;其中,所述第四节点发送的所述第二节点的地址是所述第四节点在所述第二层网络结构中广播所述第一相关参数后,接收到的所述第二节点发送的;所述第一层网络结构的第一节点接收所述第一层网络结构的第三节点发送的所述第二节点的地址;其中,所述第三节点发送的所述第二节点的地址,是所述第四节点发送给所述第三节点的。
- 根据权利要求9所述的任务处理方法,其特征在于,还包括:所述第一层网络结构的第一节点接收所述第一层网络结构的所述第二节点发送的所述第二节点的地址。
- 根据权利要求8所述的任务处理方法,其特征在于,所述第一层网络结构中设置有第一控制节点,所述第一控制节点中存储有所述第一层网络结构中的节点的能力信息;所述第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址,包括:所述第一层网络结构的第一节点向所述第一层网络结构的第一控制节点发送所述第一相关参数;所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,对所述第二节点进行寻址。
- 根据权利要求13所述的任务处理方法,其特征在于,所述第二层网络结构中设置有第二控制节点,所述第二控制节点中存储有所述第二层网 络结构中的节点的能力信息;所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,所述第一层网络结构将所述第一相关参数转发给第二层网络结构,包括:所述第一层网络结构的第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息,确定所述第一层网络结构中不存在所述第二节点时,所述第一层网络结构的第一控制节点向所述第二层网络结构的第二控制节点发送所述第一相关参数。
- 根据权利要求14所述的任务处理方法,其特征在于,所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,包括:所述第一层网络结构的第一控制节点接收所述第二层网络结构的第二控制节点发送的所述第二节点的地址,其中,所述第二控制节点发送的所述第二节点的地址是所述第二控制节点根据所述第一相关参数和所述第二层网络结构中的节点的能力信息确定的;所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第二节点的地址。
- 根据权利要求13所述的任务处理方法,其特征在于,还包括:所述第一层网络结构的第一节点接收所述第一层网络结构的第一控制节点发送的所述第一层网络结构的所述第二节点的地址;其中,所述第一控制节点发送的所述第二节点的地址,是所述第一控制节点根据所述第一相关参数和所述第一层网络结构中的节点的能力信息确定的。
- 根据权利要求11所述的任务处理方法,其特征在于,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:所述第一节点通过所述第一层网络结构中所述第一节点到所述第三节点中的一条路径,向所述第三节点发送所述第二相关参数;其中,所述第三节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第四节点,使得所述第四节点通过所述第二层网络结构中所述第四节点到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
- 根据权利要求15所述的任务处理方法,其特征在于,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目 标内容的第二相关参数,包括:所述第一节点通过到所述第一控制节点中的一条路径,向所述第一节点发送所述第二相关参数;其中,所述第一控制节点接收到所述第二相关参数后,将所述第二相关参数转发给所述第二层网络结构的第二控制节点,使得所述第二控制节点通过到所述第二节点的一条路径,将所述第二相关参数转发给所述第二节点。
- 根据权利要求12所述的任务处理方法,其特征在于,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:所述第一节点通过所述第一层网络结构中所述第一节点到所述第二节点中的一条路径,向所述第二节点发送所述第二相关参数。
- 根据权利要求16所述的任务处理方法,其特征在于,所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数,包括:所述第一节点通过到所述第一控制节点的一条路径,向所述第一节点发送所述第二相关参数;其中,所述第一控制节点接收到所述第二相关参数后,通过到所述第二节点的一条路径,将所述第二相关参数发送给所述第二节点。
- 一种任务处理装置,其特征在于,应用于网络拓扑结构,所述网络拓扑结构包括多个节点;所述任务处理装置包括:第一获取模块,用于获取待执行的目标任务所需的目标数据和目标算法;第二获取模块,用于获取所述网络拓扑结构中,能够提供所述目标数据的至少一个第一类节点,以及能够执行所述目标算法的至少一个第二类节点;选择模块,用于从所述至少一个第一类节点中选择提供一组所述目标数据的节点作为第一目标节点,并从所述至少一个第二类节点中选择提供一组所述目标算法的节点作为第二目标节点;控制模块,用于控制所述第二目标节点采用所述目标算法,对所述第一目标节点中的所述目标数据进行处理。
- 根据权利要求21所述的任务处理装置,其特征在于,所述网络拓扑结构包括:至少一层网络结构,每一层所述网络结构包括多个按照预定方 式连接的节点;所述任务处理装置还包括:第一控制模块,用于控制第一层网络结构根据第一节点所需的目标内容的第一相关参数,在所述第一层网络结构中对能够提供所述目标内容的第二节点进行寻址;其中,所述第一节点位于所述第一层网络结构中,所述第二节点为所述第一类节点或所述第二类节点;第二控制模块,用于在所述第一层网络结构未在所述第一层网络结构中寻址到所述第二节点时,控制所述第一层网络结构将所述第一相关参数转发给第二层网络结构;第三控制模块,用于控制所述第一层网络结构接收所述第二层网络结构发送的所述第二节点的地址,其中,所述第二节点的地址是所述第二层网络结构根据所述第一相关参数在所述第二层网络结构中对所述第二节点进行寻址后获得的;第一传输模块,用于控制所述第一层网络结构的第一节点根据所述第二节点的地址,向所述第二节点发送所述目标内容的第二相关参数。
- 一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述计算机程序被所述处理器执行时实现如权利要求1-20中任一项所述的任务处理方法的步骤。
- 一种计算机程序,包括计算机可读代码,当所述计算机可读代码在计算处理设备上运行时,导致所述计算处理设备执行根据权利要求1-20中的任一个所述的任务处理方法。
- 一种计算机可读存储介质,其上存储有如权利要求24所述的计算机程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/794,457 US11706097B2 (en) | 2020-01-23 | 2021-01-22 | Task processing method applied to network topology, electronic device and storage medium |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010076231.6A CN110932972B (zh) | 2020-01-23 | 2020-01-23 | 一种数据传输方法、装置及电子设备 |
CN202010076231.6 | 2020-01-23 | ||
CN202010076228.4 | 2020-01-23 | ||
CN202010076228.4A CN110928692B (zh) | 2020-01-23 | 2020-01-23 | 一种任务处理方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2021148014A1 true WO2021148014A1 (zh) | 2021-07-29 |
Family
ID=76992040
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/CN2021/073405 WO2021148014A1 (zh) | 2020-01-23 | 2021-01-22 | 一种任务处理方法、装置及电子设备 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11706097B2 (zh) |
WO (1) | WO2021148014A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114710485A (zh) * | 2022-02-21 | 2022-07-05 | 联想(北京)有限公司 | 处理方法和处理装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106611013A (zh) * | 2015-10-27 | 2017-05-03 | 中国电信股份有限公司 | 信息查询方法及系统 |
CN109918184A (zh) * | 2019-03-01 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 图片处理系统、方法及相关装置和设备 |
US20190220205A1 (en) * | 2018-01-12 | 2019-07-18 | Robin Systems, Inc. | Job Manager For Deploying A Bundled Application |
CN110932972A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种数据传输方法、装置及电子设备 |
CN110928694A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种计算机系统 |
CN110928692A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种任务处理方法、装置及电子设备 |
CN111444017A (zh) * | 2020-03-27 | 2020-07-24 | 北京金山云网络技术有限公司 | 多媒体数据处理方法、装置、系统、电子设备及存储介质 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7685254B2 (en) | 2003-06-10 | 2010-03-23 | Pandya Ashish A | Runtime adaptable search processor |
CN100499539C (zh) | 2004-07-26 | 2009-06-10 | 毛德操 | 在互联网中按路径寻址和路由的方法 |
CN101729387A (zh) | 2008-10-24 | 2010-06-09 | 华为技术有限公司 | 内容节点双向聚类的系统、装置及方法 |
CN101834802B (zh) | 2010-05-26 | 2012-08-08 | 华为技术有限公司 | 转发数据包的方法及装置 |
CN103309738B (zh) | 2013-05-31 | 2016-12-28 | 中国联合网络通信集团有限公司 | 用户作业调度方法及装置 |
US9426060B2 (en) | 2013-08-07 | 2016-08-23 | International Business Machines Corporation | Software defined network (SDN) switch clusters having layer-3 distributed router functionality |
CN104731647B (zh) | 2015-03-31 | 2018-02-09 | 北京奇艺世纪科技有限公司 | 任务处理方法及系统 |
US20160337251A1 (en) | 2015-05-14 | 2016-11-17 | Cisco Technology, Inc. | Predictive egress packet classification for quality of service |
CN105893497A (zh) | 2016-03-29 | 2016-08-24 | 杭州数梦工场科技有限公司 | 一种任务处理方法和装置 |
CN108255864A (zh) | 2016-12-29 | 2018-07-06 | 广东中科遥感技术有限公司 | 基于分布式存储和分布式计算的影像地图服务发布方法 |
CN106713944A (zh) * | 2016-12-30 | 2017-05-24 | 北京奇虎科技有限公司 | 一种流数据任务的处理方法和装置 |
US10397263B2 (en) | 2017-04-25 | 2019-08-27 | Futurewei Technologies, Inc. | Hierarchical pattern matching for deep packet analysis |
US10728091B2 (en) * | 2018-04-04 | 2020-07-28 | EMC IP Holding Company LLC | Topology-aware provisioning of hardware accelerator resources in a distributed environment |
-
2021
- 2021-01-22 US US17/794,457 patent/US11706097B2/en active Active
- 2021-01-22 WO PCT/CN2021/073405 patent/WO2021148014A1/zh active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106611013A (zh) * | 2015-10-27 | 2017-05-03 | 中国电信股份有限公司 | 信息查询方法及系统 |
US20190220205A1 (en) * | 2018-01-12 | 2019-07-18 | Robin Systems, Inc. | Job Manager For Deploying A Bundled Application |
CN109918184A (zh) * | 2019-03-01 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 图片处理系统、方法及相关装置和设备 |
CN110932972A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种数据传输方法、装置及电子设备 |
CN110928694A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种计算机系统 |
CN110928692A (zh) * | 2020-01-23 | 2020-03-27 | 飞诺门阵(北京)科技有限公司 | 一种任务处理方法、装置及电子设备 |
CN111444017A (zh) * | 2020-03-27 | 2020-07-24 | 北京金山云网络技术有限公司 | 多媒体数据处理方法、装置、系统、电子设备及存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114710485A (zh) * | 2022-02-21 | 2022-07-05 | 联想(北京)有限公司 | 处理方法和处理装置 |
CN114710485B (zh) * | 2022-02-21 | 2023-10-27 | 联想(北京)有限公司 | 处理方法和处理装置 |
Also Published As
Publication number | Publication date |
---|---|
US20230053663A1 (en) | 2023-02-23 |
US11706097B2 (en) | 2023-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111131379B (zh) | 一种分布式流量采集系统和边缘计算方法 | |
CN110928694B (zh) | 一种计算机系统 | |
CN101006727B (zh) | 分布式多媒体服务器系统和多媒体信息发布方法 | |
CN102377640B (zh) | 一种报文处理装置和报文处理方法、及预处理器 | |
CN105978762B (zh) | 冗余以太网数据传输设备、系统及方法 | |
CN111064591B (zh) | 数据汇聚方法、装置、设备、存储介质和系统 | |
CN112714164A (zh) | 一种物联网系统及其任务调度方法 | |
WO2021148014A1 (zh) | 一种任务处理方法、装置及电子设备 | |
CN110932972B (zh) | 一种数据传输方法、装置及电子设备 | |
CN110932920B (zh) | 一种网络拓扑结构 | |
CN114710571B (zh) | 数据包处理系统 | |
CN114945032A (zh) | 电力物联网终端数据接入系统、方法、装置、设备及介质 | |
WO2021143183A1 (zh) | 一种部署虚拟机的方法及相关装置 | |
CN108737455B (zh) | 网络业务识别装置及方法 | |
WO2021148015A1 (zh) | 一种计算机系统 | |
CN112052104A (zh) | 基于多机房实现的消息队列的管理方法及电子设备 | |
CN109582242B (zh) | 级联存储阵列系统的地址确定方法、装置、电子设备 | |
CN100361084C (zh) | 用于利用门管理器维护实体顺序的方法和装置 | |
RU2794969C1 (ru) | Способ, устройство и электронное устройство для обработки задач | |
CN114205172B (zh) | 一种表项下发方法及一种报文转发方法 | |
CN112994917B (zh) | 网络管理方法和网络管理装置 | |
CN103491079B (zh) | 一种报文生成装置、服务器以及方法 | |
CN110113261B (zh) | 跨系统数据交换分级分组路由的处理方法及装置 | |
CN113918504A (zh) | 一种隔离组的实现方法及装置 | |
RU2800966C1 (ru) | Компьютерная система |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 21744421 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 21744421 Country of ref document: EP Kind code of ref document: A1 |