CN110764922A - 一种数据的处理方法、单板和计算机存储介质 - Google Patents

一种数据的处理方法、单板和计算机存储介质 Download PDF

Info

Publication number
CN110764922A
CN110764922A CN201810829042.4A CN201810829042A CN110764922A CN 110764922 A CN110764922 A CN 110764922A CN 201810829042 A CN201810829042 A CN 201810829042A CN 110764922 A CN110764922 A CN 110764922A
Authority
CN
China
Prior art keywords
data processing
board
processing task
single board
boards
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201810829042.4A
Other languages
English (en)
Inventor
吴建华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201810829042.4A priority Critical patent/CN110764922A/zh
Publication of CN110764922A publication Critical patent/CN110764922A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Hardware Redundancy (AREA)

Abstract

本发明实施例公开了一种数据的处理方法,该方法应用于一电信设备的单板中,其中,该单板与至少一个其他单板之间建立有通信连接,该方法包括:获取数据处理任务,根据预设的计算量评估模型,对数据处理请求进行评估,得到数据处理任务的计算量,确定数据处理任务的计算量大于预设的计算量阈值时,从其他单板中获取目标单板,获取数据处理任务所关联的数据处理算法,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板,接收数据处理结果。本发明实施例还同时公开了一种单板和计算机存储介质。

Description

一种数据的处理方法、单板和计算机存储介质
技术领域
本发明涉及电信设备的单板间的数据处理技术,尤其涉及一种数据的处理方法、单板和计算机存储介质。
背景技术
现今,同步数字体系技术(SDH,Synchronous Digital Hierarchy)、多业务传送平台(MSTP,Multi-Service Transfer Platform)、分组传送网(PTN,Packet TransportNetwork)、光传送网(OTN,Optical Transport Network)、电信级交换机、路由器等常用于数据通信设备中,数据通信设备已经在大容量、高可靠性、分层协作、高分发、即时响应等方面达到了前所未有的高度与复杂性,已经不是单单一两块单板就可以完成的事情了;目前,数据通信设备普遍采用的架构是,一块或两块主控单板(其中一块主控单板作为冗余备份),外加一系列业务单板共同组成,实现控制面与转发面的分离与独立工作,但同时又必须充分合作,快速交互信息,形成既独立又协作的整体。
随着电信级设备的复杂度提升,其管理面及控制面对于处理能力的要求越来越高,一次倒换可能涉及数十千级路由及控制协议的重新运算,短时间内对处理器的冲击非常大;除此之外,大业务量的配置、大量告警性能数据的处理等,都是处理器的高耗应用,为了提高处理器的性能,要么更换性能更高更加昂贵的处理器,要么降低产品的规格指标,要么牺牲设备的数据处理效率,或者在成本与性能及效率三者之间取得某种平衡与妥协;然而,设备厂商出于成本的考虑,负责管理面及控制面的处理器不能无限制选择最高规格的产品,因此,突发式的海量计算需求与有限的处理器性能与成本之间,存在着一定的矛盾;由此可以看出,现有技术中存在不增加成本的基础上电信设备的处理效率低下的技术问题。
发明内容
有鉴于此,本发明实施例期望提供一种数据的处理的方法、单板和计算机存储介质,能够解决如何在不增加成本的基础上提高电信设备的处理效率。
为达到上述目的,本发明的技术方案是这样实现的:
第一方面,本发明实施例提供一种数据的处理方法,所述方法应用于一点心设备的单板中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述方法包括:
获取数据处理任务;其中,所述数据处理任务是由所述单板根据接收到的数据处理请求生成的;根据预设的计算量评估模型,对所述数据处理任务进行评估,得到所述数据处理任务的计算量;确定所述数据处理任务的计算量大于预设的计算量阈值时,从所述其他单板中获取目标单板;获取所述数据处理任务所关联的数据处理算法;将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板;其中,所述数据处理任务和所述数据处理任务所关联的数据处理算法用于所述目标单板计算得到数据处理结果;接收所述数据处理结果。
在上述方案中,所述从所述其他单板中获取目标单板,包括:向所述其他单板发送召集请求;其中,所述召集请求用于触发所述其他单板返回所述其他单板的处理器的性能参数;接收所述其他单板的处理器的性能参数;将处理器的性能参数大于等于预设的性能参数的单板,确定为所述目标单板。
在上述方案中,在根据接收到的数据处理请求,生成数据处理任务之前,所述方法还包括:确定候选单板列表;所述从所述其他单板中获取目标单板,包括:将所述其他单板中属于所述候选单板列表的单板,确定为所述目标单板。
在上述方案中,所述确定候选单板列表,包括:接收所述其他单板发来的处理器的性能参数;将所述其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到所述其他单板的处理器的处理能力值;将所述处理能力值大于等于处理能力阈值的其他单板,确定为所述候选单板列表。
在上述方案中,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板,包括:对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板;其中,所述目标单板的数目大于等于所述子数据处理任务的数目。
在上述方案中,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板,包括:从所述目标单板中选取出预设数目的单板作为主单板,并从所述目标单板中除所述主单板以外的单板中,为所述主单板设置备用单板;根据所述预设数目,对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;其中,所述主单板的数目大于等于所述子数据处理请求的数目;若所述目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
Figure BDA0001743132130000031
其中,M为大于等于4的整数。
在上述方案中,所述将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板,包括:根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;或者,根据所述单板的路由路径由远及近的顺序,将所述子数据处理任务和所述子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
第二方面,本发明实施例提供一种数据的处理方法,所述方法应用于一电信设备的单板中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述方法包括:接收来自所述其他单板的数据处理任务和所述数据处理任务所关联的数据处理算法;其中,所述数据处理任务为所述其他单板根据接收到的数据处理请求所生成的;根据所述数据处理任务和所述数据处理任务所关联的数据处理算法,得到数据处理结果;将所述数据处理结果返回至所述其他单板;其中,所述数据处理结果用于所述其他单板响应所述数据处理请求。
在上述方案中,所述数据处理任务和所述数据处理任务所关联的数据处理算法为:所述其他单板根据接收到的数据处理请求所生成的数据处理任务和所生成的数据处理任务所关联的数据处理算法进行拆分而得到的;对应地,所述数据处理结果用于所述其他单板确定所生成的数据处理任务对应的数据处理结果,用所生成的数据处理任务对应的数据处理结果响应所述数据处理请求。
第三方面,本发明实施例提供一种单板,所述单板设置于电信设备中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述单板包括:处理器、存储器及通信总线;所述通信总线用于实现处理器和存储器之间的连接通信;所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:
获取数据处理任务;其中,所述数据处理任务是由所述单板根据接收到的数据处理请求生成的;根据预设的计算量评估模型,对所述数据处理任务进行评估,得到所述数据处理任务的计算量;确定所述数据处理任务的计算量大于预设的计算量阈值时,从所述其他单板中获取目标单板;获取所述数据处理任务所关联的数据处理算法;将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板;其中,所述数据处理任务和所述数据处理任务所关联的数据处理算法用于所述目标单板计算得到数据处理结果;接收所述数据处理结果。
在上述方案中,所述从所述其他单板中获取目标单板中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:向所述其他单板发送召集请求;其中,所述召集请求用于触发所述其他单板返回所述其他单板的处理器的性能参数;接收所述其他单板的处理器的性能参数;将处理器的性能参数大于等于预设的性能参数的单板,确定为所述目标单板。
在上述方案中,在根据接收到的数据处理请求,生成数据处理任务之前,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:确定候选单板列表;所述从所述其他单板中获取目标单板中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:将所述其他单板中属于所述候选单板列表的单板,确定为所述目标单板。
在上述方案中,所述确定候选单板列表中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:接收所述其他单板发来的处理器的性能参数;将所述其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到所述其他单板的处理器的处理能力值;将所述处理能力值大于等于处理能力阈值的其他单板,确定为所述候选单板列表。
在上述方案中,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板;其中,所述目标单板的数目大于等于所述子数据处理任务的数目。
在上述方案中,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:从所述目标单板中选取出预设数目的单板作为主单板,并从所述目标单板中除所述主单板以外的单板中,为所述主单板设置备用单板;根据所述预设数目,对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;其中,所述主单板的数目大于等于所述子数据处理请求的数目;若所述目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
其中,M为大于等于4的整数。
在上述方案中,所述将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板中,所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;或者,根据所述单板的路由路径由远及近的顺序,将所述子数据处理任务和所述子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
第四方面,本发明实施例还提供一种单板,所述单板设置于电信设备中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述单板包括:处理器、存储器及通信总线;所述通信总线用于实现处理器和存储器之间的连接通信;所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:
接收来自所述其他单板的数据处理任务和所述数据处理任务所关联的数据处理算法;其中,所述数据处理任务为所述其他单板根据接收到的数据处理请求所生成的;根据所述数据处理任务和所述数据处理任务所关联的数据处理算法,得到数据处理结果;将所述数据处理结果返回至所述其他单板;其中,所述数据处理结果用于所述其他单板响应所述数据处理请求。
在上述方案中,所述数据处理任务和所述数据处理任务所关联的数据处理算法为:所述其他单板根据接收到的数据处理请求所生成的数据处理任务和所生成的数据处理任务所关联的数据处理算法进行拆分而得到的;对应地,所述数据处理结果用于所述其他单板确定所生成的数据处理任务对应的数据处理结果,用所生成的数据处理任务对应的数据处理结果响应所述数据处理请求。
第五方面,本发明实施例还提供一种计算机存储介质,所述计算机介质存储有数据的处理程序,所述数据的处理程序被处理器执行时实现如上述一个或多个实施例所述的数据的处理方法的步骤。
本发明实施例所提供的数据的处理方法、单板和计算机存储介质,该方法应用于电信设备的单板中,该单板与至少一个其他单板之间建立有通信连接,该方法包括:首先,获取数据处理任务,根据预设的计算量评估模型,对数据处理任务进行评估,得到数据处理任务的计算量,这样,便可以知晓该数据处理任务所需要的计算量,然后,确定数据处理任务的计算量大于预设的计算量阈值时,即该单板中存在较大的计算量,所以,从其他单板中获取目标单板,再获取数据处理任务所关联的数据处理算法,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板,使得目标单板根据数据处理任务和数据处理任务所关联的数据处理算法计算得到数据处理结果,最后,接收数据处理结果;也就是说,本发明实施例中,通过对数据处理任务进行评估,并将评估出的计算量与计算量阈值进行比较,通过比较结果确定该单板中存在较大的计算量时,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板进行计算,也就是用其他单板为电信设备中具有较大计算量的单板分担计算量,使得单板之间协同工作,从而在不改变网络结构和不增加成本的基础上提高了电信设备的处理效率。
附图说明
图1为本发明实施例中电信设备系统的结构示意图;
图2为本发明实施例中一种可选的数据的处理方法的流程交互示意图;
图3为本发明实施例中电信设备系统的网络拓扑图;
图4为本发明实施例中一种可选的数据的处理方法的流程示意图;
图5为本发明实施例中另一种可选的数据的处理方法的流程交互示意图;
图6为本发明实施例中数据的处理方法的一种可选的流程示意图;
图7为本发明实施例中数据的处理方法的另一种可选的流程示意图;
图8为本发明实施例中一种单板的结构示意图;
图9为本发明实施例中另一种单板的结构示意图;
图10为本发明实施例中计算机存储介质的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
本发明实施例提供一种数据的处理方法,该方法可以应用于电信设备系统中,图1为本发明实施例中电信设备系统的结构示意图,如图1所示,该电信设备系统可以包括:电信设备101和电信设备102,电信设备101可以包括:单板11、单板12和单板13,电信设备102可以包括单板14、单板15和单板16,其中,电信设备101与电信设备102之间建立有通信连接,电信设备101和电信设备102中的单板之间分别建立有通信连接。
其中,上述单板可以为主控单板,或者交换单板,或者业务单板,这里,本发明实施例不作具体限定。
上述单板上都包括处理器,也就是说,每块单板都具有计算能力,在电信设备的内部,单板之间可以通过内部总线进行连接,电信设备之间的单板可以通过数据通信网络(DCN,Data Communication Network)进行连接,使得电信设备之间形成电信设备系统。
本发明实施例提供一种数据的处理方法,该方法可以应用于上述图1中的电信设备系统中任意一个电信设备的任意一个单板中,其中,该单板与至少一个其他单板之间建立有通信连接;其中,其他单板可以为与该单板在同一电信设备中的一个单板,也可以为不同电信设备中的一个单板,这里,本发明实施例不作具体限定。
图2为本发明实施例中一种可选的数据的处理方法的流程交互示意图,如图2所示,上述数据的处理方法可以包括:
S201:获取数据处理任务;
其中,上述数据处理任务是由所述单板根据接收到的数据处理请求生成的;在电信设备系统中各个单板处理各自的处理任务,当电信设备中的某个单板具有较大计算量的处理任务时,若仍然按照每个单板各自处理各自的任务,针对计算量较大的单板来说,处理效率低下,针对计算量较小的单板来说,处理器的利用率较低。
为了提高整个电信设备系统中单板的处理效率,当单板接收到来自自身某个应用进程的数据处理请求的指令时,根据数据处理请求生成数据处理任务,为了完成该数据处理任务,其中,上述数据处理任务可以是可拆分的,也可以是不可拆分的,这里,本发明实施例不作具体限定。
S202:单板根据预设的计算量评估模型,对数据处理任务进行评估,得到数据处理任务的计算量;
S201中单板在生成数据处理任务之后,将该数据处理任务和该数据处理任务对应的经验数据输入计算量的评估模型中,该计算量的评估模型用于对数据处理任务进行评估,可以得到数据处理任务的计算量,这样,就可以获知单板处理该数据处理任务所需的计算量。其中,上述计算量的评估模型为预先设置于各个单板中。
S203:单板确定数据处理任务的计算量大于预设的计算量阈值时,从其他单板中获取目标单板;
S203中将数据处理任务的计算量与预设的计算量阈值进行比较,若数据处理任务的计算量大于预设的计算量阈值时,说明该数据处理请求需要较大的计算量,属于大计算量需求的数据处理任务,需要借助其他单板协助,若数据处理任务的计算量小于等于预设的计算量阈值时,说明该数据处理请求的计算量较小,单板能够处理该数据处理任务。
在实际应用中,上述大计算量需求的数据处理任务可以包括:大业务量配置,主备倒换或端口切换等引起的控制面协议大量集中运算,大量告警性能检测与上报等等。
这里,考虑到其他单板有可能能够处理该数据处理任务,也有可能不能够处理该数据处理任务,所以,在数据处理任务的计算量大于预设的计算量阈值时,从其他单板中获取目标单板,以实现将大计算量的数据处理任务发送至具有处理能力的目标单板中。
为了从其他单板中获取到目标单板,在一种可选的实施例中,S203中从其他单板中获取目标单板,可以包括:
向其他单板发送召集请求;其中,召集请求用于触发其他单板返回其他单板的处理器的性能参数;
接收其他单板的处理器的性能参数;
将处理器的性能参数大于等于预设的性能参数的单板,确定为目标单板。
具体来说,为了选取出具有处理能力的目标单板,先向其他单板发送召集请求,其他单板在接收到召集请求之后,统计自身的处理器的性能参数。
其中,该性能参数可以为中央处理器的主频,和/或,内存的剩余值,还可以为处理器的空闲值,该空闲值用于表征该处理器使用的频繁程度;还可以为通信代价,其他单板与该单板的通信代价用于表征其他单板与该单板进行通信时所耗费的通信资源的量;这里,本发明实施例不做具体限定。
其他单板在获取到处理器的性能参数之后,其他单板将自身的处理器的性能参数返回至该单板,使得该单板获知每个其他单板的处理器的性能参数。
该单板在接收到处理器的性能参数之后,将每个处理器的性能参数与预设的性能参数进行比较,针对处理器的性能参数小于预设的性能参数的单板,认为此类单板不具有处理大计算量的数据处理任务的能力;针对处理器的性能参数大于等于预设的性能参数的单板,认为大于等于预设的性能参数的单板具有处理大计算量的数据处理任务的能力,所以将此类单板确定为目标单板。
这样,便可以确定出目标单板,以为该单板分担数据处理任务。
为了从其他单板中获取目标单板,在一种可选的实施例中,在S201之前,上述方法还包括:
确定候选单板列表;
对应的,S203中从其他单板中获取目标单板,可以包括:将其他单板中属于候选单板列表的单板,确定为目标单板。
这里,通过预先获取到的候选单板列表从其他单板中获取目标单板,其中,为了获取到候选单板列表,在一种可选的实施例中,确定候选单板列表,可以包括:
接收其他单板发来的处理器的性能参数;
将其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到其他单板的处理器的处理能力值;
将处理能力值大于等于处理能力阈值的其他单板,确定为候选单板列表。
具体来说,接收其他单板发来的处理器的性能参数,例如,其他单板的处理器的空闲值和其他单板与该单板的通信代价,该空闲值用于表征该处理器使用的频繁程度,其他单板与该单板的通信代价用于表征其他单板与该单板进行通信时所耗费的通信资源的量。
在接收到其他单板发来的处理器的性能参数之后,获取每种性能参数的权重值,然后,可以将其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到其他单板的处理器的处理能力值,该其他单板的处理器的处理能力值可以表征该其他单板的处理器的处理能力。
为了形成候选单板列表,可以预先设置处理能力阈值,最后,用处理能力值大于等于处理能力阈值的其他单板,形成候选单板列表。
S204:单板获取数据处理任务所关联的数据处理算法;
S205:单板将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板;
这里,为了使得目标单板能够处理接收到的数据处理任务,在S204和S205中,还需要单板先确定出数据处理任务所关联的数据处理算法,以便将数据处理任务和数据处理任务所关联的数据处理算法一同发送至目标单板,使得目标单板能够根据数据处理任务和数据处理任务所关联的数据处理算法计算得到数据处理结果。
为了提高电信设备系统中单板的数据处理效率,在一种可选的实施例中,S205可以包括:
对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;
为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;
将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板;
其中,目标单板的数目大于等于子数据处理任务的数目。
具体来说,当数据处理任务可拆分时,先对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,这样,可以得到至少两个子数据处理任务,以及每个子数据处理任务所关联的数据处理算法,为了提高数据处理效率,可以将为每个子数据处理任务和每个子数据处理任务所关联的数据处理算法分配目标单板,使得每个子数据处理任务同时进行计算,这样,可以提高数据处理任务的计算效率。
这里,需要说明的是,目标单板的数目大于等于子数据处理任务的数目,使得每个子数据处理任务都可以分配给一个目标单板,进而提高了数据处理效率。
由于目标单板在处理数据的过程中,若每个子数据处理任务是分配一个目标单板,那么,当该目标单板根据接收到的子数据处理任务和接收到的子数据处理任务所关联的数据处理算法,没有计算得到自数据处理结果时,会导致单板无法得到数据处理结果,为了确定能够得到数据处理结果,可以通过设置主备单板来实现,在具体实施过程中,S205可以包括:
从目标单板中选取出预设数目的单板作为主单板,并从目标单板中除主单板以外的单板中,为主单板设置备用单板;
根据预设数目,对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;
为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;
将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;
其中,主单板的数目大于等于子数据处理任务的数目;若目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
Figure BDA0001743132130000121
其中,M为大于等于4的整数。
在实际应用中,当目标单板的数目为偶数时,先将目标单板平均分成两组,一组为主单板,然后用另一组为每个主单板设置一个备用单板,当目标单板的数目为奇数时,用目标单板的数目除以2得到平均值,然后对该平均值向上取整,得到预设数目,从目标单板中选取出预设数目的单板作为主单板,并从目标单板中除主单板以外的单板中,为主单板设置备用单板,这样,便为每一个目标单板都设置好一个备用单板。
在设置好主单板和备用单板之后,可以按照主单板的数目来对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,拆分得到的子数据处理任务的数目要小于等于预设数目,这样,才可以为每个子数据处理任务和每个子数据处理任务所关联的数据处理算法分配一个主单板和一个备用单板。
最后,将每个子数据处理任务和每个子数据处理任务所关联的数据处理算法发送至所分配的主单板和备用单板。
如此,通过设置主备单板,可以保障数据处理任务在主单板无法使用时,备用单板可以及时处理数据,以得到数据处理结果。
为了能够更加快速的得到数据处理结果,在一种可选的实施例中,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。可以包括:
根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;
或者,根据单板的路由路径由远及近的顺序,将子数据处理任务和子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
也就是说,上述可以按照先主单板后备用单板的顺序,还可以按照单板的路由路径由远及近的顺序发送每个自数据处理任务和每个子数据处理任务所关联的数据处理算法。
其中,单板的路由路径是指主单板和备用单板距离该单板的通信路径。
S206:目标单板根据数据处理任务和数据处理任务所关联的数据处理算法,计算得到数据处理结果。
S207:目标单板发送数据处理结果。
目标单板在得到数据处理任务和数据处理任务所关联的数据处理算法之后,可以根据数据处理任务和数据处理任务所关联的数据处理算法计算得到数据处理结果,然后将数据处理结果返回,以响应数据处理请求。
当单板接收到多个目标单板发来的子数据处理结果时,根据接收到的全部子数据处理结果确定数据处理结果,以响应接收到的数据处理请求。
本发明实施例所提供的模型与方法,巧妙的利用了电信设备周边单板、设备、甚至是全网设备的闲置计算资源,基于某种便捷强大的分布式基础设施或虚拟机技术搭建云计算集群环境,有效解决电信设备常见的局部突发式海量计算需求与本单板处理能力瓶颈之间的矛盾。
其中,局部突发式计算需求对单板处理器进行中短期冲击时,周边的其它单板、设备,甚至是全网很多单板处理器计算资源可能处于闲置状态,甚至由于软件设计的局限,本单板的多核处理器其它核也可能处于闲置状态。本发明实施例利用某种自研或第三方分布式平台技术(如分布式erlang),在全网所有设备及单板上均部署虚拟机环境,将全网单板节点连接成一张“局域网”,实现高并发分布式云计算模型,全网单板之间互相“支援”。当单个单板发生局部突发式计算需求时,瞬间繁殖产生大量的轻量级worker进程到全网单板节点,全网各节点根据自身的处理器闲置情况决定是否参与“援助”计算。参与计算的节点将分配的计算需求完成后,将结果原路返回源节点,由源节点汇集归纳所有worker结果。由于全网单板节点在物理上是独立的处理器资源,因此计算行为的高并发就转化为真实的高并行,处理效率与计算速度可能发生数量级的提升,同时源节点的实际处理量大幅降低。
为实现通用性的云计算集群,每个节点无法事先知晓源节点具体的计算事务或算法程序,分布式平台或虚拟机需具备算法数据化特性(代码字节跨平台通用),可将算法与输入数据发送给志愿者云节点,志愿者云节点计算出结果并将其返回源节点后,清理干净算法与输入以及中间数据,做到一次运算之后不留痕迹,避免对自身系统资源的影响。
下面举实例来对上述一个或多个实施例中的数据的处理方法进行说明。
首先,在该实例中,使用基于编程语言为erlang分布式虚拟机技术构建的电信设备分布式计算模型,需要说明的是,使用erlang技术仅为实施例说明,不构成对本发明的限制,使用其它任何具备类似分布式架构功能的平台构建的电信设备分布式计算模型,都在本发明保护范围之内。
目前业界嵌入式电信设备单板通常采用linux操作系统居多,在linux系统上部署erlang虚拟机环境也非常方便,而且,erlang支持多种操作系统,可执行程序在各种操作系统之间可以通用,移植性非常好,可轻松实现全网单板节点跨平台的分布式云计算模型部署,erlang虚拟机可作为单板宿主操作系统的一个普通应用进程存在,在单板启动时自动运行,时刻监视接收来自网络中其它单板的计算请求。
图3为本发明实施例中电信设备系统的网络拓扑图,如图3所示,在电信设备(如运营商承载网分组传送设备)网络结构中,按照接入层、汇聚层以及核心层的等级组织成一张设备网络,该设备网络由n个电信设备网元(NE,Net Element)组成,电信设备间通过称为DCN的管理通道进行交互,可以实现网管对每端设备的管理,以及设备间的信息交互。
在单端电信设备中,MSN表示主用主控单板,SSC表示备用主控单板,L1,L2…Ln表示业务接口单板,每个单板对应一个erlang虚拟机节点,由图3可以看出,在单端电信设备中分成多块板卡,例如,如主控单板、交换单板、业务单板等,每块单板上通常会有处理器,也就是每块单板都可以作为计算资源,单板之间可以通过设备内部总线完成彼此信息交互。这样无论设备内单板之间,还是整个电信网络多设备之间,形成了一张网,每个计算资源单板部署一个erlang虚拟机环境(即erlang节点),就实现了全网分布式节点的联通,构成了分布式云计算模型的物理基础。
下面将出现大计算量需求的节点称为源节点,网络中的其他节点称为云节点;图4为本发明实施例中一种可选的数据的处理方法的流程示意图,如图4所示,
S401:本设备虚拟机节点(以下简称源节点)收到来自某应用进程的大计算需求。
其中,大计算需求可能包括大业务量配置、主备倒换或端口切换等引起的控制面协议大量集中运算、大量告警性能检测与上报等。
S402:源节点进行计算量及胜任度评估。
具体来说,根据应用层的计算请求及经验数据,采用计算量的评估模型评估大致计算量,并结合源节点的处理器忙碌状态,预估源节点是否能够在预定时间内胜任本次运算。
如果评估结果是源节点能够胜任,则无需发起分布式计算请求,由源节点承担运算任务;由于多核处理器的应用,即使单节点,也可以利用erlang特性派生多个计算实例并发进行以提升效率。如果评估结果是源节点难以在特定时间内完成计算,则需要发起分布式计算请求,见S403~S407。
S403:源节点获取云节点中志愿者候选名单。
全网的云节点非常多(如图3所示),但并非全部都可以使用,节点自身事务状态,是否在承担未完的分布式计算任务,以及与源节点的距离所产生的沟通成本等因素,都可能制约其成为理想的志愿者候选名单;有两种获取名单的方式,一是源节点临时发布广播式召集请求,符合要求且志愿接受分布式计算任务的节点进行响应,以此得到候选名单;另一种是符合要求的节点都提前推送自己的节点状态到全网,各节点据此更新各自维护的全网节点列表信息,包括处理器空闲值、与源节点的通信代价等,然后对所有列表进行排序(按照从优到劣顺序),形成志愿者候选名单;一旦有分布式计算请求,则直接从有序候选节点名单中选出一定数目节点即可,这种方式显然速度更快。
S404:源节点对计算事务进行拆分。
确定了志愿者候选名单后,就可以按照节点数目,对计算事务进行拆分,对节点进行分工。需要说明的是,节点中途可能发生通信或其它异常,为避免单个计算子任务未完成对整体事务产生瓶颈影响,可以考虑每个计算子任务同时分配给2~3个节点,以最快完成并返回正确结果的节点为准,备份节点返回忽略。
S405:源节点发送程序与数据至所分配的云节点。
按照分工表,依次发送相应的事务程序与数据至所分配的云节点,每个子任务的程序或数据可能不同。为了减少节点间的沟通成本,程序与数据要求非常轻量。另外需要合理安排发送顺序,如先主后备,先远后近等,先将所有主节点发完后,再发备节点,或者先发较偏远或计算能力偏弱的节点,再发较近或计算能力较强的节点,目的是为了达到尽量的均衡。
S406:所分配的云节点计算。
所分配的云节点收到程序与数据后,开始运算,将结果原路返回给源节点。
S407:源节点汇集结果。
源节点收集所分配的云节点的计算结果,组合成最终的事务结果,响应到应用层。
S408:源节点计算结果返回应用层。
应用层得到结果,并不感知计算过程,即使计算由网络中数以百计节点共同完成,对于应用层而言,也以为是本点完成一样。
图5为本发明实施例的另一种可选的数据的处理方法的流程交互示意图,如图5所示,该数据的处理方法是一种基于erlang的分布式云计算模型,图5描述了完成一次分布式计算过程相关应用及典型节点间的协作流程。
宿主操作系统(OS,Operating System)(如linux)及应用(如控制面协议运算),是分布式云计算事务的使用者与发起者,在启动阶段需要宿主OS启动,源节点启动erlang虚拟机,源节点需要接收来自网络其它节点(云节点)的处理器性能及通信成本等信息,例如,向云节点推送CPU占用率信息,定期更新云节点列表及信息排序;当分布式计算事务到来时,快速形成候选列表;这样,便形成了云节点列表,那么,在遭遇大计算量时,需要向源节点发起分布式计算请求,并等待其返回最终的计算结果。
将事务拆分并发布到云节点,等待计算结果返回并进行汇总后返回给应用。
宿主OS(如linux)及应用生成大运算量事物,向源节点发送分布式计算请求,源节点评估源节点是否胜任该运算,源节点从云节点筛选出一定数目的志愿者节点,将事务拆分并向向志愿者节点发送计算量程序与数据,志愿者节点则接收来自网络中的各种云计算请求,程序及数据均由源节点提供,源节点不做任何假设,计算完成并发回结果后,需要清除程序及数据不留痕迹,以免无谓的耗费资源。
需要说明的是,源节点及云节点是相对而言的,计算事务的发起端在描述时称为源节点,实际上任何一个节点都可以作为源节点发起云计算请求,因此所有节点地位是平等的,只有在特定计算事务的上下文语境中,才有源节点与云节点的概念。
由上可知本发明实施例提供的电信设备云计算模型及方法,通过充分利用设备内部网络中的闲散计算资源,既提高了大计算量的响应速度,又无需新增额外的计算资源,节约了成本,取得了良好的效果。
本发明实施例所提供的数据的处理方法,该方法应用于电信设备的单板中,该单板与至少一个其他单板之间建立有通信连接,该方法包括:首先,获取数据处理任务,根据预设的计算量评估模型,对数据处理任务进行评估,得到数据处理任务的计算量,这样,便可以知晓该数据处理任务所需要的计算量,然后,确定数据处理任务的计算量大于预设的计算量阈值时,即该单板中存在较大的计算量,所以,从其他单板中获取目标单板,再获取数据处理任务所关联的数据处理算法,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板,使得目标单板根据数据处理任务和数据处理任务所关联的数据处理算法计算得到数据处理结果,最后,接收数据处理结果;也就是说,本发明实施例中,通过对数据处理任务进行评估,并将评估出的计算量与计算量阈值进行比较,通过比较结果确定该单板中存在较大的计算量时,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板进行计算,也就是用其他单板为电信设备中具有较大计算量的单板分担计算量,使得单板之间协同工作,从而在不改变网络结构和不增加成本的基础上提高了电信设备的处理效率。
下面以电信设备系统中各个设备侧对上述数据的处理方法进行说明。
首先,以电信设备系统中一种单板侧对数据的处理方法进行描述。
图6为本发明实施例中数据的处理方法的一种可选的流程示意图,如图6所示,该方法应用于一电信设备的单板中,其中,该单板与至少一个其他单板之间建立有通信连接,,该方法包括:
S601:获取数据处理任务;
其中,数据处理任务是由单板根据接收到的数据处理请求生成的;
S602:根据预设的计算量评估模型,对数据处理任务进行评估,得到数据处理任务的计算量;
S603:确定数据处理任务的计算量大于预设的计算量阈值时,从其他单板中获取目标单板;
S604:获取数据处理任务所关联的数据处理算法;
S605:将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板;
其中,数据处理任务和数据处理任务所关联的数据处理算法用于目标单板计算得到数据处理结果。
S606:接收数据处理结果。
在一种可选的实施例中,S603中从其他单板中获取目标单板,可以包括:
向其他单板发送召集请求;接收其他单板的处理器的性能参数;将处理器的性能参数大于等于预设的性能参数的单板,确定为目标单板。
其中,召集请求用于触发其他单板返回其他单板的处理器的性能参数。
在一种可选的实施例中,S601之前,上述方法还可以包括:
确定候选单板列表;对应地,S603中从其他单板中获取目标单板,可以包括:
将其他单板中属于候选单板列表的单板,确定为目标单板。
在一种可选的实施例中,确定候选单板列表,可以包括:
接收其他单板发来的处理器的性能参数;将其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到其他单板的处理器的处理能力值;将处理能力值大于等于处理能力阈值的其他单板,确定为候选单板列表。
在一种可选的实施例中,S605可以包括:
对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板。
其中,目标单板的数目大于等于子数据处理任务的数目。
在一种可选的实施例中,S605可以包括:
从目标单板中选取出预设数目的单板作为主单板,并从目标单板中除主单板以外的单板中,为主单板设置备用单板;根据预设数目,对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;其中,主单板的数目大于等于子数据处理请求的数目;若目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
Figure BDA0001743132130000191
其中,M为大于等于4的整数。
在一种可选的实施例中,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板,可以包括:
根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;或者,根据单板的路由路径由远及近的顺序,将子数据处理任务和子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
其次,以电信设备系统中另一种单板侧对数据的处理方法进行描述。
图7为本发明实施例中数据的处理方法的另一种可选的流程示意图,该方法应用于一电信设备的单板中,其中,该单板与至少一个其他单板之间建立有通信连接,如图7所示,该方法包括:
S701:接收来自其他单板的数据处理任务和数据处理任务所关联的数据处理算法;
S702:根据数据处理任务和数据处理任务所关联的数据处理算法,得到数据处理结果;
S703:将数据处理结果返回至其他单板;其中,数据处理结果用于其他单板响应数据处理请求。
其中,数据处理任务为其他单板根据接收到的数据处理请求所生成的。
在一种可选的实施例中,数据处理任务和数据处理任务所关联的数据处理算法为:其他单板根据接收到的数据处理请求所生成的数据处理任务和所生成的数据处理任务所关联的数据处理算法进行拆分而得到的;对应地,数据处理结果用于其他单板确定所生成的数据处理任务对应的数据处理结果,用所生成的数据处理任务对应的数据处理结果响应数据处理请求。
基于同一发明构思,本发明实施例提供一种单板,与上述一个或者多个实施例中所述电信设备系统中的一种单板一致。
图8为本发明实施例中一种单板的结构示意图,如图8所示,该单板设置于电信设备中,其中,该单板与至少一个其他单板之间建立有通信连接,该单板包括:处理器81、存储器82及通信总线83;通信总线83用于实现处理器81和存储器82之间的连接通信;所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
获取数据处理任务;根据预设的计算量评估模型,对数据处理任务进行评估,得到数据处理任务的计算量;确定数据处理任务的计算量大于预设的计算量阈值时,从其他单板中获取目标单板;获取数据处理请求所关联的数据处理算法;将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板;接收数据处理结果。
其中,数据处理任务是由单板根据接收到的数据处理请求生成的;数据处理任务和数据处理任务所关联的数据处理算法用于目标单板计算得到数据处理结果。
在一种可选的实施例中,从其他单板中获取目标单板中,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
向其他单板发送召集请求;接收其他单板的处理器的性能参数;将处理器的性能参数大于等于预设的性能参数的单板,确定为目标单板。
其中,召集请求用于触发其他单板返回其他单板的处理器的性能参数。
在一种可选的实施例中,在根据接收到的数据处理请求,生成数据处理任务之前,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
确定候选单板列表;对应地,从其他单板中获取目标单板中,处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
将其他单板中属于候选单板列表的单板,确定为目标单板。
在一种可选的实施例中,确定候选单板列表中,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
接收其他单板发来的处理器的性能参数;将其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到其他单板的处理器的处理能力值;将处理能力值大于等于处理能力阈值的其他单板,确定为候选单板列表。
在一种可选的实施例中,将数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板中,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板。
其中,目标单板的数目大于等于子数据处理任务的数目。
在一种可选的实施例中,将所述数据处理任务和数据处理任务所关联的数据处理算法发送至目标单板中,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
从目标单板中选取出预设数目的单板作为主单板,并从目标单板中除主单板以外的单板中,为主单板设置备用单板;根据预设数目,对数据处理任务和数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
其中,主单板的数目大于等于子数据处理请求的数目;若目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
Figure BDA0001743132130000211
其中,M为大于等于4的整数。
在一种可选的实施例中,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板中,所述处理器81用于执行存储器中存储的数据的处理程序,以实现以下步骤:
根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;或者,根据单板的路由路径由远及近的顺序,将子数据处理任务和子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
基于同一发明构思,本发明实施例提供一种单板,与上述一个或者多个实施例中所述的电信设备系统中另一种单板一致。
图9为本发明实施例中另一种单板的结构示意图,如图9所示,该单板设置于电信设备中,其中,该单板与至少一个其他单板之间建立有通信连接,该单板包括:处理器91、存储器92及通信总线93:所述通信总线93用于实现处理器91和存储器92之间的连接通信;所述处理器91用于执行存储器中存储的数据的处理程序,以实现以下步骤:
接收来自其他单板的数据处理任务和数据处理任务所关联的数据处理算法;根据数据处理任务和数据处理任务所关联的数据处理算法,得到数据处理结果;将数据处理结果返回至其他单板。
其中,数据处理任务为其他单板根据接收到的数据处理请求所生成的;其中,数据处理结果用于其他单板响应数据处理请求。
在一种可选的实施例中,数据处理任务和数据处理任务所关联的数据处理算法为:其他单板根据接收到的数据处理请求所生成的数据处理任务和所生成的数据处理任务所关联的数据处理算法进行拆分而得到的;对应地,数据处理结果用于其他单板确定所生成的数据处理任务对应的数据处理结果,用所生成的数据处理任务对应的数据处理结果响应数据处理请求。
基于前述实施例,本实施例提供一种计算机存储介质,图10为本发明实施例中计算机存储介质的结构示意图,如图10所示,该计算机存储介质100存储有数据的处理程序,上述数据的处理程序被处理器执行时实现如上述一个或多个实施例中所述的电信设备系统中一种单板或者所述的电信设备系统中另一种单板执行的数据的处理方法的步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。

Claims (12)

1.一种数据的处理方法,其特征在于,所述方法应用于一电信设备的单板中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述方法包括:
获取数据处理任务;其中,所述数据处理任务是由所述单板根据接收到的数据处理请求生成的;
根据预设的计算量评估模型,对所述数据处理任务进行评估,得到所述数据处理任务的计算量;
确定所述数据处理任务的计算量大于预设的计算量阈值时,从所述其他单板中获取目标单板;
获取所述数据处理任务所关联的数据处理算法;
将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板;其中,所述数据处理任务和所述数据处理任务所关联的数据处理算法用于所述目标单板计算得到数据处理结果;
接收所述数据处理结果。
2.根据权利要求1所述的方法,其特征在于,所述从所述其他单板中获取目标单板,包括:
向所述其他单板发送召集请求;其中,所述召集请求用于触发所述其他单板返回所述其他单板的处理器的性能参数;
接收所述其他单板的处理器的性能参数;
将处理器的性能参数大于等于预设的性能参数的单板,确定为所述目标单板。
3.根据权利要求1所述的方法,其特征在于,在根据接收到的数据处理请求,生成数据处理任务之前,所述方法还包括:
确定候选单板列表;
所述从所述其他单板中获取目标单板,包括:
将所述其他单板中属于所述候选单板列表的单板,确定为所述目标单板。
4.根据权利要求3所述的方法,其特征在于,所述确定候选单板列表,包括:
接收所述其他单板发来的处理器的性能参数;
将所述其他单板的处理器的每种性能参数和每种性能参数的权重值进行加权求和,得到所述其他单板的处理器的处理能力值;
将所述处理能力值大于等于处理能力阈值的其他单板,确定为所述候选单板列表。
5.根据权利要求1所述的方法,其特征在于,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板,包括:
对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;
为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配目标单板;
将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的目标单板;
其中,所述目标单板的数目大于等于所述子数据处理任务的数目。
6.根据权利要求1所述的方法,其特征在于,所述将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板,包括:
从所述目标单板中选取出预设数目的单板作为主单板,并从所述目标单板中除所述主单板以外的单板中,为所述主单板设置备用单板;
根据所述预设数目,对所述数据处理任务和所述数据处理任务所关联的数据处理算法进行拆分,得到至少两个子数据处理任务以及每个子数据处理任务所关联的子数据处理算法;
为每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法分配主单板和备用单板;
将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;
其中,所述主单板的数目大于等于所述子数据处理请求的数目;若所述目标单板用M表示,预设数目用N表示,则,预设数目计算如下:
Figure FDA0001743132120000031
其中,M为大于等于4的整数。
7.根据权利要求6所述的方法,其特征在于,所述将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板,包括:
根据先主单板后备用单板的顺序,将每个子数据处理任务和每个子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板;
或者,根据所述单板的路由路径由远及近的顺序,将所述子数据处理任务和所述子数据处理任务所关联的子数据处理算法发送至所分配的主单板和备用单板。
8.一种数据的处理方法,其特征在于,所述方法应用于一电信设备的单板中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述方法包括:
接收来自所述其他单板的数据处理任务和所述数据处理任务所关联的数据处理算法;其中,所述数据处理任务为所述其他单板根据接收到的数据处理请求所生成的;
根据所述数据处理任务和所述数据处理任务所关联的数据处理算法,得到数据处理结果;
将所述数据处理结果返回至所述其他单板;其中,所述数据处理结果用于所述其他单板响应所述数据处理请求。
9.根据权利要求8所述的方法,其特征在于,所述数据处理任务和所述数据处理任务所关联的数据处理算法为:所述其他单板根据接收到的数据处理请求所生成的数据处理任务和所生成的数据处理任务所关联的数据处理算法进行拆分而得到的;
对应地,所述数据处理结果用于所述其他单板确定所生成的数据处理任务对应的数据处理结果,用所生成的数据处理任务对应的数据处理结果响应所述数据处理请求。
10.一种单板,其特征在于,所述单板设置于电信设备中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述单板包括:处理器、存储器及通信总线;
所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:
获取数据处理任务;其中,所述数据处理任务是由所述单板根据接收到的数据处理请求生成的;
根据预设的计算量评估模型,对所述数据处理任务进行评估,得到所述数据处理任务的计算量;
确定所述数据处理任务的计算量大于预设的计算量阈值时,从所述其他单板中获取目标单板;
获取所述数据处理请求所关联的数据处理算法;
将所述数据处理任务和所述数据处理任务所关联的数据处理算法发送至所述目标单板;其中,所述数据处理任务和所述数据处理任务所关联的数据处理算法用于所述目标单板计算得到数据处理结果;
接收所述数据处理结果。
11.一种单板,其特征在于,所述单板设置于电信设备中,其中,所述单板与至少一个其他单板之间建立有通信连接,所述单板包括:处理器、存储器及通信总线;
所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行存储器中存储的数据的处理程序,以实现以下步骤:
接收来自所述其他单板的数据处理任务和所述数据处理任务所关联的数据处理算法;其中,所述数据处理任务为所述其他单板根据接收到的数据处理请求所生成的;
根据所述数据处理任务和所述数据处理任务所关联的数据处理算法,得到数据处理结果;
将所述数据处理结果返回至所述其他单板;其中,所述数据处理结果用于所述其他单板响应所述数据处理请求。
12.一种计算机存储介质,其特征在于,所述计算机介质存储有数据的处理程序,所述数据的处理程序被处理器执行时实现如权利要求1至7或者8至9中任一项所述的数据的处理方法的步骤。
CN201810829042.4A 2018-07-25 2018-07-25 一种数据的处理方法、单板和计算机存储介质 Withdrawn CN110764922A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810829042.4A CN110764922A (zh) 2018-07-25 2018-07-25 一种数据的处理方法、单板和计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810829042.4A CN110764922A (zh) 2018-07-25 2018-07-25 一种数据的处理方法、单板和计算机存储介质

Publications (1)

Publication Number Publication Date
CN110764922A true CN110764922A (zh) 2020-02-07

Family

ID=69328259

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810829042.4A Withdrawn CN110764922A (zh) 2018-07-25 2018-07-25 一种数据的处理方法、单板和计算机存储介质

Country Status (1)

Country Link
CN (1) CN110764922A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111562985A (zh) * 2020-05-09 2020-08-21 上海商汤智能科技有限公司 资源管理方法及装置、电子设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7849150B2 (en) * 2002-10-04 2010-12-07 Sony Corporation Electronic device having communication function
CN102870374A (zh) * 2012-06-21 2013-01-09 华为技术有限公司 负荷分担方法及装置、单板
CN103763740A (zh) * 2014-01-26 2014-04-30 上海大唐移动通信设备有限公司 一种单板间负载均衡的方法及装置
CN105743802A (zh) * 2014-12-08 2016-07-06 中兴通讯股份有限公司 一种实现业务协同调度的方法及计算单板
CN106161545A (zh) * 2015-04-14 2016-11-23 中兴通讯股份有限公司 板间数据处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7849150B2 (en) * 2002-10-04 2010-12-07 Sony Corporation Electronic device having communication function
CN102870374A (zh) * 2012-06-21 2013-01-09 华为技术有限公司 负荷分担方法及装置、单板
CN103763740A (zh) * 2014-01-26 2014-04-30 上海大唐移动通信设备有限公司 一种单板间负载均衡的方法及装置
CN105743802A (zh) * 2014-12-08 2016-07-06 中兴通讯股份有限公司 一种实现业务协同调度的方法及计算单板
CN106161545A (zh) * 2015-04-14 2016-11-23 中兴通讯股份有限公司 板间数据处理方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111562985A (zh) * 2020-05-09 2020-08-21 上海商汤智能科技有限公司 资源管理方法及装置、电子设备和存储介质
CN111562985B (zh) * 2020-05-09 2024-03-22 上海商汤智能科技有限公司 资源管理方法及装置、电子设备和存储介质

Similar Documents

Publication Publication Date Title
CN113315700B (zh) 算力资源调度方法、装置和存储介质
Liang et al. Scalable and crash-tolerant load balancing based on switch migration for multiple open flow controllers
Gao et al. Traffic load balancing schemes for devolved controllers in mega data centers
CN113364850B (zh) 软件定义云边协同网络能耗优化方法和系统
CN107465966B (zh) 一种用于光网络的拓扑重构控制方法
CN105515977B (zh) 获取网络中传输路径的方法、装置和系统
US10530669B2 (en) Network service aware routers, and applications thereof
CN111404822B (zh) 数据传输方法、装置、设备以及计算机可读存储介质
CN109617820A (zh) 一种sdn系统和路由更新方法
CN105245307A (zh) 用于在通信网络中确定通信路径的方法及设备
US20170123941A1 (en) Distributed processing system
CN115373843A (zh) 一种动态预判最优路径设备的方法、装置、及介质
CN114338267A (zh) 多管理节点的维护方法、装置、设备、总线网络及介质
CN110764922A (zh) 一种数据的处理方法、单板和计算机存储介质
JP2013206112A (ja) 計算機システム及びサブシステム管理方法
CN112953739B (zh) 基于k8s平台纳管sdn的方法、系统以及存储介质
Feng et al. COVE: Co-operative virtual network embedding for network virtualization
Qin et al. Interference and topology-aware VM live migrations in software-defined networks
CN111049900A (zh) 一种物联网流计算调度方法、装置和电子设备
JP6288633B2 (ja) ネットワーク制御方法
US8964596B1 (en) Network service aware routers, and applications thereof
JP6036848B2 (ja) 情報処理システム
CN112637285B (zh) 边缘云通信方法、管理系统、计算机设备及存储介质
Lu et al. On maximum elastic scheduling in cloud-based data center networks for virtual machines with the hose model
Yada et al. VM placement control considering network bandwidth for high availability distributed clusters

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20200207