CN111427693B - 数据处理方法、系统、介质、服务系统及旁路卸载系统 - Google Patents

数据处理方法、系统、介质、服务系统及旁路卸载系统 Download PDF

Info

Publication number
CN111427693B
CN111427693B CN202010224947.6A CN202010224947A CN111427693B CN 111427693 B CN111427693 B CN 111427693B CN 202010224947 A CN202010224947 A CN 202010224947A CN 111427693 B CN111427693 B CN 111427693B
Authority
CN
China
Prior art keywords
data
target task
task
module
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010224947.6A
Other languages
English (en)
Other versions
CN111427693A (zh
Inventor
董宇
佘开锐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202010224947.6A priority Critical patent/CN111427693B/zh
Publication of CN111427693A publication Critical patent/CN111427693A/zh
Application granted granted Critical
Publication of CN111427693B publication Critical patent/CN111427693B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44594Unloading
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer And Data Communications (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本公开涉及一种数据处理方法、系统、介质、服务系统及旁路卸载系统。所述服务系统包括服务模块、第一监测模块、封装模块以及第一数据传输模块;第一监测模块用于实时监测服务系统CPU的第一负载;服务模块用于若第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务,并将所述目标任务和处理所述目标任务所需数据发送至封装模块;封装模块用于针对目标任务进行任务封装,获得与目标任务对应的第一封装数据;第一数据传输模块用于将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理所述目标任务。这样,能够减轻服务系统CPU处理任务的压力,同时,保证数据传输及任务处理的安全性。

Description

数据处理方法、系统、介质、服务系统及旁路卸载系统
技术领域
本公开涉及计算机技术领域,具体地,涉及一种数据处理方法、系统、介质、服务系统及旁路卸载系统。
背景技术
随着互联网的发展,CPU计算的消耗越来越大,常常出现CPU资源紧张的情况,对于CPU的任务处理存在不好的影响。因此,需要对本地CPU卸载,减轻本地CPU的压力。相关技术中,常用做法是本地使用某种硬件针对服务程序CPU的某一种使用场景做优化和计算卸载,所有需要部署此类服务程序的服务器上都要添加这个硬件设备,受硬件的限制大,瓶颈明显。
发明内容
提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
第一方面,本公开提供一种服务系统,所述服务系统包括服务模块、第一监测模块、封装模块以及第一数据传输模块;
所述第一监测模块用于实时监测所述服务系统CPU的第一负载,并将所述第一负载发送至所述服务模块;
所述服务模块用于若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务,并将所述目标任务和处理所述目标任务所需数据发送至所述封装模块;
所述封装模块用于针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
所述第一数据传输模块用于将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务。
第二方面,本公开提供一种旁路卸载系统,所述旁路卸载系统包括第二监测模块、第二数据传输模块、解析校验模块、调度模块以及至少一个计算设备;
所述第二监测模块用于实时监测所述旁路卸载系统中各计算设备的第二负载,并将所述第二负载发送至所述调度模块;
所述第二数据传输模块用于接收来自服务系统的第一封装数据,并将所述第一封装数据传输至所述解析校验模块;
所述解析校验模块用于利用封装数据解析程序解析所述第一封装数据,并将获得的所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据发送至所述调度模块;
所述调度模块用于根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备;
所述目标计算设备用于根据处理所述目标任务所需数据处理所述目标任务,并获得针对所述目标任务的任务处理结果。
第三方面,本公开提供一种数据处理方法,应用于服务系统,所述方法包括:
监测所述服务系统CPU的第一负载;
若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务;
针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务。
第四方面,本公开提供一种数据处理方法,应用于旁路卸载系统,所述方法包括:
监测所述旁路卸载系统中各计算设备的第二负载;
接收来自服务系统的第一封装数据;
利用封装数据解析程序解析所述第一封装数据,以获得所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据;
根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备,以使所述目标计算设备根据处理所述目标任务所需数据处理所述目标任务并获得针对所述目标任务的任务处理结果。
第五方面,本公开提供一种计算机可读介质,其上存储有计算机程序,该程序被处理装置执行时实现本公开第三方面所述方法的步骤,或者,该程序被处理装置执行时实现本公开第四方面所述方法的步骤。
第六方面,本公开提供一种数据处理系统,所述数据处理系统包括至少一个如本公开第一方面所述的服务系统和至少一个如本公开第二方面所述的旁路卸载系统。
通过上述技术方案,在服务系统设置服务模块、第一监测模块、封装模块以及第一数据传输模块,其中,通过第一监测模块实时监测服务系统CPU的第一负载,并将第一负载发送至服务模块,以及,若第一负载大于或等于第一负载阈值,通过服务模块从待处理的CPU任务中确定出目标任务,并将目标任务和处理目标任务所需数据发送至封装模块,以及,通过封装模块针对目标任务进行任务封装,获得与目标任务对应的第一封装数据,以及,通过第一数据传输模块将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理目标任务。这样,在服务系统的CPU负载过大的情况下,从服务系统CPU未处理的任务中选择出目标任务进行封装,并发送至旁路卸载系统,由旁路卸载系统代替服务系统处理目标任务,以减轻服务系统CPU处理任务的压力。同时,将目标任务封装成第一封装数据后再发给旁路卸载系统,也能够保证数据传输及任务处理的安全性。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
在附图中:
图1是根据本公开一示例性实施例示出的一种服务系统的框图;
图2是根据本公开一示例性实施例示出的一种旁路卸载系统的框图;
图3是根据本公开一示例性实施例示出的一种数据处理系统的示意图;
图4是根据本公开的一种实施方式提供的数据处理方法的流程图;
图5是根据本公开的一种实施方式提供的数据处理方法的流程图;
图6是根据一实施例提供的设备的框图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
在本公开的场景中,涉及到服务系统和旁路卸载系统,这里的服务系统和旁路卸载系统均用来提供对外服务,同时,旁路卸载系统还能够为服务系统提供旁路计算支持,以减轻服务系统的计算压力。对于同一个服务系统,可以有一个或多个旁路卸载系统与其对应,其中的每一个旁路卸载系统均能为该服务系统提供旁路计算支持。并且,对于一个旁路卸载系统来说,它可以为一个或多个服务系统提供旁路计算支持。另外,服务系统和旁路卸载系统可以部署在同一台服务器上,也可以部署在不同的服务器上,本公开对此不进行限定。
图1是根据本公开一示例性实施例示出的一种服务系统的框图。如图1所示,服务系统100可以包括服务模块110、第一监测模块120、封装模块130以及第一数据传输模块140。
第一监测模块120用于实时监测服务系统100的CPU的第一负载,并将第一负载发送至服务模块110;服务模块110用于若第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务,并将目标任务和处理目标任务所需数据发送至封装模块130;封装模块130用于针对目标任务进行任务封装,获得与目标任务对应的第一封装数据,其中,第一封装数据包括目标任务的任务类型和处理目标任务所需数据;第一数据传输模块140用于将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理目标任务。
第一监测模块120能够实时监测服务系统100的CPU的负载,并将其作为第一负载,同时,第一监测模块120能够与服务模块110通信,并将监测到的第一负载实时反馈给服务模块110。可知,第一负载就是服务系统的CPU的当前负载。
服务模块110实时接收来自第一监测模块120的第一负载,并实时比较第一负载与第一负载阈值,并在第一负载大于或等于第一负载阈值时,从待处理的CPU任务中确定出目标任务。
其中,第一负载阈值可以根据服务系统CPU本身的计算能力设置,例如,服务系统CPU能够允许的最大负载,或者,保证服务系统CPU健康的最大允许负载等等。这样,若服务系统的CPU负载大于或等于第一负载阈值,可以先从待处理的CPU任务中确定出目标任务,将该目标任务交给除服务系统以外的设备处理,以减轻服务系统的CPU的计算压力。
可选地,从待处理任务中确定出目标任务,可以从服务系统的CPU当前未处理的任务中,随机选择一个或多个任务分别作为目标任务。
可选地,从待处理任务中确定出目标任务,可以包括以下步骤:
若待处理任务中存在属于预设任务类型的任务,从属于预设任务类型的任务中选择预设个数的任务,并将该预设个数的任务分别确定为目标任务。
其中,预设任务类型的任务为对CPU计算消耗大的任务,示例地,预设任务类型包括以下中的一者或多者:加密、解密、压缩、解压缩、编码、解码、转码。
采用上述方式,从待处理任务中优先选择更耗费CPU算力的任务作为目标任务,能够更加有效地减轻服务系统的CPU的任务处理压力。
同时,服务模块110能够与封装模块130进行数据交互,从而,服务模块110确定出目标任务之后,将目标任务和处理该目标任务所需的数据发送至封装模块130。
封装模块130在接收到来自服务模块110的目标任务和处理该目标任务所需的数据后,针对目标任务进行任务封装,并获得与目标任务对应的第一封装数据。其中,第一封装数据包括目标任务的任务类型和处理目标任务所需数据。
可选地,封装模块130可以将处理目标任务所需的每段数据依次按照数据类型、数据长度、数据的结构封装为数据body(协议体),同时,将数据body的总长度、校验和、目标任务的任务类型封装为数据头(协议头),并将数据头和数据body合成为第一封装数据。
也就是说,封装模块130可以按照预设的封装协议对目标任务进行封装,得到第一封装数据。其中,封装数据的封装结构可以包括协议头和协议体,目标任务的任务类型可以封装在第一封装数据的协议头中,处理目标任务所需数据可以封装在第一封装数据的协议体中。其中,协议头可以为固定长度,例如为协议体总长度(例如,4字节)+校验和(例如,40字节)+任务类型(例如,8字节);协议体由多个iterm构成,根据处理目标任务所需的每段数据分为不同的iterm,每个iterm封装有本iterm内的数据类型(例如,8字节)、数据长度(例如,4字节)及数据内容。示例地,若处理目标任务需要a、b、c、d四段数据,则可以封装成4个iterm,共同构成协议体。
第一数据传输模块140能够与封装模块130之间进行数据传输,封装模块130在得到第一封装数据后,可以将第一封装数据传输给第一数据传输模块140。第一数据传输模块140将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理目标任务。
通过上述方案,在服务系统设置服务模块、第一监测模块、封装模块以及第一数据传输模块,其中,通过第一监测模块实时监测服务系统CPU的第一负载,并将第一负载发送至服务模块,以及,若第一负载大于或等于第一负载阈值,通过服务模块从待处理的CPU任务中确定出目标任务,并将目标任务和处理目标任务所需数据发送至封装模块,以及,通过封装模块针对目标任务进行任务封装,获得与目标任务对应的第一封装数据,以及,通过第一数据传输模块将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理目标任务。这样,在服务系统的CPU负载过大的情况下,从服务系统CPU未处理的任务中选择出目标任务进行封装,并发送至旁路卸载系统,由旁路卸载系统代替服务系统处理目标任务,以减轻服务系统CPU处理任务的压力。同时,将目标任务封装成第一封装数据后再发给旁路卸载系统,也能够保证数据传输及任务处理的安全性。
可选地,第一数据传输模块140还用于接收旁路卸载系统针对第一封装数据发送的反馈数据,并将反馈数据发送至封装模块130。
以及,封装模块130还用于对接收到的反馈数据进行解析,并将解析结果发送至服务模块110,其中,解析结果为旁路卸载系统对目标任务的处理结果或旁路卸载系统未成功处理目标任务的提示消息;服务模块110用于若解析结果为旁路卸载系统对目标任务的处理结果,则将旁路卸载系统对目标任务的处理结果作为目标任务的处理结果;服务模块110还用于若解析结果为旁路卸载系统未成功处理目标任务的提示消息,则触发第一数据传输模块140将第一封装数据再次发送至旁路卸载系统。
在服务系统100将第一封装数据发送至旁路卸载系统之后,旁路卸载系统能够接收到第一封装数据。旁路卸载系统在接收到第一封装数据后,针对该第一封装数据,会生成一个处理结果,并作为反馈数据返回至服务系统100。
服务系统100的第一数据传输模块140在接收到旁路卸载系统针对第一封装数据发送的反馈数据后,将反馈数据发送至封装模块130,由封装模块130对该反馈数据进行解析,并将解析结果发送至服务模块110。示例地,服务系统100和旁路卸载系统可以互通一套解析方式(例如,使用同一种解析程序),使得二者封装的数据能够由对方正确解析,其解析方式可以参照上文中给出的封装方法,即,按照预设的封装协议对数据进行封装以及解析。这样,在保证数据互通的前提下,还保证所传输的数据的安全性。
其中,解析结果可以为旁路卸载系统对目标任务的处理结果或旁路卸载系统未成功处理目标任务的提示消息。
在一种可能的情况中,若解析结果为旁路卸载系统对目标任务的处理结果,说明旁路卸载系统已成功处理该目标任务。因此,服务模块110可以将旁路卸载系统对目标任务的处理结果作为目标任务的处理结果,以供服务系统100后续使用。
在另一种可能的情况中,若解析结果为旁路卸载系统未成功处理目标任务的提示消息,说明旁路卸载系统未能成功处理该目标任务,此时,目标任务没有被处理,因此,可以触发第一数据传输模块140将第一封装数据再次发送至旁路卸载系统,以便再次请求旁路卸载系统处理该目标任务。其中,再次发送时的旁路卸载系统可以优先选择未接收过第一封装数据的旁路卸载系统,或者,可以与原来的旁路卸载系统相同。
可选地,服务模块110还用于自第一数据传输模块140初次向外发送第一封装数据开始,记录服务系统100发送第一封装数据的次数;以及,若服务系统100发送第一封装数据的次数已达到预设次数,而封装模块130仍未解析得到旁路卸载系统对所述目标任务的处理结果,停止向外发送第一封装数据,并等待服务系统的CPU处理所述目标任务。
也就是说,自服务系统100初次向外发送第一封装数据开始,记录服务系统发送第一封装数据的次数,若服务系统发送第一封装数据的次数已达到预设次数,且旁路卸载系统仍未成功处理目标任务,说明服务系统已经多次尝试请求旁路卸载系统处理目标任务,但旁路卸载系统始终无法成功处理该任务,因此,为了避免目标任务总是无法被处理,可以停止向外发送第一封装数据,并等待服务系统的CPU处理目标任务。
采用上述方式,通过限制向外发送第一封装数据的次数,在限定次数内旁路卸载系统未能成功处理目标任务,就停止向外发送第一封装数据,而仍由服务系统的CPU处理目标任务,避免在旁路卸载系统无法处理目标任务的情况下无限重试。
可选地,服务模块110还用于自第一数据传输模块140初次向外发送第一封装数据时开始计时;以及,若计时时长已达到预设时长,而封装模块130仍未解析得到旁路卸载系统对目标任务的处理结果,停止向外发送第一封装数据,并等待服务系统100的CPU处理目标任务。
也就是说,自服务系统100初次向外发送第一封装数据开始计时,若计时时长已达到预设时长,而旁路卸载系统仍未成功处理目标任务,停止向外发送第一封装数据,并等待服务系统的CPU处理目标任务。
采用上述方式,通过限制向外发送第一封装数据所用时长,在限定时长内旁路卸载系统未能成功处理目标任务,就停止向外发送第一封装数据,而仍由服务系统的CPU处理目标任务,避免在旁路卸载系统无法处理目标任务的情况下无限重试。
图2是根据本公开一示例性实施例示出的一种旁路卸载系统的框图。如图2所示,旁路卸载系统200可以包括第二监测模块210、第二数据传输模块220、解析校验模块230、调度模块240以及至少一个计算设备。
其中,计算设备可以包括但不限于以下中的一者或几者:CPU、GPU、压缩硬件设备、解压缩硬件设备、加密硬件设备、解密硬件设备、编码硬件设备、解码硬件设备、引擎类设备。
第二监测模块210用于实时监测旁路卸载系统中各计算设备的第二负载,并将第二负载发送至调度模块240;第二数据传输模块220用于接收来自服务系统100的第一封装数据,并将第一封装数据传输至解析校验模块230;解析校验模块230用于利用封装数据解析程序解析第一封装数据,并将获得的第一封装数据包括的目标任务的任务类型和处理目标任务所需数据发送至调度模块240;调度模块240用于根据目标任务的任务类型以及各计算设备的第二负载,确定能够处理目标任务的目标计算设备,并将处理目标任务所需数据发送至目标计算设备;目标计算设备用于根据处理目标任务所需数据处理目标任务,并获得针对目标任务的任务处理结果。
第二监测模块210能够实时监测旁路卸载系统200中各计算设备的负载,并将其作为第二负载,同时,第二监测模块210能够与调度模块240通信,并将监测到的第二负载实时反馈给调度模块240。可知,第二负载就是旁路卸载系统200中各计算设备的当前负载。
第二数据传输模块220能够与第一数据传输模块140通信,能够接收到来自服务系统100的第一封装数据,并将第一封装数据传输至解析校验模块230。解析校验模块230可以利用封装数据解析程序(即,服务系统与旁路卸载系统互通的一套解析程序,能够正确解析来自对方的数据)解析第一封装数据,并将获得的第一封装数据包括的目标任务的任务类型和处理目标任务所需数据发送至调度模块240;
调度模块240根据目标任务的任务类型以及各计算设备的第二负载,确定能够处理目标任务的目标计算设备,并将处理目标任务所需数据发送至目标计算设备,以由目标计算设备根据处理目标任务所需数据处理目标任务,并获得针对目标任务的任务处理结果。
若存在目标计算设备,说明旁路卸载系统能够处理目标任务,因此,可以利用目标计算设备以及处理目标任务所需数据,由旁路卸载系统对目标任务进行处理,并获得针对目标任务的任务处理结果
通过上述技术方案,通过服务系统和旁路卸载系统之间的数据交互,使得旁路卸载系统能够代替服务系统处理目标任务,从而能够减轻服务系统的计算压力。
可选地,调度模块240用于:根据目标任务的任务类型,确定目标设备组;若目标设备组中各个计算设备第二负载之和小于或等于第二负载阈值,将目标设备组中的计算设备之一确定为目标计算设备;若目标设备组中各个计算设备第二负载之和大于第二负载阈值、且旁路卸载系统的CPU负载小于或等于第三负载阈值,将旁路卸载系统的CPU确定为目标计算设备。
其中,目标设备组包括与目标任务的任务类型对应的计算设备。示例地,可以预先设置哪种计算设备处理哪种任务类型的任务,也就是设置计算设备与任务类型的对应关系。例如,加密类任务(或解密类任务)可以与加/解密硬件设备对应,压缩类任务(或解压缩类任务)可以与压缩/解压缩硬件设备对应,编码类任务(或解码类任务、转码类任务)可以与编/解码硬件设备对应。示例地,假设旁路卸载系统中设备B1、C1、D1与任务类型A相对应,设备B2、C2、D2与任务类型B相对应,若目标任务的任务类型为A,则目标设备组包括设备B1、C1、D1。
若目标设备组中各个计算设备第二负载之和小于或等于第二负载阈值,将目标设备组中的计算设备之一确定为目标计算设备。
也就是说,若目标设备组中各个计算设备第二负载之和小于或等于第二负载阈值,说明目标设备组较为空闲,还有多余算力供目标任务使用,因此可以将目标设备组中的计算设备之一确定为目标计算设备。其中,从目标设备组中确定出目标计算设备的方式可以采用加权轮询的方式,为处理能力较强的计算设备设置较高权重,为处理能力较弱的计算设备设置较低权重。
若目标设备组中各个计算设备第二负载之和大于第二负载阈值、且旁路卸载系统的CPU负载小于或等于第三负载阈值,将旁路卸载系统的CPU确定为目标计算设备。
也就是说,若目标设备组中各个计算设备第二负载之和大于第二负载阈值、且旁路卸载系统的CPU负载小于或等于第三负载阈值,说明目标设备组忙碌,已经没有多余算力供目标任务使用,而旁路卸载系统的CPU较为空闲,能够处理目标任务,因此,可以将旁路卸载系统的CPU确定为目标计算设备。
上述两种情况对应于存在目标计算设备的情况,这说明旁路卸载系统200能够处理目标任务,可以得到旁路卸载系统200针对目标任务的任务处理结果,也就是,旁路卸载系统能够成功处理目标任务。
可选地,调度模块240还可以用于:若目标设备组中各个计算设备第二负载之和大于第二负载阈值、且旁路卸载系统的CPU负载大于第三负载阈值,生成用于指示旁路卸载系统未成功处理目标任务的提示消息;将提示消息发送至第二数据传输模块220。以及,第二数据传输模块220还用于将提示消息发送至服务系统100。
若目标设备组中各个计算设备第二负载之和大于第二负载阈值、且旁路卸载系统的CPU载大于第三负载阈值,说明目标设备组和旁路卸载系统的CPU均忙碌,均无多余算力供目标任务使用,也就是旁路卸载系统无法处理目标任务,因此,目前并不存在能够处理目标任务的目标计算设备。从而,调度模块240可以生成用于指示旁路卸载系统未成功处理目标任务的提示消息,并将提示消息发送至第二数据传输模块220。这一提示消息就是前文中所述的服务系统100接收到的旁路卸载系统针对第一封装数据返回的反馈数据,对应于旁路卸载系统未能成功处理目标任务的情况。
相应地,第二数据传输模块220在接收到来自调度模块240的提示消息后,就可以将该提示消息发送至服务系统100,也就是服务系统的第一数据传输模块140。
也就是说,若不存在目标计算设备,说明旁路卸载系统无法处理目标任务,因此,可以生成用于指示旁路卸载系统未成功处理目标任务的提示消息,并将该提示消息发送至服务系统100,以便服务系统100进行其他形式的处理。
采用上述方式,综合考虑旁路卸载系统中各种设备的任务处理能力,若不存在能够处理目标任务的目标计算设备,则不对目标任务进行处理,同时生成提示信息返回服务系统,避免旁路卸载系统本身的任务处理受到影响。
可选地,目标计算设备还用于将针对目标任务的任务处理结果发送至解析校验模块230;以及,解析校验模块230还可以封装该任务处理结果,并将封装得到的数据发送至服务系统100。
在得到目标计算设备针对目标任务的任务处理结果后,目标计算设备可以将该任务处理结果发送至解析校验模块230,并由解析校验模块230对其进行封装,并将封装得到的数据发送至服务系统100。其中,封装方式与上文中提及的封装方式一致,此处不赘述。在这里,对任务处理结果封装得到的数据就是前文中所述的服务系统100接收到的旁路卸载系统针对第一封装数据返回的反馈数据,对应于旁路卸载系统已经成功处理目标任务的情况。
通过上述技术方案,若旁路卸载系统接收到来自服务系统的目标任务,考虑旁路卸载系统中硬件设备的处理能力,在确定存在能够处理目标任务的目标计算设备时,由目标计算设备处理目标任务,并将任务处理结果返回至服务系统,以减轻服务系统CPU的任务处理压力,同时保证旁路卸载系统对自身任务的处理能力。
本公开实施例还提供一种数据处理系统,包括:至少一个如本公开任意实施例所述的服务系统和至少一个如本公开任意实施例所述的旁路卸载系统。示例地,数据处理系统300的示意图可以如图3所示,其中示出的数据处理系统300包括一个服务系统和一个旁路卸载系统。
基于同一发明构思,参照图4,本公开实施例还提供一种数据处理方法,应用于如本公开任意实施例所提供的服务系统,该方法包括:
在步骤41中,监测服务系统CPU的第一负载;
在步骤42中,若第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务;
在步骤43中,针对目标任务进行任务封装,获得与目标任务对应的第一封装数据,其中,第一封装数据包括目标任务的任务类型和处理目标任务所需数据;
在步骤44中,将第一封装数据发送至旁路卸载系统,以使旁路卸载系统处理目标任务。
参照图5,本公开实施例还提供一种数据处理方法,应用于如本公开任意实施例所提供的旁路卸载系统,该方法包括:
在步骤51中,监测旁路卸载系统中各计算设备的第二负载;
再不后52中,接收来自服务系统的第一封装数据;
在步骤53中,利用封装数据解析程序解析第一封装数据,以获得第一封装数据包括的目标任务的任务类型和处理目标任务所需数据;
在步骤54中,根据目标任务的任务类型以及各计算设备的第二负载,确定能够处理目标任务的目标计算设备,并将处理目标任务所需数据发送至目标计算设备,以使目标计算设备根据处理目标任务所需数据处理目标任务并获得针对目标任务的任务处理结果。
上述各步骤的具体实施方式已在上文进行详细举例说明,这里不再赘述。另外应当理解的是,对于上述方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本公开并不受上文所描述的动作顺序的限制。其次,本领域技术人员也应该知悉,上文所描述的实施例属于优选实施例,所涉及的步骤并不一定是本公开所必须的。
下面参考图6,其示出了适于用来实现本公开实施例的电子设备600的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图6示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,服务器可以利用诸如HTTP(HyperText Transfer Protocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:监测所述服务系统CPU的第一负载;若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务;针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务。
或者,上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:监测所述旁路卸载系统中各计算设备的第二负载;接收来自服务系统的第一封装数据;利用封装数据解析程序解析所述第一封装数据,以获得所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据;根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备,以使所述目标计算设备根据处理所述目标任务所需数据处理所述目标任务并获得针对所述目标任务的任务处理结果。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块的名称在某种情况下并不构成对该模块本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例,提供了一种服务系统,所述服务系统包括服务模块、第一监测模块、封装模块以及第一数据传输模块;
所述第一监测模块用于实时监测所述服务系统CPU的第一负载,并将所述第一负载发送至所述服务模块;
所述服务模块用于若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务,并将所述目标任务和处理所述目标任务所需数据发送至所述封装模块;
所述封装模块用于针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
所述第一数据传输模块用于将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务。
根据本公开的一个或多个实施例,提供了一种服务系统,所述封装模块用于将处理所述目标任务所需的每段数据依次按照数据类型、数据长度、数据的结构封装为数据body,同时,将所述数据body的总长度、校验和、所述目标任务的任务类型封装为数据头,并将所述数据头和所述数据body合成为所述第一封装数据。
根据本公开的一个或多个实施例,提供了一种服务系统,所述第一数据传输模块还用于接收所述旁路卸载系统针对所述第一封装数据发送的反馈数据,并将所述反馈数据发送至所述封装模块;
所述封装模块还用于对接收到的所述反馈数据进行解析,并将解析结果发送至所述服务模块,其中,所述解析结果为所述旁路卸载系统对所述目标任务的处理结果或所述旁路卸载系统未成功处理所述目标任务的提示消息;
所述服务模块用于若所述解析结果为所述旁路卸载系统对所述目标任务的处理结果,则将所述旁路卸载系统对所述目标任务的处理结果作为所述目标任务的处理结果;
所述服务模块还用于若所述解析结果为所述旁路卸载系统未成功处理所述目标任务的提示消息,则触发所述第一数据传输模块将所述第一封装数据再次发送至所述旁路卸载系统。
根据本公开的一个或多个实施例,提供了一种服务系统,所述服务模块还用于自所述第一数据传输模块初次向外发送所述第一封装数据开始,记录所述服务系统发送所述第一封装数据的次数;以及,
若所述服务系统发送所述第一封装数据的次数已达到预设次数,而所述封装模块仍未解析得到所述旁路卸载系统对所述目标任务的处理结果,停止向外发送所述第一封装数据,并等待所述服务系统的CPU处理所述目标任务。
根据本公开的一个或多个实施例,提供了一种服务系统,所述服务模块还用于自所述第一数据传输模块初次向外发送所述第一封装数据时开始计时;以及,
若计时时长已达到预设时长,而所述封装模块仍未解析得到所述旁路卸载系统对所述目标任务的处理结果,停止向外发送所述第一封装数据,并等待所述服务系统的CPU处理所述目标任务。
根据本公开的一个或多个实施例,提供了一种旁路卸载系统,所述旁路卸载系统包括第二监测模块、第二数据传输模块、解析校验模块、调度模块以及至少一个计算设备;
所述第二监测模块用于实时监测所述旁路卸载系统中各计算设备的第二负载,并将所述第二负载发送至所述调度模块;
所述第二数据传输模块用于接收来自服务系统的第一封装数据,并将所述第一封装数据传输至所述解析校验模块;
所述解析校验模块用于利用封装数据解析程序解析所述第一封装数据,并将获得的所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据发送至所述调度模块;
所述调度模块用于根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备;
所述目标计算设备用于根据处理所述目标任务所需数据处理所述目标任务,并获得针对所述目标任务的任务处理结果。
根据本公开的一个或多个实施例,提供了一种旁路卸载系统,所述调度模块用于:
根据所述目标任务的任务类型,确定目标设备组,所述目标设备组包括与所述目标任务的任务类型对应的计算设备;
若所述目标设备组中各个计算设备第二负载之和小于或等于第二负载阈值,将所述目标设备组中的计算设备之一确定为所述目标计算设备;
若所述目标设备组中各个计算设备第二负载之和大于所述第二负载阈值、且所述旁路卸载系统的CPU负载小于或等于第三负载阈值,将所述旁路卸载系统的CPU确定为所述目标计算设备。
根据本公开的一个或多个实施例,提供了一种旁路卸载系统,所述调度模块还用于:
若所述目标设备组中各个计算设备第二负载之和大于所述第二负载阈值、且所述旁路卸载系统的CPU负载大于所述第三负载阈值,生成用于指示所述旁路卸载系统未成功处理所述目标任务的提示消息;
将所述提示消息发送至所述第二数据传输模块;以及,
所述第二数据传输模块用于将所述提示消息发送至所述服务系统。
根据本公开的一个或多个实施例,提供了一种旁路卸载系统,所述目标计算设备还用于将针对所述目标任务的任务处理结果发送至所述解析校验模块;
所述解析校验模块还用于封装所述任务处理结果,并将封装得到的数据发送至所述服务系统。
根据本公开的一个或多个实施例,提供了一种数据处理方法,应用于服务系统,所述方法包括:
监测所述服务系统CPU的第一负载;
若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务;
针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务。
根据本公开的一个或多个实施例,提供了一种数据处理方法,应用于旁路卸载系统,所述方法包括:
监测所述旁路卸载系统中各计算设备的第二负载;
接收来自服务系统的第一封装数据;
利用封装数据解析程序解析所述第一封装数据,以获得所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据;
根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备,以使所述目标计算设备根据处理所述目标任务所需数据处理所述目标任务并获得针对所述目标任务的任务处理结果。
根据本公开的一个或多个实施例,提供了一种数据处理方法,一种计算机可读介质,其上存储有计算机程序,该程序被处理装置执行时实现本公开任意实施例提供的应用于服务系统的数据处理方法的步骤,或者,该程序被处理装置执行时实现本公开任意实施例提供的应用于旁路卸载系统的数据处理方法的步骤。
根据本公开的一个或多个实施例,提供了一种数据处理系统,所述数据处理系统包括至少一个如本公开任意实施例所述的服务系统和至少一个如本公开任意实施例所述的旁路卸载系统。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

Claims (13)

1.一种服务系统,其特征在于,所述服务系统包括服务模块、第一监测模块、封装模块以及第一数据传输模块;
所述第一监测模块用于实时监测所述服务系统CPU的第一负载,并将所述第一负载发送至所述服务模块;
所述服务模块用于若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务,并将所述目标任务和处理所述目标任务所需数据发送至所述封装模块;
所述封装模块用于针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
所述第一数据传输模块用于将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务;其中,
所述第一数据传输模块还用于接收所述旁路卸载系统针对所述第一封装数据发送的反馈数据,所述反馈数据包括针对所述第一封装数据的处理结果,用于所述服务系统根据所述反馈数据确定是否将所述第一封装数据再次发送至所述旁路卸载系统。
2.根据权利要求1所述的服务系统,其特征在于,所述封装模块用于将处理所述目标任务所需的每段数据依次按照数据类型、数据长度、数据的结构封装为数据body,同时,将所述数据body的总长度、校验和、所述目标任务的任务类型封装为数据头,并将所述数据头和所述数据body合成为所述第一封装数据。
3.根据权利要求1所述的服务系统,其特征在于,所述第一数据传输模块还用于将所述反馈数据发送至所述封装模块;
所述封装模块还用于对接收到的所述反馈数据进行解析,并将解析结果发送至所述服务模块,其中,所述解析结果为所述旁路卸载系统对所述目标任务的处理结果或所述旁路卸载系统未成功处理所述目标任务的提示消息;
所述服务模块用于若所述解析结果为所述旁路卸载系统对所述目标任务的处理结果,则将所述旁路卸载系统对所述目标任务的处理结果作为所述目标任务的处理结果;
所述服务模块还用于若所述解析结果为所述旁路卸载系统未成功处理所述目标任务的提示消息,则触发所述第一数据传输模块将所述第一封装数据再次发送至所述旁路卸载系统。
4.根据权利要求3所述的服务系统,其特征在于,所述服务模块还用于自所述第一数据传输模块初次向外发送所述第一封装数据开始,记录所述服务系统发送所述第一封装数据的次数;以及,
若所述服务系统发送所述第一封装数据的次数已达到预设次数,而所述封装模块仍未解析得到所述旁路卸载系统对所述目标任务的处理结果,停止向外发送所述第一封装数据,并等待所述服务系统的CPU处理所述目标任务。
5.根据权利要求3所述的服务系统,其特征在于,所述服务模块还用于自所述第一数据传输模块初次向外发送所述第一封装数据时开始计时;以及,
若计时时长已达到预设时长,而所述封装模块仍未解析得到所述旁路卸载系统对所述目标任务的处理结果,停止向外发送所述第一封装数据,并等待所述服务系统的CPU处理所述目标任务。
6.一种旁路卸载系统,其特征在于,所述旁路卸载系统包括第二监测模块、第二数据传输模块、解析校验模块、调度模块以及至少一个计算设备;
所述第二监测模块用于实时监测所述旁路卸载系统中各计算设备的第二负载,并将所述第二负载发送至所述调度模块;
所述第二数据传输模块用于接收来自服务系统的第一封装数据,并将所述第一封装数据传输至所述解析校验模块;
所述解析校验模块用于利用封装数据解析程序解析所述第一封装数据,并将获得的所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据发送至所述调度模块;
所述调度模块用于根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备;
所述目标计算设备用于根据处理所述目标任务所需数据处理所述目标任务,并获得针对所述目标任务的任务处理结果;其中,
所述旁路卸载系统还用于向所述服务系统发送针对所述第一封装数据的反馈数据,所述反馈数据包括针对所述第一封装数据的处理结果,用于所述服务系统根据所述反馈数据确定是否将所述第一封装数据再次发送至所述旁路卸载系统。
7.根据权利要求6所述的旁路卸载系统,其特征在于,所述调度模块用于:
根据所述目标任务的任务类型,确定目标设备组,所述目标设备组包括与所述目标任务的任务类型对应的计算设备;
若所述目标设备组中各个计算设备第二负载之和小于或等于第二负载阈值,将所述目标设备组中的计算设备之一确定为所述目标计算设备;
若所述目标设备组中各个计算设备第二负载之和大于所述第二负载阈值、且所述旁路卸载系统的CPU负载小于或等于第三负载阈值,将所述旁路卸载系统的CPU确定为所述目标计算设备。
8.根据权利要求7所述的旁路卸载系统,其特征在于,所述调度模块还用于:
若所述目标设备组中各个计算设备第二负载之和大于所述第二负载阈值、且所述旁路卸载系统的CPU负载大于所述第三负载阈值,生成用于指示所述旁路卸载系统未成功处理所述目标任务的提示消息;
将所述提示消息发送至所述第二数据传输模块;以及,
所述第二数据传输模块用于将所述提示消息发送至所述服务系统。
9.根据权利要求6所述的旁路卸载系统,其特征在于,所述目标计算设备还用于将针对所述目标任务的任务处理结果发送至所述解析校验模块;
所述解析校验模块还用于封装所述任务处理结果,并将封装得到的数据发送至所述服务系统。
10.一种数据处理方法,其特征在于,应用于服务系统,所述方法包括:
监测所述服务系统CPU的第一负载;
若所述第一负载大于或等于第一负载阈值,从待处理的CPU任务中确定出目标任务;
针对所述目标任务进行任务封装,获得与所述目标任务对应的第一封装数据,其中,所述第一封装数据包括所述目标任务的任务类型和处理所述目标任务所需数据;
将所述第一封装数据发送至旁路卸载系统,以使所述旁路卸载系统处理所述目标任务;
接收所述旁路卸载系统针对所述第一封装数据发送的反馈数据,所述反馈数据包括针对所述第一封装数据的处理结果,用于所述服务系统根据所述反馈数据确定是否将所述第一封装数据再次发送至所述旁路卸载系统。
11.一种数据处理方法,其特征在于,应用于旁路卸载系统,所述方法包括:
监测所述旁路卸载系统中各计算设备的第二负载;
接收来自服务系统的第一封装数据;
利用封装数据解析程序解析所述第一封装数据,以获得所述第一封装数据包括的目标任务的任务类型和处理所述目标任务所需数据;
根据所述目标任务的任务类型以及各计算设备的第二负载,确定能够处理所述目标任务的目标计算设备,并将处理所述目标任务所需数据发送至所述目标计算设备,以使所述目标计算设备根据处理所述目标任务所需数据处理所述目标任务并获得针对所述目标任务的任务处理结果;
向所述服务系统发送针对所述第一封装数据的反馈数据,所述反馈数据包括针对所述第一封装数据的处理结果,用于所述服务系统根据所述反馈数据确定是否将所述第一封装数据再次发送至所述旁路卸载系统。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理装置执行时实现权利要求10中所述方法的步骤,或者,该程序被处理装置执行时实现权利要求11所述方法的步骤。
13.一种数据处理系统,其特征在于,所述数据处理系统包括至少一个如权利要求1-5中任一项所述的服务系统和至少一个如权利要求6-9中任一项所述的旁路卸载系统。
CN202010224947.6A 2020-03-26 2020-03-26 数据处理方法、系统、介质、服务系统及旁路卸载系统 Active CN111427693B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010224947.6A CN111427693B (zh) 2020-03-26 2020-03-26 数据处理方法、系统、介质、服务系统及旁路卸载系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010224947.6A CN111427693B (zh) 2020-03-26 2020-03-26 数据处理方法、系统、介质、服务系统及旁路卸载系统

Publications (2)

Publication Number Publication Date
CN111427693A CN111427693A (zh) 2020-07-17
CN111427693B true CN111427693B (zh) 2023-04-28

Family

ID=71548752

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010224947.6A Active CN111427693B (zh) 2020-03-26 2020-03-26 数据处理方法、系统、介质、服务系统及旁路卸载系统

Country Status (1)

Country Link
CN (1) CN111427693B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112423004B (zh) * 2020-11-05 2024-02-06 深圳Tcl新技术有限公司 视频数据传输方法、装置、发送端以及存储介质
CN112346870B (zh) * 2020-11-18 2024-04-16 脸萌有限公司 模型处理方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012135192A2 (en) * 2011-03-28 2012-10-04 Mcafee, Inc. System and method for virtual machine monitor based anti-malware security
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN109791505A (zh) * 2016-10-05 2019-05-21 瑞典爱立信有限公司 控制在数据中心中的资源分配

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2366891B (en) * 2001-12-06 2002-11-20 Appsense Ltd Improvements in and relating to computer apparatus terminal server apparatus & performance management methods therefor

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012135192A2 (en) * 2011-03-28 2012-10-04 Mcafee, Inc. System and method for virtual machine monitor based anti-malware security
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN109791505A (zh) * 2016-10-05 2019-05-21 瑞典爱立信有限公司 控制在数据中心中的资源分配

Also Published As

Publication number Publication date
CN111427693A (zh) 2020-07-17

Similar Documents

Publication Publication Date Title
CN110795022B (zh) 终端测试方法、系统及存储介质
CN111818136A (zh) 数据处理方法、装置、电子设备及计算机可读介质
CN111427693B (zh) 数据处理方法、系统、介质、服务系统及旁路卸载系统
CN110727566B (zh) 一种获取进程崩溃信息的方法、装置、介质和电子设备
CN111432001B (zh) 用于跳转场景的方法、装置、电子设备和计算机可读介质
CN111930709B (zh) 数据存储方法、装置、电子设备和计算机可读介质
CN112261651B (zh) 终端的控制方法、装置、终端和存储介质
CN116700907B (zh) 服务调用需求文档存储方法、装置、电子设备和可读介质
CN110275701B (zh) 数据处理方法、装置、介质和计算设备
CN111352872A (zh) 执行引擎、数据处理方法、装置、电子设备和介质
CN113518183B (zh) 摄像头调用方法、装置和电子设备
CN111324387A (zh) 应用任务的控制方法、装置、终端及系统
CN110572805A (zh) 数据传输方法、装置、电子设备和计算机可读介质
CN115938013A (zh) 用于监控数据的方法、装置、设备和计算机可读介质
CN112416887B (zh) 信息交互方法、装置和电子设备
CN110764995B (zh) 一种检测文件访问异常的方法、装置、介质和电子设备
CN111752625A (zh) 用于接口mock的方法和装置
CN110430144A (zh) 数据处理方法、装置、电子设备以及介质
CN111694679B (zh) 消息处理方法、装置和电子设备
CN113722115A (zh) 调用接口的方法、装置、设备和计算机可读介质
CN111314021A (zh) 数据传输方法、装置、电子设备及计算机可读存储介质
CN113157365B (zh) 程序运行方法、装置、电子设备和计算机可读介质
CN113778956A (zh) 资源处理方法、装置、电子设备和计算机可读介质
CN110007894B (zh) 用于发送音频信息的方法及装置
CN116760992B (zh) 视频编码、认证、加密和传输方法、装置、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant