CN115292032A

CN115292032A - 一种多用户接入的智能边缘计算系统中的任务卸载方法

Info

Publication number: CN115292032A
Application number: CN202210770316.3A
Authority: CN
Inventors: 苏家楠; 李晓辉; 沈八中; 吕思婷; 张鹏
Original assignee: Guangzhou Institute of Technology of Xidian University
Current assignee: Guangzhou Institute of Technology of Xidian University
Priority date: 2022-06-30
Filing date: 2022-06-30
Publication date: 2022-11-04

Abstract

本发明公开了本发明实施例提供了一种多用户接入的智能边缘计算系统的任务卸载方法，应用于终端节点和边缘服务器节点，涉及工业物联网技术领域。通过将任务分为时延敏感型、计算复杂型和终端任务型，优化了由于业务类型不明确产生的节点计算资源不匹配的问题，提高了边缘计算系统的整体处理效率；并将原始任务分割为可以独立执行的子任务，有效降低了由于任务量过大产生的计算和等待时延，降低了任务完成之间的耦合性；边缘服务器节点对任务卸载的过程进行建模，根据任务计算的历史处理数据合理判断任务的卸载决策和卸载位置，有效地缩短了因任务处理等待队列过长产生的计算时延，满足在时延约束的允许下尽可能地减少能量损耗。

Description

一种多用户接入的智能边缘计算系统中的任务卸载方法

技术领域

本发明涉及工业物联网技术领域，具体涉及一种多用户接入的智能边缘计算系统中的任务卸载方法。

背景技术

随着联网的智能物联设备的增多和计算任务复杂度的提高，终端网络产生了海量的感知数据和计算数据。接入计算网络的大量业务以及产生的数据给网络带宽和计算中心的计算能力带来了巨大压力。传统云计算模式将收集到的感知数据全部传输至云中心处理，可能造成响应延迟高、传输能耗高和隐私泄露等问题。同时物联网上行速率具有时延敏感的特性，对于任务的配合完成有较高的时延约束。因此，边缘计算技术将部分任务卸载到边缘端，降低通信传输时延，避免隐私泄露，以缩短通信链路处理时间的思路降低任务计算时间。

在边缘计算领域，计算卸载是一项重要技术。由于终端设备的计算能力有限，终端设备通常无法独立完成所有任务，因此需要将任务卸载到边缘计算服务器或云服务器通过更丰富的计算资源完成任务。将任务全部卸载到一个服务节点，通常会造成该服务节点拥塞，形成很长的等待队列，并且浪费了其他节点的计算资源。而随机地将任务进行卸载会在通信过程中形成较高的传输时延，不利于控制任务完成的整体时延。因此计算卸载通过制定合理的任务卸载决策，综合分析节点以及任务等情况，完成任务是否进行卸载，以及目标任务卸载到合适节点的决策。

现有技术中，通常获取多边缘服务器多移动终端场景下的数据总集合，然后以终端能量消耗最小为目标结合网络中的设备计算能力进行决策。然后，采用马尔可夫决策过程进行建模，将每种策略的优劣都转化为最终汇报数据大小，从而给出最优策略。但是，一方面该方法仅以缩小能耗为目标进行，忽略了工业物联网中产生的一些时延敏感型任务；另一方面，该方法利用马尔可夫过程进行建模，忽视了决策过程产生的持续时间对建模过程的影响。

发明内容

本发明的目的就在于解决上述背景技术的问题，而提出一种多用户接入的智能边缘计算系统中的任务卸载方法。

本发明的目的可以通过以下技术方案实现：

本发明实施例第一方面，首先提供了一种多用户接入的智能边缘计算系统的任务卸载方法，应用于终端节点，所述方法包括：

获取所述终端节点连接的传感器采集的数据生成待计算的原始任务，判断所述原始任务是否满足本地卸载条件；

若所述原始任务满足本地卸载条件，将所述原始任务进行分割并排序整合为包含多个子任务的线性任务队列；

针对每一子任务的任务复杂度和预计完成时延判断该子任务的任务类型；所述任务类型包括时延敏感型、计算复杂型和终端任务型；所述终端任务型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延小于预设的时延敏感阈值；所述计算复杂型表示该子任务的任务复杂度不小于预设的任务复杂度阈值；所述时延敏感型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延不小于预设的时延敏感阈值；

针对每一子任务，若该子任务为所述终端任务型，则处理该子任务；若该子任务为所述计算复杂型，则将该子任务卸载到云服务器节点，以使所述云服务器节点处理该子任务；若该子任务为所述时延敏感型，则将该子任务卸载到边缘服务器节点，以使边缘服务器节点对该子任务进行决策过程建模得到该子任务的最优卸载决策，使得处理该子任务的能耗和时延联合优化的整体收益达到最大，处理该子任务，或者将该子任务卸载到云服务器节点以使所述云服务器节点处理该子任务。

可选地，在将所述原始任务进行分割并排序整合为包含多个子任务的线性任务队列之前，所述方法还包括：

计算所述原始任务的实际开始时间AST(j)：

AST(j)＝max{avail{0∪[k]},max(AFT(j')+C_jj')}

其中，avail{0∪[k]}表示所述终端节点或所述云服务器节点k最早准备执行时间，j'表示所有所述原始任务的前置任务，C_jj'表示j'和j任务结果的调度时间；

前置任务j'的实际结束时间AFT(j')：

AFT(j')＝min{D_p(j')+AST(j')}

其中，D_p(j')是前置任务执行时间；

从所有关联的前置任务结果迭代出当前任务结束时间，分别计算所述原始任务在所述云服务器节点的实际完成时间AFT_sever(j)和在所述终端节点的实际完成时间AFT_local(j)；

判断所述原始任务是否满足本地卸载条件，若AFT_sever(j)≤AFT_local(j)，所述原始任务不满足本地卸载条件，则将所述原始任务卸载到所述云服务器节点，以使所述云服务器节点处理所述原始任务，否则，所述原始任务满足本地卸载条件。

可选地，若所述原始任务满足本地卸载条件，将所述原始任务进行分割并排序整合为包含多个子任务的线性任务队列，所述方法包括：

对所述原始任务整体根据任务的继承性和并行性进行拓扑结构分割；任务的继承性表示后置任务的进行依赖于前置任务的完成；任务的并行性表示两个任务的进行不存在逻辑上的依赖关系；

求解使所述原始任务完成时间达到最小的目标任务：

其中，a(s)表示在状态s时所采取动作，N为系统任务总量；

选取最小的处理时间任务作为优先级队列最开始的执行任务，将任务分割且排列为线性队列时，后置任务的优先级一定低于前置任务；

设计子任务优先级排序算法，将子任务整合为线性的待处理任务队列：

计算子任务j优先级：

Rank(j)＝D_t(j)+max(R_m+Rank(j'))

其中，D_t(j)是子任务j的处理时间，R_m是所有前置任务的处理时间，Rank(j')是与子任务j有继承性关系的前置任务的处理时间；

对所有子任务按照优先级大小进行降序排序，得到线性任务队列。

可选地，所述边缘服务器节点和所述终端节点统称为边缘侧；

针对每一子任务的任务复杂度和预计完成时延判断该子任务的任务类型，包括：

根据所述边缘侧的计算资源和计算能力，结合不同复杂度任务的执行情况，确定所述边缘侧能够承受的综合复杂度上限为α_max；

根据每一子任务的时间和算法复杂度，确定任务i的综合复杂度为α_i；

根据每一子任务的时延约束需求，确定该子任务的时延阈值t_max；

计算每一子任务的完成时间t_ij；

根据α_max、α_i、t_max和t_ij之间的关系确定该子任务的任务类型。

可选地，计算每一子任务的完成时间t_ij，包括：

计算信道传输功率：

其中，g_ij表示所述终端节点i到所述云服务器节点j的信道增益，B为带宽，N₀为白噪声功率，p为发射功率；

将每一子任务的完成时间拆分为传输时间

和计算时间

计算该子任务的传输时间

其中，m_i表示需要传输的数据总量；

计算该任务的计算时间

其中，c_i表示处理每个子任务所需的CPU周期数，f_ij表示服务器分配给该子任务的计算资源，

计算总的任务完成时间：

本发明实施例第二方面，还提供了一种多用户接入的智能边缘计算系统的任务卸载方法，应用于边缘服务器节点，所述方法包括：

接收终端节点发送的目标子任务；所述目标子任务为所述终端节点的线性任务队列中，根据每一子任务的任务复杂度和预计完成时延确定的任务类型为时延敏感型的子任务；所述终端节点的线性任务队列，为所述终端节点将满足本地卸载条件的原始任务进行分割并排序整合得到的包含多个子任务的任务队列；所述原始任务为所述终端节点连接的传感器采集的任务；所述任务类型包括时延敏感型、计算复杂型和终端任务型；所述终端任务型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延小于预设的时延敏感阈值；所述计算复杂型表示该子任务的任务复杂度不小于预设的任务复杂度阈值；所述时延敏感型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延不小于预设的时延敏感阈值；

对所述目标子任务进行决策过程建模得到所述目标子任务的最优卸载决策，使得处理所述目标子任务的能耗和时延联合优化的整体收益达到最大；

根据所述最优卸载决策处理所述目标子任务，或者将所述目标子任务卸载到云服务器节点以使所述云服务器节点处理所述目标子任务。

可选地，对所述目标子任务进行决策过程建模得到所述目标子任务的最优卸载决策，包括：

利用半马尔可夫过程SMDP对所述目标子任务卸载过程进行决策建模；

采用参考奖励模型对卸载行为进行评估；

利用迭代算法求得最大化SMDP建模过程的长期回报，获得系统的最大收益，得到所述目标子任务的最优卸载决策。

可选地，利用半马尔可夫过程SMDP对所述目标子任务卸载过程进行决策建模，包括：

根据终端节点到达和离开服务覆盖节点的情况，对所述目标任务到达或离开等待队列的状态空间、行为空间建模：

状态空间e建模为：

e∈E＝{A_R,D_R}

其中，A_R表示需要R个计算单元的所述目标子任务到达队列，D_R表示需要R个计算单元的所述目标子任务处理完成离开队列；

对应状态空间e，MEC产生分配对应数量计算单元的状态集合S：

S＝{s|s＝(R₁,R₂,...,R_m,M,e)}

其中，M表示单个MEC可分配的最多计算单元数量；状态集合S表示为所述目标子任务分配对应下标数量的计算单元，当s＝R₀时，所述目标子任务进入等待队列，在等待队列的所述目标子任务来源驶出节点服务范围，所述目标子任务被抛弃；

对不同事件状态下，MEC边缘计算服务器分配给所述目标子任务一定数量可用计算单元的决策行为空间a(s)建模：

a(s)＝{-1,0,1,2,...,N}

其中，a(s)＝-1表示服务节点充分，所述目标子任务完成并返回给终端节点；a(s)＝0表示节点拒绝用户卸载任务请求，当用户离开时放弃所述目标子任务；a(s)＝i表示服务节点根据等待队列分配i个计算单元处理子任务。

可选地，采用参考奖励模型对卸载行为进行评估，包括：

计算收入k(s,a)：

其中，k(s,a)表示在状态s的情况下采取行动a带来的收益，来自于为任务卸载模型节省能量和缩短任务处理时延；i表示分配的计算单元个数；E表示处理子任务时消耗的最大能量，由上传的历史最大处理器消耗得来；T表示子任务从终端出发直至返回所用时间；D_p(i)表示链路传输造成的时延消耗；α和β分别代表对于节省能量和时延的绩效因子；η表示任务到达但仍被分配到等待序列的惩罚因子；θ表示任务已不在服务节点，且等待队列仍有任务等待处理同时有空闲服务单元的惩罚因子；μ表示计算单元的计算效率；p表示卸载到所述边缘服务器节点的概率，δ表示所述边缘服务器节点所消耗能量；

计算预期付出成本g(s,a)：

g(s,a)＝c(s,a)τ(s,a)

其中，g(s,a)表示在状态s的情况下采取行动a和相应的状态转换期间系统的预期成本；c(s,a)表示节点分配的资源成本，来自于通信产生的消耗，开发者根据任务数据量给定；τ(s,a)表示状态转移的持续事件发生概率，假定持续时间服从指数分布；

计算卸载行为报酬r(s,a)：

r(s,a)＝k(s,a)-g(s,a)

其中，r(s,a)为在状态s采取行动a时卸载行为获得的报酬。

可选地，利用迭代算法求得最大化SMDP建模过程的长期回报，获得系统的最大收益，得到所述目标子任务的最优卸载决策，包括：

在每一次迭代中，根据贝尔曼方程迭代计算各状态在不同作用下的最大值函数：

其中，v(s)表示由状态s'转移到当前状态s最大收益；v(s')为前一次迭代中的初始化值函数；λ为发生任务转移的概率；g(s,a)为成本；p(s'|s,a)为发生任务转移时，从状态s'到状态s的概率；

重复迭代，直到每个状态的最大值函数收敛，将迭代次数设置为零，并将每个状态的值函数初始化为零；

计算归一化成本和转移概率：

其中，将成本归一化为

转移概率归一化为

y＝Kλ+KRμ；σ(s,a)表示任务出现概率；

结合上面两式，计算归一化后最大增益

根据方程

计算各态归一化的最大值，在达到预期最大迭代次数k后，计算最后几次迭代状态之间的绝对差值Δ：

ξ为预设数值，当Δ≤ξ时，该方案为最佳方案，最佳方案中的状态集合为最优状态集合，得到所述目标子任务的最优卸载决策；所述最优卸载决策确定了处理所述目标任务的节点。

本发明实施例提供了一种多用户接入的智能边缘计算系统的任务卸载方法，应用于终端节点，获取终端节点连接的传感器采集的原始任务，判断原始任务是否满足本地卸载条件；若原始任务满足本地卸载条件，将原始任务进行分割并排序整合为包含多个子任务的线性任务队列；针对每一子任务的任务复杂度和预计完成时延判断该子任务的任务类型；任务类型包括时延敏感型、计算复杂型和终端任务型；终端任务型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延小于预设的时延敏感阈值；计算复杂型表示该子任务的任务复杂度不小于预设的任务复杂度阈值；时延敏感型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延不小于预设的时延敏感阈值；针对每一子任务，若该子任务为终端任务型，则处理该子任务；若该子任务为计算复杂型，则将该子任务卸载到云服务器节点，以使云服务器节点处理该子任务；若该子任务为时延敏感型，则将该子任务卸载到边缘服务器节点，以使边缘服务器节点对该子任务进行决策过程建模得到该子任务的最优卸载决策，使得处理所述目标子任务的能耗和时延联合优化的整体收益达到最大，处理该子任务，或者将该子任务卸载到云服务器节点以使云服务器节点处理该子任务。

通过将终端节点获取的任务分为时延敏感型、计算复杂型和终端任务型，优化了计算卸载过程中由于业务类型不明确产生的节点计算资源不匹配的问题，提高了边缘计算系统的整体处理效率；并将原始任务分割为可以独立执行的子任务，使分割后的任务能够更加灵活地卸载到不同节点，有效降低了由于任务量过大产生的计算和等待时延，降低了任务完成之间的耦合性；边缘服务器节点对任务卸载的过程进行建模，根据任务计算的历史处理数据合理判断任务的卸载决策和卸载位置，有效地缩短了因任务处理等待队列过长产生的计算时延，满足在时延约束的允许下尽可能地减少能量损耗。

附图说明

下面结合附图对本发明作进一步的说明。

图1为本发明实施例提供的应用于终端节点的一种多用户接入的智能边缘计算系统的任务卸载方法；

图2为本发明实施例提供的应用于边缘服务器节点的一种多用户接入的智能边缘计算系统的任务卸载方法；

图3为本发明实施例采用的多用户接入的智能边缘计算系统的系统框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

本发明实施例提供了一种多用户接入的智能边缘计算系统的任务卸载方法，应用于终端节点。参见图1，图1为本发明实施例提供的应用于终端节点的一种多用户接入的智能边缘计算系统的任务卸载方法，该方法可以包括以下步骤：

S101，获取终端节点连接的传感器采集的数据生成待计算的原始任务，判断原始任务是否满足本地卸载条件。

S102，若原始任务满足本地卸载条件，将原始任务进行分割并排序整合为包含多个子任务的线性任务队列。

S103，针对每一子任务的任务复杂度和预计完成时延判断该子任务的任务类型。

S104，针对每一子任务，若该子任务为终端任务型，则处理该子任务；

S105，针对每一子任务，若该子任务为计算复杂型，则将该子任务卸载到云服务器节点，以使云服务器节点处理该子任务；

S106，针对每一子任务，若该子任务为时延敏感型，则将该子任务卸载到边缘服务器节点，以使边缘服务器节点对该子任务进行决策过程建模得到该子任务的最优卸载决策，使得处理该子任务的能耗和时延联合优化的整体收益达到最大，处理该子任务，或者将该子任务卸载到云服务器节点以使云服务器节点处理该子任务。

所述任务类型包括时延敏感型、计算复杂型和终端任务型；所述终端任务型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延小于预设的时延敏感阈值；所述计算复杂型表示该子任务的任务复杂度不小于预设的任务复杂度阈值；所述时延敏感型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延不小于预设的时延敏感阈值；

基于本发明实施例提供的一种多用户接入的智能边缘计算系统的任务卸载方法，通过将终端节点获取的任务分为时延敏感型、计算复杂型和终端任务型，优化了计算卸载过程中由于业务类型不明确产生的节点计算资源不匹配的问题，提高了边缘计算系统的整体处理效率；并将原始任务分割为可以独立执行的子任务，使分割后的任务能够更加灵活地卸载到不同节点，有效降低了由于任务量过大产生的计算和等待时延，降低了任务完成之间的耦合性；边缘服务器节点对任务卸载的过程进行建模，根据任务计算的历史处理数据合理判断任务的卸载决策和卸载位置，有效地缩短了因任务处理等待队列过长产生的计算时延，满足在时延约束的允许下尽可能地减少能量损耗。

一种实现方式中，终端节点可以连接有多种传感器，传感器通过软硬件协议接入终端设备。传感器、PLC可编程逻辑控制器或单片机模块等通过MQTT协议、Modbus协议和OPC-UA协议等软硬件协议接入终端设备。

一种实现方式中，边缘服务器节点对卸载决策过程进行建模，解决多用户竞争计算资源的问题，将竞争资源能力较差的子任务卸载到云服务器节点。

一种实现方式中，云服务器节点将处理该子任务的相关数据储存到数据库中，同时核算该子任务计算产生的磁盘占用率、节省时延和CPU占用率等指标。

在一个实施例中，在步骤S102之前，该方法还包括：

步骤一，计算原始任务的实际开始时间AST(j)：

AST(j)＝max{avail{0∪[k]},max(AFT(j')+C_jj')} (1)

其中，avail{0∪[k]}表示终端节点或云服务器节点k最早准备执行时间，j'表示所有所述原始任务的前置任务，C_jj'表示j'和j任务结果的调度时间。

步骤二，前置任务j'的实际结束时间AFT(j')：

AFT(j')＝min{D_p(j')+AST(j')} (2)

其中，D_p(j')是前置任务执行时间。

步骤三，从所有关联的前置任务结果迭代出当前任务结束时间，分别计算原始任务在云服务器节点的实际完成时间AFT_sever(j)和在终端节点的实际完成时间AFT_local(j)。

步骤四，判断原始任务是否满足本地卸载条件，若AFT_sever(j)≤AFT_local(j)，原始任务不满足本地卸载条件，则将原始任务卸载到云服务器节点，以使云服务器节点处理原始任务，否则，原始任务满足本地卸载条件。

在一个实施例中，步骤S103包括：

步骤一，对原始任务整体根据任务的继承性和并行性进行拓扑结构分割；

步骤二，求解使原始任务完成时间达到最小的目标任务：

其中，a(s)表示在状态s时所采取动作，N为系统任务总量。

步骤三，选取最小的处理时间任务作为优先级队列最开始的执行任务，将任务分割且排列为线性队列时，后置任务的优先级一定低于前置任务。

步骤四，设计子任务优先级排序算法，将子任务整合为线性的待处理任务队列：

计算子任务j优先级：

Rank(j)＝D_t(j)+max(R_m+Rank(j')) (4)

其中，D_t(j)是子任务j的处理时间，R_m是所有前置任务的处理时间，Rank(j')是与子任务j有继承性关系的前置任务的处理时间。

步骤五，对所有子任务按照优先级大小进行降序排序，得到线性任务队列。

任务的继承性表示后置任务的进行依赖于前置任务的完成；任务的并行性表示两个任务的进行不存在逻辑上的依赖关系。

一种实现方式中，并行的两个任务即使其中一个不执行也不会影响另一个任务的执行。

一种实现方式中，子任务优先级排序算法，将整体任务分割为可以独立执行的子任务，并根据并行性和继承性两大因素将分割的任务进行优先级排序，使分割后的任务能够更加灵活地卸载到不同节点，有效降低了由于任务量过大产生的计算和等待时延，降低了任务完成之间的耦合性。

在一个实施例中，边缘服务器节点和终端节点统称为边缘侧；

步骤S103可以包括以下步骤：

步骤一，根据边缘侧的计算资源和计算能力，结合不同复杂度任务的执行情况，确定边缘侧能够承受的综合复杂度上限为α_max。

步骤二，根据每一子任务的时间和算法复杂度，确定任务i的综合复杂度为α_i。

步骤三，根据每一子任务的时延约束需求，确定该子任务的时延阈值t_max。

步骤四，计算每一子任务的完成时间t_ij。

步骤五，根据α_max、α_i、t_max和t_ij之间的关系确定该子任务的任务类型。

一种实现方式中，若子任务同时满足α_i≤α_max且t_ij≤t_max，则确定该子任务为终端任务型，直接在终端节点处理该子任务；若α_i＞α_max，则该子任务为计算复杂型任务，卸载到云计算中心；若α_i≤α_max且t_ij＞t_max的情况下，则该任务为时延敏感型任务，卸载到边缘服务器节点。

在一个实施例中，计算每一子任务的完成时间t_ij具体包括：

步骤一，计算信道传输功率：

其中，g_ij表示终端节点i到云服务器节点j的信道增益，B为带宽，N₀为白噪声功率，p为发射功率；

步骤二，将每一子任务的完成时间拆分为传输时间

和计算时间

计算该子任务的传输时间

其中，m_i表示需要传输的数据总量；

步骤三，计算该任务的计算时间

步骤四，计算总的任务完成时间：

基于相同的发明构思，本发明实施例还一种多用户接入的智能边缘计算系统的任务卸载方法，应用于边缘服务器节点。参见图2，图2为本发明实施例提供的应用于边缘服务器节点的一种多用户接入的智能边缘计算系统的任务卸载方法，该方法可以包括以下步骤：

S201，接收终端节点发送的目标子任务。

S202，对目标子任务进行决策过程建模得到目标子任务的最优卸载决策，使得处理目标子任务的能耗和时延联合优化的整体收益达到最大。

S203，根据最优卸载决策处理目标子任务，或者将目标子任务卸载到云服务器节点以使云服务器节点处理目标子任务。

目标子任务为终端节点的线性任务队列中，根据每一子任务的任务复杂度和预计完成时延确定的任务类型为时延敏感型的子任务；终端节点的线性任务队列，为终端节点将满足本地卸载条件的原始任务进行分割并排序整合得到的包含多个子任务的任务队列；原始任务为终端节点连接的传感器采集的任务；任务类型包括时延敏感型、计算复杂型和终端任务型；终端任务型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延小于预设的时延敏感阈值；计算复杂型表示该子任务的任务复杂度不小于预设的任务复杂度阈值；时延敏感型表示该子任务的任务复杂度小于预设的任务复杂度阈值，且该子任务的预计完成时延不小于预设的时延敏感阈值。

一种实现方式中，终端节点的操作步骤可以参考上述S101-S104的介绍。

在一个实施例中，步骤S202中对目标子任务进行决策过程建模得到目标子任务的最优卸载决策，具体包括：

步骤一，利用半马尔可夫过程SMDP对目标子任务卸载过程进行决策建模。

步骤二，采用参考奖励模型对卸载行为进行评估。

步骤三，利用迭代算法求得最大化SMDP建模过程的长期回报，获得系统的最大收益，得到所述目标子任务的最优卸载决策。

在一个实施例中，利用半马尔可夫过程SMDP对目标子任务卸载过程进行决策建模，具体包括：

步骤一，根据终端节点到达和离开服务覆盖节点的情况，对目标任务到达或离开等待队列的状态空间、行为空间建模：

状态空间e建模为：

e∈E＝{A_R,D_R} (9)

其中，A_R表示需要R个计算单元的所述目标子任务到达队列，D_R表示需要R个计算单元的所述目标子任务处理完成离开队列。

步骤二，对应状态空间e，MEC产生分配对应数量计算单元的状态集合S：

S＝{s|s＝(R₁,R₂,...,R_m,M,e)} (10)

其中，M表示单个MEC可分配的最多计算单元数量；状态集合S表示为所述目标子任务分配对应下标数量的计算单元，当s＝R₀时，所述目标子任务进入等待队列，在等待队列的所述目标子任务来源驶出节点服务范围，所述目标子任务被抛弃。

步骤三，对不同事件状态下，MEC边缘计算服务器分配给所述目标子任务一定数量可用计算单元的决策行为空间a(s)建模：

a(s)＝{-1,0,1,2,...,N} (11)

在一个实施例中，采用参考奖励模型对卸载行为进行评估，具体包括：

步骤一，计算收入k(s,a)：

其中，k(s,a)表示在状态s的情况下采取行动a带来的收益，来自于为任务卸载模型节省能量和缩短任务处理时延；i表示分配的计算单元个数；E表示处理子任务时消耗的最大能量，由上传的历史最大处理器消耗得来；T表示子任务从终端出发直至返回所用时间；D_p(i)表示链路传输造成的时延消耗；α和β分别代表对于节省能量和时延的绩效因子；η表示任务到达但仍被分配到等待序列的惩罚因子；θ表示任务已不在服务节点，且等待队列仍有任务等待处理同时有空闲服务单元的惩罚因子；μ表示计算单元的计算效率；p表示卸载到边缘服务器节点的概率，δ表示边缘服务器节点所消耗能量；

步骤二，计算预期付出成本g(s,a)：

g(s,a)＝c(s,a)τ(s,a) (13)

步骤三，计算卸载行为报酬r(s,a)：

r(s,a)＝k(s,a)-g(s,a) (14)

其中，r(s,a)为在状态s采取行动a时卸载行为获得的报酬。

在一个实施例中，利用迭代算法求得最大化SMDP建模过程的长期回报，获得系统的最大收益，得到目标子任务的最优卸载决策，具体包括：

步骤一，在每一次迭代中，根据贝尔曼方程迭代计算各状态在不同作用下的最大值函数：

其中，v(s)表示由状态s'转移到当前状态s最大收益；v(s')为前一次迭代中的初始化值函数；λ为发生任务转移的概率；g(s,a)为成本；p(s'|s,a)为发生任务转移时，从状态s'到状态s的概率。

步骤二，重复迭代，直到每个状态的最大值函数收敛，将迭代次数设置为零，并将每个状态的值函数初始化为零。

步骤三，计算归一化成本和转移概率：

其中，将成本归一化为

转移概率归一化为

y＝Kλ+KRμ；σ(s,a)表示任务出现概率；

步骤四，结合上面(16)、(17)两式，计算归一化后最大增益

步骤五，根据方程

ξ为预设数值，当Δ≤ξ时，该方案为最佳方案，最佳方案中的状态集合为最优状态集合，得到目标子任务的最优卸载决策；最优卸载决策确定了处理目标任务的节点。

参照图3，图3为本发明实施例采用的多用户接入的智能边缘计算系统的系统框图。该系统采用三层结构，依次是终端设备层(终端节点)、边缘设备层(边缘计算节点)和云计算中心层(云计算节点)。

终端设备层主要是由传感器、移动设备等组成，分布广泛，数量众多，产生大量原始数据，可以是一个完整的物联网传感器设备，也可以是一个单独的芯片或联网的摄像头等。边缘设备层是由计算能力较小的网关和计算能力较好的边缘网关组成。云端服务器是由云端节点(全量节点)、数据中心和可视化运维组成。

边缘设备层部署了多有接入系统的终端节点，主要分为数据采集、数据预处理、任务分割和通信模块等，承接了汇集传感器等终端数据以及与服务器通信的功能。边缘设备层包括数据存储、数据处理、决策中转和通信模块等，该部分具备一定的计算和存储能力，可以实现一些终端无法实现且时延要求较严格的任务。云计算中心层主要包括通信模块，数据处理，任务指标计算以及数据存储等，该部分主要进行一些完成难度较大，时延要求相对较宽松的任务。

以上对本发明的一个实施例进行了详细说明，但所述内容仅为本发明的较佳实施例，不能被认为用于限定本发明的实施范围。凡依本发明申请范围所作的均等变化与改进等，均应仍归属于本发明的专利涵盖范围之内。