CN114186416A - 一种边缘网络数据年龄优化方法及系统 - Google Patents

一种边缘网络数据年龄优化方法及系统 Download PDF

Info

Publication number
CN114186416A
CN114186416A CN202111513549.7A CN202111513549A CN114186416A CN 114186416 A CN114186416 A CN 114186416A CN 202111513549 A CN202111513549 A CN 202111513549A CN 114186416 A CN114186416 A CN 114186416A
Authority
CN
China
Prior art keywords
data
data set
edge
age
edge network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111513549.7A
Other languages
English (en)
Inventor
徐子川
任文昊
夏秋粉
吴国伟
李明楚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian University of Technology
Original Assignee
Dalian University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian University of Technology filed Critical Dalian University of Technology
Priority to CN202111513549.7A priority Critical patent/CN114186416A/zh
Publication of CN114186416A publication Critical patent/CN114186416A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00Details relating to CAD techniques
    • G06F2111/04Constraint-based CAD

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Game Theory and Decision Science (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Development Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种边缘网络数据年龄优化方法及系统。所述方法,包括:构建包括目标函数和约束条件的边缘网络数据年龄优化框架;目标函数是基于数据年龄及传输处理延时构建的;约束条件包括数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;采用边缘网络数据年龄优化离线启发式算法、边缘网络数据年龄优化近似算法或边缘网络数据年龄优化在线启发式算法对边缘网络数据年龄优化框架进行求解,得到调度策略。本发明实现了移动边缘计算框架中物联网设备应用的年龄感知大数据处理,提升了物联网设备大数据的分析质量,从而提高了通信质量。

Description

一种边缘网络数据年龄优化方法及系统
技术领域
本发明涉及数据年龄优化领域,特别是涉及一种边缘网络数据年龄优化方法及系统。
背景技术
随着5G的快速发展,传感器、传感设备、可穿戴设备等各种物联网(InternetofThings,IoT)设备相互广泛连接。由于这种机器对机器通信的性质,千兆字节级的信息将以前所未有的速度在IoT设备之间穿梭。这需要大数据技术来分析收集到的IoT大数据,然后获得有价值的分析结论。IoT大数据的一个显著特征是分析的质量取决于数据年龄(AgeofData,AoD),其中一段数据的AoD定义为自数据生成以来经过的时间。这是因为新生成的数据通常是具有“热度”的,经常被访问。随着时间的推移,数据变为冷数据,很少或不会再被访问。因此,必须及时分析从IoT设备收集的大数据,以尽量减少AoD。例如,谷歌使用AoD表示数据流管道中的数据保留时间和数据统计的延迟。
传统的大数据分析主要处理远程数据中心中产生或放置的大数据。由于远程数据中心距离边缘IoT设备很远,因此会导致数据处理的严重通信延迟,使得数据将变得陈旧,从而失去对实时分析的利用价值。在IoT设备附近部署云计算能力的移动边缘计算(MobileEdge Computing,MEC)框架可以保证数据处理的及时性。
目前,现有的大数据处理方法要么忽略了数据集的年龄,要么只关注数据包层面的年龄感知信息处理,假设给定了请求的数据量。现有的大数据处理方法的IoT大数据的分析质量有待提高。
发明内容
基于此,本发明实施例提供一种边缘网络数据年龄优化方法及系统,实现了移动边缘计算框架中IoT应用的年龄感知大数据处理,考虑不可预测的请求的到达和传输,考虑不确定延迟的处理,从而提升IoT大数据的分析质量,提高通信质量。
为实现上述目的,本发明提供了如下方案:
一种边缘网络数据年龄优化方法,包括:
构建边缘网络数据年龄优化框架;所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心;
当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心;
当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;
当网络环境中数据集未知、请求的到达和传输未知且延迟未知时,采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
可选的,所述目标函数为:
Figure BDA0003406056530000021
其中,DAm,t表示第m个物联网设备在时隙t生成的数据集的数据年龄;M表示物联网设备的数量;T表示时隙的数量;
Figure BDA0003406056530000022
τ表示处理数据集的时隙;τ-t表示物联网设备生成的数据集从生成到处理的等待时间;
Figure BDA0003406056530000023
表示移动边缘计算网络中基站的集合;bsk表示移动边缘计算网络中的第k个基站;
Figure BDA0003406056530000031
为潜在位置的集合;LOCl为第l个潜在位置;xτ,l,m,k(t)表示是否使用LOCl通过bsk在时隙τ处理第m个物联网设备在时隙t生成的数据集;dm,k,l,t表示通过bsk将第m个物联网设备在时隙t生成的数据集传输至LOCl并进行处理的延时;
所述约束条件为:
Figure BDA0003406056530000032
Figure BDA0003406056530000033
Figure BDA0003406056530000034
Figure BDA0003406056530000035
xτ,l,m,k(t)∈{0,1};
其中,R表示所有的物联网设备发出的请求的集合;dsm,t表示第m个物联网设备在时隙t生成的数据集;rm(t)表示dsm,t对应的请求;δl表示在LOCl上处理单位大小的数据集消耗的计算资源;δl·|dsm,t|表示在LOCl上为处理dsm,t分配的计算资源总量;C(LOCl)表示LOCl的计算能力;cm,k,l,t表示总成本;
Figure BDA0003406056530000036
表示将dsm,t从第m个物联网设备所直连的bsk转移到LOCl的成本,
Figure BDA0003406056530000037
表示dsm,t在LOCl中的存储成本,
Figure BDA0003406056530000038
表示在LOCl中处理dsm,t的成本;Bm表示第m个物联网设备的预算。
可选的,所述采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
将所述约束条件中的xτ,l,m,k(t)∈{0,1}松弛为0≤xτ,l,m,k(t)≤1,基于松弛后的约束条件采用单纯形法对所述目标函数进行求解,得到第一分数解x* τ,l,m,k(t);
根据所述第一分数解和设定阈值,确定候选时隙集
Figure BDA0003406056530000039
和候选位置集
Figure BDA0003406056530000041
其中,
Figure BDA0003406056530000042
η表示设定阈值;
基于所述候选时隙集和所述候选位置集,采用基于匈牙利算法实现的二部图最小权最大匹配的启发式算法得到调度策略。
可选的,所述采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
在生成时刻被调度的条件下,将所述目标函数更改为
Figure BDA0003406056530000043
将所述约束条件中的xτ,l,m,k(t)∈{0,1}更改为xl,m,k(t)∈{0,1},并将xl,m,k(t)∈{0,1}松弛为0≤xl,m,k(t)≤1,得到更新后的目标函数和松弛后的约束条件;其中,xl,m,k(t)表示是否使用LOCl通过bsk处理第m个物联网设备在时隙t生成的数据集;
基于松弛后的约束条件采用单纯形法对所述更新后的目标函数进行求解,得到第二分数解x* l,m,k(t);
基于所述第二分数解,采用最小权最大匹配的近似算法得到调度策略。
可选的,所述采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
基于多臂老虎机的方法预测数据集传输至潜在位置并进行处理的延时,得到延时预测值;
将所述延时预测值输入所述边缘网络数据年龄优化框架中,采用边缘网络数据年龄优化近似算法进行求解,得到调度策略。
可选的,所述基于所述候选时隙集和所述候选位置,采用基于匈牙利算法实现的二部图最小权最大匹配的启发式算法得到调度策略,具体包括:
将数据集添加至二部图的第一组节点中,将为每个时隙创建的虚拟位置添加至二部图的第二组节点中;
将所述第一组节点中数据集按照升序排序,得到升序后的数据集列表;
对于升序后的数据集列表中的任意一个数据集和所述第二组节点中的任意一个虚拟位置,当同时满足第一条件、第二条件和第三条件时,在所述数据集和所述虚拟位置之间增加一条边,且所述边的边权为所述数据集在所述虚拟位置处理时对应的数据年龄;所述第一条件为处理所述数据集的时隙属于所述候选时隙集
Figure BDA0003406056530000051
且所述虚拟位置属于所述候选位置集
Figure BDA0003406056530000052
所述第二条件为所述虚拟位置的计算能力大于处理请求的资源需求;所述第三条件为不超过生成所述数据集的物联网设备的预算;
遍历所述升序后的数据集列表中的所有数据集,得到所述二部图的边集,采用匈牙利算法从所述边集中选择最优边集合;所述最优边集合满足边选条件;所述边选条件为所述第一组节点中的数据集有且仅有一条边与所述第二组节点中的虚拟位置相连,且所有边的边权之和最小;所述最优边集合中的每条边所连的虚拟位置作为对应数据集实现请求的目标位置;
当所有的数据集均找到实现请求的目标位置时,则得到调度策略。
可选的,所述基于所述第二分数解,采用最小权最大匹配的近似算法得到调度策略,具体包括:
根据所述第二分数解x* l,m,k(t)为潜在位置LOCl创建κl个虚拟位置;
Figure BDA0003406056530000053
degl表示潜在位置LOCl的分配分数,
Figure BDA0003406056530000054
将数据集添加至二部图的第一组节点中,将虚拟位置添加至二部图的第二组节点中;
将所述第一组节点中数据集按照降序排序,得到降序后的数据集列表;
对于降序后的数据集列表中的任意一个数据集dsm,t和所述第二组节点中的任意一个虚拟位置
Figure BDA0003406056530000055
当满足
Figure BDA0003406056530000056
时,则添加一条边
Figure BDA0003406056530000057
边权为
Figure BDA0003406056530000058
其中
Figure BDA0003406056530000059
否则添加两条边,第一条为
Figure BDA0003406056530000061
边权为
Figure BDA0003406056530000062
其中
Figure BDA0003406056530000063
第二条为
Figure BDA0003406056530000064
边权为
Figure BDA0003406056530000065
其中
Figure BDA0003406056530000066
表示数据集dsm,t在虚拟位置
Figure BDA0003406056530000067
分配的分数,
Figure BDA0003406056530000068
表示数据集dsm,t在虚拟位置
Figure BDA0003406056530000069
分配的分数;
采用最小权最大匹配法为所述数据集寻找最优边,并将所述最优边所连的虚拟位置作为所述数据集实现请求的目标位置;
当所有的数据集均找到实现请求的目标位置时,则得到调度策略。
可选的,所述基于多臂老虎机的方法预测数据集传输至潜在位置并进行处理的延时,得到延时预测值,具体包括:
根据当前时隙下各个专家的权重计算每个专家被选中的概率;一个所述专家对应若干个臂,所述专家用于预测所对应的所有臂的延时;所述臂为基站与潜在位置组成的对;
根据所述概率确定目标专家;
采用所述目标专家预测数据集传输至潜在位置并进行处理的延时,得到延时预测值。
可选的,所述根据当前时隙下各个专家的权重计算每个专家被选中的概率,具体包括:
根据
Figure BDA00034060565300000610
确定各个专家在当前时隙的权重;其中,wτ+1(expn)表示专家expn在当前时隙的权重,wτ(expn)表示专家expn在上一个时隙的权重,cτ(expn)表示专家expn在上一个时隙接受的代价;∈为一个常量且0<∈≤1/2;
根据
Figure BDA00034060565300000611
计算每个专家被选中的概率;其中,pτ+1(expn)表示专家expn在当前时隙被选中的概率,N表示专家的总数量。
本发明还提供了一种边缘网络数据年龄优化系统,包括:
模型构建模块,用于构建边缘网络数据年龄优化框架;所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心;
第一调度策略生成模块,用于当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心;
第二调度策略生成模块,用于当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;
第三调度策略生成模块,用于当网络环境中数据集未知、请求的到达和传输未知且延迟位置时,采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
与现有技术相比,本发明的有益效果是:
本发明实施例提出了一种边缘网络数据年龄优化方法及系统,构建了IoT大数据处理中的边缘网络数据年龄优化框架,并针对不同的网络环境(数据集已知且无需在生成时刻被调度、数据集已知且在生成时刻被调度、数据集未知、请求的到达和传输未知且延迟未知),采用边缘网络数据年龄优化离线启发式算法、边缘网络数据年龄优化近似算法或边缘网络数据年龄优化在线启发式算法对边缘网络数据年龄优化框架进行求解,得到调度策略。本发明实现了移动边缘计算框架中IoT应用的年龄感知大数据处理,考虑不可预测的请求的到达和传输,考虑不确定延迟的处理,从而提升IoT大数据的分析质量,提高通信质量。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的边缘网络数据年龄优化方法的流程图;
图2为本发明实施例提供的分层MEC网络的结构图;
图3为本发明提供的二部图的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
为了满足大数据处理的及时性和巨大的资源需求,本实施例考虑了一个由IoT服务提供商运营的由本地云和远程云(远程服务中心)组成的分层MEC网络。在MEC网络中,多个IoT设备测量一个地区的物理环境,所有测量都需要通过它们附近的基站发送到MEC网络的云或远程云。本实施例研究了在这样一个分层MEC网络中的IoT应用的年龄感知大数据处理,以最小化IoT大数据分析的AoD。
在分层MEC网络中,最小化IoT大数据分析的AoD带来了几个基本挑战。首先,AoD最小化问题涉及到传输前等待的时间、数据传输延迟和处理延迟之间的复杂相互作用。在数据集的生成上,需要决定调度数据集的处理还是等待。具体来说,如果数据集在生成后立即被安排传输,那么微云或回程链接可能过于拥挤,无法处理数据集。相反,如果一个数据集被推迟了,可能会增加它的AoD。然而,数据集可能以非常快的速度处理,抵消了由于等待调度和传输延迟而增加的AoD。如何在IoT大数据处理中共同考虑数据集的生成时间、微云的资源可用性和传输延迟是一个挑战。其次,IoT服务请求通常是动态进入系统的,网络延迟无法提前预知。如何利用深度学习技术来辅助调度具有不确定网络延迟的大数据分析请求,同时最大限度地减少决策的遗憾界是第二个挑战。第三,每个IoT服务提供商在能源、传输和处理成本方面都有自己的预算,以避免在意外情况下出现不可预测的成本激增。此外,MEC网络中的微云和远程云数据中心具有计算资源容量的限制。在最小化IoT大数据分析的AoD的同时,要联合考虑预算和资源能力的限制是一项挑战。
目前虽然对远程云或MEC网络中的大数据处理有广泛的研究,但大多忽略了IoT大数据处理的AoD需求。这些研究大多没有考虑MEC网络的不确定延迟。此外,他们的目标是最小化数据包级数据的年龄,而非大数据场景。而本实施例实现MEC网络中IoT应用的年龄感知大数据处理,并考虑不可预测的请求的到达和传输,考虑不确定延迟的处理。
参见图1,本实施例提供的边缘网络数据年龄优化方法,包括:
步骤101:构建边缘网络数据年龄优化框架。
所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心。
步骤101,具体包括:
1)MEC网络结构:
本实施例考虑一个由IoT服务提供商操作的分层MEC网络
Figure BDA0003406056530000091
如图2所示,它由一组微云
Figure BDA0003406056530000092
和一组远程数据中心
Figure BDA0003406056530000093
组成。分别用CLi和DCj表示一个微云和一个远程数据中心。每个微云
Figure BDA0003406056530000094
都由一些服务器来实现各种用户请求。用C(CLi)和C(DCj)分别表示在微云CLi上和远程数据中心DCj上处理IoT设备数据的计算能力。IoT设备通过
Figure BDA0003406056530000095
中的基站访问微云,其中一个IoT设备可能位于多个基站的范围内。设bsk
Figure BDA0003406056530000096
中的基站。E是一组连接微云和远程数据中心的通信链路。图2中,11表示边缘云,12表示交换机,13表示数据处理。
IoT设备持续地生成数据,IoT应用发出请求来处理生成的数据。设dvm为一个下标为m的IoT设备。在给定的监控时间段内,每个dvm连续地生成数据,将这个时间段划分为相等的时隙(time slot)。用rm(t)表示IoT设备dvm在时隙t的请求,设R(t)为所有IoT设备在时隙t的请求集。用dsm,t表示IoT设备dvm在时隙t上生成的数据集。当IoT设备在时隙t上产生数据集dsm,t时,就会发出请求rm(t)。假设处理数据集的时隙为τ,则rm(t)的AoD定义为τ-t。
为便于描述,将微云和远程数据中心视为实现请求的潜在位置。设
Figure BDA0003406056530000101
为潜在位置的集合,即
Figure BDA0003406056530000102
设LOCl
Figure BDA0003406056530000103
中的一个潜在位置,LOCl的计算能力用C(LOCl)表示。
2)成本模型:
MEC网络的IoT服务提供商拥有自己的IoT设备,并从云服务提供商租赁资源来处理其IoT大数据。因此,将数据传输、处理和存储成本视为系统开销。设备dvm的数据集dsm,t将通过基站bsk传输后放置在一个微云或远程数据中心上。设ck,l为通过基站bsk和LOCl之间的通信链路传输单位大小数据的成本。将数据集dsm(t)从IoT设备dvm所直连的bsk转移到LOCl的成本为
Figure BDA0003406056530000104
假设在位置LOCl上处理单位大小的数据集会消耗计算资源δl,其中δl是一个预先已知的常量。则在LOCl上为处理数据集dsm,t分配的计算资源总量为δl·|dsm,t|。用cl表示在LOCl中使用单位计算资源的成本。那么,在LOCl中处理数据集dsm,t的成本为
Figure BDA0003406056530000105
在位置LOCl中存储一个单位大小的数据会产生φl的开销,其中φl是一个预先已知的常量。设
Figure BDA0003406056530000106
为数据集dsm,t在LOCl中的存储成本,则有
Figure BDA0003406056530000107
3)延迟模型:
设dm,k为一个单位大小的数据在基站bsk上进行无线信道传输的延迟,dk,l为一个单位的数据从bsk传输到位置LOCl的延迟。设dl是位置LOCl中处理一个单位大小数据的延迟。则通过基站bsk将数据集dsm,t传输至位置LOCl并进行处理的延时为
dm,k,l,t=(dm,k+dk,l+dl)·|dsm,t| (4)
4)边缘网络数据年龄优化框架(ILP数据年龄最小化模型)设计:
假设每个IoT设备dvm有给定的预算Bm用于存储、传输、处理其数据集,分层MEC网络中的AoD最小化问题是最小化MEC网络处理的所有数据集的总数据年龄,并受限于每个潜在位置
Figure BDA0003406056530000111
的计算能力和每个IoT设备的预算Bm以及在时间范围T内存储、传输和处理其数据集的成本。
本实施例通过将分层MEC网络中的AoD最小化问题转化为整数线性规划(ILP),提出一个精确解的求解框架。设τ为微云或数据中心处理dsm,t的时隙。数据集dsm,t可能不会在其生成后立即安排传输和处理,从数据集生成到处理的等待时间为τ-t。一旦调度完成,数据集dsm,t将被传输到一个微云或数据中心。dsm,t的传输和处理用时决定了dsm,t的AoD。设xτ,l,m,k(t)为一个0-1决策变量,表示是否使用LOCl通过基站bsk在时隙τ处理第m个物联网设备在时隙t生成的数据集dsm,t。则dsm,t的AoD为
Figure BDA0003406056530000112
所述目标函数为:
Figure BDA0003406056530000113
其中,DAm,t表示第m个物联网设备在时隙t生成的数据集的数据年龄;M表示物联网设备的数量;T表示时隙的数量;
所述约束条件为:
Figure BDA0003406056530000114
Figure BDA0003406056530000121
Figure BDA0003406056530000122
Figure BDA0003406056530000123
xτ,l,m,k(t)∈{0,1} (11)
其中,R表示所有的物联网设备发出的请求的集合;dsm,t表示第m个物联网设备在时隙t生成的数据集;rm(t)表示dsm,t对应的请求;δl表示在LOCl上处理单位大小的数据集消耗的计算资源;δl·|dsm,t|表示在LOCl上为处理dsm,t分配的计算资源总量;C(LOCl)表示LOCl的计算能力;cm,k,l,t表示总成本;
Figure BDA0003406056530000124
表示将dsm,t从第m个物联网设备所直连的bsk转移到LOCl的成本,
Figure BDA0003406056530000125
表示dsm,t在LOCl中的存储成本,
Figure BDA0003406056530000126
表示在LOCl中处理dsm,t的成本;Bm表示第m个物联网设备的预算。
其中,公式(7)确保请求rm(t)的数据集dsm,t不能在生成之前调度;公式(8)保证数据集dsm,t通过基站放置到一个微云或一个远程数据中心;公式(9)表示一个位置的计算能力不小于分配给它的请求的总资源需求;公式(10)确保不超过每个IoT设备的预算。
步骤102:当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法(Heu)对所述边缘网络数据年龄优化框架进行求解,得到调度策略。所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心。
所述步骤102,具体包括:
1)考虑ILP的高时间复杂性,当问题规模很大时,基于ILP的解决方案可能无法提供有效的扩展。因此,为离线的数据年龄最小化问题设计一个有效的启发式算法。在没有预算约束的情况下,提出了一种带近似比的近似算法。其基本想法是将ILP松弛为LP(线性规划,linearprogram),具体来说,将所述约束条件中的xτ,l,m,k(t)∈{0,1}松弛为0≤xτ,l,m,k(t)≤1,而LP的优化函数与其他约束和ILP保持一致。这样基于松弛后的约束条件采用单纯形法对所述目标函数进行求解,可以在多项式时间内获得LP的分数解(fractionalsolution),即一组令AoD最小化的xτ,l,m,k(t)的非整数最优取值,用x* τ,l,m,k(t)表示LP的最优分数解(第一分数解)。
2)第一分数解的部分非整数值表示将单个数据集dsm(t)调度到不同的时间段,并将其分割到多个位置(微云或远程数据中心)。然而,这种解对原问题而言是非法的,因为每个数据集只能安排在一个时隙中,并仅被分配到单一位置进行处理。因此,需要将分数解修改为原问题的可行整数解。为此,首先获得一组候选时隙和候选位置,从而基于分数解对每个数据集dsm,t进行处理。具体的,针对分数解中每个变量的非整数值设置了一个阈值η,分数解中大于η的非整数值所对应的时隙、微云或远程数据中心分别被视为候选时隙、候选微云或候选数据中心。也就是,根据所述第一分数解和设定阈值,确定数据集dsm,T的候选时隙集
Figure BDA0003406056530000131
和候选位置集
Figure BDA0003406056530000132
其中,
Figure BDA0003406056530000133
Figure BDA0003406056530000134
3)基于所述候选时隙集和所述候选位置集,采用基于匈牙利算法实现的二部图最小权最大匹配的启发式算法得到调度策略。具体的:
通过将LP问题转化为二部图中的最小权最大匹配问题,对LP的分数解进行舍入。设G′为构造的二部图,如图3所示,有两组节点Va和Vb以及一个边集E′。通过将每个数据集dsm,t添加到Va进行初始化,然后为每个位置LOCl创建T个虚拟位置,其中对于每个时隙τ∈[1,T]都对应一个虚拟位置。用LOCl,τ表示时隙τ对应的虚拟位置。将这些虚拟位置添加至Vb
将所有数据集按其大小进行升序排序,并依次考虑排序后的数据集。对于排序后数据集列表中的每个数据集dsm,t,当且仅当满足以下条件时向边集E′添加一条连接dsm,t和LOCl,τ的边:
第一条件:τ在集合
Figure BDA0003406056530000135
中,LOCl在集合
Figure BDA0003406056530000136
中(处理所述数据集的时隙属于所述候选时隙集
Figure BDA0003406056530000141
且所述虚拟位置属于所述候选位置集
Figure BDA0003406056530000142
第二条件:处理dsm,t不违背LOCl在τ时刻的计算资源容量,即G′中所有和LOCl,τ有连边的数据集和dsm,t数据集均在LOCl进行处理所需计算资源不超过C(LOCl)(所述虚拟位置的计算能力大于处理请求的资源需求);
第三条件:不违反IoT设备dvm的预算Bm(不超过生成所述数据集的物联网设备的预算)。
且将这条边的权重设为dsm,t的AoD,即w(<dsm,t,LOCl,τ>)=DAm,t。然后在二部图G′中使用匈牙利算法找到最小权最大匹配,具体来说,应用匈牙利算法为二部图G′寻找一个最小权最大匹配,即在二部图的边集E′中选择一组边:在保证尽可能多的Va中的任意节点(数据集)有且仅有一条边与Vb中的任意节点(虚拟位置)相连的同时,尽可能使所选择的边的权重之和最小,该匹配实际对应于将全部待调度数据集的一个子集分配给微云和远程数据中心。持续重复此直到所有的数据集被调度。
步骤3),概括如下:
在一次匹配过程中,首先将数据集添加至二部图的第一组节点中,将为每个时隙创建的虚拟位置添加至二部图的第二组节点中,并将所述第一组节点中数据集按照升序排序,得到升序后的数据集列表。然后,对于升序后的数据集列表中的任意一个数据集和所述第二组节点中的任意一个虚拟位置,当同时满足第一条件、第二条件和第三条件时,在所述数据集和所述虚拟位置之间增加一条边,且所述边的边权为所述数据集在所述虚拟位置处理时对应的数据年龄。遍历所述升序后的数据集列表中的所有数据集,得到所述二部图的边集,采用匈牙利算法从所述边集中选择最优边集合。最优边集合的选择原则为:应用匈牙利算法为所述二部图寻找一个最小权最大匹配,即在二部图的边集中选择一组边,在保证尽可能多的所述第一组节点中的任意节点(数据集)有且仅有一条边与所述第二组节点中的任意节点(虚拟位置)相连的同时,尽可能使所选择的边的权重之和最小。因此,所述最优边集合应满足如下边选条件:所述第一组节点中的数据集有且仅有一条边与所述第二组节点中的虚拟位置相连,且所有边的边权之和最小。所述最优边集合中的每条边所连的虚拟位置作为对应数据集实现请求的目标位置。该最优边集合为一次匹配过程得到的调度策略。
由于算法匹配比较保守,单一轮次会有一些数据集无法匹配任何虚拟位置,算法是需要重复运行多轮才可以将每个数据集均对应一个虚拟位置,即得到完整调度策略,因此,当所有的数据集均找到实现请求的目标位置时,则得到最终完整的调度策略。
上述Heu算法的具体步骤形式化总结如下:
1、求解LP,得到分数解x* τ,l,m,k(t);
2、初始化
Figure BDA0003406056530000151
3、按数据集的大小将Va进行升序排序;
4、初始化
Figure BDA0003406056530000152
5、初始化E′={},Vb={};
6、为每个位置
Figure BDA0003406056530000153
添加T个虚拟位置至Vb,这T个虚拟位置分别用
LOCl,1...,LOCl,τ...,LOCl,T表示;
7、针对每个dsm,t∈Va与LOCl,τ∈Vb,如果满足
Figure BDA0003406056530000154
且处理数据集dsm,t不会违反约束(7)-(10),即G′中所有和LOCl,τ有连边的数据集和dsm,t数据集均在LOCl进行处理所需计算资源不超过C(LOCl),且在LOCl处理dsm,t不违反IoT设备dvm的预算Bm,则添加一条权重为DAm,t的边<dsm,t,LOCl,τ>至E′;
8、在G′={Va,Vb;E′}中调用匈牙利算法寻找一个最小权最大匹配M′,即选择边集E′中的一组子集边,在保证尽可能多的Va中的任意节点(数据集)有且仅有一条边与Vb中的任意节点(虚拟位置)相连的同时,尽可能使所选择的边的权重之和最小;
9、根据M′更新数据集调度,即M′中存在的每一条边(匹配)<dsm,t,LOCl,τ>代表对应的数据集dsm,t被分配给位置LOCl在τ时刻进行处理;令
Figure BDA0003406056530000161
还未被调度};
10、若Va≠{},返回步骤5;否则输出数据集的完整调度策略。
步骤103:当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法(Appro)对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
所述步骤103,具体包括:
1)边缘网络数据年龄优化近似算法考虑ILP问题的一个特殊情况——数据集在生成时刻就须立即被调度进行传输,即τ=t。将ILP中的xτ,l,m,k(t)替换为xl,m,k(t),即在生成时刻被调度的条件下,将所述目标函数更改为
Figure BDA0003406056530000162
将所述约束条件中的xτ,l,m,k(t)∈{0,1}更改为xl,m,k(t)∈{0,1}。该Appro算法的基本思想与Heu算法相似,均采用LP舍入方法,即首先进行适当的松弛,将ILP-SC中的约束条件xl,m,k(t)∈{0,1}松弛为0≤xl,m,k(t)≤1,得到更新后的目标函数和松弛后的约束条件;其中,xl,m,k(t)表示是否使用LOCl通过bsk处理第m个物联网设备在时隙t生成的数据集。
2)基于松弛后的约束条件采用单纯形法对所述更新后的目标函数进行求解,得到第二分数解x* l,m,k(t)。
具体的,步骤1)中的ILP-SC,可能会降低解的质量,因为松弛后解得的分数解可能导致数据集被“分割”成许多小块。为了避免这种情况,采用了参数LP松弛方法,通过将该问题松弛为一个LP,只允许将资源消耗不超过阈值resth的数据集分配给微云或远程数据中心处理。
令LP-SC(resth)为参数LP松弛后的ILP-SC问题,它的目标函数保持不变,即:
Figure BDA0003406056530000163
同时受公式(7)-(10)、0≤xl,m,k(t)≤1及对所有满足|dsm,t|·δl>resth的dsm,t存在的xl,m,k(t)=0的约束,通过求解LP-SC(resth)得到第二分数解x* l,m,k(t)。
3)基于所述第二分数解,采用最小权最大匹配的近似算法得到调度策略。
具体的:
基于x* l,m,k(t),构造另一个二部图G″=(V″a,V″b;E″),其中V″a和V″b为两个集合,E″是连接V″a和V″b的连线的集合。
Figure BDA0003406056530000171
表示位置LOCl的分数分配,也即分配到位置LOCl的数据集的分数比例之和。令
Figure BDA0003406056530000172
在G″中,为LOCl创建κl个虚拟位置,即κl个LOCl的副本,分别用
Figure BDA0003406056530000173
表示,并添加到V″b中。这保证了LOCl被分配到κl或(κl-1)个要处理的数据集。如果将每个数据集的平均分配到位置LOCl的κl个副本中,可以通过求解最小权最大匹配问题得到该问题的分数解,正如算法Heu所示。此外,也可以获得一个与分数解相比AoD近似不变的整数解,但是,这样不能保证位置LOCl的容量约束和IoT设备dvm的预算的违背程度。
为了约束计算资源容量和预算约束的违背,将数据量大致相似的数据集分配到位置LOCl。为此,按照数据量对数据集进行降序排序,并依次检查每个数据集。具体来说,从每个位置的第一个副本开始,即LOCl1。只要
Figure BDA0003406056530000174
就在dsm,t和LOCl1之间添加一条边,并将边权设为根据分数解计算得到的部分AoD,即x* l1,m,k(t)·dm,k,l,t。当遇到一个数据集,考虑这个数据集会将
Figure BDA0003406056530000175
从小于1变为大于1时,为LOCl1添加一个分数分配,恰好使得
Figure BDA0003406056530000176
(并对应地在dsm,t和LOCl1之间增加一条边),然后再向LOCl2添加一个分数分配
Figure BDA0003406056530000177
同时对应地添加一条边
Figure BDA0003406056530000178
这个过程不断重复直到考虑所有数据集。构造二部图G″后,为G″找到最小权最大匹配M″。
步骤3),概括如下:
根据所述第二分数解x* l,m,k(t)为潜在位置LOCl创建κl个虚拟位置;
Figure BDA0003406056530000181
degl表示潜在位置LOCl的分配分数,
Figure BDA0003406056530000182
将数据集添加至二部图的第一组节点中,将虚拟位置添加至二部图的第二组节点中。将所述第一组节点中数据集按照降序排序,得到降序后的数据集列表。对于降序后的数据集列表中的任意一个数据集dsm,t和所述第二组节点中的任意一个虚拟位置
Figure BDA0003406056530000183
当满足
Figure BDA0003406056530000184
时,则添加一条边
Figure BDA0003406056530000185
边权为
Figure BDA0003406056530000186
其中
Figure BDA0003406056530000187
否则添加两条边,第一条为
Figure BDA0003406056530000188
边权为
Figure BDA0003406056530000189
其中
Figure BDA00034060565300001810
第二条为
Figure BDA00034060565300001811
边权为
Figure BDA00034060565300001812
其中
Figure BDA00034060565300001813
采用最小权最大匹配法为所述数据集寻找最优边,并将所述最优边所连的虚拟位置作为所述数据集实现请求的目标位置。最优边的选择原则与算法Heu的选择原则类似,即在二部图的边集中选择一组边,在保证尽可能多的所述第一组节点中的任意节点(数据集)有且仅有一条边与所述第二组节点中的任意节点(虚拟位置)相连的同时,尽可能使所选择的边的权重之和最小。当所有的数据集均找到实现请求的目标位置时,则得到调度策略。
Appro算法的具体步骤如下:
1、求解LP-SC(resth),得到分数解x* l,m,k(t);
2、对每个位置LOCl,添加
Figure BDA00034060565300001814
个虚拟节点至V″b
3、将全部数据集添加进V″a,并按数据集的大小将V″a按递减顺序排序;
4、针对每个
Figure BDA00034060565300001815
考虑其虚拟节点
Figure BDA00034060565300001816
从第一个虚拟节点κ=1开始进行分配,并按序依次考虑所有数据集:针对每个数据集dsm,t∈Va,如果
Figure BDA0003406056530000191
时,则E″添加一条边
Figure BDA0003406056530000192
边权为
Figure BDA0003406056530000193
其中
Figure BDA0003406056530000194
否则向E″添加两条边,第一条为
Figure BDA0003406056530000195
边权为
Figure BDA0003406056530000196
其中
Figure BDA0003406056530000197
第二条为
Figure BDA0003406056530000198
边权为
Figure BDA0003406056530000199
其中
Figure BDA00034060565300001910
表示数据集dsm,t在虚拟位置
Figure BDA00034060565300001911
分配的分数,
Figure BDA00034060565300001912
表示数据集dsm,t在虚拟位置
Figure BDA00034060565300001913
分配的分数。
5、在G″={V″a,V″b;E″}中寻找一个最小权最大匹配M″;
6、根据M′更新数据集调度;输出数据集的完整调度策略。
步骤104:当网络环境中数据集未知、请求的到达和传输未知且延迟未知时,采用边缘网络数据年龄优化在线启发式算法(OL_MAB)对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
所述步骤104,具体包括:
基于多臂老虎机的方法预测数据集传输至潜在位置并进行处理的延时,得到延时预测值。将所述延时预测值输入所述边缘网络数据年龄优化框架中,采用边缘网络数据年龄优化近似算法进行求解,得到调度策略。其中,基于多臂老虎机的方法的预测过程为:根据当前时隙下各个专家的权重计算每个专家被选中的概率;一个所述专家对应若干个臂,所述专家用于预测所对应的所有臂的延时;所述臂为基站与潜在位置组成的对。根据
Figure BDA00034060565300001914
确定各个专家在当前时隙的权重;wτ+1(expn)表示专家expn在当前时隙的权重,wτ(expn)表示专家expn在上一个时隙的权重,cτ(expn)表示专家expn在上一个时隙接受的代价,∈为一个常量且0<∈≤1/2。根据
Figure BDA00034060565300001915
计算每个专家被选中的概率;pτ+1(expn)表示专家expn在当前时隙被选中的概率。根据所述概率确定目标专家。采用所述目标专家预测数据集传输至潜在位置并进行处理的延时,得到延时预测值。
在实际应用中,所述步骤104的一个具体实现过程如下:
在实际场景中,处理和传输延迟是不确定的,因为它们依赖于无线信道、链路拥塞状况和微云/数据中心的工作负载。假设在MEC网络中部署了许多“探针”,通过向网络组件发出查询以监控、预测延迟。然而,当将请求分配给微云或数据中心时,预测的延迟可能并非真正的延迟。通过对“专家”设计的多臂老虎机算法来处理网络延迟的不确定性。具体来说,将部署在MEC网络中的探针视为“专家”。这些专家从基站、微云、数据中心和链路获取处理和传输延迟。然后根据延迟信息分配请求,专家跟踪获取请求所经历的实际延迟。
其基本想法是,在每个时隙τ的开始,每个专家通过自回归预测模型预测MEC网络G中传输、处理单位大小数据量的延迟。然后调用算法Appro,根据预测的信息将请求分配给微云和远程数据中心。在时隙τ的末尾,可以通过部署的探针得到实际的延迟,从而计算每个专家的代价。
该步骤提出在线学习算法,假设在MEC网络G中有N个专家。每个基站和一个微云(或一个数据中心)组成的对被视为一个MAB算法中的一个臂。在实际的网络部署中,一个专家对应一个探针,监视少量的网络节点和链路。每个专家负责臂集的一个子集,通过预测其学习到的臂的延迟来推荐臂,如果其推荐的臂的延迟与真正的延迟不同,则会接受到代价。
设expn为一个专家,其中1≤n≤N。每个臂对应两个部分:一个基站bsk和一个位置LOCl。算法给每个专家初始分配权重为1,代表完全信任其对基站和位置的延迟预测值。随着算法的迭代进行,在每个时隙τ,它根据接收到的代价(也即惩罚)降低专家的权重。而该算法选择专家的概率与其权重成比例。设wτ(expn)为专家expn的权重,pτ(expn)为专家expn在时隙τ被选中的概率,定义概率公式为
Figure BDA0003406056530000201
被选中的专家报告其基站位置对(即臂)的延迟。然后调用算法Appro,Appro根据专家报告的延迟,将请求分配给微云和数据中心进行处理。然后处理分配的请求的数据集。请求执行完毕后可以获得处理和传输一个单位数据的实际延迟。根据实际延迟,专家获得相应的代价。设这种代价是预测延迟和实际延迟之间的差值。如果专家报告的延迟与实际延迟相差太大,那么专家将会得到更高的代价(也即惩罚)。设
Figure BDA0003406056530000211
为通过基站bsk在位置LOCl处理IoT设备dvm的数据集的延迟。用cτ(expn)表示专家expn接受的代价,有
Figure BDA0003406056530000212
其中
Figure BDA0003406056530000213
Figure BDA0003406056530000214
分别为专家expn所监控的基站和位置的集合,
Figure BDA0003406056530000215
为在LOCl中通过bsk处理dsm,t的延迟。为了避免预测偏差过大的专家被选中,通过以下公式降低其权重:
Figure BDA0003406056530000216
在线启发式算法OL_MAB的具体步骤如下:
1、为每个专家expn初始化权重w1(expn)=1;
2、在时隙τ根据公式计算选择专家expn的概率pτ(expn);
3、根据对应概率选择专家;
4、每个选中的专家预测它对应的基站与位置的传输、处理延迟;
5、调用算法Appro,将专家预测的延迟作为算法输入;
6、根据Appro输出的数据集调度结果进行调度;
7、获得专家的代价,根据更新专家的权重;
8、如果当前时隙非最终时隙τ<T,进入下一个时隙τ=τ+1,跳转至步骤2继续执行;否则算法结束。
本实施例中的边缘网络数据年龄优化框架,考虑边缘网络中IoT设备数据集生成,提出了一个边缘网络数据年龄优化框架,将数据年龄优化问题表述为ILP。
本实施例针对边缘网络数据年龄优化问题,提出了一种有效的启发式算法来解决离线数据年龄优化问题。边缘网络数据年龄优化离线启发式算法(Heu),在已知数据集集合的离线情况下,基于上述框架的ILP解,设计基于最小权最大匹配的启发式算法得到AoD最小化的数据集调度策略。
本实施例针对数据集的零等待离线数据年龄优化问题,提出了一种基于参数化舍入的近似算法。边缘网络数据年龄优化近似算法(Appro),在已知数据集集合的离线情况下,针对AoD优化问题的一个特殊情况,即数据集须在生成时刻立即被调度(零等待),基于上述框架的ILP解,设计基于最小权最大匹配的近似算法得到AoD最小化的数据集调度策略。
本实施例提出了一种基于多臂老虎机的在线学习算法以解决在线数据年龄优化问题。边缘网络数据年龄优化在线启发式算法(OL_MAB),在未知数据集集合、未知数据传输、处理延迟的在线情况下,基于上述框架的ILP解,设计基于MAB的在线学习启发式算法得到AoD最小化的数据集调度策略
本发明还提供了一种边缘网络数据年龄优化系统,包括:
模型构建模块,用于构建边缘网络数据年龄优化框架;所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心。
第一调度策略生成模块,用于当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心。
第二调度策略生成模块,用于当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
第三调度策略生成模块,用于当网络环境中数据集未知、请求的到达和传输未知且延迟位置时,采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种边缘网络数据年龄优化方法,其特征在于,包括:
构建边缘网络数据年龄优化框架;所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心;
当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心;
当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;
当网络环境中数据集未知、请求的到达和传输未知且延迟未知时,采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
2.根据权利要求1所述的一种边缘网络数据年龄优化方法,其特征在于,
所述目标函数为:
Figure FDA0003406056520000011
其中,DAm,t表示第m个物联网设备在时隙t生成的数据集的数据年龄;M表示物联网设备的数量;T表示时隙的数量;
Figure FDA0003406056520000012
τ表示处理数据集的时隙;τ-t表示物联网设备生成的数据集从生成到处理的等待时间;
Figure FDA0003406056520000013
表示移动边缘计算网络中基站的集合;bsk表示移动边缘计算网络中的第k个基站;
Figure FDA0003406056520000014
为潜在位置的集合;LOCl为第l个潜在位置;xτ,l,m,k(t)表示是否使用LOCl通过bsk在时隙τ处理第m个物联网设备在时隙t生成的数据集;dm,k,l,t表示通过bsk将第m个物联网设备在时隙t生成的数据集传输至LOCl并进行处理的延时;
所述约束条件为:
Figure FDA0003406056520000021
Figure FDA0003406056520000022
Figure FDA0003406056520000023
Figure FDA0003406056520000024
xτ,l,m,k(t)∈{0,1};
其中,R表示所有的物联网设备发出的请求的集合;dsm,t表示第m个物联网设备在时隙t生成的数据集;rm(t)表示dsm,t对应的请求;δl表示在LOCl上处理单位大小的数据集消耗的计算资源;δl·|dsm,t|表示在LOCl上为处理dsm,t分配的计算资源总量;C(LOCl)表示LOCl的计算能力;cm,k,l,t表示总成本;
Figure FDA0003406056520000025
Figure FDA0003406056520000026
表示将dsm,t从第m个物联网设备所直连的bsk转移到LOCl的成本,
Figure FDA0003406056520000027
表示dsm,t在LOCl中的存储成本,
Figure FDA0003406056520000028
表示在LOCl中处理dsm,t的成本;Bm表示第m个物联网设备的预算。
3.根据权利要求2所述的一种边缘网络数据年龄优化方法,其特征在于,所述采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
将所述约束条件中的xτ,l,m,k(t)∈{0,1}松弛为0≤xτ,l,m,k(t)≤1,基于松弛后的约束条件采用单纯形法对所述目标函数进行求解,得到第一分数解x* τ,l,m,k(t);
根据所述第一分数解和设定阈值,确定候选时隙集
Figure FDA0003406056520000029
和候选位置集
Figure FDA0003406056520000031
其中,
Figure FDA0003406056520000032
η表示设定阈值;
基于所述候选时隙集和所述候选位置集,采用基于匈牙利算法实现的二部图最小权最大匹配的启发式算法得到调度策略。
4.根据权利要求2所述的一种边缘网络数据年龄优化方法,其特征在于,所述采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
在生成时刻被调度的条件下,将所述目标函数更改为
Figure FDA0003406056520000033
将所述约束条件中的xτ,l,m,k(t)∈{0,1}更改为xl,m,k(t)∈{0,1},并将xl,m,k(t)∈{0,1}松弛为0≤xl,m,k(t)≤1,得到更新后的目标函数和松弛后的约束条件;其中,xl,m,k(t)表示是否使用LOCl通过bsk处理第m个物联网设备在时隙t生成的数据集;
基于松弛后的约束条件采用单纯形法对所述更新后的目标函数进行求解,得到第二分数解x* l,m,k(t);
基于所述第二分数解,采用最小权最大匹配的近似算法得到调度策略。
5.根据权利要求2所述的一种边缘网络数据年龄优化方法,其特征在于,所述采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略,具体包括:
基于多臂老虎机的方法预测数据集传输至潜在位置并进行处理的延时,得到延时预测值;
将所述延时预测值输入所述边缘网络数据年龄优化框架中,采用边缘网络数据年龄优化近似算法进行求解,得到调度策略。
6.根据权利要求3所述的一种边缘网络数据年龄优化方法,其特征在于,所述基于所述候选时隙集和所述候选位置,采用基于匈牙利算法实现的二部图最小权最大匹配的启发式算法得到调度策略,具体包括:
将数据集添加至二部图的第一组节点中,将为每个时隙创建的虚拟位置添加至二部图的第二组节点中;
将所述第一组节点中数据集按照升序排序,得到升序后的数据集列表;
对于升序后的数据集列表中的任意一个数据集和所述第二组节点中的任意一个虚拟位置,当同时满足第一条件、第二条件和第三条件时,在所述数据集和所述虚拟位置之间增加一条边,且所述边的边权为所述数据集在所述虚拟位置处理时对应的数据年龄;所述第一条件为处理所述数据集的时隙属于所述候选时隙集
Figure FDA0003406056520000043
且所述虚拟位置属于所述候选位置集
Figure FDA0003406056520000044
所述第二条件为所述虚拟位置的计算能力大于处理请求的资源需求;所述第三条件为不超过生成所述数据集的物联网设备的预算;
遍历所述升序后的数据集列表中的所有数据集,得到所述二部图的边集,采用匈牙利算法从所述边集中选择最优边集合;所述最优边集合满足边选条件;所述边选条件为所述第一组节点中的数据集有且仅有一条边与所述第二组节点中的虚拟位置相连,且所有边的边权之和最小;所述最优边集合中的每条边所连的虚拟位置作为对应数据集实现请求的目标位置;
当所有的数据集均找到实现请求的目标位置时,则得到调度策略。
7.根据权利要求4所述的一种边缘网络数据年龄优化方法,其特征在于,所述基于所述第二分数解,采用最小权最大匹配的近似算法得到调度策略,具体包括:
根据所述第二分数解x* l,m,k(t)为潜在位置LOCl创建κl个虚拟位置;
Figure FDA0003406056520000041
degl表示潜在位置LOCl的分配分数,
Figure FDA0003406056520000042
将数据集添加至二部图的第一组节点中,将虚拟位置添加至二部图的第二组节点中;
将所述第一组节点中数据集按照降序排序,得到降序后的数据集列表;
对于降序后的数据集列表中的任意一个数据集dsm,t和所述第二组节点中的任意一个虚拟位置
Figure FDA00034060565200000516
当满足
Figure FDA0003406056520000051
时,则添加一条边
Figure FDA0003406056520000052
边权为
Figure FDA0003406056520000053
其中
Figure FDA0003406056520000054
否则添加两条边,第一条为
Figure FDA0003406056520000055
边权为
Figure FDA0003406056520000056
其中
Figure FDA0003406056520000057
第二条为
Figure FDA0003406056520000058
边权为
Figure FDA0003406056520000059
其中
Figure FDA00034060565200000510
Figure FDA00034060565200000511
表示数据集dsm,t在虚拟位置
Figure FDA00034060565200000512
分配的分数,
Figure FDA00034060565200000513
表示数据集dsm,t在虚拟位置
Figure FDA00034060565200000514
分配的分数;
采用最小权最大匹配法为所述数据集寻找最优边,并将所述最优边所连的虚拟位置作为所述数据集实现请求的目标位置;
当所有的数据集均找到实现请求的目标位置时,则得到调度策略。
8.根据权利要求5所述的一种边缘网络数据年龄优化方法,其特征在于,所述基于多臂老虎机的方法预测数据集传输至潜在位置并进行处理的延时,得到延时预测值,具体包括:
根据当前时隙下各个专家的权重计算每个专家被选中的概率;一个所述专家对应若干个臂,所述专家用于预测所对应的所有臂的延时;所述臂为基站与潜在位置组成的对;
根据所述概率确定目标专家;
采用所述目标专家预测数据集传输至潜在位置并进行处理的延时,得到延时预测值。
9.根据权利要求8所述的一种边缘网络数据年龄优化方法,其特征在于,所述根据当前时隙下各个专家的权重计算每个专家被选中的概率,具体包括:
根据
Figure FDA00034060565200000515
确定各个专家在当前时隙的权重;其中,wτ+1(expn)表示专家expn在当前时隙的权重,wτ(expn)表示专家expn在上一个时隙的权重,cτ(expn)表示专家expn在上一个时隙接受的代价,∈为一个常量且0<∈≤1/2;
根据
Figure FDA0003406056520000061
计算每个专家被选中的概率;其中,pτ+1(expn)表示专家expn在当前时隙被选中的概率,N表示专家的总数量。
10.一种边缘网络数据年龄优化系统,其特征在于,包括:
模型构建模块,用于构建边缘网络数据年龄优化框架;所述边缘网络数据年龄优化框架包括目标函数和约束条件;所述目标函数是以数据年龄最小为目标,基于移动边缘计算网络中物联网设备生成的数据集从生成到处理的等待时间和将所述数据集传输至潜在位置并进行处理的延时构建的;所述约束条件包括所述数据集在生成之后被调度、数据集通过基站放置到潜在位置、潜在位置的计算能力大于处理请求的资源需求以及不超过物联网设备的预算;所述潜在位置包括移动边缘计算网络中的微云和远程数据中心;
第一调度策略生成模块,用于当网络环境中数据集已知且无需在生成时刻被调度时,采用边缘网络数据年龄优化离线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;所述调度策略为各数据集实现请求的目标位置;所述目标位置为微云或远程数据中心;
第二调度策略生成模块,用于当网络环境中数据集已知且在生成时刻被调度时,采用边缘网络数据年龄优化近似算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略;
第三调度策略生成模块,用于当网络环境中数据集未知、请求的到达和传输未知且延迟位置时,采用边缘网络数据年龄优化在线启发式算法对所述边缘网络数据年龄优化框架进行求解,得到调度策略。
CN202111513549.7A 2021-12-13 2021-12-13 一种边缘网络数据年龄优化方法及系统 Pending CN114186416A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111513549.7A CN114186416A (zh) 2021-12-13 2021-12-13 一种边缘网络数据年龄优化方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111513549.7A CN114186416A (zh) 2021-12-13 2021-12-13 一种边缘网络数据年龄优化方法及系统

Publications (1)

Publication Number Publication Date
CN114186416A true CN114186416A (zh) 2022-03-15

Family

ID=80543325

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111513549.7A Pending CN114186416A (zh) 2021-12-13 2021-12-13 一种边缘网络数据年龄优化方法及系统

Country Status (1)

Country Link
CN (1) CN114186416A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115714793A (zh) * 2022-11-08 2023-02-24 大连海事大学 一种工业物联网中感知信息按需传输方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115714793A (zh) * 2022-11-08 2023-02-24 大连海事大学 一种工业物联网中感知信息按需传输方法
CN115714793B (zh) * 2022-11-08 2023-09-15 大连海事大学 一种工业物联网中感知信息按需传输方法

Similar Documents

Publication Publication Date Title
WO2022027776A1 (zh) 边缘计算网络任务调度与资源分配方法和边缘计算系统
Li et al. Optimal data placement strategy considering capacity limitation and load balancing in geographically distributed cloud
Cui et al. A novel offloading scheduling method for mobile application in mobile edge computing
CN113141317B (zh) 流媒体服务器负载均衡方法、系统、计算机设备、终端
Liu et al. Deep reinforcement learning based approach for online service placement and computation resource allocation in edge computing
Ullah et al. Task classification and scheduling based on K-means clustering for edge computing
CN113794748A (zh) 一种性能感知的服务功能链智能部署方法及装置
Bosque et al. A load index and load balancing algorithm for heterogeneous clusters
CN113556764A (zh) 一种基于移动边缘计算网络的计算速率确定方法及系统
NZanywayingoma et al. Effective task scheduling and dynamic resource optimization based on heuristic algorithms in cloud computing environment
Jie et al. A DQN-based approach for online service placement in mobile edge computing
CN114186416A (zh) 一种边缘网络数据年龄优化方法及系统
CN111506431A (zh) 一种云服务器在能耗约束下感知负载性能优化方法
CN113139639B (zh) 一种基于mombi面向智慧城市应用多目标计算迁移方法和装置
Liu et al. Joint task offloading and resource allocation in heterogeneous edge environments
CN113010317B (zh) 联合服务部署与任务卸载方法、装置、计算机设备及介质
Xu et al. A meta reinforcement learning-based virtual machine placement algorithm in mobile edge computing
Li et al. Optimal service selection and placement based on popularity and server load in multi-access edge computing
Ghebleh et al. A multi-criteria method for resource discovery in distributed systems using deductive fuzzy system
Harika et al. Multi-objective optimization-oriented resource allocation in the fog environment: A new hybrid approach
Omer et al. Optimization model for time sensitive IoT requests
Hu et al. Resource optimization and device scheduling for flexible federated edge learning with tradeoff between energy consumption and model performance
CN115103338A (zh) 一种d2d环境下基于深度强化学习的交接卸载方法及装置
He et al. A density algorithm for controller placement problem in software defined wide area networks
Feltin et al. Dnn partitioning for inference throughput acceleration at the edge

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination