CN112911715A - 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置 - Google Patents

一种虚拟无线网络中吞吐量最大化的功率分配方法及装置 Download PDF

Info

Publication number
CN112911715A
CN112911715A CN202110149569.4A CN202110149569A CN112911715A CN 112911715 A CN112911715 A CN 112911715A CN 202110149569 A CN202110149569 A CN 202110149569A CN 112911715 A CN112911715 A CN 112911715A
Authority
CN
China
Prior art keywords
slice
wireless network
time slot
virtual wireless
radio remote
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110149569.4A
Other languages
English (en)
Other versions
CN112911715B (zh
Inventor
刘金锁
龚亮亮
李洋
胡阳
吕超
丁忠林
何莉媛
罗先南
张明
张俊尧
罗威
杨爽
徐玉杰
韩哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nari Information and Communication Technology Co
Original Assignee
Nari Information and Communication Technology Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nari Information and Communication Technology Co filed Critical Nari Information and Communication Technology Co
Priority to CN202110149569.4A priority Critical patent/CN112911715B/zh
Publication of CN112911715A publication Critical patent/CN112911715A/zh
Application granted granted Critical
Publication of CN112911715B publication Critical patent/CN112911715B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/04Wireless resource allocation
    • H04W72/044Wireless resource allocation based on the type of the allocated resource
    • H04W72/0473Wireless resource allocation based on the type of the allocated resource the resource being transmission power
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/142Network analysis or design using statistical or mathematical methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/50Allocation or scheduling criteria for wireless resources
    • H04W72/53Allocation or scheduling criteria for wireless resources based on regulatory allocation policies
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种虚拟无线网络中吞吐量最大化的功率分配方法及装置,该方法应用在虚拟无线网络中,方法步骤如下:首先,针对吞吐量最大化功率分配策略建立一个系统模型,从而找到系统模型中的资源分配问题。其次,基于深度神经网络定义状态集、行动集、奖励三个变量。在定义的状态中,执行定义的行动并获得相应的奖励,从而进入下一个状态。这个周期被重复,直到达到吞吐量最大化的功率分配。本发明利用基于深度学习的功率分配实现吞吐量最大化,使每个切片的要求都能得到满足,释放了每个切片的最小吞吐量限制,促成了保证吞吐量最大化的最佳资源管理政策,满足了每个切片的用户服务质量。

Description

一种虚拟无线网络中吞吐量最大化的功率分配方法及装置
技术领域
本发明涉及一种虚拟无线网络中吞吐量最大化的功率分配方法及装置,属于虚拟无线网络技术领域。
背景技术
随着移动用户对各种服务的需求日益增长,第五代(5G)蜂窝网络的容量必须大大提高,以满足用户的多种需求。云无线电接入网络(C-RAN)是使5G能够应对这些需求的技术之一。与传统接入网络RAN不同的是,在C-RAN基地波段单元(BBU)中,不与无线电遥控头(RRHs)共存于同一地点。BBU负责信号处理,并已转移到云中的中央BBU池中,RRH处理基本的传输功能,大大有助于降低操作成本、低能耗、高频谱效率等。
以类似的方式,虚拟化无线网络(VWN)也是满足用户需求以及减少移动网络运营商的资本支出和业务支出的设想技术之一。在VWN中,物理网络基础设施,如无线节点、计算服务器和存储单元被分配给每个切片,这样的方式使每个切片的要求得到满足。例如,通信资源(功率、带宽和天线)、计算资源和兑现资源被跟踪到不同的层,具有不同的服务质量(QoS)要求。每个切片的QoS应该独立于其他切片,这不仅对用户的QoS需求,而且对每个切片的最小吞吐量和资源构成严格的限制。为了充分发挥这些技术的潜力并鼓励它们对系统性能的贡献,需要制定最佳的资源管理政策。
发明内容
为解决现有技术问题,本发明提出一种虚拟无线网络中吞吐量最大化的功率分配方法及装置,在云无线电接入网络C-RAN中启用虚拟无线网络VWN的IMAC,利用基于深度学习DQL的功率分配实现吞吐量最大化。
为实现上述目的,本发明采用的技术方案如下:
本发明提供一种虚拟无线网络中吞吐量最大化的功率分配方法,包括,
建立虚拟无线网络中吞吐量最大化功率分配任务模型;
将所述任务模型转化为深度学习模型;
求解所述深度学习模型,得到最佳功率分配方案。
进一步的,所述建立虚拟无线网络中吞吐量最大化功率分配任务模型,包括:
Figure BDA0002932191790000021
Figure BDA0002932191790000022
Figure BDA0002932191790000023
Figure BDA0002932191790000024
Figure BDA0002932191790000025
Figure BDA0002932191790000026
Figure BDA00029321917900000220
Figure BDA0002932191790000027
Figure BDA0002932191790000028
其中,R(gt,pt)为虚拟无线网络吞吐量,
Figure BDA0002932191790000029
为时隙t时切片s上的用户ks到无线电遥控头n的下行速率,
Figure BDA00029321917900000210
表示单元格j中切片s上用户ks与干扰无线电遥控头RRHn'之间的信道增益,
Figure BDA00029321917900000211
为时隙t时无线电遥控头n与切片s上用户ks的信噪比,
Figure BDA00029321917900000212
为时隙t时切片s上用户ks与无线电遥控头n之间的信道增益,
Figure BDA00029321917900000213
表示时隙t时切片s上ks与干扰无线电遥控头n'之间的信道增益,
Figure BDA00029321917900000214
Figure BDA00029321917900000215
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量,
Figure BDA00029321917900000216
是时隙t时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA00029321917900000217
是时隙t时无线电遥控头n对切片s上用户k′s的发射功率,ks和k′s表示切片s上不同的用户,
Figure BDA00029321917900000218
是干扰无线电遥控头n'对单元格j中的所有用户的发射功率的累加,σ2是背景噪声,Pmax表示最大发射功率,Dn为对当前无线电遥控头n有干扰的无线电遥控头干扰单元集,
Figure BDA00029321917900000219
为切片s的最小速率,N为虚拟无线网络中总用户数,S为虚拟无线网络切片数,Ks表示s切片上的用户集,ks表示s切片上用户,M为虚拟无线网络所划分的单元格数。
进一步的,还包括,
将虚拟无线网络进行切片划分,
以及,
将虚拟无线网络根据无线电遥控头进行单元格划分。
进一步的,所述将虚拟无线网络根据无线电遥控头进行单元格划分,包括:
以无线电遥控头为中心,划分一定半径范围内为一个单元格,虚拟无线网络中每个用户都有其唯一所属单元格,一个单元格中包含至少一个切片上的一个用户。
进一步的,将所述任务模型转化为深度学习模型,包括:
基于所述任务模型构建深度学习模型的状态集,行为集和奖励;
所述状态集表示为:
Figure BDA0002932191790000031
Figure BDA0002932191790000032
Figure BDA0002932191790000033
其中,
Figure BDA0002932191790000034
为第一状态特征,
Figure BDA0002932191790000035
为第二状态特征,
Figure BDA0002932191790000036
为时隙t时单元格j中切片s上用户与无线电遥控头n之间的信道增益,
Figure BDA0002932191790000037
表示时隙t-1时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA0002932191790000038
是剩余信道增益的索引集;
所述动作集表示为:
Figure BDA0002932191790000039
其中,A为动作集,|A|为量化后的功率电平,Pmin表示最小发射功率;
所述奖励表示为:
Figure BDA00029321917900000310
Figure BDA00029321917900000311
其中,
Figure BDA00029321917900000312
表示时隙t时虚拟无线网络奖励,
Figure BDA00029321917900000313
表示时隙t时切片s的奖励,cs是违反每个切片隔离的惩罚值。
进一步的,所述状态中f中
Figure BDA00029321917900000314
按降序排序。
进一步的,求解所述深度学习模型中,包括:
基于ε-greedy贪婪策略获取动作。
进一步的,求解所述深度学习模型中,还包括:
采用基于流形梯度的方法训练自适应动量估计。
本发明还提供一种虚拟无线网络中吞吐量最大化的功率分配装置,包括,
构建模块,用于建立虚拟无线网络中吞吐量最大化功率分配任务模型;
转化模块,用于将所述任务模型转化为深度学习模型;
以及,
计算模块,用于求解所述深度学习模型,得到最佳功率分配方案。
进一步的,所述构建模块具体用于,建立如下任务模型:
Figure BDA0002932191790000041
Figure BDA0002932191790000042
Figure BDA0002932191790000043
Figure BDA0002932191790000044
Figure BDA0002932191790000045
Figure BDA0002932191790000046
Figure BDA0002932191790000047
Figure BDA0002932191790000048
Figure BDA0002932191790000049
其中,R(gt,pt)为虚拟无线网络吞吐量,
Figure BDA00029321917900000410
为时隙t时切片s上的用户ks到无线电遥控头n的下行速率,
Figure BDA00029321917900000411
表示单元格j中切片s上用户ks与干扰无线电遥控头RRHn'之间的信道增益,
Figure BDA00029321917900000412
为时隙t时无线电遥控头n与切片s上用户ks的信噪比,
Figure BDA00029321917900000413
为时隙t时切片s上用户ks与无线电遥控头n之间的信道增益,
Figure BDA00029321917900000414
表示时隙t时切片s上ks与干扰无线电遥控头n'之间的信道增益,
Figure BDA00029321917900000415
Figure BDA00029321917900000416
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量,
Figure BDA00029321917900000417
是时隙t时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA0002932191790000051
是时隙t时无线电遥控头n对切片s上用户k′s的发射功率,ks和k′s表示切片s上不同的用户,
Figure BDA0002932191790000052
是干扰无线电遥控头n'对单元格j中的所有用户的发射功率的累加,σ2是背景噪声,Pmax表示最大发射功率,Dn为对当前无线电遥控头n有干扰的无线电遥控头干扰单元集,
Figure BDA0002932191790000053
为切片s的最小速率,N为虚拟无线网络中总用户数,S为虚拟无线网络切片数,Ks表示s切片上的用户集,ks表示s切片上用户,M为虚拟无线网络所划分的单元格数。
进一步的,所述转换模块具体用于,
基于所述任务模型构建深度学习模型的状态集,行为集和奖励;
所述状态集表示为:
Figure BDA0002932191790000054
Figure BDA0002932191790000055
Figure BDA0002932191790000056
其中,
Figure BDA0002932191790000057
为第一状态特征,
Figure BDA0002932191790000058
为第二状态特征,
Figure BDA0002932191790000059
为时隙t时单元格j中切片s上用户与无线电遥控头n之间的信道增益,
Figure BDA00029321917900000510
表示时隙t-1时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA00029321917900000511
是剩余信道增益的索引集;
所述动作集表示为:
Figure BDA00029321917900000512
其中,A为动作集,|A|为量化后的功率电平,Pmin表示最小发射功率;
所述奖励表示为:
Figure BDA00029321917900000513
Figure BDA00029321917900000514
其中,
Figure BDA00029321917900000515
表示时隙t时虚拟无线网络奖励,
Figure BDA00029321917900000516
表示时隙t时切片s的奖励,cs是违反每个切片隔离的惩罚值。
本发明的有益效果为:
本发明在虚拟无线网络(VMN)中提出了一种虚拟无线网络中吞吐量最大化的功率分配方法,该方法在云无线电接入网络C-RAN中启用虚拟无线网络VWN的IMAC,利用基于深度学习DQL的功率分配框架实现吞吐量最大化,这样使每个切片的要求都能得到满足。释放了每个切片的最小吞吐量限制,促成了保证吞吐量最大化的最佳资源管理政策,满足了每个切片的用户服务质量(Qos)。
附图说明
图1为本发明实施例中包含两个不同切片的VWN的系统模型图;
图2为本发明的虚拟无线网络中吞吐量最大化的功率分配方法示意图。
具体实施方式
下面对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
本发明提供一种虚拟无线网络中吞吐量最大化的功率分配方法,应用在虚拟无线网络(VMN)中,参见图2,首先,针对吞吐量最大化功率分配策略建立一个系统模型,从而找到系统模型中的资源分配问题。其次,基于深度神经网络定义状态集、行动集、奖励三个变量。在定义的状态中,执行定义的行动并获得相应的奖励,从而进入下一个状态,不断重复,直到达到吞吐量最大化的功率分配。
S1:针对吞吐量最大化功率分配策略建立一个系统模型,从而找到系统模型中的资源分配问题;
具体的,具体的,设虚拟无线网络中有N个用户,S个切片,一个切片上包含若干个用户,定义s切片上的用户为ks,s切片上的用户集用Ks表示。单天线用户在每个切片中共享一个公共频带。为了达到每个切片中用户的QoS要求,应该发出最小速率
Figure BDA0002932191790000061
系统模型如图1所示。以无线电遥控头RRH为中心,划分一定半径范围内为一个单元格,每个用户都有其唯一所属单元格。
在时隙t时,单元格j中的用户与无线电遥控头RRHn之间的信道增益由
Figure BDA0002932191790000062
定义,可以写成:
Figure BDA0002932191790000063
其中,
Figure BDA0002932191790000064
表示单元格j中的用户ks与无线电遥控头RRHn之间的信道增益,
Figure BDA0002932191790000065
Figure BDA0002932191790000066
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量。注意,单元格中可包含若干个不同切片中的用户。
需要说明的是,有的用户手持无线电遥控头RRH,有的用户没有持有无线电遥控头RRH,所以,存在
Figure BDA0002932191790000071
单元格j中的用户与RRH n的信噪比(SINR)可以表示为:
Figure BDA0002932191790000072
其中,
Figure BDA0002932191790000073
表示单元格j中的用户ks与无线电遥控头RRHn之间的信噪比,Dn表示干扰单元集,即对当前RRHn有干扰的其他RRH,
Figure BDA0002932191790000074
表示单元格j中的用户ks与干扰无线电遥控头RRH n'之间的信道增益,
Figure BDA0002932191790000075
是无线电遥控头RRHn在时隙t时对用户ks的发射功率,
Figure BDA0002932191790000076
是无线电遥控头RRHn在时隙t时对用户k′s的发射功率,
Figure BDA0002932191790000077
是干扰无线电遥控头RRHn'对单元格j中的所有用户的发射功率的累加,ks和k′s表示不同的用户,σ2是背景噪声。
因此,用户ks到RRH n的下行速率是:
Figure BDA0002932191790000078
其中,
Figure BDA0002932191790000079
表示任意一个用户ks与RRH n的信噪比,与式(2)计算方式相同。
该系统模型的吞吐量阐述如下:
Figure BDA00029321917900000710
其中,gt和pt如下:
Figure BDA00029321917900000711
Figure BDA00029321917900000712
其中,M为所划分的单元格数。
目标是在最大发射功率约束和隔离约束下使R(gt,pt)最大化,由此得到该系统模型的资源分配问题:
Figure BDA0002932191790000081
Figure BDA0002932191790000082
Figure BDA0002932191790000083
其中,Pmax表示最大发射功率。
S2:基于深度神经网络定义状态集、动作集、奖励三个变量;
具体的,该步骤将控制任务变成一个学习问题。
状态:所选择的状态必须足够丰富,以适当地捕获环境动态以及支持马尔可夫特性。状态表示可以转换为特征来强制泛化。状态特征可以从以下几个方面来实现:
首先,对gt进行预处理,得到第一状态特征:
Figure BDA0002932191790000084
其中,
Figure BDA0002932191790000085
为第一状态特征。
然后,将
Figure BDA0002932191790000086
按降序排序,排序时信道增益Ic通道增益保持不变。
定义剩余信道的发射功率集为第二状态特征:
Figure BDA0002932191790000087
其中,
Figure BDA0002932191790000088
是除该信道外的剩余信道增益的索引集。
最后,将状态特征演示为:
Figure BDA0002932191790000089
动作:为了使学习尽可能可持续,并在可接受的间隔内保持控制策略的准确性,将发射功率量化为Pmin和Pmax之间的|A|功率电平。动作集给定为:
Figure BDA00029321917900000810
奖励:在设计奖励时,应考虑优化问题。将每个切片的奖励定义为其租户费率之和,即:
Figure BDA00029321917900000811
为了保持切片之间的隔离,应满足
Figure BDA0002932191790000091
如果代理违反并做违反此约束的行为,网络将受到惩罚。因此,网络的奖励被提出为:
Figure BDA0002932191790000092
其中,cs是违反每个切片隔离的惩罚值。
S3:在定义的状态中,执行定义的行动并获得相应的奖励,从而进入下一个状态,这个周期被重复,直到达到吞吐量最大化的功率分配;
具体的,在状态s中,代理基于ε-greedy贪婪策略承担动作a,使得所选动作具有最大的Q值,具有ε的概率,并且具有其他Q值,具有
Figure BDA0002932191790000093
的概率;
然后,获得其行动的奖励,进入下一个状态,所有转换行为存储在称为重放内存D的内存中,以便进一步使用,并帮助代理记住过去的经验。
然后从重放内存D中随机抽取一个迷你批处理来训练网络,mini-Batch会提升模型的训练速度,另外mini-Batch会给训练过程引入了随机性。
在训练网络过程中,采用基于流形梯度的方法训练自适应动量估计(Adam),最终计算出吞吐量最大化的功率分配。
采用基于流形梯度的方法训练自适应动量估计。
本发明实施例还提供一种虚拟无线网络中吞吐量最大化的功率分配装置,包括,
构建模块,用于建立虚拟无线网络中吞吐量最大化功率分配任务模型;
转化模块,用于将所述任务模型转化为深度学习模型;
以及,
计算模块,用于求解所述深度学习模型,得到最佳功率分配方案。
具体的,构建模块具体用于,建立如下任务模型:
Figure BDA0002932191790000094
Figure BDA0002932191790000095
Figure BDA0002932191790000096
Figure BDA0002932191790000097
Figure BDA0002932191790000101
Figure BDA0002932191790000102
Figure BDA0002932191790000103
Figure BDA0002932191790000104
Figure BDA0002932191790000105
其中,R(gt,pt)为虚拟无线网络吞吐量,
Figure BDA0002932191790000106
为时隙t时切片s上的用户ks到无线电遥控头n的下行速率,
Figure BDA0002932191790000107
表示单元格j中切片s上用户ks与干扰无线电遥控头RRHn'之间的信道增益,
Figure BDA0002932191790000108
为时隙t时无线电遥控头n与切片s上用户ks的信噪比,
Figure BDA0002932191790000109
为时隙t时切片s上用户ks与无线电遥控头n之间的信道增益,
Figure BDA00029321917900001010
表示时隙t时切片s上ks与干扰无线电遥控头n'之间的信道增益,
Figure BDA00029321917900001011
Figure BDA00029321917900001012
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量,
Figure BDA00029321917900001013
是时隙t时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA00029321917900001014
是时隙t时无线电遥控头n对切片s上用户k′s的发射功率,ks和k′s表示切片s上不同的用户,
Figure BDA00029321917900001015
是干扰无线电遥控头n'对单元格j中的所有用户的发射功率的累加,σ2是背景噪声,Pmax表示最大发射功率,Dn为对当前无线电遥控头n有干扰的无线电遥控头干扰单元集,
Figure BDA00029321917900001016
为切片s的最小速率,N为虚拟无线网络中总用户数,S为虚拟无线网络切片数,Ks表示s切片上的用户集,ks表示s切片上用户,M为虚拟无线网络所划分的单元格数。
具体的,转换模块具体用于,
基于所述任务模型构建深度学习模型的状态集,行为集和奖励;
状态集表示为:
Figure BDA00029321917900001017
Figure BDA00029321917900001018
Figure BDA00029321917900001019
其中,
Figure BDA0002932191790000111
为第一状态特征,
Figure BDA0002932191790000112
为第二状态特征,
Figure BDA0002932191790000113
为时隙t时单元格j中切片s上用户与无线电遥控头n之间的信道增益,
Figure BDA0002932191790000114
为时隙t时任意用户ks与无线电遥控头n之间的信道增益,
Figure BDA0002932191790000115
表示时隙t-1时无线电遥控头n对切片s上用户ks的发射功率,
Figure BDA0002932191790000116
是剩余信道增益的索引集;
动作集表示为:
Figure BDA0002932191790000117
其中,Pmin表示最小发射功率;
奖励表示为:
Figure BDA0002932191790000118
Figure BDA0002932191790000119
其中,
Figure BDA00029321917900001110
表示时隙t时虚拟无线网络奖励,
Figure BDA00029321917900001111
表示时隙t时切片s的奖励,cs是违反每个切片隔离的惩罚值。
值得指出的是,该装置实施例是与上述方法实施例对应的,上述方法实施例的实现方式均适用于该装置实施例中,并能达到相同或相似的技术效果,故不在此赘述。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求保护范围之内。

Claims (11)

1.一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,包括,
建立虚拟无线网络中吞吐量最大化功率分配任务模型;
将所述任务模型转化为深度学习模型;
求解所述深度学习模型,得到最佳功率分配方案。
2.根据权利要求1所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,所述建立虚拟无线网络中吞吐量最大化功率分配任务模型,包括:
Figure FDA0002932191780000011
s.t.
Figure FDA0002932191780000012
Figure FDA0002932191780000013
Figure FDA0002932191780000014
Figure FDA0002932191780000015
Figure FDA0002932191780000016
Figure FDA0002932191780000017
Figure FDA0002932191780000018
Figure FDA0002932191780000019
其中,R(gt,pt)为虚拟无线网络吞吐量,
Figure FDA00029321917800000110
为时隙t时切片s上的用户ks到无线电遥控头n的下行速率,
Figure FDA00029321917800000111
表示单元格j中切片s上用户ks与干扰无线电遥控头RRH n'之间的信道增益,
Figure FDA00029321917800000112
为时隙t时无线电遥控头n与切片s上用户ks的信噪比,
Figure FDA00029321917800000113
为时隙t时切片s上用户ks与无线电遥控头n之间的信道增益,
Figure FDA00029321917800000114
表示时隙t时切片s上ks与干扰无线电遥控头n'之间的信道增益,
Figure FDA00029321917800000115
Figure FDA00029321917800000116
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量,
Figure FDA00029321917800000117
是时隙t时无线电遥控头n对切片s上用户ks的发射功率,
Figure FDA00029321917800000118
是时隙t时无线电遥控头n对切片s上用户k′s的发射功率,ks和k′s表示切片s上不同的用户,
Figure FDA00029321917800000119
是干扰无线电遥控头n'对单元格j中的所有用户的发射功率的累加,σ2是背景噪声,Pmax表示最大发射功率,Dn为对当前无线电遥控头n有干扰的无线电遥控头干扰单元集,
Figure FDA0002932191780000021
为切片s的最小速率,N为虚拟无线网络中总用户数,S为虚拟无线网络切片数,Ks表示s切片上的用户集,ks表示s切片上用户,M为虚拟无线网络所划分的单元格数。
3.根据权利要求2所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,还包括,
将虚拟无线网络进行切片划分,
以及,
将虚拟无线网络根据无线电遥控头进行单元格划分。
4.根据权利要求3所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,所述将虚拟无线网络根据无线电遥控头进行单元格划分,包括:
以无线电遥控头为中心,划分一定半径范围内为一个单元格,虚拟无线网络中每个用户都有其唯一所属单元格,一个单元格中包含至少一个切片上的一个用户。
5.根据权利要求2所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,将所述任务模型转化为深度学习模型,包括:
基于所述任务模型构建深度学习模型的状态集,行为集和奖励;
所述状态集表示为:
Figure FDA0002932191780000022
Figure FDA0002932191780000023
Figure FDA0002932191780000024
其中,
Figure FDA0002932191780000025
为第一状态特征,
Figure FDA0002932191780000026
为第二状态特征,
Figure FDA0002932191780000027
为时隙t时单元格j中切片s上用户与无线电遥控头n之间的信道增益,
Figure FDA0002932191780000028
表示时隙t-1时无线电遥控头n对切片s上用户ks的发射功率,
Figure FDA0002932191780000029
是剩余信道增益的索引集;
所述动作集表示为:
Figure FDA00029321917800000210
其中,A为动作集,|A|为量化后的功率电平,Pmin表示最小发射功率;
所述奖励表示为:
Figure FDA0002932191780000031
Figure FDA0002932191780000032
其中,
Figure FDA0002932191780000033
表示时隙t时虚拟无线网络奖励,
Figure FDA0002932191780000034
表示时隙t时切片s的奖励,cs是违反每个切片隔离的惩罚值。
6.根据权利要求5所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,所述状态中f中
Figure FDA0002932191780000035
按降序排序。
7.根据权利要求5所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,求解所述深度学习模型中,包括:
基于ε-greedy贪婪策略获取动作。
8.根据权利要求5所述的一种虚拟无线网络中吞吐量最大化的功率分配方法,其特征在于,求解所述深度学习模型中,还包括:
采用基于流形梯度的方法训练自适应动量估计。
9.一种虚拟无线网络中吞吐量最大化的功率分配装置,其特征在于,包括,
构建模块,用于建立虚拟无线网络中吞吐量最大化功率分配任务模型;
转化模块,用于将所述任务模型转化为深度学习模型;
以及,
计算模块,用于求解所述深度学习模型,得到最佳功率分配方案。
10.根据权利要求9所述的一种虚拟无线网络中吞吐量最大化的功率分配装置,其特征在于,所述构建模块具体用于,建立如下任务模型:
Figure FDA0002932191780000036
s.t.
Figure FDA0002932191780000037
Figure FDA0002932191780000038
Figure FDA0002932191780000039
Figure FDA0002932191780000041
Figure FDA0002932191780000042
Figure FDA0002932191780000043
Figure FDA0002932191780000044
Figure FDA0002932191780000045
其中,R(gt,pt)为虚拟无线网络吞吐量,
Figure FDA0002932191780000046
为时隙t时切片s上的用户ks到无线电遥控头n的下行速率,
Figure FDA0002932191780000047
表示单元格j中切片s上用户ks与干扰无线电遥控头RRH n'之间的信道增益,
Figure FDA0002932191780000048
为时隙t时无线电遥控头n与切片s上用户ks的信噪比,
Figure FDA0002932191780000049
为时隙t时切片s上用户ks与无线电遥控头n之间的信道增益,
Figure FDA00029321917800000410
表示时隙t时切片s上ks与干扰无线电遥控头n'之间的信道增益,
Figure FDA00029321917800000411
Figure FDA00029321917800000412
分别是时间不变的大尺度衰落效应和小尺度平坦衰落分量,
Figure FDA00029321917800000413
是时隙t时无线电遥控头n对切片s上用户ks的发射功率,
Figure FDA00029321917800000414
是时隙t时无线电遥控头n对切片s上用户k′s的发射功率,ks和k′s表示切片s上不同的用户,
Figure FDA00029321917800000415
是干扰无线电遥控头n'对单元格j中的所有用户的发射功率的累加,σ2是背景噪声,Pmax表示最大发射功率,Dn为对当前无线电遥控头n有干扰的无线电遥控头干扰单元集,
Figure FDA00029321917800000416
为切片s的最小速率,N为虚拟无线网络中总用户数,S为虚拟无线网络切片数,Ks表示s切片上的用户集,ks表示s切片上用户,M为虚拟无线网络所划分的单元格数。
11.根据权利要求10所述的一种虚拟无线网络中吞吐量最大化的功率分配装置,其特征在于,所述转换模块具体用于,
基于所述任务模型构建深度学习模型的状态集,行为集和奖励;
所述状态集表示为:
Figure FDA00029321917800000417
Figure FDA00029321917800000418
Figure FDA0002932191780000051
其中,
Figure FDA0002932191780000052
为第一状态特征,
Figure FDA0002932191780000053
为第二状态特征,
Figure FDA0002932191780000054
为时隙t时单元格j中切片s上用户与无线电遥控头n之间的信道增益,
Figure FDA0002932191780000055
表示时隙t-1时无线电遥控头n对切片s上用户ks的发射功率,
Figure FDA0002932191780000056
是剩余信道增益的索引集;
所述动作集表示为:
Figure FDA0002932191780000057
其中,A为动作集,|A|为量化后的功率电平,Pmin表示最小发射功率;
所述奖励表示为:
Figure FDA0002932191780000058
Figure FDA0002932191780000059
其中,
Figure FDA00029321917800000510
表示时隙t时虚拟无线网络奖励,
Figure FDA00029321917800000511
表示时隙t时切片s的奖励,cs是违反每个切片隔离的惩罚值。
CN202110149569.4A 2021-02-03 2021-02-03 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置 Active CN112911715B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110149569.4A CN112911715B (zh) 2021-02-03 2021-02-03 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110149569.4A CN112911715B (zh) 2021-02-03 2021-02-03 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置

Publications (2)

Publication Number Publication Date
CN112911715A true CN112911715A (zh) 2021-06-04
CN112911715B CN112911715B (zh) 2024-02-13

Family

ID=76121831

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110149569.4A Active CN112911715B (zh) 2021-02-03 2021-02-03 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置

Country Status (1)

Country Link
CN (1) CN112911715B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473498A (zh) * 2021-06-15 2021-10-01 中国联合网络通信集团有限公司 网络切片资源编排方法、切片编排器及编排系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090103488A1 (en) * 2007-06-28 2009-04-23 University Of Maryland Practical method for resource allocation for qos in ofdma-based wireless systems
CN105578598A (zh) * 2015-12-30 2016-05-11 中国科学技术大学 一种无线虚拟化中基于吞吐量最大化的资源分配方法
CN108063830A (zh) * 2018-01-26 2018-05-22 重庆邮电大学 一种基于mdp的网络切片动态资源分配方法
CN111726811A (zh) * 2020-05-26 2020-09-29 国网浙江省电力有限公司嘉兴供电公司 一种用于认知无线网络的切片资源分配方法及系统
CN111953510A (zh) * 2020-05-15 2020-11-17 中国电力科学研究院有限公司 一种基于强化学习的智能电网切片无线资源分配方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090103488A1 (en) * 2007-06-28 2009-04-23 University Of Maryland Practical method for resource allocation for qos in ofdma-based wireless systems
CN105578598A (zh) * 2015-12-30 2016-05-11 中国科学技术大学 一种无线虚拟化中基于吞吐量最大化的资源分配方法
CN108063830A (zh) * 2018-01-26 2018-05-22 重庆邮电大学 一种基于mdp的网络切片动态资源分配方法
CN111953510A (zh) * 2020-05-15 2020-11-17 中国电力科学研究院有限公司 一种基于强化学习的智能电网切片无线资源分配方法及系统
CN111726811A (zh) * 2020-05-26 2020-09-29 国网浙江省电力有限公司嘉兴供电公司 一种用于认知无线网络的切片资源分配方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
尹魏昕;周迅钊;徐雷;: "基于安全感知的云无线接入网络资源分配算法研究", 网络安全技术与应用, no. 07 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473498A (zh) * 2021-06-15 2021-10-01 中国联合网络通信集团有限公司 网络切片资源编排方法、切片编排器及编排系统
CN113473498B (zh) * 2021-06-15 2023-05-19 中国联合网络通信集团有限公司 网络切片资源编排方法、切片编排器及编排系统

Also Published As

Publication number Publication date
CN112911715B (zh) 2024-02-13

Similar Documents

Publication Publication Date Title
CN109729528B (zh) 一种基于多智能体深度强化学习的d2d资源分配方法
Kuang et al. Partial offloading scheduling and power allocation for mobile edge computing systems
CN111277437B (zh) 一种智能电网的网络切片资源分配方法
Zhao et al. Energy-saving offloading by jointly allocating radio and computational resources for mobile edge computing
Yang et al. Deep neural network for resource management in NOMA networks
CN109474980A (zh) 一种基于深度增强学习的无线网络资源分配方法
Ko et al. Joint client selection and bandwidth allocation algorithm for federated learning
Qi et al. Energy-efficient resource allocation for UAV-assisted vehicular networks with spectrum sharing
CN103888234B (zh) 一种多无线电系统中基于公平性和精细化带宽分配的资源分配方法
CN115174396A (zh) 一种基于数字孪生的低碳能源管控通信网业务管理方法
Yu et al. Interference coordination strategy based on Nash bargaining for small‐cell networks
CN114423028B (zh) 基于多智能体深度强化学习的CoMP-NOMA协作成簇与功率分配方法
CN112911715B (zh) 一种虚拟无线网络中吞吐量最大化的功率分配方法及装置
CN101262701A (zh) 一种基于遗传算法的动态信道分配方法
Li et al. Joint radio and computation resource allocation with predictable channel in vehicular edge computing
CN116800753A (zh) 一种移动模型通信资源分配方法、装置、终端及存储介质
CN110392377A (zh) 一种5g超密集组网资源分配方法及装置
Sun et al. Hysteretic noisy chaotic neural networks for resource allocation in OFDMA system
CN113162662B (zh) 一种CF-mMIMO下的用户分簇及功率分配方法
CN104581958A (zh) 基于速率自适应准则的资源分配方法及装置
CN105704722B (zh) 基于分组博弈交换以及优化功率控制的频谱资源配置方法
CN104507111B (zh) 蜂窝网络中基于集簇的协同通信方法及装置
CN115250156A (zh) 一种基于联邦学习的无线网络多信道频谱接入方法
Truong et al. Delay-sensitive task offloading for internet of things in nonorthogonal multiple access mec networks
Jiang et al. Dueling double deep q-network based computation offloading and resource allocation scheme for internet of vehicles

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant