CN113438661B - 基于池化的闭环自适应波束管理方法 - Google Patents

基于池化的闭环自适应波束管理方法 Download PDF

Info

Publication number
CN113438661B
CN113438661B CN202110674531.9A CN202110674531A CN113438661B CN 113438661 B CN113438661 B CN 113438661B CN 202110674531 A CN202110674531 A CN 202110674531A CN 113438661 B CN113438661 B CN 113438661B
Authority
CN
China
Prior art keywords
user equipment
access point
association
edge server
resource pool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110674531.9A
Other languages
English (en)
Other versions
CN113438661A (zh
Inventor
黄联芬
陈宁
林洪玥
王健铮
杨泽靖
赵毅峰
高志斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen University
Original Assignee
Xiamen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen University filed Critical Xiamen University
Priority to CN202110674531.9A priority Critical patent/CN113438661B/zh
Publication of CN113438661A publication Critical patent/CN113438661A/zh
Application granted granted Critical
Publication of CN113438661B publication Critical patent/CN113438661B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W16/00—Network planning, e.g. coverage or traffic planning tools; Network deployment, e.g. resource partitioning or cells structures
    • H04W16/24—Cell structures
    • H04W16/28—Cell structures using beam steering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W72/00—Local resource management
    • H04W72/04—Wireless resource allocation
    • H04W72/044—Wireless resource allocation based on the type of the allocated resource
    • H04W72/046—Wireless resource allocation based on the type of the allocated resource the resource being in the space domain, e.g. beams
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种基于池化的闭环自适应波束管理方法、介质及设备，其中方法包括：用户设备判断自身存在波束接入需求时进行波束测量，并确定期望接入点集合；以及将期望接入点集合发送给边缘服务器；边缘服务器进行关联决策，并将关联决策结果发送给用户设备；如果允许接入，则边缘服务器对用户设备波束资源池进行更新；用户设备进行相应波束关联，边缘服务器对接入点波束资源池进行更新；进行波束跟踪，并判断是否需要进行波束释放，如果是则对相应波束进行释放，并对用户设备波束资源池和接入点波束资源池进行更新；将波束关联和波束跟踪过程进行闭环设计，通过自适应的调整转换周期，使得系统效用函数维持在最优状态。

Description

基于池化的闭环自适应波束管理方法
技术领域
本发明涉及通信系统管理技术领域，特别涉及一种基于池化的闭环自适应波束管理方法、一种计算机可读存储介质和一种计算机设备。
背景技术
相关技术中，在使用高频无线电进行的基于定向波束的通信过程中，由于高频信号路损严重，穿透性差，传输距离较短，信号覆盖区域受限，移动中的用户设备需要处于与不同的接入点建立基于波束的连接和中断基于波束的连接的过程中。当用户设备的移动速度较快或者活动范围较大时，上述过程极易造成乒乓切换效应。在用户设备可以同时与多个接入点通过波束建立连接的情况下，如果在每个接入时隙，用户设备都要断开所有波束连接，并且评估与所有可接入点的波束对的质量后再重新建立波束连接，将会极大地提升信令复杂度和计算时间复杂度，增加用户接入时延，计算和重新建立波束对的过程需要付出极大的能耗代价，用户设备在网络接入的空窗期，即所有的波束对断开并建立新的波束对的过程中，无法获取网络服务，将会降低基于波束的通信的可靠性和稳定性。同时，接入点在对移动的用户设备提供波束覆盖的过程中，需要周期性地、持续不断地进行信道测量来评估当前波束是否满足用户设备的服务质量需求，当无法满足时需要调整波束方向。持续的信道测量需要极高的信令复杂度，占用信道资源，降低接入点与用户设备通信过程的频谱效率，易造成极大的系统能耗。
发明内容
本发明旨在至少在一定程度上解决上述技术中的技术问题之一。为此，本发明的一个目的在于提出一种基于池化的闭环自适应波束管理方法，能够在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性。
本发明的第二个目的在于提出一种计算机可读存储介质。
本发明的第三个目的在于提出一种计算机设备。
为达到上述目的，本发明第一方面实施例提出了一种基于池化的闭环自适应波束管理方法，包括以下步骤：用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据所述波束测量结果确定期望接入点集合；所述用户设备将所述期望接入点集合发送给边缘服务器，以便所述边缘服务器根据所述期望接入点集合进行关联决策，并将关联决策结果发送给所述用户设备；如果所述关联决策结果为允许接入，则所述边缘服务器根据所述期望接入点集合对用户设备波束资源池进行更新；所述用户设备根据所述期望接入点集合与相应波束关联，所述边缘服务器根据关联结果对接入点波束资源池进行更新；对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新。
根据本发明实施例的基于池化的闭环自适应波束管理方法，首先，用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据所述波束测量结果确定期望接入点集合；接着，所述用户设备将所述期望接入点集合发送给边缘服务器，以便所述边缘服务器根据所述期望接入点集合进行关联决策，并将关联决策结果发送给所述用户设备；然后，如果所述关联决策结果为允许接入，则所述边缘服务器根据所述期望接入点集合对用户设备波束资源池进行更新；接着，所述用户设备根据所述期望接入点集合与相应波束关联，所述边缘服务器根据关联结果对接入点波束资源池进行更新；然后，对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新；从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性；。
另外，根据本发明上述实施例提出的基于池化的闭环自适应波束管理方法还可以具有如下附加的技术特征：
可选地，边缘服务器根据所述期望接入点集合进行关联决策，包括：所述边缘服务器根据所有用户设备发送的接入点集合统计当前关联时刻对应接入点的请求用户设备集合，所述请求用户设备集合包括每个接入点对应的用户设备请求个数；获取接入点在接入点波束资源池中的可用波束个数；判断所述用户设备请求个数是否小于等于可用波束个数；如果判断结果为是，则向相应用户设备反馈允许接入的关联决策结果。
可选地，如果用户设备请求个数大于可用波束个数，则认为该接入点发生波束冲突，并根据预设关联决策选取允许接入用户设备，以及根据选取结果向所有用户设备发送关联决策结果。
可选地，用户设备根据所述期望接入点集合与相应波束关联之后，还包括：所述用户设备计算当前关联时刻根据期望接入点集合进行波束关联所新增的通信链路数量和系统传输速率之和，并将所述通信链路数量和系统传输速率之和发送给边缘服务器；所述边缘服务器根据所有用户设备发送的新增的通信链路数量和系统传输速率之和计算池内资源外流波束数量和系统传输速率总值，并将所述池内资源外流波束数量和系统传输速率总值共享给所有用户设备，以便所有用户设备根据所述池内资源外流波束数量和系统传输速率总值调整波束关联策略。
可选地，所述波束关联策略包括基于超图的波束关联策略和基于强化学习的波束关联策略。
可选地，对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，包括：对所述用户设备进行波束跟踪，以获取相应的波束中断指示信号和波束支持信号，以根据所述波束中断指示信号和波束支持信号判断当前接入点是否能够支持用户设备且波束中断；如果是，则进行波束对准；如果否，则根据所述波束中断指示信号和所述波束支持信号判断是否需要进行波束释放。
可选地，还包括：对接入点和用户设备之间的波束关联和波束跟踪过程进行闭环设计，并在通信过程中计算通信系统复杂度和系统数据吞吐量，以及根据所述系统数据吞吐量和通信系统复杂度计算对应的最大收益函数，以便根据所述最大收益函数调整转换周期。
为达到上述目的，本发明第二方面实施例提出了一种计算机可读存储介质，其上存储有基于池化的波束管理程序，该基于池化的波束管理程序被处理器执行时实现如上述的基于池化的闭环自适应波束管理方法。
根据本发明实施例的计算机可读存储介质，通过存储基于池化的波束管理程序，以使得处理器在执行该基于池化的波束管理程序时，实现如上述的基于池化的闭环自适应波束管理方法，从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性。
为达到上述目的，本发明第三方面实施例提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如上述的基于池化的闭环自适应波束管理方法。
根据本发明实施例的计算机设备，通过存储器对基于池化的波束管理程序进行存储，以使得处理器在执行该基于池化的波束管理程序时，实现如上述的基于池化的闭环自适应波束管理方法，从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性。
附图说明
图1为根据本发明实施例的基于池化的闭环自适应波束管理方法的流程示意图；
图2为根据本发明一具体实施例的波束管理过程流程示意图；
图3为根据本发明实施例的池化资源流动过程示意图；
图4为根据本发明实施例的联合波束关联和波束跟踪的帧结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
相关技术中，在每个接入时隙，用户设备都要断开所有波束连接，用户设备在网络接入的空窗期，即所有的波束对断开并建立新的波束对的过程中，无法获取网络服务，将会降低基于波束的通信的可靠性和稳定性；当用户设备的移动速度较快或者活动范围较大时，极易造成乒乓切换效应；根据本发明实施例的基于池化的闭环自适应波束管理方法，首先，用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据所述波束测量结果确定期望接入点集合；接着，所述用户设备将所述期望接入点集合发送给边缘服务器，以便所述边缘服务器根据所述期望接入点集合进行关联决策，并将关联决策结果发送给所述用户设备；然后，如果所述关联决策结果为允许接入，则所述边缘服务器根据所述期望接入点集合对用户设备波束资源池进行更新；接着，所述用户设备根据所述期望接入点集合与相应波束关联，所述边缘服务器根据关联结果对接入点波束资源池进行更新；然后，对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新；从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性。
为了更好的理解上述技术方案，下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。
为了更好的理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。
图1为根据本发明实施例的基于池化的闭环自适应波束管理方法的流程示意图，如图1所示，该基于池化的闭环自适应波束管理方法包括以下步骤：
S101，用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据波束测量结果确定期望接入点集合。
作为一种示例，如图2所示，通过
Figure BDA0003120198010000041
表示用户设备的空闲波束，当用户设备存在网络服务需求时，判断是否满足条件
Figure BDA0003120198010000042
如果是，则表示当前用户设备存在波束接入需求；则用户设备un进行波束测量，并根据波束测量结果选择期望接入的接入点集合
Figure BDA0003120198010000051
需要说明的是，用户设备更倾向于在其波束约束内与更多的接入点建立通信链路，从而降低其在移动过程中由突发的遮挡等因素导致的通信链路中断对其造成的消极影响，提高基于波束的通信稳定性和可靠性。
S102，用户设备将期望接入点集合发送给边缘服务器，以便边缘服务器根据期望接入点集合进行关联决策，并将关联决策结果发送给用户设备。
也就是说，用户设备在计算得到期望接入点集合之后，将该期望接入点集合发送给边缘服务器，边缘服务器根据接收到的期望接入点集合进行关联决策，以生成关联决策结果(即用户设备是否允许接入)；并将该关联决策结果发送给用户设备。
在一些实施例中，边缘服务器根据期望接入点集合进行关联决策，包括：边缘服务器根据所有用户设备发送的接入点集合统计当前关联时刻对应接入点的请求用户设备集合，请求用户设备集合包括每个接入点对应的用户设备请求个数；获取接入点在接入点波束资源池中的可用波束个数；判断用户设备请求个数是否小于等于可用波束个数；如果判断结果为是，则向相应用户设备反馈允许接入的关联决策结果。
在一些实施例中，如果用户设备请求个数大于可用波束个数，则认为该接入点发生波束冲突，并根据预设关联决策选取允许接入用户设备，以及根据选取结果向所有用户设备发送关联决策结果。
作为一种示例，如图2所示，边缘服务器获取用户设备上传的接入点集合
Figure BDA0003120198010000052
并根据所有用户设备上传的接入点集合
Figure BDA0003120198010000053
统计出当前波束关联时刻用户设备波束资源池
Figure BDA0003120198010000054
和对应接入点的请求用户设备集合
Figure BDA0003120198010000055
其中，
Figure BDA0003120198010000056
和
Figure BDA0003120198010000057
可以表示为：
Figure BDA0003120198010000058
Figure BDA0003120198010000059
其中，
Figure BDA00031201980100000510
表示用户设备波束资源池，
Figure BDA00031201980100000511
表示用户设备un在t时刻的在用户设备波束资源池中的空闲波束；
Figure BDA00031201980100000512
表示对应接入点的请求用户设备集合，
Figure BDA00031201980100000513
表示接入点am在t时刻的用户设备请求个数。
接着，获取接入点am在t时刻的可用波束个数
Figure BDA00031201980100000514
并判断是否满足条件
Figure BDA00031201980100000515
如果是，则表示接入点am可以满足用户设备的波束需求，边缘服务器向用户设备un发送反馈信号cm,n(t)＝1，以准许用户设备un与接入点am进行波束关联，建立基于波束的通信链路。
而如果
Figure BDA0003120198010000061
则说明接入点am的波束资源无法满足用户设备的波束需求，则认为该接入点am发生了波束冲突，边缘服务器执行关联决策，选取允许接入用户设备(即言，通过决策选取部分用户设备，准许其进行波束关联)；并向允许接入用户设备发送允许接入的关联决策结果；而不允许接入的用户设备，则边缘服务器向其发送cm,n(t)＝0；以拒绝其与接入点am建立关联；进而，接收到cm,n(t)＝0的用户设备可返回重新进行波束测量。
S103，如果关联决策结果为允许接入，则边缘服务器根据期望接入点集合对用户设备波束资源池进行更新。
S104，用户设备根据期望接入点集合与相应波束关联，边缘服务器根据关联结果对接入点波束资源池进行更新。
即言，如果关联决策结果为允许接入，则边缘服务器根据期望接入点集合对用户设备波束资源池进行更新。而在用户设备根据期望接入点集合与相应波束关联之后，边缘服务器根据关联结果对接入点波束资源池进行更新，以维护用户设备波束资源池和接入点波束资源池。
作为一种示例，如图3所示，在初始关联之前，用户设备波束资源池的初始值为
Figure BDA0003120198010000062
接入点波束资源池的初始值为
Figure BDA0003120198010000063
初始关联后，接入点波束资源池变化为
Figure BDA0003120198010000064
而用户设备波束资源池变化为
Figure BDA0003120198010000065
在波束跟踪过程中，会造成波束的释放，进而形成池外资源内流；而在波束关联过程中，会形成池内资源外流。
在一些实施例中，用户设备根据期望接入点集合与相应波束关联之后，还包括：用户设备计算当前关联时刻根据期望接入点集合进行波束关联所新增的通信链路数量和系统传输速率之和，并将通信链路数量和系统传输速率之和发送给边缘服务器；边缘服务器根据所有用户设备发送的新增的通信链路数量和系统传输速率之和计算池内资源外流波束数量和系统传输速率总值，并将池内资源外流波束数量和系统传输速率总值共享给所有用户设备，以便所有用户设备根据池内资源外流波束数量和系统传输速率总值调整波束关联策略。
作为一种示例，用户设备un根据边缘服务器发送的cm,n(t)信号，向对应的接入点am发送反馈信号xm,n(t)，其中，xm,n(t)可表示为：
Figure BDA0003120198010000071
用户设备un反馈信号的集合xn(t)可表示为：
Figure BDA0003120198010000072
该xn(t)可以反映用户设备un选择接入点所得的效果。
接着，令Ωn(t)表示用户设备un成功与接入点匹配并建立通信链路的数量(即进行波束关联所新增的通信链路数量)，即用户设备un在波束关联过程中资源外流的波束数量，其中，Ωn(t)可表示为：
Figure BDA0003120198010000073
然后，用户设备un计算当前关联时刻根据接入点集合an(t)进行波束关联所新增的系统传输速率之和Sn(t)，其中，an(t)和Sn(t)可表示为：
Figure BDA0003120198010000074
Figure BDA0003120198010000075
接着，用户设备将Sn(t)和Ωn(t)发送给边缘服务器。
边缘服务器对所有用户设备发送的Sn(t)和Ωn(t)进行汇总，以计算池内资源外流波束数量Ωsys(t)和系统传输速率总值
Figure BDA0003120198010000076
其中，Ωsys(t)和
Figure BDA0003120198010000077
可以表示为：
Ωsys(t)＝{Ω1(t),Ω2(t),...,ΩN(t)}
Figure BDA0003120198010000078
然后，边缘服务器将计算结果共享给所有的用户设备，以便所有用户设备根据池内资源外流波束数量和系统传输速率总值调整波束关联策略。
在一些实施例中，波束关联策略包括基于超图的波束关联策略和基于强化学习的波束关联策略。
S105，对用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新。
即言，为了保障通信链路的稳定性，接入点对已建立通信链路的用户设备进行波束跟踪，以根据跟踪结果判断是否需要进行波束释放，并在判断结果为是时，进行波束的释放，以及在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新，以维护用户设备波束资源池和接入点波束资源池。
在一些实施例中，对用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，包括：对用户设备进行波束跟踪，以获取相应的波束中断指示信号和波束支持信号，以根据波束中断指示信号和波束支持信号判断当前接入点是否能够支持用户设备且波束中断；如果是，则进行波束对准；如果否，则根据波束中断指示信号和波束支持信号判断是否需要进行波束释放。
作为一种示例，如图2所示，令im,n为中断指示信号，当im,n＝1时表示波束
Figure BDA0003120198010000081
中断，im,n＝0表示可以继续发射波束
Figure BDA0003120198010000082
其中，im,n可以表示为：
Figure BDA0003120198010000083
令sm,n表示波束支持信号，以通过该波束支持信号判断接入点是否能够支持用户设备。
如果im,n＝0，sm,n＝1，则表示接入点am可以支持用户设备，但是，波束处于中断状态；因此，接入点am应该执行波束对准算法获取波束参数从而改变波束方向，为用户设备提供持续的波束覆盖，以保持两者之间的链路连接。
如果im,n＝1，sm,n＝1，则表示在波束跟踪过程中，
Figure BDA0003120198010000084
Figure BDA0003120198010000085
的任意一种情况；此时，波束
Figure BDA0003120198010000086
已经超出了接入点am的硬件支持能力范围，则对波束进行释放，对应的波束被释放回用户设备波束资源池和接入点波束资源池，实现池外资源内流。
在一些实施例中，为了使得系统效用函数维持在最优状态，本发明实施例提出的基于池化的闭环自适应波束管理方法还包括：对接入点和用户设备之间的波束关联和波束跟踪过程进行闭环设计，并在通信过程中计算通信系统复杂度和系统数据吞吐量，以及根据系统数据吞吐量和通信系统复杂度计算对应的最大收益函数，以便根据最大收益函数调整转换周期。从而，通过对接入点与用户设备间的波束管理那与波束跟踪过程进行闭环设计，并通过自适应地调整转换周期，以使得系统效用函数维持在最优状态。
作为一种示例，基于池化的联合波束关联和波束跟踪的帧结构如图4所示。在不同的时间段，系统需要调整资源池外流和内流转换周期，即波束关联和波束跟踪操作的间隔时长，从而提高系统效率，实现系统的最大收益。其中，一种可选的最大收益目标为获取最大的系统数据吞吐量
Figure BDA0003120198010000091
和复杂度
Figure BDA0003120198010000092
的比值。
在这里，当系统中存在用户设备的所有波束资源均回落到了资源池，即与所有的接入点均失去了基于波束对的连接，处于无连接状态时，需要立即执行波束关联过程，而不受制于资源池外流和内流转换周期。
在用户设备匹配到为其服务的接入点波束集合之后，接入点会基于与用户设备之间的波束对建立通信链路，为用户设备提供数据传输服务，同时在满足信号质量约束的前提下对用户设备执行波束跟踪，即根据用户设备的位置变化改变定向波束方向，从而维持两者之间基于该波束对的连接状态。当信号质量低于波束跟踪阈值时，接入点停止对用户设备的波束跟踪，该条链路中断，对应接入点和用户设备的波束池外资源分别内流回波束池
Figure BDA0003120198010000093
和
Figure BDA0003120198010000094
此时该用户设备和满足信号质量约束的其他关联接入点之间仍保持连接状态，即接入点继续对该用户设备进行波束跟踪。因此，用户设备和接入点的波束对集合是随着波束关联与跟踪过程动态变化的，其规模会通过波束关联而增大，随着波束跟踪中波束对的释放而减小。
本方案可选的一种最大收益函数
Figure BDA0003120198010000095
可以定义为系统数据吞吐量
Figure BDA0003120198010000096
和复杂度
Figure BDA0003120198010000097
的比值。本申请实施例不限于此。
Figure BDA0003120198010000098
接入点am与用户设备un之间链路lmn的传输速率Sm,n可以表示为：
Figure BDA0003120198010000099
Figure BDA00031201980100000910
Figure BDA00031201980100000911
其中，Bm,n是am为un分配的带宽，
Figure BDA00031201980100000912
是小区内干扰，
Figure BDA00031201980100000913
是小区间干扰。
Figure BDA00031201980100000914
表示am与un′通信过程中，un接收到的干扰信号强度。
因此，在时间段
Figure BDA00031201980100000915
内的系统数据吞吐量
Figure BDA00031201980100000916
可以被描述为：
Figure BDA0003120198010000101
基于池化的闭环自适应波束管理方法的通信系统复杂度
Figure BDA0003120198010000102
主要包括基于波束关联的池内资源外流过程的复杂度
Figure BDA0003120198010000103
和基于波束跟踪的池外资源内流的复杂度
Figure BDA0003120198010000104
其中，两者又分别包括控制信令传输和反馈造成的信令复杂度
Figure BDA0003120198010000105
和算法执行的时间复杂度
Figure BDA0003120198010000106
Figure BDA0003120198010000107
假设每执行一次波束关联所需的固定系统信令开销为OΔ，其不随着资源池的规模而变化。随着接入点和用户设备资源池规模和个体的变化的信令复杂度
Figure BDA0003120198010000108
和时间复杂度
Figure BDA0003120198010000109
的函数
Figure BDA00031201980100001010
和
Figure BDA00031201980100001011
分别可以表示为，
Figure BDA00031201980100001012
Figure BDA00031201980100001013
所以
Figure BDA00031201980100001014
可以表示为，
Figure BDA00031201980100001015
其中，ξS是信令复杂度权重，ξC是时间复杂度权重，ξS+ξC＝1。
假设时间段
Figure BDA00031201980100001016
有Ni个资源池模型的外流和内流周期Ti，因为Ni＞＞1，所以可以忽略的初始关联的特殊性，即使其复杂度较高。时间段
Figure BDA00031201980100001017
的复杂度
Figure BDA00031201980100001018
可以表示为，
Figure BDA00031201980100001019
同理,基于波束跟踪的池外资源内流的复杂度
Figure BDA00031201980100001020
可以表示为，
Figure BDA00031201980100001021
值得注意的是，
Figure BDA00031201980100001022
主要取决于仍处于连接状态的链路，即已经流出资源池的波束资源，这与波束关联过程是相反的。
Figure BDA00031201980100001023
和
Figure BDA00031201980100001024
可以表示为，
Figure BDA00031201980100001025
Figure BDA00031201980100001026
其中，
Figure BDA0003120198010000111
和
Figure BDA0003120198010000112
分别表示接入点和用户设备处于连接状态的链路所占用的波束资源，
Figure BDA0003120198010000113
经过上述分析，时间段
Figure BDA0003120198010000114
内的系统复杂度
Figure BDA0003120198010000115
Figure BDA0003120198010000116
为了考虑一般性并简化模型，此处我们不考虑存在用户设备失去所有的波束连接而需要执行紧急波束关联的情况。
本申请可选的方法的效用函数可以定义为找出使得收益函数
Figure BDA0003120198010000117
最大的资源池外流和内流转换周期Ti：
Figure BDA0003120198010000118
S.T.
Figure BDA0003120198010000119
Figure BDA00031201980100001110
Figure BDA00031201980100001111
Figure BDA00031201980100001112
其中，
Figure BDA00031201980100001113
表示用户设备un与接入点建立波束关联关系的最低信号强度阈值，cA表示接入点可同时服务的用户设备数量的上限，cU表示用户设备可同时建立通信链路的接入点数量的上限。值得注意的是，链路lmn的系统传输速率Em,n不仅取决于变量xm,n，而且还取决于其他接入点和用户设备相关的干扰项。
在这里，寻找最优
Figure BDA00031201980100001114
的方法可以是基于强化学习的方法。本本申请实施例不限于此。
综上所述，根据本发明实施例的基于池化的闭环自适应波束管理方法，首先，用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据所述波束测量结果确定期望接入点集合；接着，所述用户设备将所述期望接入点集合发送给边缘服务器，以便所述边缘服务器根据所述期望接入点集合进行关联决策，并将关联决策结果发送给所述用户设备；然后，如果所述关联决策结果为允许接入，则所述边缘服务器根据所述期望接入点集合对用户设备波束资源池进行更新；接着，所述用户设备根据所述期望接入点集合与相应波束关联，所述边缘服务器根据关联结果对接入点波束资源池进行更新；然后，对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新；从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性。
为了实现上述实施例，本发明实施例提出了一种计算机可读存储介质，其上存储有基于池化的波束管理程序，该基于池化的波束管理程序被处理器执行时实现如上述的基于池化的闭环自适应波束管理方法。
根据本发明实施例的计算机可读存储介质，通过存储基于池化的波束管理程序，以使得处理器在执行该基于池化的波束管理程序时，实现如上述的基于池化的闭环自适应波束管理方法，从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性；同时，降低信令复杂度和计算时间复杂度，降低波束关联过程所需付出的能耗代价。
为了实现上述实施例，本发明实施例提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如上述的基于池化的闭环自适应波束管理方法。
根据本发明实施例的计算机设备，通过存储器对基于池化的波束管理程序进行存储，以使得处理器在执行该基于池化的波束管理程序时，实现如上述的基于池化的闭环自适应波束管理方法，从而实现在接入时隙不断开用户设备所有波束连接，保障基于波束通信的可靠性和稳定性持在最优状态。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
在本发明的描述中，需要理解的是，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不应理解为必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (7)

1.一种基于池化的闭环自适应波束管理方法，其特征在于，包括以下步骤：
用户设备判断自身是否存在波束接入需求，并在判断结果为是时进行波束测量，以及根据所述波束测量结果确定期望接入点集合；
所述用户设备将所述期望接入点集合发送给边缘服务器，以便所述边缘服务器根据所述期望接入点集合进行关联决策，并将关联决策结果发送给所述用户设备；
如果所述关联决策结果为允许接入，则所述边缘服务器根据所述期望接入点集合对用户设备波束资源池进行更新；
所述用户设备根据所述期望接入点集合与相应波束关联，所述边缘服务器根据关联结果对接入点波束资源池进行更新；
对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，以及在判断结果为是时对相应波束进行释放，并在波束释放完成后分别对用户设备波束资源池和接入点波束资源池进行更新；
其中，所述边缘服务器根据所述期望接入点集合进行关联决策，包括：
所述边缘服务器根据所有用户设备发送的接入点集合统计当前关联时刻对应接入点的请求用户设备集合，所述请求用户设备集合包括每个接入点对应的用户设备请求个数；
获取接入点在接入点波束资源池中的可用波束个数；
判断所述用户设备请求个数是否小于等于可用波束个数；
如果判断结果为是，则向相应用户设备反馈允许接入的关联决策结果；
如果用户设备请求个数大于可用波束个数，则认为该接入点发生波束冲突，并根据预设关联决策选取允许接入用户设备，以及根据选取结果向所有用户设备发送关联决策结果。
2.如权利要求1所述的基于池化的闭环自适应波束管理方法，其特征在于，用户设备根据所述期望接入点集合与相应波束关联之后，还包括：
所述用户设备计算当前关联时刻根据期望接入点集合进行波束关联所新增的通信链路数量和系统传输速率之和，并将所述通信链路数量和系统传输速率之和发送给边缘服务器；
所述边缘服务器根据所有用户设备发送的新增的通信链路数量和系统传输速率之和计算池内资源外流波束数量和系统传输速率总值，并将所述池内资源外流波束数量和系统传输速率总值共享给所有用户设备，以便所有用户设备根据所述池内资源外流波束数量和系统传输速率总值调整波束关联策略。
3.如权利要求2所述的基于池化的闭环自适应波束管理方法，其特征在于，所述波束关联策略包括基于超图的波束关联策略和基于强化学习的波束关联策略。
4.如权利要求1所述的基于池化的闭环自适应波束管理方法，其特征在于，对所述用户设备进行波束跟踪，并根据波束跟踪结果判断是否需要进行波束释放，包括：
对所述用户设备进行波束跟踪，以获取相应的波束中断指示信号和波束支持信号，以根据所述波束中断指示信号和波束支持信号判断当前接入点是否能够支持用户设备且波束中断；
如果是，则进行波束对准；
如果否，则根据所述波束中断指示信号和所述波束支持信号判断是否需要进行波束释放。
5.如权利要求1所述的基于池化的闭环自适应波束管理方法，其特征在于，还包括：对接入点和用户设备之间的波束关联和波束跟踪过程进行闭环设计，并在通信过程中计算通信系统复杂度和系统数据吞吐量，以及根据所述系统数据吞吐量和通信系统复杂度计算对应的最大收益函数，以便根据所述最大收益函数调整转换周期。
6.一种计算机可读存储介质，其特征在于，其上存储有基于池化的波束管理程序，该基于池化的波束管理程序被处理器执行时实现如权利要求1-5中任一项所述的基于池化的闭环自适应波束管理方法。
7.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时，实现如权利要求1-5中任一项所述的基于池化的闭环自适应波束管理方法。
CN202110674531.9A 2021-06-17 2021-06-17 基于池化的闭环自适应波束管理方法 Active CN113438661B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110674531.9A CN113438661B (zh) 2021-06-17 2021-06-17 基于池化的闭环自适应波束管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110674531.9A CN113438661B (zh) 2021-06-17 2021-06-17 基于池化的闭环自适应波束管理方法

Publications (2)

Publication Number Publication Date
CN113438661A CN113438661A (zh) 2021-09-24
CN113438661B true CN113438661B (zh) 2022-07-12

Family

ID=77756319

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110674531.9A Active CN113438661B (zh) 2021-06-17 2021-06-17 基于池化的闭环自适应波束管理方法

Country Status (1)

Country Link
CN (1) CN113438661B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112383938A (zh) * 2020-10-12 2021-02-19 厦门大学 多宿主毫米波中继系统及其接入方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10419533B2 (en) * 2010-03-01 2019-09-17 Genghiscomm Holdings, LLC Edge server selection for device-specific network topologies
KR102185095B1 (ko) * 2016-08-11 2020-12-01 콘비다 와이어리스, 엘엘씨 빔 관리
CN110312300B (zh) * 2019-05-13 2022-06-28 展讯通信（上海）有限公司 控制方法、装置及存储介质
CN112383368B (zh) * 2020-10-13 2022-03-04 厦门大学 波束测量方法及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112383938A (zh) * 2020-10-12 2021-02-19 厦门大学 多宿主毫米波中继系统及其接入方法

Also Published As

Publication number Publication date
CN113438661A (zh) 2021-09-24

Similar Documents

Publication Publication Date Title
CN106900011B (zh) 一种基于mec的蜂窝基站间任务卸载方法
EP3763149B1 (en) Radio access network controller methods and systems to optimize inter frequency load balancing
US10270834B2 (en) System and method for online multimedia streaming services
He et al. A simple and robust vertical handoff algorithm for heterogeneous wireless mobile networks
US10390255B2 (en) Method and apparatus of dynamically adjusting bit rate of bearer in wireless communication system
CN110166377A (zh) 一种资源分配方法和装置
JP4671945B2 (ja) 資源割当てシステム並びに方法及びそれに適用されるユーザ端末装置
CN110139325B (zh) 一种网络参数调优方法及装置
CN114138373B (zh) 一种基于强化学习的边缘计算任务卸载方法
KR20210067764A (ko) 무선 통신 시스템에서 부하 분산을 위한 장치 및 방법
US20090203385A1 (en) Sector interference management based on inter-sector performance
CN110651508A (zh) 在多载波系统中调整小区发射功率的方法和装置
CN103987085A (zh) 小区间移动负荷均衡的方法和移动负荷均衡装置
CN107333300A (zh) 一种小区负载的调整方法和装置
JP6591446B2 (ja) 無線通信システムでリアルタイム送信電力調節方法及び装置
CN108112037A (zh) 基于雾计算和协作通信网络的负载均衡方法
US20130225174A1 (en) Distributed load balancing in cellular wireless networks
CN103686826B (zh) 一种载波聚合系统中的接纳控制方法
CN104022859A (zh) 一种基于own的自适应流量分载技术
CN102857981A (zh) 一种实现小区重选的方法及装置
CN113438661B (zh) 基于池化的闭环自适应波束管理方法
CN111526526B (zh) 基于服务混搭的移动边缘计算中的任务卸载方法
Khuntia et al. An actor-critic reinforcement learning for device-to-device communication underlaying cellular network
CN111132298B (zh) 一种功率分配方法和装置
CN108702584A (zh) 业务优化处理方法、设备及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant