CN110752901B - 一种无线帧中符号的搬迁方法及装置 - Google Patents

Abstract

本发明实施例提供一种无线帧中符号的搬迁方法及装置，其中，所述方法包括：基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；根据预设算法确定目标搬迁符号；将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

Description

一种无线帧中符号的搬迁方法及装置

技术领域

本发明涉及通信技术领域，涉及但不限于一种无线帧中符号的搬迁方法及装置。

背景技术

在通信过程中，移动用户实际上仅有部分时间在进行业务传输，而大部分时间都没有传输消息。对于无线帧中的任一子帧(Sub Frame)中的符号(Symbol)，不是任何时刻都填满了有效信息。如果将这些符号中的信息全部传送给网络，不但会对系统资源造成浪费，而且会使系统内的干扰加重。

目前在传输业务时，系统利用编码器检测到业务间隙后，在间隙期不发送信息，即所谓的不连续发送(Discontinuous Transmission，DTX)。因此，目前在通信系统中，当业务量最高时，所有符号对应时刻的功放均打开；在业务量最低时，只在必要的业务信号(如广播信号、同步信号等)发送时才打开所对应时刻的功放电源，其余时间功放电源关闭，从而达到节能目的。

发明内容

本发明实施例提供一种无线帧中符号的搬迁方法及装置，能够智能的实现无线帧中符号的关闭，不仅可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高，而且可在不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。

本发明实施例的技术方案是这样实现的：

第一方面，本发明实施例提供一种无线帧中符号的搬迁方法，所述方法包括：

基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；

根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；

根据预设算法确定目标搬迁符号；

将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

第二方面，本发明实施例提供一种无线帧中符号的搬迁装置，所述装置包括：

第一确定单元，用于根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；

第二确定单元，用于根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；

第三确定单元，用于根据预设算法确定目标搬迁符号；

搬迁单元，用于将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

第三方面，本发明实施例提供一种无线帧中符号的搬迁设备，所述设备至少包括：处理器和配置为存储可执行指令的存储介质，其中：所述处理器配置为执行存储的可执行指令；

所述可执行指令配置为执行上述无线帧中符号的搬迁方法。

第四方面，本发明实施例提供一种存储介质，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令配置为执行上述无线帧中符号的搬迁方法。

本发明实施例提供了一种无线帧中符号的搬迁方法及装置，其中，所述方法包括：基站根据无线帧中的每一符号所对应功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；根据预设算法确定目标搬迁符号；将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。这样，由于将待搬迁符号的第一功放占用率搬迁至目标搬迁符号，因此可以在不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。并且本发明实施例的方法能够智能的实现无线帧中符号的关闭，可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高。

附图说明

在附图(其不一定是按比例绘制的)中，相似的附图标记可在不同的视图中描述相似的部件。具有不同字母后缀的相似附图标记可表示相似部件的不同示例。附图以示例而非限制的方式大体示出了本文中所讨论的各个实施例。

图1为LTE子帧及OFDM符号业务状态图；

图2为本发明实施例一无线帧中符号的搬迁方法的实现流程示意图；

图3为本发明实施例一无线帧中符号的搬迁方法的应用场景示意图；

图4为本发明实施例二无线帧中符号的搬迁方法的实现流程示意图；

图5为本发明实施例三无线帧中符号的搬迁方法的流程图；

图6为本发明实施例四无线帧中符号的搬迁装置的组成结构示意图；

图7为本发明实施例五线帧中符号的搬迁设备的组成结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对发明的具体技术方案做进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。

实施例一

本发明实施例提供一种无线帧中符号的搬迁方法，应用于基站。本实施例的无线帧中符号的搬迁方法所实现的功能可以通过基站中的处理器调用程序代码来实现，当然程序代码可以保存在计算机存储介质中，可见，该基站至少包括处理器和存储介质。

为了方便理解，在解释本发明实施例的无线帧中符号的搬迁方法之前，这里先对长期演进系统(Long Term Evolution，LTE)中的子帧及符号业务状态进行说明。

如图1所示，为LTE子帧及OFDM符号业务状态图，LTE信号中一个无线帧包括10个子帧，每个子帧由14个正交频分复用(Orthogonal Frequency Division Multiplexing，OFDM)符号101组成，每个OFDM符号101中包含一定量的业务数据102，其中：

物理广播信道(Physical Broadcast Channel，PBCH)固定分布在每个无线帧的第0子帧的符号7、符号8、符号9、符号10上；主同步信道(Primary Synchronization Channel，PSCH)固定分布在每无线帧的子帧0的符号6和子帧5的符号6；辅同步信道(SecondarySynchronization Channel，SSCH)固定分布在每无线帧的子帧0的符号5和子帧5的符号5；9子帧为寻呼子帧。

根据以上分析可知：#0子帧，#5子帧，#9子帧不可以关闭。

对于要打开的子帧，射频子系统将打开该子帧对应的所有符号；对于需关闭的子帧，射频子系统打开参考信号(Reference Signal，RS)、PBCH、物理下行控制信道(PhysicalDownlink Control Channel，PDCCH)、PSCH、SSCH所在的符号，其余符号选择性关闭。

本发明实施例提供的无线帧中符号的搬迁方法正是为了实现子帧中符号的智能关闭，这里对本发明实施例的方法进行详细的说明。

图2为本发明实施例一无线帧中符号的搬迁方法的实现流程示意图，如图2所示，所述方法包括以下步骤：

步骤S201，基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率。

这里，所述预设压缩值可以根据实际情况进行调整，所述预设压缩值可以为运营商根据业务需要进行预设的，也可以是系统根据实际业务状态进行实时调整的，本实施例对预设压缩值的大小不做具体限定。

需要说明的是，在搬迁方法的一个实现流程中，所述预设压缩值的大小是固定的，例如，将所述预设压缩值设置为1dB压缩点。那么，此时步骤S201则可以为：基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与1dB压缩点之间的比值，确定对应符号的当前功放占用率。

当所述预设压缩值确定之后，基站获取无线帧中的每个符号的当前输出功率，并将每个符号的当前输出功率与预设压缩值的比值确定为对应符号的当前功放占用率，这里，所述功放占用率为一比率。所述无线帧中的每个符号均具有当前功放占用率。当某一符号所对应时刻的功放的当前输出功率为零时，该符号的当前功放占用率为零；当某一符号所对应的功放的当前输出功率等于所述预设压缩值时，该符号的当前功放占用率为100％；当某一符号的当前功放占用率为100％时，此时该符号岁对应时刻的功放的利用效率最高。

步骤S202，基站根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号。

这里，所述待搬迁符号可以从一个子帧的全部符号中确定，也可以从一个子帧的部分符号中确定。本实施例中，所述待搬迁符号具体是从一个子帧的全部符号中确定，还是从部分符号中确定，可以根据实际业务需要进行预设，也可以根据业务的状态进行实时调整，本实施例对此不做具体限定。

当所述搬迁符号从一个子帧的全部符号中确定时，步骤S202则可以为：根据一个子帧中的全部符号的当前功放占用率，从所述子帧中的全部符号中确定待搬迁符号。

当所述搬迁符号从一个子帧的部分符号中确定时，步骤S202则可以为：根据一个子帧中的部分符号的当前功放占用率，从所述子帧中的所述部分符号中确定待搬迁符号。

步骤S203，基站根据预设算法确定目标搬迁符号。

步骤S204，基站将第一功放占用率搬迁至所述目标搬迁符号。

这里，所述第一功放占用率为所述待搬迁符号的当前功放占用率。所述将第一功放占用率搬迁至所述目标搬迁符号为，将待搬迁符号的当前功放占用率转移至目标搬迁符号，这样，在转移之后，对于目标搬迁符号来说，不仅具有自身的当前功放占用率，还具有待搬迁符号的当前功放占用率；而对于待搬迁符号来说，当将第一功放占用率搬迁至目标搬迁符号之后，待搬迁符号的当前功放占用率清零。

图3为本发明实施例一无线帧中符号的搬迁方法的应用场景示意图，如图3所述，当前系统中有两个符号对应时刻的功放处于打开状态，分别为符号#1和符号#2，符号#1和符号#2的搬迁前状态301为：符号#1的当前功放占用率为10％，符号#2的当前功放占用率为90％，显然，符号#1和符号#2均未达到功放的最佳利用状态。此时系统可以对符号#1和符号#2的当前功放占用率进行预判，判断出符号#1和符号#2均未达到功放的最佳利用状态的结果，因此，系统基于判断结果执行本实施例的无线帧中符号的搬迁方法，以实现无线帧中符号的功放的最佳利用率。

其中，具体搬迁过程如下：基站确定符号#1的当前功放占用率为10％，符号#2的当前功放占用率为90％，从符号#1和符号#2中确定符号#1为待搬迁符号，符号#2为目标搬迁符号，并将符号#1的10％当前功放占用率搬迁至符号#2中。对应搬迁后状态302为：符号#2的当前功放占用率为100％，符号#1的当前功放占用率为0％。这样，由于符号#1的当前功放占用率为零，因此，可以将符号#1对应时刻的功放关闭，仅开启符号#2对应时刻的功放进行通信。

本发明实施例提供的无线帧中符号的搬迁方法，由于将待搬迁符号的当前功放占用率搬迁至目标搬迁符号，这样，可以在不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。并且本发明实施例的方法能够智能的实现无线帧中符号的关闭，可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高。

实施例二

本发明实施例提供一种无线帧中符号的搬迁方法，应用于基站。本实施例的无线帧中符号的搬迁方法所实现的功能可以通过基站中的处理器调用程序代码来实现，当然程序代码可以保存在计算机存储介质中，可见，该基站至少包括处理器和存储介质。

图4为本发明实施例二无线帧中符号的搬迁方法的实现流程示意图，如图4所示，所述方法包括以下步骤：

步骤S401，基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率。

这里，所述预设压缩值可以根据实际情况进行调整，所述预设压缩值可以为运营商根据业务需要进行预设的，也可以是系统根据实际业务状态进行实时调整的，本实施例对预设压缩值的大小不做具体限定。

需要说明的是，在搬迁方法的一个实现流程中，所述预设压缩值的大小是固定的，例如，将所述预设压缩值设置为1dB压缩点。那么，此时步骤S401则可以为：基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与1dB压缩点之间的比值，确定对应符号的当前功放占用率。

当所述预设压缩值确定之后，基站获取无线帧中的每个符号的当前输出功率，并将每个符号的当前输出功率与预设压缩值的比值确定为对应符号的当前功放占用率，这里，所述功放占用率为一比率。所述无线帧中的每个符号均具有当前功放占用率。当某一符号所对应时刻的功放的当前输出功率为零时，该符号的当前功放占用率为零；当某一符号所对应的功放的当前输出功率等于所述预设压缩值时，该符号的当前功放占用率为100％；当某一符号的当前功放占用率为100％时，此时该符号岁对应时刻的功放的利用效率最高。

步骤S402，根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定最小当前功放占用率对应的符号为所述待搬迁符号。

这里，所述待搬迁符号可以从一个子帧的全部符号中确定，也可以从一个子帧的部分符号中确定。本实施例中，所述待搬迁符号具体是从一个子帧的全部符号中确定，还是从部分符号中确定，可以根据实际业务需要进行预设，也可以根据业务的状态进行实时调整，本实施例对此不做具体限定。

本实施例中，在确定了符号的当前功放占用率之后，根据至少两个所述符号的当前功放占用率的大小进行排序，将最小当前功放占用率所对应的符号确定为所述待搬迁符号。

当所述搬迁符号从一个子帧的全部符号中确定时，步骤S402则可以为：根据一个子帧中的全部符号的当前功放占用率，从所述子帧中的全部符号中确定最小当前功放占用率对应的符号为所述待搬迁符号。

当所述搬迁符号从一个子帧的部分符号中确定时，步骤S402则可以为：根据一个子帧中的部分符号的当前功放占用率，从所述子帧中的所述部分符号中确定最小当前功放占用率对应的符号为所述待搬迁符号。

步骤S403，根据每一符号的当前功放占用率确定对应符号的权重。

这里，所述权重用于判断是否关闭对应符号或者对对应符号进行搬迁处理。

本实施例中，每个符号均具有一个权重，所述权重的取值为[0，100]，每个符号的权重值与对应符号的当前功放占用率对应，当符号的当前功放占用率为0％到100％之间的任一值时，符号的权重为当前功放占用率乘以100后得到的数值，当符号的当前功放占用率为大于100％的任一值时，符号的权重为0。举例来说，如果符号#1的当前功放占用率为0％，则符号#1的权重为0；如果符号#2的当前功放占用率为50％，则符号#2的权重为50；如果符号#3的当前功放占用率为100％，则符号#3的权重为100；如果符号#4的当前功放占用率为110％，则符号#4的权重为0。

步骤S404，关闭权重为零的符号所对应时刻的功放。

当某一符号的权重为零时，表明该符号的当前功放占用率为零或者大于100％。本实施例中关闭权重为零的符号所对应时刻的功放主要是针对当前功放占用率为零的符号，因为，显然符号的当前功放占用率是不能大于100％的。因此，步骤S404还可以为：关闭当前功放占用率为零的符号所对应时刻的功放。

本实施例中，由于将权重为零的符号所对应时刻的功放关闭，这样，在后续的搬迁过程中，就不用再考虑权重为零的符号，只在当前功放占用率非零的符号中进行搬迁，显然，可以减小系统的工作量，从而有效的提高搬迁效率。

步骤S405，根据预设算法确定目标搬迁符号。

这里，步骤S405根据预设算法确定目标搬迁符号包括三种方式。下面对三种方式的实现步骤进行解释说明。

方式一：

步骤S4051，确定第一符号集合，所述第一符号集合包括至少一个处于开启状态的符号。

这里，所述处于开启状态的符号为该符号对应时刻的功放为开启状态，本实施例确定第一符号集合，可以排除处于关闭状态的符号，这样，只对处于开启状态的符号进行搬迁处理，可以极大的提高搬迁效率，并减小系统的工作量，降低系统时延。

步骤S4052，根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率。

这里，所述预设算法可以为根据公式Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，计算第二功放占用率Q(S,A)。

其中，Q为第二功放占用率函数；S为对应符号的当前功放占用率；A为对应符号的动作；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为第一功放占用率；a′为对应符号的所有动作。

步骤S4053，当所述第一符号集合中每一符号的第二功放占用率均小于或者等于预设值时，确定最大第二功放占用率对应的符号为所述目标搬迁符号。

方式二：

步骤S4151，确定第一符号集合，所述第一符号集合包括至少一个处于开启状态的符号。

步骤S4152，根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率。

这里，所述预设算法可以为根据公式Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，计算第二功放占用率Q(S,A)。

其中，Q为第二功放占用率函数；S为对应符号的当前功放占用率；A为对应符号的动作；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为第一功放占用率；a′为对应符号的所有动作。

步骤S4153，当所述第一符号集合中的符号的第二功放占用率大于预设值时，禁止将对应符号确定为所述目标搬迁符号。

这里，所述预设值可以为固定值，也可以根据实际业务量或者系统功放进行调整。例如，可以将所述预设值设置为100％。如果所述预设值为100％时，那么，当所述第一符号集合中的符号的第二功放占用率大于100％时，则表明如果将待搬迁符号搬迁到该符号会存在功放占用率过剩的情况，系统不能完成将待搬迁符号的全部当前功放占用率搬迁到该符号，因此，禁止将该符号确定为目标搬迁符号。这样，可以保证搬迁过程的有效进行。

步骤S4154，确定第二符号集合，在第二符号集合中确定最大第二功放占用率对应的符号为所述目标搬迁符号。

这里，所述第二符号集合不包括被禁止确定为所述目标搬迁符号的对应符号。即，所述第二符号集合中的符号的第二功放占用率均小于或者等于预设值。

方式三：

步骤S4251，确定第一符号集合，所述第一符号集合包括至少一个处于开启状态的符号。

步骤S4252，根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率。

这里，所述预设算法可以为根据公式Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，计算第二功放占用率Q(S,A)。

其中，Q为第二功放占用率函数；S为对应符号的当前功放占用率；A为对应符号的动作；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为第一功放占用率；a′为对应符号的所有动作。

步骤S4253，当所述第一符号集合中每一符号的第二功放占用率均大于预设值时，根据公式Q′(S,A)＝R(S,A)+a[r*MaxQ(s′,a′)]，计算第三功放占用率Q′(S,A)；

其中，Q′为第三功放占用率函数；a为搬迁比率，a＝(1-Ymax)/Ymin，Ymax为最大当前功放占用率；Ymin为最小当前功放占用率。

步骤S4254，确定最大第三功放占用率对应的符号为所述目标搬迁符号。

步骤S406，将所述待搬迁符号的当前功放占用率搬迁至所述目标搬迁符号。

需要说明的是，当步骤S405为上述方式一或者方式二时，步骤S406可以为：

步骤S4061：将第一功放占用率搬迁至所述目标搬迁符号。

这里，所述第一功放占用率为所述待搬迁符号的全部当前功放占用率。所述将第一功放占用率搬迁至所述目标搬迁符号为，将待搬迁符号的当前功放占用率全部转移至目标搬迁符号，这样，在转移之后，对于目标搬迁符号来说，不仅具有自身的当前功放占用率，还具有待搬迁符号的当前功放占用率；而对于待搬迁符号来说，当将第一功放占用率搬迁至目标搬迁符号之后，待搬迁符号的当前功放占用率清零。

当步骤S405为上述方式三时，步骤S406可以包括以下步骤：

步骤S4062：根据所述搬迁比率确定所述待搬迁符号的待搬迁功放占用率。

这里，所述搬迁比率a通过公式a＝(1-Ymax)/Ymin进行计算，其中，根据搬迁比率确定所述待搬迁符号的待搬迁功放占用率，为将所述待搬迁符号的当前功放占用率乘以搬迁比率，所得到的结果即为所述待搬迁功放占用率。

步骤S4063，将所述待搬迁符号的所述待搬迁功放占用率搬迁至所述目标搬迁符号。

这里，所述待搬迁功放占用率为所述待搬迁符号的部分当前功放占用率。因此，本实施例是将所述待搬迁符号的部分当前功放占用率搬迁至所述目标搬迁符号。

步骤S407，当把所述第一功放占用率搬迁至所述目标搬迁符号时，将所述待搬迁符号的所述权重设置为零。

这里，把所述第一功放占用率搬迁至所述目标搬迁符号，即表明将所述待搬迁符号的全部当前功放占用率搬迁至所述目标搬迁符号。需要说明的是，把待搬迁符号的全部当前功放占用率搬迁至目标搬迁符号，这里，目标搬迁符号可以为一个或者多个，当目标搬迁符号为一个时，表明是将待搬迁符号的全部当前功放占用率搬迁至该一个目标搬迁符号；当目标搬迁符号为多个时，表明是将待搬迁符号的全部当前功放占用率划分为多个部分，将多个部分分别搬迁至多个目标搬迁符号。

当把所述第一功放占用率搬迁至所述目标搬迁符号时，所述待搬迁符号的当前功放占用率被清零，那么，此时所述待搬迁符号的当前功放占用率实际为0％，因此，所述待搬迁符号的权重为零。

本发明实施例提供的无线帧中符号的搬迁方法，根据预设算法确定目标搬迁符号，并将待搬迁符号的全部或者部分当前功放占用率搬迁至目标搬迁符号，这样，可以灵活的实现对待搬迁符号的当前功放占用率的搬迁，并且，在不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。并且本发明实施例的方法能够智能的实现无线帧中符号的关闭，可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高。

实施例三

本发明实施例提供一种无线帧中符号的搬迁方法，根据功放器件特性在DTX节能的原理上出发，所提供的搬迁方法是一种基于改进型Q学习算法的智能符号关闭的控制策略，不仅可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高，而且可在尽量不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。这种方法不仅适用于现有LTE系统，在第五代新无线电(5th Generation New Radio，5G NR)系统中也同样适用。

通信系统业务一般服从泊松分布，但当遇到业务量呈断崖式上升或下降等情况时，系统往往对业务情况不可预判，例如，大型活动场所举办活动、大学校园上下课时间等。而Q学习算法是一种非给予模型的算法，正好适用于不确定环境的信息以及接下来在环境中采取行动是不确定的状况。系统可对周边环境的交互过程得到的学习经验，在此基础上开发新的控制策略，通过自发不断的学习经验从而优化之后的运行流程。

本实施例中，Q循环的迭代函数为：

Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)；

其中，Q为动作效用函数(即第二功放占用率函数)，用来评价在特定状态下采取某个动作的优劣；S表示当前运行状态(即当前功放占用率)；A表示当前符号的动作(动作有两种：数据搬迁概率；维持现状概率)；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为待搬迁符号的第一功放占用率，a′为所有动作。

由于刚开始对周边情况一无所知，因此Q值初始状态全部设置为0。如果系统不知道有多少个状态时，Q矩阵则只有一个元素，当新的状态出现时，对矩阵Q增加新的行和列。本实施例中R为m*n矩阵，因此也就构成了一张m*n的表。根据上述Q循环的迭代函数，矩阵Q中的元素就等于矩阵R中相应元素的值与学习效率乘以下一个状态的所有可能动作的最大搬迁值的总和，那么，最终经过训练后数据搬迁状态由这张表来决策。

如果在搬迁过程中每次都采取当前状态效用值(即Q(S,A))最大的动作，那么可能会存在有更好的选择没有被探测到的情况，控制策略会限制在之前的训练的模型中。

本实施例再提供一种改进的方法，该方法根据网络的运行规律，在一段时间后，模型可以有一定比率a(即搬迁比率)进行探索(一般情况下a的取值比较小)。

这样，上述Q循环的迭代函数可以改进为：

Q′(S,A)＝R(S,A)+a[r*MaxQ(s′,a′)]；

其中，Q′为改进后的动作效用函数(即第三功放占用率函数)，a为搬迁比率，a＝(1-Ymax)/Ymin，Ymax为最大当前功放占用率；Ymin为最小当前功放占用率。

本实施例通过动作效用函数以及改进后的动作效用函数进行符号的搬迁，其目的是通过对周边环境的探测经验，以将探测经验值反馈给基站系统的控制器，由控制器根据所述探测经验制定探索策略，再进行循环迭代，用Q值矩阵或者Q′值矩阵记录数据，矩阵中的各个元素对应符号中的信息搬迁到目标符号的权重系数。

图5为本发明实施例三无线帧中符号的搬迁方法的流程图，本实施例应用于LTE系统。所述搬迁方法在每个检测周期会统计符号的利用率(即符号的功放占用率)，这里，所述检测周期可以为系统预设的，也可以是运营商根据业务量的实际情况进行设置的，也可以是每次搬迁方法的一个流程为一个检测周期。在统计完符号的利用率之后，根据统计结果判定是打开还是关闭子帧。

请参照图5所示的流程图，所述方法包括以下步骤：

S501，确定系统中可用于数据搬迁的符号。

在确定系统中可用于数据搬迁的符号之前，首先需要触发节能策略，控制器初始化Q值矩阵，使Q矩阵元素值都为0。然后，控制器向网管索要各个子帧中14个符号的当前功放占用率，并确定系统中可用于数据搬迁的符号。

S502，找出数据量最少的符号X。

S503，计算X搬迁到其他符号后各符号的功放占用率Y。

S504，判断Y是否大于100％。

当判断结果为是时，执行步骤S505；当判断结果为否时，执行S506。

S505，符号X不可搬迁，并维持现状。

当执行步骤S505维持现状时，流程结束。

S506，执行搬迁，并计算搬迁后各符号的功放占用率。

这里，根据Q算法Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，把功放占用率最大的状态作为激活状态。

S507，得出此时各符号的功放占用率Z。

S508、判断所有Z值是否大于100％。

当判断结果为是时，执行步骤S509；当判断结果为否时，返回执行步骤S502。

S509，找出Z值最小的符号并运行修正后的Q学习算法。

这里，所述修正后的Q学习算法为Q′(S,A)＝R(S,A)+a[r*MaxQ(s′,a′)]，其中，a＝(1-Ymax)/Ymin。

S510，令X＝a*Ymin，Ymin＝(1-a)Ymin，并继续执行步骤S502。

本实施例的无线帧中符号的搬迁方法，第一步，触发节能策略，控制器初始化Q值矩阵，使Q矩阵元素值都为0；第二步，控制器向网管索要各个子帧中14个符号的当前功放占用率，找出可用来搬迁的符号；第三步，计算出此符号搬迁到其他符号的功放占用率，选择具有最大Q值的状态作为当前的激活状态R；第四步，根据循环迭代函数，触发更新状态S下采取动作A的Q值Q(S,A)，对Q值变化进行更新，其余的Q值则不做更新；第五步，选择矩阵中具有最大Q值的状态作为下一个起始状态，检查是否到达目标状态。当到达目标状态时，则停止；若没有到达目标状态，则继续下一步；第六步，返回第三步得到激活状态R，依次运行。

本发明实施例提供的无线帧中符号的搬迁方法，不仅可以提高符号的搬迁效率，使搬迁后的匹配程度尽可能的高，而且可在尽量不增加系统时延的基础上达到最佳节能状态，从而维护网络的稳定性以及运营商的利益。

为了使本实施例的方案更加清楚，这里对本实施例的搬迁方法进行举例说明。

本实施例以常规循环前缀(Normal cp)单/双天线为例，RS分布在每个子帧的符号#0、#4、#7、#11中，符号#0、#4、#7、#11是不可以关闭的。基站本地操作维护模块/网元管理系统(Operation and maintenance center for BTS(Node B)/Element managementsystem，OMMB/EMS)配置控制格式指示(Control format indicatior，CFI)默认状态时(CFI＝AUTO)，此时符号#0、#1、#2、#3不关闭，并且考虑到RS分配在符号#0、#4、#7、#11上。因此，最终不可以关闭的符号为符号#0、#1、#2、#3、#4、#7、#11。

为了方便理解，在此设置模型：假设功放占用率为100％时对应功放1dB压缩点(此时功放利用效率最高)。如表1所示，为不可关闭符号的当前功放占用率，符号#5、#6为备选关闭符号，数据相对最多，可达到功放利用率80％；符号#8可达到功放利用率70％；符号#9可达到功放利用率60％，符号#10可达到功放利用率50％，符号#12可达到功放利用率30％；符号#13为数据最少的符号，可达到功放利用率10％。若可以到达最终目标位置则给予奖励值100。

此模型对应数据搬迁过程如下：

表1不可关闭符号的当前功放占用率

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

80％

80％

70％

60％

50％

30％

10％

第一步：找出符号占用率最小的符号#13，计算符号#13搬迁到其它符号后各符号的功放占用率及权重，如表2所示，为将符号#13搬迁到其它符号后各符号的功放占用率及权重。需要说明的是，当对应的符号的功放占用率小于等于100％时，对应的搬迁到此符号的权重等于符号的功放占用率；当对应的符号的功放占用率大于100％时，对应的搬迁到此符号的权重为零。

表2将符号#13搬迁到其它符号后各符号的功放占用率及权重

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

90％

90％

80％

70％

60％

40％

0％

权重

90

90

80

70

60

40

0

第二步：将符号#13搬迁到对应权重最大的符号#5上，使符号#13搬迁后的状态作为激活状态，如表3所示，为将符号#13搬迁到符号#5上后各符号的功放占用率。

表3将符号#13搬迁到符号#5上后各符号的功放占用率

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

90％

80％

70％

60％

50％

30％

0％

然后，找出此时符号占用率最小的符号#12，计算将符号#12搬迁到其它符号后的功放占用率，如表4所示，为将符号#12搬迁到其它符号后各符号的功放占用率及权重。

表4将符号#12搬迁到其它符号后各符号的功放占用率及权重

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

120％

110％

100％

90％

80％

0％

0％

权重

0

0

100

90

80

0

0

第三步：将符号#12搬迁到对应权重最大的符号#8上，将符号#12搬迁后的状态作为激活状态，如表5所示，为将符号#12搬迁到符号#8上后各符号的功放占用率。

表5将符号#12搬迁到符号#8上后各符号的功放占用率

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

90％

80％

100％

60％

50％

0％

0％

继续运行程序，如表6所示，为将符号#10搬迁到其它符号后各符号的功放占用率及权重。

表6将符号#10搬迁到其它符号后各符号的功放占用率及权重

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

140％

130％

150％

110％

0％

0％

0％

权重

0

0

0

0

0

0

0

此时由于所有符号的权重均为零，程序停止运行，最终状态如表7所示：

表7程序运行最终状态

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

90％

80％

100％

60％

50％

0％

0％

从表7中可以看出，此时符号#5、#6的利用率并不理想；根据程序流程图，可以对算法进行改进，符号#10乘以概率a进行分解。根据公式a＝(1-Ymax)/Ymin计算得到a的值为1/5，因此，将符号#10的功放占用率的1/5分解出来进行搬迁。

第四步：对符号#10分解后继续进行搬迁，如表8所示，为将符号#10分解搬迁到其它符号后各符号的功放占用率及权重。

表8将符号#10分解搬迁到其它符号后各符号的功放占用率及权重

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

100％

90％

110％

70％

40％

0％

0％

权重

100

90

0

70

40

0

0

则此时程序运行的新状态如表9所示：

表9程序运行的新状态

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

100％

80％

100％

60％

40％

0％

0％

第五步：继续进行搬迁，将符号#10搬迁至符号#9，如表10所示，为将符号#10搬迁到其它符号后各符号的功放占用率及权重。

表10将符号#10搬迁到其它符号后各符号的功放占用率及权重

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

140％

120％

140％

100％

0％

0％

0％

权重

0

0

0

100

0

0

0

此时最终运行状态如表11所示：

表11最终运行状态

符号

#5

#6

#8

#9

#10

#12

#13

功放占用率

100％

80％

100％

100％

0％

0％

0％

达到最终运行状态时，跳出程序。

对最终运行结果进行分析，可以看出符号#5、#8、#9均达到了最大功放占用率，以及#6的功放占用率也接近了功放的1dB压缩点，其余符号#10、#12、#13可以关闭。

本实施例的方法不仅可以使数据搬迁后的匹配程度尽可能的高，而且尽可能的减小了数据搬迁时对系统时延的影响，且可以达到最佳节能状态。

实施例四

本发明实施例提供一种无线帧中符号的搬迁装置，图6为本发明实施例四无线帧中符号的搬迁装置的组成结构示意图，如图6所示，该装置600包括：

第一确定单元601，用于根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；

第二确定单元602，用于根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；

第三确定单元603，用于根据预设算法确定目标搬迁符号；

搬迁单元604，用于将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

在其他实施例中，所述第二确定单元，具体用于根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定最小当前功放占用率对应的符号为所述待搬迁符号。

在其他实施例中，所述装置还包括：第四确定单元和关闭单元；

第四确定单元，用于根据每一符号的当前功放占用率确定对应符号的权重；

关闭单元，用于关闭权重为零的符号所对应时刻的功放。

在其他实施例中，所述第三确定单元包括：第一确定模块、第一计算模块和第二确定模块；

第一确定模块，用于确定第一符号集合，所述第一符号集合包括至少一个处于开启状态的符号；

第一计算模块，用于根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率，

第二确定模块，用于当所述第一符号集合中每一符号的第二功放占用率均小于或者等于预设值时，确定最大第二功放占用率对应的符号为所述目标搬迁符号。

在其他实施例中，所述计算模块，具体用于根据公式：

Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，计算第二功放占用率Q(S,A)；

其中，Q为第二功放占用率函数；S为对应符号的当前功放占用率；A为对应符号的动作；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为第一功放占用率；a′为对应符号的所有动作。

在其他实施例中，所述装置还包括：

禁止模块，用于当所述第一符号集合中的符号的第二功放占用率大于预设值时，禁止将对应符号确定为所述目标搬迁符号。

在其他实施例中，所述第三确定单元包括：第二计算模块和第三确定模块；

第二计算模块，用于当所述第一符号集合中每一符号的第二功放占用率均大于预设值时，根据公式Q′(S,A)＝R(S,A)+a[r*MaxQ(s′,a′)]，计算第三功放占用率Q′(S,A)；

其中，Q′为第三功放占用率函数；a为搬迁比率，a＝(1-Ymax)/Ymin，Ymax为最大当前功放占用率；Ymin为最小当前功放占用率；

第三确定模块，用于确定最大第三功放占用率对应的符号为所述目标搬迁符号。

在其他实施例中，所述装置还包括：第五确定单元和第二搬迁单元；

第五确定单元，用于根据所述搬迁比率确定所述待搬迁符号的待搬迁功放占用率；

第二搬迁单元，用于将所述待搬迁符号的所述待搬迁功放占用率搬迁至所述目标搬迁符号。

在其他实施例中，所述装置还包括：

设置单元，用于当把所述第一功放占用率搬迁至所述目标搬迁符号时，将所述待搬迁符号的所述权重设置为零。

需要说明的是，本实施例装置的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果，因此不做赘述。对于本装置实施例中未披露的技术细节，请参照本发明方法实施例的描述而理解。

实施例五

本发明实施例提供一种无线帧中符号的搬迁设备(即基站)，图7为本发明实施例五线帧中符号的搬迁设备的组成结构示意图，如图7所示，所述设备700至少包括：处理器701和配置为存储可执行指令的存储介质702，其中：

处理器701配置为执行存储的可执行指令，所述可执行指令配置为执行上述任一实施例中所提供的无线帧中符号的搬迁方法。

需要说明的是，以上无线帧中符号的搬迁设备实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果，因此不做赘述。对于本发明无线帧中符号的搬迁设备实施例中未披露的技术细节，请参照本发明方法实施例的描述而理解。

对应地，本发明实施例提供一种计算机可读存储介质，所述计算机存储介质中存储有计算机可执行指令，该计算机可执行指令配置为执行本发明其他实施例提供的无线帧中符号的搬迁方法。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (10)

1.一种无线帧中符号的搬迁方法，其特征在于，所述方法包括：

基站根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；

根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；

根据预设算法确定目标搬迁符号；

将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

2.根据权利要求1所述的方法，其特征在于，所述根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号，包括：

根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定最小当前功放占用率对应的符号为所述待搬迁符号。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据每一符号的当前功放占用率确定对应符号的权重；

关闭权重为零的符号所对应时刻的功放。

4.根据权利要求3所述的方法，其特征在于，所述根据预设算法确定目标搬迁符号，包括：

确定第一符号集合，所述第一符号集合包括至少一个处于开启状态的符号；

根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率，

当所述第一符号集合中每一符号的第二功放占用率均小于或者等于预设值时，确定最大第二功放占用率对应的符号为所述目标搬迁符号。

5.根据权利要求4所述的方法，其特征在于，所述根据预设算法，计算所述第一符号集合中每一符号的第二功放占用率，包括：

根据公式Q(S,A)＝R(S,A)+r*MaxQ(s′,a′)，计算第二功放占用率Q(S,A)；

其中，Q为第二功放占用率函数；S为对应符号的当前功放占用率；A为对应符号的动作；R为当前状态的矩阵；r为学习效率，0≤r≤1；s′为第一功放占用率；a′为对应符号的所有动作。

6.根据权利要求4所述的方法，其特征在于，所述方法还包括：

当所述第一符号集合中的符号的第二功放占用率大于预设值时，禁止将对应符号确定为所述目标搬迁符号。

7.根据权利要求4所述的方法，其特征在于，所述根据预设算法确定目标搬迁符号，包括：

当所述第一符号集合中每一符号的第二功放占用率均大于预设值时，根据公式Q′(S,A)＝R(S,A)+a[r*MaxQ(s′,a′)]，计算第三功放占用率Q′(S,A)；

其中，Q′为第三功放占用率函数；a为搬迁比率，a＝(1-Ymax)/Ymin，Ymax为最大当前功放占用率；Ymin为最小当前功放占用率；

确定最大第三功放占用率对应的符号为所述目标搬迁符号。

8.根据权利要求7所述的方法，其特征在于，在根据预设算法确定目标搬迁符号之后，所述方法还包括：

根据所述搬迁比率确定所述待搬迁符号的待搬迁功放占用率；

将所述待搬迁符号的所述待搬迁功放占用率搬迁至所述目标搬迁符号。

9.根据权利要求3至8任一项所述的方法，其特征在于，所述方法还包括：

当把所述第一功放占用率搬迁至所述目标搬迁符号时，将所述待搬迁符号的所述权重设置为零。

10.一种无线帧中符号的搬迁装置，其特征在于，所述装置包括：

第一确定单元，用于根据无线帧中的每一符号所对应时刻的功放的当前输出功率与预设压缩值之间的比值，确定对应符号的当前功放占用率；

第二确定单元，用于根据至少两个所述符号的当前功放占用率，从所述无线帧中的符号中确定待搬迁符号；

第三确定单元，用于根据预设算法确定目标搬迁符号；

搬迁单元，用于将第一功放占用率搬迁至所述目标搬迁符号，所述第一功放占用率为所述待搬迁符号的当前功放占用率。

Images