CN111065131B - 切换方法、装置及电子设备 - Google Patents

切换方法、装置及电子设备 Download PDF

Info

Publication number
CN111065131B
CN111065131B CN201911294992.2A CN201911294992A CN111065131B CN 111065131 B CN111065131 B CN 111065131B CN 201911294992 A CN201911294992 A CN 201911294992A CN 111065131 B CN111065131 B CN 111065131B
Authority
CN
China
Prior art keywords
base station
transmission rate
switching
current
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911294992.2A
Other languages
English (en)
Other versions
CN111065131A (zh
Inventor
刘梦悦
冯大权
张胜利
赖礼锋
王春琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen University
Original Assignee
Shenzhen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen University filed Critical Shenzhen University
Priority to CN201911294992.2A priority Critical patent/CN111065131B/zh
Publication of CN111065131A publication Critical patent/CN111065131A/zh
Application granted granted Critical
Publication of CN111065131B publication Critical patent/CN111065131B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W28/00—Network traffic management; Network resource management
    • H04W28/02—Traffic management, e.g. flow control or congestion control
    • H04W28/08—Load balancing or load distribution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W36/00—Hand-off or reselection arrangements
    • H04W36/0005—Control or signalling for completing the hand-off
    • H04W36/0055—Transmission or use of information for re-establishing the radio link
    • H04W36/0072—Transmission or use of information for re-establishing the radio link of resource information of target access point
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W36/00—Hand-off or reselection arrangements
    • H04W36/0005—Control or signalling for completing the hand-off
    • H04W36/0083—Determination of parameters used for hand-off, e.g. generation or modification of neighbour cell lists
    • H04W36/0085—Hand-off measurements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W36/00—Hand-off or reselection arrangements
    • H04W36/16—Performing reselection for specific purposes
    • H04W36/22—Performing reselection for specific purposes for handling the traffic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W36/00—Hand-off or reselection arrangements
    • H04W36/24—Reselection being triggered by specific parameters
    • H04W36/30—Reselection being triggered by specific parameters by measured or perceived connection quality data
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明涉及信号处理技术领域，具体涉及切换方法、装置及电子设备，其中方法包括：获取预设范围内各个基站的传输速率；基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值；利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站。所述的切换方法，在各个基站的传输速率的基础上，对本地从当前基站切换至其他各个基站的奖励期望值进行计算，即采用与各个基站的交互学习，选择出本地在当前位置下的最佳基站，大大减少了不必要的切换，并且还能保证传输速率满足用户需求。

Description

切换方法、装置及电子设备
技术领域
本发明涉及信号处理技术领域，具体涉及切换方法、装置及电子设备。
背景技术
随着互联网技术和通信技术的不断发展，各式各样的终端通过与各个基站的通信，完成各种各样的业务。例如，用户利用手机与基站的通信实现邮件收发、信息收发等，行驶的车辆与基站的通信实现无人驾驶等等。
在终端与基站的通信过程中，可能会由于终端的移动与其通信基站会发生改变，那么就会涉及到基站切换的问题。常用的切换策略一般有：(1)基于接收信号强度(Reference Signal Received Power，简称为RSRP)，根据最大的RSRP来选择基站进行切换；(2)基于传输速率的切换策略，根据最大的传输速率来选择基站进行切换。
然而，若根据RSRP或传输速率会带来一些不必要的切换，不必要的切换会导致沉重的信令开销和高中断率。
发明内容
有鉴于此，本发明实施例提供了一种切换方法、装置及电子设备，以解决由于切换策略所导致的不必要的切换问题。
根据第一方面，本发明实施例提供了一种切换方法，包括：
获取预设范围内各个基站的传输速率；
基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值；
利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站。
本发明实施例提供的切换方法，在各个基站的传输速率的基础上，对本地从当前基站切换至其他各个基站的奖励期望值进行计算，即采用与各个基站的交互学习，选择出本地在当前位置下的最佳基站，大大减少了不必要的切换，并且还能保证传输速率满足用户需求。
结合第一方面，在第一方面第一实施方式中，所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值，包括：
以所述各个基站的传输速率作为奖励、所述各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
本发明实施例提供的切换方法，采用强化学习算法结合历史记录和奖励与环境交互，得到从当前基站切换至其他各个基站的奖励期望值，后续利用该奖励期望值就可以确定出当前位置对应的最佳基站，可以减少不必要的切换。
结合第一方面，在第一方面第一实施方式中，所述获取预设范围内各个基站的传输速率，包括：
获取预设范围内各个基站当前服务的终端数目以及所述各个基站的信噪比；
利用各个基站当前服务的终端数目以及所述各个基站的信噪比，计算所述各个基站的传输速率。
本发明实施例提供的切换方法，在计算各个基站的传输速率时，保证各个基站当前服务的所有终端均分各个基站的带宽，以实现负载均衡。
结合第一方面，或第一方面第一实施方式，或第一方面第二实施方式，在第一方面第三实施方式中，所述利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站，包括：
确定所述奖励期望值最高的基站为所述目标基站；
向所述当前基站发送切换请求，以使得从所述当前基站切换至所述目标基站；其中，所述切换请求中携带有所述目标基站的标识。
本发明实施例提供的切换方法，本地从所有奖励期望值中选择出奖励期望值最高的基站作为切换的目标基站，在确定出目标基站后向当前基站发送切换请求，以使得当前基站与目标基站进行通信，实现基站的切换。
结合第一方面第三实施方式，在第一方面第四实施方式中，所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值的步骤之前，包括：
判断所述当前基站低于预设值的传输速率的持续时间是否大于或等于第一预设时长；
当所述当前基站低于所述预设值的传输速率的持续时间大于或等于预设时长时，执行所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值的步骤。
本发明实施例提供的切换方法，在进行切换之前先判断是否满足相应的触发条件，该条件是为了保证在满足用户QoS的情况下，减少不必要的切换。
结合第一方面第四实施方式，在第一方面第五实施方式中，所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值的步骤之前，，还包括：
当所述当前基站低于所述预设值的传输速率持续时间小于预设时长，或当所述当前基站的传输速率大于或等于所述预设值的传输速率时，判断所述各个基站中的最大传输速率与所述当前基站的传输速率的差值大于预设差值的持续时间是否大于或等于第二预设时长；
当所述各个基站中的最大传输速率与所述当前基站的传输速率的差值大于或等于预设差值的持续时间大于第二预设时长时，确定所述最大传输速率对应的基站为所述目标基站。
本发明实施例提供的切换方法，在切换之前先判断是否满足相应的触发条件，该条件是为了给用户需求更好的服务基站。
根据第二方面，本发明实施例还提供了一种切换装置，包括：
获取模块，用于获取预设范围内各个基站的传输速率；
计算模块，用于基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值；
确定模块，用于利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站。
本实施例提供的切换装置，在各个基站的传输速率的基础上，对本地从当前基站切换至其他各个基站的奖励期望值进行计算，即采用与各个基站的交互学习，选择出本地在当前位置下的最佳基站，大大减少了不必要的切换，并且还能保证传输速率满足用户需求。
结合第二方面，在第二方面第一实施方式中，所述计算模块，包括：
强化学习单元，用于以各个基站的传输速率作为奖励、所述各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
根据第三方面，本发明实施例提供了一种电子设备，包括：存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器中存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行第一方面或者第一方面的任意一种实施方式中所述的切换方法。
根据第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行第一方面或者第一方面的任意一种实施方式中所述的切换方法。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了本发明实施例的切换应用场景的示意图；
图2是根据本发明实施例的切换方法的流程图；
图3是根据本发明实施例的切换方法的流程图；
图4是根据本发明实施例的切换方法的流程图；
图5是根据本发明实施例的切换装置的结构框图；
图6是根据本发明实施例的强化学习单元的结构框图；
图7是本发明实施例提供的电子设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明实施例中所述的切换方法可以应用于任何需要进行基站切换的场景中，在此对具体的应用场景并不做任何限制。对应于应用场景，本发明实施例中的电子设备可以是车辆、移动终端等等。在下文的描述中以车联网中基站的切换为例进行详细描述。
其中，图1示出了本发明实施例中切换方法的应用场景。如图1所示，在城市道路中，部署由多个宏小区、微微小区和毫微微小区构成的异构基站，实现基站信号全覆盖。车辆在道路上行驶时，采用本发明实施例中所述的切换方法进行基站的切换。
当本发明实施例中的切换方法应用于车联网中时，采用基于车对一切(Vehicleto Everything，简称为V2X)的车联网通信技术，通过复杂的异构基站部署异构网络，再结合所述的切换方法进行基站的切换。其中，V2X车联网技术作为物联网和D2D通信的一个典型应用，汽车也成为网络中的一个节点，可以实时与基站、行人以及其他车辆进行通信。
V2X通信目前分为专用短程无线通信标准(Dedicated Short RangeCommunications，简称为DSRC)和长期演进-车辆(Long Term Evolution-Vehicle，简称为LTE-V)两个标准和产业阵营：
(1)DSRC以IEEE802.11p为基础(实际是WiFi的扩展)，采用专属无线频率──5.9GHz频段内的75MHz频谱；
(2)LTE-V是基于LTER14技术为基础(4G/5G)，通过LTE-V-Direct和LTE-V-Cell两大技术支持包括V2I、V2V和V2P等各类应用。
相比基于802.11p的DSRC，LTE-V优势更明显：
(1)可复用蜂窝网络，部署成本低；
(2)覆盖广，网络运营盈利模式清晰；
(3)全球通用标准，单一LTE晶片组，大幅降低模块、芯片成本；
(4)5G持续演进。
基于此，在本发明实施例的车联网中，V2X通信以LTE-V为通信协议。
作为本发明实施例的一个具体应用实施例，在车联网中切换方法的应用为：在V2X场景中，车辆用户在异构网络中移动，当车辆所在位置被多个基站覆盖，或者车辆移动到基站边缘时。在这两种场景下，基站计算此时SINR和传输速率，并发送结果给车辆用户，车辆用户利用每个基站发送的信息，进行强化学习，最终做出切换请求，发送给基站，由基站执行切换。
根据本发明实施例，提供了一种切换方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
在本实施例中提供了一种切换方法，可用于上述的电子设备，图2是根据本发明实施例的切换方法流程图，如图2所示，该流程包括如下步骤：
S11，获取预设范围内各个基站的传输速率。
预设范围内各个基站的传输速率可以是各个基站发送给电子设备的，也可以是电子设备基于接收到的信号计算得到的，在此对传输速率的获取形式并不做任何限制。
所述的预设范围可以是预置的信号覆盖范围，可以是电子设备实时测算出的预设范围。例如，电子设备在与当前基站的通信过程中，可以电子设备可以根据自身当前的位置信息，以及预设范围，获取在预设范围内的各个基站，并获取到预设范围内各个基站的传输速率。
S12，基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值。
电子设备在获得预设范围内各个基站的传输速率之后，基于该传输速率计算从当前基站切换至其他各个基站的奖励期望值，例如，可以在传输速率的基础上，对切换至其他各个基站的动作进行奖励，通过多次的迭代得出从当前基站切换至其他各个基站的奖励期望值等等。具体将在下文中将对该步骤进行详细描述。
S13，利用奖励期望值，从其他各个基站中确定出目标基站，以切换至目标基站。
电子设备的计算得到从当前基站切换至其他各个基站的奖励期望值之后，可以直接从多个奖励期望值中选出最大奖励期望值对应的基站，将其确定为目标基站；也可以在切换之前，对目标基站的传输速率进行评估，以判断是否需要切换至该目标基站等等。具体将在下文中对该步骤进行详细描述。
本实施例提供的切换方法，在各个基站的传输速率的基础上，对本地从当前基站切换至其他各个基站的奖励期望值进行计算，即采用与各个基站的交互学习，选择出本地在当前位置下的最佳基站，大大减少了不必要的切换，并且还能保证传输速率满足用户需求。
在本实施例中提供了一种切换方法，可用于上述的电子设备，图3是根据本发明实施例的切换方法流程图，如图3所示，该流程包括如下步骤：
S21，获取预设范围内各个基站的传输速率。
在本实施例中，预设范围内基站的传输速率是电子设备计算得出的。具体地，上述S21包括以下步骤：
S211，获取预设范围内各个基站当前服务的终端数目以及各个基站的信噪比。
在电子设备当前位置的预设范围内的各个基站周期性的广播当前服务的终端数目以及信噪比。例如，考虑到下行链路通信，当车辆用户在基站覆盖范围内行使时，首先可以获取到每个基站的信噪比以及每个基站当前服务的车辆用户数量。
S212，利用各个基站当前服务的终端数目以及各个基站的信噪比，计算各个基站的传输速率。
电子设备在计算各个基站的传输速率时，结合负载均衡，将各个基站的总带宽平均分配给其所服务的所有终端，即平均分配带宽给每个终端用户。电子设备根据香农定理可以得到各个基站的传输速率。
S22，基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值。
在本实施例中，采用Q_learning算法计算从当前基站切换至其他各个基站的奖励期望值。具体地，以各个基站的传输速率作为奖励、各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
考虑负载均衡的问题，与各个基站相连接的终端平均分配基站带宽，并引入强化学习的算法，即Q_learning，每个终端作为代理人，通过与环境交互学习，选择出当前位置下满足要求的最佳基站，从而大大减少了不必要的切换，并且还能保证传输速率满足用户需求。
可选地，奖励期望值可以采用数据表的形式表示，表中的每个元素表示从当前基站切换至各个基站对应的奖励期望值。
具体地强化学习方法为：(1)电子设备在当前状态(即，当前基站)下，遍历所有可能的动作，选择一个奖励最大的可能基站；(2)执行以下动作，即切换到奖励最大的基站；(3)根据以下Q函数更新奖励期望值表，即Q_Table：
Q(state,action)＝R(state,action)+Gamma*Max(Q[next state,allactions])；
(4)这时用户切换到的基站作为当前状态，重复前两个步骤，直到满足指定的迭代次数。
S23，利用奖励期望值，从其他各个基站中确定出目标基站，以切换至目标基站。
具体地，上述S23包括以下步骤：
S231，确定奖励期望值最高的基站为目标基站。
电子设备从所有奖励期望值中选择出奖励期望值最高的基站作为目标基站，即，通过以上学习方法可以得到一个Q_Table，已知当前基站的情况下，根据Q_Table来选择最大Q值的动作，作为即将切换的基站，即所述的目标基站。
S232，向当前基站发送切换请求，以使得从当前基站切换至目标基站。
其中，所述切换请求中携带有目标基站的标识。
电子设备在确定出目标基站之后，向当前基站发送切换请求，并在切换请求中携带有目标基站的标识。当前基站接收到该切换请求之后，查询标识对应的目标基站，并与目标基站进行通信，以使得从当前基站切换至目标基站。
本实施例提供的切换方法，本地从所有奖励期望值中选择出奖励期望值最高的基站作为切换的目标基站，在确定出目标基站后向当前基站发送切换请求，以使得当前基站与目标基站进行通信，实现基站的切换。
在本实施例中提供了一种切换方法，可用于上述的电子设备，图4是根据本发明实施例的切换方法流程图，如图4所示，该流程包括如下步骤：
S31，获取预设范围内各个基站的传输速率。
详细请参见图3所示实施例的S21，在此不再赘述。
S32，判断当前基站低于预设值的传输速率的持续时间是否大于或等于第一预设时长。
电子设备对当前基站的传输速率进行评估，以判断当前基站是否需要进行切换，即当所述当前基站低于所述预设值的传输速率持续时间大于或等于预设时长时，执行S33；否则(即，当所述当前基站低于预设值的传输速率持续时间小于预设时长，或，当所述当前基站的传输速率大于或等于预设值的传输速率时)，继续进行下一个触发条件的判断，即执行S35。
S33，基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值。
详细请参见图3所示实施例的S22，在此不再赘述。
S34，利用奖励期望值，从其他各个基站中确定出目标基站，以切换至目标基站。
具体地，上述S34包括与以下步骤：
S341，确定奖励期望值最高的基站为目标基站。
详细请参见图3所示实施例的S231，在此不再赘述。
S342，向当前基站发送切换请求，以使得从所述当前基站切换至所述目标基站。
其中，所述切换请求中携带有所述目标基站的标识。
详细请参见图3所示实施例的S232，在此不再赘述。
S35，判断各个基站中的最大传输速率与当前基站的传输速率的差值大于预设差值的持续时间是否大于或等于第二预设时长。
电子设备从预设范围内的所有基站的传输速率中查询到当前所有基站中的最大传输速率，并将该最大传输速率与当前基站的传输速率进行比较，判断最大传输速率与当前基站的传输速率的差值大于预设差值的持续时间是否大于或等于第二预设时长。
当各个基站中的最大传输速率与当前基站的传输速率的差值大于预设差值的持续时间大于或等于第二预设时长时，执行S36；否则，表示当前不需要进行基站的切换，返回执行S31。
S36，确定最大传输速率对应的基站为目标基站。
电子设备将最大传输速率对应的基站确定为目标基站，然后执行S342，以进行切换。
本实施例提供的切换方法，在进行切换之前先判断是否满足相应的触发条件，一方面是为了保证在满足用户QoS的情况下，减少不必要的切换；另一方面是为了给用户需求更好的服务基站。
在本实施例中还提供了一种切换装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
本实施例提供一种切换装置，如图5所示，包括：
获取模块51，用于获取预设范围内各个基站的传输速率。
计算模块52，用于基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值。
确定模块53，用于利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站。
本实施例提供的切换装置，在各个基站的传输速率的基础上，对本地从当前基站切换至其他各个基站的奖励期望值进行计算，即采用与各个基站的交互学习，选择出本地在当前位置下的最佳基站，大大减少了不必要的切换，并且还能保证传输速率满足用户需求。
作为本实施例的一种可选实施方式，如图6所示，所述的计算模块52包括：
强化学习单元521，用于以各个基站的传输速率作为奖励、所述各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
本实施例中的切换装置是以功能单元的形式来呈现，这里的单元是指ASIC电路，执行一个或多个软件或固定程序的处理器和存储器，和/或其他可以提供上述功能的器件。
上述各个模块的更进一步的功能描述与上述对应实施例相同，在此不再赘述。
本发明实施例还提供一种电子设备，具有上述图5或图6所示的切换装置。
请参阅图7，图7是本发明可选实施例提供的一种电子设备的结构示意图，如图7所示，该电子设备可以包括：至少一个处理器61，例如CPU(Central Processing Unit，中央处理器)，至少一个通信接口63，存储器64，至少一个通信总线62。其中，通信总线62用于实现这些组件之间的连接通信。其中，通信接口63可以包括显示屏(Display)、键盘(Keyboard)，可选通信接口63还可以包括标准的有线接口、无线接口。存储器64可以是高速RAM存储器(Random Access Memory，易挥发性随机存取存储器)，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器64可选的还可以是至少一个位于远离前述处理器61的存储装置。其中处理器61可以结合图5或6所描述的装置，存储器64中存储应用程序，且处理器61调用存储器64中存储的程序代码，以用于执行上述任一方法步骤。
其中，通信总线62可以是外设部件互连标准(peripheral componentinterconnect，简称PCI)总线或扩展工业标准结构(extended industry standardarchitecture，简称EISA)总线等。通信总线62可以分为地址总线、数据总线、控制总线等。为便于表示，图7中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
其中，存储器64可以包括易失性存储器(英文：volatile memory)，例如随机存取存储器(英文：random-access memory，缩写：RAM)；存储器也可以包括非易失性存储器(英文：non-volatile memory)，例如快闪存储器(英文：flash memory)，硬盘(英文：hard diskdrive，缩写：HDD)或固态硬盘(英文：solid-state drive，缩写：SSD)；存储器64还可以包括上述种类的存储器的组合。
其中，处理器61可以是中央处理器(英文：central processing unit，缩写：CPU)，网络处理器(英文：network processor，缩写：NP)或者CPU和NP的组合。
其中，处理器61还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(英文：application-specific integrated circuit，缩写：ASIC)，可编程逻辑器件(英文：programmable logic device，缩写：PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(英文：complex programmable logic device，缩写：CPLD)，现场可编程逻辑门阵列(英文：field-programmable gate array，缩写：FPGA)，通用阵列逻辑(英文：generic arraylogic,缩写：GAL)或其任意组合。
可选地，存储器64还用于存储程序指令。处理器61可以调用程序指令，实现如本申请图1至4实施例中所示的切换方法。
本发明实施例还提供了一种非暂态计算机存储介质，所述计算机存储介质存储有计算机可执行指令，该计算机可执行指令可执行上述任意方法实施例中的切换方法。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)、随机存储记忆体(Random Access Memory，RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive，缩写：HDD)或固态硬盘(Solid-State Drive，SSD)等；所述存储介质还可以包括上述种类的存储器的组合。
虽然结合附图描述了本发明的实施例，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (8)

1.一种切换方法，应用于电子设备，其特征在于，所述方法包括：
获取预设范围内各个基站的传输速率；
基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值；
利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站；
其中，所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值，包括：
以所述各个基站的传输速率作为奖励、所述各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
2.根据权利要求1所述的方法，其特征在于，所述获取预设范围内各个基站的传输速率，包括：
获取预设范围内各个基站当前服务的终端数目以及所述各个基站的信噪比；
利用各个基站当前服务的终端数目以及所述各个基站的信噪比，计算所述各个基站的传输速率。
3.根据权利要求1至2中任一项所述的方法，其特征在于，所述利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站，包括：
确定所述奖励期望值最高的基站为所述目标基站；
向所述当前基站发送切换请求，以使得从所述当前基站切换至所述目标基站；其中，所述切换请求中携带有所述目标基站的标识。
4.根据权利要求3所述的方法，其特征在于，所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值的步骤之前，包括：
判断所述当前基站低于预设值的传输速率的持续时间是否大于或等于第一预设时长；
当所述当前基站低于所述预设值的传输速率的持续时间大于或等于预设时长时，执行所述基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值的步骤。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
当所述当前基站低于所述预设值的传输速率持续时间小于预设时长，或当所述当前基站的传输速率大于或等于所述预设值的传输速率时，判断所述各个基站中的最大传输速率与所述当前基站的传输速率的差值大于预设差值的持续时间是否大于或等于第二预设时长；
当所述各个基站中的最大传输速率与所述当前基站的传输速率的差值大于或等于预设差值的持续时间大于第二预设时长时，确定所述最大传输速率对应的基站为所述目标基站。
6.一种切换装置，其特征在于，包括：
获取模块，用于获取预设范围内各个基站的传输速率；
计算模块，用于基于各个基站的传输速率，计算从当前基站切换至其他各个基站的奖励期望值；
确定模块，用于利用所述奖励期望值，从所述其他各个基站中确定出目标基站，以切换至所述目标基站；
所述计算模块，包括：
强化学习单元，用于以各个基站的传输速率作为奖励、所述各个基站作为状态以及切换到其他基站作为动作进行切换策略的强化学习，得到从当前基站切换至其他各个基站的奖励期望值。
7.一种电子设备，其特征在于，包括：
存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器中存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行权利要求1-5中任一项所述的切换方法。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使所述计算机执行权利要求1-5中任一项所述的切换方法。
CN201911294992.2A 2019-12-16 2019-12-16 切换方法、装置及电子设备 Active CN111065131B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911294992.2A CN111065131B (zh) 2019-12-16 2019-12-16 切换方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911294992.2A CN111065131B (zh) 2019-12-16 2019-12-16 切换方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN111065131A CN111065131A (zh) 2020-04-24
CN111065131B true CN111065131B (zh) 2023-04-18

Family

ID=70302088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911294992.2A Active CN111065131B (zh) 2019-12-16 2019-12-16 切换方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN111065131B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115348650B (zh) * 2022-07-20 2024-05-14 武汉纺织大学 一种提高5g网络节能效率的方法
CN116528310B (zh) * 2023-07-03 2023-09-29 中国电信股份有限公司 异系统基站的切换方法及相关设备
CN116582891B (zh) * 2023-07-13 2023-10-17 上海铂联通信技术有限公司 5g无线网络系统的负载优化方法、装置、介质及终端

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109195135A (zh) * 2018-08-06 2019-01-11 同济大学 Lte-v中基于深度强化学习的基站选择方法
WO2019011271A1 (zh) * 2017-07-14 2019-01-17 中国移动通信有限公司研究院 切换方法、第一基站、终端和计算机可读存储介质
CN110519816A (zh) * 2019-08-22 2019-11-29 普联技术有限公司 一种无线漫游控制方法、装置、存储介质及终端设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150079081A (ko) * 2013-12-31 2015-07-08 한국전자통신연구원 펨토셀 네트워크에서의 핸드오버 회피를 위한 기지국 연관 방법 및 그 장치
US10225772B2 (en) * 2017-06-22 2019-03-05 At&T Intellectual Property I, L.P. Mobility management for wireless communication networks

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019011271A1 (zh) * 2017-07-14 2019-01-17 中国移动通信有限公司研究院 切换方法、第一基站、终端和计算机可读存储介质
CN109195135A (zh) * 2018-08-06 2019-01-11 同济大学 Lte-v中基于深度强化学习的基站选择方法
CN110519816A (zh) * 2019-08-22 2019-11-29 普联技术有限公司 一种无线漫游控制方法、装置、存储介质及终端设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
车辆异构网中基于移动边缘计算的任务卸载与资源分配;张海波等;《物联网学报》;20180930(第03期);全文 *

Also Published As

Publication number Publication date
CN111065131A (zh) 2020-04-24

Similar Documents

Publication Publication Date Title
CN112188533B (zh) 一种网络性能的上报方法及装置
CN111065131B (zh) 切换方法、装置及电子设备
US9439121B2 (en) Method and apparatus for multi-network communication in vehicular networks
CN110741680B (zh) 确定pdu会话切换的方法和单元
US11510208B2 (en) Selection of open radio access network (RAN) components
CN110971651A (zh) 处理系统、更新服务器以及用于更新处理系统的方法
US11044774B2 (en) System and method for triggering split bearer activation in 5G new radio environments
CN105191398A (zh) 在混合无线通信网络中的分流选择方法
KR20150129843A (ko) 네트워크 상의 클라이언트의 분포 개선
CN103782633A (zh) 基于回程测量的接入点选择
US9743287B2 (en) Methods and apparatus for determining and planning wireless network deployment sufficiency when utilizing vehicle-based relay nodes
CN114443556A (zh) 用于ai/ml训练主机的人机交互的装置和方法
EP3682663B1 (en) Global optimization process for link associations
CN111586602B (zh) 一种策略管理的方法及装置
EP4027566A1 (en) Dynamically changing the primary cell (pcell) for fifth generation (5g) carrier aggregation
CN109716821B (zh) 波束赋形信息的交互方法和网络设备
CN104994549B (zh) 一种通信方法、接入网网元以及用户设备
CN110708658B (zh) 一种数据传输方法和基站
CN110741708B (zh) D2d通信中载波选取的方法和终端设备
CN109792795A (zh) 通信控制方法及通信系统
US9813962B1 (en) Mobility pattern based preemptive load balancing
US20130176853A1 (en) Apparatus and Method for Communication
KR102297672B1 (ko) 페이징 방법 및 기기
CN110677870A (zh) 过载控制方法和装置
CN113497736B (zh) 用于生成服务质量图的方法、计算机程序、装置和车辆

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant