CN113784411A - 链路质量评估方法、链路切换方法、设备和存储介质 - Google Patents
链路质量评估方法、链路切换方法、设备和存储介质 Download PDFInfo
- Publication number
- CN113784411A CN113784411A CN202111083757.8A CN202111083757A CN113784411A CN 113784411 A CN113784411 A CN 113784411A CN 202111083757 A CN202111083757 A CN 202111083757A CN 113784411 A CN113784411 A CN 113784411A
- Authority
- CN
- China
- Prior art keywords
- communication quality
- link
- std
- information
- switching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 238000013441 quality evaluation Methods 0.000 title claims abstract description 29
- 238000004891 communication Methods 0.000 claims abstract description 167
- 230000006399 behavior Effects 0.000 claims abstract description 125
- 230000008901 benefit Effects 0.000 claims abstract description 49
- 238000013507 mapping Methods 0.000 claims description 20
- 230000015654 memory Effects 0.000 claims description 18
- 238000011156 evaluation Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 11
- 238000001303 quality assessment method Methods 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 8
- 230000008569 process Effects 0.000 description 12
- 230000009471 action Effects 0.000 description 9
- 238000005070 sampling Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000010606 normalization Methods 0.000 description 5
- 238000010295 mobile communication Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W36/00—Hand-off or reselection arrangements
- H04W36/24—Reselection being triggered by specific parameters
- H04W36/30—Reselection being triggered by specific parameters by measured or perceived connection quality data
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本申请实施例提供的一种链路质量评估方法、链路切换方法、设备和存储介质，方法包括当第一链路处于连接状态时，获取与切换行为对应的网络状态信息；获取第一链路的第一通信质量信息；根据切换行为，将第一链路切换至第二链路；获取第二链路的第二通信质量信息；根据第一通信质量信息和第二通信质量信息，确定与切换行为和网络状态信息相对应的期望收益。在本申请实施例中，可以基于学习到的链路切换后的真实网络的期望收益来对在某种网络状态下链路之间的相对质量进行量化评估，链路质量评估结果更加准确。在应用阶段，可以基于查表的方式获得与切换行为和网络状态对应的期望收益，链路质量评估效率较高。
Description
技术领域
本申请涉及通信技术领域，具体地涉及一种链路质量评估方法、链路切换方法、设备和存储介质。
背景技术
网络链路通常是指网络中两个节点之间的通信通道，下文简称链路。在通信系统中，两个接节点之间可能存在两条或两条以上链路，不同链路的链路质量不同。链路质量用于反映信息传输能力，例如对于链路质量较高的链路，传输速率稿，丢包率低，延迟低等。因此，在两个节点进行通信时，通常需要选择链路质量较好的链路进行信息传输。
但是，某些能够反映链路质量的参数只有在真正使用链路时才能够获取到。在进行链路质量评估过程中，需要实际的使用需要比较的链路，才能够获取到链路质量信息，会导致链路质量评估效率较低。相反，如果不考虑真正使用链路时才能够获取到的参数，链路质量的评估结果可能具有片面性，导致链路质量评估结果不准确。
发明内容
有鉴于此，本申请提供一种链路质量评估方法、链路切换方法、设备和存储介质，以利于解决现有技术中链路质量评估效率低，或者链路质量评估结果不准确的问题。
第一方面，本申请实施例提供了一种链路质量评估方法，包括：
当第一链路处于连接状态时，获取与切换行为对应的网络状态信息，所述切换行为用于表征将所述第一链路切换至第二链路；
获取所述第一链路的第一通信质量信息，所述第一通信质量信息用于表征所述第一链路处于连接状态时的通信质量；
根据所述切换行为，将所述第一链路切换至所述第二链路；
获取所述第二链路的第二通信质量信息，所述第二通信质量信息用于表征所述第二链路处于连接状态时的通信质量；
根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益。
优选地，所述根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益，包括：
根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益；
根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻与所述切换行为和所述网络状态信息相对应的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益。
优选地，所述根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益，包括：
将当前时刻所述第二通信质量信息和所述第一通信质量信息的比值减1，获得当前时刻与所述切换行为和所述网络状态信息相对应的即时收益。
优选地，所述根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻与所述切换行为和所述网络状态信息相对应的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益，包括：
定义所述当前时刻为t，所述上一时刻为t-1，根据公式：Qt＝Qt-1+α[Rt-Qt-1]，确定t时刻与所述切换行为、所述网络状态信息相对应的期望收益Qt，其中，Qt-1为t-1时刻与所述切换行为、所述网络状态信息相对应的期望收益，Rt为t时刻与所述切换行为、所述网络状态信息相对应的即时收益，α为学习率参数。
优选地，所述获取所述第一链路的第一通信质量信息，包括：
采集n维的所述第一链路的第一通信质量参数x_before＝[a1，a2，…，an]T，n≥2；
将所述第一通信质量参数x_before＝[a1，a2，…，an]T中的每一维进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T。
优选地，所述采集n维的所述第一链路的第一通信质量参数x_before＝[a1，a2，…，an]T，包括：
采集N次第一链路的第一通信质量参数X_before＝[x_before (1)，x_before (2），…，x_before (N)]T，其中，每次采集n维的第一通信质量参数x_before＝[a1，a2，…，an]T；
所述将所述第一通信质量参数x_before＝[a1，a2，…，an]T中的每一维进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T，包括：
将采集的所述N次第一链路的第一通信质量参数X_before＝[x_before (1)，x_before (2），…，x_before (N)]T进行滑动平均处理，获得所述N次第一通信质量参数的滑动平均值
将所述N次第一通信质量参数的滑动平均值
中的每一维参数进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T。
优选地，所述获取所述第二链路的第二通信质量信息，包括：
采集n维的所述第二链路的第二通信质量参数x_after＝[b1，b2，…，bn]T，n≥2；
将所述第二通信质量参数x_after＝[b1，b2，…，bn]T中的每一维进行标准化处理，获得第一通信质量信息xstd_after＝[bstd_1，bstd_2，…，bstd_n]T。
优选地，所述采集n维的所述第二链路的第二通信质量参数x_after＝[b1，b2，…，bn]T，包括：
采集M次第二链路的第二通信质量参数X_after＝[x_after (1)，x_after (2)，…，x_after (M)]T，其中，每次采集n维的第一通信质量参数x_after＝[b1，b2，…，bn]T
所述将所述第二通信质量参数x_after＝[b1，b2，…，bn]T中的每一维进行标准化处理，获得第二通信质量信息xstd_after＝[bsta_1，bsta_2，…，bsta_n]T，包括：
将采集的所述M次第二链路的第二通信质量参数X_after＝[x_after (1)，x_after (2)，…，x_after (M)]T进行滑动平均处理，获得所述M次第二通信质量参数的滑动平均值
将所述M次第二通信质量参数的滑动平均值
中的每一维参数进行标准化处理，获得第二通信质量信息xstd_after＝[bstd_1，bstd_2，…，bstd_n]T。
优选地，在所述根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益之后，还包括：
判断所述切换行为对应的链路质量评估次数是否达到预设的评估次数阈值；
若所述质量评估次数未达到预设的评估次数阈值，则将所述第二链路切换至所述第一链路，重新执行所述切换行为对应的链路质量评估。
第二方面，本申请实施例提供了一种链路切换方法，包括：
获取与目标切换行为对应的当前网络状态信息；
根据切换行为、网络状态信息和期望收益的映射关系，确定与所述目标切换行为和所述当前网络状态信息对应的期望收益；
若所述期望收益大于或等于预设的期望收益阈值，则执行所述目标切换行为。
第三方面，本申请实施例提供了一种电子设备，包括：
一个或多个处理器；
一个或多个存储器；
以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述一个或多个存储器中，所述一个或多个计算机程序包括指令，当所述指令被所述电子设备执行时，使得所述电子设备执行上述第一方面中任意一项所述的方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行上述第一方面中任意一项所述的方法。
在本申请实施例中，可以基于学习到的链路切换后的真实网络的期望收益来对在某种网络状态下链路之间的相对质量进行量化评估，链路质量评估结果更加准确。在应用阶段，可以基于查表的方式获得与切换行为和网络状态对应的期望收益。该过程由于无需根据切换行为切换至对应的链路，无需对期望收益重新计算，因此链路质量评估效率较高。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本申请实施例提供的一种应用场景示意图；
图2为本申请实施例提供的一种链路质量评估方法流程示意图；
图3为本申请实施例提供的一种链路切换方法流程示意图；
图4为本申请实施例提供的另一种链路质量评估方法流程示意图；
图5为本申请实施例提供的一种电子设备结构示意图。
具体实施方式
为了更好的理解本申请的技术方案，下面结合附图对本申请实施例进行详细描述。
应当明确，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，甲和/或乙，可以表示：单独存在甲，同时存在甲和乙，单独存在乙这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
参见图1，为本申请实施例提供的一种应用场景示意图。如图1所示，该应用场景包括第一节点和第二节点，第一节点和第二节点可以选择通过第一链路或第二链路进行通信。
具体实现中，该第一节点和第二节点可以通过有线或无线通信网络互联，进行信息传输。该通信网络可以是局域网，也可以是通过中继(relay)设备转接的广域网。当该通信网络为局域网时，示例性的，该通信网络可以是wifi热点网络、wifi P2P网络、蓝牙网络、zigbee网络或近场通信(near field communication，NFC)网络等近距离通信网络。当该通信网络为广域网时，示例性的，该通信网络可以是第三代移动通信技术(3rd-generationwireless telephone technology，3G)网络、第四代移动通信技术(the 4th generationmobile communication technology，4G)网络、第五代移动通信技术(5th-generationmobile communication technology，5G)网络、未来演进的公共陆地移动网络(publicland mobile network，PLMN)或因特网等。
第一节点和第二节点可以终端设备或网络设备。其中，终端设备可以包括手机、平板电脑、个人计算机(personal computer，PC)、个人数字助理(personal digitalassistant，PDA)、智能手表、上网本、可穿戴电子设备、增强现实技术(augmented reality，AR)设备、虚拟现实(virtual reality，VR)设备、车载设备、机器人、智能眼镜等。网络设备可以包括服务器、路由器、交换机、无线接入点等。本申请实施例对第一节点和第二节点的产品形态不作具体限制。
需要指出的是，图1仅为本申请实施例一种示例性说明。例如，在实际通信系统中，除了第一节点和第二接点外，还可能存在第三节点、第四节点等其它节点；第一节点和第二节点之间除了包括第一链路和第二链路外，还可能存在第三链路、第四链路等其它链路。本申请实施例对此不作具体限制。
可理解，为了提高第一节点和第二节点之间的通信质量，需要在第一节点和第二节点之间选择一条链路质量较高的链路进行信息传输。例如，在第一链路和第二链路之间，若第一链路的链路质量较高，则选择第一链路进行信息传输；相反，若第二链路的链路质量较高，则选择第二链路进行信息传输。
为了在所有链路中选择出链路质量较高的链路，需要进行链路质量评估。但是，某些能够反映链路质量的参数只有在真正使用链路时才能够获取到。在进行链路质量评估过程中，需要实际的使用需要比较的链路，才能够获取到链路质量信息，会导致链路质量评估效率较低。相反，如果不考虑真正使用链路时才能够获取到的参数，链路质量的评估结果可能具有片面性，导致链路质量评估结果不准确。
针对上述问题，本申请实施例提供了一种链路质量评估方法、链路切换方法、设备和存储介质，以利于解决现有技术中链路质量评估效率低，或者链路质量评估结果不准确的问题。本申请实施例提供的技术方案可以分为两个阶段：链路质量评估阶段和应用阶段。具体地，在链路质量评估阶段根据本地的网络状态生成状态行为映射表，该状态行为映射表包括网络状态、切换行为和期望收益的映射关系。在应用阶段，根据当前的网络状态，通过查找状态行为映射表，确定与切换行为对应的期望收益，从而根据期望收益来进行后续的处理与判断。以下进行详细说明。
参见图2，为本申请实施例提供的一种链路质量评估方法流程示意图。该方法可应用于图1所示的应用场景。如图2所示，其主要包括以下步骤。
步骤S201：当第一链路处于连接状态时，获取与切换行为对应的网络状态信息，所述切换行为用于表征将所述第一链路切换至第二链路。
在本申请实施例中，切换行为是指在不同链路之间的切换动作。可理解，不同的链路间切换动作分别表示不同的切换行为。例如，将第一链路切换至第二链路代表一种切换行为；将第一链路切换至第三链路代表另一种切换行为。为了便于说明，在本申请实施例中，以第一链路切换至第二链路为了对切换行为进行说明。
本申请实施例涉及的网络状态信息为与切换行为对应的网络状态信息。例如，该切换行为为第一链路切换至第二链路，则与该切换行为对应的网络状态信息可以为第一链路和/或第二链路的网络状态信息。具体地，可以为第一链路和/或第二链路的网络参数。
需要指出的是，网络状态信息对应的网络参数为不需要切换至对应的链路即可以获取到的网络参数，例如信号强度、网络延迟、丢包率等。而下文中通信质量信息对应的网络参数可以包括切换至对应的链路才可以获取到的网络参数，例如实时速率、下行和上行速率等。当然，通信质量信息对应的网络参数还可以包括不需要切换至对应的链路即可以获取到的网络参数，本申请实施例对此不作具体限制。
在实际应用中，用于描述网络的参数可能并非离散值，为了便于对网络状态信息进行量化处理，可以将用于反映网络状态信息的网络参数进行离散量化处理。
以Wi-Fi的信号强度(Received Signal Strength Indication，RSSI)为例，可以按照表一将RSSI参数离散化为0-4的值，可以利用这个值的大小表示参数区间的好坏。
表一：
| Wi-Fi RSSI区间 | 对应的离散值 |
| (-∞,-88] | 0 |
| (-88,-77] | 1 |
| (-77,-66] | 2 |
| (-66,-55] | 3 |
| (-55,+∞) | 4 |
因此网络状态可以表示为多个网络参数离散化后的矢量，网络状态信息可以采用公式一来表示。
公式一：
Snet＝[s1，s2，…，sl]T
其中，Snet表示具体的网络状态信息，s表示某一网络参数的离散表示值，l表示网络参数的数量。可见网络参数越多网络的状态就越多，即网络状态信息越多，进而所产生的状态行为映射表的大小就越大。因此对于网络参数的选择需要进行一定的特征工程来确定。
步骤S202：获取所述第一链路的第一通信质量信息，所述第一通信质量信息用于表征所述第一链路处于连接状态时的通信质量。
通信质量信息用于计算期望收益，因此，针对期望收益进行通信质量信息设计时可以综合考虑多个影响网络质量的关键网络参数，例如信号强度、丢包率、延时、下行与上行速率等。
在本申请实施例中，第一通信质量信息对应的网络参数(下文称为第一通信质量参数)可以描述为以下n维向量的形式。
公式二：
x_before＝[a1，a2，…，an]T
其中，x_before表示第一通信质量参数，a表示用于反映通信质量的网络参数，n表示网络参数的维度，即网络参数的数量。具体实现中，n≥2。
但是由于各种网络参数的量纲不同，因此对于多个网络参数的综合评估需要对每一维网络参数进行标准化。
具体地，对公式二所示的第一通信质量参数中的每一维进行标准化处理，获得第一通信质量信息，如公式三所示。
公式三：
xstd_before＝[astd_1，astd_2，…，astd_n]T
其中，xstd_before表示标准化后的第一通信质量参数，即第一通信质量信息；astd_1表示标准化后的网络参数a1；astd_2表示标准化后的网络参数a2；依次类推，在此不再赘述。
在一种可能的实现方式中，对第一链路的第一通信质量参数进行N次采样，N次采样的结果可以采用公式四表示。
公式四：
X_before＝[x_before (1)，x_before (2)，…，x_before (N)]T
其中，x_before (1)表示第一次采样的通信质量参数；x_before (2)表示第二次采样的通信质量参数；依次类推，在此不再赘述。
然后，对每一次第一通信质量参数的采样结果进行滑动平均，将所述N次第一通信质量参数的滑动平均值
中的每一维参数进行标准化处理，获得第一通信质量信息，如公式三所示。本申请实施例对标准化的形式不作具体限定，例如，可以采用Min-maxNormalization。
步骤S203：根据所述切换行为，将所述第一链路切换至所述第二链路。
在获取第一链路的通信质量信息后，将第一链路切换至第二链路，以便获取第二链路的通信质量信息。
步骤S204：获取所述第二链路的第二通信质量信息，所述第二通信质量信息用于表征所述第二链路处于连接状态时的通信质量。
由于当前正处于第二链路的连接状态，因此，可以获取到第二链路的通信质量信息，即第二通信质量信息。
在本申请实施例中，第二通信质量信息对应的网络参数(下文称为第二通信质量参数)可以描述为以下n维向量的形式。
公式五：
x_after＝[b1，b2，…，bn]T
其中，x_after表示第二通信质量参数，b表示用于反映通信质量的网络参数，n表示网络参数的维度，即网络参数的数量。具体实现中，n≥2。
但是由于各种网络参数的量纲不同，因此对于多个网络参数的综合评估需要对每一维网络参数进行标准化。
具体地，对公式五所示的第二通信质量参数中的每一维进行标准化处理，获得第二通信质量信息，如公式六所示。
公式六：
xstd_after＝[bstd_1，bstd_2，…，bstd_n]T
其中，xstd_after表示标准化后的第二通信质量参数，即第二通信质量信息；bstd_1表示标准化后的网络参数b1；bstd_2表示标准化后的网络参数b2；依次类推，在此不再赘述。
在一种可能的实现方式中，对第二链路的第二通信质量参数进行M次采样，M次采样的结果可以采用公式七表示。
公式七：
X_after＝[x_after (1)，x_after (2），…，x_after (M)]T
其中，x_after (1)表示第一次采样的通信质量参数；x_after (2)表示第二次采样的通信质量参数；依次类推，在此不再赘述。
然后，对每一次第二通信质量参数的采样结果进行滑动平均，计算所述M次第一通信质量参数的滑动平均值
之后结合标准化处理后的第一通信质量信息中的最大值和最小值计算标准化的第二通信质量信息。计算公式如公式八所示。
公式八：
其中，Normalize表示某一种标准化方法，cache_params表示标准化处理后的第一通信质量信息中的最大值和最小值。
步骤S205：根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益。
本申请实施例涉及的期望收益是指执行该切换行为(第一链路切换至第二链路)后，在通信质量方面可以获得的收益。
可理解，在获取期望收益后，既可以确定切换行为、网络状态信息和期望收益的映射关系。具体实现中，可以根据该映射关系生成对应的状态行为映射表。
参见表二，为本申请实施例示出的一种状态行为映射表。在表二种示出了两种切换行为，其中第一切换行为用于表征第一链路切换至第二链路，第二切换行为用于表征第一链路切换至第三链路。
同一切换行为可能对应多种不同的网络状态信息。例如，在表二中，第一切换行为分别对应第一网络状态信息、第二网络状态信息和第三网络状态信息；第二切换行为分别对应第四网络状态信息和第五网络状态信息。可理解，用于表征网络状态信息的网络参数越多，每种切换行为对应的网络状态信息数量越多。
在该状态行为映射表中，每种切换行为和每种网络状态信息对应一个特定的期望收益值。在应用阶段，可以通过查找状态行为映射表，确定与目标切换行为和当前网络状态信息确定对应的期望收益值，进而确定是否执行该目标切换行为。
表二：
在一种可能的实现方式中，为了进一步提高期望收益的准确性，可以采用上述方法对期望收益进行多次迭代运算，经过多次迭代后，期望收益将收敛至一个较为稳定的值。
具体地，上述步骤S205具体包括：
根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益。即使收益可以通过设定的规则和网络参数进行量化。例如，将当前时刻所述第二通信质量信息和所述第一通信质量信息的比值减1，获得当前时刻与所述切换行为和所述网络状态信息相对应的即时收益。
在一种可能的实现方式中，即时收益的计算公式如公式九所示。
公式九：
其中，R代表即时收益。
在获得当前时刻的即时收益后，可以根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益。
在一种可能的实现方式中，期望收益的计算公式如公式十所示。
公式十：
Qt＝Qt-1+α[Rt-Qt-1]
其中，定义所述当前时刻为t，上一时刻为t-1，Qt表示期望收益，Qt-1为t-1时刻的期望收益，Rt为t时刻的即时收益，α为学习率参数。需要指出的是，进行迭代运算的Qt和Qt-1对应的网络状态信息相同。
可理解，图2所示的流程为执行一次链路质量评估的过程。具体实现中，可以设定链路质量评估的次数，即图2所示流程的执行次数。在执行完步骤S205后，可以判断某一切换行为对应的链路质量评估次数是否达到预设的评估次数阈值；若所述质量评估次数未达到预设的评估次数阈值，则将所述第二链路切换至所述第一链路，返回步骤S201，重新执行该切换行为对应的链路质量评估，直到达到预设的链路质量评估次数。
可理解，在采用上述方法进行链路质量评估的过程中，网络状态可能会发生变化，即步骤S201中获取到的网络状态信息可能会发生变化。因此，在进行多次迭代后，可能遍历网络环境中可能产生的所有网络状态，进而可以获得表二所示的状态行为映射表。
在本申请实施例中，可以基于学习到的链路切换后的真实网络的期望收益来对在某种网络状态下链路之间的相对质量进行量化评估，链路质量评估结果更加准确。
采用上述方法获得行为映射表后，在应用阶段，可以根据当前的网络状态，通过查找状态行为映射表，确定与切换行为对应的期望收益，从而根据期望收益来进行后续的处理与判断。以下结合附图进行详细说明。
参见图3，为本申请实施例提供的一种链路切换方法流程示意图。如图3所示，其主要包括以下步骤。
步骤S301：获取与目标切换行为对应的当前网络状态信息。
其中，目标切换行为可以理解为用户期望执行的切换行为。例如，目标切换行为为表二所示的第一切换行为，即用户期望将第一链路切换为第二链路。当前网络状态信息可以理解为当前网络环境中，与目标切换行为对应的网络状态信息。例如，当前网络环境中与第一切换行为对应的网络状态信息为第二网络状态信息。
步骤S302：根据切换行为、网络状态信息和期望收益的映射关系，确定与所述目标切换行为和所述当前网络状态信息对应的期望收益。
具体地，在获得与目标切换行为对应的当前网络状态信息，便可以查找状态行为映射表，确定与该目标切换行为、当前网络状态行为对应的期望收益。该状态行为映射表可以预设在设备中，也可以采用图2所示的实施例生成。
例如，目标切换行为为表二所示的第一切换行为，与目标切换行为对应的当前网络状态信息为第二网络状态信息，则期望收益为与第一切换行为和第二网络状态信息对应的期望收益值。
步骤S303：若所述期望收益大于或等于预设的期望收益阈值，则执行所述目标切换行为。
具体实现中，可以预设期望收益阈值。本申请实施例对该期望收益阈值的大小不作具体限定。在获得期望收益后，可以将期望收益与期望收益阈值进行比较，若所述期望收益大于或等于预设的期望收益阈值，则执行所述目标切换行为。例如，在表二中，与第一切换行为和第二网络状态信息对应的期望收益值大于或等于预设的期望收益阈值，则执行第一切换行为，即将第一链路切换至第二链路。
本申请实施例中，在应用阶段，可以基于查表的方式获得与切换行为和网络状态对应的期望收益。该过程由于无需根据切换行为切换至对应的链路，无需对期望收益重新计算，因此链路质量评估效率较高。
参见图4，为本申请实施例提供的另一种链路质量评估方法流程示意图。该方法可应用于图1所示的应用场景。如图4所示，其主要包括以下步骤。
步骤S401：当第一链路处于连接状态时，获取与切换行为对应的网络状态信息，所述切换行为用于表征将所述第一链路切换至第二链路。
步骤S402：采集N次第一链路的第一通信质量参数，第一通信质量参数为n维数据；将N次第一链路的第一通信质量参数进行滑动平均、标准化处理，获得第一通信质量信息。
步骤S403：根据所述切换行为，将所述第一链路切换至所述第二链路。
步骤S404：采集M次第二链路的第二通信质量参数，第二通信质量参数为n维数据；将M次第一链路的第一通信质量参数进行滑动平均、标准化处理，获得第二通信质量信息。
步骤S405：根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益。
步骤S406：根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻与所述切换行为和所述网络状态信息相对应的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益。
步骤S407：根据期望收益迭代更新状态行为映射表。
步骤S408：判断迭代次数是否达到预设的迭代次数阈值。
若判断结果为否，则进入步骤S409；若判断结果为是，则进入步骤S410。
步骤S409：将第二链路切换至第一链路，返回步骤S401。
步骤S410：将第二链路切换至第一链路，更换网络环境，迭代次数复位，返回步骤S401。
也就是说，在达到迭代次数后，更换网络环境，重新进行迭代，以遍历所有的网络环境。在一种可能的实现方式中，还可以更换切换行为，重新进行迭代，以遍历所有的切换行为。本申请实施例涉及的具体内容可以参见图2所示实施例的描述，为了表述简洁，在此不再赘述。
在本申请实施例中，可以基于学习到的链路切换后的真实网络的期望收益来对在某种网络状态下链路之间的相对质量进行量化评估，链路质量评估结果更加准确。
参见图5，为本申请实施例提供的一种电子设备结构示意图，所述电子设备500可以包括：处理器501、存储器502及通信单元503。这些组件通过一条或多条总线进行通信，本领域技术人员可以理解，图中示出的服务器的结构并不构成对本申请的限定，它既可以是总线形结构，也可以是星型结构，还可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
其中，所述通信单元503，用于建立通信信道，从而使所述存储设备可以与其它设备进行通信。接收其他设备发是的用户数据或者向其他设备发送用户数据。
所述处理器501，为存储设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器502内的软件程序和/或模块，以及调用存储在存储器内的数据，以执行电子设备的各种功能和/或处理数据。所述处理器可以由集成电路(Integrated Circuit，简称IC)组成，例如可以由单颗封装的IC所组成，也可以由连接多颗相同功能或不同功能的封装IC而组成。举例来说，处理器501可以仅包括中央处理器(Central Processing Unit，简称CPU)。在本申请实施方式中，CPU可以是单运算核心，也可以包括多运算核心。
所述存储器502，用于存储处理器501的执行指令，存储器502可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
当存储器502中的执行指令由处理器501执行时，使得电子设备500能够执行上述方法实施例中的部分或全部步骤。
具体实现中，本申请还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时可包括本申请提供的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文：read-only memory，简称：ROM)或随机存储记忆体(英文：random access memory，简称：RAM)等。
具体实现中，本申请实施例还提供了一种计算机程序产品，所述计算机程序产品包含可执行指令，当所述可执行指令在计算机上执行时，使得计算机执行上述方法实施例中的部分或全部步骤。
本申请实施例中，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示单独存在A、同时存在A和B、单独存在B的情况。其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达，是指的这些项中的任意组合，包括单项或复数项的任意组合。例如，a，b和c中的至少一项可以表示：a,b,c,a-b,a-c,b-c,或a-b-c，其中a,b,c可以是单个，也可以是多个。
本领域普通技术人员可以意识到，本文中公开的实施例中描述的各单元及算法步骤，能够以电子硬件、计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本发明所提供的几个实施例中，任一功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，简称ROM)、随机存取存储器(random access memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。本发明的保护范围应以所述权利要求的保护范围为准。
Claims (12)
1.一种链路质量评估方法，其特征在于，包括：
当第一链路处于连接状态时，获取与切换行为对应的网络状态信息，所述切换行为用于表征将所述第一链路切换至第二链路；
获取所述第一链路的第一通信质量信息，所述第一通信质量信息用于表征所述第一链路处于连接状态时的通信质量；
根据所述切换行为，将所述第一链路切换至所述第二链路；
获取所述第二链路的第二通信质量信息，所述第二通信质量信息用于表征所述第二链路处于连接状态时的通信质量；
根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益。
2.根据权利要求1所述的方法，其特征在于，所述根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益，包括：
根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益；
根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻与所述切换行为和所述网络状态信息相对应的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益。
3.根据权利要求2所述的方法，其特征在于，所述根据当前时刻所述第一通信质量信息和所述第二通信质量信息，确定当前时刻与所述切换行为和所述网络状态信息相对应的即时收益，包括：
将当前时刻所述第二通信质量信息和所述第一通信质量信息的比值减1，获得当前时刻与所述切换行为和所述网络状态信息相对应的即时收益。
4.根据权利要求2所述的方法，其特征在于，所述根据上一时刻与所述切换行为和所述网络状态信息相对应的期望收益、当前时刻与所述切换行为和所述网络状态信息相对应的即时收益以及迭代规则，确定当前时刻与所述切换行为、所述网络状态信息相对应的期望收益，包括：
定义所述当前时刻为t，所述上一时刻为t-1，根据公式：Qt＝Qt-1+α[Rt-Qt-1]，确定t时刻与所述切换行为、所述网络状态信息相对应的期望收益Qt，其中，Qt-1为t-1时刻与所述切换行为、所述网络状态信息相对应的期望收益，Rt为t时刻与所述切换行为、所述网络状态信息相对应的即时收益，α为学习率参数。
5.根据权利要求1所述的方法，其特征在于，所述获取所述第一链路的第一通信质量信息，包括：
采集n维的所述第一链路的第一通信质量参数x_before＝[a1，a2，…，an]T，n≥2；
将所述第一通信质量参数x_before＝[a1，a2，…，an]T中的每一维进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T。
6.根据权利要求5所述的方法，其特征在于，所述采集n维的所述第一链路的第一通信质量参数x_before＝[a1，a2，…，an]T，包括：
采集N次第一链路的第一通信质量参数X_before＝[x_before (1)，x_before (2)，…，x_before (N)]T，其中，每次采集n维的第一通信质量参数x_before＝[a1，a2，…，an]T；
所述将所述第一通信质量参数x_before＝[a1，a2，…，an]T中的每一维进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T，包括：
将采集的所述N次第一链路的第一通信质量参数X_before＝[x_before (1)，x_before (2），…，x_before (N)]T进行滑动平均处理，获得所述N次第一通信质量参数的滑动平均值
将所述N次第一通信质量参数的滑动平均值
中的每一维参数进行标准化处理，获得第一通信质量信息xstd_before＝[astd_1，astd_2，…，astd_n]T。
7.根据权利要求1所述的方法，其特征在于，所述获取所述第二链路的第二通信质量信息，包括：
采集n维的所述第二链路的第二通信质量参数x_after＝[b1，b2，…，bn]T，n≥2；
将所述第二通信质量参数x_after＝[b1，b2，…，bn]T中的每一维进行标准化处理，获得第一通信质量信息xstd_after＝[bstd_1，bstd_2，…，bstd_n]T。
8.根据权利要求7所述的方法，其特征在于，所述采集n维的所述第二链路的第二通信质量参数x_after＝[b1，b2，…，bn]T，包括：
采集M次第二链路的第二通信质量参数X_after＝[x_after (1)，x_after (2)，…，x_after (M)]T，其中，每次采集n维的第一通信质量参数x_after＝[b1，b2，…，bn]T
所述将所述第二通信质量参数x_after＝[b1，b2，…，bn]T中的每一维进行标准化处理，获得第二通信质量信息xstd_after＝[bstd_1，bstd_2，…，bstd_n]T，包括：
将采集的所述M次第二链路的第二通信质量参数X_after＝[x_after (1)，x_after (2)，…，x_after (M)]T进行滑动平均处理，获得所述M次第二通信质量参数的滑动平均值
将所述M次第二通信质量参数的滑动平均值
中的每一维参数进行标准化处理，获得第二通信质量信息xstd_after＝[bstd_1，bstd_2，…，bstd_n]T。
9.根据权利要求1所述的方法，其特征在于，在所述根据所述第一通信质量信息和所述第二通信质量信息，确定与所述切换行为和所述网络状态信息相对应的期望收益之后，还包括：
判断所述切换行为对应的链路质量评估次数是否达到预设的评估次数阈值；
若所述质量评估次数未达到预设的评估次数阈值，则将所述第二链路切换至所述第一链路，重新执行所述切换行为对应的链路质量评估。
10.一种链路切换方法，其特征在于，包括：
获取与目标切换行为对应的当前网络状态信息；
根据切换行为、网络状态信息和期望收益的映射关系，确定与所述目标切换行为和所述当前网络状态信息对应的期望收益：
若所述期望收益大于或等于预设的期望收益阈值，则执行所述目标切换行为。
11.一种电子设备，其特征在于，包括：
一个或多个处理器；
一个或多个存储器；
以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述一个或多个存储器中，所述一个或多个计算机程序包括指令，当所述指令被所述电子设备执行时，使得所述电子设备执行权利要求1至10中任意一项所述的方法。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至10中任意一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111083757.8A CN113784411A (zh) | 2021-09-13 | 2021-09-13 | 链路质量评估方法、链路切换方法、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111083757.8A CN113784411A (zh) | 2021-09-13 | 2021-09-13 | 链路质量评估方法、链路切换方法、设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113784411A true CN113784411A (zh) | 2021-12-10 |
Family
ID=78844300
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111083757.8A Pending CN113784411A (zh) | 2021-09-13 | 2021-09-13 | 链路质量评估方法、链路切换方法、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113784411A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115801551A (zh) * | 2023-02-13 | 2023-03-14 | 北京徐工汉云技术有限公司 | Sd-wan网络隧道的切换方法和装置 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101646211A (zh) * | 2009-08-31 | 2010-02-10 | 南京邮电大学 | 基于频谱映射的垂直切换控制方法 |
| WO2018108149A1 (zh) * | 2016-12-15 | 2018-06-21 | 中兴通讯股份有限公司 | 数据链路切换方法和装置以及数据链路切换设备 |
| CN108235390A (zh) * | 2017-12-01 | 2018-06-29 | 吉林大学 | 一种异构无线网络中基于贝叶斯决策的垂直切换方法 |
| CN109068350A (zh) * | 2018-08-15 | 2018-12-21 | 西安电子科技大学 | 一种无线异构网络的终端自主选网系统及方法 |
| CN110545566A (zh) * | 2019-09-11 | 2019-12-06 | 腾讯科技（深圳）有限公司 | 一种链路切换的方法、装置、设备以及存储介质 |
| WO2020159430A1 (en) * | 2019-01-31 | 2020-08-06 | Telefonaktiebolaget Lm Ericsson (Publ) | Network nodes and methods performed therein for supporting handover of a wireless device |
| CN112385267A (zh) * | 2020-10-15 | 2021-02-19 | 北京小米移动软件有限公司 | Ue的目标小区确定方法、装置、通信设备及存储介质 |
| WO2021068199A1 (zh) * | 2019-10-11 | 2021-04-15 | Oppo广东移动通信有限公司 | 一种切换处理方法、网络设备 |
-
2021
- 2021-09-13 CN CN202111083757.8A patent/CN113784411A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101646211A (zh) * | 2009-08-31 | 2010-02-10 | 南京邮电大学 | 基于频谱映射的垂直切换控制方法 |
| WO2018108149A1 (zh) * | 2016-12-15 | 2018-06-21 | 中兴通讯股份有限公司 | 数据链路切换方法和装置以及数据链路切换设备 |
| CN108235390A (zh) * | 2017-12-01 | 2018-06-29 | 吉林大学 | 一种异构无线网络中基于贝叶斯决策的垂直切换方法 |
| CN109068350A (zh) * | 2018-08-15 | 2018-12-21 | 西安电子科技大学 | 一种无线异构网络的终端自主选网系统及方法 |
| WO2020159430A1 (en) * | 2019-01-31 | 2020-08-06 | Telefonaktiebolaget Lm Ericsson (Publ) | Network nodes and methods performed therein for supporting handover of a wireless device |
| CN110545566A (zh) * | 2019-09-11 | 2019-12-06 | 腾讯科技（深圳）有限公司 | 一种链路切换的方法、装置、设备以及存储介质 |
| WO2021068199A1 (zh) * | 2019-10-11 | 2021-04-15 | Oppo广东移动通信有限公司 | 一种切换处理方法、网络设备 |
| CN112385267A (zh) * | 2020-10-15 | 2021-02-19 | 北京小米移动软件有限公司 | Ue的目标小区确定方法、装置、通信设备及存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115801551A (zh) * | 2023-02-13 | 2023-03-14 | 北京徐工汉云技术有限公司 | Sd-wan网络隧道的切换方法和装置 |
| CN115801551B (zh) * | 2023-02-13 | 2023-04-28 | 北京徐工汉云技术有限公司 | Sd-wan网络隧道的切换方法和装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102030128B1 (ko) | 기계학습을 이용한 무선 백홀망 자원할당방법 및 자원할당 장치 | |
| CN112566196B (zh) | 一种基于智能电网的异构网络接入选择方法及相关设备 | |
| US9299042B2 (en) | Predicting edges in temporal network graphs described by near-bipartite data sets | |
| CN110519816B (zh) | 一种无线漫游控制方法、装置、存储介质及终端设备 | |
| Cao et al. | Decentralized online convex optimization based on signs of relative states | |
| CN106991095B (zh) | 机器异常的处理方法、学习速率的调整方法及装置 | |
| CN111435482A (zh) | 一种外呼模型的构建方法、外呼方法、装置和存储介质 | |
| CN110019989B (zh) | 一种数据处理方法及装置 | |
| CN113784411A (zh) | 链路质量评估方法、链路切换方法、设备和存储介质 | |
| CN112532442A (zh) | 一种用于全域指控网络的任务协同能力评估方法 | |
| CN112819258A (zh) | 银行网点到店客户数量预测方法及装置 | |
| Levorato et al. | Structure-based learning in wireless networks via sparse approximation | |
| WO2024088134A1 (zh) | 信道预测方法及装置 | |
| CN112995893A (zh) | 一种指纹定位方法、系统、服务器和存储介质 | |
| CN107613500A (zh) | 一种不确定环境下的无线频谱共享方法 | |
| CN110764975B (zh) | 设备性能的预警方法、装置及监控设备 | |
| CN115174237B (zh) | 一种物联网系统恶意流量的检测方法、装置和电子设备 | |
| CN113988676B (zh) | 一种水处理设备的安全管理方法及系统 | |
| CN116011677A (zh) | 时序数据的预测方法、装置、电子设备及存储介质 | |
| CN112217585B (zh) | 信号路径的确定方法、装置、计算机设备和存储介质 | |
| CN112731150B (zh) | 电压暂降状态估计方法、装置、计算机设备和存储介质 | |
| CN114866438A (zh) | 一种云架构下的异常隐患预测方法及系统 | |
| CN113395762A (zh) | 超宽带定位网络中位置校正方法及装置 | |
| CN112784165A (zh) | 关联关系预估模型的训练方法以及预估文件热度的方法 | |
| CN115860055B (zh) | 性能确定方法、性能优化方法、装置、电子设备以及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |