CN114727320A - 网络的用户感知评测方法及其装置、电子设备和存储介质 - Google Patents
网络的用户感知评测方法及其装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN114727320A CN114727320A CN202210392411.4A CN202210392411A CN114727320A CN 114727320 A CN114727320 A CN 114727320A CN 202210392411 A CN202210392411 A CN 202210392411A CN 114727320 A CN114727320 A CN 114727320A
- Authority
- CN
- China
- Prior art keywords
- index value
- sub
- evaluation score
- perception evaluation
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008447 perception Effects 0.000 title claims abstract description 290
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000011156 evaluation Methods 0.000 claims abstract description 218
- 238000013210 evaluation model Methods 0.000 claims abstract description 41
- 238000004364 calculation method Methods 0.000 claims description 21
- 230000015654 memory Effects 0.000 claims description 20
- 230000006872 improvement Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 8
- 230000000903 blocking effect Effects 0.000 claims description 2
- 238000012360 testing method Methods 0.000 abstract description 14
- 238000010295 mobile communication Methods 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/02—Arrangements for optimising operational condition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
Abstract
本申请提供一种网络的用户感知评测方法及其装置、电子设备和存储介质。该方法包括:获取被测网络中数据业务的指标值和语音业务的指标值,该数据业务的指标值包含多个子指标值,该语音业务的指标值包含多个子指标值;将该数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值;确定该数据业务的用户感知评测得分;确定该语音业务的用户感知评测得分;根据该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。本申请的方法可以提升移动通信网络测试中用户感知评估结果的全面性和真实性。
Description
技术领域
本申请涉及移动通信网络性能评测技术,尤其涉及一种网络的用户感知评测方法及其装置、电子设备和存储介质。
背景技术
在移动通信网络的规模和结构日益复杂的形势下,为了提升通信网络的用户感知,需要对通信网络的用户感知进行评估,以根据用户感知评估结果对通信网络的性能进行提升和改善。
在进行通信网络的用户感知评估时,现有的方案一般是粗略得统计业务成功率、各类业务接入时延、视频业务卡顿、下载业务速率和业务异常掉线的频率,基于统计的结果来对用户感知进行评估。但是,统计的结果中存在与用户感知无关的信息,即这些无关的信息不会对用户感知有影响。例如用户在看视频时对业务成功率、各类业务接入时延并不关心,而只关心视频业务是否卡顿。因此,现有的方案在进行用户感知评估时并不能全面、贴合实际得对用户感知进行评估。
基于此,如何提升移动通信网络测试中用户感知评估结果的全面性和真实性,仍然是亟待解决的问题。
发明内容
本申请提供一种网络的用户感知评测方法及其装置、电子设备和存储介质,用以提升移动通信网络测试中用户感知评估结果的全面性和真实性。
一方面,本申请提供一种网络的用户感知评测方法,包括:
获取被测网络中数据业务的指标值和语音业务的指标值,所述数据业务的指标值包含多个子指标值,所述语音业务的指标值包含多个子指标值;
将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值;
根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分;
根据所述语音业务的指标值中每个子指标值的感知评价分值,确定所述语音业务的用户感知评测得分;
根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分
可选的,所述数据业务的指标值至少包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值;
所述语音业务的指标值至少包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
可选的,所述用户感知评测模型中包含所述子指标值与感知评价分值之间的线性关系;将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值,包括:
将所述数据业务的指标值和所述语音业务的指标值输入至用户感知评测模型,以使所述用户感知评测模型根据子指标值与感知评价分值之间的线性关系,确定子指标值的感知评价分值;其中,每个子指标值的预设取值范围不同;
所述用户感知评测模型用于当子指标值在预设取值范围之外时,确定所述子指标值的感知评价分值为满分或零分。
可选的,所述用户感知评测模型用于在所述数据业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为零分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为满分;
所述用户感知评测模型用于在所述语音业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为满分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为零分。
可选的,所述根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分包括:
根据所述数据业务的指标值中每个子指标值的感知评价分值,以及每个子指标值的计算权重,确定所述数据业务的用户感知评测得分;其中,所述计算权重为子指标值对应的业务的使用频率权重。
可选的,所述获取被测网络中数据业务的指标值和语音业务的指标值包括:
获取被测网络中单个用户的数据业务的指标值和语音业务的指标值;
所述根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分包括:
根据单个用户的所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定单个用户对被测网络的感知评测得分;
所述方法还包括:
当单个用户对被测网络的感知评测得分小于预设评测得分时,确定单个用户为目标改善用户。
可选的,所述获取被测网络中数据业务的指标值和语音业务的指标值包括:
获取被测网络中单个小区的数据业务的指标值和语音业务的指标值,其中,所述小区是包含多个用户和预设范围的覆盖区域;
所述根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分包括:
根据单个小区的所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定单个小区对被测网络的感知评测得分;
所述方法还包括:
当单个小区对被测网络的感知评测得分小于预设评测得分时,确定单个小区为目标改善小区。
另一方面,本申请提供一种网络的用户感知评测装置,包括:
获取模块,用于获取被测网络中数据业务的指标值和语音业务的指标值,所述数据业务的指标值包含多个子指标值,所述语音业务的指标值包含多个子指标值;
处理模块,用于将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值;
计算模块,用于根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分;
所述计算模块还用于根据所述语音业务的指标值中每个子指标值的感知评价分值,确定所述语音业务的用户感知评测得分;
所述计算模块还用于根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。
另一方面,本申请提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如第一方面所述的网络的用户感知评测方法。
另一方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当所述指令被执行时,使得计算机执行如第一方面所述的网络的用户感知评测方法。
另一方面,本申请提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的网络的用户感知评测方法。
本申请提供的网络的用户感知评测方法利用被测网络中数据业务的指标值和语音业务的指标值对被测网络的用户感知进行评价,评价结果更为全面和真实。
数据业务的指标值例如包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值。语音业务的指标值例如包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
这些子指标值都是和用户感知直接关联的,是用户最关注的,因此,通过用户感知评测模型对这些子指标进行指标打分,再基于打分结果确定网络的用户感知评测得分,可以更真实和全面得反映网络的用户感知力。所以本申请提供的方法可以提升移动通信网络测试中用户感知评估结果的全面性和真实性。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1为本申请提供的网络的用户感知评测方法的一种应用场景示意图;
图2为本申请的一个实施例提供的网络的用户感知评测方法的流程示意图;
图3为本申请的一个实施例提供的网络的用户感知评测装置的示意图;
图4为本申请的一个实施例提供的电子设备的示意图。
通过上述附图,已示出本公开明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在移动通信网络的规模和结构日益复杂的形势下,尤其是第五代移动通信技术(5th Generation Mobile Communication Technology简称5G)的规模和结构下,用户对移动网络的服务质量的要求进一步提升。
提升通信网络的服务质量的目的是提升通信网络的用户感知。为了提升通信网络的用户感知,需要对通信网络的用户感知进行评估,以根据用户感知评估结果对通信网络的性能进行提升和改善,达到提升用户感知的效果。
在进行通信网络的用户感知评估时,现有的方案一般是粗略得统计业务成功率、各类业务接入时延、视频业务卡顿、下载业务速率和业务异常掉线的频率,基于统计的结果来对用户感知进行评估。但是,统计的结果中存在与用户感知无关的信息,即这些无关的信息不会对用户感知有影响。例如用户在看视频时对业务成功率、各类业务接入时延并不关心,而只关心视频业务是否卡顿。
因此,现有的方案在进行用户感知评估时并不能全面、贴合实际得对用户感知进行评估。
基于此,本申请提供一种网络的用户感知评测方法及其装置、电子设备和存储介质,该网络的用户感知评测方法在进行网络的用户感知评测时,引入了被测网络中数据业务的指标值和语音业务的指标值。该数据业务指的是所有使用数据的业务,例如通过网络看视频的视频业务、浏览网页的网页业务、玩游戏的游戏业务、用社交软件进行通信的即时通信业务等。该语音业务指的是用移动终端(例如手机)上的电话卡通话的业务。因此,数据业务的指标值和语音业务的指标值是与用户感知息息相关的,通过数据业务的指标值和语音业务的指标值可以更全面、贴合实际得反映出被测网络的用户感知。因此,本申请提供的网络的用户感知评测方法及其装置、电子设备和存储介质可以提升移动通信网络测试中用户感知评估结果的全面性和真实性。
本申请提供的网络的用户感知评测方法应用于电子设备,该电子设备例如实验室使用的计算机、服务器等。图1为本申请提供的网络的用户感知评测方法的应用示意图,图中,该服务器从运营商的后台服务器(用于统计和记录用户或小区的业务数据)获取被测网络中数据业务的指标值和语音业务的指标值,将数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值。再根据数据业务的指标值中每个子指标值的感知评价分值确定出数据业务的用户感知评测得分,根据语音业务的指标值中每个子指标值的感知评价分值确定出语音业务的用户感知评测得分。根据数据业务的用户感知评测得分和语音业务的用户感知评测得分确定被测网络的用户感知评测得分。
请参见图2,本申请其中一个实施例提供一种网络的用户感知评测方法,包括:
S210,获取被测网络中数据业务的指标值和语音业务的指标值,该数据业务的指标值包含多个子指标值,该语音业务的指标值包含多个子指标值。
该数据业务的指标值中包含的子指标值例如包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值。
该语音业务的指标值中包含的子指标值例如包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
该数据业务的指标值和该语音业务的指标值均是由运营商的后台服务器通过根据用户操作移动终端时的数据统计得到的,例如视频卡顿率子子指标值是用户在看视频时由后台服务器统计得到的。
S220,将该数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值。
该用户感知评测模型用于对子指标值进行打分,以输出子指标值的感知评价分值,不同类型的业务的子指标值会对应有不同的打分机制。
例如数据业务包含视频业务、网页业务、游戏业务和即时通信业务,在用户感知评测模型打分时,会按照不同的打分机制进行打分。
如表1所示,示例性得对用户感知评测模型的打分机制进行说明,但并不限定用户感知评测模型只有这一种打分机制。
表1:(备注:在满分值与0分值此区间线性打分)
如表1所示,每个子指标值都有一个指标值范围(预设取值范围),每个子指标值的预设取值范围不同,每个子指标值的满分也不同。
在数据业务的指标值中:视频业务的视频卡顿率子指标值的预设取值范围是大于0且小于70%,满分为15分。网页业务的页面响应时延(WEB页面响应时延)子指标值的预设取值范围是大于20毫秒(ms)且小于1000ms,满分为10分。游戏业务的服务器侧时延(Game服务器侧时延)子指标值的预设取值范围是大于5ms且小于220ms,满分为7.5分。游戏业务的终端侧时延(Game终端侧时延)子指标值的预设取值范围是大于15ms且小于600ms,满分为7.5分。即时通信业务的服务器测时延子指标值的预设取值范围是大于5ms且小于400ms,满分为5分。即时通信业务的终端侧时延子指标值的预设取值范围是大于20ms且小于1000ms,满分为5分。
在语音业务的指标值中:高清通话VOLTE的语音接通率(VOLTE始呼网络接通率)子指标值的预设取值范围是大于95%且小于98%,满分是25分。VOLTE的上行会话评价MOS分(VOLTE上行MOS分)子指标值的预设取值范围是大于2.5且小于4.35,满分是12.5分。下行VOLTE的上行会话评价MOS分(VOLTE下行MOS分)子指标值的预设取值范围是大于2.5且小于4.35,满分是12.5分。
如表1的备注所说明的,该用户感知评测模型中包含子指标值与感知评价分值之间的线性关系,该用户感知评测模型用于当子指标值在预设取值范围内时,根据子指标值与感知评价分值之间的线性关系,确定子指标值的感知评价分值。因此将该数据业务的指标值和该语音业务的指标值输入至该用户感知模型,在子指标值在预设取值范围内时,该用户感知评测模型根据子指标值与感知评价分值之间的线性关系,确定子指标值的感知评价分值。
如表1,该用户感知评测模型用于当子指标值在预设取值范围之外时,确定该子指标值的感知评价分值为满分或零分。
具体的,将该数据业务的指标值输入至用户感知评测模型,该用户感知评测模型用于在该数据业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为零分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为满分。
具体的,将该语音业务的指标值输入至用户感知评测模型,该用户感知评测模型用于在该语音业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为满分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为零分。
S220,根据该数据业务的指标值中每个子指标值的感知评价分值,确定该数据业务的用户感知评测得分。
数据业务的指标值包含多个子指标值,在根据多个子指标值的感知评价分值计算数据业务的用户感知评测得分时,可以直接将多个子指标值的感知评价分值相加,以计算得到数据业务的用户感知评测得分。
可选的,也可以给每个子指标值分配计算权重,该计算权重例如业务使用频率权重、业务使用时长权重等。例如,数据业务的用户感知评测得分=视频业务的子指标值的感知评价分值*业务使用频率权重+网页业务的子指标值的感知评价分值*业务使用频率权重+游戏业务的子指标值的感知评价分值*业务使用频率权重+即时通讯业务的子指标值的感知评价分值*业务使用频率权重。
利用计算权重来确定数据业务的用户感知评测得分可以使得数据业务的用户感知评测得分是更贴合于用户的习惯计算得到的,计算结果更加贴合实际,更真实。
S240,根据该语音业务的指标值中每个子指标值的感知评价分值,确定该语音业务的用户感知评测得分。
用户业务的指标值包含多个子指标值,在根据多个子指标值的感知评价分值计算用户业务的用户感知评测得分时,可以直接将多个子指标值的感知评价分值相加,以计算得到用户业务的用户感知评测得分。
可选的,也可以给每个子指标值分配计算权重,该计算权重例如业务使用频率权重、业务使用时长权重等。例如,用户业务的用户感知评测得分=接通业务的子指标值的感知评价分值*业务使用频率权重+语音指令业务的子指标值的感知评价分值*业务使用频率权重。
利用计算权重来确定用户业务的用户感知评测得分可以使得用户业务的用户感知评测得分是更贴合于用户的习惯计算得到的,计算结果更加贴合实际,更真实。
S250,根据该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。
可选的,被测网络的用户感知评测得分=数据业务的用户感知评测得分+语音业务的用户感知评测得分。
可选的,也可以在计算时为数据业务的用户感知评测得分和语音业务的用户感知评测得分分别分配计算权重。
被测网络的用户感知评测得分可以是针对单个用户或单个小区的,其中,小区是包含多个用户和预设范围的覆盖区域。
在针对单个用户来计算单个用户对被测网络的感知评测得分时,需要获取被测网络中单个用户的数据业务的指标值和语音业务的指标值,再根据单个用户的该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定单个用户对被测网络的感知评测得分。
在针对单个小区来计算单个小区对被测网络的感知评测得分时,需要获取被测网络中单个小区的数据业务的指标值和语音业务的指标值,再根据单个小区的该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定单个小区对被测网络的感知评测得分。
当单个用户或单个小区对被测网络的感知评测得分小于预设评测得分(例如80分)时,确定单个用户为目标改善用户,确定单个小区为目标改善小区。可选的,可以将确定的多个目标改善用户和/或多个目标改善小区进行聚类,一并输出为目标改善的对象。被测网络的维护人员在获取到目标改善的对象后,对被测网络进行改善,以进一步提升被测网络的用户感知评测得分。可选的,在对被测网络进行改善后,可以循环执行步骤S210至步骤S250,以再次对被测网络的用户感知进行评测。
综上,本实施例提供一种网络的用户感知评测方法利用被测网络中数据业务的指标值和语音业务的指标值对被测网络的用户感知进行评价,评价结果更为全面和真实。数据业务的指标值例如包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值。语音业务的指标值例如包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
这些子指标值都是和用户感知直接关联的,是用户最关注的,因此,通过用户感知评测模型对这些子指标进行指标打分,再基于打分结果确定网络的用户感知评测得分,可以更真实和全面得反映网络的用户感知力。所以本申请的实施例提供的方法可以提升移动通信网络测试中用户感知评估结果的全面性和真实性。
请参见图3,本申请其中一个实施例提供一种网络的用户感知评测装置10,包括:
获取模块11,用于获取被测网络中数据业务的指标值和语音业务的指标值,该数据业务的指标值包含多个子指标值,该语音业务的指标值包含多个子指标值。该数据业务的指标值至少包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值。该语音业务的指标值至少包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
处理模块12,用于将该数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值。
计算模块13,用于根据该数据业务的指标值中每个子指标值的感知评价分值,确定该数据业务的用户感知评测得分。
该计算模块13还用于根据该语音业务的指标值中每个子指标值的感知评价分值,确定该语音业务的用户感知评测得分。
该计算模块13还用于根据该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。
该用户感知评测模型中包含该子指标值与感知评价分值之间的线性关系,该处理模块12具体用于当子指标值在预设取值范围内时,将该数据业务的指标值和该语音业务的指标值输入至用户感知评测模型,以使该用户感知评测模型根据子指标值与感知评价分值之间的线性关系,确定子指标值的感知评价分值;其中,每个子指标值的预设取值范围不同。当子指标值在预设取值范围之外时,将该数据业务的指标值和语音业务的指标值输入至用户感知评测模型,以使该用户感知评测模型确定该子指标值的感知评价分值为满分或零分。
该处理模块12具体用于当该数据业务的指标值包含的子指标值在预设取值范围之外时,将该数据业务的指标值输入至用户感知评测模型,以使该用户感知评测模型在该数据业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为零分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为满分。
该处理模块12具体用于当该语音业务的指标值包含的子指标值在预设取值范围之外时,将该语音业务的指标值输入至用户感知评测模型,以使该用户感知评测模型在该数据业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为满分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为零分。
该计算模块13具体用于根据该数据业务的指标值中每个子指标值的感知评价分值,以及每个子指标值的计算权重,确定该数据业务的用户感知评测得分;其中,该计算权重为子指标值对应的业务的使用频率权重。
该获取模块11具体用于获取被测网络中单个用户的数据业务的指标值和语音业务的指标值。
该计算模块13具体用于根据单个用户的该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定单个用户对被测网络的感知评测得分。
还包括:
标记模块14,用于当单个用户对被测网络的感知评测得分小于预设评测得分时,确定单个用户为目标改善用户。
该获取模块11具体用于获取被测网络中单个小区的数据业务的指标值和语音业务的指标值,其中,该小区是包含多个用户和预设范围的覆盖区域。
该计算模块13具体用于根据单个小区的该数据业务的用户感知评测得分和该语音业务的用户感知评测得分,确定单个小区对被测网络的感知评测得分。
该标记模块14还用于当单个小区对被测网络的感知评测得分小于预设评测得分时,确定单个小区为目标改善小区。
请参见图4,本申请其中一个实施例提供一种电子设备20,包括处理器21,以及与该处理器21通信连接的存储器22,该存储器22存储计算机执行指令,该处理器21执行该存储器22存储的计算机执行指令,以实现如以上任一项实施例描述的网络的用户感知评测方法。
本申请还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机执行指令,当该指令被执行时,使得计算机执行指令被处理器执行时用于实现如上任一项实施例提供的该网络的用户感知评测方法。
本申请还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机执行指令,当该指令被执行时,使得计算机执行如上任一项实施例提供的网络的用户感知评测方法。
需要说明的是,上述计算机可读存储介质可以是只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器。也可以是包括上述存储器之一或任意组合的各种电子设备,如移动电话、计算机、平板设备、个人数字助理等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所描述的方法。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种网络的用户感知评测方法,其特征在于,包括:
获取被测网络中数据业务的指标值和语音业务的指标值,所述数据业务的指标值包含多个子指标值,所述语音业务的指标值包含多个子指标值;
将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值;
根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分;
根据所述语音业务的指标值中每个子指标值的感知评价分值,确定所述语音业务的用户感知评测得分;
根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。
2.根据权利要求1所述的方法,其特征在于,
所述数据业务的指标值至少包括:视频业务的视频卡顿率子指标值、网页业务的页面响应时延子指标值、游戏业务的服务器侧时延子指标值和终端侧时延子指标值、即时通信业务的服务器测时延子指标值和终端侧时延子指标值;
所述语音业务的指标值至少包括:高清通话VOLTE的语音接通率子指标值、VOLTE的上行会话评价MOS分子指标值和下行MOS分子指标值。
3.根据权利要求1所述的方法,其特征在于,所述用户感知评测模型中包含所述子指标值与感知评价分值之间的线性关系;将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值,包括:
将所述数据业务的指标值和所述语音业务的指标值输入至用户感知评测模型,以使所述用户感知评测模型根据子指标值与感知评价分值之间的线性关系,确定子指标值的感知评价分值;其中,每个子指标值的预设取值范围不同;
所述用户感知评测模型用于当子指标值在预设取值范围之外时,确定所述子指标值的感知评价分值为满分或零分。
4.根据权利要求3所述的方法,其特征在于,
所述用户感知评测模型用于在所述数据业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为零分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为满分;
所述用户感知评测模型用于在所述语音业务的指标值包含的子指标值大于或等于预设取值范围中的最大值时,确定子指标值的感知评价分值为满分,以及,在子指标值小于或等于预设取值范围中的最小值时,确定子指标值的感知评价分值为零分。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分包括:
根据所述数据业务的指标值中每个子指标值的感知评价分值,以及每个子指标值的计算权重,确定所述数据业务的用户感知评测得分;其中,所述计算权重为子指标值对应的业务的使用频率权重。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述获取被测网络中数据业务的指标值和语音业务的指标值包括:
获取被测网络中单个用户的数据业务的指标值和语音业务的指标值;
所述根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分包括:
根据单个用户的所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定单个用户对被测网络的感知评测得分;
所述方法还包括:
当单个用户对被测网络的感知评测得分小于预设评测得分时,确定单个用户为目标改善用户。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述获取被测网络中数据业务的指标值和语音业务的指标值包括:
获取被测网络中单个小区的数据业务的指标值和语音业务的指标值,其中,所述小区是包含多个用户和预设范围的覆盖区域;
所述根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分包括:
根据单个小区的所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定单个小区对被测网络的感知评测得分;
所述方法还包括:
当单个小区对被测网络的感知评测得分小于预设评测得分时,确定单个小区为目标改善小区。
8.一种网络的用户感知评测装置,其特征在于,包括:
获取模块,用于获取被测网络中数据业务的指标值和语音业务的指标值,所述数据业务的指标值包含多个子指标值,所述语音业务的指标值包含多个子指标值;
处理模块,用于将所述数据业务的指标值和语音业务的指标值输入至用户感知评测模型,得到每个子指标值的感知评价分值;
计算模块,用于根据所述数据业务的指标值中每个子指标值的感知评价分值,确定所述数据业务的用户感知评测得分;
所述计算模块还用于根据所述语音业务的指标值中每个子指标值的感知评价分值,确定所述语音业务的用户感知评测得分;
所述计算模块还用于根据所述数据业务的用户感知评测得分和所述语音业务的用户感知评测得分,确定被测网络的用户感知评测得分。
9.一种电子设备,其特征在于,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如权利要求1至7中任一项所述的网络的用户感知评测方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当所述指令被执行时,使得计算机执行如权利要求1-7中任一项所述的网络的用户感知评测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210392411.4A CN114727320A (zh) | 2022-04-15 | 2022-04-15 | 网络的用户感知评测方法及其装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210392411.4A CN114727320A (zh) | 2022-04-15 | 2022-04-15 | 网络的用户感知评测方法及其装置、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114727320A true CN114727320A (zh) | 2022-07-08 |
Family
ID=82244197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210392411.4A Pending CN114727320A (zh) | 2022-04-15 | 2022-04-15 | 网络的用户感知评测方法及其装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114727320A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115278531A (zh) * | 2022-07-18 | 2022-11-01 | 中国联合网络通信集团有限公司 | 语音业务的异常检测方法、装置、设备及存储介质 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101562830A (zh) * | 2009-04-20 | 2009-10-21 | 深圳市优网科技有限公司 | 一种客户感知评估方法及系统 |
CN104754611A (zh) * | 2013-12-25 | 2015-07-01 | 中兴通讯股份有限公司 | 用户感知评估方法及系统 |
CN105357691A (zh) * | 2015-09-28 | 2016-02-24 | 中国普天信息产业北京通信规划设计院 | Lte无线网络用户感知监测方法和系统 |
CN106559584A (zh) * | 2016-12-07 | 2017-04-05 | 中国联合网络通信集团有限公司 | 语音评价方法及装置 |
CN109347726A (zh) * | 2018-11-06 | 2019-02-15 | 西安海润通信技术有限公司 | 一种基于微信公众号的手机上网网络感知质量评测方法 |
CN109362084A (zh) * | 2018-12-27 | 2019-02-19 | 中国移动通信集团江苏有限公司 | 通信业务质量优化的方法、装置、设备和介质 |
CN109428759A (zh) * | 2017-09-01 | 2019-03-05 | 中国移动通信集团广西有限公司 | 一种网络质量评估方法及装置 |
CN109699036A (zh) * | 2017-10-20 | 2019-04-30 | 中国移动通信集团公司 | 一种VoLTE业务质量评估方法和装置 |
CN110138594A (zh) * | 2019-04-11 | 2019-08-16 | 福州瑞芯微电子股份有限公司 | 基于深度学习的视频质量评价方法和服务器 |
CN111343647A (zh) * | 2018-12-19 | 2020-06-26 | 中国移动通信集团重庆有限公司 | 用户感知评估的方法、装置、设备和介质 |
CN111369091A (zh) * | 2018-12-26 | 2020-07-03 | 中国移动通信集团四川有限公司 | 用户感知画像分析的方法、装置、设备和介质 |
CN112165714A (zh) * | 2020-10-24 | 2021-01-01 | 国铁吉讯科技有限公司 | 一种网络评估方法、装置及存储介质 |
CN112584422A (zh) * | 2020-12-03 | 2021-03-30 | 中国联合网络通信集团有限公司 | 5g终端性能获取方法和装置 |
CN113543178A (zh) * | 2021-07-28 | 2021-10-22 | 北京红山信息科技研究院有限公司 | 基于用户感知的业务优化方法、装置、设备及存储介质 |
CN113747482A (zh) * | 2020-05-29 | 2021-12-03 | 中国移动通信集团湖南有限公司 | 检测分析业务网络的方法、系统及终端设备 |
-
2022
- 2022-04-15 CN CN202210392411.4A patent/CN114727320A/zh active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101562830A (zh) * | 2009-04-20 | 2009-10-21 | 深圳市优网科技有限公司 | 一种客户感知评估方法及系统 |
CN104754611A (zh) * | 2013-12-25 | 2015-07-01 | 中兴通讯股份有限公司 | 用户感知评估方法及系统 |
CN105357691A (zh) * | 2015-09-28 | 2016-02-24 | 中国普天信息产业北京通信规划设计院 | Lte无线网络用户感知监测方法和系统 |
CN106559584A (zh) * | 2016-12-07 | 2017-04-05 | 中国联合网络通信集团有限公司 | 语音评价方法及装置 |
CN109428759A (zh) * | 2017-09-01 | 2019-03-05 | 中国移动通信集团广西有限公司 | 一种网络质量评估方法及装置 |
CN109699036A (zh) * | 2017-10-20 | 2019-04-30 | 中国移动通信集团公司 | 一种VoLTE业务质量评估方法和装置 |
CN109347726A (zh) * | 2018-11-06 | 2019-02-15 | 西安海润通信技术有限公司 | 一种基于微信公众号的手机上网网络感知质量评测方法 |
CN111343647A (zh) * | 2018-12-19 | 2020-06-26 | 中国移动通信集团重庆有限公司 | 用户感知评估的方法、装置、设备和介质 |
CN111369091A (zh) * | 2018-12-26 | 2020-07-03 | 中国移动通信集团四川有限公司 | 用户感知画像分析的方法、装置、设备和介质 |
CN109362084A (zh) * | 2018-12-27 | 2019-02-19 | 中国移动通信集团江苏有限公司 | 通信业务质量优化的方法、装置、设备和介质 |
CN110138594A (zh) * | 2019-04-11 | 2019-08-16 | 福州瑞芯微电子股份有限公司 | 基于深度学习的视频质量评价方法和服务器 |
CN113747482A (zh) * | 2020-05-29 | 2021-12-03 | 中国移动通信集团湖南有限公司 | 检测分析业务网络的方法、系统及终端设备 |
CN112165714A (zh) * | 2020-10-24 | 2021-01-01 | 国铁吉讯科技有限公司 | 一种网络评估方法、装置及存储介质 |
CN112584422A (zh) * | 2020-12-03 | 2021-03-30 | 中国联合网络通信集团有限公司 | 5g终端性能获取方法和装置 |
CN113543178A (zh) * | 2021-07-28 | 2021-10-22 | 北京红山信息科技研究院有限公司 | 基于用户感知的业务优化方法、装置、设备及存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115278531A (zh) * | 2022-07-18 | 2022-11-01 | 中国联合网络通信集团有限公司 | 语音业务的异常检测方法、装置、设备及存储介质 |
CN115278531B (zh) * | 2022-07-18 | 2024-04-09 | 中国联合网络通信集团有限公司 | 语音业务的异常检测方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101108805B1 (ko) | 맵 상에서 통신 이벤트들의 표시들을 제공하고 나타내는 장치 및 방법 | |
CN107341187B (zh) | 搜索处理方法、装置、设备和计算机存储介质 | |
CN106528389B (zh) | 系统流畅性的性能评测方法、装置及终端 | |
US20160205528A1 (en) | System and method for fast accurate detection of sms spam numbers via monitoring grey phone space | |
CN108093427B (zh) | 一种VoLTE业务质量评估方法及系统 | |
US11659363B2 (en) | Caller identifier | |
CN114727320A (zh) | 网络的用户感知评测方法及其装置、电子设备和存储介质 | |
US20230008822A1 (en) | Detecting scam callers using conversational agent and machine learning systems and methods | |
CN105704337A (zh) | 号码标记方法和系统 | |
CN112866192A (zh) | 一种识别异常聚集行为的方法及装置 | |
US8396468B1 (en) | Assessing performance and quality of a mobile communication service | |
CN110415044A (zh) | 作弊检测方法、装置、设备及存储介质 | |
CN106507101A (zh) | 一种视频业务质量评价方法及装置 | |
CN114466214B (zh) | 直播间人数统计方法及装置 | |
CN108337371B (zh) | 电子装置、跌落保护方法、装置及计算机可读存储介质 | |
CN106302002B (zh) | 测试方法及装置 | |
CN113873495B (zh) | eSIM卡的网络接入方法和装置 | |
CN111614516A (zh) | 终端稳定性测试方法、装置及存储介质 | |
CN109246311B (zh) | 一种开关选择方法及装置、设备、存储介质 | |
CN112422370A (zh) | 语音通话质量的确定方法和装置 | |
CN109451515B (zh) | 网络优先级评估方法及装置 | |
CN113766069B (zh) | 骚扰电话拦截方法及装置 | |
CN115361651B (zh) | 终端定位方法、装置、电子设备及存储介质 | |
CN116015991B (zh) | 针对计费系统的计费结果的测试方法、装置和设备 | |
KR100576012B1 (ko) | 가입자 통화기록 정보를 이용한 홈존 정보 갱신 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |