CN102149110A - 一种终端性能评估方法及装置 - Google Patents

Abstract

本发明公开了一种终端性能评估方法，该方法包括：接收基站上报的所有终端的呼叫信息，根据所述呼叫信息确定终端类型，根据所述终端类型对终端进行性能指标评估。该方法利用上报的现网中的大量呼叫数据，确定各次呼叫的终端类型，从而实现了对整个网络中的各个终端的实际使用效果进行的评估，找出了可能存在问题的终端，避免了可能存在问题的终端接入到网络中。

Description

一种终端性能评估方法及装置

技术领域

本发明涉及无线通讯领域，尤其是指一种终端性能评估方法及装置。

背景技术

在现有的无线网络的性能评估和优化工作中，通常会使用如下评估体系：一种是针对无线网络中各个网元的性能评估，如网元的呼叫成功率、掉话率、切换成功率等，这些指标可以反映出当前网络运行的健康状态；另外一种是针对无线网络中用户的感受进行评估，通过对网络中每一个用户的所有呼叫情况进行统计，如该用户呼叫接通率、掉话率、单通情况等，对每个用户的实际使用感受进行评估，这种评估可以从用户感受的角度来反映当前网络的运行效果的好坏。

目前，还没有一种针对网络中的各款终端进行性能评估的评估体系，而在实际应用中对终端的性能评估是非常重要的：由于目前的终端入网测试效果有限，而且能够进行测试的用户不够多，这样，很容易出现不合格的终端接入网络，在网络中如果存在有问题的终端，无疑会对网络性能指标产生不利的影响。

发明内容

本发明提出一种终端性能评估方法及装置，能够对整个网络中的各个终端的实际使用效果进行评估，从而避免可能存在问题的终端接入到网络中。

一种终端性能评估方法，包括：接收基站上报的所有终端的呼叫信息，根据所述呼叫信息确定终端类型；

根据所述终端类型对终端进行性能指标评估。

所述根据所述呼叫信息确定终端类型包括：

对于进入呼叫通话状态的终端，根据该终端上报的厂商代号字段、终端型号字段、固件型号字段确定终端类型；

对于没有进入到通话状态的终端，根据预设的国际移动用户识别码IMSI和终端类型的对应表确定该次呼叫的终端类型。

所述性能指标包括：呼叫成功率、和/或掉话率、和/或单通通话率、和/或弱导频呼叫接入率、和/或反向基本信道误帧率、和/或前向基本信道误帧率。

该方法之前还包括：预先设置该呼叫成功率门限值T1、和/或掉话率门限值T2、和/或单通通话率门限值T3、和/或弱导频呼叫接入率门限值T4、和/或反向基本信道误帧率门限值T5，和/或前向基本信道误帧率的门限值T6。

根据终端类型对呼叫成功率评估包括：

计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于所述呼叫成功率门限值T1的所有终端类型。

根据终端类型对掉话率评估包括：

计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于掉话率门限值T2的所有终端类型。

根据终端类型对单通通话率评估包括：

计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于单通通话率门限值T3的所有终端类型。

根据终端类型对弱导频呼叫接入率评估包括：

根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于弱导频呼叫接入率门限值T4的所有终端类型。

根据终端类型对反向基本信道误帧率评估包括：

在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报；

对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过反向基本信道误帧率门限值T5的采样次数占总采样次数的比例，统计所有超过反向基本信道误帧率门限值T5的终端类型。

根据终端类型对前向基本信道误帧率评估包括：

根据终端上报的各次功率测量报告消息计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报。

对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过前向基本信道误帧率的门限值T6的计数值占总计数值的比例，统计所有超过前向基本信道误帧率的门限值T6的终端类型，。

一种终端性能评估装置，包括：

信息接收单元，用于接收基站上报的所有终端的呼叫信息；

终端类型确定单元，用于根据所述呼叫信息确定终端类型；

终端性能评估单元，用于对所述确定类型的终端进行性能指标评估。

所述终端类型确定单元，具体用于：对于呼叫信息显示进入呼叫通话状态的终端，根据该终端上报的厂商代号字段、终端型号字段、固件型号字段确定终端类型；

对于呼叫信息显示未进入到通话状态的终端，根据预设的国际移动用户识别码IMSI和终端类型的对应表确定该次呼叫的终端类型。

所述终端性能评估单元22中，预先设置有呼叫成功率门限值T1、和/或掉话率门限值T2、和/或单通通话率门限值T3、和/或弱导频呼叫接入率门限值T4、和/或反向基本信道误帧率门限值T5，和/或前向基本信道误帧率的门限值T6：

所述终端性能评估单元22，具体用于：

计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于所述呼叫成功率门限值T1的所有终端类型；和/或，

计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于掉话率门限值T2的所有终端类型；和/或，

计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于单通通话率门限值T3的所有终端类型；和/或，

根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于弱导频呼叫接入率门限值T4的所有终端类型；和/或，

在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报；

对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过反向基本信道误帧率门限值T5的采样次数占总采样次数的比例，统计所有超过反向基本信道误帧率门限值T5的终端类型；和/或，

根据终端上报的各次功率测量报告消息计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报；

对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过前向基本信道误帧率的门限值T6的计数值占总计数值的比例，统计所有超过前向基本信道误帧率的门限值T6的终端类型。

本发明方法，利用上报的现网中的大量呼叫数据，确定各次呼叫的终端类型，从而实现了对整个网络中的各个终端的实际使用效果进行的评估，找出了可能存在问题的终端，避免了可能存在问题的终端接入到网络中。

附图说明

图1为本发明一种终端性能评估方法的实施例的流程示意图；

图2为本发明一种终端性能评估装置的实施例的组成示意图；

图3为本发明确定终端类型的优选实施例的流程示意图。

具体实施方式

下面通过附图及具体实施例对本发明做进一步的详细说明。

本发明实施例提供了一种终端性能评估办法，如图1所示，该方法包括以下几个步骤：

步骤100、接收基站上报的所有终端的呼叫信息。

步骤102、根据接收到的呼叫信息确定终端类型。

步骤104、对确定类型的终端进行性能指标评估。

本实施例以CDMA2000网络下的终端进行说明：

在步骤100中，接收基站上报的所有终端的详细呼叫信息，包括从呼叫接入到呼叫释放时的所有信息，比如参考小区导频强度；采样的切换信息，激活集的变化，导频强度；前反向误帧率的采样值；呼叫释放前激活集导频个数以及强度等。

从每一路呼叫的呼叫信息中，可以识别出该呼叫的终端。对于CDMA2000网络，通常是使用国际移动用户识别码(IMSI，International Mobile SubscriberIdentification Number)来标识不同类型的终端，具体地，步骤102包括：

对于进入呼叫通话态后的终端，系统可以按照空口协议规定，要求终端上报终端类型字段，包括但不限于厂商代号字段、终端型号字段、固件型号字段等字段。根据该字段确定终端类型。

对于没有进入到通话状态的呼叫，可以根据预设的IMSI和终端类型的对应表确定该次呼叫的终端类型，进一步地，该对应表还包括IMSI和终端类型的对应关系持续的最早和最晚呼叫接入时间点。当查找出现同一个IMSI对应多种终端类型的情况，则将该多个重复的对应关系的最早、最晚呼叫接入时间点进行从早到晚的排序，生成一个时间点序列，根据当前呼叫的接入时间处于该时间点序列的区间不同确定IMSI和终端类型的对应关系，从而唯一地确定该次呼叫的终端类型。

本实施例中，具体地，所述性能指标包括：呼叫成功率、和/或掉话率、和/或单通通话率、和/或弱导频呼叫接入率、和/或反向基本信道误帧率、和/或前向基本信道误帧率；优选地，在对确定类型的终端进行性能指标评估前，本方法包括预先设置该呼叫成功率门限值T1、和/或掉话率门限值T2、和/或单通通话率门限值T3、和/或弱导频呼叫接入率门限值T4、和/或反向基本信道误帧率门限值T5，和/或前向基本信道误帧率的门限值T6。

具体地，在步骤104中，对确定类型的终端进行性能指标评估包括，具体包括：

对确定类型的终端的呼叫成功率进行性能指标评估过程具体包括：

计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于门限T1的所有终端类型，设为集合A。

对确定类型的终端的掉话率进行性能指标评估过程具体包括：

计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于门限T2的所有终端类型，设为集合B。

对确定类型的终端的单通通话率进行性能指标评估过程具体包括：

计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于门限T3的所有终端类型，设为集合C。其中，单通指的是呼叫进入通话态之后由于单向无声，用户很快就释放了呼叫。

对确定类型的终端的弱导频呼叫接入率进行性能指标评估过程具体包括：

根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于门限T4的所有终端类型，设为集合D，

对确定类型的终端的反向基本信道误帧率进行性能指标评估过程具体包括：

在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报。

对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过门限T5的采样次数占总采样次数的比例，统计所有超过门限T5的终端类型，设为集合E。

对确定类型的终端的前向基本信道误帧率进行性能指标评估过程具体包括：

根据终端上报的各次功率测量报告消息(PMRM，Privacy ManagementReference Model)计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报。

对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过门限T6的计数值占总计数值的比例，统计所有超过门限T6的终端类型，设为集合F。

进一步地，步骤104还包括：根据上述统计得到的所有集合的交集，确定指标性能最差的终端类型。

通过上述实施例提供的方法，实现了对整个网络中的各个终端的实际使用效果进行了评估，从而确定了可能存在问题的终端类型。

本发明实施例还提供一种终端性能评估装置，如图2所示，该装置包括：信息接收单元20、终端类型确定单元21和终端性能评估单元22，其中，

信息接收单元20，用于接收基站上报的所有终端的呼叫信息；

终端类型确定单元21，用于根据所述呼叫信息确定终端类型；

终端性能评估单元22，用于对所述确定类型的终端进行性能指标评估。

具体地，终端类型确定单元21用于确定信息接收单元20上报的所有呼叫信息所对应的终端类型。

对于呼叫信息显示进入呼叫通话状态后的终端，系统可以按照空口协议规定，要求终端上报终端类型字段，包括但不限于厂商代号字段、终端型号字段、固件型号字段等字段。根据该字段确定终端类型。

对于呼叫信息显示未进入到通话状态的呼叫，可以根据预设的IMSI和终端类型的对应表确定该次呼叫的终端类型，进一步地，该对应表还包括IMSI和终端类型的对应关系持续的最早和最晚呼叫接入时间点。当查找出现同一个IMSI对应多种终端类型的情况，则将该多个重复的对应关系的最早、最晚呼叫接入时间点进行从早到晚的排序，生成一个时间点序列，根据当前呼叫的接入时间处于该时间点序列的区间不同确定IMSI和终端类型的对应关系，从而唯一地确定该次呼叫的终端类型。

具体地，终端性能评估单元22，用于根据终端性能评估单元21发送的已确定的终端类型的呼叫集合对终端进行性能指标评估，所述性能指标包括：呼叫成功率、掉话率、单通通话率、弱导频接入率、反向基本信道误帧率和前向基本信道误帧率。

终端性能评估单元22，具体用于：

对确定类型的终端的呼叫成功率进行性能指标评估：计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于门限T1的所有终端类型，设为集合A；

对确定类型的终端的掉话率进行性能指标评估：计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于门限T2的所有终端类型，设为集合B；

对确定类型的终端的单通通话率进行性能指标评估：计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于门限T3的所有终端类型，设为集合C。其中，单通指的是呼叫进入通话态之后由于单向无声，用户很快就释放了呼叫；

对确定类型的终端的弱导频呼叫接入率进行性能指标评估：根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于门限T4的所有终端类型，设为集合D，

对确定类型的终端的反向基本信道误帧率进行性能指标评估：在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报；对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过门限T5的采样次数占总采样次数的比例，统计所有超过门限T5的终端类型，设为集合E；

对确定类型的终端的前向基本信道误帧率进行性能指标评估：根据终端上报的各次功率测量报告消息(PMRM，Privacy Management Reference Model)计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报；对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过门限T6的计数值占总计数值的比例，统计所有超过门限T6的终端类型，设为集合F。

终端性能评估单元22，还用于根据上述统计得到的所有集合的交集，确定指标性能最差的终端类型。

通过上述实施例提供的方法，实现了对整个网络中的各个终端的实际使用效果进行了评估，从而确定了可能存在问题的终端类型。

图3是本发明确定终端类型的优选实施例的流程示意图，如图3所示，该方法包括：

步骤300、从数据采集服务器获取从基站上报的所有呼叫的详细数据信息；

步骤301、遍历所有进入通话状态的呼叫是否结束，若结束，转入步骤302，根据呼叫的IMSI和空口上报的终端类型字段(制造商代码、终端型号以及终端固件类型)，得到IMSI和终端类型的对应表；否则转入步骤303，记录呼叫ID、IMSI、终端类型，呼叫接入时间。遍历结束后，确定IMSI和终端类型的对应关系的所有呼叫接入的最早最接入时间和最晚接入时间；

步骤304、处理下一进入通话状态的呼叫记录

步骤305、遍历所有未进入通话状态的呼叫是否结束；若结束转入步骤312，否则转入步骤306；

步骤306、查找的表项是否唯一，若是，则转入步骤311记录呼叫ID、IMSI和查到的终端类型，否则转入步骤308，将查到的多个表项的各个最早接入时间、最晚接入时间按由早到晚的次序进行排序，生成一个时间点序；

步骤310、处理下一未进入通话状态的呼叫记录。

步骤309、根据本次呼叫的接入时间落在时间点序列的区间位置，确定该呼叫的终端类型；

步骤312、对进入通话状态的呼叫以及所有查找到终端类型的未进入通话态的呼叫，生成呼叫ID和终端类型对应表；

步骤313、将呼叫ID集合发送到终端性能评估单元。

以上提供了对一种优选实施例的描述，以使本领域的任何技术人员都能使用本发明所述的方法。对这些实施例的各种修改对于本领域的技术人员而言是显而易见的，且这里所定义的基本原理可以应用于其他实施例而无须使用创造性。因此，本发明不限于这里所示的实施例，而应该符合与这里所公开的原理和新颖性特征一致的最宽泛的范围。

Claims (13)

1.一种终端性能评估方法，其特征在于，包括：接收基站上报的所有终端的呼叫信息，根据所述呼叫信息确定终端类型；

根据所述终端类型对终端进行性能指标评估。

2.根据权利要求1所述的方法，其特征在于，所述根据所述呼叫信息确定终端类型包括：

对于进入呼叫通话状态的终端，根据该终端上报的厂商代号字段、终端型号字段、固件型号字段确定终端类型；

对于没有进入到通话状态的终端，根据预设的国际移动用户识别码IMSI和终端类型的对应表确定该次呼叫的终端类型。

3.根据权利要求1所述的方法，其特征在于，所述性能指标包括：呼叫成功率、和/或掉话率、和/或单通通话率、和/或弱导频呼叫接入率、和/或反向基本信道误帧率、和/或前向基本信道误帧率。

4.根据权利要求3所述的方法，其特征在于，该方法之前还包括：预先设置该呼叫成功率门限值T1、和/或掉话率门限值T2、和/或单通通话率门限值T3、和/或弱导频呼叫接入率门限值T4、和/或反向基本信道误帧率门限值T5，和/或前向基本信道误帧率的门限值T6。

5.根据权利要求4所述的方法，其特征在于，根据终端类型对呼叫成功率评估包括：

计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于所述呼叫成功率门限值T1的所有终端类型。

6.根据权利要求4所述的方法，其特征在于，根据终端类型对掉话率评估包括：

计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于掉话率门限值T2的所有终端类型。

7.根据权利要求4所述的方法，其特征在于，根据终端类型对单通通话率评估包括：

计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于单通通话率门限值T3的所有终端类型。

8.根据权利要求4所述的方法，其特征在于，根据终端类型对弱导频呼叫接入率评估包括：

根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于弱导频呼叫接入率门限值T4的所有终端类型。

9.根据权利要求4所述的方法，其特征在于，根据终端类型对反向基本信道误帧率评估包括：

在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报；

对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过反向基本信道误帧率门限值T5的采样次数占总采样次数的比例，统计所有超过反向基本信道误帧率门限值T5的终端类型。

10.根据权利要求4所述的方法，其特征在于，根据终端类型对前向基本信道误帧率评估包括：

根据终端上报的各次功率测量报告消息计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报。

对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过前向基本信道误帧率的门限值T6的计数值占总计数值的比例，统计所有超过前向基本信道误帧率的门限值T6的终端类型，。

11.一种终端性能评估装置，其特征在于，包括：

信息接收单元，用于接收基站上报的所有终端的呼叫信息；

终端类型确定单元，用于根据所述呼叫信息确定终端类型；

终端性能评估单元，用于对所述确定类型的终端进行性能指标评估。

12.根据权利要求11所述的装置，其特征在于，所述终端类型确定单元，具体用于：对于呼叫信息显示进入呼叫通话状态的终端，根据该终端上报的厂商代号字段、终端型号字段、固件型号字段确定终端类型；

对于呼叫信息显示未进入到通话状态的终端，根据预设的国际移动用户识别码IMSI和终端类型的对应表确定该次呼叫的终端类型。

13.根据权利要求11所述的装置，其特征在于，所述终端性能评估单元22中，预先设置有呼叫成功率门限值T1、和/或掉话率门限值T2、和/或单通通话率门限值T3、和/或弱导频呼叫接入率门限值T4、和/或反向基本信道误帧率门限值T5，和/或前向基本信道误帧率的门限值T6：

所述终端性能评估单元22，具体用于：

计算各种终端类型的呼叫失败的次数和呼叫总次数的比值的百分数，统计呼叫成功率低于所述呼叫成功率门限值T1的所有终端类型；和/或，

计算进入通话态后掉话的次数和呼叫进入通话态次数的比值的百分数，统计掉话率高于掉话率门限值T2的所有终端类型；和/或，

计算各种终端类型的单通呼叫数量占进入通话态的呼叫数量的百分比数值，统计单通通话率高于单通通话率门限值T3的所有终端类型；和/或，

根据接入时参考小区导频强度值，计算接入时参考小区弱导频接入的呼叫次数占总呼叫次数的比例的百分数，统计弱导频接入率高于弱导频呼叫接入率门限值T4的所有终端类型；和/或，

在呼叫的持续过程中，根据周期采样当时的反向基本信道误帧率，统计反向基本信道误帧率落在各个区间的次数，在呼叫结束时上报；

对于每一路呼叫，根据反向基本信道误帧率的各个区间采样次数，计算反向基本信道误帧率超过反向基本信道误帧率门限值T5的采样次数占总采样次数的比例，统计所有超过反向基本信道误帧率门限值T5的终端类型；和/或，

根据终端上报的各次功率测量报告消息计算基本信道的前向基本信道误帧率，然后将其分区间进行计数值累加，在呼叫结束时上报；

对于每一路呼叫，根据前向基本信道误帧率误帧率在各个区间的次数，计算前向基本信道误帧率超过前向基本信道误帧率的门限值T6的计数值占总计数值的比例，统计所有超过前向基本信道误帧率的门限值T6的终端类型。

Images