CN102325311B - 一种开机提醒业务准确率的检测方法和系统 - Google Patents

Abstract

一种开机提醒业务准确率的检测方法和系统，所述方法包括：步骤一、对一段时间周期内开机提醒业务所收到的短信回执和来电提醒业务所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据开机提醒业务的实现方式和采集到的数据更新相应的开机提醒业务准确率检测参数，其中，所述开机提醒业务的实现方式包括有：来电提醒平台和开机提醒平台分设；来电提醒平台和开机提醒平台合设；以及来电提醒平台和开机提醒平台合设，并启用全省全呼转；步骤二、根据所述开机提醒业务准确率检测参数，计算所述时间周期内的开机提醒业务准确率。本发明属于网络通信技术领域，能利用开机提醒业务和来电提醒业务的交叉数据，对开机提醒业务准确率进行精确检测。

Description

一种开机提醒业务准确率的检测方法和系统

技术领域

本发明涉及一种开机提醒业务准确率的检测方法和系统，属于网络通信技术领域。

背景技术

来电助手业务是在一次失败的话音呼叫过程中(因被叫用户关机或不在服务区)，向业务用户提供及时提醒信息的服务，包含有来电提醒和开机提醒两种业务方式。其中，所述来电提醒业务是当被叫用户开机或重新进入服务区后，向被叫用户发送其关机期间所漏接的来电信息的短信；所述开机提醒业务是当被叫用户开机或重新进入服务区后，向主叫用户发送告知被叫方开机或重新回到服务区的短信。

目前，开机提醒业务和来电提醒业务有以下3种实现方式：

1、来电提醒平台和开机提醒平台分设

分别由来电提醒平台和开机提醒平台向用户提供来电提醒和开机提醒业务。其中，来电提醒平台接收被叫关机或不可及时的呼转消息，并提供来电提醒业务；开机提醒平台通过信令采集的方式获取被叫关机或不可及呼叫，并提供开机提醒业务。所述信令采集，即收集疑似关机呼叫，然后对被叫状态进行确认来触发开机提醒业务。由于通过信令采集的方式获取关机或不可及呼叫时，被叫忙、无应答、拒绝呼叫有可能被错误的当作关机或不可及，因此开机提醒业务存在有误判情况，并且准确率较来电提醒业务偏低。

2、来电提醒平台和开机提醒平台合设

为提高开机提醒业务准确率，开机提醒业务和来电提醒业务进行了融合和优化。来电提醒平台和开机提醒平台被合设成一个业务平台，当主、被叫均为业务用户的情况下，统一由被叫关机或不可及呼转信令消息触发，即在给申请了来电提醒业务的被叫用户下发来电提醒短信的同时，给申请了开机提醒业务的主叫用户下发开机提醒短信。而当被叫用户是省内非来电提醒业务用户和省外移动用户时，开机提醒业务仍采用信令采集的方式获取被叫用户关机或不可及呼叫。

3、来电提醒平台和开机提醒平台合设，并启用全省全呼转

为进一步加强开机提醒和来电提醒的业务融合，在来电提醒平台和开机提醒平台合设基础上，现网还可以启用“全省全呼转”的实施方案，即将全省移动用户都设置网络级呼转(CFD)到来电提醒和开机提醒的业务平台，但平台侧不提供其业务属性，对于非业务用户仍然按照非业务用户的业务流程处理。当被叫为省内移动用户(包括省内来电提醒业务用户和省内非来电提醒业务用户)时，开机提醒业务均由被叫关机或不可及呼转信令消息触发，只在被叫为省外移动用户时，开机提醒业务采用通过信令采集的方式触发。

随着开机提醒业务的广泛应用，如何对开机提醒这种实时业务的准确率进行检测？就成为影响运营商对开机提醒业务质量进行有效评估和把控的关键问题。目前，只能通过大量的拔测来获取对开机提醒业务准确率的检测结果，但由于某些特定的环境无法真实模拟，从而造成业务总体运行情况无法得到真实的反映。

因此，如何精确检测开机提醒业务的准确率？仍是一个急需要解决的技术难题。

发明内容

有鉴于此，本发明的目的是提供一种开机提醒业务准确率的检测方法和系统，能精确检测开机提醒业务的准确率。

为了达到上述目的，本发明提供了一种开机提醒业务准确率的检测方法，包括有：

步骤一、对一段时间周期内开机提醒业务所收到的短信回执和来电提醒业务所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据开机提醒业务的实现方式和采集到的数据更新相应的开机提醒业务准确率检测参数，其中，所述开机提醒业务的实现方式包括有：来电提醒平台和开机提醒平台分设；来电提醒平台和开机提醒平台合设；以及来电提醒平台和开机提醒平台合设，并启用全省全呼转；

步骤二、根据所述开机提醒业务准确率检测参数，计算所述时间周期内的开机提醒业务准确率，

当来电提醒平台和开机提醒平台分设时，所述检测参数包括有开机提醒业务的关机或不可及呼叫数KCallU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU，

当来电提醒平台和开机提醒平台合设时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU，

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU、被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU、被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU、被叫用户为省外移动用户的关机或不可及呼叫数OPCallU。

为了达到上述目的，本发明提供了一种开机提醒业务准确率的检测系统，包括有开机业务采集装置、不可及呼转采集装置、准确率检测装置和指标呈现GUI装置，其中：

开机业务采集装置，和准确率检测装置、开机提醒平台或开机提醒平台和来电提醒平台所合设的业务平台相连，用于对一段时间周期内开机提醒平台或开机提醒平台和来电提醒平台所合设的业务平台收到的短信回执以及与所述短信回执相关的短信记录和呼叫记录进行采集，并将所述采集数据发送给准确率检测装置；

不可及呼转采集装置，和准确率检测装置、来电提醒平台或开机提醒平台和来电提醒平台所合设的业务平台相连，用于对一段时间周期内来电提醒平台或开机提醒平台和来电提醒平台所合设的业务平台收到的关机或不可及呼转信令消息进行采集，并将所述采集数据发送给准确率检测装置；

准确率检测装置，和开机业务采集装置、不可及呼转采集装置、指标呈现GUI装置相连，用于接收开机业务采集装置、不可及呼转采集装置发送来的采集数据，更新相应的开机提醒业务准确率检测参数，其中信令采集触发方式的开机提醒业务对应的检测参数则使用省内随机号段抽样检测的方法、根据所述采集数据进行更新，最后根据所述更新后的检测参数计算所述时间周期内的开机提醒业务准确率，并将所述开机提醒业务准确率发送给指标呈现GUI装置显示；

指标呈现GUI装置，和准确率检测装置相连，用于将准确率检测装置发送来的开机提醒业务准确率向用户提供可交互的报表系统，

当来电提醒平台和开机提醒平台分设时，所述检测参数包括有开机提醒业务的关机或不可及呼叫数KCallU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU，

当来电提醒平台和开机提醒平台合设时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU，

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU、被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU、被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU、被叫用户为省外移动用户的关机或不可及呼叫数OPCallU。

与现有技术相比，本发明的有益效果是：本发明利用开机提醒业务的短信回执和来电提醒业务的关机或不可及呼转信令消息，对开机提醒业务准确率进行实时的量化检测，从而提高了业务的可监控性和可把控度，对于评估业务质量具有积极意义，填补了现有技术无法精确检测开机提醒业务准确率的空白；针对现网中存在的各种开机提醒业务的实现方式，利用来电提醒和开机提醒业务的交叉数据进行检测分析，并独立于开机提醒业务生产网络，从而不会增加生产系统的负担，结构简单、工作可靠，便于推广和普及应用；本发明所检测的开机提醒业务准确率对所涉及的各种话务模型进行了全面覆盖，并对基于信令采集所触发的开机提醒业务采取了省内随机号段抽样检测的方法，将抽样和全量的检测数据相结合、加复权处理，从而使业务准确率的检测值能与真实模型高度一致。

附图说明

图1是本发明一种开机提醒业务准确率的检测方法的流程图。

图2是当来电提醒平台和开机提醒平台分设时，图1的步骤(一)的具体操作流程图。

图3是图2的步骤A12中，当采集到开机提醒平台收到短信回执时的具体操作流程图。

图4是当来电提醒平台和开机提醒平台合设时，图1中的步骤(一)的具体操作流程图。

图5是图4的步骤B12中，当采集到平台收到短信回执时的具体操作流程图。

图6是当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，图1的步骤(一)的具体操作流程图。

图7是图6的步骤C12中，当采集到平台收到被叫用户关机或不可及呼转信令消息时的具体操作流程图。

图8是图6的步骤C12中，当采集到平台收到短信回执时的具体操作流程图。

图9是本发明一种开机提醒业务准确率的检测系统的组成结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面结合附图对本发明作进一步的详细描述。

如图1所示，本发明一种开机提醒业务准确率的检测方法如下：

步骤(一)、对一段时间周期内开机提醒业务所收到的短信回执和来电提醒业务所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据开机提醒业务的实现方式和采集到的数据更新相应的开机提醒业务准确率检测参数。

步骤(二)、根据所述开机提醒业务准确率检测参数，计算所述时间周期内的开机提醒业务准确率。

现网中的开机提醒业务实现方式有以下3种：

1、来电提醒平台和开机提醒平台分设

2、来电提醒平台和开机提醒平台合设

3、来电提醒平台和开机提醒平台合设，并启用全省全呼转

下面将分别对上述3种业务实现方式中，本发明开机提醒业务准确率的检测方法进行详细介绍：

1、来电提醒平台和开机提醒平台分设

在该业务实现方式中，开机提醒平台主要通过信令采集的方式来获取被叫关机或不可及呼叫，从而触发开机提醒业务。因此，开机提醒业务的被叫关机或不可及呼转数可利用来电提醒平台的关机或不可及呼转数进行省内随机号段抽样检测。

如图2所示，当来电提醒平台和开机提醒平台分设时，图1中的步骤(一)进一步包括有：

步骤A11、从省内来电提醒业务用户的号段中随机设置一个抽样号段(如1377738****)，并将开机提醒业务准确率的检测参数初始化为0，所述检测参数包括有开机提醒业务的关机或不可及呼叫数KCallU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU。

步骤A12、对一段时间周期内开机提醒平台所收到的短信回执、来电提醒平台所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。其中：

(1)、当采集到来电提醒平台收到被叫用户关机或不可及呼转信令消息(如：呼转原因是被叫用户关机或不可及的初始地址信令IAM)时，所述步骤A12进一步包括有：判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段？如果是，则将开机提醒业务的关机或不可及呼叫数KCallU更新为KCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间等信息记录到抽样号段不可及呼叫表中。

(2)、当采集到开机提醒平台收到短信回执时，如图3所示，所述步骤A12进一步包括有：

步骤A121、根据所述短信回执判断所述业务短信是否发送成功？如果是，则根据所述短信回执的消息对话号，从开机提醒平台的短信记录中查询对应的开机提醒短信，并从呼叫记录中查询所述开机提醒短信对应的呼叫次数n，继续步骤A122；如果否，则本流程结束。

如果在被叫用户关机或不可及期间，主叫用户多次呼叫被叫用户失败，则在被叫用户开机或重新进入服务区后，所述多次失败的呼叫记录将被智能合并成一条短信向主叫/被叫发送。本发明中的呼叫次数n，即在被叫用户关机或不可及期间，主叫用户对被叫用户的呼叫次数。

步骤A122、判断所述开机提醒短信对应的被叫号码是否属于抽样号段？如果是，则继续步骤A123；如果否，则本流程结束。

步骤A123、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内(如1分钟)是否存在有所述主、被叫号码对应的关机或不可及呼叫记录？如果是，则将该下发且成功下发的开机提醒短信数KMU更新为KMU+n，本流程结束；如果否，则将不该下发且成功下发的开机提醒短信数KMMU更新为KMMU+n，本流程结束。

当开机提醒短信被发送时，如果在一定的呼叫时间误差范围内，来电提醒平台未收到对应的关机或不可及呼转信令消息，则可以认为所述被叫用户处于可及状态，该情况属于开机提醒业务的误判。

当来电提醒平台和开机提醒平台分设时，图1中的步骤(二)进一步包括有：计算开机提醒业务准确率 $\mathrm{KJTX}-\mathrm{precision}:\mathrm{KJTX}-\mathrm{precision}=\frac{\mathrm{KMU}}{\mathrm{KCallU}}\×(1-\frac{\mathrm{KMMU}}{\mathrm{KMU}+\mathrm{KMMU}}),$ 其中

是开机提醒业务成功率，

是开机提醒业务误发率，KMU+KMMU是成功下发的开机提醒短信数。

2、来电提醒平台和开机提醒平台合设

在该业务实现方式中，当被叫用户是省内来电提醒业务用户时，开机提醒业务采取被叫关机或不可及呼转触发，而当被叫用户是省内非来电提醒业务用户和省外移动用户时，开机提醒业务采取信令采集的方式触发，因此，开机提醒业务准确率的检测涉及2种话务模型：被叫是省内来电提醒业务用户、被叫是省内非来电提醒业务用户和省外移动用户。其中，被叫是省内非来电提醒业务用户和省外移动用户的关机或不可及呼转数可利用来电提醒业务的关机或不可及呼转数进行省内随机号段抽样检测。

如图4所示，当来电提醒平台和开机提醒平台合设时，所述来电提醒平台和开机提醒平台合设的平台称为来电提醒和开机提醒业务平台，图1中的步骤(一)进一步包括有：

步骤B11、从省内来电提醒业务用户的号段中随机设置一个抽样号段，并将开机提醒业务准确率的检测参数初始化为0，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU。

步骤B12、对一段时间周期内来电提醒和开机提醒业务平台所收到的短信回执和被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。其中：

(1)、当采集到平台收到被叫用户关机或不可及呼转信令消息时，步骤B12进一步包含有：判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段？如果是，则将被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU更新为CCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间等信息记录到抽样号段不可及呼叫表中；如果否，则将被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU更新为LCallU+I。

(2)、当采集到平台收到短信回执时，如图5所示，步骤B12进一步包含有：

步骤B121、根据所述短信回执判断所述业务短信是否发送成功？如果是，则根据所述短信回执的消息对话号，从来电提醒和开机提醒业务平台的短信记录中查询对应的业务短信，继续步骤B122；如果否，则本流程结束。

步骤B122、判断所述业务短信是否是开机提醒短信？如果是，则从来电提醒和开机提醒业务平台的呼叫记录中查询所述开机提醒短信对应的呼叫次数n，继续步骤B123；如果否，则本流程结束。

步骤B123、判断所述被叫号码是否属于抽样号段？如果是，则继续步骤B124；如果否，则将被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU更新为IPLKMU+n，本流程结束。

步骤B124、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内(如1分钟)是否存在有所述主、被叫号码对应的关机或不可及呼叫记录？如果是，则将该下发且成功下发的开机提醒短信数KMU更新为KMU+n，本流程结束；如果否，则将不该下发且成功下发的开机提醒短信数KMMU更新为KMMU+n，本流程结束。

当来电提醒平台和开机提醒平台合设时，图1中的步骤(二)进一步包括有：计算开机提醒业务准确率KJTX-precision：KJTX-precision＝IPLK-precision×Y₁+NIPLK-precision×Y₂，其中，被叫用户为省内来电提醒业务用户的开机提醒业务准确率

被叫用户为省内非来电提醒业务用户和省外移动用户的开机提醒准确率 $\mathrm{NIPLK}-\mathrm{precision}=\frac{\mathrm{KMU}}{\mathrm{CCallU}}\×(1-\frac{\mathrm{KMMU}}{\mathrm{KMU}+\mathrm{KMMU}}),$

是开机提醒业务成功率，

是开机提醒业务误发率，KMU+KMMU是被叫用户为省内非来电提醒业务用户和省外移动用户的成功下发的开机提醒短信数。Y₁、Y₂分别是被叫用户为省内来电提醒业务用户、省内非来电提醒业务用户和省外移动用户各类呼叫的权重系数，其值可以是： $Y_1=$ $\frac{\mathrm{LCallU}}{\mathrm{LCallU}+\mathrm{CCallU}},$ $Y_2=\frac{\mathrm{CCallU}}{\mathrm{LCallU}+\mathrm{CCallU}}.$

3、来电提醒平台和开机提醒平台合设，并启用全省全呼转

在该业务实现方式中，当被叫用户是省内移动用户时，开机提醒业务采取被叫关机或不可及呼转触发，只有当被叫用户是省外移动用户时，开机提醒业务采用信令采集的方式来触发。因此，开机提醒业务准确率的检测涉及3种话务模型：被叫是省内来电提醒业务用户、被叫是省内非来电提醒业务用户、被叫是省外移动用户。

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，如图6所示，图1中的步骤(一)进一步包括有：

步骤C11、从省内号段中随机设置一个抽样号段，并将开机提醒业务准确率的检测参数初始化为0，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU、被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU、被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU、被叫用户为省外移动用户的关机或不可及呼叫数OPCallU。

步骤C12、对一段时间周期内来电提醒和开机提醒业务平台所收到的短信回执和被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。其中：

(1)、当采集到平台收到被叫用户关机或不可及呼转信令消息时，如图7所示，步骤C12进一步包含有：

步骤C1201、判断所述关机或不可及呼转信令消息对应的被叫用户是否是省内来电提醒业务用户？如果是，则将被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU更新为LCallU+1，本流程结束；如果否，则继续步骤C1202。

步骤C1202、判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段？如果是，则将被叫用户为省外移动用户的关机或不可及呼叫数OPCallU更新为OPCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间等信息记录到抽样号段不可及呼叫表中，本流程结束；如果否，则将被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU更新为IPNLCallU+1，本流程结束。

(2)、当采集到平台收到短信回执时，如图8所示，步骤C12进一步包含有：

步骤C1211、根据所述短信回执判断所述业务短信是否发送成功？如果是，则根据所述短信回执的消息对话号，从来电提醒和开机提醒业务平台的短信记录中查询对应的业务短信，继续步骤C1212；如果否，则本流程结束。

步骤C1212、判断所述业务短信是否是开机提醒短信？如果是，则从来电提醒和开机提醒业务平台的呼叫记录中查询所述开机提醒短信对应的呼叫次数n，继续步骤C1213；如果否，则本流程结束。

步骤C1213、判断所述开机提醒短信对应的被叫用户是否是省内来电提醒业务用户？如果是，则将被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU更新为IPLKMU+n，本流程结束；如果否，则继续步骤C1214。

步骤C1214、判断所述开机提醒短信对应的被叫号码是否属于抽样号段？如果是，则继续步骤C1215；如果否，则将被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU更新为IPNLKMU+n，本流程结束。

步骤C1215、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内(如1分钟)是否存在有所述主、被叫号码对应的关机或不可及呼叫记录？如果是，则将被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU更新为OPKMU+n，本流程结束；如果否，则将被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU更新为OPKMMU+n，本流程结束。

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，图1中的步骤(二)进一步包括有：计算开机提醒业务准确率KJTX-precision：KJTX-precision＝OPK-precision×Y₁+IPLK-precision×Y2+IPNLK-precision×Y₃，其中，被叫用户为省外移动用户的开机提醒业务准确率 $\mathrm{OPK}-\mathrm{precision}=\frac{\mathrm{OPKMU}}{\mathrm{OPCallU}}\×(1-\frac{\mathrm{OPKMMU}}{\mathrm{OPKMU}+\mathrm{OPKMMU}}),$

是被叫用户为省外移动用户的开机提醒业务成功率，

是被叫用户为省外移动用户的开机提醒业务误发率，OPKMU+OPKMMU是被叫用户为省外移动用户的成功下发的开机提醒短信数；被叫用户为省内来电提醒业务用户的开机提醒业务准确率

被叫用户为省内非来电提醒业务的开机提醒业务准确率

Y₁、Y₂、Y₃则是被叫用户为省外移动用户、省内来电提醒业务用户、省内非来电提醒业务用户时各类呼叫的权重系数，其值可以是： $Y_1=\frac{\mathrm{OPCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}},$ $Y_2=\frac{\mathrm{IPLCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}},$ $Y_3=\frac{\mathrm{IPNLCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}}.$ 例如：Y₁＝19％，Y₂＝52％，Y₃＝39％。

如图9所示，本发明一种开机提醒业务准确率的检测系统包括有开机业务采集装置、不可及呼转采集装置、准确率检测装置和指标呈现GUI装置。其中：

开机业务采集装置，和开机提醒平台(或开机提醒平台和来电提醒平台所合设的业务平台)、准确率检测装置相连，用于对一段时间周期内开机提醒平台(或开机提醒平台和来电提醒平台所合设的业务平台)收到的短信回执以及与所述短信回执相关的短信记录和呼叫记录进行采集，并将所述采集数据发送给准确率检测装置；

不可及呼转采集装置，和来电提醒平台(或开机提醒平台和来电提醒平台所合设的业务平台)、准确率检测装置相连，用于对一段时间周期内来电提醒平台(或开机提醒平台和来电提醒平台所合设的业务平台)收到的关机或不可及呼转信令消息进行采集，并将所述采集数据发送给准确率检测装置；

准确率检测装置，和开机业务采集装置、不可及呼转采集装置、指标呈现GUI装置相连，用于接收开机业务采集装置、不可及呼转采集装置发送来的采集数据，更新相应的开机提醒业务准确率检测参数，其中信令采集触发方式的开机提醒业务对应的检测参数则使用省内随机号段抽样检测的方法、根据所述采集数据进行更新，最后根据所述更新后的检测参数计算所述时间周期内的开机提醒业务准确率，并将所述开机提醒业务准确率发送给指标呈现GUI装置显示；

指标呈现GUI装置，和准确率检测装置相连，用于将准确率检测装置发送来的开机提醒业务准确率向用户提供可交互的报表系统。本发明还可以进一步根据所述短信回执和被叫用户关机或不可及呼转信令消息所对应被叫号码的区号m，对开机提醒业务准确率分区计算，最后通过指标呈现GUI装置将不同时间、不同地区的开机提醒业务准确率呈现给用户。用户还可以对开机提醒业务实现方式所涉及话务模型的权重系数进行调整，从而适应实时的话务模型变化。

上述各部件之间的交互还可以采取如下方式：

1、开机业务采集装置从开机提醒平台(或开机提醒平台和来电提醒平台合设的业务平台)的日志服务器中采集相关数据，并将所述采集数据通过FTP协议上传至准确率检测装置；同样，不可及呼转采集装置从来电提醒平台(或开机提醒平台和来电提醒平台合设的业务平台)的日志服务器中采集相关数据，并将所述采集数据通过FTP协议上传至准确率检测装置；

2、开机业务采集装置通过实时接口采集开机提醒平台(或开机提醒平台和来电提醒平台合设的业务平台)所收到的ISUP/BICC信令，并将所述采集数据通过FTP协议上传至准确率检测装置；同样，不可及呼转采集装置通过实时接口采集来电提醒平台(或开机提醒平台和来电提醒平台合设的业务平台)所收到的ISUP/BICC信令，并将所述采集数据通过FTP协议上传至准确率检测装置。

Claims (12)

1.一种开机提醒业务准确率的检测方法，其特征在于，包括有：

步骤一、对一段时间周期内开机提醒业务所收到的短信回执和来电提醒业务所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据开机提醒业务的实现方式和采集到的数据更新相应的开机提醒业务准确率检测参数，其中，所述开机提醒业务的实现方式包括有：来电提醒平台和开机提醒平台分设；来电提醒平台和开机提醒平台合设；以及来电提醒平台和开机提醒平台合设，并启用全省全呼转；

步骤二、根据所述开机提醒业务准确率检测参数，计算所述时间周期内的开机提醒业务准确率，

当来电提醒平台和开机提醒平台分设时，所述检测参数包括有开机提醒业务的关机或不可及呼叫数KCallU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU，

当来电提醒平台和开机提醒平台合设时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU，

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU、被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU、被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU、被叫用户为省外移动用户的关机或不可及呼叫数OPCallU。

2.如权利要求1所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒平台和开机提醒平台分设时，所述步骤一进一步包括有：

步骤A11、从省内来电提醒业务用户的号段中随机设置一个抽样号段，并将开机提醒业务准确率的检测参数初始化为0；

步骤A12、对一段时间周期内开机提醒平台所收到的短信回执、来电提醒平台所收到的被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。

3.如权利要求2所述的开机提醒业务准确率的检测方法，其特征在于，

(1)、当采集到来电提醒平台收到被叫用户关机或不可及呼转信令消息时，所述步骤A12进一步包括有：

判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段，如果是，则将开机提醒业务的关机或不可及呼叫数KCallU更新为KCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间记录到抽样号段不可及呼叫表中；

(2)、当采集到开机提醒平台收到短信回执时，所述步骤A12进一步包括有：

步骤A121、根据所述短信回执判断所述业务短信是否发送成功，如果是，则根据所述短信回执的消息对话号，从开机提醒平台的短信记录中查询对应的开机提醒短信，并从呼叫记录中查询所述开机提醒短信对应的呼叫次数n，所述呼叫次数n即在被叫用户关机或不可及期间，主叫用户对被叫用户的呼叫次数，继续步骤A122；如果否，则本流程结束；

步骤A122、判断所述开机提醒短信对应的被叫号码是否属于抽样号段，如果是，则继续步骤A123；如果否，则本流程结束；

步骤A123、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内是否存在有所述主、被叫号码对应的关机或不可及呼叫记录，如果是，则将该下发且成功下发的开机提醒短信数KMU更新为KMU+n，本流程结束；如果否，则将不该下发且成功下发的开机提醒短信数KMMU更新为KMMU+n，本流程结束。

4.如权利要求2所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒台和开机提醒平台分设时，所述步骤二进一步包括有：

计算开机提醒业务准确率KJTX-precision：

其中

是开机提醒业务成功率，

是开机提醒业务误发率，KMU+KMMU是成功下发的开机提醒短信数。

5.如权利要求1所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒平台和开机提醒平台合设时，所述来电提醒平台和开机提醒平台合设的平台称为来电提醒和开机提醒业务平台，所述步骤一进一步包括有：

步骤B11、从省内来电提醒业务用户的号段中随机设置一个抽样号段，开将开机提醒业务准确率的检测参数初始化为0；

步骤B12、对一段时间周期内来电提醒和开机提醒业务平台所收到的短信回执和被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。

6.如权利要求5所述的开机提醒业务准确率的检测方法，其特征在于，

(1)、当采集到平台收到被叫用户关机或不可及呼转信令消息时，步骤B12进一步包含有：

判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段，如果是，则将被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU更新为CCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间记录到抽样号段不可及呼叫表中；如果否，则将被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCa11U更新为LCa11U+1；

(2)、当采集到平台收到短信回执时，步骤B12进一步包含有：

步骤B121、根据所述短信回执判断所述业务短信是否发送成功，如果是，则根据所述短信回执的消息对话号，从来电提醒和开机提醒业务平台的短信记录中查询对应的业务短信，继续步骤B122；如果否，则本流程结束；

步骤B122、判断所述业务短信是否是开机提醒短信，如果是，则从来电提醒和开机提醒业务平台的呼叫记录中查询所述开机提醒短信对应的呼叫次数n，所述呼叫次数n即在被叫用户关机或不可及期间，主叫用户对被叫用户的呼叫次数，继续步骤B123；如果否，则本流程结束；

步骤B123、判断所述被叫号码是否属于抽样号段，如果是，则继续步骤B124；如果否，则将被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU更新为IPLKMU+n，本流程结束；

步骤B124、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内是否存在有所述主、被叫号码对应的关机或不可及呼叫记录，如果是，则将该下发且成功下发的开机提醒短信数KMU更新为KMU+n，本流程结束；如果否，则将不该下发且成功下发的开机提醒短信数KMMU更新为KMMU+n，本流程结束。

7.如权利要求5所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒平台和开机提醒平台合设时，步骤二进一步包括有：

计算开机提醒业务准确率KJTX-precision：KJTX-precision＝IPLK-precision×Y₁+NIPLK-precision×Y₂，其中，被叫用户为省内来电提醒业务用户的开机提醒业务准确率

被叫用户为省内非来电提醒业务用户和省外移动用户的开机提醒准确率 $\mathrm{NIPLK}-\mathrm{precision}=\frac{\mathrm{KMU}}{\mathrm{CCallU}}\×(1-\frac{\mathrm{KMMU}}{\mathrm{KMU}+\mathrm{KMMU}}),$

是开机提醒业务成功率，

是开机提醒业务误发率，KMU+KMMU是被叫用户为省内非来电提醒业务用户和省外移动用户的成功下发的开机提醒短信数，Y₁、Y₂分别是被叫用户为省内来电提醒业务用户、省内非来电提醒业务用户和省外移动用户各类呼叫的权重系数，其值可以是： $Y_1=\frac{\mathrm{LCallU}}{\mathrm{LCallU}+\mathrm{CCallU}},$ $Y_2=\frac{\mathrm{CCallU}}{\mathrm{LCallU}+\mathrm{CCallU}}.$

8.如权利要求1所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，所述来电提醒平台和开机提醒平台合设的平台称为来电提醒和开机提醒业务平台，步骤一进一步包括有：

步骤C11、从省内号段中随机设置一个抽样号段，并将开机提醒业务准确率的检测参数初始化为0；

步骤C12、对一段时间周期内来电提醒和开机提醒业务平台所收到的短信回执和被叫用户关机或不可及呼转信令消息进行采集，并根据所述采集数据更新相应的开机提醒业务准确率检测参数。

9.如权利要求8所述的开机提醒业务准确率的检测方法，其特征在于，

(1)、当采集到平台收到被叫用户关机或不可及呼转信令消息时，步骤C12进一步包含有：

步骤C1201、判断所述关机或不可及呼转信令消息对应的被叫用户是否是省内来电提醒业务用户，如果是，则将被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU更新为LCallU+i，本流程结束；如果否，则继续步骤C1202；

步骤C1202、判断所述关机或不可及呼转信令消息对应的被叫号码是否属于抽样号段，如果是，则将被叫用户为省外移动用户的关机或不可及呼叫数OPCallU更新为OPCallU+1，并将所述关机或不可及呼转信令消息所对应的主叫号码、被叫号码、呼叫时间记录到抽样号段不可及呼叫表中，本流程结束；如果否，则将被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU更新为IPNLCallU+1，本流程结束；

(2)、当采集到平台收到短信回执时，步骤C12进一步包含有：

步骤C1211、根据所述短信回执判断所述业务短信是否发送成功，如果是，则根据所述短信回执的消息对话号，从来电提醒和开机提醒业务平台的短信记录中查询对应的业务短信，继续步骤C1212；如果否，则本流程结束；

步骤C1212、判断所述业务短信是否是开机提醒短信，如果是，则从来电提醒和开机提醒业务平台的呼叫记录中查询所述开机提醒短信对应的呼叫次数n，所述呼叫次数n即在被叫用户关机或不可及期间，主叫用户对被叫用户的呼叫次数，继续步骤C1213；如果否，则本流程结束；

步骤C1213、判断所述开机提醒短信对应的被叫用户是否是省内来电提醒业务用户，如果是，则将被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU更新为IPLKMU+n，本流程结束；如果否，则继续步骤C1214；

步骤C1214、判断所述开机提醒短信对应的被叫号码是否属于抽样号段，如果是，则继续步骤C1215；如果否，则将被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU更新为IPNLKMU+n，本流程结束；

步骤C1215、判断抽样号段不可及呼叫表中，在一定的呼叫时间误差范围内是否存在有所述主、被叫号码对应的关机或不可及呼叫记录，如果是，则将被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU更新为OPKMU+n，本流程结束；如果否，则将被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU更新为OPKMMU+n，本流程结束。

10.如权利要求8所述的开机提醒业务准确率的检测方法，其特征在于，当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，步骤二进一步包括有：

计算开机提醒业务准确率KJTX-precision：KJTX-precision＝OPK-precision×Y₁+IPLK-precision×Y₂+IPNLK-precision×Y₃，其中，被叫用户为省外移动用户的开机提醒业务准确率 $\mathrm{OPK}-\mathrm{precision}=\frac{\mathrm{OPKMU}}{\mathrm{OPCallU}}\×(1-\frac{\mathrm{OPKMMU}}{\mathrm{OPKMU}+\mathrm{OPKMMU}}),$

是被叫用户为省外移动用户的开机提醒业务成功率，

是被叫用户为省外移动用户的开机提醒业务误发率，OPKMU+OPKMMU是被叫用户为省外移动用户的成功下发的开机提醒短信数；被叫用户为省内来电提醒业务用户的开机提醒业务准确率

被叫用户为省内非来电提醒业务的开机提醒业务准确率Y₁、Y₂、Y₃则是被叫用户为省外移动用户、省内来电提醒业务用户、省内非来电提醒业务用户时各类呼叫的权重系数，其值可以是：

$Y_1=\frac{\mathrm{OPCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}},$ $Y_2=\frac{\mathrm{IPLCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}},$

$Y_3=\frac{\mathrm{IPNLCallU}}{\mathrm{OPCallU}+\mathrm{LCallU}+\mathrm{IPNLCallU}}.$

11.一种开机提醒业务准确率的检测系统，其特征在于，包括有开机业务采集装置、不可及呼转采集装置、准确率检测装置和指标呈现GUI装置，其中：

开机业务采集装置，和准确率检测装置、开机提醒平台或开机提醒平台和来电提醒平台所合设的业务平台相连，用于对一段时间周期内开机提醒平台或开机提醒平台和来电提醒平台所合设的业务平台收到的短信回执以及与所述短信回执相关的短信记录和呼叫记录进行采集，并将所述采集数据发送给准确率检测装置；

不可及呼转采集装置，和准确率检测装置、来电提醒平台或开机提醒平台和来电提醒平台所合设的业务平台相连，用于对一段时间周期内来电提醒平台或开机提醒平台和来电提醒平台所合设的业务平台收到的关机或不可及呼转信令消息进行采集，并将所述采集数据发送给准确率检测装置；

准确率检测装置，和开机业务采集装置、不可及呼转采集装置、指标呈现GUI装置相连，用于接收开机业务采集装置、不可及呼转采集装置发送来的采集数据，更新相应的开机提醒业务准确率检测参数，其中信令采集触发方式的开机提醒业务对应的检测参数则使用省内随机号段抽样检测的方法、根据所述采集数据进行更新，最后根据所述更新后的检测参数计算所述时间周期内的开机提醒业务准确率，并将所述开机提醒业务准确率发送给指标呈现GUI装置显示；

指标呈现GUI装置，和准确率检测装置相连，用于将准确率检测装置发送来的开机提醒业务准确率向用户提供可交互的报表系统，

当来电提醒平台和开机提醒平台分设时，所述检测参数包括有开机提醒业务的关机或不可及呼叫数KCallU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU，

当来电提醒平台和开机提醒平台合设时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、该下发且成功下发的开机提醒短信数KMU、不该下发且成功下发的开机提醒短信数KMMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户和省外移动用户的关机或不可及呼叫数CCallU，

当来电提醒平台和开机提醒平台合设，并启用全省全呼转时，所述检测参数包括有被叫用户为省内来电提醒业务用户的成功下发的开机提醒短信数IPLKMU、被叫用户为省内非来电提醒业务用户的成功下发的开机提醒短信数IPNLKMU、被叫用户为省外移动用户的不应下发且成功下发的开机提醒短信数OPKMMU、被叫用户为省外移动用户的应下发且成功下发的开机提醒短信数OPKMU、被叫用户为省内来电提醒业务用户的关机或不可及呼叫数LCallU、被叫用户为省内非来电提醒业务用户的关机或不可及呼叫数IPNLCallU、被叫用户为省外移动用户的关机或不可及呼叫数OPCallU。

12.如权利要求11所述的开机提醒业务准确率的检测系统，其特征在于，系统中各组成部件之间的交互方式可以是以下方式的任意一种：

(1)、开机业务采集装置从开机提醒平台或开机提醒平台和来电提醒平台合设的业务平台的日志服务器中采集相关数据，并将所述采集数据通过FTP协议上传至准确率检测装置；同样，不可及呼转采集装置从来电提醒平台或开机提醒平台和来电提醒平台合设的业务平台的日志服务器中采集相关数据，并将所述采集数据通过FTP协议上传至准确率检测装置；

(2)、开机业务采集装置通过实时接口采集开机提醒平台或开机提醒平台和来电提醒平台合设的业务平台所收到的ISUP/BICC信令，并将所述采集数据通过FTP协议上传至准确率检测装置；同样，不可及呼转采集装置通过实时接口采集来电提醒平台或开机提醒平台和来电提醒平台合设的业务平台所收到的ISUP/BICC信令，并将所述采集数据通过FTP协议上传至准确率检测装置。

Images